CN103713839A

CN103713839A - 图像显示控制设备、图像显示设备以及图像显示控制方法

Info

Publication number: CN103713839A
Application number: CN201310168346.8A
Authority: CN
Inventors: 青岛雄三; 冈部雄生; 久本千夏; 一之渡靖; 高木友史; 三岛悠
Original assignee: Fuji Xerox Co Ltd
Current assignee: Fujifilm Business Innovation Corp
Priority date: 2012-09-28
Filing date: 2013-05-09
Publication date: 2014-04-09
Also published as: US20140096052A1; US20150324082A1; US10222968B2; JP2014071765A; JP5844707B2

Abstract

本发明提供了图像显示控制设备、图像显示设备和图像显示控制方法。图像显示控制设备包括显示控制器、判定单元及执行单元。当通过触摸板指定了显示在显示器上的图像时，显示控制器进行控制以对分别表示了多个预定菜单项之一的各菜单屏幕进行与各自菜单项相关联的显示，使得在与所显示图像相邻的周边区域的局部中提供有空闲区。当指定了图像同时显示有菜单屏幕之后所跟随的操作是将指定位置移动至一个菜单屏幕上时，判定单元判定出是指定了由指定位置所移动到的那个菜单屏幕所表示的菜单项，并且当将指定位置移动至空闲区时，判定单元判定出是指定了根据指定位置的运动而对指定图像的拖动操作。执行单元执行与判定单元的判定结果相对应的处理。

Description

图像显示控制设备、图像显示设备以及图像显示控制方法

技术领域

本发明涉及图像显示控制设备、图像显示设备、以及图像显示控制方法。更具体地说，本发明涉及：图像显示控制设备，其接收在所显示的图像上进行操作的指令；图像显示设备，其包括所述图像显示控制设备；以及图像显示控制方法，该方法用于接收在所显示的图像上进行操作的指令。

背景技术

最近，随着移动电话终端设备的进步，已经对具有比现有的功能电话终端设备更大的显示器的多功能移动电话终端设备（被称为智能手机）进行了开发。为了保持智能手机外壳的小尺寸，具有尽可能大的显示器的大多数智能手机不具有在现有的功能电话终端设备中使用的硬件键盘。这样的智能手机包括：硬件操作单元，其具有较少的操作按钮，例如，开/关按钮；以及显示器，其也用作触摸板，使得显示器被用作操作工具。

然而，在上述结构中，当输入操作指令时，很难实现通过具有诸如鼠标之类的定点装置的设备来进行两步操作，即，移动光标并点击。因此，可能需要进行判定响应于显示器上的操作已在智能手机上进行了什么操作的处理。智能手机及任何具有显示图像的显示器的装置均可能需要该处理。

为了解决该问题，国际公布WO2009/044770公开了一种终端设备，该设备利用简单的触摸操作来实现期望的操作（链接选择操作），同时消除了触摸操作中的冲突。该终端设备包括用于检测触摸位置的坐标的触摸板，以及具有显示区域的显示单元，该显示区域的至少一部分被触摸板的触摸区域覆盖。此外，终端设备根据具有链接的文档数据来生成将在显示单元上显示的显示信息，将包括触摸位置的一定范围设置为链接有效区域，以及仅在链接有效区域内允许对链接进行选择。此外，终端设备使当在链接有效区域内进行触摸时所触摸的链接的链接目标出现，并且当在与触摸板接触的过程中触摸从链接有效区域的内部移动至其外部时，执行除了选择链接之外的某处理。

在现有的图像显示设备中，为了在所显示的图像上执行各种处理，用户通常进行对表示各种处理的菜单项进行显示的操作，然后在各菜单项中选择一个菜单项。此外，在现有的图像显示设备中，拖动所显示的图像的操作也是通过用户来进行的。

因此，需要一种技术，当选择了所显示的图像时，该技术能够利用简单的操作来判定是要在图像显示设备上进行拖动操作还是要进行选择菜单项的操作。

在国际公布WO2009/044770内公开的技术中，当触摸从链接有效区域的内部移动至外部时，执行除了选择链接（其对应于菜单项的选择）以外的操作。为此，为了判定要进行的是拖动操作，则需要继续移动操作，直至触摸位置移动至触摸板上的链接有效区域之外为止。移动操作需要的体力和时间取决于链接有效区域的形状，并且很难利用简单的操作来判定要进行的是拖动操作还是选择菜单项的操作。

发明内容

因此，本发明的一个目的是提供一种图像显示控制设备、一种图像显示设备以及一种图像显示控制方法，其均能判定要进行的是拖动操作还是选择菜单项的操作。

根据本发明的一个方面，提供了一种图像显示控制设备，其包括显示控制器、判定单元、以及执行单元。当通过触摸板指定了显示在具有用来显示图像的显示区域和布置在所述显示区域的表面上的所述触摸板的显示器上的图像时，显示控制器进行控制以对分别表示了多个预定菜单项中的一项的各菜单屏幕进行与各自菜单项相关联的显示，使得在与显示在所述显示区域内的图像相邻的周边区域的局部中提供有空闲区。当通过所述触摸板指定了图像同时在所述显示区域内显示有所述菜单屏幕之后所跟随的操作是将指定位置移动至所述菜单屏幕之一上时，所述判定单元判定出是指定了由所述指定位置移动到的那个菜单屏幕所表示的菜单项，并且当将所述指定位置移动至所述空闲区时，所述判定单元判定出是指定了根据所述指定位置的运动而对所指定图像的拖动操作。执行单元执行与所述判定单元的判定结果相对应的处理。

在所述图像显示控制设备内，可以利用简单的操作来判定要进行的是拖动操作还是选择菜单项的操作。

在所述图像显示控制设备内，所述显示控制器可以进行控制，以在完成了所述判定单元的判定后，停止显示菜单屏幕。这可以防止由于菜单屏幕的显示而遮挡了所显示的内容。

在所述图像显示控制设备内，所述显示控制器可以进行控制以在所述显示区域内显示由各图像组成的矩阵，并且当通过所述触摸板指定了显示在所述显示区域内的各图像中的一张图像时，所述显示控制器进行控制，以使得所述空闲区被创建在与所指定图像相邻的周边区域内沿着行方向和列方向中的至少一个方向相邻的图像之间的部分区域内的方式来显示所述菜单屏幕。这可以使得拖动操作被平稳地启动。

在所述图像显示控制设备内，当通过所述触摸板指定了显示在所述显示区域内的各图像中的一张图像时，所述显示控制器可以进行控制，以使得所述空闲区被创建在与所指定图像的至少一侧相邻的部分周边区域内的方式来显示所述菜单屏幕，从而使得所述菜单屏幕显示在与所指定图像的另一侧相邻的部分周边区域内。这可以使得拖动操作被平稳地启动。

在所述图像显示控制设备内，在完成所述判定单元的判定之前，响应于通过所述触摸板进行的对指定的取消，所述显示控制器进行控制以停止显示所述菜单屏幕。这可以根据用户操作来停止显示菜单屏幕。

在所述图像显示控制设备内，当通过所述触摸板指定了显示在所述显示区域内的图像时，所述显示控制器可以进行控制，以使得所述空闲区被创建在与所指定图像相邻的部分周边区域内的方式来将具有所述多个预定菜单项的菜单屏幕显示在显示区域中，其中所述多个预定菜单项被显示为气球。由此，可以利用简单的操作来判定要进行的是拖动操作还是选择菜单项的操作。

在所述图像显示控制设备内，当通过触摸板指定了图像同时在所述显示区域内显示有所述菜单屏幕之后所跟随的操作是将指定位置移动至所述显示区域上时，所述显示控制器可以进行控制以显示所指定图像，同时根据所述指定位置的运动来移动所指定图像至显示位置；当所述判定单元判定出是指定了所述菜单项中的一项时，所述显示控制器可以进行控制以将所指定图像移动至原始位置并在所述原始位置处显示所指定图像；以及当所述判定单元判定出是指定了拖动操作时，所述显示控制器可以进行控制以在所述空闲区内的指定位置处停止所指定图像并在所述指定位置处显示所指定图像。由此，可以利用简单的操作来判定要进行的是拖动操作还是选择菜单项的操作。

在所述图像显示控制设备内，当通过所述触摸板指定了显示在所述显示区域内的图像时，所述显示控制器可以进行控制，以使得所述空闲区被创建在与所指定图像相邻的部分周边区域内的方式来在所述显示区域内显示以指定位置或所指定图像的中心为弧心的弧形菜单屏幕。由此，可以利用简单的操作来判定要进行的是拖动操作还是选择菜单项的操作。

根据本发明的另一方面，提供了一种图像显示设备，其包括上述图像显示控制设备以及显示图像的显示器。所述显示器包括触摸板，通过该触摸板来输入用于选择所显示图像的信息。

所述图像显示设备可以按照与上述图像显示控制设备相似的方式进行操作。因此，与上述图像显示控制设备类似，可以利用简单的操作来判断要进行的是拖动操作还是选择菜单项的操作。

根据本发明的另一方面，提供了一种图像显示控制方法，该方法包括：当通过触摸板指定了显示在具有显示了预定图像的显示区域和布置在所述显示区域的表面上的所述触摸板的显示器上的图像时，进行控制以对分别表示了多个菜单项中的一项的各菜单屏幕进行显示，其中多个菜单项中包括指示了拖动操作的移动方向的项，使得在与显示在所述显示器的显示区域内的图像相邻的周边区域的局部中提供有空闲区；当通过所述触摸板指定了图像同时利用所述显示器显示所述菜单屏幕之后所跟随的操作是将指定位置移动至所述菜单屏幕之一上时，判定出是指定了由所述指定位置所移动到的那个菜单屏幕所表示的菜单项，并且当将所述指定位置移动至所述空闲区时，判定出是指定了根据所述指定位置的运动而对所指定图像的拖动操作；以及执行与判定结果相对应的处理。

所述图像显示控制方法可以按照类似于上述图像显示控制设备的方式进行操作。因此，与上述图像显示控制设备类似，可以利用简单的操作来判定要进行的是拖动操作还是选择菜单项的操作。

附图说明

将根据以下附图具体地描述本发明的示例性实施例，其中：

图1是示出了根据一个示例性实施例的智能手机的外观的透视图；

图2是示出了根据所述示例性实施例的智能手机的结构的框图；

图3是示出了根据所述示例性实施例的显示控制处理程序的处理过程的流程图；

图4A和图4B示出了通过执行根据所述示例性实施例的显示控制处理程序而显示的屏幕的示例结构；

图5A和图5B示出了通过执行根据所述示例性实施例的显示控制处理程序而显示的屏幕的示例结构；

图6A和图6B示出了通过执行根据所述示例性实施例的显示控制处理程序而显示的屏幕的示例结构；

图7A至图7G示出了与根据所述示例性实施例的拖动操作相对应的过程；

图8A和图8B示出了通过执行根据所述示例性实施例的显示控制处理程序而显示的屏幕的另一示例结构；

图9A和图9B示出了通过执行根据所述示例性实施例的显示控制处理程序而显示的屏幕的另一示例结构；

图10示出了根据所述示例性实施例的菜单屏幕的一个示例；

图11示出了通过执行根据所述实施例的显示控制处理程序而显示的屏幕的另一示例结构；

图12A和图12B示出了通过执行根据所述示例性实施例的显示控制处理程序而显示的屏幕的另一示例结构；以及

图13A和图13B示出了通过执行根据所述示例性实施例的显示控制处理程序而显示的屏幕的另一示例结构。

具体实施方式

在下文中将参照附图对本发明的示例性实施例进行详细地描述。在以下的示例性实施例中，将以非限制性示例的方式描述智能手机。要理解的是，以下示例性实施例也可以应用于任何具有显示屏的其他装置（如移动电话、个人数字助理（PDA）、或便携式游戏机）。

图1是示出了根据本示例性实施例的智能手机10的外观的透视图。图1所示的智能手机10具有平板式外壳12，并且在外壳12的表面上包括显示输入单元14，显示输入单元14具有用作显示器的显示面板14A和用作输入单元的操作面板14B。显示面板14A和操作面板14B形成单个单元。外壳12包括扬声器16、麦克风18、操作单元20、和相机单元22。外壳12的结构并不限于上述结构，并且，例如，也可以使用折叠外壳或滑动外壳。

图2是示出了根据本示例性实施例的智能手机10的结构的框图。如图2所示，智能手机10包括无线通信单元24、显示输入单元14、通话处理单元26、操作单元20、相机单元22、存储器28、以及外部输入/输出单元30。智能手机10还包括全球定位系统（GPS）接收单元32、运动传感器单元34、供电单元36、以及控制器38。此外，智能手机还具有用于通过基站装置和移动通信网络来进行移动无线通信的无线通信功能。

无线通信单元24被构造为根据控制器38的指令来与包括在移动通信网络中的基站装置进行无线通信。无线通信单元24通过使用无线通信来发送和接收诸如语音数据和图像数据、电子邮件数据等的各种文件数据，并接收网络数据、流数据等等。

显示输入单元14可以是触摸板显示器，该触摸板显示器显示图像（静止图像和运动图像）、文本信息等，以从视觉上将信息呈现给用户，并且在控制器38的控制作用下，检测用户在所显示的信息上的操作。显示输入单元14包括显示面板14A和操作面板14B。

显示面板14A可以采用液晶显示器（LCD）、有机电致发光显示器（OELD）等作为显示设备。操作面板14B是如下的一种装置：其被布置为允许用户在视觉上识别显示在显示面板14A的显示表面上的图像；并且其被构造为检测用户的指尖或触摸笔所做出的一个或多个操作的坐标。当使用用户的指尖或触摸笔来操作该装置时，将根据所述操作而生成的检测信号输出给控制器38。然后控制器38根据收到的检测信号来检测所述操作在显示面板14A上的位置（坐标）。

显示区域的大小可以与或可以不与显示面板14A的大小完全一致。操作面板14B所采用的位置检测方法的示例可以包括矩阵开关法（matrix switch method）、电阻法、表面声波法、红外线法、电磁感应法、以及静电电容法，并且可以使用它们中的任何方法。

通话处理单元26包括扬声器16和麦克风18，并且被构造为将通过麦克风18输入的用户语音转换为可被控制器38处理的语音数据，并将该语音数据输出给控制器38，或者对通过无线通信单元24或外部输入/输出单元30接收到的语音数据进行解码，并从扬声器16输出已解码的语音数据。例如，可以按图1所示的方式将扬声器16布置在与布置有显示输入单元14的表面相同的表面上，并且可以将麦克风18布置在外壳12的侧表面上。

操作单元20被构造为接收用户给出的指令。例如，如图1所示，操作单元20可以是布置在智能手机10的外壳12的侧表面上的按钮开关，并且当用手指等按住该按钮开关时，该按钮开关被接通，而当释放该按钮开关时，由于弹簧等的恢复力，该按钮开关被断开。

存储器28被构造为存储：控制器38的控制程序和控制数据；应用程序软件；相互关联的通信伙伴的包括姓名、电话号码等的地址数据；发送和接收到的电子邮件的数据；网页浏览所下载的网络数据；以及所下载的内容数据，并且存储器28还临时存储流数据等。存储器28包括智能手机10的内置内部存储器28A和具有外部存储器插槽的可拆卸的外部存储器28B。存储器28的内部存储器28A和外部存储器28B均可以使用任何类型的合适的存储介质来实现，所述存储介质的类型包括：闪存类型、硬盘类型、微型多媒体卡类型、存储卡型（例如，MicroSD（注册商标）存储器）、随机存取存储器（RAM）、和只读存储器（ROM）。

外部输入/输出单元30用作与所有连接至智能手机10的外部装置的接口，并且用来通过通信（例如，通用串行总线（USB）或电气和电子工程师学会（IEEE）1394通信）或网络（例如，因特网、无线局域网（LAN）、蓝牙（注册商标）、射频识别（RFID）、红外线数据协会（IrDA）（注册商标）、超宽带（UWB）（注册商标）、或者ZigBee（注册商标））与其他外部装置直接或间接连接。

与智能手机10连接的外部装置的示例包括：有线/无线头戴式耳机、有线/无线外部充电器、有线/无线数据端口，通过卡座连接的卡（例如，存储卡、订户识别模块（SIM）卡、或用户识别模块（UIM）卡）、通过音频/视频输入/输出（I/O）终端连接的外部音频/视频装置、通过无线链路连接的外部音频/视频装置、连接至有线/无线网络的智能手机、连接至有线/无线网络的个人电脑、连接至有线/无线网络的PDA、以及耳机。外部输入/输出单元30可以将从外部装置接收到的数据传送至智能手机10的内部组件，并可以将智能手机10的内部数据传送至外部装置。

GPS接收单元32根据控制器38的指令来接收从GPS卫星ST1至STn发送来的GPS信号，并基于接收到的多个GPS信号来执行位置测量计算处理，以检测智能手机10的（经度、纬度和高度）位置。若容许GPS接收单元32从无线通信单元24或外部输入/输出单元30（例如，无线LAN）获得位置信息，则GPS接收单元32可以使用所获得的位置信息来检测智能手机10的位置。

运动传感器单元34包括例如三轴加速度传感器等，并且运动传感器34被构造为根据控制器38的指令来检测智能手机10的物理运动。通过检测智能手机10的物理运动，运动传感器单元34可以检测智能手机10的运动方向和加速度。将检测结果输出给控制器38。

供电单元36被构造为根据控制器38的指令，将存储在电池（未示出）内的电能提供给智能手机10的各个组件。

控制器38包括微处理器，并且被构造为根据存储在存储器28内的控制程序和控制数据进行操作，以集体地控制智能手机10的各个组件。此外，控制器38具有用来控制通信系统的各个单元的移动通信控制功能以及通过无线通信单元24来进行语音通信和数据通信的应用处理功能。

可以根据存储在存储器28内的应用程序软件通过控制器38的操作来实现应用程序处理功能。应用程序处理功能的示例包括：用于控制外部输入/输出单元30来进行与对方装置的数据通信的红外通信功能，用于发送和接收电子邮件的电子邮件功能，以及用于浏览网页的网页浏览功能。

控制器38还具有图像处理功能，该图像处理功能用于例如基于诸如接收到的数据或下载的流数据之类的图像数据（静止图像数据或运动图像数据）将视频显示在显示输入单元14上。图像处理功能是这样一种功能：其中控制器38对图像数据进行解码并对解码后的图像数据进行图像处理，以将图像显示在显示输入单元14上。

此外，控制器38执行对显示面板14A的显示控制和用于检测用户通过操作单元20和操作面板14B来进行的操作的操作检测控制。

通过执行显示控制，控制器38显示软件中所实现的操作单元（例如用于启动应用程序软件的图标或滚动条），或者显示用于创建电子邮件的窗口。滚动条是这样一种软件中所实现的操作单元，其用于接收指令以移动由于太大而无法容纳在显示面板14A的显示区域内的图像的显示部分。

通过执行操作检测控制，控制器38检测通过操作单元20做出的用户操作、接收通过操作面板14B对上述图标进行的操作或输入到上述窗口上的输入栏的字符串、或者接收用滚动条滚动所显示的图像的请求。

此外，通过执行操作检测控制，控制器38判定对操作面板14B进行操作的位置是位于与显示面板14A重叠的重叠部分（显示区域）还是位于没有与显示面板14A重叠的非重叠外缘部分（非显示区域）。控制器38具有触摸板控制功能，该功能用于控制操作面板14B的触摸敏感区域和软件中实现的操作单元的显示位置。

控制器38也可以检测对操作面板14B做出的手势，并根据检测到的手势实现预设的功能。所述手势不是现有的简单触摸，而是更加复杂的动作（例如，横过操作面板14B地画出手指等的痕迹、同时在操作面板14B上指定多个位置），或者是关于上述多个位置中的至少一个位置来画出手指等的痕迹的前述动作的组合。

相机单元22可以是被构造为使用诸如互补金属氧化物半导体（CMOS）或电荷耦合器件（CCD）传感器之类的成像元件来电子地拍摄图像的数码相机。相机单元22同样被构造为在控制器38的控制下将通过图像拍摄而获得的图像数据转换为诸如JPEG(联合图像专家组)图像数据之类的压缩图像数据，并将生成的图像数据记录在存储器28中或者通过外部输入/输出单元30或无线通信单元24将生成的图像数据输出。在图1所示的智能手机10内，相机单元22布置在与布置有显示输入单元14的表面相同的表面上。作为代替，相机单元22可以布置在显示输入单元14的背面上，或者，可选地，可以布置多个相机单元22。如果布置了多个相机单元22，则可以通过在各相机单元中进行切换以独立地使用相机单元22来拍摄图像，或者可以同时使用多个相机单元22来拍摄图像。

相机单元22也可以用于智能手机10的各种功能。例如，可以将利用相机单元22拍摄的图像显示在显示面板14A上，或者可以将通过相机单元22获得的图像用作操作面板14B的操作输入工具。此外，GPS接收单元32可以参考通过相机单元22获得的图像来检测位置。另外，可以参考通过相机单元22获得的图像来确定智能手机10的相机单元22的光轴方向或者确定当前的使用条件，而不需要使用三轴加速度传感器或不需要与三轴加速度传感器一起使用。通过相机单元22获得的图像也可以用在应用程序软件中。

此外，可以将通过GPS接收单元32获得的位置信息、通过麦克风18获得的语音信息（该语音信息可以通过使用控制器38等进行语音至文本的转换而得到文本信息）、通过运动传感器单元34获得的姿态信息、以及任何其他期望的信息添加至静止图像或运动图像的图像数据，并且可以将具有这些信息的图像数据记录到存储器28中，或者通过外部输入/输出单元30或无线通信单元24输出。

在根据本示例性实施例的智能手机10内，内部存储器28A和外部存储器28B中的至少一个存储图像信息。当用户操作给出用于显示列表中的图像信息的指令时，智能手机10进行控制以将该列表显示在显示面板14A上。在这种情况下，智能手机10根据用户操作对所显示的图像执行各种处理或者执行拖动所显示的图像的处理。

下面将参照图3来描述根据本示例性实施例的智能手机10的操作。图3是流程图，其示出了当通过操作面板14B或操作单元20输入了用于执行处理的指令时智能手机10的控制器38所执行的显示控制处理程序的过程。该程序被提前存储在内部存储器28A的某个区域内。

为了避免混淆，下面将描述将多个图像信息存储在存储器28中的情况。

在步骤S100中，控制器38进行控制以在显示面板14A上显示作为屏幕转换的开始的起始屏幕（top screen）42。

图4A示出了根据本示例性实施例的起始屏幕42的一个示例。如图4A所示，起始屏幕42具有选择按钮。所述选择按钮包括：例如，用来指示启动电子邮件功能的“电子邮件”按钮44a，用来指示启动网页浏览功能的“网络”按钮44b，用来指示启动相机功能的“相机”按钮44c，用来指示启动图像列表功能的“图像列表”按钮44d，用来指示启动打电话功能的“通话”按钮44e，以及用来指示启动各种设置功能的“设置”按钮44f。

用户触摸起始屏幕42上的各选择按钮中的期望按钮来选择要启动的功能。控制器38根据用户操作所选择的选择按钮来启动各功能中的任一种。

在步骤S101中，处理等待用户选择一个菜单按钮。然后，在步骤S102中，控制器38判定用户所选择的菜单按钮是否为“图像列表”按钮44d。若选择了否，则处理进行到步骤S103。在步骤S103中，控制器38执行与所选菜单按钮相对应的功能，然后结束程序。若选择了是，则该处理进行到步骤S104。

在步骤S104中，控制器38进行控制以在显示面板14A上显示列表查看屏幕，在该列表查看屏幕上以列表的形式显示存储在存储器28中的多个图像。

图4B示出了根据本示例性实施例的图像列表屏幕46的一个示例。如图4B所示，图像列表屏幕46示出了按矩阵排列的多个图像48，以及“结束”按钮50，选择该“结束”按钮可以终止显示控制处理程序。多个图像48是由存储在存储器28中的各图像信息表示的图像。

在步骤S105中，控制器38判定是否已经通过操作面板14B做出了输入操作。

如果在步骤S105中判定已经做出了输入操作，则该处理进行到步骤S106。在步骤S106中，控制器38判定所触摸的按钮是否为“结束”按钮50，以判定输入操作是否是输入了要终止显示控制处理程序的指令的操作。

若在步骤S106中判定输入操作不是输入了要终止显示控制处理程序的指令的操作，则处理进行到步骤S107。在步骤S107中，控制器38判定输入操作是否是选择图像的输入操作。若在步骤S107中判定输入操作不是选择图像的输入操作，则该处理返回到步骤S105。

若在步骤S107中判定已经进行了选择图像的输入操作，则该处理进行到步骤S108。在步骤S108中，控制器38进行控制，以在显示面板14A上显示包括多个预定菜单项的菜单屏幕52。在本示例性实施例中，各菜单项表示：复制图像信息的处理、删除图像信息的处理、对图像信息进行设置的处理、以及利用图像处理程序（未示出）对图像信息进行图像处理的处理。

图5A和图5B示出了根据本示例性实施例的图像列表屏幕46的一个示例。如图5A所示，当选择了显示在图像列表屏幕46上的多个图像48中的一个图像时，显示菜单屏幕52，以使其重叠在图像列表屏幕46上。此外，如图5A所示，在本示例性实施例中，菜单屏幕52包括菜单项选择部分52a至52d来作为从四个菜单项（即，菜单项A、菜单项B、菜单项C、以及菜单项D）中选择一个的区域。显示每个菜单项选择部分52a至52d，以便在与所选图像相邻的部分周边区域内具有空闲区。与所选图像相邻的各空闲区的部分由用于指示拖动操作的拖动指示区域54a至54d表示。

在本示例性实施例中，将在多个图像48的列方向（显示面板14A的前视图内的上下方向）和行方向（显示面板14A的前视图内的左右方向）上与所选图像相邻且位于所选图像两侧的区域用作空闲区。也就是说，当图像列表屏幕46上显示有菜单项选择部分52a至52d时，拖动指示区域54a至54d在前视图中分别位于所选图像的上方、下方、左方、和右方。

例如为了改变图像的显示位置，用户可能希望拖动显示在图像列表屏幕46内的任何图像。在本示例性实施例中，如上所述，由于拖动指示区域54a至54b位于所选图像的列方向或行方向，因此拖动操作可以无缝地跟在指示拖动操作的操作之后。

然后，在步骤S109中，控制器38判定用户用他或她的指尖指定的位置是否已经连续地在操作面板14B上移动。例如，若所指定的位置已经移动了预定的距离（预定数量的像素）或更远，控制器38则判定已经移动了指定位置。

若在步骤S109中判定还没有移动指定位置，则处理进行到步骤S111。在步骤S111中，控制器38判定用户的图像选择是否已经取消。若由于诸如用户的指尖从操作面板14B上松开之类的用户操作导致操作面板14B没有输出检测信号，控制器38则判定已经取消了对图像的选择。

若在步骤S111中判定已经取消了对图像的选择，则该处理进行到步骤S113。在步骤S113中，终止对在步骤S107中所显示的菜单项选择部分52a至52d的显示，然后处理返回至步骤S103。

若在步骤S111中判定图像的选择没有取消，则该处理进行到步骤S115。在步骤S115中，控制器38判定用户的指尖指定的位置是否已经达到显示有菜单项选择部分52a至52d的任何区域。若指定位置位于菜单项选择部分52a至52d的显示区域中的一个区域，控制器38则判定所指定的位置已经达到了显示有菜单项选择部分52a至52d的区域中的一个区域。

若在步骤S115中判定指定位置已经到达菜单项选择部分52a至52d的区域中的任意一个区域，则处理进行到步骤S117。在步骤S117中，控制器38终止对在步骤S107中所显示的菜单项选择部分52a至52d的显示。然后，在步骤S119中，控制器38对菜单项选择部分52a至52d当中与用户的指尖指定的位置已经达到的区域相对应的一个菜单项选择部分所对应的处理进行执行。

这样，用户通过操作面板14B触摸图像（用户想要在该图像上执行期望的处理）的显示区域来指定图像。用户还将图像移动至显示在图像周围的菜单项选择部分52a至52d的显示区域中的对应于期望的处理的区域。这使得用户能够方便地对期望的图像执行期望的处理。

如图5A所示，根据用户的指尖的运动来移动指定位置。如图5B所示，当指定位置位于“菜单B”的菜单项选择部分52b的显示区域时，进行与“菜单B”的选择相对应的处理。

若在步骤S115中判定指定位置还没有到达显示有菜单项选择部分52a至52d的任何区域，则处理进行到步骤S121。在步骤S121中，控制器38判定用户的指尖所指定的位置是否已经到达拖动指示区域54a至54d中的一个区域。

若在步骤S121中判定指定位置已经到达拖动指示区域54a至54d中的一个区域，则该处理进行到步骤S123。在步骤S123中，控制器38终止对在步骤S107中所显示的菜单项选择部分52a至52d的显示。然后，在步骤S125中，控制器38根据所选图像的运动来进行拖动操作。

如图6A所示，操作面板14B上的指定位置根据用户指尖的运动而运动。如图6B所示，指定位置位于前视图的右侧的拖动指示区域54d。在这种情况下，终止对菜单项选择部分52a至52d的显示。然后，执行与拖动操作对应的处理。

图7A至图7F是示出了与根据本示例性实施例的拖动操作相对应的处理的一个示例的示意图。例如，如图7A和图7B所示，当第一张至第五张图像显示在一条直线上时，指定第一张图像为要通过用户操作来拖动的图像，并且将该图像沿着第二至第五张图像所在的方向（前视图的向右）移动。在这种情况下，如图7C所示，当在第一张图像与第二张图像重叠的同时持续地指定第一张图像（长按第一张图像）时，控制器38判定已经发出了将第一张图像和第二张图像合并的指令，并合并第一张图像和第二张图像。在这种情况下，例如，如图7D所示，在第一张图像所在的位置创建一个新的文件夹，并且第一张图像和第二张图像都存储在所创建的文件夹中。

其后，如图7E和7F所示，当进一步持续地指定第一张图像（长按第一张图像）时，依次合并第三张图像和第四张图像。然后如图7G所示，当合并了多达四张图时，不能再指定（长按）第一张图像。然后，当第一张至第四张图像都合并在所创建的文件夹中时，终止合并（图像均保存在相同的文件夹中）。

因此，用户通过操作面板14B来触摸期望图像的显示区域，以指定图像，并将他或她的手指移动至与指定图像相邻的拖动指示区域54a至54d中的任何区域。这使得用户能够方便地执行与指定图像的拖动操作相对应的处理。

在步骤S127中，控制器38判定所触摸的按钮是否为“结束”按钮50，以判定是否已经进行了输入终止显示控制处理程序的指令的操作。

若在步骤S127中判定还没有进行输入终止显示控制处理程序的指令的操作，则处理返回到步骤S109。

若在步骤S103或S127中判定已经进行了输入终止显示控制处理程序的指令的操作，则处理进行到步骤S129。在步骤S129中，控制器38进行控制以终止图像列表屏幕46的显示，然后终止显示控制处理程序。

这样，构造智能手机10使得通过触摸板来指定显示在显示面板14A和操作面板14B上的图像，其中显示面板14A是具有显示区域（在该显示区域中显示图像）的显示器，而操作面板14B布置在显示区域的表面上并且可以是触摸板。在这种情况下，对分别表示了预定多个菜单项中的一项的菜单屏幕通过与各自菜单项相关联地进行显示，使得在与显示区域内显示的图像相邻的部分周边区域内提供有空闲区。此外，当通过触摸板指定图像同时将菜单屏幕显示在显示区域内之后所跟随的操作是将指定位置移动至各菜单屏幕中的一个菜单屏幕上时，判定出是指定了由指定位置所移动到的那个菜单屏幕所表示的菜单项。若指定位置移动至空闲区，则判定出是指定了根据指定位置的运动而对所指定图像的拖动操作。然后，执行对应于判定结果的处理。

此外，部分与图像相邻的周边区域被用作空闲区，由此防止当用户的手指在触摸版上移动时无意地从触摸板上松开，并且防止执行指令被当作在手指松开位置处被输入至移动终端设备。也就是说，可以防止无意中执行菜单操作。

在本示例性实施例中，在所选图像的周围显示菜单屏幕。但是，本发明并不局限于本示例性实施例。可以在不与显示面板14A上的显示区域内的所选图像重叠的位置处显示针对各个菜单项用于指示运动方向的菜单屏幕。

图8A和图8B以及图9A和图9B示出了根据本示例性实施例的图像列表屏幕46的其他示例。在这种情况下，举例说明，如图8A所示，当通过用户操作在图像列表屏幕46上显示图像时，智能手机10在前视图内的所选图像的上方显示菜单屏幕60。在菜单屏幕60的中部显示有指示出所选图像位置的参考图像位置60a，以用来指示指定位置相对于参考图像位置60a移动的方向以及指示要执行的处理。

用户参照菜单屏幕60，按照图8B所示的方式在菜单屏幕60上将指定位置向着菜单B所在的方向（前视图中斜向右上方）移动。在该情况下，控制器38执行对应于菜单B的处理。

相比之下，用户参照图9A所示的菜单屏幕60，同时按照图9B所示的方式在菜单屏幕60上将指定位置向着进行拖动操作的方向（前视图的向右）移动预定的距离或更远。在该情况下，控制器38执行对应于拖动操作的处理。

如图10所示，当用户参照菜单屏幕60同时在操作面板14B上移动指定位置时，可以在菜单屏幕60上显示表示指定位置的参考位置信息60b，同时该菜单屏幕60随着指定位置的移动而被移动。这使得用户可以在检查菜单屏幕60上的参考位置信息60b的位置的同时，指示执行对应于菜单项的处理或对应于拖动操作的处理。

在本示例性实施例中，将菜单项显示为围绕所选图像的气球，该方式是非限制性的。用于指示各菜单项的运动方向的菜单屏幕可以显示在显示面板14A上的显示区域内的所选图像周围的弧形内。

图11示出了根据本示例性实施例的图像列表屏幕46的另一示例。举例说明，如图11所示，当通过用户操作在图像列表屏幕46上选择图像时，智能手机10可以在以指定的位置为中心或者以所选图像的中心为中心的圆形区域内显示菜单屏幕。在这种情况下，可以在圆形区域的一些角度分区内显示菜单项选择部分62a至62d。圆形区域的其他角度分区用作空闲区，并且空闲区用作指示拖动操作的区域62e。

此外，在本示例性实施例中，将菜单项显示为围绕所选图像的气球，该方式是非限制性的。若显示面板14A上的显示区域内显示的菜单项少于四个，则可以在行方向或列方向上与以矩阵形式排列的多个图像中的所选图像相邻的区域内显示菜单项。在该情况下，可以将在行方向上或列方向上与以矩阵形式排列的多个图像中的所选图像相邻并且不显示菜单项的区域用作空闲区，并且空闲区可以用作指示拖动操作的区域。

图12A和图12B示出了根据本示例性实施例的图像列表屏幕46的另一示例。例如，如图12A所示，若显示两个菜单项，则菜单项选择部分64a和64b显示在前视图中的所选图像的上方区域和下方区域内。在这种情况下，在前视图中位于所选图像左右两侧的区域可以用作空闲区，并且空闲区可以用作指示拖动操作的区域64c。

此外，在本示例性实施例中，当指定位置被移动至指示菜单项或拖动操作的区域时执行各种处理，该方式是非限制性的。当通过用户操作选择图像时，暂时假设已经发出了启动拖动操作的指令，并且进行对应于拖动操作（例如，根据指定位置的运动来移动所选图像的显示位置）的处理。然后，当已经将所选图像的显示位置移动至指示菜单项或拖动操作的区域时，可以执行各种处理。

图13A和图13B示出了根据本示例性实施例的图像列表屏幕46的另一示例。当通过用户操作在图像列表屏幕46上选择图像时，智能手机10在包围所选图像的区域内显示菜单项选择部分66a至66d。例如，如图13A所示，智能手机10在以所选图像为中心的圆形区域的一些角度分区内显示菜单项选择部分66a至66d。圆形区域的其他角度分区用作空闲区域，并且空闲区域用作指示拖动操作的区域66e。

若通过用户操作，所选图像的显示位置已经到达菜单项选择部分66a至66d中的任何一个，则智能手机10停止显示菜单项选择部分66a至66d，并执行对应于该菜单项的处理。另一方面，若所选图像的显示位置已经达到指示拖动操作的各区域66e中的任何一个，则智能手机10停止显示菜单项选择部分66a至66d，并执行对应于拖动操作的处理。

如图13B所示，例如，若所选图像的显示位置已经达到“菜单A”的菜单项选择部分66a，则停止对应于拖动操作的处理，并执行对应于菜单A的处理。另一方面，若所选图像的显示位置已经到达指示拖动处理的各区域66e中的任何一个，则停止显示菜单项选择部分66a至66d，并继续拖动操作。

对所选图像的显示位置是否已经到达每个区域的判定可以基于对所选图像的一部分是否位于该区域内的判定。该判定方法是非限制性的，并且当所选图像中具有预定尺寸或更大尺寸的一部分位于每个区域内时，可以判定所选图像的显示位置已经到达该区域。

尽管通过计算机程序所执行的软件来实现了上述示例性实施例，但本发明并不局限于上述示例性实施例。要理解的是，本发明的一些示例性实施例可以仅通过硬件来实现或者通过硬件与软件的结合来实现。

以上对本发明的示例性实施例的描述用于示例和描述的目的。其目的不是穷举或将本发明限制为所公开的精确形式。显然，很多修改和变化对本领域技术人员而言是显而易见的。实施例的选择和描述是为了最好地解释本发明的原理及其实际应用，由此使得本领域的其他技术人员理解本发明适用于所预期的特定用途的各种实施例以及各种修改。本发明的范围由所附权利求及其等同物来限定。

Claims

1.一种图像显示控制设备，其包括：

显示控制器，当通过触摸板指定了显示在具有用来显示图像的显示区域和布置在所述显示区域的表面上的所述触摸板的显示器上的图像时，所述显示控制器进行控制以对分别表示了多个预定的菜单项中的一项的多个菜单屏幕进行与各自的菜单项相关联的显示，使得在与显示在所述显示区域内的图像相邻的周边区域的局部中提供有空闲区；

判定单元，当通过所述触摸板指定了图像同时在所述显示区域内显示有菜单屏幕之后所跟随的操作是将指定位置移动至多个菜单屏幕之一上时，所述判定单元判定出是指定了由所述指定位置所移动到的那个菜单屏幕所表示的菜单项，并且当将所述指定位置移动至所述空闲区时，所述判定单元判定出是指定了根据所述指定位置的运动而对所指定图像的拖动操作；以及

执行单元，其执行与所述判定单元的判定结果相对应的处理。

2.如权利要求1所述的图像显示控制设备，其中：

所述显示控制器进行控制，以在完成了所述判定单元的判定后，停止显示菜单屏幕。

3.如权利要求1所述的图像显示控制设备，其中：

所述显示控制器进行控制，以在所述显示区域内显示由各图像组成的矩阵，并且当通过所述触摸板指定了显示在所述显示区域内的各图像中的一张图像时，所述显示控制器进行控制，以使得所述空闲区被创建在与所指定图像相邻的周边区域内沿着行方向和列方向中的至少一个方向相邻的图像之间的部分区域内的方式来显示菜单屏幕。

4.如权利要求2所述的图像显示控制设备，其中：

5.如权利要求3所述的图像显示控制设备，其中：

当通过所述触摸板指定了显示在所述显示区域内的各图像中的一张图像时，所述显示控制器进行控制，以使得所述空闲区被创建在与所指定图像的至少一侧相邻的部分周边区域内的方式来显示菜单屏幕，从而使得所述菜单屏幕显示在与所指定图像的另一侧相邻的部分周边区域内。

6.如权利要求4所述的图像显示控制设备，其中：

7.如权利要求1所述的图像显示控制设备，其中：

在完成所述判定单元的判定之前，响应于通过所述触摸板进行的对指定的取消，所述显示控制器进行控制以停止显示菜单屏幕。

8.如权利要求2所述的图像显示控制设备，其中：

9.如权利要求3所述的图像显示控制设备，其中：

10.如权利要求4所述的图像显示控制设备，其中：

11.如权利要求5所述的图像显示控制设备，其中：

12.如权利要求6所述的图像显示控制设备，其中：

13.如权利要求1所述的图像显示控制设备，其中：

当通过所述触摸板指定了显示在所述显示区域内的图像时，所述显示控制器进行控制，以使得所述空闲区被创建在与所指定图像相邻的部分周边区域内的方式来将具有所述多个预定的菜单项的菜单屏幕显示在显示区域中，其中所述多个预定的菜单项被显示为气球。

14.如权利要求2所述的图像显示控制设备，其中：

15.如权利要求3所述的图像显示控制设备，其中：

16.如权利要求4所述的图像显示控制设备，其中：

17.如权利要求5所述的图像显示控制设备，其中：

18.如权利要求6所述的图像显示控制设备，其中：

19.如权利要求7所述的图像显示控制设备，其中：

20.如权利要求8所述的图像显示控制设备，其中：

21.如权利要求9所述的图像显示控制设备，其中：

22.如权利要求10所述的图像显示控制设备，其中：

23.如权利要求11所述的图像显示控制设备，其中：

24.如权利要求12所述的图像显示控制设备，其中：

25.如权利要求1至24中任一项所述的图像显示控制设备，其中：

当通过所述触摸板指定了图像同时在所述显示区域内显示有菜单屏幕之后所跟随的操作是将指定位置移动至所述显示区域上时，所述显示控制器进行控制以显示所指定图像，同时根据所述指定位置的运动来移动所指定图像至显示位置；当所述判定单元判定出是指定了多个菜单项中的一项时，所述显示控制器进行控制以将所指定图像移动至原始位置并在所述原始位置处显示所指定图像；以及当所述判定单元判定出是指定了拖动操作时，所述显示控制器进行控制以在所述空闲区内的指定位置处停止所指定图像并在所述指定位置处显示所指定图像。

26.如权利要求1至24中任一项所述的图像显示控制设备，其中：

当通过所述触摸板指定了显示在所述显示区域内的图像时，所述显示控制器进行控制，以使得所述空闲区被创建在与所指定图像相邻的部分周边区域内的方式来在所述显示区域内显示以指定位置或所指定图像的中心为弧心的弧形菜单屏幕。

27.如权利要求25所述的图像显示控制设备，其中：

28.一种图像显示设备，其包括：

如权利要求1至24中任一项所述的图像显示控制设备；以及

显示图像的显示器，所述显示器包括触摸板，通过所述触摸板来输入用于选择所显示图像的信息。

29.一种图像显示设备，其包括：

如权利要求25所述的图像显示控制设备；以及

30.一种图像显示设备，其包括：

如权利要求26所述的图像显示控制设备；以及

31.一种图像显示设备，其包括：

如权利要求27所述的图像显示控制设备；以及

32.一种图像显示控制方法，其包括：

当通过触摸板指定了显示在具有显示了预定图像的显示区域和布置在所述显示区域的表面上的所述触摸板的显示器上的图像时，进行控制以对分别表示了多个菜单项中的一项的多个菜单屏幕进行显示，其中多个菜单项中包括指示了拖动操作的移动方向的项，使得在与显示在所述显示器的显示区域内的图像相邻的周边区域的局部中提供有空闲区；

当通过所述触摸板指定了图像同时利用所述显示器显示菜单屏幕之后所跟随的操作是将指定位置移动至多个菜单屏幕之一上时，判定出是指定了由所述指定位置所移动到的那个菜单屏幕所表示的菜单项，并且当将所述指定位置移动至所述空闲区时，判定出是指定了根据所述指定位置的运动而对所指定图像的拖动操作；以及

执行与判定结果相对应的处理。