CN103092478A - 信息处理装置及其方法 - Google Patents

Abstract

信息处理装置及其方法。一种能够执行应用程序的信息处理装置包括：特征提取单元，该特征提取单元提取特征范围；位置设定单元，该位置设定单元通过使所述特征范围与所述特征范围的位置坐标相关联来生成位置设定信息，并且将所述位置设定信息存储在存储单元中；执行控制单元，该执行控制单元选择当利用方向键进行输入时由所述方向键指示的方向上存在的特征范围，当利用输入键选择与当前选择的特征范围对应的显示板的显示部分时，将选择范围信息和选择显示信息输出至显示控制单元，并且该执行控制单元生成指示所述显示部分被选择的决定信息，并且将所述决定信息输出至输入控制单元。

Description

信息处理装置及其方法

技术领域

在此公开的实施方式涉及能够支持多个用户接口的信息处理装置及其方法。

背景技术

使用触摸板作为用户接口的信息处理装置通常采用通过利用经由所述触摸板输入的信息来执行操作的应用程序。由于这些应用程序是在假设触摸式接口的前提下制备的，所以它们通常不支持使用多功能键（诸如方向键、输入键等）作为用户接口的信息处理装置。为使得应用程序支持具有多功能键作为用户接口的信息处理装置，需要更改所述程序。因此，需要重新开发应用程序。为此，需要提供一种具有如下机制的信息处理装置，所述机制使得采用触摸板的应用程序也能够支持利用多功能键执行的操作。

作为相关技术，已知一种信息处理装置，该信息处理装置具有：包括多个项目的菜单选择画面上的触摸板；用于指示光标的移动方向的方向键；以及用于指示与要执行的选择的项目对应的处理的输入键。利用所述信息处理装置，不仅根据方向键指示的位置而且根据所述触摸板指示的位置移动并显示所述光标，并且不仅通过操作所述输入键而且通过结束触摸所述触摸板来执行与所选择的项目对应的处理。然而，如果触摸输入从触摸开始连续预定持续时间或更长时间，并且如果触摸输入在与触摸开始处指示的项目对应的区域之外，则在结束触摸所述触摸板时，不执行与所选择的项目对应的处理。另选的是，如果在结束触摸所述触摸板时，在距离触摸开始处指示的位置特定距离范围以外进行触摸输入，则不执行与所选择的项目对应的所述处理。结果，能够改进菜单选择时的可操作性。

另外，作为相关技术，已知可容易地进行菜单选择和输入的便携式电子设备输入方法。利用此方法，将显示画面划分为显示选择菜单的多个显示区域。如果当操作者选择并输入菜单项目时，菜单项目存在于任意菜单画面上选择的菜单下方，则再次显示所选择的菜单项目。结果，能够提供产生高显示效率并具有用户友好菜单结构的所述输入方法。

日本特开第2006-318393号公报

日本特开平第10-312261号公报

发明内容

本发明的目的是提供一种能够通过操作多功能键（诸如方向键、输入键等）来执行即使应用触摸板作为用户接口的应用程序的信息处理装置及其方法。

根据一个实施方式的信息处理装置，该信息处理装置能够执行利用触摸板操作的应用程序，该信息处理装置包括特征提取单元、位置设定单元以及执行控制单元。

所述特征提取单元通过针对显示在显示板上的图像执行特征提取处理来提取特征范围。

所述位置设定单元通过使所述特征范围与指示所述特征范围在所述显示板上的位置的位置坐标相关联，来生成位置设定信息，并且将所述位置设定信息存储在存储单元中。

当利用方向键进行输入时，所述执行控制单元通过利用由所述方向键指示的方向参照所述位置设定信息，来选择在由所述方向键指示的方向上存在的位置坐标处的特征范围。随后，所述执行控制单元基于指示显示在所述显示板上并且与所述特征范围对应的显示部分的选择范围信息和指示如何显示所述显示部分的选择显示信息来控制所述显示板的显示。

另外，当利用输入键来选择与当前选择的特征范围对应的所述显示板的显示部分时，所述执行控制单元生成指示选择了所述显示部分的决定信息，并且基于所述决定信息来控制所述应用程序的执行。

附图说明

图1例示出信息处理装置的硬件的一个实施示例。

图2例示出输入/输出单元的一个实施示例。

图3例示出根据第一实施方式的控制单元的一个实施示例以及所述控制单元、存储单元以及输入/输出单元之间的关系。

图4A和图4B例示出显示板和所述显示板上显示的图像的点的一个实施示例。

图5A、图5B、图5C、图5D以及图5E例示出特征提取的一个实施示例。

图6例示出所述显示板上显示的图像的一个实施示例以及通过从所述图像执行特征提取所获得的结果。

图7是例示出位置设定单元的操作的一个实施示例的流程图。

图8例示出选择范围存储信息和选择显示信息的数据结构的一个实施示例。

图9A是例示出所述执行控制单元的操作的一个实施示例的流程图。

图9B是例示出所述执行控制单元的操作的一个实施示例的流程图。

图9C是例示出所述执行控制单元的操作的一个实施示例的流程图。

图10例示出预定搜索的一个实施示例。

图11例示出根据第一实施方式的软件的一个实施示例。

图12A是例示出根据第二实施方式的信息处理装置的操作的一个实施示例的流程图。

图12B是例示出根据第二实施方式的信息处理装置的操作的一个实施示例的流程图。

图12C是例示出根据第二实施方式的信息处理装置的操作的一个实施示例的流程图。

具体实施方式

下面将参照附图详细描述实施方式。

描述了第一实施方式。

图1例示出信息处理装置的硬件的一个实施示例。图1中例示的信息处理装置1包括控制单元2、存储单元3、记录介质读取装置4、输入/输出接口（输入/输出I/F）5、通信接口（通信I/F）6等。这些部件经由总线7互连。信息处理装置1的示例包括移动电话、PHS（个人手持式电话系统）、智能电话、便携式信息终端、个人计算机等。

CPU（中央处理单元）、多核CPU、可编程器件（FPGA（现场可编程门阵列）、PLD（可编程逻辑器件）等）可用作控制单元2。

诸如ROM（只读存储器）、RAM（随机存取存储器）等的存储器、硬盘等可用作存储单元3。诸如参数值、变量值等的数据可记录在存储单元3中。另选的是，存储单元3在执行时可用作工作区。

记录介质读取装置4根据控制单元2的控制来控制从/向记录介质8读取/写入数据。根据记录介质读取装置4的控制将数据写入记录介质8，或者读取记录在记录介质8上的数据。此外，诸如磁记录装置、光盘、磁光记录介质、半导体存储器等的计算机可读非临时记录介质可作为可插入/可移动记录介质8。所述磁记录装置的示例包括硬盘装置（HDD）等。所述光盘的示例包括DVD（数字化通用磁盘）、DVD-RAM、CD-ROM（只读光盘存储器）、CD-R（可记录）/RW（可重写）等。所述磁光记录介质的示例包括MO（磁光盘）等。另外存储单元3是非临时记录介质中的一种。

输入/输出单元9连接至输入/输出接口5。输入/输出接口5接收从输入/输出单元9输入的信息，并且将所述信息经由总线7发送至控制单元2。此外，根据从控制单元2发送的数据，在显示板（显示单元）的画面上显示信息等。

图2例示出所述输入/输出单元的一个实施示例。键控IC（集成电路）201、各种类型的键202、触摸板控制IC（集成电路）203、触摸板204、显示控制IC（集成电路）205、显示板206、麦克风207、扬声器208、照相机209、传感器210等可用作图2的输入/输出单元9。例如，液晶显示器、有机EL（电致发光）显示器等可用作显示板206。

然而，信息处理装置1可以是既不具有触摸板控制IC 203也不具有触摸板204而仅支持键输入的信息处理装置1。

键控制IC 201将利用各种类型的键202输入的信息发送至控制单元2。各种类型的键202表示诸如方向键、输入键等的多功能键（MF键）以及其它输入键。触摸板控制IC 203将利用触摸板204输入的信息发送至控制单元2。例如，专用于触摸板的IC可用作触摸板控制IC 203。显示控制IC 205根据从控制单元2发送的数据，在显示板206上显示信息。例如，可使用专用于显示板的IC。

通信接口6是用于进行通信线连接、LAN（局域网络）连接、互联网连接以及无线连接的接口。此外，通信接口6是用于在必要时与另一计算机进行LAN连接、互联网连接或无线连接的接口。

利用具有这种硬件配置的计算机，实现所述信息处理装置的稍后描述的各种类型的处理功能。在此情况中，提供了描述要由所述信息处理装置处理的所述功能的处理内容的程序。计算机执行所述程序，由此由所述计算机实施稍后描述的所述处理功能（图7、图9A至图9C、图12A至图12C等）。描述所述处理内容的所述程序能够记录在计算机可读记录介质8上。

如果所述程序是分布式的，例如，记录有所述程序的诸如DVD、CD-ROM等的记录介质8是市场上出售的。另选的是，所述程序能够记录在服务器计算机的存储装置中，并且能够从所述服务器计算机经由网络传送至另一计算机。

执行所述程序的所述计算机将例如记录在记录介质8上的所述程序或者从所述服务器计算机传送来的所述程序存储在本地存储单元3中。所述计算机从本地存储单元3读取所述程序，并且根据所述程序执行处理。另选的是，所述计算机能够直接从记录介质8读取所述程序，并且能够根据所述程序执行处理。再另选的是，每次从所述服务器计算机传送所述程序时，所述计算机能够根据接收的程序执行处理。

图3例示出根据第一实施方式的控制单元的一个实施示例以及所述控制单元、所述存储单元和所述输入/输出单元之间的关系。在图3的控制单元2中，描述了特征提取单元301、位置设定单元302、执行控制单元303、输入控制单元304以及显示控制单元305。在图3的输入/输出单元9中，描述了显示控制IC 205和显示板206。

下面描述所述特征提取单元。

在接收到执行特征提取的指示时，特征提取单元301从存储单元3获得与显示板206上显示的图像对应的图像数据，通过分析所述图像数据从所显示的图像提取特征，并且利用所提取的特征来决定特征范围。所述特征范围与所述显示板上显示的图形对应。

下面描述所述特征提取的方法。

图4例示出所述显示板和所述显示板上显示的图像的点的一个实施示例。例示出图4B中的所述图像的点的所述示意图描述了图4A的显示板401的一部分。在此示例中，针对图4A的显示板401，呈现出指示点在水平方向上的坐标A的位置的箭头和指示所述点在垂直方向上的坐标1的位置的箭头。图4B例示表示水平方向上的坐标A、B、C...的水平坐标402以及表示垂直方向上的坐标1、2、3...的垂直坐标403。图4A的显示板401上描述的所述点在水平方向上的坐标A和所述点在垂直方向上的坐标1，与图4B中的水平坐标402的坐标A和垂直坐标403的坐标1相同。此外，图4B例示出用两种颜色（黑色和白色）表示图像的点的情况。然而，所述颜色不限于此两种颜色。

图5例示出所述特征提取处理的一个实施示例。特征提取单元301在目标点的色素信息和与所述目标点左侧相邻的点的色素信息之间进行比较。如果所述目标点具有与所述相邻点不同的色素信息，则特征提取单元301将所述目标点设定为“1”，或者如果所述目标点具有与所述相邻点相同的色素信息，则将所述目标点设定为“0”，使得所述目标点与“1”或“0”相关联。在图5A的示例中，由于由坐标A1指示的所述点不具有在左侧的相邻点，所以将所述点与“0”相关联。由坐标B1指示的所述点具有由坐标A1指示的在左侧的相邻点，并且分别由坐标B1和坐标A1指示的点的色素信息不同。因此，将由坐标B1指示的所述点与“1”相关联。由坐标C1指示的所述点具有由坐标B1指示的相邻点，并且分别由坐标C1和坐标B1指示的所述点的色素信息相同。因此，将由坐标B1指示的所述点与“0”相关联。在此示例中，所述色素信息是指示黑色或白色的信息。

接着，特征提取单元301提取与“1”相关联的点的左侧上的线段。图5B代表提取与“1”相关联的（阴影）点的左侧上的线段（粗线）。指示所提取的线段的位置的信息存储在存储单元3中。

接着，特征提取单元301在目标点的色素信息和与所述目标点的上侧相邻的点的色素信息之间进行比较。特征提取单元301将具有不同色素信息的点设定为“1”，并且将具有相同色素信息的点设定为“0”，使得所述目标点与“1”或“0”相关联。在图5C的示例中，由于由坐标A1指示的所述点不具有在上侧的相邻点，所以将其与“0”相关联。由坐标A2指示的所述点具有由坐标A1指示的相邻点，并且由坐标A2和坐标A1分别指示的所述点的色素信息不同。因此，将由坐标A2指示的所述点与“1”相关联。由坐标A3指示的点具有由坐标A2指示的相邻点，并且由坐标A3和坐标A2分别指示的所述点的色素信息相同。因此，将由坐标A3指示的所述点与“0”相关联。在此示例中，所述色素信息是指示黑色或白色的信息。

接着，特征提取单元301提取与“1”相关联的点的上侧上的线段。图5D表示提取与“1”相关联的（阴影）点的上侧上的线段（粗线）。指示所提取的线段的位置的信息存储在存储单元3中。随后，特征提取单元301合并左侧上和上侧上的所述线段。在图5E的示例中，由坐标C3、D3、E3、F3、C4、D4、E4以及F4指示的所述点构成的矩形由所合并的线段表示。此矩形称为特征范围。如果通过合并线段获得的矩形不具有特定宽度（水平宽度）和特定高度（垂直宽度），则不认为其是特征范围。特征提取可利用除了上述方法以外的方法来执行。

下面描述所述位置设定单元。

位置设定单元302进行设定，使得特征范围和指示所述特征范围的位置的显示板的位置坐标之间相关联，并且将所述特征范围和所述位置坐标存储在存储单元3中。可使特征范围和所述触摸板的坐标之间相关联。

图6例示出所述显示板上显示的图像的一个实施示例以及通过从所述图像执行特征提取所获得的结果。在图6中例示的显示板601上，描述了20个图标和一个按钮（“OK”）。然而，显示的内容不限于显示板601所示。图6例示出通过针对显示板601上显示的所述图像执行特征提取所获得的结果，在图6的602中，显示了与所述20个图标对应的特征范围A至T，并且显示了与所述按钮对应的特征范围U。例如，图标603与特征范围604对应。

例如，位置设定单元302使图6的特征范围A至U与指示特征范围A至U的中心位置坐标的所述显示板的位置坐标对应，并且将所述特征范围和所述中心位置坐标存储在存储单元3中。图6例示出位置设定信息的数据结构的一个实施示例。图6的位置设定信息605包括存储在“特征范围ID”、“中心位置坐标”以及“触摸板坐标”中的信息。在“特征范围ID”中，存储用于识别特征范围的信息。在此示例中，存储用于识别图6中例示的特征范围A至U的“A”至“U”。在“中心位置坐标”中，存储指示所述显示板的坐标的信息，所述显示板的坐标指示特征范围的所述中心位置。在此示例中，存储分别指示所述显示板在X轴方向上的坐标的“x1”至“x21”，所述坐标指示图6中例示的特征范围A至U中的每一个的所述中心位置。此外，存储分别指示在Y轴方向上的所述显示板的坐标的“y1”至“y21”，所述坐标指示图6中例示的特征范围A至U中的每一个的所述中心位置。在“触摸板坐标”中，存储指示与所述中心位置坐标对应的所述触摸板的位置坐标的信息。在此示例中，存储分别指示图6中例示的特征范围A至U中的每一个在X轴方向上的所述触摸板的坐标的“xt1”至“xt21”。此外，存储分别指示图6中例示的特征范围A至U中的每一个在Y轴方向上的所述触摸板的坐标的“yt1”至“yt21”。

然而，如果特征范围是在信息处理装置启动之后最初选择的，则位置设定单元302选择例如接近所述显示板的左上角的特征范围。在图6中的602的情况中，特征范围A是在信息处理装置启动之后最初选择的。然而，在信息处理装置启动之后最初选择的特征范围不限于所述显示板的左上角处的所述特征范围。

下面描述所述位置设定单元的操作。

图7是例示出所述位置设定单元的操作的一个实施示例的流程图。在步骤S701中，位置设定单元302获得由特征提取单元301提取并且在所述特征提取处理终止时存储在存储单元3中的特征范围。

在步骤S702中，位置设定单元302判断是否存在可设定为选择范围的特征范围。当存在可设定为选择范围的所述特征范围时（在步骤S702中为“是”），所述流程进行至步骤S703。当不存在可设定为选择范围的所述特征范围时（在步骤S702中为“否”），终止所述位置设定单元的处理。存在可设定为选择范围的所述特征范围的情况是从当前显示在所述显示板上的图像提取出特征范围的情况。不存在可设定为选择范围的所述特征范围的情况是没有从当前显示在所述显示板上的所述图像提取出特征范围的情况。

在步骤S703中，位置设定单元302通过使由特征提取单元301提取的所述特征范围与所述特征范围的中心位置坐标之间相关联，来生成位置设定信息，并且将所生成的信息存储在存储单元3中。另选的是，可将特征范围和与所述中心位置坐标对应的触摸板坐标之间相关联。参见图6的位置设定信息605。

在步骤S704中，位置设定单元302判断是否存储了在先的特征范围。当存储了在先的特征范围时（在步骤S704中为“是”），所述流程进行至步骤S705。当没有存储在先的特征范围时（在步骤S704中为“否”），所述流程进行至步骤S709。没有存储在先的特征范围的情况例如是在所述信息处理装置启动之后执行所述初始化处理的情况。

在步骤S705中，位置设定单元302从存储单元3获得在执行所述特征提取之前选择的特征范围以及与所述特征范围对应的中心位置坐标。例如，每次改变特征范围时，使所述特征范围和与所述特征范围对应的中心位置坐标之间相关联，并且将所述特征范围和所述中心位置坐标作为所述选择范围存储信息存储在存储单元3中。图8例示出所述选择范围存储信息和所述选择显示信息的数据结构的一个实施示例。图8的选择范围存储信息801包括存储在“特征范围ID”和“中心位置坐标”中的信息。在“特征范围ID”中，存储用于识别特征范围的信息。在此示例中，存储用于识别图6中例示的特征范围A的“A”。在“中心位置坐标”中，存储指示所述显示板的坐标的信息，所述坐标指示特征范围的所述中心位置。在此示例中，存储指示在X轴方向上的所述显示板的坐标的“x1”，所述坐标指示图6中例示的特征范围A的所述中心位置。另外，存储指示在Y轴方向上的所述显示板的坐标的“y1”，所述坐标指示图6中例示的特征范围A的所述中心位置。

在步骤S706中，位置设定单元302通过参照所述位置设定信息，在包括在操作信息中的由方向键指示的方向上选择特征范围。例如，将与图6的602中例示的特征范围A有关的信息存储作为所述选择范围存储信息。当所述方向键是右方向键时，选择特征范围F和与特征范围F相关联的信息。注意步骤S706的处理可以省略。

在步骤S707中，位置设定单元302生成用于显示与步骤S705或步骤S706中选择的所述特征范围对应的显示部分（诸如图标、按钮等）的选择范围信息。

在步骤S708中，位置设定单元302将所述选择范围信息输出至显示控制单元305。位置设定单元302还将选择显示信息输出至显示控制单元305。图8的选择显示信息802包括存储在“特征范围ID”和“显示格式”中的信息。在“特征范围ID”中，存储用于识别特征范围的信息。在此示例中，存储用于识别图6中例示的特征范围“A”的“A”。在所述“显示格式”中，存储用于将用户可辨认的效果添加至所述显示的信息。在此示例中，存储“图像类型1”作为用于利用显示控制单元305改变所述显示的颜色、反转所述显示以及在所述显示板206上显示包围所述显示的线段的信息。

在步骤S709中，位置设定单元302选择指定位置处的特征范围。例如，位置设定单元302通过参照所述位置设定信息来检测作为指定位置存储在存储单元3中的、与所述显示板的左上角的位置坐标接近的特征范围的中心位置坐标，并且选择与接近所述左上角的位置坐标的所述中心位置坐标对应的特征范围。在图6中的602的情况中，特征范围A是在信息处理装置启动之后最初选择的。然而，在所述信息处理装置启动之后选择的特征范围不限于所述显示板的左上角处的所述特征范围。

在步骤S710中，位置设定单元302生成指示已经选择了与在步骤S709中选择的所述特征范围对应的显示部分（诸如图标、按钮等）的选择范围信息。

在步骤S711中，位置设定单元302将所述选择范围信息输出至显示控制单元305。位置设定单元302还将所述选择显示信息输出至显示控制单元305。

下面描述所述执行控制单元。

当选择了信息处理装置1的MF键（方向键、输入键等）时，执行控制单元303获得与MF键输入的各个操作对应的操作信息。随后，执行控制单元303利用所获得的操作信息来判断是否选择了所述MF键当中的方向键。当选择了所述方向键时，执行控制单元303利用当前选择的特征范围和所述操作信息中的由所述方向键指示的方向，来选择由所述方向键指示的方向上存在的特征范围。

例如，执行控制单元303从存储单元3获得在执行所述特征提取之前选择的特征范围和与所述特征范围对应的中心位置坐标。当选择了信息处理装置1的MF键（方向键、输入键等）时，执行控制单元303还获得与所述MF键输入的各个操作对应的操作信息。随后，执行控制单元303利用在执行所述特征提取之前选择的所述特征范围和所获得的操作信息参照所述位置设定信息来检测下一特征范围。在检测到所述下一特征范围之后，执行控制单元303生成指示已经选择了与所检测出的特征范围对应的显示部分（诸如图标、按钮等）的选择范围信息。

另外，执行控制单元303生成用于将如下效果添加至所述显示的选择显示信息，借助所述效果，用户能够识别出当前正选择与所述显示范围对应的所述显示部分（诸如图标、按钮等）。作为所述选择显示信息，例如，用于改变所述显示的颜色、用于反转所述显示以及用于在显示板206上显示围绕所述显示的线段的信息是可用的。此外，位置设定单元302将所述选择范围信息和所述选择显示信息发送至显示控制单元305。

然而，当由所述方向键指示的方向上不存在特征范围时，执行稍后描述的预定搜索。

另选的是，当选择了所述MF键当中的所述输入键时，执行控制单元303将决定信息发送至输入控制单元304，以便选择执行与所述当前选择的特征范围对应的所述显示板的所述显示。即，当利用所述触摸板选择（触摸）了所述显示板上显示的所述图标等时，所述决定信息与用于执行与所选择的图标对应的应用的信息相同。

另外，当在正显示所述当前选择的特征范围的所述显示板的端部，所接收的操作信息中包括的由所述方向键指示的所述方向指示所述显示板的外侧，则生成用于通过滚动所述当前显示的画面来显示另一画面的显示范围信息。当操作所述触摸板时，所述显示范围信息是例如与利用手指滚动所述显示画面的事件对应的信息。此显示范围信息被发送至输入控制单元304。

此外，当浏览网络时，特征范围的移动和页面滚动可被指定为对方向键的双击等。

注意到，将与利用除所述MF键之外的键输入的操作对应的信息与所述触摸板的操作对应。例如，将利用数字键、字符输入键等输入的信息转换为使用所述触摸板时所使用的信息。与利用除所述MF键之外的键执行的操作对应的信息经由执行控制单元303输入至输入控制单元304。此外，如果将与当使用所述触摸板时利用的信息相同的信息应用为与利用除所述MF键之外的键执行的操作对应的所述信息，则所述信息可不经由执行控制单元303输入至输入控制单元304。

下面描述所述执行控制单元的操作。

图9A至图9C是例示出所述执行控制单元的操作的一个实施示例的流程图。在步骤S901中，执行控制单元303获得当选择了信息处理装置1的MF键（方向键、输入键等）时输入的并且与所述MF键的各个操作对应的操作信息。

在步骤S902中，执行控制单元303通过参照所述操作信息来判断所选择的MF键是否是方向键。当所选择的MF键是所述方向键时（在步骤S902中为“是”），则所述流程进行至步骤S903。另选的是，当所选择的MF键是所述输入键时（在步骤S902中为“否”），所述流程进行至步骤S913。

在步骤S903中，执行控制单元303通过参照与当前显示在所述显示板上的所述图像对应的位置设定信息来判断是否存在可设定为选择范围的特征范围。当存在可设定为选择范围的所述特征范围时（在步骤S903中为“是”），所述流程进行至步骤S904。当不存在可设定为所述选择范围的所述特征范围时（在步骤S903中为“否”），所述流程进行至步骤S916。

在步骤S904中，执行控制单元303通过参照所述操作信息中包括的由方向键指示的所述方向和所述位置设定信息，来判断在由所述方向键指示的方向上是否存在与所述当前选择的特征范围不同的另一特征范围。当在由所述方向键指示的所述方向上存在另一特征范围时（步骤S904中为“是”），所述流程进行至步骤S905。另选的是，当在由所述方向键指示的所述方向上不存在另一特征范围时（步骤S904中为“否”），所述流程进行至步骤S909。在由所述方向键指示的所述方向上不存在另一特征范围的情况例如是在所述当前选择的特征范围的上、下、左和右方向上不存在另一特征范围的情况。

在步骤S905中，执行控制单元303通过参照所述位置设定信息来获得所述当前选择的特征范围的中心位置坐标。

在步骤S906中，执行控制单元303利用在步骤S905中已经获得的所述特征范围的所述中心位置坐标和由所述方向键指示的所述方向，来选择由所述方向键指示的所述特征范围。

在步骤S907中，执行控制单元303生成指示已经选择了与在步骤S906中选择的所述特征范围对应的显示部分（诸如图标、按钮等）的选择范围信息。

在步骤S905至S907中，例如，当选择了所述MF键当中的方向键时，通过利用所述操作信息中包括的指示所述方向键的信息，参照存储在存储单元3中的所述位置设定信息，来检测下一个要选择的特征范围（中心位置坐标等）。

例如，当在图6的602中的特征范围A是当前被选择的特征范围时接收到指示选择了所述方向键当中的右方向键的操作信息时，通过利用所述操作信息参照位置设定信息605，来检测位于特征范围A的右方向上的特征范围F。另选的是，当在图6的602中的特征范围K是当前被选择的特征范围时接收到指示选择了所述方向键当中的左方向键的操作信息时，通过利用所述操作信息参照位置设定信息605，来检测位于特征范围K的左方向上的特征范围F。仍然另选的是，当在图6的602中的特征范围J是当前被选择的特征范围时接收到指示选择了所述方向键当中的上方向键的操作信息时，通过利用所述操作信息参照位置设定信息605，来检测位于特征范围J的上方向上的特征范围I。仍然另选的是，当在图6的602中的特征范围I是当前被选择的特征范围时接收到指示选择了所述方向键当中的下方向键的操作信息时，通过利用所述操作信息参照位置设定信息605，来检测位于特征范围I的下方向上的特征范围J。

在步骤S908中，执行控制单元303将所述选择范围信息输出至显示控制单元305。执行控制单元303还将选择显示信息输出至显示控制单元305。

在步骤S909中，执行控制单元303进行预定搜索。即，当从所述当前选择的特征范围选择下一特征范围时在包括在接收到的操作信息中的由方向键指示的方向上不存在特征范围时，执行控制单元303通过按照预定顺序参照位置设定信息来检测所述特征范围。下面描述所述预定搜索。图10例示出所述预定搜索的一个实施示例。当在选择了图10的1201中的特征范围A时选择了下方向键时，向下方向上不存在特征范围，并且不能检测到要选择的特征范围。因此，当尽管执行控制单元303在显示板1201的向下方向上搜索特征范围直至显示板1201的底端，但仍不能够检测到特征范围时，执行控制单元303在间隔预定宽度W1处（如图10的箭头1202所示），从显示板1201的顶端在向下方向上搜索特征范围。所述执行控制单元通过重复此操作来搜索特征范围。在此示例中，检测到特征范围I。在本示例中按照如上方式进行所述搜索。然而，本预定搜索不限于此。

在步骤S910中，执行控制单元303选择利用所述搜索检测到的所述特征范围。在步骤S911中，执行控制单元303生成指示已经选择了与在步骤S910中选择的所述特征范围对应的显示部分（诸如图标、按钮等）的选择范围信息。

在步骤S912中，执行控制单元303将所述选择范围信息输出至显示控制单元305。执行控制单元303还将所述选择显示信息输出至显示控制单元305。

在步骤S913中，执行控制单元303通过参照位置设定信息来获得所述当前选择的特征范围的中心位置坐标。

在步骤S914中，执行控制单元303生成指示已经选择并决定了与在步骤S913中选择的所述特征范围对应的显示部分（诸如图标、按钮等）的决定信息。

在步骤S915中，执行控制单元303将指示已经决定了所述当前选择的特征范围的所述决定信息输出至输入控制单元304。注意，还将所述决定信息输入至正被执行并且使用触摸板作为用户接口的应用软件。参见稍后描述的图11。

图11例示出根据第一实施方式的软件的一个实施示例。图11中例示的根据第一实施方式的软件存储在存储单元3中，并且由控制单元2执行。根据第一实施方式的所述软件包括例如应用软件层1301、应用框架层1302、驱动层1303等。

应用软件层1301包括一个或更多个使用所述触摸板作为用户接口的应用软件1304。

应用框架层1302包括执行控制模块1305、输入控制模块1306、显示控制模块1307等。执行控制模块1305具有上述执行控制单元303的功能。输入控制模块1306具有上述输入控制单元304的功能。显示控制模块1307具有上述显示控制单元305的功能，从应用软件1304、执行控制模块1305、输入控制模块1306等接收关于显示的信息，并且利用所接收到的信息来控制所述显示板。

驱动层1303包括键驱动器1308、触摸板驱动器1309、显示驱动器1310等。键驱动器1308获得从键控制IC 201输入的关于键操作的信息，并且将所获得的信息输入至应用框架层1302。触摸板驱动器1309获得从触摸板控制IC 203输入的关于触摸板操作的信息，并且将所获得的信息输入至应用框架层1302。可不提供触摸板驱动器1309。显示驱动器1310获得从显示控制IC 205输入的关于所述显示板上的显示的信息，并且将所获得的信息输入至应用框架层1302。

步骤S916中，在当前选择的特征范围位于所述显示板的端部并且方向键指向所述显示板外侧时（步骤S916中为“是”），所述流程进行至步骤S917。当在所述当前显示的显示板上不存在特征范围时（步骤S916中为“否”），所述处理终止。

在步骤S917中，执行控制单元303生成用于通过滚动所述画面来显示另一画面的显示范围信息。例如，如果当在图6的602中选择了所述显示板的端部的特征范围A、B、C以及E中的任一个时选择了左方向键，则执行控制单元303将用于通过向右滚动当前显示的画面来显示另一画面的信息发送至输入控制单元304。另选的是，当在图6的602中选择了所述显示板的端部的特征范围P、Q、R、S以及T中的任一个时选择了右方向键时，执行控制单元303将用于通过向左滚动当前显示的画面来显示另一画面的信息发送至输入控制单元304。仍然另选的是，如果当在图6的602中选择了所述显示板的端部的特征范围A、F、K以及P中的任一个时选择了上方向键，则执行控制单元303将用于通过向下滚动当前显示的画面来显示另一画面的信息发送至输入控制单元304。仍然另选的是，如果当在图6的602中选择了所述显示板的端部的特征范围E、U以及T中的任一个时选择了下方向键，则执行控制单元303将用于通过向上滚动当前显示的画面来显示另一画面的信息发送至输入控制单元304。

在步骤S918中，执行控制单元303将所述显示范围信息输出至输入控制单元304。

下面描述所述输入控制单元。

输入控制单元304接收由执行控制单元303生成的决定信息、显示范围信息等。此外，输入控制单元304将接收的决定信息输入至应用程序，并且将所述显示范围信息发送至显示控制单元305。决定信息可被发送至显示控制单元305，用于进行指示已经决定了所述信息的显示。

下面描述输入控制单元304在接收所述决定信息时执行的操作。例如，当所接收到的决定信息指示与当前选择的特征范围的中心位置坐标对应的应用的图标时，输入控制单元304将指示要执行与所述图标对应的所述应用的信息发送至显示控制单元305。此示例涉及所述决定信息指示所述图标的情况。然而，所述决定信息可指示按钮（图6的U）等。

下面描述所述显示控制单元。

显示控制单元305接收从执行控制单元303或输入控制单元304发送的信息，利用所接收的信息来生成用于执行与所述触摸板的操作对应的处理的信息，并且将所生成的信息发送至显示控制IC 205。此外，显示控制单元305使用选择范围层在所述显示板上的图像中选择与选择范围信息相关联的显示部分（诸如图标、按钮等），并且将所述图像分隔为所述选择范围层和用于在所述显示板上显示原始图像的图像合成层。即，显示控制单元305执行用于在图像合成层上叠加所述选择范围层的处理。这消除了在所述显示板上修改所述原始图像的需要。此外，通常执行用于对由应用程序创建的原始图像的差异进行重写的图像处理。因此，在已经生成所述原始图像之后，期望在所选择的显示部分（诸如图标、按钮等）上叠加指示已经选择了对应的显示部分的显示。

根据第一实施方式，产生如下效果，使得即使使用触摸板作为用户接口的应用程序也能够利用诸如方向键、输入键等的MF键进行操作，而无需针对所述应用程序增加与所述MF键的操作对应的处理。

下面描述第二实施方式。

根据第二实施方式，如果在预定持续时间内没有执行除第一实施方式的操作之外的操作，则使得指示当前选择的显示的选择范围的显示不可见（使得所述选择范围不可见）。即，当在预定持续时间内没有利用键进行输入时，认为没有执行操作（例如，所述画面保持不变），并且所述选择范围不可见，由此导致耗电量减少。

另外，在已经决定了所述当前选择的显示部分（诸如图标、按钮等）之后在更新所述显示板上显示的画面的同时，使利用MF键进行的输入无效。

描述根据第二实施方式的信息处理装置的操作。

图12A至图12C是例示出根据第二实施方式的信息处理装置的操作的一个实施示例的流程图。信息处理装置1已经启动，并且在其显示板上显示图像。在步骤S1401（特征提取处理）中，特征提取单元301针对当前显示在所述显示板上的图像，执行特征提取处理。

在步骤S1402（位置设定处理）中，位置设定单元302通过使在步骤S1中提取的所述特征范围、所述特征范围的中心位置坐标以及所述触摸板的坐标之间相关联来生成位置设定信息，并且将所生成的信息存储在存储单元3中。例如，参见图6的位置设定信息605。另外，在信息处理装置启动之后的所述初始步骤中，选择接近预定位置坐标并且存储在存储单元3中的特征范围。

在步骤S1403中，显示控制单元305将指示执行所述特征提取的次数的变量“Cnt”设定为1（Cnt=1）。显示控制单元305还将指示是否已经执行了所述特征提取的标记“Flg”设定为指示已经执行了所述特征提取的1（Flg=1）。此外，显示控制单元305激活用于测量规定时间的第二定时器。

在步骤S1404中，显示控制单元305检测是否已经利用各种类型的键202中的任意键对控制单元2进行了输入。当利用各种类型的键中的任意键进行了输入时（步骤S1404中为“是”），所述流程进行至步骤S1407。当没有利用各种类型的键中的任意键进行输入时（步骤S1404中为“否”），所述流程进行至步骤S1405。

当所述第二定时器在步骤S1405中超时时（步骤S1405中为“是”），所述流程进行至步骤S1406。当所述第二定时器没有超时时（步骤S1405中为“否”），所述流程进行至步骤S1404。

在步骤S1406中，显示控制单元305使指示当前选择的显示的选择范围的所述显示不可见（使所述选择范围不可见）。即，当在预定持续时间内没有利用键进行输入时，认为没有执行操作（例如，所述画面保持不变），并且使所述选择范围不可见，从而导致耗电量减少。

当控制单元2（或执行控制单元303）检测到已经在步骤S1407中利用MF键进行了输入时（步骤1407中为“是”），所述流程进行至步骤S1408。当控制单元2检测到已经利用除MF键之外的键进行了输入时（步骤1407中为“否”），所述流程进行至步骤S1409。

在步骤S1408中，执行控制单元303执行所述执行控制处理。在步骤S1409中，执行控制单元303对利用除所述MF键之外的键进行的输入进行控制。将利用例如数字键、字符输入键等输入的信息转换为当使用所述触摸板时利用的信息。与利用除所述MF键之外的键执行的操作对应的信息经由执行控制单元303输入至输入控制单元304。

在步骤S1410中，显示控制单元305将所述标记Flg设定为指示没有执行所述特征提取的“0”（Flg=0）。设定Flg=0的原因是：由于存在由步骤S1407至S1409中的所述处理改变显示在所述显示板上的图像的可能，因此将再一次执行所述特征提取。此外，显示控制单元305激活用于决定执行所述特征提取的间隔的第一定时器。

在步骤S1411至S1423中，当在已经利用所述输入键决定了与所述当前选择的特征范围对应的显示部分（诸如图标、按钮等）之后在利用应用更新所述画面的同时，利用MF键进行的输入无效。例如，如果持续按压MF键，则通过使MF键的输入无效来防止所述画面被所述应用无意义地更新。

在步骤S1411中，显示控制单元305检测是否已经利用各种类型的键202中的任意键进行了输入。当已经利用所述各种类型的键中的任意键进行了所述输入时（步骤S1411中为“是”），所述流程进行至步骤S1417。当没有进行所述输入时（步骤S1411中为“否”），所述流程进行至步骤S1412。

当所述第一定时器在步骤S1412中超时时（步骤S1412中为“是”），所述流程进行至步骤S1413。当所述第一定时器没有超时时（步骤S1412中为“否”），所述流程进行至步骤S1411。

如果在步骤S1413中指示执行所述特征提取的次数的所述变量Cnt大于阈值N（Cnt>N）（步骤S1413中为“是”），则所述流程返回步骤S1401。如果所述变量Cnt等于或小于所述阈值N（步骤S1413中为“否”），则所述流程进行至步骤S1414。

当在所述第一定时器超时之后执行所述特征提取的次数超过所述阈值N时，所述流程返回步骤S1401。随后，随着处理进行到步骤S1406，使指示所述当前选择的显示的所述选择范围的显示不可见（使所述选择范围不可见）。例如，即使在观看移动图像或数字地面广播的同时执行所述特征提取，也能够使由错误显示的选择范围指示的显示不可见。

在步骤S1414中，执行所述特征提取处理。在步骤S1415中，执行所述位置设定处理。

在步骤S1416中，显示控制单元305以1为单位递增所述变量Cnt（Cnt=Cnt+1），并且将所述标记Flg设定为指示已经执行了所述特征提取的“1”（Flg=1）。另外，显示控制单元305激活所述第一定时器。

当控制单元2（或执行控制单元303）检测到已经在步骤S1417中利用MF键进行了输入时（步骤1417中为“是”），所述流程进行至步骤S1419。另选的是，当控制单元2（或执行控制单元303）检测到已经利用除MF键之外的键进行了输入时（步骤1417中为“否”），所述流程进行至步骤S1418。

在步骤S1418中，对利用除所述MF键之外的键进行的所述输入进行控制。例如，将利用数字键、字符输入键等输入的信息转换为当使用所述触摸板时所使用的信息。与利用除所述MF键之外的键执行的所述操作对应的信息经由执行控制单元303输入至输入控制单元304。在步骤S1418的处理终止时，所述流程返回步骤S1411。

在步骤S1419中，显示控制单元305判断是否将所述标记Flg设定为指示已经执行了所述特征提取的“1”（Flg=1）。如果所述标记被设定为“1”（步骤S1419中为“是”），则所述流程进行至步骤S1420。如果所述标记没有被设定为“1”（步骤S1419中为“否”），则所述流程返回步骤S1411。

在步骤S1420中，执行控制单元303执行所述执行控制处理。

在步骤S1421中，显示控制单元305判断是否存在通过选择一决定而触发的决定事件（诸如更新所述显示板的画面的事件）。当存在所述决定事件时，所述流程进行至步骤S1422。当不存在所述决定事件时，所述流程进行至步骤S1423。

在步骤S1422中，显示控制单元305将指示执行所述特征提取的次数的所述变量Cnt设定为1（Cnt=1）。显示控制单元305还将指示是否已经执行所述特征提取的所述标记Flg设定为指示没有执行所述特征提取的“0”（Flg=0）。另外，显示控制单元305激活所述第一定时器。在步骤S1423的处理终止时，所述流程返回步骤S1411。

即，当在已经利用所述输入键决定与所述当前选择的特征范围对应的显示部分（诸如图标、按钮等）之后正在由应用程序更新所述画面的同时，使利用MF键进行的输入无效。

在步骤S1423中，显示控制单元305将指示已经执行所述特征提取的次数的所述变量Cnt设定为1（Cnt=1）。此外，显示控制单元305激活所述第一定时器。在步骤S1423的处理终止时，所述流程返回步骤S1411。

根据第二实施方式，产生如下效果，使得即使使用触摸板作为用户接口的应用程序也能够利用诸如方向键、输入键等的MF键进行操作，而无需针对所述应用程序增加与利用所述MF键执行的操作对应的处理。

另外，根据第二实施方式，当在预定持续时间内没有进行输入时，认为没有执行操作（例如，所述画面保持不变），并且使所选择的范围不可见，从而导致耗电量减少。

此外，当在已经决定所述当前选择的显示部分（诸如图标、按钮等）之后正在更新所述显示板上显示的画面的同时，使利用MF键进行的输入无效。

本发明不限于上述第一实施方式和第二实施方式，并且在不偏离本发明的主旨的范围内能够进行各种改进和修改。

这里引用的所有示例和条件语言目的都是用于教学目的，以辅助读者理解发明人做出的发明和概念，从而促进本技术，并且所有示例和这里引用的条件语言都是要解释为并不限于这些具体陈述的示例和条件，并且说明书中的这种示例的组织也不涉及对本发明的优劣的展示。尽管已经详细描述了本发明的实施方式，应当理解的是，在不偏离本发明的精神和范围的情况下，可以对其做出各种改变、代替和变更。

Claims (12)

1.一种能够执行应用程序并且具有显示板的信息处理装置，该信息处理装置包括：

特征提取单元，该特征提取单元通过针对显示在所述显示板上的图像执行特征提取处理来提取特征范围；

位置设定单元，该位置设定单元通过使所述特征范围与指示所述特征范围在所述显示板上的位置的位置坐标之间相关联来生成位置设定信息，并且将所述位置设定信息存储在存储单元中；以及

执行控制单元，

该执行控制单元在利用方向键进行了输入时，利用所述方向键指示的方向参照所述位置设定信息，来选择由所述方向键指示的方向上存在的位置坐标处的特征范围，并且基于指示显示在所述显示板上并与所述特征范围对应的显示部分的选择范围信息和指示如何显示所述显示部分的选择显示信息来控制所述显示板的显示，

当利用输入键选择了与当前选择的特征范围对应的所述显示板的显示部分时，该执行控制单元生成指示所述显示部分被选择的决定信息，并且基于所述决定信息控制所述应用程序的执行。

2.根据权利要求1所述的信息处理装置，其中，

当所述存储单元中没有存储特征范围时，所述位置设定单元选择接近所述显示板上的预定位置坐标的特征范围。

3.根据权利要求1所述的信息处理装置，其中，

当由所述方向键指示的方向上不存在所述特征范围时，所述执行控制单元按照预定顺序参照所述位置设定信息来检测特征范围。

4.根据权利要求1所述的信息处理装置，其中，

当所述当前选择的特征范围位于所述显示板的端部，并且由所接收的方向键指示的方向指示所述显示板的外侧时，所述执行控制单元生成用于滚动当前显示的画面来显示另一画面的显示范围信息。

5.根据权利要求1所述的信息处理装置，其中，

当在预定持续时间内没有从方向键和输入键进行输入时，使指示所述显示板上显示的显示部分正被选择的显示不可见。

6.根据权利要求1所述的信息处理装置，其中，

使在所述显示板的画面的更新中新接收的决定信息无效。

7.一种由计算机执行的信息处理方法，该信息处理方法包括以下步骤：

通过针对显示在显示板上的图像执行特征提取处理来提取特征范围；

通过使所述特征范围与指示所述特征范围在所述显示板上的位置的位置坐标之间相关联来生成位置设定信息，并且将所述位置设定信息存储在存储单元中；

在利用方向键进行了输入时，利用由所述方向键指示的方向参照所述位置设定信息，来选择由所述方向键指示的方向上存在的位置坐标处的特征范围，并且基于指示在所述显示板上显示并与所述特征范围对应的显示部分的选择范围信息和指示如何显示所述显示部分的选择显示信息来控制所述显示板的显示；以及

当利用输入键选择了与当前选择的特征范围对应的所述显示板的显示部分时，生成指示所述显示部分被选择的决定信息，并且基于所述决定信息控制所述应用程序的执行。

8.根据权利要求7所述的信息处理方法，其中，

当所述存储单元中没有存储特征范围时，所述计算机选择接近所述显示板上的预定位置坐标的特征范围。

9.根据权利要求7所述的信息处理方法，其中，

当由所述方向键指示的方向上不存在所述特征范围时，所述计算机按照预定顺序参照所述位置设定信息来检测特征范围。

10.根据权利要求7所述的信息处理方法，其中，

当所述当前选择的特征范围位于所述显示板的端部，并且由所接收的方向键指示的方向指示所述显示板的外侧时，所述计算机生成用于滚动当前显示的画面来显示另一画面的显示范围信息。

11.根据权利要求7所述的信息处理方法，其中，

当在预定持续时间内没有从方向键和输入键进行输入时，所述计算机使指示所述显示板上显示的显示部分正被选择的显示不可见。

12.根据权利要求7所述的信息处理方法，其中，

所述计算机使在所述显示板的画面的更新中新接收的决定信息无效。

Images