CN101226729B - 显示控制器、显示控制方法以及移动终端设备 - Google Patents

Abstract

一种显示控制器，包括用于在显示单元上显示字符信息的字符显示单元；用于从由字符显示单元显示的字符信息中检测预定的关键字的关键字检测单元；用于从包括预定的附加信息并且存储在存储单元中的图像信息中，检测包括相应于由关键字检测单元检测的关键字的附加信息的图像信息的图像信息检测单元；和用于在显示单元上显示由图像信息检测单元检测的图像信息的缩略图的缩略图显示单元。

Description

显示控制器、显示控制方法以及移动终端设备

对相关申请的交叉引用

本申请包含与2007年1月16日提交日本专利局的日本专利申请JP 2007-006726有关的主题，通过引用将其完整内容结合在此。

技术领域

本发明涉及显示控制器、显示控制方法、显示控制程序、以及移动终端设备，它们适合适用于处理显示在任意一个装置诸如移动电话、PHS电话(PHS：个人手持电话系统)以及PDA(PDA：个人数字助理)和笔记本/台式个人计算机上的字符信息和图像信息的装置。更具体地，本发明涉及可以自动检索和显示与将要显示的字符信息有关的图像信息的显示控制器、显示控制方法、显示控制程序、以及移动终端设备。

背景技术

日本待审专利申请公开号2004-325937(第5-6页：图4)公开了一种图像显示控制器，其中在一个接一个地显示图像的多个静止图像的连续显示过程中，可以改变静止图像的显示时间段。

在图像显示控制器的情况下，当在静止图像的串行显示过程中按下遥控器的第一按钮时，减小用于串行显示的各个静止图像的显示改变间隔，从而执行静止图像的高速显示改变。替换地，当在静止图像的连续显示过程中按下遥控器的第二按钮时，增加用于连续显示的静止图像的显示间的显示转换时间间隔，从而执行静止图像的低速显示改变。因此，即使在静止图像的连续显示过程中，可以改变各个静止图像的显示时间段。

迄今为止，如同例如将电子邮件信息作为电子邮件信息类型管理，将图像信息作为图像信息类型管理的情况，根据信息的类型单独管理存储在装置中的信息。这样一来，如果从存储在存储器中的多段图像信息中检索所希望的图像信息的话，以下面任意一种方式执行检索。一个方式是根据用户记忆的信息检索所希望的图像信息。另一个方式是列表显示各个图像信息的缩略图，并且在观看列表显示的缩略图的同时检索所希望的图像。另一个方式是，如在日本待审专利申请公开号2004-325937中公开的图像显示控制器中，一个接一个地显示多段图像信息，并且从中检索所希望的图像信息。

然而，图像信息，诸如由于用户已经忘记了图像拍摄事件，已经是不可检索的和/或已经不能被回忆起来，因此错过了显示机会的那些等，从而尽管拍摄了图像，也不能有效地使用该图像信息。

在这些情况下，希望提供一种彼此相关联地处理字符信息和图像信息，并且如果显示字符信息的话，自动地显示与将要显示的字符信息相关联的图像信息的缩略图，从而有效地利用存储在存储器中的图像信息的显示控制器、显示控制方法、显示控制程序和移动终端设备。

发明内容

根据本发明的一个实施例，显示控制器包括用于在显示单元上显示字符信息的字符显示单元；用于从由字符显示单元显示的字符信息中检测预定的关键字的关键字检测单元；用于从包括预定的附加信息并且存储在存储单元中的图像信息中，检测包括相应于由关键字检测单元检测的关键字的附加信息的图像信息的图像信息检测单元；和用于在显示单元上显示由图像信息检测单元检测的图像信息的缩略图的缩略图显示单元。

根据本发明的另一个实施例，一种显示控制方法包括步骤：在显示单元上显示字符信息；从在显示图像信息的步骤中显示的字符信息中检测预定的关键字；从包括预定的附加信息并且存储在存储单元中的图像信息中，检测包括相应于在检测预定关键字的步骤中检测的关键字的附加信息的图像信息；和在显示单元上显示在检测图像信息的步骤中检测的图像信息的缩略图。

根据本发明的另一个实施例，一种在计算机中运行的显示控制程序，该程序包括在显示单元上显示字符信息的功能；从由显示图像信息的功能显示的字符信息中检测预定的关键字的功能；从包括预定的附加信息并且存储在存储单元中的图像信息中，检测包括相应于由检测预定关键字的功能检测的关键字的附加信息的图像信息的功能；和在显示单元上显示由检测图像信息的功能检测的图像信息的缩略图的功能。

根据本发明的再一个实施例，移动终端设备包括用于在显示单元上显示字符信息的字符显示单元；用于从由字符显示单元显示的字符信息中检测预定的关键字的关键字检测单元；用于存储包括预定附加信息的图像信息的存储单元；用于从存储在存储单元中的图像信息中，检测包括相应于由关键字检测单元检测的关键字的附加信息的图像信息的图像信息检测单元；和用于在显示单元上显示由图像信息检测单元检测的图像信息的缩略图的缩略图显示单元。

根据本发明的各个实施例，将预定的附加信息添加到存储在存储单元中的各个图像信息上(以各个图像信息为单位)。当在显示单元上显示字符信息时，从将要显示的字符信息中检测关键字。然后，从包含在存储单元内的静止图像中，检测添加了与检测的关键字相关联的附加信息的图像信息，并且列表显示检测的图像信息的缩略图。

从而，可以彼此相关联地处理字符信息和各个静止图像内容。从而，可以自动地显示相应于将要显示的字符信息的图像信息的缩略图，从而可以利用包含在存储单元内的各个缩略图。

如从上述可知的，根据各个实施例，可以彼此相关联地处理字符信息和各个静止图像内容。从而，如果显示字符信息，可以自动地显示相应于将要显示的字符信息的图像信息的缩略图，从而可以利用包含在存储单元内的各个缩略图。

另外，可以将与正被显示的字符信息相关联的静止图像内容的出现自动地通知用户。因此，可以增加，例如，用户忘记或用户难以记忆或找到的静止图像的显示的机会数，从而帮助，例如，复苏用户的记忆。

附图说明

从下面的详细说明和所附的权利要求和附图中，可以明了本发明的这些和其它目的、特征和优点，其中：

图1是根据本发明的实施例的移动电话的方框图；

图2是示出了用于在该实施例的移动电话中显示与将要显示的字符信息相关的图像信息的缩略图的操作的示例流程图；

图3A到3C是示出了用于在该实施例的移动电话中显示与将要显示的字符信息相关的图像信息的缩略图的操作的示例示图；

图4是示出了用于在该实施例的移动电话中显示与将要显示的字符信息相关的图像信息的缩略图的操作的示例示图；和

图5是示出了用于在该实施例的移动电话中显示与将要显示的字符信息相关的图像信息的缩略图的操作的示例示图。

具体实施方式

本发明可以适用于移动电话。

(移动电话的电配置)

参考图1，本发明的实施例的移动电话包括天线1和用于通过基站执行无线通信的通信电路2；用于获得声学输出诸如进入的声音和接收的语音的扬声器部分3；用于接收或收集传输的语音的麦克风部分4；用于显示图像(例如，运动和/或静止图像)和字符的显示部分5；用于执行诸如字符输入和所希望的菜单(或菜单项)的菜单选择的操作的操作部分6；由LED(发光二极管)构成的用于将，例如，外出和进入的呼叫可视地通知用户的发光部分7；用于拍摄所希望的对象的静止图像和运动图像的照相机部分8；用于通过振动移动电话的外壳将外出和进入呼叫通知用户的振动部分9；用于计数当前时间的计时器10；和用于检测移动电话的当前位置的天线11和GPS单元12(GPS：全球定位系统)。

移动电话还包括存储器13和控制器部分14。存储器13包含，例如，用于通过基站执行无线通信处理的通信处理程序(通信程序)、各种应用程序、以及将由各个应用程序处理的各种类型的数据(内容)。控制器部分14提供对移动电话的整体控制(控制器部分14提供各种类型的控制操作，但是除非有必要，此后不在每个场合描述这种控制)。

更具体地，存储器13包含各种类型的程序。它们是提供诸如照相机单元8的图像拍摄控制操作功能，以及用于由照相机单元8拍摄或获取的，或通过网络和输入端子提取的运动和静止图像的观看器功能的照相机控制程序；用于控制，例如，电子邮件创建以及传输和接收的电子邮件管理程序；用于管理存储着用户日程的日程表的日程表管理程序；用于观看或浏览驻留在预定网络诸如互联网上的Web站点的Web浏览程序；用于管理电话目录的电话目录管理程序；和用于执行音乐内容的播放的音乐播放器程序。

存储器13还包含关键字数据库和显示控制程序。关键字数据库包含如果显示字符，例如Web站点的主页，分别从将要显示的字符中检测的关键字。显示控制程序操作，以便检索包括相应于从将被显示的字符中检测的各关键字的附加信息的图像信息(诸如静止图像或运动图像内容)，并且显示分别检测的图像信息的缩略图。

存储器13还包含各种其它数据，例如：

存储着用户的所希望的日程的日程表；存储静止图像、电话号码、电子邮件地址和用户的熟人以及朋友的生日的电话目录；

将根据音乐播放器程序播放的音乐内容；

将根据照相机控制程序的观看器功能播放的静止和运动图像内容；

传输和接收的电子邮件内容；和

传输和接收的电话呼叫和电子邮件片段的传输和接收呼叫日志。

(静止图像内容的附加信息)

如上所述，“静止图像内容”被包含在存储器13中。当将各个静止图像存储在存储器13中时，图像被与添加到其上的附加信息一起存储在其中。用于各个静止图像内容的附加信息包括，例如，拍摄时间/存储时间信息、管理题目(标题(主题名称))、文件类型信息、文件大小信息、获得来源信息和拍摄位置信息。

拍摄时间信息表示由计时器10计量的时间的信息。当在存储器13中存储由照相机单元8拍摄或获得的静止图像时，由控制器部分14提取时间信息，并且添加到静止图像内容。

然而，静止图像包括例如从预定的Web站点下载的那些类型。不给这类的静止图像提供拍摄时间信息。在这种静止图像的情况下，当在存储器13中存储静止图像内容时，控制器部分14从计时器10提取时间信息(＝存储时间)，并且然后将时间信息添加到静止图像。

管理题目是指示静止图像内容的题目的数据。当在存储器13中存储由照相机单元8拍摄的静止图像内容时，控制器部分14自动地将相应于从计时器10提取的当前时间信息的图像日期和拍摄时间添加到该静止图像内容。即，最初，作为由照相机单元8拍摄的静止图像内容的管理题目，将拍摄日期和拍摄时间自动地添加到静止图像。

在静止图像内容被存储在存储器13中之后可对管理题目进行编辑。为了编辑管理题目，用户在所希望的时间显示管理题目编辑屏幕，并且操作操作部分6，从而在屏幕上输入管理题目。作为响应，控制器部分14以自动添加到静止图像内容的拍摄日期和拍摄时间覆盖由用户输入的管理题目。从而将静止图像内容的管理题目改变为所希望的管理题目。

对于通过，例如，从预定的Web站点下载获得的静止图像内容中的已经具有添加的管理题目的静止图像内容，控制器部分14按照原有形式处理添加的管理题目。然而对于没有添加的管理题目的静止图像，控制器部分14自动地添加下载操作的日期和时间作为管理题目。即使这种自动添加的管理题目也可由用户在管理题目编辑屏幕上任意改变。

文件类型信息是指示静止图像内容的图像格式的信息。更具体地，将指示各种格式，诸如JPEG(联合图像专家组)、GIF(可交换图像格式)、和SWF(“Shockwave Flash”(注册商标))中的任意一个的信息添加到静止图像内容。

文件大小信息是指示静止图像内容的文件大小的信息。例如，更具体地，将表示例如45K字节或2M字节的文件大小的数值添加到静止图像内容。

获得来源信息是指示静止图像内容的获得来源的信息。例如，对于由照相机单元8拍摄的静止图像内容，存在指示该内容的获得来源是照相机单元8的添加的信息。可替换地，对于例如从预定Web站点下载的静止图像内容，存在指示获得来源是该Web站点的添加的信息。

拍摄位置信息表示将被添加到由照相机单元8拍摄的静止图像内容的当前位置信息。在图像拍摄中，由控制器部分14提取由天线11和GPS单元12检测的当前位置信息，并且作为拍摄位置信息添加到静止图像内容。

对于通过例如从预定的Web站点下载而获得的静止图像内容中的已经具有添加的拍摄位置信息的静止图像内容，控制器部分14按照其原来形式处理添加的管理题目。然而对于没有拍摄位置信息的静止图像内容，控制器部分14自动地将在下载时由天线11和GPS单元12检测的当前位置信息作为拍摄位置信息添加到该静止图像内容。

(用于显示与字符信息相关的图像信息的显示操作)

根据本实施例的移动电话，在显示部分5上显示例如Web站点的主页内的字符，自动地检索和显示与将要显示的字符相关的静止图像。图2是示出了用于显示与该字符相关的图像信息的显示操作的例程的流程图。图2的流程图中的处理以根据存储在存储器13中的显示控制程序，对例如电子邮件、日程或驻留在Web站点上的主页内的文本信息(字符信息)的检测的定时开始。

在步骤S1，控制器部分14尝试从预期显示在显示部分5上的文本信息中检测与存储在存储器13内的关键字数据库中存储的关键字之一相一致或匹配的所希望的关键字。作为特定的例子，存储在关键字数据库中的关键字包括位置名称，诸如“Shinagawa”、“Shinbashi”、“Ginza”、“Tokyo”、“Sapporo”和“Hokkaido”；常去的地方的名称，诸如“游乐园”、“动物园”、“水族馆”、“XYZ主题公园”、“XYZmomijien(彩色秋季假日特色公园)”；建筑名称，诸如“XYZ建筑”和“XYZ山”；国家事件日期，诸如“2月14日(情人节)”、“5月5日(儿童节)”、“12月24日(圣诞节)”；以及事件名称，诸如“聚餐”、“运动会”、“文化节”；体育名称，诸如“棒球”、“足球”、“排球”、“游泳”；以及与日期相关的术语或短语，诸如“昨天”、“今天”、“明天”、“后天”。

存储器13中的关键字数据库中还包括表示，例如，位置信息，例如，各个建筑物和常去的地点的位置信息关键字。在当前的例子中，设想，例如，各个建筑物和常去的地点的位置信息存储在关键字数据库中继续进行描述。然而，可以用控制器部分14访问提供例如各个建筑物和常去的地点的这种位置信息的发布服务的预定网络上的服务器的方式，获得例如各个建筑物和常去的地点的这种位置信息。

因此，控制器部分14尝试从预期显示在显示部分5上的文本信息中检测与存储在关键字数据库中的关键字之一匹配的所希望的关键字。如果与存储在关键字数据库中的关键字之一匹配的所希望的关键字未出现在预期显示在显示部分5上的文本信息中，则图2中的流程图的处理简单地终止。

随后，在步骤S2，对被用作从文本信息中检测的关键字的字符进行高亮显示处理，并且然后显示在显示部分5上。以例如给所述字符添加下划线或底线，或改变字符的显示颜色，或增加字符的显示亮度(即，字符被高亮显示)的方式对所述字符执行高亮显示处理。

图3A是一个示图，示出了包括文本(消息文本)中被进行了高亮显示处理(或此后称为“高亮显示的”)的关键字的收到的电子邮件内容的显示例子。更具体地，在图3A所示的例子中，在收到的电子邮件内容中包括关键字“昨天”和“游乐园”。在该情况下，通过例如给各个关键字“昨天”和“游乐园”添加底线执行高亮显示处理，并且然后显示该文本。在显示包含在其它对象诸如日程、Web站点的主页或记事本中的文本信息时，以类似的方式执行高亮显示处理。同样在这种情况下，控制器部分14操作，以便检测与预定关键字(多个)类似的关键字(多个)，并且在显示部分5上显示该文本。

再次参考该流程图，上述的处理使得用户能够认识到存储器13包含相应于高亮显示的关键字的静止图像内容(多个)。

随后，在步骤S3，控制器部分14从存储器13中检测包括相应于从文本信息中检测的关键字的附加信息的静止图像内容。更具体地，在图3A中所示的例子的情况下，电子邮件内容的文本包括关键字“昨天”。这样，控制器部分14从存储器13中检测被添加了相应于收到的电子邮件内容的接收日期的前一天的拍摄时间/存储时间信息的静止图像内容。

另外，由于收到的电子邮件内容的文本包括关键字“游乐园”，控制器部分14从存储器13中检测作为管理题目添加了字符“游乐园”的静止图像内容。

可替换地，在正确的名称，诸如“XYZ大陆”或“XYZ动物园”被检测为关键字的情况下，控制器部分14从存储器13中检测添加了正确的名称作为管理题目的静止图像内容。可替换地，在例如以正确的名称指示的游乐园或建筑物的情况下，同样假设其所在位置的位置信息是已知的。这样，控制器部分14从关键字数据库中检测相应于检测的正确名称的位置信息，并且然后从存储器13中检测添加了从关键字数据库中检测的位置信息作为附加信息的静止图像内容。

更具体地，控制器部分14不仅从存储器13中检测相应于该关键字的静止图像内容，而且还检测包括与该关键字相关的附加信息的静止图像内容。

随后，当指定相应于高亮显示的关键字的静止图像内容的缩略图的显示时，通过操作操作部分6以便执行显示指定操作，用户执行预定的操作。在步骤S4，控制器部分14监视显示指定操作的出现或未出现；并且在检测到显示指定操作时，然后，处理进入步骤S5。

在步骤S5，控制器部分14执行缩略图的显示的显示控制。更具体地，形成包括相应于进行了显示指定操作的关键字的附加信息的静止图像内容的缩略图(即，形成在步骤S3检测的静止图像内容的缩略图)。然后，如图3B中所示，将形成的缩略图列表显示在显示部分5上。作为例子，在图3A中所示的例子的情况下，在显示部分5上有在收到的电子邮件内容的接收日期的前一天拍摄(或存储)的静止图像内容的列表显示的缩略图。

作为另一个例子，在显示部分5上有相关的静止图像内容的列表显示的缩略图。它们是例如添加了与关键字“游乐园”相关的附加信息诸如“在游乐园”或“游乐园中的弗累斯大转轮”的静止图像内容，以及包括游乐园的位置信息作为附加信息的静止图像内容的缩略图。

从而，可以彼此相关联地处理字符信息和各个静止图像内容。如果显示字符信息，自动地显示与将要显示的字符信息相关联的静止图像内容的缩略图，从而可以利用包含在存储器13中的各个缩略图。

另外，可以将与将被显示的字符信息相关的静止图像内容的出现自动地通知用户。因此，可以增加，例如，用户忘记或用户难以记忆或找到的静止图像的显示的机会数，从而辅助例如唤醒用户的记忆。

假设用户希望在显示屏上显示相应于列表显示的缩略图中的所希望的缩略图的静止图像内容。在这种情况下，用户通过操作操作部分6将光标放置在屏幕上所希望的缩略图上，并且然后按下回车键。

如上所述，由控制器部分14监视显示指定操作的出现或未出现。在检测到被执行以便显示静止图像内容的显示指定操作时，处理进入步骤S7。在步骤S7，例如如图3C中所示，在显示部分5上显示相应于用户从列表显示的缩略图中选择的缩略图的静止图像内容。然后，图2的流程图中所示的处理终止。

因此，在上述的例子中，显示相应于从列表显示的缩略图中选择的缩略图的静止图像内容。然而，该处理不限于此。假设从列表显示的缩略图中选择了所希望的缩略图。在这种情况下，可以自动激活具有相应于该缩略图的静止图像内容的附加文件的电子邮件的创建屏幕(在HTML邮件的情况下，该静止图像内容可以被粘贴到激活的电子邮件创建屏幕的文本部分上)。

可替换地，可以安排为如果从列表显示的缩略图中选择所希望的缩略图，添加所谓的“书签”，以便使得可以稍后观看内容。可替换地，可以安排为可以将相应于列表显示的缩略图的各个静止图像内容集中移动或拷贝到所希望的文件夹中。

(实施例的效果/优点)

从上面的描述可清楚地知道，根据该实施例的移动电话，将附加信息，诸如管理题目、拍摄日期(拍摄时间)、以及拍摄地点(位置信息)，添加到各个静止图像内容(以每个静止图像内容为单位)。当显示例如电子邮件内容或日程内容(日程表中的内容)中的字符信息时，从将要显示的字符信息中检测关键字。然后，从包含在存储器13中的静止图像中，检测添加了与检测的关键字相关的附加信息的静止图像，并且在显示部分5上列表显示检测的静止图像内容的缩略图。

从而，可以彼此相关联地处理字符信息和各个静止图像内容。如果在显示部分5上显示字符信息，自动地在显示部分5上显示与将要显示的字符信息相关联的静止图像内容的缩略图，从而可以利用包含在存储器13中的各个缩略图。

另外，可以将与将被显示在显示部分5上的字符信息相关的静止图像内容的出现自动地通知用户。因此，可以增加，例如，用户忘记或用户难以记忆或找到的静止图像的显示的机会数，从而辅助例如唤醒用户的记忆。

(修改例)

从图3A和3B可知，在上述的实施例中，与文本信息分开地列表显示缩略图。然而，如图4中所示，可以与文本信息一起列表显示缩略图。在该情况下，同样可以获得相同的效果/优点。

可替换地，如图5中所示，可以靠近关键字显示相应于该关键字的缩略图。在该情况下，可以取而代之在显示部分5上显示指示静止图像内容的出现的图标(或消息)。即使在该情况下，也可以获得与上述相同的效果/优点。

因此，已经设想本发明适用于移动电话描述了实施例和其修改例。然而，通过将本发明应用于处理字符信息和图像信息的设备，诸如PHS电话(PHS：个人手持电话系统)、PDA(PDA：个人数字助理)和笔记本/台式个人计算机、以及移动游戏机中任意一个，可以获得与上述类似的效果。

本发明不限于上述仅以本发明的一个例子的方式描述的每个实施例和修改例，而是当然可以对除了上述的实施例之外的实施例做出各种修改，而不脱离本发明的技术精神和范围。

Claims (6)

1.一种显示控制器，包括：

用于控制显示装置显示字符信息的字符显示装置；

用于从在所述字符显示装置的控制下显示的字符信息中检测预定的关键字的关键字检测装置；

用于从包括预定的附加信息并且存储在存储装置中的图像信息中，检测包括相应于由所述关键字检测装置检测的关键字的附加信息的图像信息的图像信息检测装置；和

用于控制所述显示装置显示由所述图像信息检测装置检测的图像信息的缩略图的缩略图显示装置。

2.如权利要求1的显示控制器，其中：

所述关键字检测装置执行高亮显示处理，从而高亮显示由所述字符显示装置显示的字符信息中的被用作检测出的预定关键字的字符信息，并且将其显示在所述显示装置上；和

当已经执行了选择操作，以便选择被用作进行了所述关键字检测装置的高亮显示处理的字符信息的关键字时，所述缩略图显示装置进行操作，从而将由所述图像信息检测装置检测的图像信息中的相应于所述选择的关键字的图像信息的缩略图列表显示在所述显示装置上。

3.如权利要求1的显示控制器，其中所述缩略图显示装置进行操作，从而将由所述图像信息检测装置检测的图像信息的缩略图与在所述字符显示装置的控制下显示的字符信息一起显示在所述显示装置上。

4.如权利要求3的显示控制器，其中所述缩略图显示装置进行操作，从而将由所述图像信息检测装置检测的图像信息的缩略图列表显示在显示了所述字符信息的所述显示装置上的剩余显示域上。

5.一种显示控制方法，包括步骤：

在显示装置上显示字符信息；

从在所述显示字符信息的步骤中显示的字符信息中，检测预定的关键字；

从包括预定的附加信息并且存储在存储装置中的图像信息中，检测包括相应于在所述检测预定关键字的步骤中检测的关键字的附加信息的图像信息；和

在所述显示装置上显示在所述检测图像信息的步骤中检测的图像信息的缩略图。

6.一种移动终端设备，包括：

用于控制显示装置显示字符信息的字符显示装置；

用于从在所述字符显示装置的控制下显示的字符信息中检测预定的关键字的关键字检测装置；

用于存储包括预定附加信息的图像信息的存储装置；

用于从存储在所述存储装置中的图像信息中检测包括相应于由所述关键字检测装置检测的关键字的附加信息的图像信息的图像信息检测装置；和

用于控制所述显示装置显示由所述图像信息检测装置检测的图像信息的缩略图的缩略图显示装置。

Images