CN1921520A - 在计算器模式中操作便携式终端的方法及其便携式终端 - Google Patents

Abstract

提供一种在具有相机的便携式终端中操作计算器模式的设备和方法。该设备和方法包括以下步骤：从由相机拍摄的图像中识别算术表达式，并显示识别的算术表达式；当编辑模式键被输入时转换到编辑模式，执行编辑操作并根据编辑操作来编辑显示的算术表达式；以及当计算执行键被输入时，根据编辑的算术表达式来执行算术计算并输出计算结果。

Description

在计算器模式中操作便携式终端的方法及其便携式终端

                        技术领域

本发明涉及一种在便携式终端中操作计算器模式的设备和方法。更具体地说，本发明涉及这样的一种在便携式终端中操作计算器模式的设备和方法，其中，在不需要直接输入算术表达式的情况下，使用便携式终端的相机功能来识别算术表达式，并根据识别的算术表达式来执行算术计算。

                        背景技术

诸如蜂窝式电话、PDA(个人数字助理)、PCS(个人通信业务)电话、IMT-2000(国际移动通信-2000)终端和GSM(全球移动通信系统)终端的便携式终端表示使得用户在移动的同时能够进行通信和数据交换的工具。

这些便携式终端已经在整个世界得到广泛使用并被认为是必需品。在许多情况下，这些必需品总是被随身携带。由于这一事实，越来越趋向于使移动通信终端更小、更薄、更轻。这样便于携带。此外，移动通信终端具有更多多媒体功能，增加了各种功能可被执行的简易性。以后，便携式终端将进一步小型化，执行更多功能，用于更多目的并且适于各种多媒体或互联网环境。

尽管便携式终端的基本功能是实现远程通信功能，但是其还提供附加功能服务。这些附加功能服务包括诸如以下服务：用于存储和搜索电话号码的存储器功能、自动的信号接收和发送功能、当前时间和日期显示功能、自动电源切断功能、紧急拨号功能、锁定功能、闹铃功能、区域代码确认功能、旋律输入功能和用于执行算术计算的计算器功能等。

通常，在提供用于执行算术计算的计算器功能的便携式终端中，当通过用户的键操作从菜单中选择计算器功能时，便携式终端在计算器模式下操作，在所述模式中，由数字和算术符号组成的算术表达式通过键按钮的操作被输入，随后算术计算被执行。因此，在用户频繁地以长且复杂的算术表达式使用便携式终端的计算器功能的情况下，通过键按钮的直接操作来使用计算器功能是不方便的。

因此，需要一种在计算器模式下操作便携式终端的改进方法，从而可在不需要直接输入算术表达式的情况下执行算术计算。

                        发明内容

本发明示例性实施例的一方面在于至少解决上述问题和/或缺点，并至少提供下述优点。因此，本发明示例性实施例的一方面已用于解决现有技术中出现的上述问题，本发明示例性实施例的目的在于提供一种在便携式终端中操作计算器模式的方法，其中，使用相机来识别算术表达式，并且根据识别的算术表达式来执行算术计算，不需要直接输入算术表达式的各个分量。

为了实现这一目的，根据本发明示例性实施例的一方面，提供一种在具有相机的便携式终端中操作计算器模式的方法。该方法包括以下步骤：从由相机拍摄的图像中识别算术表达式并显示识别的算术表达式；当编辑模式键被输入时转换到编辑模式，执行编辑操作并根据编辑操作来编辑显示的算术表达式；以及当计算执行键被输入时，根据编辑的算数表达式来执行算术计算并输出计算结果。

本发明示例性实施例的另一目的在于提供一种在便携式终端中操作计算器模式的方法，其中，可根据从通过相机识别的算术表达式中选择的算术表达式来执行算术计算。

为了实现这一目的，根据本发明示例性实施例的另一方面，提供一种在具有相机的便携式终端中操作计算器模式的方法。该方法包括以下步骤：从由相机拍摄的图像中识别至少一个算术表达式并显示识别的算术表达式；通过选择操作从至少一个显示的算术表达式中选择一个算术表达式，并显示选择的算术表达式；以及当计算执行键被输入时，根据显示的算术表达式来执行算术计算并输出计算结果。

通过下面结合附图公开本发明示例性实施例的详细描述，本发明的其它目的、优点和显著特点将对于本领域的技术人员变得清楚。

                        附图说明

通过下面结合附图进行的详细描述，本发明特定示例性实施例的上述和其它目的、特点和优点将会变得更加清楚，其中：

图1是示出根据本发明示例性实施例的便携式终端的整个结构的框图；

图2是示出根据本发明第一示例性实施例在计算器模式下便携式终端的操作的流程图；

图3是示出根据本发明第二示例性实施例在计算器模式下便携式终端的操作的流程图；

图4是示出根据本发明第一和第二示例性实施例用于通过相机识别至少一个算术表达式的操作的流程图；

图5是示出根据本发明第一和第二示例性实施例用于编辑算术表达式的操作的流程图；

图6A至图6C是示出应用于本发明第一示例性实施例的算术表达式的示图；

图7A至图7C是示出应用于本发明第二示例性实施例的算术表达式的示图。

在整个附图中，相同的附图标号将被理解为指的是相同的部件、特点和结构。

                        具体实施方式

提供诸如详细的结构和部件的在描述中限定的内容以有助于全面理解本发明的实施例。因此，本领域的技术人员将理解：在不脱离本发明的范围和精神的情况下，可对在此描述的实施例进行各种改变和修改。此外，为了清楚和简洁，将省略公知功能和结构的描述。

图1是示出根据本发明示例性实施例的便携式终端的框图。在本发明的示例性实施例中，便携式终端可包括移动电话。

参照图1，RF部分21执行便携式终端的远程通信功能。RF部分21包括：RF发射器(未示出)，用于对将被发送的信号进行上变换和放大；RF接收器(未示出)，用于对将被接收的信号进行低噪声放大和下变换。

调制解调器23包括：发送器，用于对将被发送的信号进行编码和调制；接收器，用于对将被接收的信号进行解码和解调。

音频处理部分25构成编解码器。所述编解码器包括：数据编解码器，用于处理分组数据等；音频编解码器，用于处理诸如语音等的音频信号。音频处理部分25作用于通过音频编解码器将从调制解调器23接收的数字音频信号转换成模拟信号并再现转换的模拟信号。音频处理部分25还作用于通过音频编解码器将从麦克风产生并发送的模拟音频信号转换成数字音频信号，并将转换的数字音频信号发送到调制解调器23。可单独地提供编解码器，或者将编解码器包括在控制部分10。

键区27具有用于输入数字和字词信息的键以及用于建立各种功能的功能键。

存储器29包括程序存储器和数据存储器。程序被存储在程序存储器中以控制便携式终端的一般操作，根据本发明示例性实施例，从由相机拍摄的图像中感知算术表达式并执行算术计算。数据存储器作用于临时存储在运行程序期间产生的数据。根据本发明示例性实施例，数字数据和算术符号数据被存储在数据存储器中。

控制部分10作用于控制便携式终端的全部操作，并可包括调制解调器23和编解码器。控制部分10根据本发明示例性实施例控制相机，从而从拍摄的图像中感知算术表达式，显示感知的算术表达式，当编辑模式键被输入时转换到编辑模式，并且执行编辑操作。如果计算执行键被输入，则根据感知的算术表达式由包括在控制部分10中的计算器来执行算术计算，并且输出计算结果。此外，如果多个感知的算术表达式被输入，则这些算术表达式连同它们各自的选择框被显示，从而所述感知的算术表达式之一可被选择。

相机50拍摄图像数据，并具有用于将拍摄的光信号转换成电信号的相机传感器。这里，假设相机传感器是CCD(电荷耦合装置)传感器，但是可使用任何适合的传感器装置。

信号处理部分60将从相机50输出的信号转换成图像信号。这里，信号处理部分60能够以DSP(数字信号处理器)来实现。

图像处理部分70作用于产生显示数据以显示从信号处理部分60输出的图像信号。在控制部分10的控制下，图像处理部分70根据显示部分80的规格发送接收的图像信号，并用于压缩和解压缩图像数据。图像处理部分70在控制部分10的控制下发送输出到显示部分80的图像数据的开始地址，或者改变并发送所述开始地址。

显示部分80显示从图像处理部分70输出的图像数据。这里，显示部分80可包括液晶显示器(LCD)。在这种情况下，显示部分80包括：LCD控制器、用于存储图像数据的存储器和LCD部件。在LCD以触摸屏实现的情况下，键区27和LCD用作输入部分。显示部分80包括图像数据显示部分，图像数据通过所述图像数据显示部分被输出。

参照图1来描述如上所述构造的便携式终端的操作，如果用户通过键区27执行拨号操作并选择发送模式，则控制部分10感测到这一情况。通过RF部分21将通过调制解调器23接收的拨号信息处理并转换成RF信号。转换的RF信号随后被输出，如果对方用户产生响应信号，则由RF部分21和调制解调器23来感测这一信号。当语音通信路径通过音频处理部分25被创建时，用户可执行通信。在接收模式中，控制部分10通过调制解调器23感测在接收模式下的情况，并通过音频处理部分25产生响铃信号。当用户应答时，控制部分10感测到用户的应答。当语音通信路径通过音频处理部分25被创建时，用户可执行通信。尽管语音通信在发送和接收模式中作为示例，但是容易理解到用于发送和接收分组数据和图像数据的数据通信也可被执行。在待机状态或者文本通信的情况下，控制部分10将通过调制解调器23处理的文本数据显示在显示部分80上。

以下，将描述在如上所述构造的便携式终端中根据本发明示例性实施例使用相机感知算术表达式，并计算感知的算术表达式的操作。在待机状态中，如果用户通过键区27输入相机感知计算模式键，则控制部分10控制相机50、图像处理部分70、存储器29和显示部分80来执行相机功能。此外，控制部分10从通过相机功能获得的图像中感知算术表达式，并显示感知的算术表达式。然后，当用户通过键区27输入编辑模式键时，控制部分10控制存储器29和显示部分80转换到编辑模式，显示的算术表达式通过用户进行的编辑操作被编辑。接着，如果用户通过键区27输入计算执行键，则控制部分10控制存储器29和显示部分80根据编辑的算术表达式执行算术计算，并显示计算结果。

图2是示出根据本发明第一示例性实施例在计算器模式下便携式终端的操作的流程图。图6A至图6C是示出应用于本发明第一示例性实施例的算术表达式的示图。

将参照图2以及图6A至图6C来描述通过便携式终端的相机功能感知算术表达式并根据感知的算术表达式执行算术计算的操作。在作为待机状态的步骤201，如果用户通过键区27输入相机感知计算模式键，则控制部分10在步骤203感测到这一情况，并进行到步骤205。否则，装置在步骤204继续执行当前的功能。在步骤205，控制部分10执行相机功能，从而诸如包括算术表达式的文档的图像被拍摄，并且算术表达式从拍摄的图像中被识别。稍后将参照图4进一步详细描述在步骤205使用相机功能感知算术表达式的操作。

控制部分10控制显示部分80，并如图6A所示显示在步骤205感知的算术表达式。在步骤207，算术表达式以可被编辑的文本数据的形式被显示。

如果用户通过键区27输入编辑模式键，则控制部分10在步骤209感测到这一情况，并在步骤211转换到编辑模式。接着，如图6B所示的编辑的算术表达式被显示。稍后将参照图5进一步详细描述在步骤211执行编辑操作并编辑算术表达式的操作。

接着，如果用户通过键区27输入计算执行键，则控制部分10在步骤213感测到这一情况，并进行到步骤215。在步骤215，控制部分10控制存储器29执行算术表达式的算术计算。此外，控制部分10在步骤217控制显示部分80输出并显示如图6C所示的计算结果。这时候，当执行下一算术表达式的算术计算时，可继续使用显示的计算结果，如果新的算术表达式被输入，则在去除前面的算术表达式的同时显示所述新的算术表达式。控制部分10在步骤217控制音频处理部分25将通过执行算术表达式的算术计算获得的计算结果输出为音频数据。

图3是示出根据本发明第二示例性实施例在计算器模式下便携式终端的操作的流程图，图7A至图7C是示出应用于本发明第二示例性实施例的示例性算术表达式的示图。

将参照图3以及图7A至图7C来描述通过便携式终端的相机功能感知算术表达式，选择所述算术表达式之一，并根据选择的算术表达式执行算术计算的操作。在作为待机状态的步骤301中，如果用户通过键区27输入相机感知计算模式键，则控制部分10在步骤303感测到这一情况，并进行到步骤305。否则，装置在步骤304继续执行当前的功能。在步骤305，控制部分10执行相机功能，从而例如包括算术表达式的文档的图像被拍摄，并且算术表达式从拍摄的图像中被感知。稍后将参照图4进一步详细描述在步骤305使用相机功能感知算术表达式的操作。

控制部分10进一步控制存储器29和显示部分80如图7A所示显示在步骤305感知的算术表达式连同它们各自的选择框。这里，算术表达式以可被编辑的文本数据的形式被显示，并且只有当多个算术表达式被感知时才显示选择框。当多个算术表达式被感知时，可产生并显示算术表达式列表，或者可向各个感知的算术表达式提供索引，从而可显示索引号。

如果用户使用键区27选择显示的算术表达式之一，则控制部分10在步骤309感测到这一情况，并在步骤311控制显示部分80如图7B所示仅显示所述选择的算术表达式。

其后，如果用户通过键区27输入编辑模式键，则控制部分10在步骤313感测到这一情况，在步骤315转换到编辑模式，进行编辑操作，根据所述编辑操作编辑显示的算术表达式，并显示编辑的算术表达式。稍后将参照图5进一步详细描述在步骤315进行编辑操作并编辑算术表达式的操作。

接着，如果用户通过键区27输入计算执行键，则控制部分10在步骤317感测到这一情况，并进行到步骤319。在步骤319，控制部分10控制存储器29执行算术表达式的算术计算。此外，控制部分10在步骤321控制显示部分80输出并显示如图7C所示的计算结果。这时候，当执行下一算术表达式的算术计算时，可继续使用显示的计算结果，如果新的算术表达式被输入，则在去除前面的算术表达式的同时显示所述新的算术表达式。控制部分10在步骤321控制音频处理部分25将通过执行算术表达式的算术计算获得的计算结果输出为音频数据。

图4是示出根据本发明第一和第二示例性实施例用于通过相机感知至少一个算术表达式的操作的流程图。参照图4来描述通过相机来感知算术表达式的操作，如果相机感知计算模式键被输入，则控制部分10在步骤401控制相机50、信号处理部分60、图像处理部分70和显示部分80转换到相机拍摄模式。相机拍摄模式进行到预览模式以通过信号处理部分60将由相机50拍摄的图像信号发送到图像处理部分70。此外，控制部分10控制图像处理部分70和显示部分80将图像数据显示在显示部分80上。

其后，如果用户在步骤403通过键区27输入拍摄键，则控制部分10进行到步骤405以拍摄图像。这里，根据本发明示例性实施例，图像可以是包括算术表达式的文档的图像。如果拍摄完成，则控制部分10在步骤407控制存储器29驱动文本识别程序并将拍摄的图像的图像数据转换成文本数据。并且，控制部分10在步骤409分析转换的文本数据并控制存储器29将文本数据与已经存储在存储器29中的数字数据和算术符号数据进行匹配。然后，控制部分10在步骤411读出匹配的数字数据和算术符号数据。接着，控制器10在步骤413使用读出的数字数据和算术符号数据建立算术表达式。例如，如果文本数据包括：字词数据、数字数据和算术符号数据，则将文本数据与已经存储在存储器29中的数字数据和算术符号数据进行匹配使得可以仅读出数字数据和算术符号数据，而排除字词数据。在这种情况下，只有算术表达式可从文本数据中提取。

例如，如果根据用户的请求，句子“((100+2)*2+(10+20+30)*2)的算术计算结果是什么？”被拍摄，则拍摄的句子被输出为图像数据，通过驱动文本识别程序，图像数据被转换成文本数据。转换的文本数据与已经存储的数字数据和算术符号数据进行匹配，只有诸如“((100+2)*2+(10+20+30)*2)”的数字数据和算术符号数据被从文本数据中读出，随后被输出。

图5是示出根据本发明第一和第二示例性实施例用于编辑算术表达式的操作的流程图。以下将参照图5来描述编辑算术表达式的操作。如果编辑模式键被输入，则控制部分10在步骤501控制存储器29和显示部分80显示如下在表1中所示的编辑菜单列表。

[表1]

	编辑菜单列表
		1	重新拍摄菜单
2	手动输入菜单

如果用户使用键区27从编辑菜单列表中选择标号为1的菜单，即，“重新拍摄菜单”，则控制部分10在步骤503感测到这一情况并进行到步骤505以执行相机功能，从而包括算术表达式的文档被重新拍摄，并且算术表达式被从重新拍摄的图像中重新识别。然后，控制部分10在步骤507控制显示部分80，并如图6A所示显示在步骤505识别的算术表达式。如果多个算术表达式被识别，则控制部分10控制存储器29和显示部分80，并如图7A所示显示具有各自的选择框的识别的算术表达式。

如果用户使用键区27从编辑菜单列表中选择标号为2的菜单，即，“手动输入菜单”，则控制部分10在步骤509感测到这一情况并进行到步骤511。在步骤511，控制部分10进行手动输入编辑模式，并控制存储器29和显示部分80显示在编辑模式键被输入之前识别的算术表达式。这里，算术表达式以可被编辑的文本数据的形式被显示。

然后，如果用户使用键区27执行编辑操作并输入数字数据和/或算术符号数据，则控制部分10在步骤513感测到这一情况，并在步骤515控制显示部分80显示反映输入的数字数据和/或算术符号数据的算术表达式。

在本发明的示例性实施例中提供一种用于使用便携式终端配备的相机来识别算术表达式并执行算术计算的设备和方法。使用本发明示例性实施例的优点在于可通过键的操作根据识别的算术表达式执行算术计算，而不需要直接输入算术表达式。此外，因为提供了用于选择算术表达式的方法，所以可根据从通过相机功能识别的算术表达式中选择的算术表达式来执行算术计算。提供一种用于编辑算术表达式的方法，其结果是增加了用户的便利。例如，当相机错误地识别算术表达式时，算术表达式可被重新识别或简单纠正。

尽管已参照本发明的特定示例性实施例示出并描述了本发明，但是本领域的技术人员将理解：在不脱离由所附权利要求限定的本发明的精神和范围的情况下，可在其中进行形式和细节上的各种改变。

Claims (17)

1、一种在计算器模式中操作便携式终端的方法，该方法包括：

从由便携式终端的相机拍摄的图像中识别算术表达式，并显示识别的算术表达式；

当编辑模式键被输入时转换到编辑模式，执行编辑操作并根据编辑操作来编辑显示的算术表达式；以及

当计算执行键被输入时，根据编辑的算数表达式来执行算术计算并输出计算结果。

2、如权利要求1所述的方法，其中，识别步骤还包括：

将图像的图像数据转换成文本数据；

分析转换的文本数据，并将转换的文本数据与已经存储的数字数据和算术符号数据进行匹配；以及

读出匹配的数字数据和算术符号数据，并形成算术表达式。

3、如权利要求1所述的方法，其中，转换到编辑模式并执行编辑操作的步骤还包括：

显示编辑菜单列表；以及

当从显示的编辑菜单列表中选择重新拍摄模式时，执行相机功能并重新识别算术表达式。

4、如权利要求3所述的方法，其中，转换到编辑模式并执行编辑操作的步骤还包括：

当从显示的编辑菜单列表中选择手动输入菜单时，显示在编辑模式键被输入之前识别的算术表达式；以及

显示反映手动输入的数据的算术表达式。

5、如权利要求1所述的方法，其中，算术表达式以文本数据的形式被显示。

6、如权利要求1所述的方法，其中，计算结果以音频数据的形式被输出。

7、一种在包括相机的便携式终端中操作计算器模式的方法，该方法包括：

从由相机拍摄的图像中识别至少一个算术表达式，并显示识别的算术表达式；

从至少一个显示的算术表达式中选择一个算术表达式，并显示选择的算术表达式；以及

当计算执行键被输入时，根据显示的算术表达式来执行算术计算并输出计算结果。

8、如权利要求7所述的方法，其中，所述至少一个显示的算术表达式连同选择框被显示。

9、如权利要求7所述的方法，其中，从由相机拍摄的图像中识别至少一个算术表达式的步骤还包括：

将图像的图像数据转换成文本数据；

分析转换的文本数据，并将转换的文本数据与已经存储的数字数据和算术符号数据进行匹配；以及

读出匹配的数字数据和算术符号数据，并形成算术表达式。

10、如权利要求7所述的方法，还包括以下步骤：

当编辑模式键被输入时转换到编辑模式，执行编辑操作，并根据编辑操作编辑显示的算术表达式。

11、如权利要求10所述的方法，其中，转换到编辑模式并执行编辑操作的步骤还包括：

显示编辑菜单列表；以及

当从显示的编辑菜单列表中选择重新拍摄模式时，执行相机功能并重新识别算术表达式。

12、如权利要求11所述的方法，其中，转换到编辑模式并执行编辑操作的步骤还包括：

当从显示的编辑菜单列表中选择手动输入菜单时，显示在编辑模式键被输入之前识别的算术表达式；以及

显示反映手动输入的数据的算术表达式。

13、如权利要求7所述的方法，其中，计算结果以音频数据的形式被输出。

14、一种便携式终端装置，包括：

控制器，用于从由相机拍摄的图像中识别算术表达式；

显示部分，用于显示识别的算术表达式；

键区，用于当编辑模式键被输入时转换到编辑模式，执行编辑操作，并根据编辑操作来编辑显示的算术表达式；以及

音频处理部分，用于输出计算结果，

其中，控制器包括计算器，当计算执行键被输入时，计算器根据编辑的算术表达式执行算术计算。

15、如权利要求14所述的便携式终端装置，还包括：

信号处理部分，用于将拍摄的图像的图像数据转换成文本数据；

控制部分，用于分析转换的文本数据，将转换的文本数据与已经存储的数字数据和算术符号数据进行匹配，并读出匹配的数字数据和算术符号数据，形成算术表达式。

16、如权利要求14所述的便携式终端装置，还包括：

控制部分，用于当编辑模式键被输入时转换到编辑模式，并执行编辑操作。

17、如权利要求14所述的便携式终端装置，还包括：

显示部分，用于显示编辑列表菜单；以及

控制部分，用于当从编辑菜单列表中选择重新拍摄键时，执行相机功能并重新识别算术表达式。

Images