CN102455887A

CN102455887A - 输入显示装置和输入显示方法

Info

Publication number: CN102455887A
Application number: CN2011103198970A
Authority: CN
Inventors: 反桥卓
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2010-10-20
Filing date: 2011-10-20
Publication date: 2012-05-16
Also published as: US20120098835A1; JP2012088969A; US8581910B2

Abstract

一种输入显示装置和输入显示方法。在包括显示部、声音接受部以及用于接受所述显示部的显示画面上的位置指定的位置指定接受部的输入显示装置中，基于所述位置指定接受部接受到的位置指定，决定与所述声音接受部接受到的声音的文本数据有关的字符对于所述显示部的显示属性，并基于该显示属性而显示所述字符。由此，能够提供即使是小的字符，也能够可靠且简单地进行输入接受和显示的输入显示装置、输入显示方法、计算机程序以及记录介质。

Description

输入显示装置和输入显示方法

技术领域

本发明涉及接受字符的输入而显示的输入显示装置、输入显示方法以及记录了计算机程序的记录介质。

背景技术

近年来，LCD监视器成为大型化，通过在该LCD监视器中加入触摸面板技术，从而能够进行作为所谓的电子黑板的利用。

在作为电子黑板的利用中，由于在大多数情况下，用户站在大型监视器之前用指尖或笔对触摸面板进行触摸操作，所以难以并用键盘，一般利用如下方法：在触摸面板上用指尖或笔接触的部位描画点，或者将通过在每个规定时间重复检测有无触摸操作而获得的多个接触坐标用线来连接，从而描画字符、图形等的方法。

另一方面，在日本特开2003-295884号公报中，公开了如下系统：通过将指令操作也由声音来进行，从而不需要键盘等的机械输入部件，仅通过声音来操作计算机的界面的、所谓的免提(hands free)来可进行字符输入的声音输入模式变换系统。

但是，在上述的电子黑板中，根据触摸面板的坐标检测精度和反应速度差且LCD面和触摸面板之间存在距离等若干个原因而导致难以正确地描画轨迹，因此存在难以写出小的字符，即使写上也不能识别的问题。

此外，作为电子黑板能够进行的便利的功能，附加了之后对已输入的图形进行移动、扩大缩小等的编辑功能，但由于难以将字符或者文章作为一个整体来正确地识别，所以用户需要手动进行每个字符或者文章的编辑。相对于此，也考虑对操作的时间间隔设置阈值而识别整体的功能、通过OCR处理来将图形变换为字符的功能等，但不能说其精度非常好。在日本特开2003-295884号公报的声音输入模式变换系统中，也还没有解决这样的问题。

发明内容

本发明是鉴于这样的情况而完成的，其目的在于，在包括显示部、声音接受部以及用于接受所述显示部的显示画面上的位置指定的位置指定接受部的输入显示装置中，基于所述位置指定接受部接受到的位置指定，决定与所述声音接受部接受到的声音的文本数据有关的字符对于所述显示部的显示属性，并基于该显示属性而显示所述字符，由此，能够提供即使是小的字符，也能够可靠且简单地进行输入接受和显示的输入显示装置、输入显示方法以及记录了计算机程序的记录介质。

此外，本发明的其他目的在于，通过基于所述位置指定接受部接受到的位置指定，统一存储规定范围内的字符，例如作为一个文章来存储，从而能够根据用户的需要作为一个整体来正确地识别字符或者文章的输入显示装置、输入显示方法以及记录了计算机程序的记录介质。

本发明的输入显示装置的特征在于，包括：显示部；声音接受部，接受声音并变换为文本数据；以及位置指定接受部，接受所述显示部的显示画面上的位置指定，所述输入显示装置接受规定字符的输入而显示，所述输入显示装置还包括：属性决定部，基于所述位置指定接受部接受到的位置指定，决定与所述文本数据有关的字符的显示属性。

在本发明中，在将与所述声音接受部接受到的声音的文本数据有关的字符显示在所述显示部时，基于所述位置指定接受部接受到的位置指定，所述属性决定部决定所述字符的显示属性。该字符基于由所述属性决定部决定的显示属性，显示在所述显示部中。

本发明的输入显示装置的特征在于，所述属性决定部决定所述字符的显示范围。

在本发明中，所述属性决定部基于所述位置指定接受部接受到的位置指定，决定与所述声音接受部接受到的声音的文本数据有关的字符的显示范围。该字符基于由所述属性决定部决定的显示范围，显示在所述显示部中。

本发明的输入显示装置的特征在于，所述属性决定部决定所述字符的字体大小。

在本发明中，所述属性决定部基于所述位置指定接受部接受到的位置指定，决定与所述声音接受部接受到的声音的文本数据有关的字符的字体大小。该字符基于由所述属性决定部决定的字体大小，显示在所述显示部中。

本发明的输入显示装置的特征在于，所述属性决定部决定由所述字符构成的字符串的方向。

在本发明中，所述属性决定部基于所述位置指定接受部接受到的位置指定，决定由与所述声音接受部接受到的声音的文本数据有关的字符构成的字符串的方向。该字符串基于由所述属性决定部决定的方向，显示在所述显示部中。

本发明的输入显示装置的特征在于，所述属性决定部基于所述字符的显示范围，决定该字符的字体大小。

在本发明中，例如所述属性决定部通过将所述显示范围除以与所述声音接受部接受到的声音的文本数据有关的字符(或者字符串)的长度，从而决定该字符的字体大小。

本发明的输入显示装置的特征在于，还包括：存储部，统一存储所述显示范围内的字符。

在本发明中，所述存储部统一存储所述显示范围中、换言之从所述显示的开始位置起至结束位置为止的范围内的字符。例如，所述存储部将从所述显示的开始位置起至结束为止的范围内的字符作为一个文章来存储。

本发明的输入显示方法的特征在于，在输入显示装置中接受规定字符的输入而显示，所述输入显示装置包括：显示部；声音接受部，接受声音并变换为文本数据；以及位置指定接受部，接受所述显示部的显示画面上的位置指定，所述输入显示方法包括：属性决定步骤，基于接受到的位置指定，决定与所述文本数据有关的字符的显示属性；以及显示步骤，基于在该属性决定步骤中决定的显示属性，显示与所述文本数据有关的字符。

在本发明中，在将与所述声音接受部接受到的声音的文本数据有关的字符显示在所述显示部时，基于所述位置指定接受部接受到的位置指定，决定所述字符的显示属性。该字符基于决定的显示属性而显示在所述显示部中。

根据本发明，例如，即使输入的字符是小的字符，也能够可靠且简单地进行该字符的接受和显示。

根据本发明，能够根据用户的需要，将由用户输入的字符或者文章作为一个整体来正确地识别。

附图说明

图1是表示本发明的实施方式1的电子黑板装置的主要部分结构的功能方框图。

图2是说明本发明的实施方式1的电子黑板装置的显示部和笔输入部的结构的说明图。

图3是表示本发明的实施方式1的电子黑板装置中的、字符的输入的接受和显示的处理的流程图。

图4是表示本发明的实施方式1的电子黑板装置中的、字符的输入的接受和显示的处理的流程图。

图5是表示本发明的实施方式1的电子黑板装置的处理过程的例示图。

图6是表示本发明的实施方式2的电子黑板装置的主要部分结构的功能方框图。

具体实施方式

(实施方式1)

以下，以将本发明的实施方式的输入显示装置、输入显示方法以及记录介质应用于所谓的电子黑板装置的情况为例，基于附图进行详细叙述。

图1是表示本发明的实施方式1的电子黑板装置100的主要部分结构的功能方框图。电子黑板装置100包括CPU1、ROM2和RAM3。

在ROM2中预先存储了各种控制程序(例如，电子黑板应用、描画用应用、声音接受用应用等)，RAM3暂时存储数据，且能够与存储顺序、存储位置等无关地读出数据。此外，RAM3例如存储从ROM2读出的程序、通过执行该程序而产生的各种数据等。此外，RAM3存储后述的坐标历史。

CPU1通过将预先存储在ROM2中的控制程序加载到RAM3上执行，从而经由总线N进行以下的各种硬件的控制，生成所述坐标历史，且使装置整体作为本发明的电子黑板装置100动作。

此外，电子黑板装置100包括：显示部7；显示控制部8，控制对于该显示部7的字符、线图案等的显示；笔输入部9，经由后述的笔形输入器92而从用户接受显示部7上的位置指定、字符、线图案等的输入；笔输入控制部10，控制该笔输入部9的输入的接受；麦克风11，从用户接受声音；以及声音输入控制部12，进行麦克风11的声音的接受的控制。

电子黑板装置100例如还包括：存储部4，为硬盘等的非易失性的半导体存储器，且存储了后述的字体表；计时部5，测量从规定时刻起的时间的经过；以及显示属性决定部6(属性决定部)，决定在显示控制部8在显示部7中进行字符或者字符串的显示时的显示属性。

显示部7例如是LCD监视器，在显示部7中显示经由笔输入部9和麦克风11而从用户接受的线图案和字符。此外，在显示部7中显示用于选择在电子黑板装置100中动作的软件而启动的用户界面画面等。

显示控制部8基于由显示属性决定部6决定的显示属性，使显示部7显示与经由麦克风11接受到的声音有关的字符或者由该字符构成的字符串。所述显示属性例如是应显示的字符或者字符串的显示范围即显示开始和显示结束位置(以下，称为显示开始结束位置)、字体大小、纵书、横书(方向)。此外，显示控制部8基于与后述的位置指定接受部91接受到的位置指定有关的坐标，使显示部7显示经由笔形输入器92而从用户输入的线图案。

图2是说明实施方式1的电子黑板装置100的显示部7和笔输入部9的结构的说明图。

笔输入部9是所谓的触摸面板，包括：位置指定接受部91，从用户接受显示部7的显示画面上的位置指定；以及笔形输入器92，具有笔形状，且在用户输入该位置指定、字符和线图案时使用。笔输入部9经由位置指定接受部91和笔形输入器92，从用户接受显示部7上的位置指定、字符、线图案等的输入。

笔输入控制部10进行与笔输入部9的输入的接受有关的控制，且将与经由笔输入部9的位置指定接受部91接受到的位置指定有关的坐标(以下，称为指定坐标)发送到CPU1。

CPU1从笔输入控制部10取得指定坐标，生成与该指定坐标的检测顺序相关联的坐标历史，并将生成的坐标历史保存在RAM3中。此外，显示控制部8基于在RAM3中保存的坐标历史，例如使显示部7显示线图案。以下，详细说明。

笔输入部9的位置指定接受部91重叠设置在显示部7的显示画面上。在本实施方式中，设为位置指定接受部91是所谓的光切断型(光遮断型)。在该光切断型中，根据笔形输入器92的前端接近位置指定接受部91的表面，由位置指定接受部91检测出光切断，从而实现输入。

通过启动在电子黑板装置100中预先安装的描画用应用软件，用户输入图像数据。例如，以用户使用笔形输入器92进行了在位置指定接受部91的表面上划一条线的操作的情况为例进行说明。在开始检测出光切断且之后有连续的光切断的情况下，CPU1判断一条线的输入开始且当前正在输入。另一方面，在光切断中断且经过了规定时间的情况下，CPU1判断为一条线的输入结束。由此，能够取得有关一条线的图像数据(例如，坐标历史)，基于该图像数据，在显示部7中显示一条线。

位置指定接受部91将描画的线取作多个连续的点的集合，检测各个点的坐标(指定坐标)。检测出的各个点的坐标经由笔输入控制部10而发送到CPU1。CPU1接受送来的坐标，并将该指定坐标按照检测的顺序，将该指定坐标相关联而生成坐标历史，该坐标历史存储在RAM3中。CPU1基于该坐标历史来指示显示控制部8，以例如在显示部7中显示由多个线数据构成的规定的线图案。

用户使用麦克风11进行声音输入，此时，声音输入控制部12将经由麦克风11接受到的声音变换为声音数据而获得文本数据。声音输入控制部12包括声音识别部121(声音接受部)。

声音识别部121将经由麦克风11接受到的模拟的声音信号变换为声音数据，并基于声音模型、单词词典等，按词汇列划分之后，置换为具有含义的平假名的文本数据。该文本数据存储在RAM3中。

显示属性决定部6基于经由笔输入部9接受到的位置指定(指定坐标)，决定所述显示属性。以下，详细说明。

在本发明的电子黑板装置100中，用户在显示部7的显示画面上指定规定的范围，并使用麦克风11进行声音输入，与该声音对应的字符或者字符串(以下，称为声音输入字符串)显示在该范围内。另外，通过用户使用笔形输入器92在位置指定接受部91的表面划一条线，从而进行所述范围的指定。

由此，在用户进行了在位置指定接受部91的表面划一条线的操作的情况下，位置指定接受部91作为位置指定来接受，并检测所述一条线的起点和终点的坐标，且该坐标经由笔输入控制部10而发送到显示属性决定部6。显示属性决定部6将检测出的一条线的起点和终点的坐标决定为所述声音输入字符串的显示开始结束位置(显示范围)。

此外，显示属性决定部6通过比较起点和终点的坐标，决定所述声音输入字符串的方向。例如，在所述起点坐标和终点坐标的Y值相等，且该起点坐标的X值小于终点坐标的X值的情况下，显示属性决定部6决定应以横书显示所述声音输入字符串。另一方面，在所述起点坐标和终点坐标的X值相等，且该起点坐标的Y值小于终点坐标的Y值的情况下，显示属性决定部6决定应以纵书显示所述声音输入字符串。

此外，显示属性决定部6计算检测出的所述起点和终点的坐标之间的距离，并将其除以所述声音输入字符串的字符数，从而决定该声音输入字符串的字体大小。在存储部4中存储了将计算值和与该计算值对应的字体大小相关联的字体表，该计算值是通过将所述起点和终点的坐标之间的距离除以所述声音输入字符串的字符数而计算出，显示属性决定部6基于该字体表来决定所述声音输入字符串的字体大小。

图3和图4是表示本发明的实施方式1的电子黑板装置100中的、字符的输入的接受和显示的处理的流程图。为了便于说明，以用户使用笔形输入器92在位置指定接受部91的表面划一条线，从而在显示部7的显示画面上指定应显示声音输入字符串的范围，并使用麦克风11进行声音输入，与该声音对应的一个声音输入字符串显示在所述范围内的情况为例，进行说明。

例如，用户对在所述用户界面画面中设置的、用于声音输入的软件键进行触摸操作(参照图5)。此时，位置指定接受部91通过用户的触摸操作而接受位置指定，并基于与该位置指定对应的指定坐标，CPU1接受向声音输入切换的指示(步骤S101)。CPU1通过将预先存储在ROM2中的声音接受用的应用加载到RAM3上而启动。

接着，用户使用笔形输入器92在位置指定接受部91的表面划一条线，从而指定应显示声音输入字符串的范围。位置指定接受部91检测所述一条线的起点和终点的坐标，CPU1将该操作作为所述声音输入字符串的显示开始结束位置的指定来接受(步骤S102)，显示属性决定部6将所述起点和终点的坐标决定为所述声音输入字符串的显示开始结束位置。

CPU1基于与所述一条线有关的坐标历史，指示显示控制部8，以在显示部7中进行描画。根据CPU1的指示，显示控制部8基于该坐标历史，使显示部7显示一条线。由此，在显示部7中显示所述显示开始结束位置(步骤S103)。

接着，通过上述的方法，显示属性决定部6决定应将所述声音输入字符串设为纵书还是横书。为了便于说明，在本实施例中，设为由显示属性决定部6决定为横书(步骤S104)。

之后，CPU1指示声音输入控制部12开始接受声音，声音输入控制部12开始经由麦克风11从用户接受声音(步骤S105)。

CPU1通过监视麦克风11，详细地说，监视是否从麦克风11输出声音信号，从而判定是否有用户的声音输入(步骤S106)。

在根据从麦克风11有输出声音信号而判定为有用户的声音输入的情况下(步骤S106：是)，CPU1指示声音识别部12，以将接受到的声音变换为文本数据。根据CPU1的指示，声音识别部12通过上述的方法，将经由麦克风11接受到的声音变换为文本数据(步骤S107)。

此时，在步骤S107中获得的数据存储在RAM3中(步骤S108)。在步骤S108之后，处理再次返回到步骤S106。

另一方面，在没有从麦克风11输出声音信号而判定为没有用户的声音输入的情况下(步骤S106：否)，CPU1指示计时部5开始计时。接着，CPU1判定是否从所述计时开始经过了规定时间(步骤S109)。

在判定为没有从所述计时开始经过了规定时间的情况下(步骤S109：否)，CPU1返回到步骤S106的处理。另一方面，在CPU1判定为从所述计时开始经过了规定时间的情况下(步骤S109：是)，换言之，从用户的声音输入中断起经过了规定时间，当做用户的声音输入结束的情况下，显示属性决定部6决定所述声音输入字符串的字体大小(步骤S110)。显示属性决定部6的字体大小的决定为如上所述，省略详细的说明。

通过以上的处理，决定用于在显示部7中显示声音输入字符串的显示属性，即显示开始结束位置(开始结束位置)、字体大小以及方向。

接着，CPU1指示显示控制部8，以将基于这些显示属性的声音输入字符串显示在显示部7中。根据CPU1的指示，显示控制部8基于决定的显示属性、在RAM3中存储的文本数据等，使显示部7显示声音输入字符串(步骤S111)。

图5是表示本发明的实施方式1的电子黑板装置100的处理过程的例示图。为了便于说明，以用户使用麦克风11而声音输入了“今天的工作伙伴的议题”的字符串的情况为例，进行说明。

例如，在用户使用笔形输入器92在位置指定接受部91的表面划一条直线之后，对所述用户界面画面的用于声音输入的软件键(图中，用白色箭头表示)进行触摸操作而发出“今天的工作伙伴的议题”来进行字符串的声音输入，该字符串经由麦克风11所接受，并进行上述的处理，如图5所示，在所述一条直线上通过平假名来显示该字符串。

之后，CPU1将在显示开始结束位置的范围内即所述直线上的所述声音输入字符串统一地例如作为一个文章而存储在存储部4中。

在上述的实施例中，以将规定时间内没有声音信号的输出的情况看做声音输入结束的情况为例进行了说明，但并不限定于此，也可以进行笔形输入器92的操作，例如划上与所述一条直线(参照图5)交叉的线等的规定的手势的明确的结束指示。

在上述的实施例中，以通过划一条直线的操作而接受声音(字符)的情况为例进行了说明，但并不限定于此。例如，也可以在进行了“V字的描画”、“闭曲线的描画”、“在字符串上往返一次以上”的操作的情况下，分别作为执行“插入”、“高亮(high light)/颜色变更”、“一部分或者全部删除”的指示而接受。

此外，也可以在使用笔形输入器92而双击了规定的字符串(单词)的情况下，该单词被规定的选择框包围而选择，通过使用笔形输入器92拖放该选择框，可进行扩大缩小的操作，通过拖放该选择框的里面，能够进行平行移动的操作。

此外，在上述的实施方式中，以使用所谓的触摸面板(笔输入部9)接受位置指定的情况为例进行了说明，但并不限定于此。例如，也可以在显示部7的两处设置摄像机，使用该摄像机来取得与所述一条直线有关的坐标。

此外，在上述的实施方式中，以划一条线来指定应显示声音输入字符串的范围的情况为例进行了说明，但并不限定于线，例如也可以是点、括号等。此外，该线也可以是透明的。

通过如上所述的结构，在本发明的电子黑板装置中，通过简单的操作就能够进行容易观看的板书，且不将字符串部分作为图形存储，而是作为文本数据存储，从而例如在以电子方式储存这些字符串时，存储容量减小且能够通过全文检索来检索文件等。此外，能够以高分辨率印刷，能够进行漂亮的字符的印刷。

(实施方式2)

图6是表示本发明的实施方式2的电子黑板装置100的主要部分结构的功能方框图。实施方式2的电子黑板装置100构成为，可由CD-ROM等的可移动记录介质A经由I/F13提供用于进行动作的计算机程序。此外，实施方式2的电子黑板装置100还构成为，可从未图示的外部装置经由I/F13下载所述计算机程序。以下，说明其内容。

实施方式2的I/F13包括外置(或者内置)的存储介质读取装置(未图示)，对该记录介质读取装置插入记录了基于接受到的位置指定来决定有关文本数据的字符的显示属性，并基于决定的显示属性来显示有关文本数据的字符的程序等的可移动记录介质A，例如，CPU1将该程序安装在ROM2中。该程序通过加载到RAM3中而执行。由此，作为实施方式1的本发明的电子黑板装置100起作用。

作为所述记录介质，既可以是所谓的程序介质，也可以是磁带和卡带等的带类、软盘和硬盘等的磁盘以及CD-ROM/MO/MD/DVD等的光盘的盘类、IC卡(包括存储卡)/光卡等的卡类、或者掩模ROM、EPROM、EEPROM、闪速ROM等的半导体存储器等的固定地承载程序代码的介质。

也可以是以经由I/F13从网络下载程序代码的方式流动地承载程序代码的介质。另外，在这样从通信网络下载程序的情况下，该下载用的程序可以预先存储在主体装置中或者从其他记录介质安装。另外，本发明通过上述程序代码以电子传输具体化的、埋入载波的计算机数据信号的方式也能够实现。

关于与实施方式1相同的部分，赋予相同的标号并省略详细的说明。

Claims

1.一种输入显示装置，包括：显示部；声音接受部，接受声音并变换为文本数据；以及位置指定接受部，接受所述显示部的显示画面上的位置指定，所述输入显示装置接受规定字符的输入而显示，

所述输入显示装置还包括：

属性决定部，基于所述位置指定接受部接受到的位置指定，决定与所述文本数据有关的字符的显示属性。

2.如权利要求1所述的输入显示装置，其中，

所述属性决定部决定所述字符的显示范围。

3.如权利要求1所述的输入显示装置，其中，

所述属性决定部决定所述字符的字体大小。

4.如权利要求1所述的输入显示装置，其中，

所述属性决定部决定由所述字符构成的字符串的方向。

5.如权利要求2所述的输入显示装置，其中，

所述属性决定部基于所述字符的显示范围，决定该字符的字体大小。

6.如权利要求2所述的输入显示装置，还包括：

存储部，统一存储所述显示范围内的字符。

7.一种输入显示方法，在输入显示装置中接受规定字符的输入而显示，所述输入显示装置包括：显示部；声音接受部，接受声音并变换为文本数据；以及位置指定接受部，接受所述显示部的显示画面上的位置指定，

所述输入显示方法包括：

属性决定步骤，基于接受到的位置指定，决定与所述文本数据有关的字符的显示属性；以及

显示步骤，基于在该属性决定步骤中决定的显示属性，显示与所述文本数据有关的字符。