CN101295313B - 显示控制设备和显示控制方法 - Google Patents

Abstract

本发明提供一种显示控制设备和显示控制方法。本发明的目的是使能够顺序回放绘制内容的显示控制设备通过简单方法在缩短回放时间的同时实现易于掌握内容的回放。本发明的显示控制设备包括：操作信息获取单元，其从在获取表示用于绘制物体的绘制区域中的操作的操作信息时记录该绘制区域中的改变内容的硬盘获取关于该改变内容的信息；回放部分提取单元，其在所获取的信息中判断要用于回放绘制内容的信息，并且确定该信息的回放定时；回放单元，其提取判断为要用于回放的信息，并且使用所提取的信息在预定回放定时在显示设备上回放该绘制内容。

Description

显示控制设备和显示控制方法

技术领域

本发明涉及一种回放在用于绘制物体的绘制区域中绘制的内容的显示控制设备和显示控制方法。

背景技术

近年来，以等离子体显示器为代表并还包括背投显示器和前投式投影仪的大屏幕显示设备已经普及。使用这样的大屏幕显示设备的演讲、会议和学校课程正日渐流行。

在使用大屏幕显示设备的会议或学校课程上，用户通常使用指示棒或激光指示器作为用于指示显示画面上的特定位置的工具。

然而，最近开发出了具有用于检测用户所指示的显示画面上的位置(指示位置)的数位器的指示系统，并且经常使用该指示系统。该指示系统可以与用户所指示的位置相对应地移动显示画面上的光标，或者通过启动与指示位置相对应的工具，在显示画面上生成字符或图形图案等绘制物体。该系统还可以自由地编辑所生成的绘制物体。

这样的指示系统通常将大屏幕显示设备连接到个人计算机等显示控制设备的视频输出端，从而将由个人计算机生成的显示数据显示在大屏幕显示设备上。该系统还使用接口线缆将数位器连接到个人计算机，并且通过接口线缆发送关于指示位置的信息。

另外，在个人计算机侧安装用于将通过接口线缆输入的关于指示位置的信息反映在光标移动或者字符或图形图案等绘制物体的生成的应用程序。

具有上述结构的指示系统可以通过扩展安装的应用程序的功能来实现各种功能。

例如，与显示画面上的指示位置相对应的直接绘制实现手写输入功能。这使得大屏幕显示设备能够作为电子白板。

当在显示画面上显示的绘制内容根据用户操作而改变时，与时间数据一起记录该改变内容，并且沿时间数据回放该改变内容。这样的系统结构实现回放功能。该回放功能允许沿会议的时间经过，回放会议期间在显示画面上显示的绘制内容。因此，例如，如果使用大屏幕显示设备作为电子白板，则可以使用回放内容作为会议报告。

对于用于回放与时间数据一起记录的改变内容的回放功能已提出了各种提案。

例如，日本特开2004-336289公开了作为为了通过回放功能进行回放而记录的对象的白板的快照。这使得能够回放会议或学校课程。日本特开平6-205151也公开了一种用于回放会议期间的语音/图像信息的结构。

也提出了用于提高使用回放功能的回放的用户便利性的提案。例如，为了缩短回放时间，不仅提出了正常速度回放模式，而且还提出了快进模式和双倍速度回放模式等功能。

日本特开平11-112922公开了一种根据输入图像或语音流数据分析图像改变点或语音发声者改变点等事件点的结构。根据该现有技术，当在回放期间检测到事件点时，缓慢回放该事件点附近的流，从而允许用户容易地识别特定流。

然而，在将旨在提高用户便利性的回放功能应用于指示系统时存在若干问题。例如，该回放功能甚至回放用户临时手写输入并立即清除的绘制物体，即，与掌握例如会议内容没有直接关系的绘制物体。如果用户通过手写逐一输入字符的笔划，则顺序逐一回放手写输入的各绘制物体的笔划，结果导致长的回放时间。

在使用快进模式或双倍速度回放模式的回放时，回放时间短。然而，也高速回放掌握回放内容所必需的部分。这妨碍了用户对回放内容的掌握。

如日本特开平11-112922中所述，还有一种分析记录的各绘制物体并检测事件点，从而缓慢回放事件点附近的数据的结构。然而，该方法需要对记录的绘制物体进行分析，结果导致复杂的处理。

发明内容

考虑到上述问题做出了本发明，并且本发明的目的是使能够顺序回放绘制内容的显示控制设备通过简单方法在缩短回放时间的同时实现易于掌握回放内容的回放。

根据本发明的一个方面，提供一种连接到显示设备的显示控制设备，包括：

获取部件，用于从在获取表示用于绘制物体的绘制区域中的操作的操作信息时记录所述绘制区域中的改变内容的记录设备获取关于所述改变内容的信息；

判断部件，用于在所述获取部件获取的信息中，判断要用于回放绘制内容的信息，并且基于该信息确定所述绘制内容的回放定时；以及

回放部件，用于提取所述判断部件判断为要用于回放的信息，并且使用所提取的信息在所确定的回放定时在所述显示设备上回放所述绘制内容。

根据本发明的另一方面，提供一种连接到显示设备的显示控制设备，包括：

获取部件，用于从在获取表示用于绘制物体的绘制区域中的操作的操作信息时记录所述绘制区域中的改变内容的记录设备获取关于所述改变内容的信息；

输入部件，用于输入第一条件，以从所述获取部件获取的信息中提取要用于回放绘制内容的信息；以及

回放部件，用于从所述获取部件获取的信息中提取满足所述第一条件的信息，并且使用所提取的信息在所述显示设备上连续回放所述绘制内容。

根据本发明的另一方面，提供一种连接到显示设备的显示控制设备中的显示控制方法，包括以下步骤：

获取步骤，用于从在获取表示用于绘制物体的绘制区域中的操作的操作信息时记录所述绘制区域中的改变内容的记录设备获取关于所述改变内容的信息；

判断步骤，用于在所述获取步骤中所获取的信息中，判断要用于回放绘制内容的信息，并且基于该信息确定所述绘制内容的回放定时；以及

回放步骤，用于提取在所述判断步骤中判断为要用于回放的信息，并且使用所提取的信息在所确定的回放定时在所述显示设备上回放所述绘制内容。

根据本发明的另一方面，提供一种连接到显示设备的显示控制设备中的显示控制方法，包括以下步骤：

获取步骤，用于从在获取表示用于绘制物体的绘制区域中的操作的操作信息时记录所述绘制区域中的改变内容的记录设备获取关于所述改变内容的信息；

输入步骤，用于输入第一条件，以从在所述获取步骤中所获取的信息中提取要用于回放绘制内容的信息；以及

回放步骤，用于从在所述获取步骤中所获取的信息中提取满足所述第一条件的信息，并且使用所提取的信息在所述显示设备上连续回放所述绘制内容。

根据本发明，可以使能够顺序回放显示内容的显示控制设备通过简单方法在缩短回放时间的同时实现易于掌握内容的回放。

通过以下(参考附图)对典型实施例的说明，本发明的其它特征将显而易见。

附图说明

包括在说明书中并构成说明书的一部分的附图示出本发明的实施例，并与说明书一起用来解释本发明的原理。

图1是示出具有根据本发明的第一实施例的显示控制设备的会议系统100的外观的图；

图2是示出会议系统100中所包括的单元的结构的框图；

图3是示出通过在会议系统100中启动电子白板应用程序的绘制模式显示在背投显示器101上的UI的例子的图；

图4是示出在电子白板应用程序240的绘制模式的执行期间，当绘制在绘制区域301中的绘制内容随着用户操作而改变时，记录操作信息的操作信息表251的例子的图；

图5是示出记录关于在会议系统100中的电子白板应用程序240的绘制模式的执行期间所生成或编辑的绘制物体的信息的绘制物体表252的例子的图；

图6是示出基于会议系统100中的操作信息表251和绘制物体表252回放会议期间绘制在绘制区域301中的内容的回放窗口600的例子的图；

图7是示出会议系统100的电子白板应用程序240的回放模式中的会议回放处理过程的流程图；

图8是示出基于指定的操作信息表中的操作信息所执行的回放处理过程的流程图；

图9是详细示出会议系统100的回放处理过程的回放处理(步骤S804)的流程图；

图10是示出临时绘制物体显示画面的例子的图；

图11是示出使用根据本发明的第二实施例的显示控制设备的会议系统的总体结构的图；

图12是示出具有根据本发明的第三实施例的显示控制设备的会议系统(显示控制系统)1200的外观的图；

图13是示出用作显示控制设备的计算机设备1220的结构的框图；

图14是示出通过在会议系统1200中启动电子白板应用程序的绘制模式显示在显示设备1210上的UI的例子的图；

图15是示出记录关于在电子白板应用程序1310的绘制模式的执行期间所进行的用户操作的操作信息的操作信息表1321的例子的图；

图16是示出记录关于在会议系统1200中的电子白板应用程序1310的绘制模式的执行期间由于生成或编辑操作而改变的绘制物体的绘制物体信息的绘制物体信息表1322的例子的图；

图17是示出计算机设备1220中的记录内容回放处理的序列的流程图；

图18是示出用于选择回放方法的UI的例子的图；

图19是示出用于设置提取在所提取的操作信息前后的预定时间内所记录的操作信息的条件的UI的例子的图；

图20是示出用于设置提取与所提取的操作信息前后的预定数量的操作相对应的操作信息的条件的UI的例子的图；

图21是沿时间轴示出使用所提取的操作信息的连续回放的概念图；

图22是沿时间轴示出使用所提取的操作信息的连续回放的概念图；

图23是示出根据本发明的第四实施例的计算机设备中的回放处理的序列的流程图；

图24是示出用于选择搜索类型的UI的例子的图；

图25是示出用于输入与所选择的搜索类型相对应的搜索条件的画面的例子的图；

图26是示出用于输入与所选择的搜索类型相对应的搜索条件的画面的例子的图；以及

图27是示出用于输入与所选择的搜索类型相对应的搜索条件的画面的例子的图。

具体实施方式

现在将根据附图详细说明本发明的优选实施例。

第一实施例

1.会议系统的外观

图1是示出具有根据本发明的第一实施例的显示控制设备的会议系统(显示控制系统)100的外观的图。

背投显示器101具有将存储在个人计算机(后面说明)中的用以实现电子白板的应用程序(控制程序)的执行结果显示在显示画面上的显示单元的功能。

背投显示器101包含光学系统，该光学系统包括光源灯、彩色滤光片、液晶面板、光学镜头和反射镜。通过彩色滤光片等将从光源灯发射的光分离成RGB的三色光分量。光分量照射液晶面板。该光学系统对经液晶面板调制后的光进行放大，并将其投射在背投显示器101的显示画面上，从而将电子白板应用程序的执行结果显示在该显示画面上。

数位器模块102和103配置在显示画面的左上角和右上角。数位器模块102和103发射红外光，并且扫描显示画面的表面。显示画面上的障碍物遮挡所发射的红外光，并改变接收信号的电平。这可以检测障碍物的位置和大小。也就是说，具有如上配置的数位器102和103的背投显示器101具有接收显示画面上的用户指令的输入单元的功能。

结果，当用户使用例如指头或指示棒指示显示画面上的预定位置时，背投显示器101可以检测到该位置和大小。

数位笔107指示显示画面上的位置。数位笔107用作用于在显示画面上输入指示的指示装置。数位笔107在尖端具有点击判断开关，并且在侧面具有清除器开关108。当用户按下清除器开关108时，临时设置清除器模式。如果用户在这种状态下指示显示画面上的位置，则清除与所指示的位置相对应的绘制物体。

个人计算机104用作基于例如利用数位笔107输入的指示对待显示在背投显示器101上的绘制物体的显示进行控制的显示控制设备。个人计算机104通过图像信号线缆105和通信线缆106与背投显示器101连接。个人计算机104还与用作个人计算机104的输入装置的键盘(未示出)连接。基于来自键盘的输入，对个人计算机104中的各种类型的应用程序的操作进行控制。

2.会议系统100的单元的结构

图2是示出会议系统100中包括的单元的结构的框图。如上所述，会议系统100包括用作指示装置的数位笔107和用作电子白板的背投显示器101。会议系统100还包括用作显示控制设备的个人计算机104和用作个人计算机104的输入装置的键盘220。

2.1数位笔

当数位器模块102和103用作用于检测指示位置的输入单元232时，用作指示装置的数位笔107可以指示显示画面上的预定位置。

2.2背投显示器

背投显示器101包括显示单元231、输入单元232和输出单元233。

输入单元232接收来自数位笔107的指示。输出单元233将所接收到的关于指示位置的信息输出给个人计算机104。当个人计算机104执行电子白板应用程序的绘制模式，并且执行与关于指示位置的信息相对应的各种类型的处理时，显示单元231接收并显示执行结果。

因此，背投显示器101可以通过例如将光标移动至所检测到的指示位置，生成或清除字符或图形图案等绘制物体，或者生成或清除通过手写输入的绘制物体，来执行显示。因此，背投显示器101用作电子白板。

背投显示器101的显示单元231还接收在执行个人计算机104中的电子白板应用程序的回放模式时所输出的回放内容，并显示该回放内容。也就是说，背投显示器101还用作用于显示回放内容的回放装置。

2.3个人计算机

用作显示控制设备的个人计算机104包括CPU 201、RAM202、ROM 203、闪存204、输入单元205、硬盘206和网络接口单元207。

输入单元205接收从背投显示器101的输出单元233输出的关于指示位置的信息。输入单元205还从用作个人计算机104的输入装置的键盘220接收指令。

存储在闪存204中的电子白板应用程序240具有在绘制模式中执行的功能和在回放模式中执行的功能。绘制模式使背投显示器101用作电子白板。回放模式使背投显示器101用作回放装置。

作为在绘制模式中执行的功能，电子白板应用程序240包括识别单元241、处理执行单元242、绘制控制单元243和记录单元244。

识别单元241识别输入单元205接收到的各种操作指令。更具体地，识别单元241识别用于移动在绘制区域中所定义的页面的页面操作指令、绘制物体生成指令、或者用于编辑已生成的绘制物体的指令。

处理执行单元242执行与识别单元241识别出的各种指令相对应的处理。

如果处理执行单元242所执行的处理改变了待显示在显示单元231上的绘制物体，则绘制控制单元243生成改变后的物体，并且将改变后的物体输出到显示单元231。

如果待显示在显示单元231上的绘制物体根据识别单元241识别出的各种操作指令发生了改变，则记录单元244将操作信息顺序记录在硬盘206中的操作信息表251中。记录单元244同样将关于改变后的绘制物体的信息顺序记录在绘制物体表252中。

作为在回放模式中执行的功能，电子白板应用程序240包括操作信息获取单元245、回放部分提取单元246和回放单元247。

操作信息获取单元245从在各个会议中记录在硬盘206中的多个操作信息表251和绘制物体表252获取用户指定的操作信息表和绘制物体表。

回放部分提取单元246基于所获取的操作信息表251和绘制物体表252，区分回放绘制内容所使用的操作信息和回放不需要的操作信息，并且确定绘制内容的回放定时。

下面是用以区分回放所使用的操作信息和回放不需要的操作信息的条件。

所生成或编辑的绘制物体是否分组。

所生成或编辑的绘制物体是否是临时绘制物体。

页面操作是否是连续页面操作。

绘制物体编辑操作是否是预定编辑操作。

注意，对于通过手写所生成的绘制物体执行字符处理(判断绘制物体是否是字符、和字符识别处理)，并且回放部分提取单元246执行该字符处理。

回放单元247提取所确定的用于回放的操作信息，并且使用该操作信息在所确定的回放定时回放绘制内容。

在CPU 201的控制下，根据需要将电子白板应用程序240、操作信息表251和绘制物体表252载入RAM 202，并且由CPU201执行。

网络接口单元207与外部装置进行通信。

3.显示窗口的结构

图3是示出通过在会议系统100中启动电子白板应用程序的绘制模式显示在背投显示器101上的UI的例子的图。

参考图3，附图标记300表示显示窗口。区域(绘制区域)301允许显示窗口300中的绘制输入。在绘制模式中，用户可以通过使用数位笔107的指示输入，生成绘制物体。附图标记302和303表示所生成的绘制物体的例子。

绘制物体302是包括在手写输入模式中通过手写输入的5个笔划的字符串“01010”。绘制物体303是在工具输入模式中输入的直线，并包括一个笔划。利用菜单(未示出)在手写输入模式和工具输入模式之间进行切换。

该菜单可以位于显示窗口300上，或者当用户按下设置在数位笔107上的开关时，将该菜单显示为上下文菜单(contextmenu)。数位笔107可以单独具有输入模式切换专用开关。工具输入模式不仅可以具有直线绘制工具，而且还可以具有绘制圆和矩形的图形工具。

可以对绘制在绘制区域301中的绘制物体302和303进行编辑。具体地，用户选择绘制物体，并从菜单(未示出)选择项目，从而执行移动、调整大小、清除、剪切和复制等编辑操作。

页面操作区域304使得能够进行绘制区域301中所定义的页面的页面操作。页面操作区域304显示页面的缩略图305。用户可以使用页面操作按钮306来进行页面的切换、移动和删除、以及新页面的添加等页面操作。

附图标记306表示页面操作按钮，包括正在显示的页面的编码、以及还可用于页面切换的页面跳过和返回按钮。

4.操作信息表251的结构

图4是示出在电子白板应用程序240的绘制模式的执行期间，当绘制在绘制区域301中的内容随着用户操作而改变时，记录操作信息的操作信息表251的例子的图。

在每个会议中生成操作信息表251。当绘制在绘制区域301中的内容由于绘制物体生成操作、编辑操作和页面操作而改变时，记录单元244将该改变内容作为操作信息顺序记录在硬盘206中，从而生成操作信息表。

记录在操作信息表251中的各操作信息具有项“操作开始时间”、“操作结束时间”、“操作类型”、“物体ID”、“页码”和“用户ID”。

“操作开始时间”表示操作开始的时间。“操作结束时间”表示操作结束的时间。“操作类型”表示操作的类型。

“物体ID”表示通过用户操作改变的绘制物体的标识符，并且对应于图5所示的绘制物体表。“页码”表示操作的页面或切换目的地页面的编码。“用户ID”表示操作者的ID。

5.绘制物体表252的结构

图5是示出记录关于在会议系统100中的电子白板应用程序240的绘制模式的执行期间所生成或编辑的绘制物体的信息的绘制物体表252的例子的图。

为绘制区域301中所生成的绘制物体自动分配ID。绘制物体表252记录“绘制物体ID”、“数据类型”、“组ID”和生成绘制物体所需的数据(“绘制物体数据”)，作为关于绘制物体的信息。

“数据类型”表示绘制物体的类型，包括笔划或者直线、矩形或圆等图形工具类型。“绘制物体数据”保存手写的笔划的X和Y坐标、直线的起点和终点的坐标、或矩形的左上坐标和右下坐标。还可以保存颜色数据、线型数据和填充颜色等。

将“组ID”分配给包括多个绘制物体的组。

作为分组方法，将邻近时间在绘制区域301中所生成的绘制物体或在邻近位置处绘制的笔划分进一组中，或者使用这些方法的组合。可以利用通过字符识别程序的字符识别处理，通过组合上述方法以字符串为单位进行分组。后面将说明该处理。可选地，可以向显示窗口300中的菜单添加项“分组”和“取消分组”，从而使得用户手动执行分组操作。例如，用户可以手动选择多个绘制物体，并且选择该菜单中的“分组”，以对这些绘制物体进行分组。

在本实施例中，在每个会议中都创建操作信息表(图4)和绘制物体表(图5)，并且在会议期间或会议结束时将它们记录在会议系统100的硬盘206中。然而，记录目的地不局限于硬盘206。可以通过网络接口单元207将这些表记录在网络上的服务器等记录设备(未示出)中。

6.回放窗口的结构

图6是示出基于会议系统100中的操作信息表251和绘制物体表252回放在会议期间在绘制区域301中所绘制的绘制内容的回放窗口600的例子的图。图6示出电子白板应用程序240的回放模式中的UI的例子。

如图6所示，在画面的上部显示回放结果显示区域601。在画面的下部显示回放操作区域602。

各种类型的操作按钮603对回放方法进行控制。用于控制回放方法的操作按钮603不仅包括正常回放按钮和停止按钮，而且还包括快进按钮和倒带按钮等用于改变回放速度的按钮。操作按钮603还包括提取回放按钮604，该按钮仅提取回放所需的部分，并且回放该部分，以缩短回放时间。

滑块605表示回放期间的回放点。用户可以通过拖动滑块605改变回放点。附图标记606表示与操作信息表251中的页码相对应的页面转换。在图6所示的例子中，从会议开始，按照1、2、3、4、3、2、1、3和4的顺序切换页面，并且当前正在回放页面3。

7.会议系统100中的总体处理的序列

图7是示出会议系统100的电子白板应用程序240的回放模式中的会议回放处理过程的流程图。

在步骤S701，执行电子白板应用程序240的操作所需的初始化，并且读出并显示操作信息表的列表。

在步骤S702，用户指定会议以开始回放。会议指定方法没有特别限制。用户可以从在步骤S701中所显示的操作信息表列表直接指定会议，或者可以通过基于预定搜索条件的搜索指定会议。

在步骤S703，基于在步骤S702指定的操作信息表中所记录的操作信息进行回放。后面将参考图8详细说明基于操作信息的回放处理的序列。

在步骤S704，对电子白板应用程序240的结束进行判断。如果电子白板应用程序240没有结束，则处理返回到步骤S702，以基于另一操作信息表再次执行回放。

8.回放处理的序列

图8是示出基于指定的操作信息表中的操作信息所执行的回放处理过程的流程图。

在步骤S801，读出指定的操作信息表251和相应的绘制物体表252，并且初始化用于回放时间控制的进度定时器。

在步骤S802，累进回放时间控制定时器。在步骤S803，按照操作开始时间的顺序，从操作信息表顺序读出操作信息，并且判断是否存在下一操作信息。如果不存在下一操作信息，则处理进入步骤S805。在步骤S805，如果当前操作信息的操作结束时间是会议的结束时间，则判断为会议结束。结束该回放处理。

如果判断为存在下一操作信息，则处理进入步骤S804。接着将参考图9中的流程图说明步骤S804中的回放处理。

9.回放处理的详细说明

图9是详细示出会议系统100的回放处理过程的回放处理(步骤S804)的流程图。

如图9所示，在步骤S901，如果读出的操作信息的操作类型表示页面操作，则处理进入步骤S902。

在步骤S902，判断是不是根据连续页面操作记录了该操作信息。操作者进行连续页面操作，以通过连续切换页面来搜索目标页面。当除第一页面和最后页面以外的中间部分的页面显示时间短时，或者当在页面切换操作之间没有生成或编辑其它绘制物体时，将该页面操作判断为连续页面操作。

在图4所示的操作信息表的例子中，按照1→2→3→4→3→2→1的顺序切换页面。由于显示时间短，并且在它们之间没有插入其它操作，因而将从页面2到3、从3到4、从4到3和从3到2的页面切换操作判断为连续页面操作。

如果在步骤S902中将页面操作判断为连续页面操作，则处理进入步骤S903。

在步骤S903，跳过回放不需要的操作信息，并且将回放的操作信息和回放时间控制定时器改变成最终页面切换操作。因此，在回放中，回放与页面2的操作信息相对应的绘制内容。然后，回放与页面1的操作信息相对应的绘制内容。

在步骤S904，判断是不是根据长编辑操作记录了多条操作信息。例如，通过利用长时间的拖放来移动绘制物体，执行长编辑操作。

在这种情况下，记录拖动期间的绘制物体的移动的操作信息是回放不需要的操作信息。只需要回放与在绘制物体位于开始位置处时所记录的操作信息相对应的绘制内容。

例如，当改变绘制物体的颜色时，在从颜色选择对话框选择颜色并按下OK按钮时所记录的操作信息是回放所不需要的。在这种情况下，将在颜色改变的操作开始时间和操作结束时间之间所记录的操作信息判断为回放不需要部分。通过仅基于在编辑操作的开始和结束时所记录的操作信息回放绘制内容，执行跳过回放。

如上所述，将在操作开始时间和操作结束时间之间具有大的差异的编辑操作当作为长编辑操作。处理进入步骤S905，以执行跳过回放。

如果在步骤S904判断为编辑操作不是长编辑操作，则处理进入步骤S906，以执行正常回放。在上述连续页面切换操作的例子中，在步骤S903中改变处理，以回放从页面2到页面1的切换操作。因此，正常回放到页面1的切换操作。

如果在步骤S901判断为操作类型不表示页面操作，则处理进入步骤S907，以判断绘制物体是否是临时绘制物体。

临时绘制物体是绘制并通过清除操作立即清除的绘制物体。在本实施例中，即使当用户使用数位笔107输入不正确的手写笔划时，他/她可以通过在按下数位笔107的清除器按钮的同时跟踪该不正确的手写笔划来立即清除它们。

图10是示出临时绘制物体显示画面的例子的图。图10示出在图4中的操作信息表中用户在绘制了五个手写笔划之后错误地输入下一绘制物体1001(物体ID＝0006)的状态。

参考图4，在生成后立即清除绘制物体1001(物体ID＝0006)。在清除之后，绘制正确的物体(物体ID＝0007)。在这种情况下，将绘制物体1001当作为临时绘制物体。

将绘制物体当作为临时绘制物体的其它条件有：例如，绘制物体生成后预定时间内的清除、生成后的预定数量的操作中的清除、生成后没有预定操作的清除、以及通过特定操作的清除(通过清除器开关或菜单的清除)。如上所述，将在绘制区域301中临时绘制并立即清除的绘制物体判断为临时绘制物体。因此，将生成绘制物体时所记录的操作信息(与该生成操作有关的操作信息)和清除绘制物体时所记录的操作信息(与该清除操作有关的操作信息)判断为是回放所不需要的。

如果在步骤S907将绘制物体判断为临时绘制物体，则处理进入步骤S908。在步骤S908，跳过判断为回放所不需要的操作信息，并且将操作信息和回放时间控制定时器改变成清除后的下一操作信息。

步骤S904、S905和S906中的处理与上述的相同，并且不再重复对其的说明。

在图4和10所示的例子中，进行回放以在生成绘制物体(物体ID＝0005)之后生成绘制物体(物体ID＝0007)。

如果在步骤S907判断为绘制物体不是临时绘制物体，则处理进入步骤S909。在步骤S909，判断绘制物体是否是手写笔划。

如果判断为绘制物体是手写笔划，则处理进入步骤S910。如果绘制物体是手写笔划以外的图形数据或文本数据，则处理进入步骤S912。

在步骤S910，进行字符识别程序的字符处理。字符处理包括字符提取单元和字符识别单元，其中，该字符提取单元从绘制在绘制区域301中的一个或多个手写笔划提取形成字符或字符串的笔划，并且对所提取的笔划进行分组，该字符识别单元基于所提取的笔划识别字符。将通过字符处理识别为形成字符的一个或多个手写笔划作为一个字符或字符串进行处理。

可以通过在该字符处理之后，使用字典或语义词典根据多个识别候选字符计算具有最可能的字符组合的字符串，并且分割该字符串，来进行更精确的字符处理。可选地，可以执行语义分析以将字或直线识别为字符串。作为组对以上述方式处理的手写笔划进行处理。

在本实施例中，在执行电子白板应用程序240(回放模式)期间，动态进行字符处理和分组。然而，本发明不局限于此。例如，可以预先执行这些处理，以在会议期间或会议结束时，在将操作信息记录在硬盘206中时或在启动电子白板应用程序240(回放模式)时，保存字符串数据。

在步骤S911，执行用于立即回放分组的绘制物体的处理，以缩短回放时间。然后，在步骤S905中进行短时间内的回放。更具体地，在与现在将回放的绘制物体的回放相同的定时，回放该组的剩余绘制物体。将回放时间控制定时器设置为该组中的最终操作结束时间。因此，在回放被分进一组中的绘制物体的过程中，可以通过跳过针对各绘制物体所记录的操作信息并累进回放时间控制定时器来缩短回放时间。

如果在步骤S909判断为绘制物体不是手写笔划，则处理进入步骤S912。在步骤S912，判断绘制物体是否分组。基于图5所示的绘制物体表中的组ID，判断绘制物体是否分组。如上所述，可以自动或手动进行组ID分配。

如果在步骤S912判断为绘制物体已分组，则处理进入步骤S911，以执行与上述相同的处理。

如果在步骤S912判断为绘制物体未分组，则处理进入步骤S906，以基于操作信息执行正常回放。

通过上述说明显而易见，在根据本实施例的会议系统中，当绘制区域中的绘制内容发生改变时，将改变内容记录在操作信息表中。如果绘制内容的改变是绘制区域中的绘制物体的改变，则将该改变内容记录在绘制物体表中。因此，在回放绘制内容的过程中，可以基于操作信息表和绘制物体表判断操作信息是否是回放所需要的，并且确定回放定时。

这使得能够在适当定时仅回放回放所需要的操作信息，缩短回放时间，并且简单实现易于掌握内容的回放。

第二实施例

在第一实施例中，与背投显示器101连接的个人计算机104记录操作信息表251和绘制物体表252，并且回放绘制内容。然而，本发明不局限于此。例如，可以通过网络分别设置记录操作信息表和绘制物体表的装置以及回放绘制内容的装置。现在说明根据本实施例的显示控制设备。下面仅说明与第一实施例的不同点。

图11是示出使用根据本实施例的显示控制设备的会议系统(显示控制系统)的总体结构的图。参考图11，各会议系统1101和1102均包括背投显示器、个人计算机和数位笔，并且均具有与图1相同的结构。

附图标记1103表示因特网等网络。会议服务器1104存储从各个位置的会议系统1101和1102接收到的操作信息表和绘制物体表。个人计算机1105用作显示控制设备。

将会议保持在各个位置的会议系统1101和1102中。通过会议系统的网络接口单元和网络1103将所记录的操作信息表和绘制物体表存储在会议服务器1104中。

可通过网络1103与会议服务器1104连接的装置，即，会议系统1101和1102以及个人计算机1105可以回放绘制内容。这些装置具有执行电子白板应用程序的回放模式的功能。

在本实施例中，个人计算机1105在回放绘制内容中进行操作信息获取和回放部分提取。然而，本发明不局限于此。例如，会议服务器1104等外部信息处理设备可以执行一些或全部处理(操作信息获取和回放部分提取)，并且个人计算机可以仅执行回放显示。

如上所述，根据本实施例，在使用在包括电话会议的会议系统中所记录的操作信息回放绘制内容的过程中，可以缩短回放时间，并实现易于掌握内容的回放。还可以通过使回放装置以外的显示控制设备执行一些或全部除显示以外的处理，降低回放装置的处理负荷。

第三实施例

在第一和第二实施例中，通过在适当定时仅回放回放所需的操作信息，来缩短回放时间。然而，本发明不局限于此。例如，可以通过在适当定时仅回放所记录的操作信息中具有用户所指定的属性的操作信息，来缩短回放时间。下面将说明第三实施例。

1.显示控制系统的外观

图12是示出具有根据本发明的第三实施例的显示控制设备的会议系统(显示控制系统)1200的外观的图。参考图12，附图标记1210表示显示设备。显示设备1210是具有安装在屏幕周围的数位器1240的装配有数位器的显示设备。

计算机设备1220用作对显示设备1210上的显示进行控制的显示控制设备，并且可通信地连接到显示设备1210。计算机设备1220具有能够绘制字符或图形图案等物体并能够编辑绘制物体的电子白板应用程序。该电子白板应用程序使显示设备1210用作电子白板。

数位笔1230用作输入装置。用户可以使用数位笔1230在用作电子白板的显示设备1210上绘制字符或图形图案等物体，并对绘制物体进行编辑。

除数位笔1230以外，输入装置还包括与计算机设备1220连接用以向计算机设备1220输入指令的键盘1250和鼠标1260。

2.显示控制设备的结构

图13是示出用作显示控制设备的计算机设备1220的结构的框图。计算机设备1220包括CPU 1301、RAM 1302、ROM 1303、HDD 1304、输入装置I/F单元1305、网络接口单元1306、以及显示I/F单元1307。

输入装置I/F单元1305接收从数位器1240输出的关于指示位置的信息。输入装置I/F单元1305还从用作计算机设备1220的输入装置的键盘1250或鼠标1260接收指令。

存储在HDD 1304中的电子白板应用程序1310具有在绘制模式中执行的功能和在回放模式中执行的功能。绘制模式使显示设备1210用作电子白板。回放模式使显示设备1210用作回放装置。

作为在绘制模式中执行的功能，电子白板应用程序1310包括识别单元1311、处理执行单元1312、绘制控制单元1313和记录单元1314。

识别单元1311识别输入装置I/F单元1305接收到的各种操作指令。更具体地，识别单元1311识别页面操作指令、绘制物体生成指令或者用于编辑已生成的绘制物体的指令。

处理执行单元1312执行与识别单元1311所识别出的各种操作指令相对应的处理。

如果处理执行单元1312所执行的处理改变了待显示在显示设备1210上的绘制物体，则绘制控制单元1313生成改变后的物体。然后，绘制控制单元1313通过显示I/F单元1307将所生成的绘制物体输出到显示设备1210。

记录单元1314将关于识别单元1311所识别出的各种操作指令的信息(操作信息)记录在HDD 1304中的操作信息表1321中。当绘制物体根据操作指令发生改变时，记录单元1314将关于绘制物体的信息(绘制物体信息)记录在绘制物体信息表1322中。

作为在回放模式中执行的功能，电子白板应用程序1310包括操作信息获取单元1315、回放部分提取单元1316、以及回放单元1317。

操作信息获取单元1315从在各个会议中记录在HDD 1304中的多个操作信息表1321和绘制物体信息表1322中，获取用户所指定的操作信息表和绘制物体信息表。

回放部分提取单元1316基于所获取的操作信息表1321和绘制物体信息表1322，提取回放记录内容所使用的操作信息。回放记录内容所使用的操作信息包括具有用户所指定的属性的操作信息和在该操作信息前后所记录的操作信息(后面将就此进行详细说明)。

回放单元1317提取确定为用于回放的操作信息，并且使用该操作信息在显示设备1210上回放记录内容。

在CPU 1301的控制下根据需要将电子白板应用程序1310、操作信息表1321和绘制物体信息表1322载入RAM 1302，并且由CPU 1301执行。

3.显示窗口的结构

图14是示出通过在会议系统1200中启动电子白板应用程序的绘制模式显示在显示设备1210上的UI的例子的图。

参考图14，附图标记1400表示显示窗口。区域1401(绘制区域)允许显示窗口1400中的绘制输入。在绘制模式中，用户可以使用数位笔1230生成绘制物体。附图标记1402和1403表示所生成的绘制物体的例子。

绘制物体1402是包括在手写输入模式中通过手写输入的五个笔划的字符串“01010”。绘制物体1403是在工具输入模式中输入的直线，并且包括一个笔划。通过菜单(未示出)进行手写输入模式和工具输入模式之间的切换。

可以对绘制在绘制区域1401中的绘制物体1402和1403进行编辑。更具体地，用户选择绘制物体，并且从菜单(未示出)选择项，从而执行移动、调整大小、清除、剪切和复制等编辑操作。

页面操作区域1404使得能够在绘制区域1401中进行页面操作。页面操作区域1404显示页面的缩略图。用户可以通过使用数位笔1230输入指令，进行页面的切换、移动和删除、以及新页面的添加等页面操作。

附图标记1405表示页面操作按钮，该页面操作按钮包括正在显示的页面的编码、以及同样可用于页面切换的页面跳过和返回按钮。

4.操作信息表1321的结构

图15是示出记录关于在电子白板应用程序1310的绘制模式的执行期间所进行的用户操作的操作信息的操作信息表1321的例子的图。

在每个会议中生成操作信息表1321。将绘制物体生成操作、编辑操作和页面操作等操作顺序记录在操作信息表1321中，作为操作信息。

记录在操作信息表1321中的各操作信息具有项“操作开始时间”、“操作结束时间”、“操作类型”、“物体ID”、“页码”、以及“用户ID”。

“操作开始时间”表示操作开始的时间。“操作结束时间”表示操作结束的时间。“操作类型”表示操作的类型。

“物体ID”表示在绘制区域1401中生成并通过用户操作改变(生成或编辑)的绘制物体的标识符，并且对应于图16所示的绘制物体信息表。

“页码”表示操作的页面或切换目的地页面的编码。“用户ID”表示操作者的ID。

5.绘制物体信息表1322的结构

图16是示出记录关于在会议系统1200中的电子白板应用程序1310的绘制模式的执行期间由于生成或编辑操作而改变的绘制物体的绘制物体信息的绘制物体信息表的例子的图。

为在绘制区域1401中所生成的绘制物体自动分配ID。绘制物体信息表1322记录“绘制物体ID”、“数据类型”和生成绘制物体所需的数据(“绘制物体数据”)，作为绘制物体信息。

“数据类型”表示绘制物体的类型，包括笔划或者直线、矩形或圆等图形工具类型。“绘制物体数据”记录手写笔划的X和Y坐标、直线的起点和终点的坐标、或者矩形的左上坐标和右下坐标。还可以记录颜色数据、线型数据和填充颜色等。

6.回放处理的序列

图17是示出计算机设备1220中的记录内容回放处理的序列的流程图。启动电子白板应用程序1310的回放模式。在步骤S1701，计算机设备1220接收用户的会议指定，以选择记录用户想要回放的会议的记录内容。

在步骤S1702，读出与在步骤S1701所指定的会议相对应的操作信息表和绘制物体信息表。

在步骤S1703，显示用于选择回放方法的UI以接收用户的回放方法选择。图18是示出用于选择回放方法的UI的例子的图。

如图18所示，在本实施例中，用户可以选择是基于记录的所有操作信息回放记录内容，还是提取具有特定属性的操作信息，并仅基于所提取的操作信息回放记录内容(例如，1801)。

在提取具有特定属性的操作信息中，用户可以选择属性(例如，1802)。在图18所示的例子中，显示“笔划”、“特殊标记”、“搜索”和“识别”等作为可选择的属性(例如，1803)。

在步骤S1704，提取具有在步骤S1703中所选择的属性的操作信息。在步骤S1704中提取具有特定属性的操作信息之后，显示用于设置选择所提取的操作信息前后的操作信息的条件(第二条件)的UI。

图19是示出用于设置提取在步骤S1704所提取的操作信息前后的预定时间内所记录的操作信息的条件的UI的例子的图。在图19中，可以设置用户所期望的时间长度。

图20是示出用于设置提取与步骤S1704所提取的操作信息前后的预定数量的操作相对应的操作信息的条件的UI的例子的图。在图20中，可以设置用户所期望的操作数量。

如上所述，在本实施例中，不仅提取在步骤S1704中所提取的操作信息，而且还提取所提取的操作信息前后的时间或预定数量的操作内所记录的多条操作信息。这是因为：根据所选择的属性，用户不一定能仅基于所提取的具有该属性的操作信息就掌握回放的记录内容。

例如，属性“笔划”表示使用用作输入装置的数位笔1230或其它输入装置所进行的绘制物体生成操作。在这种情况下，即使当仅提取通过笔划输入的部分并回放该部分时，用户也可以掌握笔划绘制的转变。

类似地，属性“编辑”表示对绘制物体执行了放大、缩小或移动等编辑操作。在这种情况下，即使当仅提取所编辑的部分并回放该部分时，用户也可以掌握编辑的转变。

然而，使用“特殊标记”以指示例如会议期间的重要部分，并且在非常短的时间内进行了所提取的特殊标记添加操作。因此，瞬间进行仅基于所提取的操作信息的回放，并且用户不能掌握回放结果。在本实施例中，考虑到这一问题，还提取根据属性所提取的操作信息前后的预定时间或预定数量的操作内所记录的操作信息，从而可以使用所提取的操作信息执行回放。

在步骤S1705，判断是否在图19所示的UI中指定了时间长度。如果在步骤S1705判断为指定了时间长度，则处理进入步骤S1707。在步骤S1707，进一步提取指定时间内所记录的操作信息，作为在步骤S1704中所提取的操作信息前后的操作信息。

如果在步骤S1705判断为没有指定时间长度，则处理进入步骤S1706。在步骤S1706，判断是否在图20所示的UI中指定了操作的数量。如果在步骤S1706判断为指定了操作的数量，则处理进入步骤S1708。

在步骤S1708，进一步提取与指定数量的操作相对应的操作信息，作为在步骤S1704所提取的操作信息前后的操作信息。

如果在步骤S1706判断为没有指定操作的数量，则处理进入步骤S1709。

在步骤S1709，按照操作信息的记录顺序，基于所提取的操作信息，回放记录内容。如果在步骤S1705为“是”，则这里所提取的操作信息包括在步骤S1704所提取的操作信息和在步骤S1707所提取的操作信息。如果在步骤S1706为“是”，则所提取的操作信息包括在步骤S1704所提取的操作信息和在步骤S1708所提取的操作信息。如果在步骤S1706为“否”，则所提取的操作信息仅包括在步骤S1704所提取的操作信息。

对于基于所提取的操作信息的回放，显示与所提取的操作信息(或所提取的操作信息前后的时间或预定数量的操作内所记录的操作信息)有关的时间处的整个电子白板应用程序的状态。

电子白板应用程序的状态表示这样一种状态：显示在记录所提取的操作信息时已在单个页面中生成的绘制物体。

更具体地，电子白板应用程序的状态表示这样一种状态：使用下述所有操作信息，同时回放记录内容，其中，在切换到包括电子白板应用程序的执行期间所提取的操作信息的页面之后，直到所提取的操作信息的操作开始时间之前，记录各操作信息。

因此，例如，如果没有清除与该操作开始时间前所记录的操作信息相对应的任何绘制物体，则同时回放它们，作为记录内容。可以将该系统设计为仅基于所提取的操作信息和该操作信息前后的操作信息进行回放。然而，通常，用户可以通过查看整个电子白板容易地掌握回放结果。因此，以上述方式进行回放。

图21和22是沿时间轴示出使用所提取的操作信息的连续回放的概念图。图21示出没有指定时间长度或操作的数量的情况下的连续回放。图22示出指定了时间长度或操作的数量的情况下的连续回放。

参考图21，a沿时间轴直观示出从会议开始到会议结束用户所执行的操作。沿图21中的a的时间轴排列的各矩形表示连续用户操作。各矩形的左边表示连续操作的操作开始时间，而右边表示操作结束时间。在矩形中的菱形中，实心菱形表示与具有在步骤S1703中所选择的属性的绘制物体信息相对应的操作信息。空心菱形表示与不具有在步骤S1703中所选择的属性的绘制物体信息相对应的操作信息。

也就是说，操作信息2101～2104是待提取的操作信息。在切换到包括待提取的操作信息的页面之后，在待提取的操作信息的操作开始时间之前，记录操作信息2111～2114中的各条信息。使用操作信息2111～2114以在使用操作信息2101～2104回放记录内容中显示整个电子白板应用程序的状态。

参考图21，b示出使用所提取的操作信息的记录内容的连续回放。如图21中的b所示，首先，为了显示整个电子白板应用程序的状态，基于操作信息2111同时回放记录内容，然后，基于操作信息2101回放记录内容。接着，为了显示整个电子白板应用程序的状态，基于操作信息2112同时回放记录内容，然后，基于操作信息2102回放记录内容。当以相同方式基于操作信息2104回放记录内容时，结束回放处理。

这样，基于通过选择属性所提取的操作信息，按照时间顺序连续回放记录内容。这使得能够以比总时间短很多的时间回顾记录内容。通过参考操作信息的项以及执行提取、连结和回放处理，实现记录内容的回放。

另一方面，当用户指定时间长度或操作的数量时，连续回放记录内容，包括所提取的各操作信息前后的操作信息，如图22所示。

例如，如果在步骤S1705中设置“3秒”，则还提取在步骤S1704中所提取的各条操作信息2201～2204的操作开始时间之前3秒和操作结束时间之后3秒内的操作信息。更具体地，提取操作信息2201′、2201″、2202′、2202″、2203′、2203″、2204′和2204″。

为了在所提取的操作信息2201′～2204′中的各条信息的操作开始时间处显示整个电子白板应用程序的状态，执行基于操作信息2211～2214的同时回放。

如果在步骤S1706中设置“5个操作”，则提取与在步骤S1704中所提取的操作信息2201～2204中的各条信息前后5个操作相对应的操作信息2201′～2204″。

为了显示所提取的操作信息2201′～2204′中的各条操作信息的操作开始时间处的整个电子白板应用程序的状态，执行基于操作信息2211～2214的同时回放。

通过以上说明显而易见，在本实施例中，用户基于电子白板应用程序的绘制模式的执行期间所记录的操作信息，在回放记录内容中指定属性。提取具有指定属性的操作信息，从而连续回放基于所提取的操作信息的记录内容。这允许用户回放他/她想要的记录内容，并且易于掌握该内容。

在本实施例中，在选择性连续回放用户所期望的记录内容时，还提取适当的操作信息前后的操作信息，并且使用该操作信息回放记录内容。这使得用户能够容易地掌握回放结果。

在本实施例中，在基于所提取的操作信息回放记录内容的同时，回放在记录所提取的操作信息时在单个页面中已生成的绘制物体。这允许用户查看整个电子白板应用程序的状态，并容易地掌握回放结果。

在本实施例的连续回放中，优选显示表示在回放连结部分中的所提取的操作信息的切换的数据。例如，在图21中，连续执行基于操作信息2101～2104的回放。为了易于理解，可以在例如向各连结部分插入表示场景变化的字幕(telop)或使用淡入或淡出等图像效果的同时，进行回放。

可选择的属性不局限于图18所示的这些属性。例如，它们可以包括：“字符识别属性”，其为用于识别由绘制在电子白板上的物体所形成的字符、并且将字符转换成文本信息的操作的属性；和“图形识别属性”，其为用于识别图形图案的操作的属性。

属性的其它例子有：“材料搜索属性”，其为用于搜索例如材料文件的操作的属性；和“位置搜索属性”，其为用于搜索特定位置处的操作的操作的属性。属性的其它例子还有：“复制(剪切)和粘贴属性”，其为复制(或剪切)和粘贴操作的属性；和“页面切换属性”，其为页面切换操作的属性。

如上所述，可以根据可在电子白板上执行的操作的类型定义属性。还可以细分属性。例如，对于“笔划属性”，可以定义颜色类型和笔尖厚度。对于“文本输入属性”，可以定义字体类型等属性。然而，由于与会议期间很少发生的操作相对应的属性或在回顾会议中不重要的属性具有较小影响，因而这些属性对于实现本发明的目的更为有效。

第四实施例

在上述第三实施例中，用户在提取他/她想要的操作信息中指定属性。然而，本发明不局限于此，并且用户可以指定绘制物体。

在本实施例中，通过基于使用电子白板应用程序所记录的操作信息和绘制物体信息的特定绘制物体提取操作信息，进行回放。会议系统的外观和计算机设备的结构与第三实施例中的相同，并且不再重复对其的说明。

图23是示出根据本实施例的计算机设备中的回放处理的序列的流程图。

启动电子白板应用程序1310的回放模式。在步骤S1701，计算机设备接收用户的会议指定，以选择记录了用户想要回放的会议的记录内容。在步骤S1702，读出与在步骤S1701中所指定的会议相对应的操作信息表和绘制物体信息表。

在步骤S2303，显示用于选择搜索类型的UI，以接收用户的搜索类型选择。图24是示出用于选择搜索类型的UI的例子的图。

如图24所示，在本实施例中，用户可以选择基于记录的所有操作信息来回放记录内容(例如，2401)。用户还可以选择提取在生成或编辑与特定图形图案、字符或绘制位置相对应的绘制物体时所记录的操作信息，并且仅基于所提取的操作信息来回放记录内容(例如，2402)。

在步骤S2304，显示用于输入与在步骤S2302中所选择的搜索类型相对应的搜索条件(第一条件)的画面(参考图25～27其中一个)，以接收搜索条件输入。

现在说明搜索类型和搜索条件。

使用图形搜索以搜索任意图形图案。例如，围绕标记或下划线用于高可能性的指示。通过指定这样的图形图案作为搜索对象，可以对在会议期间生成指定的绘制物体的部分进行搜索，并提取该部分。例如，显示图25所示的输入画面作为搜索条件输入画面，以使得用户可以在该输入画面中输入搜索目标图形图案。在该图形搜索中，使用图25中用户所输入的图形图案作为关键字搜索绘制物体信息表，从而提取该会议期间在生成类似绘制物体时所记录的操作信息。

使用字符搜索以搜索任意字符。可以搜索并提取会议期间在绘制指定搜索目标字符时所记录的操作信息。例如，显示图26所示的输入画面作为搜索条件输入画面，以使得用户可以在该输入画面中输入搜索目标字符。在该字符搜索中，使用图26中用户输入的字符作为关键字，搜索绘制物体信息表，从而提取该会议期间在绘制类似字符时所记录的操作信息。在搜索绘制物体信息表中，同时执行字符识别处理。将通过手写输入的字符(笔划)识别为文本信息。

使用位置搜索以搜索任意位置处的绘制物体。可以搜索并提取在电子白板的任意位置处生成或编辑绘制物体时所记录的生成操作或编辑操作的操作信息。例如，显示图27所示的输入画面作为搜索条件输入画面，以使得用户可以在该输入画面中输入搜索目标位置。在该位置搜索中，在图27中输入的位置信息用作关键字。结果，搜索绘制物体信息表，从而提取该会议期间在生成或编辑绘制物体时所记录的操作信息。

参考图23，在步骤S1709，按照操作信息的记录顺序，基于在步骤S2305所提取的操作信息，执行连续回放。

对于基于所提取的操作信息的回放，显示与所提取的操作信息有关的时间处的整个电子白板应用程序的状态。

然而，可以仅基于通过搜索所提取的操作信息回放记录内容，而不显示整个电子白板的状态。尤其在位置搜索中，由于仅可以回放基于在特定位置处生成或编辑绘制物体时所记录的操作信息的记录内容，因而仅基于所提取的操作信息回放记录内容更为有效。

可以将位置搜索与其它搜索或第三实施例中所述的回放方法相组合。例如，可以基于指定范围和指定图形图案进行搜索和回放。可选地，可以基于指定范围和指定操作属性进行回放。

通过上面的说明显而易见，根据该实施例，用户可以在基于电子白板应用程序所记录的操作信息回放记录内容中，基于绘制物体指定搜索条件。

第五实施例

在第三和第四实施例中，电子白板应用程序与操作信息表相对应地记录绘制物体信息。然而，本发明不局限于此。可以一起记录语音数据和语音数据的属性信息(例如，关于扬声器的信息)。

在这种情况下，当开始执行电子白板应用程序时，与时间信息相对应地，顺序记录语音数据和语音数据的属性信息。结果，在基于所提取的操作信息回放记录内容中，一起回放在操作信息的操作开始时间和操作结束时间之间所记录的语音数据。

这使得在更短的回放时间中甚至可以回放语音数据。在提取操作信息中，可以选择语音数据的属性信息。

其它实施例

本发明还可应用于包括多个装置(例如，主计算机、接口装置、读取器和打印机)的系统或包括单个装置的设备(例如，复印机或传真设备)。

甚至通过将记录用于实现上述实施例的功能的软件程序代码的存储介质提供给系统或设备，来实现本发明的目的。在这种情况下，通过使该系统或设备的计算机(或CPU或MPU)读出并执行存储在存储介质中的程序代码，来实现这些功能。在这种情况下，存储程序代码的存储介质构成本发明。

用于提供该程序代码的存储介质的例子有软(floppy

)盘、硬盘、光盘、磁光盘、CD-ROM、CD-R、磁带、非易失性存储卡和ROM。

不仅当计算机执行读出的程序代码时，而且还在例如运行在计算机上的OS(操作系统)基于该程序代码的指令执行部分或全部实际处理时，实现上述实施例的功能。

当将从存储介质读出的程序代码写入插入计算机中的功能扩展板或与计算机连接的功能扩展单元的存储器中时，同样实现上述实施例的功能。更具体地，在将该程序代码写入该存储器中之后，功能扩展板或功能扩展单元的CPU基于该程序代码的指令执行部分或全部实际处理，从而实现这些功能。

尽管参考典型实施例说明了本发明，但是应该理解，本发明不局限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功能。

Claims (16)

1.一种连接到显示设备的显示控制设备中的显示控制方法，包括以下步骤：

获取步骤，用于从在获取表示用于绘制物体的绘制区域中的操作的操作信息时记录所述绘制区域中的改变内容的记录设备，获取关于所述改变内容的信息；

判断步骤，用于在所述获取步骤中所获取的关于所述改变内容的信息中，判断要用于回放绘制内容的信息，并且基于该信息确定所述绘制内容的回放定时；以及

回放步骤，用于提取在所述判断步骤中判断为要用于回放的信息，并且使用所提取的信息在所确定的回放定时在所述显示设备上回放所述绘制内容。

2.根据权利要求1所述的显示控制方法，其特征在于，关于所述改变内容的信息包括：操作信息表，所述操作信息表顺序记录改变了所述绘制区域中的所述绘制内容的用户操作信息；以及绘制物体表，所述绘制物体表顺序记录关于所述绘制区域中的通过操作改变了的物体的信息。

3.根据权利要求2所述的显示控制方法，其特征在于，当记录在所述操作信息表中的所述操作信息是关于移动在所述绘制区域中所定义的页面的页面操作的操作信息，并且所述页面操作表示连续页面操作时，在所述判断步骤中，将关于所述连续页面操作的第一页面操作的操作信息和关于最终页面操作的操作信息判断为要用于回放所述绘制内容。

4.根据权利要求2所述的显示控制方法，其特征在于，当记录在所述操作信息表中的所述操作信息包括关于所述绘制区域中的物体的生成操作的操作信息、以及关于通过所述生成操作所生成的物体的清除操作的操作信息时，在所述判断步骤中，将关于所述生成操作的操作信息和关于所述清除操作的操作信息判断为不用于回放所述绘制内容。

5.根据权利要求2所述的显示控制方法，其特征在于，还包括分组步骤，所述分组步骤用于对记录在所述绘制物体表中的多条关于物体的信息进行分组，

其中，在所述判断步骤中，将在所述分组步骤中分组后的多条关于物体的信息的回放定时确定为该组中的记录在所述绘制物体表中的第一条关于物体的信息的回放定时。

6.根据权利要求5所述的显示控制方法，其特征在于，在所述分组步骤中，将记录在所述绘制物体表中的关于物体的信息中的、关于在回放时形成字符和单词之一的多个物体的信息分成一组。

7.根据权利要求2所述的显示控制方法，其特征在于，当记录在所述操作信息表中的所述操作信息是关于所述绘制区域中的物体的编辑操作的操作信息时，在所述回放步骤中，在使用关于所述编辑操作的所述操作信息回放所述绘制内容中，回放通过所述编辑操作编辑后的物体。

8.一种连接到显示设备的显示控制设备，包括：

获取部件，用于从在获取表示用于绘制物体的绘制区域中的操作的操作信息时记录所述绘制区域中的改变内容的记录设备，获取关于所述改变内容的信息；

判断部件，用于在所述获取部件获取的关于所述改变内容的信息中，判断要用于回放绘制内容的信息，并且基于该信息确定所述绘制内容的回放定时；以及

回放部件，用于提取所述判断部件判断为要用于回放的信息，并且使用所提取的信息在所确定的回放定时在所述显示设备上回放所述绘制内容。

9.一种连接到显示设备的显示控制设备中的显示控制方法，包括以下步骤：

获取步骤，用于从在获取表示用于绘制物体的绘制区域中的操作的操作信息时记录所述绘制区域中的改变内容的记录设备，获取关于所述改变内容的信息；

输入步骤，用于输入第一条件，以从在所述获取步骤中所获取的关于所述改变内容的信息中提取要用于回放绘制内容的信息；以及

回放步骤，用于从在所述获取步骤中所获取的信息中提取满足所述第一条件的信息，并且使用所提取的信息在所述显示设备上连续回放所述绘制内容。

10.根据权利要求9所述的显示控制方法，其特征在于，在所述获取步骤中所获取的信息包括所述操作信息和关于所述绘制区域中的通过操作改变了的物体的物体信息。

11.根据权利要求10所述的显示控制方法，其特征在于，

在所述输入步骤中，可以输入所述物体信息中包含的物体的属性，作为所述第一条件，以及

在所述回放步骤中，提取具有所输入的属性的所述物体信息，并且按照相应操作信息的记录顺序，使用所提取的所述物体信息执行连续回放，从而在所述显示设备上连续回放所述绘制内容。

12.根据权利要求10所述的显示控制方法，其特征在于，

在所述输入步骤中，可以输入图形图案和字符之一，作为所述第一条件，以及

在所述回放步骤中，提取关于形成与所输入的图形图案或字符相同或类似的图形图案和字符之一的物体的物体信息，并且按照相应操作信息的记录顺序，使用所提取的所述物体信息执行连续回放，从而在所述显示设备上连续回放所述绘制内容。

13.根据权利要求10所述的显示控制方法，其特征在于，

在所述输入步骤中，可以输入所述绘制区域中的位置，作为所述第一条件，以及

在所述回放步骤中，提取关于在所输入的位置处绘制的物体的物体信息，并且按照相应操作信息的记录顺序，使用所提取的所述物体信息执行连续回放，从而在所述显示设备上连续回放所述绘制内容。

14.根据权利要求9所述的显示控制方法，其特征在于，

所述输入步骤还包括设置步骤，所述设置步骤用于设置第二条件，以提取在满足所述第一条件的信息前后所记录的信息，以及

在所述回放步骤中，除满足所述第一条件的信息以外，还提取满足所述第二条件的信息，并且使用该信息在所述显示设备上连续回放所述绘制内容。

15.根据权利要求14所述的显示控制方法，其特征在于，

在所述设置步骤中，可以设置时间和操作数量之一，作为所述第二条件，以及

在所述回放步骤中，提取在满足所述第一条件的信息前后的所设置的时间内或所设置的操作数量内所记录的信息，作为满足所述第二条件的信息。

16.一种连接到显示设备的显示控制设备，包括：

获取部件，用于从在获取表示用于绘制物体的绘制区域中的操作的操作信息时记录所述绘制区域中的改变内容的记录设备，获取关于所述改变内容的信息；

输入部件，用于输入第一条件，以从所述获取部件获取的关于所述改变内容的信息中提取要用于回放绘制内容的信息；以及

回放部件，用于从所述获取部件获取的信息中提取满足所述第一条件的信息，并且使用所提取的信息在所述显示设备上连续回放所述绘制内容。

Images