CN102169482B - 信息处理装置以及通信会议系统 - Google Patents

Abstract

本发明涉及信息处理装置以及通信会议系统，即使在用户对文件数据等写入注释等情况下，也能够防止文件的可读性下降。其中，会议服务器装置向参加通信会议的终端装置(3)发送会议资料等文件数据，终端装置(3)将文件数据作为最下层的图层显示在显示部(46)上，同时通过图形输入板或者鼠标等输入部(45)接受针对该显示画面的写入操作，并将与接受的写入操作有关的写入图像作为上层的图层重叠显示。此时，终端装置(3)将与文件数据中包含的文章的文字或者单词外接的矩形区域设定为禁止写入区域，并在禁止写入区域内写入了引线等的情况下将与该写入内容有关的图像显示在禁止写入区域的周围。

Description

信息处理装置以及通信会议系统

技术领域

本发明涉及多个用户即使相距很远也能够通过网络来进行会议的信息处理装置以及通信会议系统。

背景技术

随着网络技术的发展，能够在远程设置的两个站点或三个站点以上的多站点处所设置的多个终端装置之间收发视频以及语音等大容量数据，利用这些终端装置使相距很远的用户能够进行会议的通信会议系统已经被实用化。

另外，在近年的通信会议系统中存在以下的通信会议系统：可以在多个终端装置之间共享文件数据等，使参加通信会议的用户能够阅览共同的文件数据等。参加通信会议的用户能够利用终端装置对共同的文件数据进行追加或者编辑等处理，这些处理的结果也能够在多个终端装置之间共享，从而能够使多个用户进行阅览。

例如在日本特开平7-281971号公报中，提出了一种电子会议装置，该电子会议装置具备：显示部，其具有共同显示区域，该共同显示区域显示由通过网络连接的其他的装置输入的图形和文字等；和输入控制部，其在输入数据中附加表示深度的写入等级，在对应于写入等级的假想的深度位置描绘图形和文字等。在同一网络上连接的多个装置的利用者，通过利用该电子会议装置，能够清楚易懂得显示图形以及文字等，从而能够进行高操作效率的电子会议。

在日本特开平8-36546号公报中，提出了一种协调操作辅助系统，该协调操作辅助系统针对在计算机的视窗操作系统上运行的任意的应用程序，具备将输入操作和全部的输出显示分散共享的共享应用程序管理部、和具有将描绘了注释消息和议论焦点的透明面板直接覆盖在该显示区域上的功能的共享透明面板管理部。在该协调操作辅助系统中，不会由于丧失交流的及时性和连续性而中断思考以及操作，能够综合地分散共享协调操作中的议论对象、议论焦点和注释消息，从而能够顺利并且高效地进行协调操作。

另外，在日本特开平11-149282号公报中，提案了一种远程会议系统。在该系统中，在多个假想会议终端经由通信线路与中央处理装置连接了的情况下，中央处理装置具备多个合成前白板，能够选择从各假想会议终端写入的作为对象的合成前白板，同时以任意的组合方式来合成这些合成前白板并进行显示。在该远程会议系统中，在多人可以使用白板，各人也不需要有不要对以前的书写造成影响的担忧，另外，能够防止因白板上写入过多的信息而导致变得难以理解的情况。

但是，对于在日本特开平7-281971号公报中记载的电子会议装置，由于其将优先度较高的图形等显示在面前一侧，而将优先度较低的图形等显示在靠后一侧，所以在多个图形的显示位置重叠的情况下，可能会有如下情况发生，即靠后一侧的图形的一部分或者全部被隐藏在面前一侧的图形中从而导致用户无法阅览。另外，对于在日本特开平8-36546号公报中记载的协调操作辅助系统，由于其将注释消息和议论焦点等描绘在透明面板上并直接覆盖在应用程序的显示领域上，所以可能会有如下情况发生，即应用程序的显示内容的一部分或者全部被透明面板上描绘的图像隐藏，从而导致用户无法阅览。

对于在日本特开平11-149282号公报中记载的远程会议系统，即使在写入的图像的一部分或者全部被其他图像隐藏的情况下，通过适当地选择进行合成并显示的合成前白板的组合方式，就能够使用户阅览到被隐藏的图像。但是，用户适当地选择多个合成前白板并非易事，能够选择的合成前白板的数量越多，则对于用户来说选择操作越烦琐。

综上所述，在能够将用户写入的图像等重叠显示的系统中，在用户对终端装置的显示器等上显示的文件数据等进行注释等追加的情况下，特别是在文章中写入了如引线那样的线数据的情况下，由于追加的线在文章中被重叠描绘，所以存在文章难以阅读的问题。在构成为多个用户共享追加的内容的通信会议系统中，共享文章的一部分由于被他人的追加的内容而隐藏，所以有可能发生对于进行了追加的用户以外的用户来说文章的可读性低下变得烦琐的情况。这些问题点是无法通过上述的日本特开平7-281971号公报、日本特开平8-36546号公报、和日本特开平11-149282号公报所记载的技术来解决的。

发明内容

本发明是鉴于上述情况而完成的，其目的在于，提供一种信息处理装置以及通信会议系统，其即使在用户对文件数据等进行了注释等追加的情况下也能够防止文章的可读性下降。

在本发明中，通过针对文件数据的文章设定禁止写入区域，能够防止文章和写入图像重叠从而导致文章的可读性下降的情况。另外，并不是单纯地禁止用户向禁止写入区域进行写入，而是避开禁止写入区域将与向禁止写入区域进行的写入操作有关的写入图像显示在其周围。由此，用户不用知道是否有禁止写入区域就能够进行写入操作，通过信息处理装置写入到禁止写入区域上的写入图像会自动地显示在禁止写入区域外。所以，本发明的信息处理装置能够容易并且可靠地进行用户对文件数据的写入，并且能够可靠地防止因用户的写入而导致文件数据的文章的可读性下降的情况。

下面结合附图对本发明的上述内容及其特征进行更详细的说明。

附图说明

图1是表示本发明涉及的通信会议系统的一构成例的示意图。

图2是表示通信会议系统的终端装置的构成的框图。

图3是表示通信会议系统的会议服务器装置的构成的框图。

图4是用于说明通信会议系统中的文件数据的共享的示意图。

图5是表示用户对文章进行写入的一例的示意图。

图6是表示禁止写入区域的一例的示意图。

图7是用于说明对禁止写入区域上写入的线进行再描绘的示意图。

图8是用于说明对禁止写入区域上写入的线进行再描绘的示意图。

图9是用于说明对禁止写入区域上写入的线进行再描绘的示意图。

图10是用于说明对禁止写入区域上写入的线进行再描绘的示意图。

图11是用于说明对禁止写入区域上写入的线进行再描绘的示意图。

图12是表示终端装置进行的禁止写入区域的设定处理的流程的流程图。

图13是表示终端装置进行的禁止写入区域的设定处理的流程的流程图。

图14是表示终端装置进行的接受写入操作的处理流程的流程图。

图15是表示终端装置进行的接受写入操作的处理流程的流程图。

图16是表示终端装置进行的再描绘处理的流程的流程图。

具体实施方式

下面根据表示本发明的实施方式的附图来具体说明本发明。图1是表示本发明涉及的通信会议系统的一构成例的示意图。在该图中，1是通信会议系统的会议服务器装置，其经由无线或者有线网络2与多个终端装置3连接。会议服务器装置1在与网络2连接的多个终端装置3中任意选择的2个以上的终端装置3之间对视频、语音以及图像等各种数据的收发进行中继，由此能够实现远程通信会议(电视会议)。

连接了会议服务器装置1和多个终端装置3的网络2可以是进行会议的公司组织内的内部LAN(Local Area Network：局域网)，也可以是互联网等公共通信网络。终端装置3与会议服务器装置1之间进行验证处理，通过了连接验证的终端装置3接收来自会议服务器装置1的数据，并输出与接收到的数据相关的视频、语音和图像等，由此实现了和其他终端装置3共享视频、语音和图像等的通信会议。

另外，会议服务器装置1能够并行地进行多个通信会议。会议服务器装置1能够进行如下处理，即将2个以上的终端装置3作为进行通信会议的一个组来进行处理，并在包含于一个组中的多个终端装置3之间中继视频、语音和图像等数据，同时，允许在网络中形成多个组，并对多个组同时进行数据的中继。

通信会议系统的终端装置3可以通过将摄像头、话筒、扬声器以及通信功能搭载于具有图形输入板型的显示部和输入部的机器上的构成等来实现。但是，终端装置3的构成不限于此，也可以通过例如将摄像头和扬声器搭载于笔记本型PC(Personal Computer：个人电脑)上的构成、或者例如将摄像头和通信构成搭载于显示器上的构成等来实现。终端装置3具备如下功能等即可，即，至少与会议服务器装置1进行通信的功能、对用户等进行摄像的功能、显示图像(视频)的功能、输出语音的功能及接受用户输入操作的功能等。

图2是表示通信会议系统的终端装置3的构成的框图。另外，如图1所示那样，通信会议系统中包含有多个终端装置3，它们的构成都大致相同。但是，不需要所有的终端装置3都是相同的构成，通信会议系统中也可以包含构成不同的多个种类的终端装置3。另外，终端装置3可以是通信会议专用的装置，也可以使用通用的计算机。

构成通信会议系统的终端装置3通过具备控制部31、视频处理部32、输入语音处理部33、输出语音处理部34、通信处理部35、读取部36、临时存储部37、存储部38、输入处理部39和显示处理部40等而构成。另外，终端装置3还可以通过内置或者外接来具备摄像头41、话筒42、扬声器43、网络I/F(接口)部44、输入部45和显示部46等。

具体来说，控制部31是CPU(Central Processing Unit：中央处理器)或者MPU(Micro Processing Unit：微处理器)等运算处理装置，其通过将存储部38中预先存储的终端用程序3P读入到临时存储部37中并执行来控制终端装置3的各部的动作，从而进行与通信会议有关的各种处理。控制部31执行终端用程序3P，由此终端装置3作为本发明涉及的信息处理装置而动作。

临时存储部37例如由SRAM(Static Random Access Memory：静态随机存取存储器)或者DRAM(Dynamic Random Access Memory：动态随机存取存储器)等存储器元件构成，用于存储控制部31执行处理的过程中产生的各种信息。存储部38是硬盘或SSD(Solid State Drive：固态盘)等存储装置，其除了存储未图示的OS(Operating System：操作系统)以及各种应用软件等以外，还存储(安装)用于实现通信会议系统的终端用程序3P。

输入处理部39连接有接受用户的输入操作的图形输入板、鼠标或者触摸屏等指示器以及键盘等输入部45。输入部45向输入处理部39输出与用户的输入操作相对应的信号。输入处理部39通过处理来自输入部45的输入信号来判断用户是否进行了输入操作以及输入操作的内容(按钮的按下信息或者画面中的操作位置的坐标信息等)并通知控制部31。控制部31能够根据来自输入处理部39的通知来进行处理。

显示处理部40与液晶显示器等显示部46连接。在终端装置3具备图形输入板或者触摸屏等作为上述的输入部45的情况下，显示部46可以是能够进行接触检测的触摸屏型的显示器。控制部31经由显示处理部40，能够使显示部46显示与通信会议有关的画面。

视频处理部32与终端装置3所具备的摄像头41连接，用于控制摄像头41的动作并且取得由摄像头41拍摄的视频。摄像头41例如搭载于终端装置3的显示部46的附近，以每秒数十次或者数百次左右的频度对朝着显示部46的用户的头部或者上半身等进行摄像，并向视频处理部32输出与拍摄的视频有关的视频信号。视频处理部32可以包含编码器，也可以将摄像头41拍摄的视频变换成H.264或MPEG(MovingPicture Expert Group：动态图像专家组)等视频规划的数据。

输入语音处理部33与终端装置3所具备的话筒42连接，具有A/D变换功能，即对话筒42通过收音得到的语音进行采样从而将其变换成数字语音数据，然后输出至控制部31。另外，输入语音处理部33也可以对话筒42通过收音得到的语音进行分贝调整和波段限制等处理。另外，输入语音处理部33或者话筒42也可以具有消除回声的功能。

输出语音处理部34与终端装置3所具备的扬声器43连接。输出语音处理部34具有D/A变换功能，即在接收到由控制部31提供的语音数据的情况下将该语音数据变换成模拟语音信号并向扬声器43输出。扬声器43输出与输出语音处理部34提供的语音信号相对应的语音。

通信处理部35经由网络I/F部44与网络2连接，用于实现终端装置3的经由网络2的通信功能。网络I/F部44与构成网络2的通信电缆等连接，用于中继网络2和通信处理部35之间的信号收发。通信处理部35进行对经由网络I/F部44收发的各种信息进行分包并从包中读取信息等处理。另外，用于收发通信处理部35的视频和语音等的协议可以使用H.323、SIP(Session Initiation Protocol：会话初始协议)或者HTTP(Hypertext Transfer Protocol：超文本传输协议)等，也可以使用除此以外的通信协议。

读取部36是从CD-ROM、DVD、蓝光盘或者存储卡等记录介质9中读取信息的磁盘驱动器等装置。控制部31利用读取部36读取记录介质9中记录的数据，并将其存储在临时存储部37或者存储部38中。特别是在本实施方式中，记录介质9中记录有使计算机作为本发明涉及的信息处理装置而动作的终端用程序9P。终端装置3的存储部38中存储的终端用程序3P也可以是从记录介质9中读取的终端用程序9P的复制。

图3是表示通信会议系统的会议服务器装置1的构成的框图。通信会议系统的会议服务器装置1具备控制部11、图像处理部12、语音处理部13、通信处理部14、网络I/F部15、临时存储部16、输入处理部17、显示处理部18和存储部19等而构成。

控制部11具体来讲是CPU或者MPU等运算处理装置，通过将存储部19中预先存储的会议服务器用程序1P读取至临时存储部16并执行来控制会议服务器装置1的各部的动作，从而进行与通信会议有关的各种处理。会议服务器装置1可以通过例如在通用的计算机上安装会议服务器用程序1P来实现，控制部11执行会议服务器用程序1P，由此该会议服务器装置1作为通信会议用的服务器装置而动作。

临时存储部16由例如SRAM或者DRAM等存储器元件构成，用于存储控制部11进行的处理的过程中产生的各种信息。例如在临时存储部16中，通过控制部30临时存储有后述的图像信息等。

存储部19是硬盘或者SSD等存储装置，其除了存储未图示的OS和各种应用软件等以外，还存储用于实现通信会议系统的会议服务器用程序1P。另外，会议服务器装置1为了在通信会议上显示各终端装置3共享的会议资料等，在存储部19中存储有作为共享文件数据1D的多个文件数据。文件数据可以由文本数据、照片数据以及图像数据等各种数据构成，与数据的格式无关。另外，存储部19中还存储有用于对参加通信会议的用户进行验证处理的验证数据等其他各种数据，这里省略了图示。

输入处理部17通过对来自鼠标或者键盘等输入装置21的输入信号进行处理来判断用户是否进行了输入操作以及输入操作的内容等，并通知控制部11。控制部11能够根据来自输入处理部17的通知进行处理。显示处理部18按照控制部11的指示，通过将与显示图像有关的图像数据变换成适于在液晶显示器等显示装置22上显示的图像信号来在显示装置22上显示图像。

图像处理部12按照来自控制部11的指示生成图像。例如图像处理部12进行以下处理：从存储部19中存储的共享文件数据1D中读取作为参加通信会议的终端装置上的显示对象的文件数据，并将该文件数据变换成显示用的图像进行输出。另外，例如会议服务器装置1接收参加通信会议的终端装置3通过摄像头41拍摄的视频，而图像处理部12对接收到的视频(图像)进行放大缩小、边缘增强、颜色调整以及合成等各种图像处理。会议服务器装置1经由网络2将图像处理部12生成的图像发送至参加通信会议的终端装置3。

语音处理部13能够进行对从参加通信会议的终端装置3接收到的多个语音数据进行合成的语音处理，并且能够进行其他的各种语音处理，例如消除噪音或者调整音量等。由此，会议服务器装置1能够对多个用户的发言等语音进行合成并发送至参加通信会议的各终端装置3，而各终端装置3能够通过扬声器43输出与通信会议有关的语音。

通信处理部14经由网络I/F部15与网络2连接，其用于实现会议服务器装置1的经由网络2的通信功能。网络I/F部15与构成网络2的通信电缆等连接，用于中继网络2和通信处理部14之间的信号收发。通信处理部14进行对经由网络I/F部15收发的各种信息进行分包以及从包中读取信息等处理。另外，用于收发通信处理部14所处理的视频和语音等的协议可以使用H.323、SIP或者HTTP等，也可以使用除此以外的通信协议。

在本实施方式涉及的通信会议系统中，参加通信会议的用户使用终端装置3对输入部45进行输入操作，并起动用于进行通信会议的应用程序(终端用程序3P)。当通信会议用的应用程序被起动后，由于显示部46上显示了验证信息的输入画面，所以用户在该输入画面上输入用户ID(IDentifier：身份)和密码等验证信息。在终端装置3中，输入处理部39接受用户的验证信息的输入，将接受到的验证信息发送至会议服务器装置3，并接收验证结果。此时，与验证信息一起发送至会议服务器装置1的还有分配给终端装置3的IP地址等识别信息，会议服务器装置1能够根据识别信息来识别参加通信会议的终端装置3。

在通过会议服务器装置1的验证处理允许参加通信会议的情况下，终端装置3使显示部46显示通信会议用的应用程序的主画面。由此，用户能够将终端装置3作为会议用终端加以利用，从而能够参加通信会议。另外，在通过会议服务器装置1的验证处理没有被允许参加通信会议的情况下，终端装置3也可以使显示部46显示告知没有被允许的消息等。

在成功通过验证处理从而参加通信会议的各终端装置3中，显示了由会议服务器装置1发送来的会议资料等文件数据。这里，对在多个终端装置3之间共享文件数据从而实现会议的方法进行说明。图4是用于说明通信会议系统中的文件数据的共享的示意图。另外，在图4中，表示了2个终端装置(为了进行区别，将一方设为A终端装置3而将另一方设为B终端装置3)共享文件数据的情况的例子。

通信会议的召开者预先向会议服务器装置1预约召开通信会议，此时将通信会议中使用的资料预先登录在会议服务器装置1中。会议服务器装置1中登录的资料是由文本或者图像等数据构成的文件数据，例如可以是文本文件、图像文件、演示软件用1文件等各种数据形式。会议服务器装置1将这些由召开者预先登录的文件数据作为共享文件数据1D存储起来。

会议服务器装置1利用图像处理部12，将存储部19中存储的共享文件数据1D中的会议使用的文件数据按每页变换成图像(图形)，并利用通信处理部14，经由网络2向参加通信会议的所有终端装置3(A终端装置3和B终端装置3)发送变换后的图像。

参加通信会议的A终端装置3和B终端装置3从会议服务器装置1接收每页文件数据的图像，并为了使显示部46显示接收到的图像而从显示处理部40输出。此时，显示处理部40以使得共享的每页文件数据的图像属于显示画面的最下层的图层(在图4中用粗线表示)的方式进行描绘。

另外，A终端装置3和B终端装置3能够接受利用了输入部45的图形输入板或者鼠标等的用户注释等写入操作。各终端装置3的控制部31根据输入处理部39接受的写入操作的输入生成写入图像，并为了使显示部46显示该写入图像而从显示处理部40输出。此时，显示处理部40以使得写入图像属于显示画面的最上层的图层的方式进行描绘。

并且，A终端装置3和B终端装置3将根据注释等写入操作生成的写入图像作为写入信息发送至会议服务器装置1。写入信息例如是生成的每个目标图像的种类、颜色、粗细、线种、涂色等画法以及坐标等信息。

会议服务器装置1接收从各终端装置3发送来的写入信息，并存储到临时存储部37中。但是，会议服务器装置1也可以将接收到的写入信息直接存储到存储部38中，即使是在写入信息被存储到临时存储部37中的情况下，也优选从临时存储部37定期地将写入信息保存到存储部38中。在存储接收到的写入信息时，会议服务器装置1识别来自各终端装置3的写入信息的各自的发送源来存储写入信息。在图4所示的例子中，在A终端装置3中生成的写入图像的信息作为写入信息101A，与识别A终端装置3的信息(终端A)建立对应地被存储。同样，在B终端装置3中生成的写入图像的信息作为写入信息101B，与识别B终端装置3的信息(终端B)建立对应地被存储。

另外，会议服务器装置1将识别每个终端装置3来存储的写入信息101A和101B分别发送至与其不同的终端装置3。即，与A终端装置3有关的写入信息101A被从会议服务器装置1发送至B终端装置3。同样，与B终端装置3有关的写入信息101B被从会议服务器装置1发送至A终端装置3。

各终端装置3根据会议服务器装置1发送来的其他的终端装置3的写入信息来生成图像并显示在显示部46上。例如，A终端装置3生成基于从会议服务器装置1发送来的B终端装置3的写入信息101B的图像并显示在显示部46上。此时，基于B终端装置3的图像被描绘在每页共享文件数据的图像所属的最下层的图层、和A终端装置3的写入图像所属的最上层的图层之间的图层中。对于B终端装置3也是一样。

由此，如图4的最下部所示那样，无论是A终端装置3还是B终端装置3，都是在共享文件数据的图像之上显示由其他的终端装置3写入的写入图像，而在最上面显示由自身的输入部45进行写入操作而得到的写入图像。

另外，关于在各终端装置3中显示了(阅览)共享文件数据1D的哪个数据的哪页图像的信息会作为阅览信息由各终端装置3定期地发送至会议服务器装置1。会议服务器装置1识别各自的发送源的终端装置3来将来自各终端装置3的阅览信息存储到临时存储部16中。在图4所示的例子中，与A终端装置3中的显示有关的信息作为阅览信息102A，与识别A终端装置3的信息(终端A)建立对应地被存储。同样，与B终端装置3中的显示有关的信息作为阅览信息102B，与识别B终端装置3的信息(终端B)建立对应地被存储。另外，阅览信息102A和102B可以是各终端装置3中各图层重叠而得到的图像。会议服务器装置1预先存储在各终端装置3中显示了哪个数据的哪页的信息，由此会议服务器装置1也能够进行使终端装置3同步动作等的处理，以使参加通信会议的所有终端装置3在同一时刻显示相同页的图像。

由此，多个终端装置3中共享会议资料等文件数据的图像，并且在该图像之上各终端装置3显示自身接受写入操作而得到的写入图像，同时也共享并显示其他的终端装置3中生成的写入图像。参加通信会议的用户通过使用各终端装置3，能够阅览共同的文件数据，能够向其他的会议参加者公布自身的写入内容，并且能够阅览其他的会议参加者的写入内容。并且，由各终端装置3的摄像头41拍摄的视频以及由话筒42录音而得到的语音等能够经由会议服务器装置1被发送到其他的终端装置3，并且在各终端装置3中能够输出接收到的视频以及语音。由此，实现了共享会议资料等文件数据、和用户的视频以及语音等的通信会议。

在本实施方式涉及的通信会议系统中，各终端装置3将从会议服务器装置1发送来的会议资料等共享的文件数据作为最下层的图层显示在显示部46上，并且接受使用了输入部45的图形输入板或者鼠标等的用户的写入操作，将写入图像作为最上层的图层重叠显示在显示部46上，由此，实现了用户针对共享的文件数据进行的自由的写入。但是，对于包含文字信息(文章)的文件数据来说，在用户进行了写入操作的情况下，由于用户的写入图像与文章的一部分重叠显示，所以可能会发生文章的易读性或者可读性下降的情况。

图5是表示用户对文章进行写入的一例的示意图。在图5的(a)中例示抽出了终端装置3的显示部45上显示的文件数据中所包含的文章的一部分。在图5的(b)中表示了用户对该文章进行了写入的例子。在用户对文件数据中包含的文章进行写入的情况下，从文章中的重要部分向周围的空白部分等画出引线、在引线的末端注释文字或者图形等的情况较多。图5的(b)的例子图示了如下情况，即从文章中的“数据”的文字列向空白部分画出引线，并在其末端写入星形图形。由于用户写入的写入图像(在图5中是引线和星形图形)被显示在比文件数据的文章更上层的图层中，所以写入图像的引线被描绘在文章中的文字“在”上，导致“在”的易读性或者可读性下降。

于是，本实施方式的终端装置3具备如下功能，即在用户在文件数据中包含的文章的文字或者单词上进行了书写的情况下，将文字或者单词上的写入图像重新配置并显示(再描绘)在没有显示文章中的文字或者单词的部分上，由此防止文章的易读性或者可读性的下降。在图5的(c)所示的例子中，对文章中的文字“在”上通过的引线进行再描绘以使其绕过文字“在”的周围。由此消除了文字“在”与写入图像的重叠，从而提高了文章的易读性或者可读性。

为了对上述的写入图像进行再描绘，终端装置3首先进行从会议服务器装置1提供的文件数据中分离构成文章的文字或者单词的处理。在将文件数据中的文字作为图像数据进行处理的情况下，终端装置3使用现有的文字识别技术从图像中识别文字，取得文字的种类、文字的大小以及文字的显示位置等信息，由此能够进行文字或者单词的分离处理。另外，文件数据是如文字处理软件或者应用软件等的文件形式那样包含有文字编码信息的数据，在构成为从会议服务器装置1向终端装置3发送包含文字编码信息的数据的情况下，终端装置3也可以不进行文字识别处理。

接着，终端装置3对文件数据的文章，设定禁止用户写入的禁止写入区域。图6是表示禁止写入区域的一例的示意图，其对图5的(a)的文章例设定禁止写入区域，并用矩形框表示禁止写入区域。终端装置3根据从文件数据中取得的文字的种类、文字的大小以及文字的显示位置等信息，分别计算与文章中的各文字外接的矩形区域，并将该矩形区域设定为禁止写入区域(参照图6的(a))。

另外，终端装置3也可以按照文章中的每个单词设定禁止写入区域(参照图6的(b))。在这种情况下，终端装置3将作为单词处理的文字列的信息作为字典信息预先存储在存储部38中，并针对通过文字识别处理取得的各文字来判断该文字以及其前后左右的文字组成的文字列是否对应于字典数据中的文字。在能够将多个文字作为1个单词进行处理的情况下，终端装置3将与该单词外接的矩形区域设定为禁止写入区域。由此，在终端装置3对用户写入的引线进行再描绘的情况下，能够防止看上去像是1个单词被再描绘得到的引线切开那样的情况。另外，在虽然是字典数据中包含的单词但是由于换行等离开了显示位置的情况下，终端装置3会对其设定另外的禁止写入区域。

接着，终端装置3对用户的写入操作进行监视，并在对针对文件数据设定的禁止写入区域进行了写入操作的情况下，对禁止写入区域上的写入图像进行再描绘。详细来讲，终端装置3由输入处理部39接受用户利用图形输入板或者鼠标等输入部45进行的输入，并通过对由此得到写入内容时的输入模式以及写入位置等信息进行监视来检测与用户的写入操作有关的书写轨迹。在根据检测到的书写轨迹得知用户的书写是引线等线、并且该线通过了禁止写入区域的情况下，终端装置3对禁止写入区域上的线进行再描绘。

图7～图11是用于说明在禁止写入区域上书写的线的再描绘的示意图，其中，用虚线矩形框表示禁止写入区域，用实线箭头表示被写入的线以及再描绘得到的线。终端装置3检测用户写入的轨迹，并在通过禁止写入区域的线被写入的情况下(参照图7的(a))对写入的线进行再描绘。这里，在将禁止写入区域的外周部分与写入的线的交点设为点a和点b的情况下(参照图7的(b))，终端装置3用沿着禁止写入区域的周围的其他的线段(代替线段)来代替禁止写入区域内的线段ab。对于沿着禁止写入区域的周围连接点a和点b的线路，如图7的(c)所示那样，可以选择2条线路(逆时针的线路A或者顺时针的线路B)，而终端装置3选择最短的线路A作为代替线段的线路。并且，终端装置3将通过线路A沿着禁止写入区域的周围连接点a和点b的折线设为代替线段，并在显示部46上再描绘连接了该代替线段和禁止写入区域外的线的代替线(参照图8的(a))。

另外，由于禁止写入区域被设定为与文章中的文字或者单词外接的矩形，所以在禁止写入区域的边界线上再描绘沿着禁止写入区域的周围的代替线段的情况下，可能会发生文字或者单词和代替线段接触从而导致易读性或者可读性下降的情况。在这种情况下，终端装置3可以将代替线设置在与禁止写入区域的外周相隔规定距离(例如数个像点)的位置上(参照图8的(b))。或者，也可以将禁止写入区域设定为与文字或者单词相比仅大数个像点。

并且，根据文章中的文字间隔的设定等不同，会有邻接的文字或者单词的各个禁止写入区域被无间隔地设定的情况。在这种情况下，对于禁止写入区域的外周存在空白的位置，终端装置3可以在相隔规定距离的位置上设置代替线，而对于禁止写入区域被无间隔地设定的位置，终端装置3可以设置在禁止写入区域的边界线上通过的代替线(参照图8的(c))。

对于用户写入的线，终端装置3针对该线通过的所有禁止写入区域进行上述处理。例如，在如图9的(a)所示那样、用户写入的线通过了2个禁止写入区域的情况下，终端装置3用沿着禁止写入区域的周围的代替线段分别代替通过各禁止写入区域内的线段(参照图9的(b))。这里，在由2个禁止写入区域的文字构成1个单词的情况下，通过按照每个单词设定禁止写入区域，能够如图9的(c)所示那样以绕过单词周围的方式设置代替线。

另外，在用户写入的多条线通过了1个禁止写入区域的情况下，终端装置3也同样地对各线分别进行上述处理即可。例如在如图10的(a)所示那样、文章以横贯多列的方式被记载，从下段中间的单词朝着上方的左右两边拉出引线，并且2条引线朝着不同方向通过了1个禁止写入区域的情况下，终端装置3通过上述的流程计算最短线路的代替线段，由此能够如图10的(b)所示那样对绕过单词周围的2条线进行再描绘。

与此相对，在如图11的(a)所示那样，2条引线朝着相同方向通过1个禁止写入区域，并且通过上述的流程计算出的最短线路的代替线段重叠的情况下，终端装置3将2条代替线段设置在相隔规定距离(例如数个像点)的位置上(参照图11的(b))。但是，在重叠的代替线段的数量较多的情况下，或者没有使多个代替线段之间间隔充分距离的空白等的情况下，终端装置3可以如图11的(c)所示那样，使任意的1条线以沿着1个邻接的禁止写入区域的周围的方式绕过来进行再描绘。对于此时使哪条线绕过，例如可以根据用户进行写入的顺序来决定，也可以根据写入的线的位置等来决定。

图12和图13是表示终端装置3进行的禁止写入区域的设定处理的流程的流程图，是通过终端装置3的控制部31执行终端用程序3P来进行的处理。首先，终端装置3的控制部31通过通信处理部35接收从会议服务器装置1发送来的共享的文件数据(步骤S1)。另外，在终端装置3中，用户能够设定是否利用防止文章中的文字或者单词与写入图像(线)重叠的功能，终端装置3的控制部31取得与重叠防止功能有关的设定(步骤S2)，判定重叠防止功能是否被设定为有效(利用)(步骤S3)。在重叠防止功能没有被设定为有效的情况下(S3：否)，控制部31通过显示处理部40进行将步骤S1中接收到的文件数据显示在显示部46上的处理(步骤S4)并结束处理。

在重叠防止功能被设定为有效的情况下(S3：是)，控制部31对在步骤S1中接收到的文件数据进行文字识别处理(步骤S5)，从而将文件数据分离成文字和其他的构成要素。控制部31取得文件数据中的一个文字(步骤S6)，计算与该文字外接的矩形区域，并将该矩形区域设定成对于该文字的禁止写入区域(步骤S7)。控制部31判定针对文件数据中包含的所有的文字设定禁止写入区域的处理是否已经结束(步骤S8)，在针对所有文字的设定没有结束的情况下(S8：否)，返回步骤S6的处理，进行针对其他文字的处理。

在针对所有文字设定禁止写入区域的处理已经结束的情况下(S8：是)，控制部31通过参照与重叠防止功能有关的设定，判定是否以单词为单位设定禁止写入区域(步骤S9)。在不是以单词为单位设定禁止写入区域的情况下(S9：否)，控制部31完成以文字为单位的禁止写入区域，并通过显示处理部40进行将步骤S1中接收到的文件数据显示在显示部46上的处理(步骤S13)，然后结束处理。

在以单词为单位设定禁止写入区域的情况下(S9：是)，控制部31读取预先存储在存储部38中的字典数据(步骤S10)，并通过比较文件数据中包含的多个文字组成的文字列是否对应于字典数据中的单词来进行从文件数据提取单词的处理(步骤S11)。接着，控制部31将步骤S7中针对按每个文字设定的禁止写入区域按照每个单词进行连结(步骤S12)，从而设定每个单词的禁止写入区域，并通过显示处理部40进行将步骤S1中接收到的文件数据显示在显示部46上的处理(步骤S13)，然后结束处理。

图14和图15是表示终端装置3进行的接受写入操作的处理流程的流程图，是通过终端装置3的控制部31执行终端用程序3P来进行处理的。另外，在本流程中，对终端装置3具备图形输入板作为输入部45的情况进行了说明，而接受基于鼠标或者触摸屏等的输入的情况也是同样的。另外，在本流程中，使用了被称为侵入标识的变量，该变量是利用终端装置3的临时存储部37或者控制部31内的注册表等存储区域而实现的，被设定为存储0或者1中的一个值。

首先，终端装置3的控制部31通过输入处理部39判定是否有通过图形输入板的笔进行了写入操作(步骤S21)，在没有写入操作的情况下(S21：否)进行待机直到写入操作被进行。在进行了写入操作的情况下(S21：是)，控制部31将侵入标识的值初始化为0(步骤S22)，并将与图形输入板的笔的接触坐标相对应的点显示(描绘)在显示部46上(步骤S23)。

接着，控制部31判定图形输入板的笔的接触是否已经被解除(步骤S24)，在接触没有被解除的情况下(S24：否)，进一步判定笔的接触坐标是否发生了移动(步骤S25)。在笔的接触已经被解除的情况下(S24：是)，控制部31结束处理。在笔的接触坐标没有发生移动的情况下(S25：否)，控制部31返回步骤S24的处理，进行待机直到笔的接触解除或者接触坐标的移动被进行。

在笔的接触坐标发生了移动的情况下(S25：是)，控制部31在移动目的地的笔的接触坐标处描点(步骤S26)。接着，控制部31判定侵入标识的值是否为0、并且由笔写入的轨迹是否侵入了禁止写入区域内(步骤S27)。在判定为侵入标识的值为0、并且书写轨迹侵入了禁止写入区域内的情况下(S27：是)，控制部31将侵入标识的值设为1(步骤S28)，然后进入步骤S29的处理。另外，在判定为侵入标识的值不为0、或者书写轨迹没有侵入到禁止写入区域内的情况下(S27：否)，控制部31进入步骤S29的处理。

接着，控制部31判定侵入标识的值是否为1、并且笔的书写轨迹是否脱离到禁止写入区域外(步骤S29)。在判定为侵入标识的值为1、并且书写轨迹脱离到禁止写入区域外的情况下(S29：是)，控制部31进行用代替线段代替禁止写入区域内的线段来进行再描绘的再描绘处理(步骤S30)，并将侵入标识的值设为0(步骤S31)，返回步骤S24的处理，并在笔的接触被解除之前反复进行上述处理。另外，在判定为侵入标识的值不为1、或者书写轨迹没有脱离到禁止写入区域外的情况下(S29：否)，控制部31不进行再描绘处理，返回步骤S24的处理，并在笔的接触被解除之前反复进行上述处理。

图16是表示终端装置3进行的再描绘处理的流程的流程图，是在图14和图15所示的接受写入操作处理的步骤30中由终端装置3的控制部31进行的处理。首先，终端装置3的控制部31取得笔的书写轨迹侵入禁止写入区域的侵入坐标以及脱离禁止写入区域的脱离坐标(参照图7的(b)的点a和点b)(步骤S41)。接着，控制部31连接已取得的侵入坐标和脱离坐标这2点，并计算沿着禁止写入区域的外周的线路(步骤S42)。由于由此计算出2条线路(参照图7的(c)的线路A和线路B)，所以控制部31从这些线路中选择最短线路(步骤S43)。接着，控制部31删除禁止写入区域内显示的线段(步骤S44)，并用通过步骤43中选择的线路的代替线段来代替被消除的线段进行描绘(步骤S45)，然后结束再描绘处理。另外，此时控制部31在多个代替线重叠的情况下可以设定相距规定间隔的代替线，也可以设定绕过相邻的禁止写入区域的代替线(参照图11)。

在如上所述的构成的通信会议系统中，从会议服务器装置1向参加通信会议的终端装置3发送会议资料等文件数据，终端装置3将文件数据作为最下层的图层显示在显示部46上，同时，通过图形输入板或者鼠标等输入部45接受针对该显示画面的写入操作，并将与接受的写入操作有关的写入图像作为上层图层重叠地显示。此时终端装置3将与文件数据中包含的文章的文字或者单词外接的矩形区域设定为禁止写入区域，并在禁止写入区域内写入了引线等的情况下，将与该写入内容有关的图像显示在禁止写入区域的周围。由此，能够防止因用户的写入而导致文件数据中的文章的易读性以及可读性等下降的情况。

在写入了通过针对文件数据而设定的禁止写入区域的线的情况下，终端装置3用沿着禁止写入区域的周围的代替线段来代替禁止写入区域内的线段进行显示(再描绘)。此时终端装置3能够求出沿着禁止写入区域的周围以最短方式连接禁止写入区域内的线段的两端(参照图7的(b)的点a和点b)的线段，并将该线段作为代替线段。终端装置3通过连结代替线段和禁止写入区域外的线段，能够描绘通过避开了禁止写入区域的空白部分等的代替线。

在写入多条通过相同的禁止写入区域的线、并且与这些线有关的代替线重叠的情况下，终端装置3以间隔规定距离的方式来显示多条代替线。另外，终端装置3也可以通过用沿着间隔一个禁止写入区域的禁止写入区域的周围的线代替多条代替线中的一条或者多条代替线来使代替线绕开。由此，能够防止多条代替线重叠，从而能够防止包含代替线的用户写入图像的易读性下降的情况。

另外，在本实施方式中，构成为由终端装置3来针对文件数据中包含的文章的文字或者单词设定禁止写入区域，但是不限于此，也可以构成为由会议服务器装置1设定禁止写入区域并将该设定与文件数据一起发送至各终端装置3。另外，将针对禁止写入区域写入的线再描绘成代替线的处理并不是终端装置3必须进行的处理，也可以构成为用户能够根据喜好设定是否进行该处理。在这种情况下，终端装置3优选是根据按钮操作等来切换进行再描绘的模式和不进行的模式等的构成。

另外，终端装置3向会议服务器装置1发送与自身接受的写入操作有关的写入图像，并且会议服务器装置1将接收到的写入图像发送至其他的终端装置3。此时从终端装置3向会议服务器装置1发送的写入图像可以是如上述那样用代替线来代替写入禁止写入区域内的线的图像，也可以是用代替线进行代替之前的、由用户写入的本来的图像。在构成为终端装置3将用代替线进行代替之前的图像发送至会议服务器装置1的情况下，从会议服务器装置1接收到该图像的各终端装置3以同样的流程对接收到的写入图像进行用代替线代替的处理即可。

另外，图5所示的文件数据、用户的写入以及写入内容的再描绘只是一个例子，并不局限于此。另外，图6所示的禁止写入区域只是一个例子，并不局限于此。同样，图7～图11所示的写入线以及代替线等只是一个例子，并不局限于此。在图5～图11中，以横书为例表示了文件数据中的文章，但是并不局限于此，文章即使是纵书也能够进行同样的处理。另外，在图5、图7～图11中，表示了向画面中的上方拉出引线的例子，但是并不局限于此，即使在向下方拉出引线的情况下也能够进行同样的处理。

在本发明中，在对文章数据的文章设定禁止写入区域时，将文章分离成单词或者文字，按每个单词或者每个文字设定禁止写入区域。由此，能够防止单词或者文字的可读性下降，从而能够维持文章的易读性。另外，与将文章全体等设定成禁止写入区域的情况相比，由于能够在单词之间或者文字之间的空白部分显示写入图像，所以能够显示更多的写入图像。

另外，在本发明中，当用户在禁止写入区域上进行了写入操作时，信息处理装置并不是不显示与该写入操作有关的写入图像，而是避开禁止写入区域将写入图像显示在其他的位置。由此，不会导致用户的写入操作无效，能够在不使文章的可读性下降的同时变更写入图像的位置将其显示在其他的地方。

另外，在本发明中，在通过同一禁止写入区域的2条线被写入的情况下，信息处理装置以在不同方向上(顺时针和逆时针等)沿着禁止写入区域的周围的方式显示与该2条线有关的2条代替线。由此，2条代替线的方向被分散，能够防止代替线被重叠显示，从而能够防止画面中的写入线的易读性下降的情况。

另外，在本发明中，对文章数据的文章设定的禁止写入区域被设为矩形区域。由此，在对显示的文章进行写入时，用户能够容易地把握或者识别针对文章的禁止写入区域，由此能够尽量避开禁止写入区域来进行写入操作。所以，用代替线代替上述那样的通过禁止写入区域的线的处理被进行的频度降低，从而能够减少信息处理装置的处理负荷。

另外，在本发明中，将禁止写入区域设为与文章的文字外接的矩形区域。由此，能够将禁止写入区域的尺寸设为最小限，从而可以扩大用户能够对文章进行写入的区域。

本发明还可以通过不脱离本发明的基本特征思想的其他方式来具体化。这里的具体实施方式只是用于说明本发明，并非对本发明进行任何限制。因此，本发明的范围被权利要求所定义而不是超越他们的说明。所有在权利要求范围内，或者在与权利要求等同的范围的变形都包括在权利要求中。

Claims (10)

1.一种信息处理装置，其具有显示画面，还包括：

显示部，其将显示对象物显示在上述显示画面上；

追加部，其将画线显示在上述显示画面上；

设定部，其对上述显示画面上所显示的上述显示对象物设定禁止写入区域；和

变更部，其在上述显示画面上将存在于上述禁止写入区域内的上述画线的线路变更为沿着上述禁止写入区域的周围的线路。

2.根据权利要求1所述的信息处理装置，其特征在于，

还具备单词提取部，该单词提取部从上述显示部所显示的显示对象物中提取多个单词，

上述设定部设定用于覆盖上述单词提取部所提取的各单词的禁止写入区域，

由上述设定部设定的禁止写入区域与其他的禁止写入区域不重叠。

3.根据权利要求1所述的信息处理装置，其特征在于，

还具备文字提取部，该文字提取部从上述显示部所显示的显示对象物中提取多个文字，

上述设定部设定用于覆盖上述文字提取部所提取的各文字的禁止写入区域；并且，

由上述设定部设定的禁止写入区域与其他的禁止写入区域不重叠。

4.根据权利要求1所述的信息处理装置，其特征在于，

在由上述设定部设定的禁止写入区域内存在由上述追加部显示的第1画线和第2画线的情况下，由上述变更部变更后的第1画线的线路对于上述禁止写入区域的周围是顺时针，由上述变更部变更后的第2画线的线路对于上述禁止写入区域的周围是逆时针。

5.根据权利要求1所述的信息处理装置，其特征在于，

在由上述设定部设定的禁止写入区域内存在由上述追加部显示的第1画线和第2画线的情况下，由上述变更部变更后的第1画线的线路比由上述变更部变更后的第2画线的线路远离上述禁止写入区域的周围。

6.根据权利要求1所述的信息处理装置，其特征在于，

在由上述追加部显示的画线通过了由上述设定部设定的邻接的2个禁止写入区域内的情况下，上述变更部将位于由该邻接的2个禁止写入区域和在该邻接的2个禁止写入区域之间存在的区域构成的结合区域内的该画线的线路变更成沿着该结合区域的周围的线路。

7.根据权利要求6所述的信息处理装置，其特征在于，

在由上述追加部显示的第1画线和第2画线存在于上述邻接的2个禁止写入区域内的情况下，上述变更部将位于由该邻接的2个禁止写入区域和在该邻接的2个禁止写入区域之间存在的区域构成的结合区域内的上述第1画线的线路或者上述第2画线的线路变更成沿着该结合区域的周围的线路。

8.根据权利要求1至6中的任意一项所述的信息处理装置，其特征在于，

还具备通信部，该通信部经由网络接收由上述显示部显示的显示对象物的数据，

上述显示部在上述显示画面上显示基于上述通信部接收到的数据的显示对象物。

9.根据权利要求8所述的信息处理装置，其特征在于，

上述通信部与其他的信息处理装置连接，向该其他的信息处理装置发送上述追加部所显示的追加对象物的数据；

接收到上述追加对象物的数据的该其他的信息处理装置，将基于该接收到的追加对象物的数据的图像重叠在自身的显示画面上的显示对象物上。

10.一种通信会议系统，其具备多个信息处理装置，该多个信息处理装置具有显示画面和在该显示画面上显示画线的追加部，该通信会议系统还包括：

显示部，其将显示对象物显示在各信息处理装置所具有的显示画面上；

设定部，其对各信息处理装置所具有的显示画面上所显示的上述显示对象物设定禁止写入区域；及

变更部，其在各信息处理装置所具有的显示画面上，将位于上述禁止写入区域内的上述画线的线路变更为沿着上述禁止写入区域的周围的线路。

Images