CN105306871B - 信息处理设备、信息处理系统和信息处理方法 - Google Patents

Abstract

信息处理设备、信息处理系统和信息处理方法。一种图像处理方法，该图像处理方法以包括在多个终端设备中的第一终端设备处于同步状态的方式，允许包括在所述多个终端设备中的第二终端设备的至少部分显示内容显示在所述第一终端设备的显示屏幕的至少一部分上，该图像处理方法包括：获取指示第一用户在所述第一终端设备上执行的操作的内容的第一操作内容；以及在所述第一操作内容指示修改显示在与所述第二终端设备同步的所述第一终端设备上的显示内容的操作的内容并且指示预定操作的内容的情况下，将显示在所述第一终端设备上的显示内容修改为与所述第一操作内容对应的显示内容。

Description

信息处理设备、信息处理系统和信息处理方法

技术领域

本发明涉及一种信息处理设备、信息处理系统和信息处理方法。

背景技术

电视会议系统近来已用在会议中。电视会议系统包括个人计算机(PC)、平板终端以及类似装置，其经由网络彼此连接以共享会议材料的电子数据等。电视会议系统允许作报告的人所使用的终端设备(以下称作“报告者终端”)与参加会议参与者的其他人所使用的终端设备(以下称作“参与者终端”)同步，以使得报告者终端的显示屏幕上的显示内容(例如，显示的材料的页面)同步地显示在参与者终端的显示屏幕上。

在上述电视会议系统中，已提出一种允许参与者将其参与者终端的状态切换为异步状态以显示与报告者终端的显示内容不同的显示内容的技术。

例如，日本未审查专利申请公布No.2010-33229公开了一种电视会议系统，其允许用户利用终端设备在同步状态与异步状态之间切换。具体地讲，响应于用户按下显示在终端设备的屏幕上的同步按钮，终端设备进入同步状态以使得可同步地显示另一终端设备上的显示内容。响应于用户按下显示在终端设备的屏幕上的异步按钮，终端设备进入异步状态以使得可显示与另一终端设备的显示内容不同的内容。

发明内容

本发明的目的是提供一种信息处理方法、信息处理设备和信息处理系统，其使得被配置为在电视会议中与另一终端设备同步地显示内容的终端设备能够显示与终端设备的用户期望的操作对应的内容，而无需用户在同步状态与异步状态之间切换。

根据本发明的第一方面，提供一种图像处理方法，该图像处理方法以包括在多个终端设备中的第一终端设备处于同步状态的方式，允许包括在所述多个终端设备中的第二终端设备的至少部分显示内容显示在所述第一终端设备的显示屏幕的至少一部分上。该图像处理方法包括：获取指示第一用户在所述第一终端设备上执行的操作的内容的第一操作内容；以及在所述第一操作内容指示修改显示在与所述第二终端设备同步的所述第一终端设备上的显示内容的操作的内容并且指示预定操作的内容的情况下，将显示在所述第一终端设备上的显示内容修改为与所述第一操作内容对应的显示内容。

根据本发明的第二方面，在所述图像处理方法中，所述修改步骤包括将显示在所述第一终端设备上的显示内容切换为与所述第一操作内容对应的显示内容。

根据本发明的第三方面，在所述图像处理方法中，所述修改步骤包括使得显示在所述第一终端设备上的显示内容显示在所述第一终端设备上，并且还使得显示在所述第一终端设备上的显示内容根据所述第一操作内容所切换至的显示内容显示在所述第一终端设备上。

根据本发明的第四方面，所述图像处理方法还包括接受指示第二用户在所述第二终端设备上执行的操作的内容的第二操作内容。所述修改步骤包括响应于在与所述第一操作内容对应的显示内容显示在所述第一终端设备上的同时接受所述第二操作内容，在所述第二操作内容指示修改显示在所述第二终端设备上的显示内容的操作的内容并且指示预定操作的内容的情况下，将显示在所述第一终端设备上的显示内容修改为与所述第二操作内容对应的显示内容。

根据本发明的第五方面，所述图像处理方法还包括接受指示第二用户在所述第二终端设备上执行的操作的内容的第二操作内容。由所述第一操作内容指示的所述预定操作具有根据其内容预先确定的优先级，由所述第二操作内容指示的所述预定操作具有根据其内容预先确定的优先级。所述修改步骤包括在获取所述第一操作内容的时段与接受所述第二操作内容的时段重叠并且所述第一操作内容的优先级高于所述第二操作内容的优先级的情况下，将显示在所述第一终端设备上的显示内容修改为与所述第一操作内容对应的显示内容。

根据本发明的第六方面，所述图像处理方法还包括接受指示第二用户在所述第二终端设备上执行的操作的内容的第二操作内容。由所述第一操作内容指示的所述预定操作具有根据其内容预先确定的优先级，由所述第二操作内容指示的所述预定操作具有根据其内容预先确定的优先级。所述修改步骤包括在获取所述第一操作内容的时段与接受所述第二操作内容的时段重叠并且所述第二操作内容的优先级高于所述第一操作内容的优先级的情况下，将显示在所述第一终端设备上的显示内容修改为与所述第二操作内容对应的显示内容。

根据本发明的第七方面，在所述图像处理方法中，所述多个终端设备包括多个第一终端设备，并且所述修改步骤包括使得处于所述同步状态的第一终端设备的数量与第一终端设备的总数之比显示在所述第二终端设备的显示屏幕上。

根据本发明的第八方面，提供一种图像处理方法，该图像处理方法以包括在多个终端设备中的第一终端设备处于同步状态的方式，允许包括在所述多个终端设备中的第二终端设备的至少部分显示内容显示在所述第一终端设备的显示屏幕的至少一部分上。该图像处理方法包括：响应于所述第一终端设备的第一用户执行的预定操作，解除所述同步状态；以及在所述同步状态被解除的状态下响应于所述第二终端设备的第二用户执行的预定操作，恢复到所述同步状态。

根据本发明的第九方面，提供一种信息处理设备，该信息处理设备以包括在多个终端设备中的第一终端设备处于同步状态的方式，允许包括在所述多个终端设备中的第二终端设备的至少部分显示内容显示在所述第一终端设备的显示屏幕的至少一部分上。该信息处理设备包括：第一操作获取单元，其获取指示第一用户在所述第一终端设备上执行的操作的内容的第一操作内容；以及显示控制单元，在所述第一操作内容指示修改显示在与所述第二终端设备同步的所述第一终端设备上的显示内容的操作的内容并且指示预定操作的内容的情况下，所述显示控制单元将显示在所述第一终端设备上的显示内容修改为与所述第一操作内容对应的显示内容。

根据本发明的第十方面，提供一种信息处理设备，该信息处理设备以包括在多个终端设备中的第一终端设备处于同步状态的方式，允许包括在所述多个终端设备中的第二终端设备的至少部分显示内容显示在所述第一终端设备的显示屏幕的至少一部分上。该信息处理设备包括：同步解除单元，其响应于所述第一终端设备的第一用户执行的预定操作解除所述同步状态；以及重新同步单元，其在所述同步状态被解除的状态下响应于所述第二终端设备的第二用户执行的预定操作恢复到所述同步状态。

根据本发明的第十一方面，提供一种信息处理系统，该信息处理系统包括第一终端设备和第二终端设备，该信息处理系统以所述第一终端设备处于同步状态的方式允许所述第二终端设备的至少部分显示内容显示在所述第一终端设备的显示屏幕的至少一部分上。该信息处理系统包括：第一操作获取单元，其获取指示第一用户在所述第一终端设备上执行的操作的内容的第一操作内容；以及显示控制单元，在所述第一操作内容指示修改显示在与所述第二终端设备同步的所述第一终端设备上的显示内容的操作的内容并且指示预定操作的内容的情况下，所述显示控制单元将显示在所述第一终端设备上的显示内容修改为与所述所第一操作内容对应的显示内容。

根据本发明的第一方面和第八方面至第十一方面的配置，被配置为在电视会议中与另一终端设备同步地显示内容的终端设备显示与终端设备的用户期望的操作对应的内容，而无需用户在同步状态与异步状态之间切换。因此，可改进用户可用性。

根据本发明的第二方面的配置，显示在第一终端设备上的显示内容切换为与用户(例如，会议参与者)所执行的操作的内容对应的显示内容。

根据本发明的第三方面的配置，同步状态下的显示内容和异步状态下的显示内容均显示在用户(例如，会议参与者)的第一终端设备上。

根据本发明的第四方面的配置，在用户(例如，会议参与者)的第一终端设备上根据用户(例如，报告者)的操作将异步状态下的显示内容切换为同步状态下的显示内容。

根据本发明的第五方面的配置，在用户(例如，会议参与者)所执行的操作的内容的优先级高于用户(例如，报告者)所执行的操作的内容的优先级的情况下，显示在第一终端设备上的显示内容切换为与用户(例如，会议参与者)所执行的操作的内容对应的显示内容。

根据本发明的第六方面的配置，如果用户(例如，报告者)所执行的操作的内容的优先级高于用户(例如，会议参与者)所执行的操作的内容的优先级，则显示在第一终端设备上的显示内容切换为与用户(例如，报告者)所执行的操作的内容对应的显示内容。

根据本发明的第七方面的配置，处于同步状态的第一终端设备的数量与第一终端设备的总数之比(同步终端比)显示在第二终端设备上。

附图说明

将基于以下附图详细描述本发明的示例性实施方式，附图中：

图1是根据示例性实施方式的电视会议系统的总体配置图；

图2是示出操作终端的硬件配置的框图；

图3是示出参与者终端的具体配置的功能框图；

图4示出电视会议系统的网络配置的示例；

图5示出显示在报告者终端的显示屏幕上的显示内容的示例；

图6示出操作类型表的示例；

图7是电视会议系统的操作流程图；

图8是电视会议系统的操作流程图；

图9是示出根据第五改型的电视会议系统中的参与者终端的具体配置的功能框图；

图10示出操作类型表的示例；

图11示出操作类型表的另一示例；

图12是根据第五改型的电视会议系统的操作流程图；

图13是示出根据第八改型的电视会议系统的具体配置的功能框图；

图14是示出根据第九改型的电视会议系统的具体配置的功能框图；

图15示出电视会议系统的网络配置的另一示例；以及

图16示出电视会议系统的网络配置的另一示例。

具体实施方式

以下将参照附图描述本发明的示例性实施方式。在此示例性实施方式中，作为信息处理系统的示例，将描述允许经由网络连接的多个终端设备共享电子数据的电视会议系统。

图1是根据此示例性实施方式的电视会议系统的总体配置图。电视会议系统100(信息处理系统)包括多个操作终端10，各个操作终端10由参与会议的多个用户之一使用。在此示例性实施方式中，为了示出方便，可扮演会议的主导角色的用户(例如，会议的发起者、会议的主持人或者在会议中作报告的人)被称作“报告者”(第二用户)，报告者所使用的操作终端被称作“报告者终端”(第二终端设备)。另外，参与会议的各个其他用户被称作“参与者”(第一用户)，各个参与者所使用的操作终端被称作“参与者终端”(第一终端设备)。在图1中，示出了一个报告者终端10a以及三个参与者终端10b、10c和10d。在以下描述中，为了讨论共同配置，报告者终端10a以及参与者终端10b、10c和10d被统称作“操作终端10”。

如图1所示，报告者终端10a经由诸如局域网(LAN)或互联网的通信网络20连接到参与者终端10b、10c和10d。

图2是示出操作终端10的硬件配置的框图。操作终端10由计算机构成，其包括中央处理单元(CPU)101、存储器102、存储单元103、通信单元104、输入单元105和显示单元106。上述硬件元件经由总线彼此连接，以允许互相发送和接收数据。CPU101控制操作终端10的各个单元，并且执行各种类型的信息处理。存储器102保存各种程序和数据。存储器102还具有用于CPU 101的工作区域。存储单元103存储各种文件、文档等的数据。通信单元104经由通信网络20与另一操作终端10执行数据通信。输入单元105是诸如键盘、鼠标、笔工具或触摸面板的输入装置。显示单元106是利用诸如web浏览器的应用软件显示各种文件、文档等的显示屏幕。存储单元103、输入单元105和显示单元106可设置在操作终端10外部，并且可经由通信网络20连接到操作终端10。操作终端10中包含诸如浏览器或电子邮件客户端的软件。例如，操作终端10可以是诸如个人计算机、个人数字助理(PDA)或智能电话的移动信息终端。

在下文中，将集中于报告者终端10a和参与者终端10b来描述电视会议系统100的具体配置。

图3是示出参与者终端10b的具体配置的功能框图。参与者终端10b包括报告者操作接受单元11、参与者操作获取单元12、操作类型确定单元13、同步确定单元14和显示控制单元15。上述元件通过执行存储在存储器102(参见图2)中的程序的CPU 101来实现。存储单元103包括保存有各种文件、文档等的数据的文件数据库(DB)31。

程序可从诸如压缩盘只读存储器(CD-ROM)、数字多功能盘ROM(DVD-ROM)或存储卡的计算机可读信息存储介质安装到参与者终端10b，或者可经由诸如互联网的通信网络20下载或者从预先存储有程序的服务器下载。

例如，如图4所示，在各个操作终端10经由服务器30连接到网络的网络配置中，可将程序从服务器30下载到参与者终端10b、10c和10d中的每一个的存储器102，可在参与者终端10b、10c和10d连接到服务器30时将会议材料的材料数据下载到文件DB 31。程序和材料数据可通过例如JavaScript(注册的商标)来创建。另外，报告者将操作终端10连接到服务器30并且执行预定设置以将操作终端10识别为报告者终端10a，参与者将操作终端10连接到服务器30并且执行预定设置以将操作终端10识别为参与者终端10b等。服务器30将程序和材料数据发送给被识别为参与者终端的各个操作终端10。服务器30还可将程序和材料数据发送给被识别为报告者终端的操作终端10。在发送程序和材料数据之后，服务器30主要用作报告者终端10a与参与者终端10b、10c和10d之间的信息通信的中继器。已下载或记录了上述程序的操作终端10各自用作信息处理设备。另外，已下载上述程序的计算机可以是操作终端10或者可以是服务器30。

现在将描述与上述程序对应的功能。

报告者操作接受单元11从报告者终端10a接受指示报告者在报告者终端10a上执行的操作的内容的信息(以下称作“报告者操作信息”)(第二操作内容)。报告者操作信息是指示诸如显示新材料、用笔工具(手写工具)在材料上书写、拾取(或选择)发表的评论、切换材料的页面、显示并移动鼠标指针以及接收音频输入的操作的内容的信息。

现在将描述由报告者终端10a执行的处理的具体示例。图5示出报告者终端10a的显示屏幕上的显示内容的示例。

例如，报告者操作报告者终端10a的鼠标等(输入单元105)以读取保存在文件DB31中的材料(或者在会议材料画面上显示材料)。在这种情况下，报告者终端10a经由通信单元104将指示上述操作的内容的报告者操作信息通知(或发送)给参与者终端10b，该报告者操作信息包括指示保存所述材料的目的地的统一资源定位符(URL)或材料ID的信息。

例如，报告者操作报告者终端10a的鼠标以将鼠标指针显示在显示单元106上所显示的会议材料画面(参见图5)上。在这种情况下，报告者终端10a经由通信单元104将指示上述操作的内容的报告者操作信息通知给参与者终端10b，该报告者操作信息包括指示鼠标指针的位置(或坐标)、显示有鼠标指针的材料的ID和页码等的信息。报告者终端10a可按照特定时间间隔(例如，每50毫秒)顺序地发送报告者操作信息。

例如，报告者操作报告者终端10a中的笔工具以在显示单元106上所显示的会议材料画面(参见图5)上书写字符等。在这种情况下，报告者终端10a经由通信单元104将指示上述操作的内容的报告者操作信息通知给参与者终端10b，该报告者操作信息包括指示字符等书写的位置(或坐标)、书写有字符等的材料的ID和页码等的信息。

例如，报告者操作报告者终端10a的鼠标以切换显示单元106上所显示的会议材料画面(参见图5)的页面。在这种情况下，报告者终端10a经由通信单元104将指示上述操作的内容的报告者操作信息通知给参与者终端10b，该报告者操作信息包括显示的材料的ID和指定的页码的信息。

按照上述方式，响应于报告者所执行的操作，报告者终端10a将指示操作的内容的信息通知给参与者终端10b、10c和10d。

参与者操作获取单元12获取指示参与者在参与者终端10b上执行的操作的内容的信息(以下称作“参与者操作信息”)(第一操作内容)。类似于报告者操作信息，参与者操作信息是指示诸如显示材料、用笔工具在材料上书写、创建发表的评论、切换材料的页面、显示并移动鼠标指针以及接收音频输入的操作的内容的信息。

操作类型确定单元13依据由报告者操作接受单元11从报告者终端10a接受的报告者操作信息来确定操作类型(报告者操作类型)。操作类型确定单元13还依据在关联的终端(即，参与者终端10b)中由参与者操作获取单元12获取的参与者操作信息来确定操作类型(参与者操作类型)。由报告者和参与者执行的操作按照类型分类。例如，操作类型被预先设定并保存在存储单元103中作为操作类型表中的项目。操作类型表中注册的操作是对于报告者和参与者而言有意义的操作，其示例包括修改显示在与报告者终端10a同步的参与者终端10b上的显示内容(或同步的内容)。具体地讲，修改操作是在显示在报告者终端10a上的材料A的第一页面正以同步方式显示在参与者终端10b上的同时，通过切换为第二页面来修改参与者终端10b的显示内容的操作。修改操作的另一具体示例是，通过在显示在报告者终端10a上的材料A的第一页面正以同步方式显示在参与者终端10b上的同时在第一页面上显示鼠标指针，来修改参与者终端10b的显示内容的操作。

同步的内容可显示在参与者终端10b的整个显示屏幕上或者显示屏幕的一部分上。另外，报告者终端10a的整个显示屏幕或者显示屏幕的一部分可同步。因此，例如，即使在由报告者在报告者终端10a上操作的鼠标指针在参与者终端10b上同步地移动(同步状态)的情况下，参与者终端10b的鼠标指针可单独地显示(例如，显示在同步的显示屏幕之外)。另选地，同步状态下的鼠标指针(由报告者操作)和参与者终端10b的鼠标指针(由参与者操作)二者均可出现在同步的显示屏幕上。在报告者终端10a上显示鼠标指针的操作涉及修改参与者终端10b的显示内容的操作。

图6示出操作类型表的示例。在图6所示的操作类型表中，设定了五种操作类型，即，“材料显示”、“笔”、“拾取”、“页面切换”和“指针”，以与各个操作的内容对应。例如，操作类型确定单元13参考操作类型表并且指定与报告者所执行的操作对应的操作类型。操作类型确定单元13还参考操作类型表并且指定与参与者所执行的操作对应的操作类型。如果不存在与操作对应的操作类型，则操作类型确定单元13确定“无操作类型”存在。操作类型表中注册的操作不限于图6所示那些。例如，可在操作类型表中注册彼此不同的报告者的操作的内容和操作类型以及参与者的操作的内容和操作类型。在这种情况下，可分别提供报告者的操作类型表和参与者的操作类型表。

同步确定单元14依据操作类型确定单元13的确定结果确定是使参与者终端10b与报告者终端10a同步还是异步。具体地讲，如果报告者所执行的操作对应于预定操作类型(参见图6)，则同步确定单元14确定参与者终端10b“同步”。如果参与者所执行的操作对应于预定操作类型(参见图6)，则同步确定单元14确定参与者终端10b“异步”。如果报告者所执行的操作的操作类型或者参与者所执行的操作的操作类型对应于“无操作类型”，则同步确定单元14确定参与者终端10b“异步”。

显示控制单元15依据同步确定单元14的确定结果来控制参与者终端10b的显示屏幕上的显示内容。具体地讲，如果同步确定单元14确定参与者终端10b“同步”，则显示控制单元15使得与报告者所执行的操作的内容对应的显示内容被反映并显示在参与者终端10b上。例如，当报告者在报告者终端10a上显示新材料A时，同步确定单元14确定参与者终端10b“同步”，并且显示控制单元15使得材料A被显示在参与者终端10b的显示单元106上。例如，当报告者在报告者终端10a上将材料A的显示页面从第一页面切换为第二页面时，同步确定单元14确定参与者终端10b“同步”，并且显示控制单元15将显示在参与者终端10b的显示单元106上的材料A的显示页面从第一页面切换为第二页面。类似地，当报告者用笔工具书写字符、拾取发表的评论或者移动鼠标指针时，显示控制单元15使得对应操作的内容被反映到参与者终端10b。

另一方面，如果同步确定单元14确定参与者终端10b“异步”，则显示控制单元15使参与者终端10b与报告者终端10a异步(异步模式)，并且使得参与者所执行的操作的内容被反映到参与者终端10b。例如，当在材料A显示在与报告者终端10a同步的参与者终端10b上的同时参与者选择不同的材料B时，同步确定单元14确定参与者终端10b“异步”，并且显示控制单元15使参与者终端10b与报告者终端10a异步，修改参与者终端10b的显示内容，并且使得材料B显示在显示单元106上。例如，在材料A的第三页面显示在与报告者终端10a同步的参与者终端10b上的同时，如果参与者切换至下一页面(即，第四页面)，则同步确定单元14确定参与者终端10b“异步”，并且显示控制单元15使参与者终端10b与报告者终端10a异步并将显示在参与者终端10b的显示单元106上的材料A的显示页面从第三页面切换(或修改)为第四页面。类似地，当参与者用笔工具书写字符、创建将要发表的评论或者移动鼠标指针时，显示控制单元15使参与者终端10b与报告者终端10a异步，并且使得对应操作的内容被反映到参与者终端10b。

因此，显示控制单元15响应于参与者在参与者终端10b上执行的预设操作用作解除同步状态(或切换为异步状态)的同步解除单元，并且在同步状态已被解除的状态(即，异步状态)下响应于报告者在报告者终端10a上执行的预设操作用作恢复到同步状态(或解除异步状态)的重新同步单元。

现在将描述电视会议系统100的处理流程。图7和图8是电视会议系统100的操作流程图。将假设(例如)报告者P在电视会议中利用报告者终端10a就材料A作报告，参与者S利用参与者终端10b参与电视会议，并且电视会议进行期间报告者P和参与者S执行期望的操作来描述。尽管电视会议系统100包括经由通信网络20彼此连接的单个报告者终端和多个参与者终端，以下描述集中于报告者终端10a和参与者终端10b。

最初，报告者P选择保存在报告者终端10a的存储单元103(图2)中的材料A的文件。因此，材料A的内容显示在报告者终端10a的显示单元106上(S101)。例如，显示材料A的首页(即，第一页面)。报告者终端10a将指示报告者P所执行的操作的内容(这里，显示新材料A)的报告者操作信息通知给参与者终端10b，该报告者操作信息包括关于材料A的信息(例如，材料A的ID和页码)。

然后，参与者终端10b的报告者操作接受单元11从报告者终端10a接受报告者操作信息(S201)。这里，报告者操作接受单元11接受包括材料A的ID的操作的内容(“显示新材料A”)。

然后，参与者终端10b的操作类型确定单元13依据报告者操作信息确定操作类型(S202)。这里，操作类型确定单元13参考图6所示的操作类型表并且指定与操作的内容(“显示新材料A”)对应的操作类型(“材料显示”)。

然后，参与者终端10b的同步确定单元14依据操作类型确定单元13的确定结果来确定参与者终端10b是同步还是异步(S203)。这里，“材料显示”被指定为操作类型。因此，同步确定单元14确定参与者终端10b“同步”。

然后，参与者终端10b的显示控制单元15依据同步确定单元14的确定结果来控制参与者终端10b的显示屏幕上的显示内容(S204)。这里，同步确定单元14确定参与者终端10b“同步”。因此，显示控制单元15使得材料A的第一页面显示在参与者终端10b的显示单元106上。

在上述S201至S204的处理中，报告者终端10a和参与者终端10b处于同步状态(同步模式)，显示相同的内容。

然后，参与者S在参与者终端10b上执行期望的操作。这里，假设参与者S将显示在显示屏幕上的材料A的显示的页面(即，第一页面)切换为第二页面(S205)。

然后，参与者终端10b的参与者操作获取单元12获取指示参与者S所执行的操作的内容的参与者操作信息。这里，参与者终端10b获取指示参与者S所执行的操作的内容(这里，切换材料A的页面)的参与者操作信息，该参与者操作信息包括关于材料A的信息(例如，材料A的ID)(S206)。

然后，参与者终端10b的操作类型确定单元13依据参与者操作信息确定操作类型(S207)。这里，操作类型确定单元13参考图6所示的操作类型表并且指定与操作的内容(“切换材料A的页面”)对应的操作类型(“页面切换”)。

然后，参与者终端10b的同步确定单元14依据操作类型确定单元13的确定结果来确定参与者终端10b是同步还是异步(S208)。这里，“页面切换”被指定为操作类型。因此，同步确定单元14确定参与者终端10b“异步”。

然后，参与者终端10b的显示控制单元15依据同步确定单元14的确定结果来控制参与者终端10b的显示屏幕上的显示内容(S209)。这里，同步确定单元14确定参与者终端10b“异步”。因此，显示控制单元15修改参与者终端10b的显示单元106上的显示内容并且使得材料A的第二页面被显示，即使材料A的第一页面正显示在报告者终端10a的显示单元106上。

在S205至S209的处理中，参与者终端10b处于异步状态(异步模式)，多条不同的内容显示在报告者终端10a和参与者终端10b上。

然后，报告者P在报告者终端10a上执行期望的操作。这里，假设报告者P用笔工具在显示在显示单元106上的材料A的第一页面上书写字符(图8中的S102)。

然后，报告者终端10a将指示报告者P所执行的操作的内容(这里，用笔工具在材料A上书写)的报告者操作信息通知给参与者终端10b，该告者操作信息包括指示书写的字符的位置(或坐标)以及字符书写至的材料A的ID和页码的信息。

然后，参与者终端10b的报告者操作接受单元11从报告者终端10a接受报告者操作信息(S210)。

然后，参与者终端10b的操作类型确定单元13依据报告者操作信息确定操作类型(S211)。这里，操作类型确定单元13参考图6所示的操作类型表并且指定与操作的内容(“用笔工具在材料A上书写”)对应的操作类型(“笔”)。

然后，参与者终端10b的同步确定单元14依据操作类型确定单元13的确定结果来确定参与者终端10b是同步还是异步(S212)。这里，“笔”被指定为操作类型。因此，同步确定单元14确定参与者终端10b“同步”。

然后，参与者终端10b的显示控制单元15依据同步确定单元14的确定结果来控制参与者终端10b的显示屏幕上的显示内容(S213)。这里，同步确定单元14确定参与者终端10b“同步”。因此，显示控制单元15修改参与者终端10b的显示单元106上的显示内容，并且使得书写有字符的材料A的第一页面被显示。

在S210至S213的处理中，参与者终端10b恢复到同步状态(同步模式)，相同的内容显示在报告者终端10a和参与者终端10b上。

因此，在电视会议系统100中，依据报告者和参与者所执行的期望的操作来自动切换同步状态和异步状态，并且修改参与者终端10b的显示内容。

电视会议系统100的配置不限于上述配置，电视会议系统100可具有各种配置。在下文中，将集中于与上述配置的不同来描述根据各个改型的电视会议系统100的配置。在根据以下各个改型的电视会议系统100中，在功能方面与上述电视会议系统100共有的元件不再描述。

在根据第一改型的电视会议系统100中，在参与者操作获取单元12获取参与者所执行的操作的内容(参与者操作信息)的情况下，显示控制单元15可使参与者终端10b与报告者终端10a异步(异步模式)，而无需确定与操作的内容对应的操作类型，并且可使得与操作的内容对应的显示内容显示在参与者终端10b上。在报告者操作接受单元11接受报告者所执行的操作的内容(报告者操作信息)的情况下，可确定与操作的内容对应的操作类型，并且显示控制单元15可使参与者终端10b与报告者终端10a同步(同步模式)，并且可使得与对应于操作类型的操作的内容对应的显示内容显示在参与者终端10b上。

在根据第一改型的电视会议系统100中，只有当报告者执行有意义的操作(例如，与操作类型之一对应的操作)，例如修改显示在报告者终端10a上的显示内容时，参与者终端10b才处于同步状态，以使得与操作对应的显示内容显示在参与者终端10b上，当没有执行上述操作时，与参与者所执行的期望的操作对应的显示内容显示在参与者终端10b上。

在根据第二改型的电视会议系统100中，在报告者操作接受单元11接受报告者所执行的操作的内容(报告者操作信息)的情况下，显示控制单元15可使参与者终端10b与报告者终端10a同步(同步模式)，而无需确定与操作的内容对应的操作类型，以使得与操作的内容对应的显示内容显示在参与者终端10b上。在参与者操作获取单元12获取参与者所执行的操作的内容(参与者操作信息)的情况下，可确定与操作的内容对应的操作类型，并且显示控制单元15可使参与者终端10b与报告者终端10a异步(异步模式)，并且可使得与对应于操作类型的操作的内容对应的显示内容显示在参与者终端10b上。

在根据第二改型的电视会议系统100中，只有当参与者执行有意义的操作(例如，与操作类型之一对应的操作)，例如修改显示在与报告者终端10a同步的参与者终端10b上的显示内容时，参与者终端10b才处于异步状态，以使得与操作对应的显示内容显示在参与者终端10b上，当没有执行上述操作时，与报告者所执行的期望的操作对应的显示内容显示在参与者终端10b上。另外，在根据第二改型的电视会议系统100中，在与参与者所执行的操作的内容对应的显示内容显示在参与者终端10b上时可执行向同步状态的自动转变。

在根据第三改型的电视会议系统100中，在报告者终端10a和参与者终端10b维持同步状态的情况下，与参与者所执行的操作的内容对应的显示内容可显示在参与者终端10b上。例如，在报告者终端10a和参与者终端10b处于同步状态并且材料A的第一页面显示在报告者终端10a和参与者终端10b的显示屏幕上的同时，如果参与者切换到第二页面，则显示控制单元15将参与者终端10b的显示屏幕分成用于同步模式的第一屏幕和用于异步模式的第二屏幕，以使得第一页面显示在第一屏幕上以支持同步模式，第二页面显示在第二屏幕上以支持异步模式。在这种情况下，第一屏幕的尺寸可小于第二屏幕。第一屏幕和第二屏幕可并排显示，或者第一屏幕和第二屏幕中的一个可叠加并显示在另一个屏幕上。在上述示例中，响应于参与者对第一屏幕的选择(或点击)，显示控制单元15可解除第二屏幕的异步模式，并且可将第一屏幕切换为全屏显示视图。

根据第三改型的电视会议系统100允许参与者在观看与报告者终端10a上的显示内容相同的显示内容的同时，在参与者终端10b上显示与期望的操作对应的内容。

在根据第四改型的电视会议系统100中，在参与者终端10b处于异步状态的同时，可依据来自参与者的指令来维持异步状态。例如，当参与者利用鼠标指针选择显示屏幕上的异步按钮时，参与者终端10b维持在异步状态。例如，在参与者用其手指触摸显示屏幕的同时，参与者终端10b可维持在异步状态。

另外，在根据第四改型的电视会议系统100中，如果在参与者终端10b维持在异步状态下的同时由报告者执行的操作对应于多个操作类型当中有意义的操作的操作类型，则异步状态可被迫解除以开始向同步状态转变。有意义的操作的示例包括显示新材料和在材料上书写。

图9是示出根据第五改型的电视会议系统100中的参与者终端10b的具体配置的功能框图。在根据第五改型的电视会议系统100中，参与者终端10b还包括优先级比较单元16。优先级比较单元16获取与报告者操作信息对应的操作类型的优先级(报告者优先级)以及与参与者操作信息对应的操作类型的优先级(参与者优先级)以进行比较。优先级表示由报告者或参与者执行的操作的内容的有意义程度。例如，如图10所示，“材料显示”被指派最高优先级，“笔”、“拾取”、“页面切换”和“指针”按照降序指派优先级。预先在图10所示的操作类型表中设定优先级。报告者优先级和参与者优先级按照图10所示的方式可以相同，或者按照图11所示的方式可以不同。

在报告者操作接受单元11接受报告者操作信息的时段和参与者操作获取单元12获取参与者操作信息的时段重叠的情况下，优先级比较单元16比较相应优先级。

图12是根据第五改型的电视会议系统100的操作流程图。首先，在参与者终端10b中，报告者操作接受单元11从报告者终端10a接受报告者操作信息(S11)，参与者操作获取单元12获取参与者操作信息(S12)。然后，操作类型确定单元13指定与报告者操作信息对应的操作类型以及与参与者操作信息对应的操作类型(S13)。然后，优先级比较单元16获取相应操作类型的相应优先级(报告者优先级和参与者优先级)(S14)，并且确定报告者优先级是否高于参与者优先级(S15)。如果报告者优先级高于参与者优先级(S15为是)，则显示控制单元15使得与报告者所执行的操作的内容对应的显示内容显示在参与者终端10b的显示屏幕上(S16)。如果参与者优先级等于或高于报告者优先级(S15为否)，则显示控制单元15使得与参与者所执行的操作的内容对应的显示内容显示在参与者终端10b的显示屏幕上(S17)。如果参与者优先级等于报告者优先级，则报告者优先级可为给定优先级。在S16或S17的处理之后，重复地执行上述处理，直至电话会议结束(S18)。

因此，在根据第五改型的电视会议系统100中，显示控制单元15使得与报告者操作信息和参与者操作信息中具有较高优先级的一个对应的显示内容显示在参与者终端10b的显示屏幕上。例如，在报告者在显示在报告者终端10a上的会议材料画面(参见图5)上移动鼠标指针的同时，参与者将显示在参与者终端10b上的会议材料画面(参见图5)的页面切换为不同的页面。在这种情况下，由于参与者优先级(“2”)高于报告者优先级(“1”)，所以显示控制单元15不将“鼠标指针的移动”反映到参与者终端10b，而是将“页面切换”反映到参与者终端10b。

根据第五改型的电视会议系统100的配置不限于上述配置。例如，优先级比较单元16可将报告者优先级与预先设定的预定值进行比较。显示控制单元15可被配置为使得如果报告者优先级小于或等于所述预定值，则与报告者优先级所关联的报告者操作信息对应的显示内容将不被反映到参与者终端10b。

根据第五改型的电视会议系统100还可被配置为使得在与具有高优先级的操作信息对应的显示内容显示在参与者终端10b上的同时，不接受与其它操作信息对应的显示内容，在与具有高优先级的操作信息对应的显示内容已显示在参与者终端10b上之后，允许接受与其它操作信息对应的显示内容。例如，在参与者终端10b上用笔工具在材料上进行书写(异步状态)的同时，可不接受报告者所执行的操作的内容(例如，显示新材料)，在报告者对材料的书写完成时新材料可显示在参与者终端10b上。

在根据第六改型的电视会议系统100中，参与者操作获取单元12可从关联的终端，或者从参与者终端10b获取参与者操作信息，并且还从另一参与者终端(即，参与者终端10c或10d)获取参与者操作信息。即，参与者操作获取单元12可被配置为还从关联的终端以外的任何终端获取操作信息。在上述配置中，例如，如果从参与者终端10c接受的参与者操作信息中的操作对应于预定操作类型，则操作的内容可被反映到参与者终端10b。通过上述配置，例如，当利用参与者终端10c发表评论时，发表的评论显示在参与者终端10b上。

根据上述示例性实施方式和改型的电视会议系统100可不必包括同步确定单元14。以下将作为根据第七改型的电视会议系统100来描述不包括同步确定单元14的电视会议系统100。

在根据第七改型的电视会议系统100中，显示控制单元15可依据操作类型确定单元13的确定结果控制参与者终端10b的显示屏幕上的显示内容。具体地讲，如果报告者所执行的操作的内容对应于预定操作类型(参见图6)，则显示控制单元15可使得与操作的内容对应的显示内容被反映并显示在参与者终端10b上。

例如，报告者所执行的操作的内容(例如，显示鼠标指针或者用笔工具书写)被反映到参与者终端10b，另外，如果参与者所执行的操作也是显示鼠标指针或者用笔工具书写(在同一页面上)，则参与者所执行的操作的内容也可被反映到参与者终端10b。即，报告者所执行的操作的内容和参与者所执行的操作的内容二者均可被反映到参与者终端10b。这导致同步状态和异步状态的中间状态(或半同步状态)，其中报告者所执行的操作的内容被反映，同时参与者所执行的操作的内容也被反映。因此，显示控制单元15可实现独立于同步模式和异步模式的半同步模式。即，显示控制单元15可被配置为将显示在参与者终端10b上的显示内容修改为包括报告者所执行的操作的内容和参与者所执行的操作的内容二者的显示内容。

在电视会议系统100包括同步确定单元14的情况下，例如，可利用同步确定单元14的确定结果构造根据第八改型的系统。

图13是示出根据第八改型的电视会议系统100的具体配置的功能框图。在根据第八改型的电视会议系统100中，参与者终端10b还包括同步信息通知单元17，报告者终端10a还包括同步信息获取单元21和显示控制单元22。

参与者终端10b的同步信息通知单元17将同步信息发送给报告者终端10a。所述同步信息包括指示参与者终端10b是否与报告者终端10a同步的同步状态、当参与者终端10b不同步时显示屏幕上的显示内容、等等。

报告者终端10a的同步信息获取单元21从参与者终端10b获取同步信息。同步信息获取单元21从包括在电视会议系统100中的所有参与者终端获取同步信息。

报告者终端10a的显示控制单元22依据同步信息获取单元21所获取的同步信息来控制报告者终端10a的显示屏幕上的显示内容。例如，显示控制单元22计算所有参与者终端当中同步的参与者终端的总数(或同步终端的数量)，并且将同步终端的数量显示在报告者终端10a的显示屏幕上。显示控制单元22还可计算同步的参与者终端的数量与参与者终端的总数之比(或同步终端比)，并且可将同步终端比显示在报告者终端10a的显示屏幕上。显示控制单元22还可将显示在处于异步状态的参与者终端10b的显示屏幕上的多条显示内容并排(例如，作为缩略图)显示在报告者终端10a的显示屏幕上。

在根据第九改型的电视会议系统100中，从根据第八改型的电视会议系统100中的参与者终端10b排除参与者操作获取单元12和操作类型确定单元13。图14是示出根据第九改型的电视会议系统100的具体配置的功能框图。报告者终端10a具有与图13所示相同的配置。参与者终端10b可以是被配置为实现同步显示的已知终端设备。通过上述配置，类似于第八改型，同步终端比或者处于异步状态的参与者终端10b的显示内容显示在报告者终端10a的显示屏幕上。这允许报告者了解参与者对报告者所作报告的关注程度。

用于实现根据第九改型的电视会议系统100的程序可以是用于多个终端设备的程序，以按照使得参与者终端10b处于同步状态的方式允许报告者终端10a(第二终端设备)的至少一部分显示内容显示在参与者终端10b(第一终端设备)的显示屏幕的至少一部分上，所述程序使得计算机用作显示控制单元，该显示控制单元使得处于同步状态的参与者终端10b的数量与参与者终端10b的总数之比(即，同步终端比)显示在报告者终端10a的显示屏幕上。显示控制单元还可使得处于异步状态的参与者终端10b的显示内容显示在报告者终端10a的显示屏幕上。

上述示例性实施方式和改型中所示的电视会议系统100的组件可通过在经网络连接到操作终端10(报告者终端10a、或者参与者终端10b、10c或10d)的信息处理设备中利用CPU执行程序来实现。例如，所述信息处理设备可以是图4所示的服务器30。在这种情况下，在该信息处理设备中，参与者操作获取单元12从各个参与者终端获取参与者操作信息，操作类型确定单元13指定与各个参与者终端对应的操作类型，同步确定单元14确定各个参与者终端是同步还是异步。另外，显示控制单元15依据同步确定单元14的确定结果控制各个参与者终端的显示屏幕上的显示内容。

上述示例性实施方式和改型是示例，可组合使用。

电视会议系统100的网络配置不限于图4所示的配置。例如，如图15所示，可使用各个操作终端10经由参与者终端10b彼此连接的配置(星形配置)。另选地，如图16所示，可使用参与者终端10b、10c和10d利用报告者终端10a作为起始点连接的配置(对等(P2P)配置)。

另外，在图4所示的网络配置中，各个操作终端10可响应于用户打开web浏览器并指定常用URL(服务器)而连接到服务器30，或者可依据预先设定有各个操作终端10中将要开始的应用的地址自动连接到服务器30。另选地，各个操作终端10可经由Web Socket连接到服务器30，或者各个操作终端10可按照特定时间间隔接入服务器30(轮询)，以按照伪方式在(pseudo-manner)操作终端10之间交换信息。

电视会议系统100中从同步状态向异步状态以及从异步状态向同步状态的转变(或切换)如下。如果操作终端10最初(或默认)设定在异步状态下，则异步状态被解除并转变为同步状态。如果初始状态为同步状态，则解除同步状态并转变为异步状态。

尽管作为信息处理系统的示例讨论了电视会议系统，信息处理系统不限于电视会议系统，而是可包括允许联网的终端设备共享电子数据的各种各样的系统。

为了示出和描述的目的而提供了本发明的示例性实施方式的以上描述。它并非意在为穷尽性的或者将本发明限于所公开的精确形式。显然，对于本领域技术人员而言许多修改形式和变化形式将是显而易见的。为了最佳说明本发明的原理及其实际应用而选择并描述了实施方式，从而使得本领域技术人员能够理解本发明的各种实施方式以及适合于想到的特定用途的各种修改形式。本发明的范围旨在由所附权利要求书及其等同物限定。

Claims (7)

1.一种图像处理方法，所述图像处理方法以包括在多个终端设备中的第一终端设备处于同步状态的方式，允许包括在所述多个终端设备中的第二终端设备的至少部分显示内容显示在所述第一终端设备的显示屏幕的至少一部分上，所述图像处理方法包括以下步骤：

获取指示第一用户在所述第一终端设备上执行的操作的内容的第一操作内容；以及

在所述第一操作内容指示修改显示在与所述第二终端设备同步的所述第一终端设备上的显示内容的操作的内容并且指示预定操作的内容的情况下，将显示在所述第一终端设备上的所述显示内容修改为与所述第一操作内容对应的显示内容，

其中，所述图像处理方法还包括：接受指示第二用户在所述第二终端设备上执行的操作的内容的第二操作内容，并且

其中，由所述第一操作内容指示的所述预定操作具有根据其内容预先确定的优先级，并且由所述第二操作内容指示的所述预定操作具有根据其内容预先确定的优先级，

所述修改包括：

在获取所述第一操作内容的时段与接受所述第二操作内容的时段重叠并且所述第一操作内容的优先级高于所述第二操作内容的优先级的情况下，将显示在所述第一终端设备上的所述显示内容修改为与所述第一操作内容对应的显示内容；或者

在获取所述第一操作内容的时段与接受所述第二操作内容的时段重叠并且所述第二操作内容的优先级高于所述第一操作内容的优先级的情况下，将显示在所述第一终端设备上的所述显示内容修改为与所述第二操作内容对应的显示内容。

2.根据权利要求1所述的图像处理方法，其中

所述修改包括将显示在所述第一终端设备上的显示内容切换为与所述第一操作内容对应的显示内容。

3.根据权利要求1所述的图像处理方法，其中

所述修改包括使得显示在所述第一终端设备上的所述显示内容显示在所述第一终端设备上，并且还使得显示在所述第一终端设备上的所述显示内容根据所述第一操作内容所切换至的所述显示内容显示在所述第一终端设备上。

4.根据权利要求1所述的图像处理方法，所述图像处理方法还包括：接受指示第二用户在所述第二终端设备上执行的操作的内容的第二操作内容，其中

所述修改包括，

响应于在与所述第一操作内容对应的显示内容显示在所述第一终端设备上的同时接受所述第二操作内容，

在所述第二操作内容指示修改显示在所述第二终端设备上的显示内容的操作的内容并且指示预定操作的内容的情况下，将显示在所述第一终端设备上的所述显示内容修改为与所述第二操作内容对应的显示内容。

5.根据权利要求1所述的图像处理方法，其中

所述多个终端设备包括多个第一终端设备，以及

所述修改包括使得处于所述同步状态的第一终端设备的数量与第一终端设备的总数之比显示在所述第二终端设备的显示屏幕上。

6.一种信息处理设备，该信息处理设备以包括在多个终端设备中的第一终端设备处于同步状态的方式，允许包括在所述多个终端设备中的第二终端设备的至少部分显示内容显示在所述第一终端设备的显示屏幕的至少一部分上，该信息处理设备包括：

第一操作获取单元，所述第一操作获取单元获取指示第一用户在所述第一终端设备上执行的操作的内容的第一操作内容；

第二操作接受单元，所述第二操作接受单元接受指示第二用户在所述第二终端设备上执行的操作的内容的第二操作内容；以及

显示控制单元，在所述第一操作内容指示修改显示在与所述第二终端设备同步的所述第一终端设备上的显示内容的操作的内容并且指示预定操作的内容的情况下，所述显示控制单元将显示在所述第一终端设备上的所述显示内容修改为与所述第一操作内容对应的显示内容，

其中：

由所述第一操作内容指示的所述预定操作具有根据其内容预先确定的优先级，并且由所述第二操作内容指示的所述预定操作具有根据其内容预先确定的优先级，并且

在所述第一操作获取单元获取所述第一操作内容的时段与所述第二操作接受单元接受所述第二操作内容的时段重叠并且所述第一操作内容的优先级高于所述第二操作内容的优先级的情况下，所述显示控制单元将显示在所述第一终端设备上的所述显示内容修改为与所述第一操作内容对应的显示内容；或者

在所述第一操作获取单元获取所述第一操作内容的时段与所述第二操作接受单元接受所述第二操作内容的时段重叠并且所述第二操作内容的优先级高于所述第一操作内容的优先级的情况下，所述显示控制单元将显示在所述第一终端设备上的所述显示内容修改为与所述第二操作内容对应的显示内容。

7.一种信息处理系统，该信息处理系统包括第一终端设备和第二终端设备，该信息处理系统以所述第一终端设备处于同步状态的方式允许所述第二终端设备的至少部分显示内容显示在所述第一终端设备的显示屏幕的至少一部分上，该信息处理系统包括：

第一操作获取单元，该第一操作获取单元获取指示第一用户在所述第一终端设备上执行的操作的内容的第一操作内容；

第二操作接受单元，所述第二操作接受单元接受指示第二用户在所述第二终端设备上执行的操作的内容的第二操作内容；以及

显示控制单元，在所述第一操作内容指示修改显示在与所述第二终端设备同步的所述第一终端设备上的显示内容的操作的内容并且指示预定操作的内容的情况下，所述显示控制单元将显示在所述第一终端设备上的所述显示内容修改为与所述第一操作内容对应的显示内容，

其中：

由所述第一操作内容指示的所述预定操作具有根据其内容预先确定的优先级，并且由所述第二操作内容指示的所述预定操作具有根据其内容预先确定的优先级，并且

在所述第一操作获取单元获取所述第一操作内容的时段与所述第二操作接受单元接受所述第二操作内容的时段重叠并且所述第一操作内容的优先级高于所述第二操作内容的优先级的情况下，所述显示控制单元将显示在所述第一终端设备上的所述显示内容修改为与所述第一操作内容对应的显示内容；或者

在所述第一操作获取单元获取所述第一操作内容的时段与所述第二操作接受单元接受所述第二操作内容的时段重叠并且所述第二操作内容的优先级高于所述第一操作内容的优先级的情况下，所述显示控制单元将显示在所述第一终端设备上的所述显示内容修改为与所述第二操作内容对应的显示内容。