CN100409239C - 处理浏览者图像的通信设备和系统 - Google Patents

Abstract

处理浏览者图像的通信设备和系统。一种通信设备包括显示装置、摄像机、数据库和服务器。显示信息在显示装置上显示。利用摄像机拍摄正在观看和收听显示信息的第一浏览者的浏览者图像。将显示信息与已利用摄像机拍摄的浏览者图像相关联。将显示信息和浏览者图像存储在通过网络连接的数据库上。服务器与显示信息相关联地再现浏览者图像。曾观看和收听过第一浏览者的浏览者图像的第二浏览者能够知道第一浏览者的反应，因此可以预期源于第一浏览者的反应的新交流。

Description

处理浏览者图像的通信设备和系统

技术领域

本发明涉及能够处理浏览者图像的通信设备、系统和显示方法。

背景技术

总得来说，在如电子公告牌等吸引人群的地方安装有摄像机，以便捕获公告牌前面的情况的图像。已经报道了用于分析和利用所捕获图像的这种设备的一些建议。

例如，日本待审专利申请公报No.2002-22918建议提供一种带摄像机的设备，以便捕获图像，处理所捕获的图像，并显示谁以及多少人在观看电子公告牌上的显示信息。日本待审专利申请公报No.2000-105583建议提供一种包括以下部分的设备：用于显示广告的显示板；用于拍摄浏览者的摄像机；以及用于判断关于浏览者的人物属性和分析人物信息的属性判断装置。该建议使得能够通过累积关于内容浏览者的属性判断结果，对广告作出定量的判断。

日本待审专利申请公报No.2003-87725建议提供一种用于同时记录视听信息和静态图像信息的设备。当在多个显示装置上显示静态图像信息时，记录在所有这些显示装置上显示的信息，因此通过使用对应于视听信息的静态图像信息再现列表来控制内容的再现。也就是说，该建议使得能够在同一维度中控制由视听信息、展示等构成的静态图像。日本待审专利申请公报No.2000-187542建议提供一种用于创建使所述展示的声音与待用多媒体内容相同步的情景的设备。

日本待审专利申请公报No.2002-22918包括允许显示多少人或谁在观看视频的设备；然而，存在以下问题，即很难知道浏览者如何观看正显示的信息，例如，浏览者是在认真观看还是在一边聊天一边观看。结果，没有发展与正在观看浏览者的人之间的新交流。

日本待审专利申请公报No.2000-105583包括允许显示浏览者对内容的反应的设备；然而，没有发展源于另一浏览者的反应的新交流。日本待审专利申请公报No.2003-87725包括允许在同一维度中控制视听和静态图像的设备；然而，不能获得关于正在观看和收听有关视听和静态图像的信息的浏览者的信息。结果，没有发展新交流。

日本待审专利申请公报No.2000-187542包括拍摄正在发布诸如展示的信息的人的设备；然而，很难知道接收信息的人对信息中的哪部分感兴趣。因此，存在这样的问题，即不会开展源于另一浏览者的反应的新交流。

发明内容

鉴于上述背景提出了本发明，并且本发明提供了一种允许发展源于另一浏览者的反应的新交流的通信设备、系统和显示方法。

根据本发明的一个方面，提供了一种通信设备，该通信设备包括：用于显示显示信息的显示装置；图像拍摄单元，用于拍摄正在观看和收听所述显示信息的浏览者；控制单元，用于把浏览者图像保存在一存储装置上，该浏览者图像是利用所述图像拍摄单元拍摄的，并且被与所述显示信息相关联地进行保存；接收单元，用于从一存储装置接收一浏览者的浏览者图像，该浏览者曾在观看和收听显示信息，并且该浏览者图像被与所述显示信息相关联地进行保存；以及再现单元，用于与所述显示信息相关联地再现所述浏览者图像。

根据本发明的另一方面，提供了一种通信设备，该通信设备包括：接收单元，用于从一存储装置接收一浏览者的浏览者图像，该浏览者曾在观看和收听显示信息，并且该浏览者图像被与所述显示信息相关联地进行保存；和再现单元，用于与所述显示信息相关联地再现所述浏览者图像。

根据本发明的另一方面，提供了一种通信设备，包括：图像拍摄单元，用于对正在观看和收听信息的浏览者进行拍摄；控制单元，用于在一存储装置上保存浏览者图像，该浏览者图像是利用所述图像拍摄单元拍摄的，并且被与所述信息相关联地进行保存；接收单元，用于从一存储装置接收一浏览者的浏览者图像，该浏览者曾在观看和收听显示信息，并且该浏览者图像被与所述显示信息相关联地进行保存；以及再现单元，用于与所述信息相关联地再现所述浏览者图像。

根据本发明的又一方面，提供了一种通信设备，该通信设备包括：用于显示信息的显示装置；指令输入单元，用于接收曾观看和收听过所述信息的浏览者的指令输入数据；指令输入位置指定单元，用于根据所述指令输入数据来指定所述浏览者的指令输入位置；指令输入方向指定单元，用于指定所述浏览者的指令输入方向；以及再现单元，用于根据所述浏览者的所述指令输入位置和所述浏览者的所述指令输入方向调整所述显示装置上的显示位置。

根据本发明的再一方面，提供了一种显示方法，该显示方法包括以下步骤：拍摄正在观看和收听第一显示装置上显示的第一显示信息的第一浏览者的浏览者图像；与所述显示信息相关联地将所述第一浏览者的所述浏览者图像保存在一存储装置上；以及与所述第一显示信息相关联地再现所述第一浏览者的所述浏览者图像。

附图说明

根据下列图来详细描述本发明的实施例，其中：

图1是根据本发明第一实施例的系统的整体框图；

图2是显示浏览者图像的保存处理的流程图；

图3是显示数据库中所存储的浏览者图像的表；

图4是显示信息D1和浏览者图像S1在通信设备2B上的显示处理的流程图；

图5例示出显示信息的一显示示例；

图6例示出在多个窗口上同时显示多个浏览者图像的一显示示例；

图7(a)和7(b)例示出在一窗口上顺序地显示多个浏览者图像的一显示示例；

图8例示出浏览者图像的一显示示例；

图9例示出静态图像的一显示示例，并从浏览者图像中提取出一帧；

图10例示出从多个浏览者图像中选出的仅N个图像的一显示示例；

图11例示出与浏览者图像相关联的字符的一显示示例；

图12例示出在显示信息是活动图像的情况下的一显示方法；

图13例示出在显示信息是活动图像并且包括多个浏览者图像的情况下的一显示方法；

图14例示出显示信息和浏览者图像的可视化表示；

图15(a)和15(b)例示出基于一指定浏览者图像的显示信息与浏览者图像之间关系的可视化表示；

图16是根据本发明第三实施例的系统的图；

图17是根据本发明第四实施例的系统的图；

图18是根据本发明第五实施例的通信设备的框图；

图19是服务器的功能框图；以及

图20是显示触摸板平面上的显示位置的俯视图。

具体实施方式

图1是根据本发明第一实施例的系统的整体框图。如图1所示，系统1具有多个通信设备2A和2B、服务器3以及数据库4。通信设备2A和2B与服务器3通过网络5相互连接。通信设备2A安装在A点。假定Y先生正在观看在通信设备2A上显示的显示信息D1。通信设备2B安装在B点。假定K先生和J先生正在观看在通信设备2B上显示的显示信息D1和浏览者图像S1。

服务器3包括CPU(中央处理单元)、RAM(随机存取存储器)、ROM(只读存储器)等。在数据库4中，存储有显示信息D1、浏览者图像S1等。显示信息D1显示在显示装置21A和21B上。浏览者图像S1是曾观看和收听过显示信息D1的浏览者的图像。数据库4中的显示信息、浏览者图像等由安装在多个点处的通信设备2A和2B共享和使用。可以有一个或更多个数据库4，并且可以分布在多个位置处。网络5例如可以包括因特网、LAN(局域网)和WAN(广域网)。

通信设备2A包括显示装置21A、服务器22A、摄像机23A、麦克风24A、扬声器25A、传感器26A和触摸板27A。通信设备2B包括显示装置21B、服务器22B、摄像机23B、麦克风24B、扬声器25B、传感器26B和触摸板27B。在下文中，针对通信设备2B中所包括的装置与通信设备A中的对应装置具有相同功能的情况，将通信设备2B中所包括的每种装置放在括弧里。

显示装置21A(21B)对显示信息D1、浏览者图像S1以及各种菜单进行显示。显示装置21A(21B)由大屏幕显示器如等离子显示器制成。显示信息D1可以包括静态信息，如网页、文本和图像，也可以包括动态信息，如视频、声音和音乐。显示装置21A(21B)具有触摸板27A(27B)。浏览者可以利用触摸板27A(27B)输入各种指令和消息。由触摸板27A(27B)检测到的信息被传送到服务器22A(22B)。触摸板27A(27B)能够检测浏览者的存在。在此使用触摸板27A(27B)作为输入装置；然而，也可以使用诸如键盘或鼠标的输入装置。

摄像机23A(23B)用来拍摄正在观看和收听正显示在显示装置21A(21B)上的显示信息D1的浏览者。摄像机23A(23B)包括一用于捕获静态或活动图像的摄像机。由摄像机23A(23B)获得的图像被传送到服务器22A(22B)。麦克风24A(24B)获得正在观看和收听显示信息D1的浏览者的声音和话音。由麦克风24A(24B)获得的声音和话音被传送到服务器22A(22B)。扬声器25A(25B)再现与显示装置21A(21B)上所显示的图像相同步的声音和话音。

传感器26A(26B)检测位于一预定区域内的浏览者的存在。传感器26A(26B)包括范围传感器(range sensor)(例如，如红外辐射传感器)或用于接收附随于个人的RFID(射频标识)的传感器。当所述个人和显示装置21A(21B)位于N米范围内时，传感器26A(26B)把检测信号发送到服务器22A(22B)。

服务器22A(22B)对全部通信设备中的每一设备都进行控制。服务器22A和22B中的每一个例如都包括CPU、ROM、RAM等。当服务器22A(22B)检测到来自触摸板27A(27B)的输入信号时，该检测意味着在通信设备2A(2B)的前面有浏览者存在。服务器22A(22B)根据对摄像机23A(23B)所获取图像进行图像处理的结果，来检测浏览者的存在、浏览者脸部方向，以及浏览者是否正在看显示装置21A(21B)。服务器22A(22B)根据对麦克风24A(24B)所获取的声音和话音进行信号处理的结果，来检测浏览者的存在。

服务器22A(22B)用作控制单元，并将由摄像机23A(23B)获取的浏览者图像与所述显示信息相关联地存储在数据库4(预定的存储装置)中。服务器22A(22B)用作一用于从数据库4接收所述浏览者图像的接收单元，并且还用作一与所述显示信息相关联地再现浏览者图像的再现单元。服务器22A(22B)对由麦克风24A(24B)获取的声音和话音进行分析，以对扬声器进行识别并对声音和话音进行识别。在作为扬声器识别的结果而识别出浏览者后，就把个人信息或所述声音和话音的识别结果转换成单词等。然后服务器22A(22B)向所述浏览者图像添加单词等，并将所述图像存储在数据库4中。服务器22A(22B)可以通过检测键盘或鼠标(未示出)的操作来检测浏览者的存在。

摄像机23A(23B)用作图像拍摄单元。服务器22A(22B)用作控制单元和再现单元。传感器26A(26B)、触摸板27A(27B)和服务器22A(22B)用作检测单元。

下面将描述浏览者图像S1的保存处理。浏览者图像S1是由安装在A点的通信设备2A捕获的。图2是浏览者图像S1的保存处理的流程图。在A点工作的Y先生对显示信息D1感兴趣，并且正在观看正显示在通信设备2A中的显示装置21A上的显示信息D1。在步骤S101中，在显示装置21A上显示所述显示信息D1。在步骤S102中，服务器22A判断是否已从触摸板27A输入了输入信号。当Y先生开始对显示信息D1感兴趣并接触触摸板27A时，服务器22A检测到来自触摸板27A的输入信号。根据该输入信号，就检测到了浏览者的存在。

在步骤S103中，服务器22A开始利用摄像机23A拍摄浏览者Y先生。在开始拍摄前，可以请求浏览者提供在前许可。在正在拍摄图像的时候，可以显示该图像以进行监测，使得浏览者可以看到该图像。在步骤S104中，服务器22A检测自利用摄像机23A开始拍摄后是否已经经过了N秒。在步骤S105中，当经过N秒时停止利用摄像机23A的拍摄。用户可以手动开始或停止拍摄。

服务器22A通过网络5向服务器3发送用于标识正在显示装置21A上显示的显示信息D1的信息、利用摄像机23A拍摄的Y先生的浏览者图像S1以及与该浏览者图像相关联的信息。所述与浏览者图像相关联的信息包括：拍摄日期，显示装置的ID，关于显示装置的安装位置的信息，用户操作(如用户按下了哪个键)的内容，来自用于检测浏览者的传感器26A(26B)的信息，距离信息，利用图像处理或RFID获得的浏览者识别结果，声音和话音分析结果，等等。

在步骤S106中，服务器3将浏览者图像S1与显示信息D1相关联地存储在数据库4中。这意味着已将浏览者图像S1和显示信息D1相互关联并进行存储。可以对已捕获的浏览者图像进行诸如剪裁的编辑处理。

下面将描述存储在数据库4中的浏览者图像。图3是显示存储在数据库4中的浏览者图像的表。如图3所示，将浏览者图像S1与显示信息D1相关联地进行存储。将浏览者图像S2与显示信息D2相关联地进行存储。将浏览者图像S3和S4与显示信息D3相关联地进行存储。将浏览者图像S5与显示信息D4相关联地进行存储。将浏览者图像S11、S12和S13与显示信息D11、D12和D13相关联地进行存储。另外，将每个浏览者图像都与以下数据相关联地进行存储：如开始拍摄的时间、停止拍摄的时间、话音和声音的识别结果、进行拍摄的地点，以及用户的操作等。而且，可以将浏览者图像与浏览者的电子邮件地址、电话号码等相关联。

接下来将描述显示信息D1和浏览者图像S1的显示处理。显示信息D1包含在安装在B点的通信设备2B中。图4是通信设备2B中的显示信息D1和浏览者图像S1的显示处理的流程图。在B点工作的K先生和J先生将要在通信设备2B中的显示装置21B上显示所述显示信息D1。

在步骤S201中，服务器22B检查是否存在对显示信息D1的显示请求。当K先生和J先生中的一位操作触摸板27B并且发送用于显示所述显示信息D1的请求时，将向服务器3发送一对显示信息D1的传送请求，如步骤S202所示。当服务器3接收到来自通信设备2B的对显示信息D1的传送请求时，服务器3在数据库4中检索与显示信息D1相关联的浏览者图像。服务器3将显示信息D1和与该显示信息D1相关联的浏览者图像S1传送到通信设备2B。

在步骤S203中，当通信设备2B的服务器22B接收到来自服务器3的显示信息D1和浏览者图像S1时，服务器22B在显示装置21B上显示所述显示信息D1和浏览者图像S1。这就允许K先生和J先生观看浏览者图像S1以及显示信息D1。在B点工作的K先生和J先生认识Y先生；但是，他们在不同的项目中工作，几乎完全不了解各自的活动。K先生和J先生知道Y先生对显示信息D1感兴趣并且曾经有兴趣地观看显示信息D1。相应地，K先生和J先生发现显示信息D1中包含对于Y先生的项目组重要的信息，并且决定仔细观看显示信息D1。

显示信息D1也包括对于K先生和J先生的项目有帮助的信息。K先生和J先生认为Y先生的项目的活动将会有助于K先生和J先生的活动。随后，利用一个讨论显示信息D1的机会，K先生和J先生策划了一个会议以与Y先生交流信息。K先生、J先生和Y先生能够为彼此提供必要的信息。这样，源于另一浏览者的反应就能够发展成新的交流。

在步骤S204中，当开始显示所述显示信息D1和浏览者图像S1的时候，服务器22B开始利用摄像机23B拍摄在此情况下作为浏览者的K先生和J先生。在步骤S205中，服务器22B检查自利用摄像机23B开始拍摄后是否已经经过了N秒。在步骤S206中，当经过N秒以后，停止利用摄像机23B对K先生和J先生的拍摄。服务器22B通过网络向服务器3传送显示信息D1、用于标识浏览者图像S1的信息以及利用摄像机23B捕获的浏览者图像S2。在步骤S207中，服务器3将浏览者图像S2与显示信息D1和浏览者图像S1相关联地存储到数据库4中。相应地，浏览者图像S2被与显示信息D1和浏览者图像S1相关联，并且用于随后的显示请求。

根据本发明的第一实施例，将浏览者图像与显示信息相关联地进行存储。当观看过浏览者图像的另一浏览者能够知道另一浏览者的反应时，就可预期源于另一浏览者的反应的新交流。

接下来将描述本发明的第二实施例。图5例示出显示信息的显示示例。在图5中，示出了在显示装置21A上显示所述显示信息。显示装置21A包含在通信设备2A中。通信设备2A安装在A点。如图5所示，显示装置21A首先显示所述显示信息D1，经过N1秒以后显示所述显示信息D2，经过N2秒以后显示所述显示信息D3，经过N3秒以后显示所述显示信息D4，经过N4秒以后再次显示所述显示信息D1。这样，显示装置21A由服务器22A控制，并且在随着时间的推移自动改变显示信息之后对显示信息进行显示。

数据库4保持有关在通信设备2A的显示装置21A上显示了什么显示信息的信息。另外，数据库4保持有关每条显示信息在哪个时刻显示的信息。服务器22A访问服务器3，以获知在每个时刻显示了什么信息。具体来说，如图5中所示，例如，数据库4保持有关以下情况的信息，即，在经过N1秒后，显示了所述显示信息D2。

下面将描述浏览者图像。具体来说，将描述一个显示多个浏览者图像的显示示例。图6例示出在多个窗口上同时显示多个浏览者图像的显示示例。如图6所示，服务器22B在显示装置21B上显示显示信息D3，并且在两个窗口上同时显示浏览者图像S3和S4。浏览者图像S3和S4与显示信息D3相关联。

图7(a)和7(b)例示出在一窗口上顺序显示多个浏览者图像的显示示例。如图7(a)所示，服务器22B首先在显示装置21B上显示所述显示信息D3和浏览者图像S3。浏览者图像S3与显示信息D3相关联。经过N秒以后，如图7(b)所示，显示浏览者图像S4。浏览者图像S4与显示信息D3相关联。

图8例示出浏览者图像的显示示例。在图8中，示出了在通信设备2B中的显示装置21B上的显示示例。通信设备2B安装在B点。当在显示装置21B上显示所述显示信息D1到D4的时候，将在数据库4中检索与显示信息D1到D4相关联的浏览者图像S1到S5，然后显示这些浏览者图像。如图8所示，显示装置21B首先显示所述显示信息D1和浏览者图像S1。经过N1秒以后显示装置21B显示所述显示信息D2和浏览者图像S2，经过N2秒以后显示所述显示信息D3及浏览者图像S3和S4，经过N3秒以后显示所述显示信息D4和浏览者图像S5，经过N4秒以后显示所述显示信息D1。按这种方式，显示装置21B由服务器22B控制，并且在随着时间的推移自动改变显示信息和浏览者图像之后显示所述显示信息以及与所述显示信息相关联的浏览者图像。

图9例示出静态图像的显示示例。从浏览者图像中提取了一帧。如图9所示，当对应于显示信息D3的浏览者图像是活动图像时，服务器22B只从该浏览者图像中提取第5帧，并且在显示装置21B上将该帧显示为静态图像。图10例示出从多个浏览者图像中选出的仅N个图像的显示示例。当存在与所述显示信息相关联的多个浏览者图像时，服务器22B从该多个浏览者图像中选择N个图像(在图10中为两个图像)，然后显示所选择的图像。如图10所示，如果有与显示信息D3相关联的5个浏览者图像，服务器22B从浏览者图像S1到S5中选择两个浏览者图像S1和S5，然后显示所选择的图像。

另外，对于每个点只有最近的M个浏览者图像可以显示。M个浏览者图像可以按照浏览者图像中所示人物的数量的降序进行显示。根据数据库4或服务器22B中的信息，来为选择浏览者图像确定上述选择规则。

图11例示出与浏览者图像相关联的字符的显示示例。服务器22B通过服务器3从数据库4中获取显示信息D1以及附加到显示信息D1的信息。如图11所示，服务器22B在显示装置21B上显示所述显示信息D1和浏览者图像S1，并且还显示：开始拍摄浏览者图像的时间，“下午1:38”；话音和声音的识别结果，“非常好！”；浏览者图像的捕获地点，“A点”；以及用户的操作，“显示海报”。也可以显示用户的电子邮件地址或电话号码。在图11中，作为显示示例，以字符描述了已添加到数据库4中的信息；但是，不仅可以显示字符，而且也可以显示符号。在提前与所述字符相对应以后，在数据库4中对符号进行管理。

这样，可以将已在所述数据库中添加的信息作为字符与图像一起显示。因此，可以具体知道其他浏览者的反应，从而可以发展出源于其他浏览者反应的新交流。

下面将描述用于显示与显示信息相同步的浏览者图像的显示方法。图12例示出显示信息是活动图像的情况下的显示方法。当在显示装置21A上显示的显示信息是活动图像时，作为通信设备的服务器22A获取浏览者图像的开始时间和终止时间，然后将这些时间传送到服务器3。服务器3将该浏览者图像、相关联的显示信息以及该浏览者图像的开始时间和终止时间存储在数据库4中。

如图12所示，通信设备2B中的服务器22B首先在显示装置21B上显示所述显示信息D1。通信设备2B安装在B点。然后，在自显示信息D1开始显示过去t1秒以后，服务器22B在显示装置21B上显示浏览者图像S1，并且在自显示信息D1开始显示过去t2秒以后，服务器22B终止显示浏览者图像S1。通过按这种方式使显示信息D1与浏览者图像S1相同步，观看过所述显示信息和所述浏览者图像的浏览者就能够准确地理解另一浏览者的反应。

下面描述当有多个浏览者图像时的另一种显示方法。图13例示出在显示信息是活动图像并且包括多个浏览者图像的情况下的显示方法。当安装在B点的通信设备2B接收到来自一浏览者的对所述显示信息的显示请求时，通信设备2B向服务器3传送-用于发送所述显示信息的请求。服务器3根据来自通信设备2B的请求检索数据库4，然后将所述显示信息及其相关联的浏览者图像传送给通信设备2B。

当显示信息是活动图像并且有与活动图像相关联的多个浏览者图像时，通信设备2B中的服务器22B首先在显示装置21B上显示所述显示信息D11。服务器22B从时间t1到t3显示浏览者图像S12，从时间t2到t5显示S11，从时间t4到t6显示S13。通过使与所述显示图像相关联的多个浏览者图像相同步，浏览者就能够具体理解另一浏览者的反应，因此，可以发展出源于其他浏览者的反应的新交流。

图14例示出显示信息和浏览者图像的可视化表示。当存在与从服务器3获取的显示信息相关联的浏览者图像时，通信设备2B中的服务器22B将可视地显示所述显示信息与所述浏览者图像之间的关系。观看过如图14所示的可视信息的浏览者能够领会到显示信息D21与浏览者图像S21到S23相关联，而浏览者图像S23与浏览者图像S24和S25相关联。

下面将描述基于一指定浏览者图像的显示信息与浏览者图像之间的关系的可视化表示。图15(a)和15(b)例示出基于一指定浏览者图像的显示信息与浏览者图像之间关系的可视化表示。图15(a)可视地显示了基于显示信息D21的显示信息与浏览者图像之间的关系。当浏览者接触触摸板S27B上显示的浏览者图像S23时，如图15(b)所示，将根据浏览者图像S23可视地显示所述显示信息与所述浏览者图像之间的关系。这样，将根据所指定的浏览者图像S23来显示所述显示信息和所述浏览者图像，因此可以知道源于该指定的浏览者图像的另一浏览者具体的反应。

到目前为止，已对在第二实施例中描述的显示信息和浏览者图像的显示示例作为示例进行了说明。可以利用另一种显示方法来对显示信息和浏览者图像进行显示。

接下来将参照图16描述第三实施例。在本发明的第三实施例中，一段会议视频被用作显示信息。图16是根据本发明第三实施例的系统的图。如图16所示，系统100包括：通信设备2A，通信设备2B，服务器3和数据库4。通信设备2A安装在A点，通信设备2B安装在B点。通信设备2A、2B以及服务器3通过网络相连。通信设备2A(2B)包括：显示装置21A(21B)，服务器22A(22B)，摄像机23A(23B)，麦克风24A(24B)，扬声器25A(25B)，传感器26A(26B)，以及触摸板27A(27B)。这里使用的代码和标号与第一实施例中的相同。对于相同的装置使用相同的代码和标号，因此，这里将省略详细的描述。

下面将描述系统100的操作。在A点工作的Y先生操作通信设备2A的触摸板27A，以发送对会议视频M1的显示请求。服务器22A根据来自触摸板27A的信号向服务器3发送对会议视频M1的传送请求。服务器3检索数据库4，并且向服务器22A传送会议视频M1以及与该会议视频M1相关联的浏览者图像。服务器22A显示会议视频M1和浏览者图像S31到S33。作为结果，Y先生观看了会议视频M1以及与M1相关联的浏览者图像S31到S33，然后就能够知道浏览者对会议视频M1的反应。

服务器22A开始利用摄像机23A拍摄Y先生，并且在自开始拍摄过去N秒之后结束拍摄。服务器22A通过网络5向服务器3传送显示在显示装置21A上的会议视频M1、标识浏览者图像S31到S33的信息、摄像机23A获取的浏览者图像S34以及与浏览者图像S34相关联的信息。服务器3将浏览者图像S34与会议视频M1和浏览者图像S31到S33相关联地存储在数据库4中。

K先生和J先生操作通信设备2B的触摸板27B，以发送对会议视频M1的显示请求。服务器22B根据触摸板27B的检测信号向服务器3发送对会议视频M1的传送请求。服务器3检索数据库4，并且向服务器22B发送会议视频M1以及与该会议视频M1相关联的浏览者图像。服务器22B在显示装置21B上显示会议视频M1以及与会议视频相关联的浏览者图像S31到S34。虽然Y先生不能参加会议，但K先生和J先生仍能够知道Y先生对会议的反应。另外，K先生和J先生能够在观看Y先生的反应之后对会议的主题进行回顾。

根据本发明的第三实施例，对会议视频和浏览者图像进行显示。浏览者图像包括观看和收听会议的浏览者。通过获知浏览者对会议的反应，即使此处的浏览者不能实时参加会议，也能够对会议的主题进行回顾。

下面将描述本发明的第四实施例。图17是根据本发明第四实施例的系统的图。如图17所示，系统200包括：通信设备202A，通信设备202B，服务器3和数据库4。通信设备202A安装在A点，通信设备202B安装在B点。通信设备202A、202B以及服务器3通过网络相连。

通信设备202A(202B)包括：显示装置21A(21B)，服务器22A(22B)，摄像机23A(23B)，麦克风24A(24B)，扬声器25A(25B)，传感器26A(26B)，以及触摸板27A(27B)。通信设备202A中的显示装置21A包括在触摸板27A区域内的手写评述输入单元28。

手写评述输入单元28用来输入可与浏览者图像相关联的内容。通信设备202B中的显示装置21B包括手写评述显示单元29。这里使用的代码和标号与第一实施例中的相同。相同的代码和标号用于相同的设备；因此这里将省略详细描述。手写评述输入单元28对应于一输入单元。手写评述显示单元29对应于一显示单元。

下面将描述系统200的操作。在A点工作的Y先生操作通信设备202A中的触摸板27A，以发送对显示信息D1的显示请求。服务器22A根据来自触摸板27A的信号向服务器3发送对显示信息D1的传送请求。服务器3检索数据库4。如果存在显示信息D1以及与显示信息D1相关联的浏览者图像，则服务器3向服务器22A传送显示信息D1和所述浏览者图像。如果不存在，则服务器22A在显示装置21A上显示所述显示信息D1。服务器22A开始利用摄像机23A拍摄Y先生，并且在自开始拍摄过去N秒之后结束拍摄。

已经看过显示信息D1的Y先生必要时能够将评述写到手写评述输入单元28中。服务器22A通过网络5向服务器3传送摄像机23A捕获的浏览者图像、标识已在显示装置21A上显示的显示信息D1的信息以及所述手写评述。服务器3将浏览者图像与显示信息D1相关联地存储在数据库4中。服务器3还将与所述浏览者图像相关联的所述手写评述存储在数据库4中。

在B点工作的K先生和J先生操作通信设备202B的触摸板27B，以发送对显示信息D1的显示请求。服务器22B根据触摸板27B的检测信号向服务器3发送对显示信息D1的传送请求。服务器3检索数据库4，并且向服务器22B传送显示信息D1、与显示信息D1相关联的浏览者图像以及与所述浏览者图像相关联的手写评述。

服务器22B在显示装置21B上显示所述显示信息D1和与显示信息D1相关联的浏览者图像S1。然后，如果存在与所述浏览者图像相关联的手写评述，服务器22B将所述手写评述显示在手写评述显示装置29上。K先生和J先生已经观看了与显示信息D1相关联的浏览者图像S1和所述手写评述，并且能够知道Y先生对显示信息D1的反应。这样，就可以预期源于Y先生的反应的新交流。

在上述每个实施例中，可以超出距离或时间的限制，共享以下信息：即，是谁以及如何观看和收听某条信息。通过获知另一浏览者如何观看信息，就可以设置用于判断该信息是否值得观看的准则。因此，可以开始与另一浏览者的新交流。

下面将描述第五实施例。图18是根据本发明第五实施例的通信设备的框图。整体系统结构与图1相同；因此，在图18只显示通信设备。通信设备302包括：显示装置21A，服务器322，摄像机23A，麦克风24A，扬声器25A，传感器26A，以及触摸板27A。对与第一实施例中相同的设备使用相同的代码和标号；因此，这里将省略详细描述。

图19是服务器322的功能框图。图20是示出触摸板平面上的显示位置的俯视图。参照图20，21A是显示装置，27A是触摸板，P1是浏览者的指令输入位置，P2的箭头方向是浏览者的指令输入方向，P3是显示信息的显示位置，Q是显示信息的显示区域。在显示装置21上，可将显示信息显示在整个显示装置上；然而，为了防止浏览者身体的一部分覆盖待显示的对象，服务器322将包括下列组件。

如图19所示，服务器322包括：显示对象输入单元31，显示对象保存单元32，指令输入位置指定单元33，指令输入方向指定单元34，以及显示位置控制单元35。显示对象输入单元31包括CPU、存储器等。输入待显示的数据，如视听数据或字符数据，然后将所述待显示的输入数据输出到显示对象保存单元32。

显示对象保存单元32包括存储器、硬盘等。显示对象保存单元32保持已从显示对象输入单元31输入的所述待显示的数据，然后在显示装置21A上输出所保持的待显示的数据。显示装置21A根据显示位置控制单元35的控制，显示已从显示对象保存单元32输入的待显示的数据。所述待显示的数据对应于所述显示信息。触摸板27A用作指令输入单元。触摸板27A接收来自浏览者的指令输入数据，然后将该指令输入数据输出到指令输入位置指定单元33。

摄像机23A拍摄站在通信设备302前面的浏览者，然后将获取的浏览者图像输出到指令输入方向指定单元34。可以使用传感器26A代替摄像机23A。指令输入位置指定单元33包括CPU、存储器等。指令输入位置指定单元33对已从触摸板27A输入的指令输入数据进行处理，指定浏览者的指令输入位置，然后将指定的指令输入位置数据输出到显示位置控制单元35。

指令输入方向指定单元34包括CPU、存储器等。指令输入方向指定单元34对已从摄像机23A输入的视听数据进行处理，指定浏览者的指令输入方向P2，然后将指定的指令输入方向数据输出到显示位置控制单元35。当使用传感器26A代替摄像机23A时，指令输入方向指定单元34根据从传感器26A输入的传感器信息，来指定指令输入方向。

显示位置控制单元35包括CPU、存储器等。显示位置控制单元35对指令输入位置数据和指令输入方向数据进行处理。已经从指令输入位置指定单元33中输入了所述指令输入位置数据。已经从指令输入方向指定单元34中输入了所述指令输入方向数据。然后，显示位置控制单元35指定显示位置，以防止浏览者身体的一部分覆盖待显示的数据，然后根据所指定的显示位置在显示装置21A上显示保持在显示对象保存单元32中的待显示的数据。

如图20所示，显示位置控制单元35，在触摸板27A的平面上使表示指令输入位置P1的坐标居中，来指定显示位置或显示区域，使得指令输入方向P2的点对称成为显示位置P3。当输入指令输入位置P1和指令输入方向P2时，显示位置控制单元35把以指令输入位置P1为中心与指令输入方向P2处于相反方向的一位置指定为显示装置21A上的显示位置P3。

根据第五实施例，指定了浏览者的指令输入位置和指令输入方向，根据浏览者的指令输入位置和指令输入方向来显示待显示的对象；因此，可以很好地显示待显示的对象，而不使浏览者身体的一部分覆盖待显示的对象。

在执行本发明的过程中，在本发明的一方面中，本发明的通信设备包括：用于对显示信息进行显示的显示装置；用于拍摄正在观看和收听显示信息的浏览者的图像拍摄单元；用于在存储装置上保存浏览者图像的控制单元，所述浏览者图像已被利用图像拍摄单元进行了拍摄并且被与显示信息相关联地进行了保存；以及用于与显示信息相关联地再现浏览者图像的再现单元。根据上述方面，可以与显示信息相关联地再现浏览者图像；因此，观看过该浏览者图像的另一浏览者能够知道其他浏览者的反应，这样，可以预期源于其他浏览者的反应的新交流。

在本发明的另一方面中，本发明的通信设备包括：用于从存储装置接收浏览者的浏览者图像的接收单元，所述浏览者已看过和收听过显示信息；和用于与所述显示信息相关联地再现所述浏览者图像的再现单元。根据上述方面，可以传送、接收保存在存储装置上的浏览者图像，并且随后可以与所述显示信息相关联地再现所述浏览者图像；因此，可以获知另一浏览者的反应，这样，可以预期源于其他浏览者的反应的新交流。

在上述方面中的通信设备上，当再现单元再现浏览者图像时，也可以再现显示信息，以便更好地获知浏览者的反应。

上述方面中的通信设备进一步包括一用于检测浏览者存在的检测单元。对正在观看显示信息的浏览者的检测将启动对浏览者图像的捕获。

在上述方面中的通信设备上，所述检测单元是触摸板。当浏览者接触触摸板时，就检测到浏览者的存在，然后图像拍摄单元开始拍摄浏览者。

在上述方面中的通信设备上，检测单元根据拍摄有浏览者的图像来检测浏览者的存在。可以根据其中拍摄有浏览者的图像来检测浏览者的存在，这样就可以很容易检测浏览者的存在。根据检测结果，图像拍摄单元开始拍摄浏览者。

在上述方面中的通信设备上，检测单元根据浏览者的话音来检测浏览者的存在。可以根据浏览者的话音来检测浏览者的存在；从而，根据检测结果，图像拍摄单元开始拍摄浏览者。

上述方面中的通信设备进一步包括一用于输入评述以将该评述与浏览者图像相关联的输入单元。通过显示所述显示信息以及与浏览者图像相关联的评述可以预期新交流。

上述方面中的通信设备进一步包括一用于显示评述的评述显示单元。在显示浏览者图像的时候，通过显示评述可以预期新交流。

在上述方面中的通信设备上，再现单元在多个窗口上同时显示多个浏览者图像。因此，正在观看这些浏览者图像的另一浏览者能够同时获知其他浏览者的响应。

在上述方面中的通信设备上，再现单元在一窗口上顺序显示多个浏览者图像。因此，正在观看浏览者图像的另一浏览者能够顺次获知其他浏览者的反应。

在上述方面中的通信设备上，再现单元显示与浏览者图像相关联的字符或符号。因此，可以发展新交流。

在上述方面中的通信设备上，再现单元与显示信息相同步地显示浏览者图像。因此，正在观看浏览者图像的另一浏览者能够准确获知另一浏览者的反应。

在上述方面中的通信设备上，再现单元可视地显示所述显示信息与浏览者图像之间的关系。因此，正在观看可视显示的浏览者能够获知显示信息与浏览者图像之间的关系。

上述方面中的通信设备进一步包括：指令输入单元，用于接收浏览者的指令输入数据；指令输入位置指定单元，用于根据指令输入数据来指定浏览者的指令输入位置；以及指令输入方向指定单元，用于指定浏览者的指令输入方向。再现单元根据浏览者的指令输入位置和浏览者的指令输入方向调整显示装置上的显示位置。根据浏览者的指令输入位置和指令输入方向，向浏览者显示待显示的对象。因此，可以防止浏览者身体的一部分覆盖待显示的对象，从而可以很好地显示所述待显示的对象。

在本发明的另一方面中，本发明的通信设备包括：用于显示信息的显示装置；指令输入单元，用于接收观看和收听显示信息的浏览者的指令输入数据；指令输入位置指定单元，用于根据指令输入数据来指定浏览者的指令输入位置；指令输入方向指定单元，用于指定浏览者的指令输入方向；以及再现单元，用于根据浏览者的指令输入位置和浏览者的指令输入方向来调整显示装置上的显示位置。根据上述方面，可以根据浏览者的指令输入位置和指令输入方向，很好地显示待显示的对象，因此，可以防止浏览者身体的一部分覆盖所述待显示的对象，从而可以很好地显示所述待显示的对象。

在上述方面中的通信设备上，指令输入单元根据其中利用图像拍摄单元拍摄有浏览者的图像来指定浏览者的指令输入方向。根据上述方面，可以根据图像拍摄单元所捕获的图像来指定浏览者的指令输入方向。

在上述方面中的通信设备上，指令输入单元根据来自传感器的传感器信息来指定浏览者的指令输入方向。根据上述方面，可以根据来自传感器的传感器信息来指定浏览者的指令输入方向。

在上述方面中的通信设备上，系统具有通过网络相连的多个通信设备。与显示信息相关联地存储浏览者图像，根据来自外部的请求传送浏览者图像，由通信设备接收浏览者图像，然后可以与显示信息相关联地再现浏览者图像。这样，就可以提供可以发展源于其他浏览者反应的新交流的系统。

在本发明的另一方面中，一种显示方法包括下列步骤：拍摄第一浏览者的浏览者图像，该第一浏览者正在观看和收听在第一显示装置上显示的第一显示信息；将第一浏览者的浏览者图像与所述显示信息相关联地保存在存储装置上；以及与所述显示信息相关联地再现第一浏览者的浏览者图像。在上述方面中，与第一显示信息相关联地再现第一浏览者图像，因此观看过第一浏览者图像的人能够获知该浏览者的反应，这样，可以发展源于其他浏览者的反应的新交流。

在本发明的另一方面中，显示方法进一步包括以下步骤：拍摄第二浏览者的浏览者图像，该第二浏览者正在观看和收听在第二显示装置上显示的所述显示信息和第一浏览者的浏览者图像；将第二浏览者的浏览者图像与第一浏览者的浏览者图像相关联地保存在存储装置上；在第二显示装置上显示第一浏览者的浏览者图像和第二浏览者的浏览者图像。在上述方面中，通过显示正在观看第一显示信息的第一浏览者的图像，正在观看第一浏览者的浏览者图像的第二浏览者能够获知第一浏览者的各种反应，因此可以发展出新交流。

在上述方面中的显示方法进一步包括以下步骤：检测第一浏览者和第二浏览者中的至少一方的存在。由此，对正在观看显示信息的浏览者的存在进行检测，从而可以拍摄浏览者图像。

在本发明的另一方面中，显示方法进一步包括以下步骤：可视地显示所述显示信息与所述浏览者图像之间的关系。在上述方面中，通过可视地显示所述显示信息与所述浏览者图像之间的关系，正在观看可视显示的人能够获知所述显示信息与所述浏览者图像之间的关系。

尽管显示并描述了本发明的一些优选实施例，但是本领域的技术人员应该理解，可以在不偏离其范围限定在权利要求书及其等同物中的本发明的原理和精神的条件下，对这些实施例进行修改。

在此通过引用将2004年2月17日提交的日本专利申请No.2004-040400的全部公开内容(包括说明书、权利要求书、附图以及摘要)全部并入。

Claims (23)

1. 一种通信设备，包括：

用于对显示信息进行显示的显示装置；

图像拍摄单元，用于拍摄正在观看和收听所述显示信息的浏览者；

控制单元，用于把浏览者图像保存在一存储装置上，该浏览者图像是利用所述图像拍摄单元拍摄的，并且被与所述显示信息相关联地进行保存；

接收单元，用于从一存储装置接收一浏览者的浏览者图像，该浏览者曾在观看和收听显示信息，并且该浏览者图像被与所述显示信息相关联地进行保存；以及

再现单元，用于与所述显示信息相关联地再现所述浏览者图像。

2. 一种通信设备，包括：

接收单元，用于从一存储装置接收一浏览者的浏览者图像，该浏览者曾在观看和收听显示信息，并且该浏览者图像被与所述显示信息相关联地进行保存；和

再现单元，用于与所述显示信息相关联地再现所述浏览者图像。

3. 根据权利要求1或权利要求2所述的通信设备，其中，当所述再现单元再现所述浏览者图像时，再现所述显示信息。

4. 根据权利要求1或权利要求2所述的通信设备，进一步包括一用于检测所述浏览者的存在的检测单元。

5. 根据权利要求4所述的通信设备，其中所述检测单元是触摸板。

6. 根据权利要求4所述的通信设备，其中所述检测单元根据所述浏览者图像来检测该浏览者的存在。

7. 根据权利要求4所述的通信设备，其中所述检测单元根据所述浏览者的话音来检测该浏览者的存在。

8. 根据权利要求1或权利要求2所述的通信设备，进一步包括一输入单元，其用于输入评述以使该评述与所述浏览者图像相关联。

9. 根据权利要求8所述的通信设备，进一步包括一用于显示所述评述的评述显示单元。

10. 根据权利要求1或权利要求2所述的通信设备，其中所述再现单元在多个窗口上同时显示多幅浏览者图像。

11. 根据权利要求1或权利要求2所述的通信设备，其中所述再现单元在一窗口上顺序地显示多幅浏览者图像。

12. 根据权利要求1或权利要求2所述的通信设备，其中所述再现单元显示与所述浏览者图像相关联的字符或符号。

13. 根据权利要求1或权利要求2所述的通信设备，其中所述再现单元与所述显示信息相同步地显示所述浏览者图像。

14. 根据权利要求1或权利要求2所述的通信设备，其中所述再现单元可视地显示所述显示信息与所述浏览者图像之间的关系。

15. 根据权利要求1或权利要求2所述的通信设备，进一步包括：

指令输入单元，用于接收所述浏览者的指令输入数据；

指令输入位置指定单元，用于根据所述指令输入数据来指定所述浏览者的指令输入位置；以及

指令输入方向指定单元，用于指定所述浏览者的指令输入方向，

其中，所述再现单元根据所述浏览者的所述指令输入位置和所述浏览者的所述指令输入方向调整所述显示装置上的显示位置。

16. 一种显示方法，包括以下步骤：

拍摄正在观看和收听第一显示装置上显示的第一显示信息的第一浏览者的浏览者图像；

将所述第一浏览者的所述浏览者图像与所述显示信息相关联地保存在一存储装置上；以及

与所述第一显示信息相关联地再现所述第一浏览者的所述浏览者图像。

17. 根据权利要求16所述的显示方法，进一步包括以下步骤：

拍摄第二浏览者的浏览者图像，该第二浏览者正在观看和收听第二显示装置上正显示的第一显示信息和所述第一浏览者的所述浏览者图像；

将所述第二浏览者的所述浏览者图像与所述第一浏览者的所述浏览者图像相关联地保存在所述存储装置上；以及

在第二显示装置上显示所述第一浏览者的所述浏览者图像和所述第二浏览者的所述浏览者图像。

18. 根据权利要求16或权利要求17所述的显示方法，进一步包括以下步骤：检测所述第一浏览者和所述第二浏览者中的至少一方的存在。

19. 根据权利要求16或权利要求17所述的显示方法，进一步包括以下步骤：可视地显示所述第一显示信息与各所述浏览者图像之间的关系，以及各所述浏览者图像之间的关系。

20. 一种通信设备，包括：

图像拍摄单元，用于对正在观看和收听信息的浏览者进行拍摄；

控制单元，用于在一存储装置上保存浏览者图像，该浏览者图像是利用所述图像拍摄单元拍摄的，并且被与所述信息相关联地进行保存；

接收单元，用于从一存储装置接收一浏览者的浏览者图像，该浏览者曾在观看和收听显示信息，并且该浏览者图像被与所述显示信息相关联地进行保存；以及

再现单元，用于与所述信息相关联地再现所述浏览者图像。

21. 根据权利要求20所述的通信设备，其中，所述再现单元在多个窗口上同时显示多幅浏览者图像。

22. 根据权利要求20所述的通信设备，其中，所述再现单元在一窗口上顺序显示所述多幅浏览者图像。

23. 根据权利要求20所述的通信设备，其中，所述再现单元显示与所述浏览者图像相关联的字符或符号。

Images