CN1777273A

CN1777273A - 信息处理装置，信息处理方法，记录介质以及程序

Info

Publication number: CN1777273A
Application number: CNA2005101199314A
Authority: CN
Inventors: 阪井祐介; 鎌田干夫; 齐藤直毅
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2004-08-06
Filing date: 2005-08-05
Publication date: 2006-05-24
Also published as: JP2006050370A; JP4655190B2; US20060031682A1; US20100118109A1; US7673015B2; US8314830B2

Abstract

本发明提供一种信息处理装置，包括：公开信息发送器装置，传送用户公开信息给另一装置；公开信息接收器装置，从另一装置接收另一用户公开信息；显示控制装置，控制一处理以显示通过所述公开信息接收器装置所接收的用户公开信息；连接请求装置，根据所述用户执行的操作产生连接到另一装置的请求；连接许可判断装置，基于从另一装置接收到响应以用于产生有关所述连接请求装置所请求的连接作为向所述另一装置的连接是否被该另一装置所允许的判断结果；以及通信装置，一旦所述连接允许判断装置所产生的判断结果表示所述另一装置允许了与所述另一装置的连接，所述通信装置用于将所述用户的图像和声音传输到另一装置并且从所述另一装置接收另一用户的图像和声音。

Description

信息处理装置，信息处理方法，记录介质以及程序

相关申请的交叉引用

本发明包含涉及2004年8月6日在日本专利局申请的日本专利申请JP2004-230259的主题，其全部内容结合于此作为参考。

技术领域

本发明涉及信息处理装置，信息处理方法，记录介质以及程序。具体而言，本发明涉及信息处理装置，信息处理方法，程序以及记录介质，它们中的每一个通过网络连接到另一信息处理装置，以用于利用操作该装置的用户的声音和图像合成该装置的公共内容并且用于同步再现合成的结果。

背景技术

在相关技术中，位于彼此间隔遥远的位置的人们之间交互所使用的装置包括电话、所谓的TV电话以及视频会议系统。同样提供一种方法，由此使个人计算机等等连接到Internet并且基于文本进行聊天以及基于图像和声音进行视频聊天。所述交互以下称为通信。

相关技术中的所述装置使用将要连接到相关技术中的该装置的另一装置的电话号码或IP地址，以便在远程通信之前产生启动远程通信的请求。所以，尽管另一装置能够识别产生请求的装置，也很难识别操作所述装置以产生请求的用户本身，其中另一装置作为通信伙伴假设为启动远程信息的请求提供响应。

为了解决所述问题，例如，日本专利公开号No.2001-195328中公开了一种通信系统，其中当用户产生启动与另一用户远程通信的请求时，用户的图像被传送以至于假定给所述请求提供响应的另一用户在提供响应之前能够识别产生所述请求的用户。在接下来的描述中，产生启动远程通信的请求的用户被称为请求方用户，而假设提供响应的另一用户称为响应方用户。

发明内容

然而在上述通信系统中，即使响应方用户能够识别请求方用户，请求方用户也很难认可响应方用户的条件。

所以，如果响应方用户不对启动远程通信的请求作出响应，那么请求方用户将犹豫地多次产生请求，引发了难于向响应方用户提供远程通信启动的请求的问题，除非该请求用于启动包括具体事务的远程通信的请求。

结果，由于这种犹豫而不执行远程通信，就会出现了另一问题：妨碍了远程通信的普及。

针对上述问题，本发明的发明者设计了一种通信系统，其允许位于彼此间隔遥远的位置上的用户平稳地启动彼此之间的图像和声音通信。

根据本发明的实施例，提供一种信息处理装置包括：

公开信息发送器装置，用于将由信息组成的用户公开信息传送给另一信息处理装置，其中该信息允许向该另一信息处理装置公开；

公开信息接收器装置，用于从另一信息处理装置接收另一用户公开信息；

显示控制装置，用于控制一处理以显示通过所述公开信息接收器装置所接收的用户公开信息；

连接请求装置，根据所述用户执行的操作产生连接到另一信息处理装置的请求；

连接许可判断装置，基于从另一信息处理装置接收到响应，以用于产生有关所述连接请求装置所请求的连接作为到另一信息处理装置的连接是否被所述另一信息处理装置所允许的判断结果；以及

通信装置，一旦所述连接许可判断装置所产生的判断结果表示所述另一信息处理装置允许与该另一信息处理装置的连接，那么所述通信装置用于将所述用户的图像和声音传输到该另一信息处理装置并且从所述另一信息处理装置接收另一用户的图像和声音。

能够提供一种如下配置，即其中所述用户公开信息是一种允许向另一信息处理装置公开的信息并且包括以下任意可得的信息，即关于被浏览内容的信息、浏览内容的用户的数量、用户的声音或图像、用户周围的环境的信息以及通过所述网络而形成的连接的状态。

能够提供一种如下配置，即其中所述公开信息发送器周期地或当所述公开信息接收器装置从所述另一信息处理装置接收了用户公开信息时将用户公开信息发送传输给另一信息处理装置。

能够提供一种如下配置，即其中根据本发明的实施例的信息处理装置进一步包括：

同步再现装置，用于与所述另一信息处理装置中再现所述内容数据同步地再现与所述另一信息处理装置所再现的内容数据具有相同实质的内容数据；以及

合成装置，用于将所述同步再现装置同步再现的内容数据的声音和图像与所述通信装置所接收的声音和图像作为另一用户的声音和图像进行合成。

根据本发明的实施例，提供一种信息处理方法，所述方法包括以下步骤：

将由信息组成的用户公开信息传送到另一信息处理装置，其中所述信息允许向所述另一信息处理装置公开；

从另一信息处理装置接收另一用户公开信息；

控制一处理以显示在所述公开信息接收步骤执行的处理中所接收的用户公开信息；

根据操作所述信息处理装置的用户所执行的操作，产生连接到另一信息处理装置的请求；

基于从另一信息处理装置接收到的响应，产生有关所述连接请求步骤执行的处理中所请求的连接作为到另一信息处理装置的连接是否被该另一信息处理装置所允许的判断结果；以及

一旦所述连接允许判断步骤所执行的处理中所产生的判断结果表示所述另一信息处理装置允许了与所述另一信息处理装置的连接，就进行通信以用于将所述用户的图像和声音传输到另一信息处理装置并且从所述另一信息处理装置接收另一用户的图像和声音。

根据本发明的实施例，提供一种记录有程序的记录介质。所述程序包括以下步骤：

将由信息组成的用户公开信息传送到另一信息处理装置，所述信息允许向所述另一信息处理装置公开；

从另一信息处理装置接收另一用户公开信息；

根据操作计算机执行该程序的用户所执行的操作，产生连接到另一信息处理装置的请求；

基于从另一信息处理装置接收到的响应，产生有关所述连接请求装置所请求的连接作为到另一信息处理装置的连接是否被该另一信息处理装置所允许的判断结果；以及

根据本发明的实施例，提供一种包括如下步骤的程序，所述程序包括以下步骤：

将由信息组成用户公开信息传送到另一信息处理装置，所述信息允许向所述另一信息处理装置公开；

从另一信息处理装置接收另一用户公开信息；

根据操作计算机执行程序的用户所执行的操作，产生连接到另一信息处理装置的请求；

基于从另一信息处理装置接收到响应，产生有关所述连接请求步骤执行的处理中所请求的连接作为向所述另一信息处理装置的连接是否被该另一信息处理装置所允许的判断结果；以及

根据本发明的实施例，提供一种信息处理装置，所述信息处理装置包括：

公开信息发送器部分，用于将由信息构成的用户公开信息传送给另一信息处理装置，其中所述信息允许向另一信息处理装置公开；

公开信息接收器部分，用于从另一信息处理装置接收另一用户公开信息；

显示控制部分，用于控制一处理以显示通过所述公开信息接收器部分所接收的用户公开信息；

连接请求部分，根据所述用户执行的操作产生连接到另一信息处理装置的请求；

连接许可判断部分，基于从另一信息处理装置接收到响应，以用于产生有关所述连接请求装置所请求的连接作为向所述另一信息处理装置的连接是否被该另一信息处理装置所允许的判断结果；以及

通信部分，一旦所述连接允许判断部分所产生的判断结果表示所述另一信息处理装置允许了与所述另一信息处理装置的连接，所述通信部分用于将所述用户的图像和声音传输到另一信息处理装置并且从所述另一信息处理装置接收另一用户的图像和声音。

如上所述，根据本发明的实施例，允许向另一信息处理装置公开的信息所构成的用户公开信息从一个信息处理装置传送到另一信息处理装置，并且从另一信息处理装置接收另一用户公开信息。控制显示从另一信息处理装置接收的用户公开信息的处理并且根据操作信息处理装置的用户所执行的操作产生到另一信息处理装置的连接的请求。基于从另一信息处理装置接收到响应产生有关是否允许请求连接的判断结果。然后，操作信息处理装置的用户的图像和声音被传送到另一信息处理装置，而一旦判断结果表示另一信息处理装置允许了与另一信息处理装置的连接，那么从另一信息处理装置接收另一用户的图像和声音。

网络是一种用于将至少两个装置彼此连接并且从一个装置向另一装置传播信息的机构。经由网络彼此之间通信的装置能够是一个装置中所包含的独立装置或内部单元。

当然所述通信可以是无线或有线通信。作为选择，通信也可以是无线通信和有线通信的组合，即上述两者彼此混合。也就是说，为某些区域而采用无线通信，同时在另外的区域上执行有线通信。作为选择，通过将无线通信应用到从某装置到另一装置的通信上同时将有线通信应用到从另一装置到某装置的通信而将无线通信和有线通信彼此混合。

根据本发明的一个实施例，可以平稳地开始信息处理设备之间的图像和声音的通信。同样依照本发明，信息处理设备能够容易地参与已经执行的通信。

附图说明

本发明的这些和其它目的将参照结合附图所进行的说明而变得容易理解，其中：

图1是示出根据本发明一个实施例的通信系统的典型配置的图表；

图2A至2C是示出图1所示的通信系统中内容的典型图像和用户的典型图像的图表；

图3A至3C是示出内容图像和用户图像进行合成的典型模式；

图4是示出在图1所示的通信系统中使用的通信设备的典型配置的方框图；

图5示出了一个流程图，它解释了在图1所示的通信系统中使用的通信设备所执行的远程通信处理；

图6是一个方框图，它详细示出了在图4所示的通信设备中使用的对话管理部分和通信部分的典型配置；

图7是一个示意性的图表，它示出了在图6所示的对话管理部分所使用的成员信息存储部分中存储的编目成员信息的典型配置；

图8是一个示意性的图表，它示出了在图6所示的用户信息存储部分中存储的用户设置信息的典型配置，其中该部分是图4所示的通信系统中所使用的一个部分；

图9示出了一个流程图，它解释了在图5所示的流程图中的步骤S1执行的远程通信启动处理；

图10是一个示意性的图表，它示出了在图9所示的流程图中的步骤S22执行的处理中所显示的内容；

图11是示出典型的用户选择屏幕的示意性图表；

图12是一个示意性的图表，它示出了在图9所示的流程图中的步骤S28执行的处理中所产生的典型确定结果；

图13示出了一个流程图，它解释了与图9所示的流程图所表示的远程通信启动处理对应的处理；

图14示出了一个流程图，它解释了图9所示的流程图所表示的远程通信启动处理的另一实施方式；

图15示出了一个流程图，它解释了图13所示的流程图所表示的远程通信启动处理的另一实施方式；以及

图16是示出根据本发明一个实施例的个人计算机的典型配置的方框图。

具体实施方式

在解释本发明的优选实施例之前，先在下面相对比的描述中解释所揭示的发明和实施例之间的关系。值得注意的是，尽管在说明书中描述的一个实施例并不包括在下面相对比的描述中以作为与一个发明相应的实施例，但也不会将这个实施例解释为不与发明相应的实施例。相反地，包括在下面相对比的描述中的实施例作为与特定发明相对应的实施例，不会被解释为不对应于除了特定发明的该发明的实施例。

另外，下面相对比的描述不会被解释为覆盖说明书中所揭示的所有发明的详尽描述。换言之，下面相对比的描述决不是否认在该说明书中揭示的但不包括在权利要求中的发明的存在，而该权利要求书作为专利申请而提出。也就是说，下面相对比的描述决不是否认以下发明的存在，即包括在为专利而单独申请中的发明、包括在对该说明书所作的改善中的发明或者将来所增加的发明。

根据本发明一个实施例的信息处理设备(例如图1所示的通信设备1-1)包括：

公开信息发送器装置(例如图6所示的用户信息传输部分121)，用于将由信息所组成的用户公开信息传输给另一信息处理设备，其中该信息允许公开给该另一信息处理设备(例如图1所示通信设备1-2)；

公开信息接收器装置(例如图6所示的用户信息接收部分122)，用于从另一信息处理设备接收其他的用户公开信息；

显示控制装置(例如图4所示的合成控制部分84)，用于控制对由公开信息接收器器装置所接收的用户公开信息进行显示的处理；

连接请求装置(例如图6所示的请求响应传输部分124)，用于依照用户所执行的操作对另一信息处理设备发出连接请求；

连接许可判断装置(例如图6所示的对话控制部分111)，用于基于从另一信息处理设备所接收的响应，来产生关于连接请求装置向该另一信息处理设备请求的连接是否已经被其所允许的确定结果；以及

通信装置(例如图6所示的数据传输部分125)，用于在连接许可判断装置所产生的确定结果表示与另一信息处理设备的连接已经被该另一信息处理设备所允许的情况下，将用户的图像和声音传输给另一信息处理设备，并从该另一信息处理设备接收另一用户的图像和声音。

根据本发明的该实施例的信息处理设备还包括：

同步再现装置(例如图4所示的内容再现部分25)，用于在另一信息处理设备再现内容数据的同时，再现与该另一信息处理设备正在再现的内容数据具有相同实质的内容数据；以及

合成装置(例如图4所示的音频/视频合成部分26)，用于将由通信装置接收的声音和图像与同步再现装置所同步再现的内容数据的声音和图像进行合成，以作为另一用户的声音和图像。

根据本发明另一实施例的信息处理方法包括如下步骤：

将由允许公开给另一信息处理设备的信息所组成的用户公开信息传输给该另一信息处理设备(例如图9所示的流程图的步骤S24)；

从另一信息处理设备接收另一用户公开信息(例如图9所示的流程图的步骤S25)；

控制对在公开信息接收器步骤所执行的处理中接收的用户公开信息进行显示的处理(例如图9所示的流程图的步骤S26)；

依照操作一个信息处理设备的用户所执行的操作，对另一信息处理设备发出连接请求(例如图9所示的流程图的步骤S27)；

基于从另一信息处理设备所接收的响应，来产生在连接请求步骤所执行的处理中向该另一信息处理设备请求的连接是否已经被其所允许的确定结果(例如图9所示的流程图的步骤S28)；以及

如果连接许可判断步骤所执行的处理中产生的确定结果表示与另一信息处理设备的连接已经被该另一信息处理设备所允许，就将用户的图像和声音通信传输给另一信息处理设备，并从该另一信息处理设备接收另一用户的图像和声音(例如图5所示的流程图的步骤S2)。

值得注意的是，记录介质和本发明的具体实现方式之间的关系与上面所描述的信息处理方法和本发明的具体实现方式之间的关系是相同的。出于同样的原因，程序和本发明的具体实现方式之间的关系与上面所描述的信息处理方法和本发明的具体实现方式之间的关系是相同的。这样，不对记录介质和具体实现方式之间的关系还有程序和本发明的具体实现方式之间的关系进行解释，以避免重复。

下面将参照附图对本发明的实施例进行详细解释。

图1是示出根据本发明一个实施例的通信系统的典型配置。在这个通信系统中，通信设备1-1通过通信网络2连接到另一通信设备1。在图1所示的典型配置中，通信设备1-2用作该另一通信装置1。通信设备1-1和1-2会以一种与所谓的电视电话相似的方式，互相交换它们的用户的图像和声音。另外，通信设备1-1与通信设备1-2同步地再现该通信设备1-1和1-2所公用的内容。通过以这种方式来显示公用的内容，才会支持用户之间的远程通信。下面这种处理被称为远程通信处理。在下面的描述中，如果不必将通信设备1-1和1-2区分开，那么通信设备1-1和1-2中的每一个都简单地被称为通信设备1。

值得注意的是，公用内容的实例是作为电视广播的接收结果而获得的节目内容、通过下载而获得的已经获取的电影等等的内容、用户之间交换的非公开内容、游戏内容、音乐内容以及在以DVD(数字化视频光盘)为代表的光盘上所预录的内容。值得注意的是，光盘本身没有在图中示出。

通信设备1可以同时被多个用户来使用。例如，在图1所示的典型配置中，用户A和B使用通信设备1-1，而用户X使用通信设备1-2。

作为一个实例，在图2A中示出公用内容的一个图像。通信设备1-1所获得的图像是如图2B所示的用户A的图像。另一方面，通信设备1-2所获得的图像是如图2C所示的用户X的图像。在这种情况下，如图4所示的通信设备1-1中所使用的显示单元41显示如图3A所示的一个画中画屏幕、如图3B所示的一个交叉衰落屏幕或者如图3C所示的一个擦除屏幕。在任一情况下，公用内容的图像和用户的图像互相叠加在一起。

值得注意的是，在如图3A所示的画中画显示中，每个用户的图像都叠加在公用内容的图像上作为子屏幕。每个子屏幕的位置和大小能够以任意方式进行改变。另外，不显示全部两个用户的图像，也就是不显示用户A本身的图像和作为用户A的通信伙伴的用户X的图像，而只显示任一个用户的图像。

在如图3B所示的交叉衰落屏幕中，公用内容的图像与用户的图像进行合成，这个用户可以是用户A或X。这种交叉衰落屏幕例如可以在用户指点该公用内容的图像上任一个位置或区域的时候使用。

在如图3C所示的擦除屏幕中，用户的图像出现在屏幕上，并同时沿某一个方向移动，逐渐地覆盖该公用内容的图像。在如图3C所示的典型屏幕中，用户的图像从右侧开始出现。

上面屏幕的合成模式可以不时地改变。另外，每种合成模式都具有合成参数，例如，用于设置如图3A至3C所示的每个图像的透明度的图像平衡，以及用于设置内容和用户音量的音量平衡。这些合成参数也可以不时地改变。表示合成模式从一个变为另一个以及合成参数改变的历史存储在如图4所示的合成信息存储部分64中。值得注意的是，用于显示内容的图像和用户的图像的模式不限制于上面所描述的合成模式。也就是说，图像也可以显示为与上述模式不同的合成模式。

回到图1。通信网络2是以因特网为典型代表的宽带数据通信网络。在由通信设备1发出请求时，内容提供服务器3通过通信网络2为通信设备1提供内容。在通信设备1的用户可以使用该通信系统之前，验证服务器4验证该用户。另外，验证服务器4还执行记帐处理以及其他用于成功地验证用户的处理。

广播设备5是用于传输内容的单元，它典型地是电视广播等等的节目。这样，通信设备1能够以同步的方式从广播设备5接收并再现内容。值得注意的是，广播设备5能够通过无线或有线通信将内容传输给通信设备1。另外，广播设备5也可以通过无线网络2将内容传输给通信设备1。

标准时间信息广播设备6是用于将关于标准时间的信息提供给通信设备1的单元。标准时间信息用来正确地将标准时间计量部分30与标准时间同步，其中该部分30在如图4所示的每一个通信设备1中所使用并用作一个时钟。由时钟所计量的标准时间典型地可以是世界或日本的标准时间。值得注意的是，标准时间信息广播设备6能够将有关标准时间的信息通过无线或有线通信传输给通信设备1。另外，标准时间信息广播设备6也可以通过无线网络2将有关标准时间的信息传输给通信设备1。

在图1所示的典型通信系统中，只有2个通信设备1通过通信网络2互相连接。然而，还要注意的是，连接到通信网络2的通信设备1的数量不限制于两个。也就是说，包括通信设备1-3和1-4的任意数量的通信设备1可以通过网络2互相连接起来。

接着，参考图4详细解释通信设备1-1的典型配置。

通信设备1-1所使用的输出部分21包括显示单元41和扬声器42。输出部分21在显示单元41上显示与从音频/视频合成部分26所接收的视频信号相应的图像，并将与音频/视频合成部分26所接收的音频信号相应的声音输出给扬声器42。

输入部分22-1包括摄像机51-1、麦克风52-1和传感器53-1。出于同样原因，输入部分22-2包括摄像机51-2、麦克风52-2和传感器53-2。在下面的描述中，如果不必将输入部分22-1和22-2区分开，那么就可以将输入部分22-1和22-2中的每一个简单地称为输入部分22。同样地，如果不必将摄像机51-1和51-2区分开，那么就可以将摄像机51-1和51-2中的每一个简单地称为摄像机51。出于同样原因，如果不必将麦克风52-1和52-2区分开，那么就可以将麦克风52-1和52-2中的每一个简单地称为麦克风52。同样，如果不必将传感器53-1和53-2区分开，那么就可以将传感器53-1和53-2中的每一个简单地称为传感器53。

摄像机51是用于获得用户的图像的部件。用户的图像可以是移动的或静止的图像。麦克风52是用于收集用户的声音和其他声音的部件。传感器53是用于检测关于用户周围环境的信息的部件。关于环境的信息包括亮度、环境温度和湿度。输入部分22将获得的图像、声音/声音和关于环境的信息输出给通信部分23、存储部分27和数据分析部分28，以作为用户的RT(实时)数据。另外，输入部分22还将获得的用户图像和用户声音输出给音频/视频合成部分26。

值得注意的是，也可以向多个不同的用户提供多个输入部分22。例如，在如图4所示的通信设备1-1中，向如图1所示的两个用户A和B提供两个输入部分22。

通信部分23是这样一个单元，用于通过通信网络2将输入部分22所输入的实时数据作为用户A和/或用户B的数据传输给作为通信伙伴的通信设备1-2，并从该通信设备1-2接收用户X的实时数据。通信部分23将用户X的实时数据提供给音频/视频部分26和存储部分27。另外，通信部分23也通过通信网络2接收通信设备1-2或内容提供服务器3传输来的内容，并将该内容提供给内容再现部分25和存储部分27。在以下的描述中也将这种内容称为内容数据。通信部分23通过通信网络2将内容、关于操作的信息、控制信息、请求和响应传输给通信设备1-2。所述的内容是从存储部分27读出的内容，所述信息是由操作信息输出部分87所产生的操作信息和控制信息。所述请求和响应是由对话管理部分81所产生的请求和响应。

而且，在开始远程通信之前，通信部分23通过通信网络2将用户公开信息传输到通信设备1-2，其中该通信设备1-2用作开始远程通信的伙伴。用户公开信息包括存储在用户信息存储部分63中的用户设置信息，以作为可以公开给通信设备1-2的信息。另外，用户公开信息还包括包含在操作该通信设备1-1的用户所输入的实时数据中。

广播接收器部分24是这样一个单元，它用于接收由广播设备5所播送的电视广播信号，并将由信号传递的所播送的节目作为内容提供给内容再现部分25，并且如果必要的话，提供给存储部分27。内容再现部分25是用于再现内容的单元，其中该内容是由广播接收部分24接收的所播送的节目。再现的内容还包括由通信部分23所接收的内容、从存储部分27读出的内容或者从例如光盘中读出内容。值得注意的是，光盘本身没有在图中示出。内容再现部分25将再现的内容的声音和图像提供给音频/视频合成部分26和数据分析部分28。

音频/视频合成部分26是这样一个单元，它用于将从内容再现部分25接收的图像和声音混合为一个内容的图像和声音，将输入部分22所接收的图像和声音混合为用户A的图像和声音，将通信部分23接收的图像和声音混合为用户X的图像和声音以及混合用于典型地向用户A唤起警报的字符串，并将作为合成结果所获得的视频信号提供给输出部分21。由音频/视频合成部分26所执行的混合处理，以下被称为合成处理，是混合并调整图像、声音、语音和字符串。

存储部分27包括内容存储部分61、许可证存储部分62、用户信息存储部分63和前面所提及的合成信息存储部分64。内容存储部分61是这样一个单元，即用于将从输入部分22接收的数据作为例如用户A的用户实时数据来存储，将从通信部分23接收的数据作为通信伙伴例如用户X的实时数据来存储，将从广播接收部分24接收的广播节目作为一个内容来存储，以及存储从通信部分23接收的内容。许可证存储部分62是这样一个单元，用于将例如授权访问通信设备1-1的许可证的信息作为允许使用在内容存储部分61中存储的内容的许可证来存储。

用户信息存储部分63是这样一个单元，即用于存储用户设置信息，这种信息在操作通信设备1-1的用户A将通信设备1-1连接到用作开始远程通信的伙伴的通信设备上的时候进行设置。在随后参考图8的描述中，用户设置信息典型地包括关于通信设备1-1的使用状态的信息、关于通信设备1-1正在再现的内容的信息、关于要开始远程通信的伙伴的信息以及级别信息。级别信息表示用户设置信息的哪一元素要作为用户公开信息而传输给要开始远程通信的伙伴。用户公开信息可以公开给要开始远程通信的伙伴。合成信息存储部分64是用于将每个合成模式和每个合成参数作为合成信息来存储的单元，其中合成模式和合成参数可由合成控制部分84来改变。

由用户特征分析部分71和控制信息产生部分72所构成的数据分析部分28是这样一个单元，即用于将从输入部分22接收的数据作为例如用户A的用户实时数据来输入，将通信部分23接收的数据作为通信伙伴例如用户X的实时数据来输入，以及输入内容再现部分25所接收的内容。

用户特征分析部分71是这样一个单元，即用于分析信息的特征并将分析结果提供给控制信息产生部分72，其中这些信息包括每个用户的姿态、用户数量、每个用户的声音以及用户的情况。用户的情况是有关每个用户周围环境的信息。被分析了其特征的信息是从输入部分22所接收的数据中，作为包括用户A的用户的实时数据而获得的，以及是从通信部分23所接收的数据中，作为例如用户X的另一用户实时数据而获得的。另外，控制信息产生部分72是一个用于产生控制信息并将所产生的控制信息输出到控制部分32的单元，其中该控制信息用于依照该分析结果执行对音频/视频合成部分26的控制。在这种情况下，音频/视频合成部分26受到控制，以便根据分析结果基于合成参数和合成模式，将从通信部分23接收的数据的图像和声音作为通信伙伴例如用户X的实时数据与从内容再现部分25接收的内容的图像和声音进行合成。另外，控制信息产生部分72还产生控制信息，以用于执行对通信设备1-2中使用的部分的控制，其中通信设备1-2用作通信伙伴。在这种情况下，控制信息产生72将控制信息输出到操作信息输出部分87。

通信环境检测部分29是这样一个单元，即用于监控通过通信部分23和通信网络2与通信设备1-2通信的环境，并将监控结果输出给控制部分32。通信环境包括通信速率和通信延迟时间。标准时间计量部分30是这样一个单元，用于基于从标准信息广播设备6接收的标准时间对自己所计量的标准时间进行调整，并将所调整的标准时间提供给控制部分32。操作输入部分31典型地是一个远程控制器，用于接受用户所执行的操作并发出相应地操作控制部分32的命令。

控制部分32是这样一个单元，即基于例如是一个信号的信息和从数据分析部分28所接收的控制信息来控制通信设备1-1的其他部件，其中该信号将从操作输入部分31所接收的操作表示为用户所执行的操作。控制部分32包括对话管理部分81、视/听记录级别设置部分82、再现同步部分83、前述的合成控制部分84、再现许可部分85、记录许可部分86、前面提及的操作信息输出部分87和电子设备控制部分88。值得注意的是，在如图4所示的典型的配置中，省略了用于将来自控制部分32的控制命令输出到通信设备1-1的其他部件的控制线。

对话管理部分81是这样一个单元，即用于控制由通信部分23所执行的处理，以便将通信设备1-1通过通信网络2连接到例如内容提供服务器3和验证服务器4的其他设备上，并且还通过通信网络2开始与通信设备1-2的远程通信。下面，也可以将上面的处理称为远程通信启动处理。

也就是说，在远程通信启动处理中，在对话管理部分81和与之开始通信的伙伴设备(例如通信设备1-2)之间交换用户公开信息。结果，依照通信设备1-1发出的请求和作为许可该请求的设备给出许可的协议结果，通信设备1-1连接到与之开始通信的伙伴设备。当通信设备1-1连接到该伙伴设备时，通过例如在通信设备1-1和伙伴设备之间交换实时数据的通信以及在伙伴设备再现内容的同时在通信设备1-1中再现相同内容来开始远程通信。在建立连接后，对话管理部分81发送并接收用户公开信息，其中该信息允许公开给与之开始通信的其他设备。

视/听记录级别设置部分82是这样一个单元，即用于基于用户所执行的操作，来判断由输入部分22所获得的实时数据以及/或者存储在内容存储部分61中的内容是否可被用作通信伙伴的通信设备1-2再现和记录，其中该实时数据是作为用户A或其他用户的数据，该内容是作为该用户的个人内容。如果实时数据和/或该个人内容被判断为是可以由通信设备1-2所记录的数据和/或内容，那么就设置可以记录的数据和/或内容的可记录次数以及其他信息。将这种设置的信息添加到用户的实时数据中以作为保密信息，并将其从通信部分23传输到通信设备1-2。再现同步部分83是这样一个单元，即用于在作为通信伙伴的通信设备1-2再现内容的同时，控制内容再现部分25再现通信设备1-2所公用的内容。通信设备1-2所公用的内容是与在通信设备1-2中再现的内容具有相同实质的内容。

合成控制部分84是这样一个单元，即用于基于用户所执行的操作，控制数据分析部分28来分析从用户的实时数据中获得的用户情况信息。另外，合成控制部分84还依照用户所执行的操作或从数据分析部分28接收的控制信息，控制音频/视频合成部分26将用户的图像与内容的图像合成并将用户的声音与内容的声音合成。也就是说，基于从数据分析部分28接收的控制信息，合成控制部分84将合成模式的设置改变为如图3A至3C所示的任一种模式，并改变新设置的合成模式的合成参数的设置。合成控制部分84然后依照新设置的合成模式和合成参数，控制音频/视频合成部分26。另外，合成控制部分84在合成信息存储部分64中记录新设置的合成模式和合成参数，以作为合成信息。

再现许可部分85是用于输出确定结果并基于该确定结果控制内容再现部分25的单元，其中该确定结果表示基于例如附加在内容上的许可证和/或保密信息这样的信息是否就可以再现该内容，这里保密信息是在通信伙伴中使用的视/听记录级别设置部分82所设置的。记录许可部分86是用于输出确定结果并基于该确定结果控制存储部分27的单元，其中该确定结果表示基于包括附加在内容上的许可证和/或保密信息这样的信息是否就可以再现该内容。

操作信息输出部分87是产生操作信息并将该信息通过通信部分23传输给通信设备1-2的单元，其中该操作信息是用于用户所执行的操作而通信设备1-2是用作通信伙伴。由用户执行的操作可以是改变接收电视广播的频道的操作、开始再现内容的处理的操作、结束再现内容的处理的操作、在快进处理中再现内容的操作或另一种操作。操作信息包括操作的描述和执行该操作的时间。随后将描述操作信息的细节。操作信息用于对内容的同步再现。另外，操作信息输出部分87还将从数据分析部分28接收的控制信息通过通信部分23传输到通信设备1-2。

电子设备控制部分88是这样一个单元，它基于用户所执行的操作或从数据分析部分28所接收的控制信息控制预定的电子设备，其中该电子设备连接到通信设备1-1作为外设。预定的电子设备的实例是照明设备和空调设备，它们没有在图中示出。

值得注意的是，由于通信设备1-2的详细的典型配置与如图4所示的通信设备1-1相同，所以不对通信设备1-2的详细的典型配置做出特别的解释。

接下来，要参考如图5所示的流程图来解释通信设备1-1所执行的与通信设备1-2进行通信的远程通信处理。值得注意的是，通信设备1-2也按照与通信设备1-1相同的方式执行处理。

对话管理部分81在开启通信设备1-1的电源时，并且在用户操作该操作输入部分31来输入请求开始与远程设备1-2进行远程通信的命令时，开始这种通信处理。当用户操作该操作输入部分31来输入这种命令时，操作输入部分31将表示该命令的操作信号提供给控制部分32，该控制部分32然后进行控制以开始远程通信。

当操作输入部分31将这种操作信号提供给控制部分32时，在如图5所示的流程图的第一步S1所执行的处理中，对话管理部分81执行随后将被详细描述的远程通信启动处理。在步骤S1，通信设备1-1和1-2交换用户公开信息，它是可公开给其他用户的用户的信息。一个用户的用户公开信息可以是存储在由该用户操作的通信设备中的用户设置信息或该用户的实时数据。结果，依照通信设备1-1发出的请求和通信设备1-2给出许可的协议结果，将通信设备1-1连接到通信设备1-2。通信设备1-1连接到通信设备1-2之后，开始远程通信。然后，处理流程继续执行步骤S2。

在步骤S2所执行的处理中，通信部分23基于对话管理部分81执行的控制，开始将从输入部分22接收的用户A的实时数据和其他实时数据通过通信网络2传输到设备1-2。通信部分23还开始从通信设备1-2接收用户X的实时数据。然后，处理流程继续执行步骤S3。那时，从输入部分22接收的数据作为用户A的实时数据和其他实时数据以及从通信设备1-2接收的实时数据作为用户X的实时数据提供给数据分析部分28。图像和声音的数据提供给音频/视频合成部分26。

在接收包括在用户A的实时数据中的图像和声音和包括在其他实时数据中的图像和声音，以及包括在用户X的实时数据的图像和声音的同时，依照合成控制部分84所执行的控制，音频/视频合成部分26将这些图像和声音与待再现的内容的图像和声音进行合成。然后，音频/视频合成部分26将作为合成结果所获得的视频和音频信号提供给输出部分21。

结果，显示单元41将用户X的图像作为叠加在待再现内容的图像上的一个图像来显示，而扬声器42将所获得的声音作为待再现内容与用户X的声音的合成结果进行输出。值得注意的是，要在通信设备1-1中再现的内容的实质不同于要在通信设备1-2中再现的内容的实质。即使要在通信设备1-1中再现的内容的实质与通信设备1-2中的相同，这些内容也不会互相同步地再现。

在步骤S3所执行的处理中，再现许可部分85通过通信网络2建立与验证服务器4的连接，以便执行内容使用验证处理，以用于同步再现待再现的内容或用户指定的内容。通过执行内容使用验证处理，依照版权保护和保密性保护允许在通信设备1-1中允许进行内容的再现。出于同样原因，允许在通信设备1-2中执行相同内容的再现。以这种方式，就完成了同步再现的准备工作。然后，处理流程继续执行步骤S4。

值得注意的是，如果对于内容来说不需要在再现或观察处理中进行版权保护或保密性保护，那么就不需要步骤S3的处理。这种内容的一个实例是电视广播。然而，在对存储在内容存储部分61中的内容进行再现的处理中，即使所存储的内容不需要在再现或观察处理中进行版权保护或保密性保护也要执行步骤S3的处理。

在步骤S4中，内容再现部分25基于由再现同步部分83所执行的控制，同步于通信设备1-2开始再现内容的处理。然后，处理流程继续执行步骤S5。通过执行同步于通信设备1-2的再现内容的处理，通信设备1-1和1-2基于由标准时间计量部分30(或标准时间信息广播设备6)所提供的标准时间，以同步的方式再现相同的内容。经再现的内容被提供给音频/视频合成部分26和数据合成部分28。

在步骤S5中，存储部分27开始远程通信记录处理。然后，处理流程继续执行步骤S6。具体地，依照合成控制部分84所执行的控制，音频/视频合成部分26合成已开始同步再现的内容的图像和声音，包含在用户A的输入实时数据和其他输入实时数据中的图像和声音，以及包括在接收的用户X的实时数据中的图像和声音。然后，音频/视频合成部分26将作为合成结果所获得的音频和视频信号提供给输出部分21。值得注意的是，在那个时候，合成控制部分84基于合成模式和用于该模式的合成参数来控制由音频/视频合成部分26所执行的这种合成处理。如之前所描述的，合成模式和用于该模式的合成参数已经参照用户所执行的操作进行了预先设置。

输出部分21基于所提供的视频信号显示一个图像，并基于所接收的音频信号产生声音。在这个阶段，已经开始进行用户之间图像和声音的交换以及以同步地方式执行内容再现的处理。

然后，开始执行这样的处理：记录已经开始同步再现的内容，记录包含在用户A的实时数据和其他实时数据中的图像和声音，以及记录包括在用户X的实时数据中的图像和声音，还有记录包括在合成模式和合成参数中的合成信息。

在步骤S6所执行的处理中，依照合成控制部分84所执行的控制，数据分析部分28和音频/视频合成部分26执行用户特征合成/混合处理。具体地，在步骤S6所执行的处理中，数据分析部分28分析关于用户情况的信息的特征。从每个用户的实时数据中获得的关于用户情况的信息包括：每个用户的姿态、用户的数量、每个用户的声音和关于每个用户周围环境的信息。然后，数据分析部分28基于分析结果产生用于控制包括音频/视频合成部分26的部分的控制信息。这样，通过将合成模式改为其他的合成模式，并基于用户所执行的操作合理地设置新合成模式的合成参数，以替代依照用户的操作预先确定的合成模式和用于该确定的合成模式而预先设置的合成参数，合成控制部分84对由音频/视频合成部分26所执行的合成处理进行控制。

然后，在下一步骤S7，控制部分32生成一个确定结果，以判断用户是否已执行发出终止远程通信请求的操作。控制部分32重复执行这一步，直到用户执行这种发出终止远程通信请求的操作。当在步骤S7所执行的处理中产生的确定结果表示用户已执行发出终止远程通信请求的操作时，那么处理流程继续执行步骤S8。

在步骤S8，通信部分23基于由对话管理部分81所执行的控制，通过通信网络2建立与通信设备1-2的连接，以便通知通信设备1-2远程通信已经结束。响应于这个通知，通信设备1-2向通信设备1-1返回一个对该通知的应答，表示接受终止远程通信。

然后，在下一个步骤S9中，存储部分27终止远程通信记录处理。值得注意的是，在该方式中，当稍后执行下一远程通信时，就可以使用已终止的远程通信所存储的数据。已终止的远程通信所存储的数据包括经再现的内容、包括在用户A的实时数据和其他实时数据中的图像和声音、包括在用户X的实时数据中的图像和声音，以及上述合成信息。

上面已经解释了通信设备1-1所执行的远程通信的处理，以作为在通信设备1-1和通信设备1-2之间的通信处理。

接着，下面的描述详细解释了在上述参照图5描绘的远程通信处理流程图的步骤S1所执行的远程通信启动处理。

图6是示出对话管理部分81和通信部分23的详细典型配置的图表，其中这两个部分用于执行远程通信启动处理。值得注意的是，在如图6所示的典型配置中使用的部分作为与在图4所示的配置中使用的它们的各自对应部分相同的部分，其每一个都是用与相应的对应部分相同的参考标记来表示的，并且为了适当地避免重复就不再重复相同部分的描述。

在图6所示的典型配置中，对话管理部分81包括对话控制部分111、传输控制部分112和成员信息存储部分113，而通信部分23包括用户信息发送部分121、用户信息接收部分122、请求响应接收部分123、请求响应发送部分124和数据发送部分125。

对话管理部分81中所使用的对话控制部分111是这样一个单元，它依照从操作输入部分31所接收的操作信号，更新存储在用户信息存储部分63中的用户设置信息以及更新存储在成员信息存储部分113中的编目成员信息。另外，对话控制部分111还依照存储在成员信息存储部分113中的编目成员信息，设置要开始与之进行远程通信的成员。在下面的描述中，每一个要开始与之进行远程通信的成员都被称为对话目标成员。

基于标准时间计量部分30所计量的时间或者从操作输入部分31、用户信息接收器部分122和请求响应接收器部分123中接收的一些信息，对话控制部分111控制通信控制部分112、请求响应发送器部分124和数据发送部分125，以执行它们各自的处理。

此外，对话管理部分111将从用户信息接收器部分122接收的用户公开信息作为另一通信设备1所传输的用户公开信息提供给合成控制部分84，以便在音频/视频合成部分26所执行的合成处理中使用，即依照合成控制部分84所执行的控制将根据该用户公开信息的字符和图像与内容的图像和声音进行合成。音频/视频合成部分26将合成结果输出给显示单元41。

基于存储在成员存储部分113中的编目成员信息以及存储在用户信息存储部分63中的用户设置信息，传输控制部分112对用户公开信息的配置进行设置，用于将其传输给对话目标成员以作为可以公开给该成员的信息。然后，传输控制部分112实际上基于由传输控制部分112所设置的配置，控制用户信息发送部分121产生用户公开信息，并将该信息传输给对话目标成员。这时，依照用户公开信息的配置，传输控制部分112还控制嵌入在用户信息发送部分121中的信号处理部分131，以便从输入部分22输入的实时数据中获得预定的信息，并对包括在所获得信息中的图像执行消减及压缩处理。

成员信息存储部分113用于存储有关成员的信息，这些成员中的每一个都可以称为远程通信中的通信伙伴。对话控制部分111依照用户所执行的操作，预先在成员信息存储部分113中存储有关这些成员的信息，将其作为编目成员的信息。

图7是示出存储在成员信息存储部分113中的编目成员信息的典型配置的图表。编目成员的信息包括：作为成员的用户的名称、用户的属性、用户的非公开级别以及用户的联系地址。用户(也就是该成员)的属性是该用户和用户A之间的关系。用户的非公开级别是该成员与用户A之间的亲密度级别。联系地址的实例是URL(统一资源定位符)及电子邮件地址。

属性是一种包括允许参与同一远程通信的多个用户的设置。这种设置可以是家庭、朋友群体或提及少数的圈子。非公开级别越低，亲密度级别越高。例如，非公开级别1表示比非公开级别3更高的亲密度级别。

也就是说，用户名为用户X的用户在通信设备1中具有家庭的属性，并在家庭的属性中将非公开级别设置为1。用户X的联系地址是050^*****。用户名为用户Y的用户也在通信设备1中具有家庭的属性，并在家庭的属性中将非公开级别设置为2。用户Y的联系地址是011-1^***。用户名为用户Z的用户在通信设备1中具有朋友的属性，并在朋友的属性中将非公开级别设置为4。用户Z的联系地址是abc@de.fg。

用户名为群体1的用户在通信设备1中具有大学的属性，并在大学的属性中将非公开级别设置为5。群体1的联系地址为Member.^**。用户名为群体2的用户在通信设备1中具有业余爱好的属性，并在业余爱好的属性中将非公开级别设置为3。群体2的联系地址为^***。

如上所述，在通信设备1中将用户按属性分类，并将具有相同属性的用户进一步依照它们的非公开级别进行分类，这里的每个非公开级别都代表着在该属性中的亲密度级别。在这种情况下，操作通信设备1的用户A通过选择用户名、属性或属性和非公开级别的组合，将另一用户标明为对话目标成员。

例如假设操作通信设备1的用户A通过选择家庭的属性以及至少为2的非公开级别的组合，将另一用户标明为对话目标成员。在这种情况下，在如图7所示的实例中，在通信设备1中具有家庭的属性并在家庭的属性中将非公开级别设置为1的用户X，以及在通信设备1中具有家庭的属性并在家庭的属性中将非公开级别设置为2的用户Y，两者中的每一个都被标明为对话目标成员。如果用户A通过选择家庭的属性和至少为1的非公开级别的组合而将另一用户标明为对话目标成员，另一方面，在通信设备1中具有家庭的属性并将非公开级别设置为2的用户Y将不会被标明为对话目标成员。

值得注意的是，用户A使用的属性和非公开级别作为将另一用户标明为对话目标成员的信息，存储在随后将参照图8所描述的用户设置信息中，以作为用于用户A的用户设置信息。

回到图6。依照传输控制部分112所执行的控制并基于上述配置设置，在通信部分23中使用的用户信息发送部分121从存储在用户信息存储部分63或实时数据中的用户设置信息中产生用户公开信息，并将所产生的用户公开信息传输给对话目标成员。这时，依照用户公开信息的配置，嵌入在用户信息发送部分121中的信号处理部分131受到控制，以便从输入部分22所输入的实时数据中获得预定的信息，并对包括在所获得的信息中的图像执行消减及压缩处理，以用于产生用户公开信息。

信号处理部分131是这样一个单元，它用于从输入部分22输入的实时数据中获得例如图像、声音、明亮度信息或温度的信息，并将所获得的信息提供给用户信息发送部分121，其中该实时数据用作用户的实时数据。另外，信号处理部分131对所获得图像执行消减及压缩处理，并将处理结果提供给用户信息发送部分121。

用户信息接收部分122是这样一个单元，它用于将来自另一通信设备1的用户X的用户公开信息提供给对话控制部分111。

请求响应接收器部分123是这样一个单元，它用于从例如通信设备1-2的对话目标成员接收一个响应信号并将该响应信号提供给对话控制部分111。响应于发出开始远程通信请求的信号或者由请求响应发送器部分124传输的请求信号，从该对话目标成员传输该响应信号。

请求响应发送部分器124是这样一个单元，它用于依照对话控制部分111所执行的控制，将发出开始远程通信请求的信号以及一个响应信号传输给对话目标成员。响应于从请求响应接收器部分123所接收的作为发出开始远程通信请求的请求信号，请求响应发送器部分124传输该响应信号。

数据发送器部分125包括发送器部分132和接收器部分133。依照对话控制部分111所执行的控制，数据发送器部分125与同意由通信设备1-1所请求的开始远程通信的另一通信设备交换信号，建立与该另一通信设备的连接，并在建立连接后，用已经建立的连接与该另一通信设备交换实时数据和其他数据。与该另一通信交换的其他信息包括与该另一通信设备通信中所请求的数据以及与该另一通信设备同步地进行内容再现的数据。

图8是示出存储在用户信息存储部分63中的前述用户设置信息的典型配置的图表。

在图8所示的典型配置中，用户设置信息包括：用户A的用户名、ON的使用状态、CS121ch的内容名、“家庭”的属性、值大于等于2的非公开级别以及值大于等于1的公开级别。包括在用户设置信息中的内容名、属性、非公开级别和公开级别是用户名为UserA的用户预先设置的信息。

用户名是操作通信设备1的用户的名称。值得注意的是，如果多个用户使用同一个通信设备1，就可给给予每个用户一个名称。使用状态是用户是否正在操作该通信设备1的状态，其中该用户是由该用户名所表示的。

内容名是由该用户在通信设备1中正在再现(或使用)的内容的名称，或者是用户期望在其中再现的用户的名称，其中该用户的名称是由该用户名所表示的。如果该内容是BS(广播卫星)广播的节目内容、CS(通信卫星)广播的节目内容或者地波数字广播的节目内容，那么用于广播该内容的频道名称就被添加到该内容名中。如果内容是存储在内容存储部分61中或是从图中未示出的例如光盘等等的记录介质中读出的，另一方面，就在内容名中设置该内容的名称、光盘的标题或另一名称。

属性和非公开级别是从存储在通信设备1的编目成员信息中提取的数据，以作为与用户设置的对话目标成员有关的信息，其中该用户的名称是由该用户名所表示的。公开级别是编目的对话目标成员的级别，可在通信设备1中获得的信息能作为用户公开信息公开给该对话目标成员。可公开给这种对话目标成员的信息的一个实例是该用户设置信息本身。

也就是说，在如图8所示的实例的情况下，在具有表示通信设备1正由一个用户所操作的使用状态为ON的该通信设备1中，具有内容名为CS121ch的内容名正进行再现，其中该用户的名称是User A。另外，User A已经设置与标明为对话目标成员的用户进行远程通信，其中该对话目标成员具有“家庭”的属性和至少为2的非公开级别或者为1或2的非公开级别。然后，在开始远程通信的处理中，设置在这个用户设置信息中的公开级别用作一个标准，该标准表明可在通信设备1中获得的信息能作为用户公开信息公开给用户，其中该用户中的每一个用作具有1或2的非公开级别以及属性为“家庭”的对话目标成员。由于公开级别的值在该用户设置信息中设置为2或更大，因此包括该用户设置信息的可获得信息就可以作为用户公开信息公开给具有非公开级别为1的对话目标成员。

可作为用户公开信息的信息实例是一起使用该通信设备1(或在其中浏览内容)的用户的数量、可由缩略图片显示的信息、浏览该内容的用户的周围环境的信息、用户情况的信息、用户所要求的通信格式以及远程通信的状态信息。浏览该内容的用户的周围环境的信息通常可经由输入部分22来输入。浏览该内容的用户的周围环境的信息包括安装该通信设备1的房间的图像、亮度和温度。用户情况的信息例如表示用户是在用餐期间、有来访者还是工间休息。用户所要求的通信格式可以表示只进行声音通信或只进行图像通信。远程通信的状态信息通常揭示了该用户目前正与之进行通信的用户。

例如，如果用户设置信息中的公开级别设置在“All”，可在通信设备1中获得的信息就可以作为用户公开信息显示给所有非公开级别的对话目标成员。例如，一起使用通信设备1(或在其中浏览内容)的用户的数量就可以作为用户公开信息公开给所有非公开级别的对话目标成员。出于同样原因，可由缩略图片显示的信息可以作为用户公开信息公开给所有非公开级别的对话目标成员。

然而，如上所述，远程通信的状态信息揭示了作为通信伙伴的个人。这样，设置在通信伙伴的用户设置信息中的非公开级别作为该通信伙伴的对话目标成员的非公开级别也包含在其中。结果，为了在用户的用户设置信息中定义对话目标成员的范围，以作为要将该用户的信息对其公开的对话目标成员的范围，就不仅需要定义用户的公开级别，还需要考虑设置在通信伙伴的用户设置信息中的属性、非公开级别，甚至是公开级别，其中该通信伙伴是该用户目前与之通信的。通过考虑设置在通信伙伴的用户设置信息中的属性、非公开级别甚至是公开级别，就可以发出公开以下事实的许可，即继续与该通信伙伴进行通信，但不允许公开有关该通信伙伴的信息。

另外，依靠公开级别，而不是传输存储在用户设置信息中的用户缩略图片，包括在输入部分22所输入的实时数据中的图像作为用户的图像按照其原样，以低速率的帧传输进行传输，或在被压缩以作为用户的详细信息公开给对话目标成员之后进行传输。在这种情况下，用户Y也和用户X一起使用通信设备1-2。

接下来，通过参考图9所示的流程图来解释图5所示的流程图中的步骤S1所执行的远程通信启动处理。图9所示的流程图表示由用户A所操作的通信设备1-1执行的处理，以开始与用户X所操作的通信设备1-2进行远程通信。

首先，用户A操作输入部分31来激活通信设备1-1。然后，依照由操作输入设备31所产生的操作信号，控制部分32接通整个通信设备1-1的电源。

其后，用户A操作该操作输入部分31来输入一个命令，以发出在通信设备1-1和由用户X所操作的通信设备1-2之间开始远程通信的请求。然后，用户A操作该操作输入部分31来输入将每个具有，例如，属性为家庭以及非公开级别的值至少为2的用户指定为用于操作通信设备1-1的用户A的对话目标成员的命令。这种对话目标成员包括用户X。操作输入部分31产生与这些命令相应的操作信号，并将这些信号提供给对话控制部分111。

一旦从该操作输入部分31接收操作信号，在如图9所示的流程图的第一步S21所执行的处理中，对话控制部分111将用户设置信息存储在用户信息存储部分63中。用户设置信息包括：UserA作为用户名、揭示用户A对通信设备1-1进行使用的使用状态、上述的家庭属性以及上述将值设置为2或更大的非公开级别。家庭属性和非公开级别是用来定义由用户A所操作的通信设备1-1的对话目标成员的信息。

然后，用户A选择具有例如版权的权利的内容，作为要浏览或执行的内容。这种内容的一个实例是具有内容名为CS121ch的内容。一旦从操作输入部分31接收操作信号，在下一步骤S22所执行的处理中，对话控制部分111选择由一个操作信号所指定的内容，并将所选择的内容的名称作为用户设置信息的一部分存储在用户信息存储部分63中。另外，在这个时候，对话控制部分111将关于所选择的内容的信息提供给再现许可部分85，来控制内容再现部分25，以便再现所选择的内容。然后，处理流程继续执行步骤S23。

为了进行更详细的描述，基于例如所选择的内容的许可证和保密性或传输该内容的频道的信息，再现许可部分85产生用以判断是否允许进行内容再现的确定结果，并且如果该确定结果表示允许进行内容的再现，那么该再现许可部分85控制内容再现部分再现该内容。内容再现部分25再现从广播接收部分24接收的广播节目的内容，并将已再现的内容的图像和声音输出给音频/视频合成部分26。依次，音频/视频合成部分26将表示从内容再现部分25接收的图像和声音的视频和音频信号，作为该内容的图像输出给输出部分21。

这样，如图10所示，由用户A操作的通信设备1-1中所使用的显示单元41，将显示依照用户A在用作操作输入部分31的远程控制器上所执行的操作进行选择和再现的CS121ch内容的图像。同时，CS121ch内容的声音从安装在显示单元41的两侧的扬声器42R和42L输出。

与此同时，位于远离通信设备1-1的位置上的通信设备1-2也可以执行将参照如图13所示的流程图随后进行描述的相似处理，其中该通信设备1-2是由用户X和Y操作的通信设备，而用户X和Y的每一个都用作对话目标成员。同样如图10所示，在通信设备1-2中采用的显示单元41将显示依照用户X在用作操作输入部分31的远程控制器上所执行的操作进行选择和再现的BS11ch内容的图像。同时，BS11ch内容的声音从安装在显示单元41的两侧的扬声器42R和42L输出。

在步骤S23所执行的处理中，对话控制部分111控制传输控制部分112，以便将用户A的用户公开信息作为要传输给对话目标成员的信息。

为了具体地说明，在步骤S23所执行的处理中，传输控制部分112基于如图8所示的用户设置信息的公开级别，将用户A的用户公开信息设置为包括用户设置信息的用户公开信息，其中该用户设置信息的公开是被允许的。然后，处理流程继续执行步骤S24。稍后，在步骤S24所执行的处理中，传输控制部分112控制用户信息发送部分121，以产生用户A的设置用户公开信息，并将所产生的用户公开信息传输给包括在如图7所示的编目成员信息中的联系地址，以作为对话目标成员的联系地址。然后，处理流程继续执行步骤S25。

与此同时，与通信设备1-1相同的处理方式，在位于远离通信设备1-1的位置上的通信设备1-2中，对选择的内容进行再现，其中该通信设备1-2是由用作对话目标成员的用户X操作的通信设备。稍后，用户X设置用户公开信息，并在参照图13随后进行描述的流程图中的步骤S54，用户X的用户公开信息被传输给通信设备1-1，其中该通信设备1-1用作通信设备1-2的对话目标成员。

在步骤S25所执行的处理中，对话控制部分111输出确定结果，以判断是否已经从对话目标成员接收用户公开信息。如果从步骤S25所执行的处理中由对话控制部分111输出的确定结果表示用户公开信息没有从对话目标成员那里接收，那么处理流程继续执行步骤S24，在这里传输控制部分112再次控制用户信息发送部分121以产生用户A的设置用户公开信息，并将所产生的用户公开信息传输给该对话目标成员的联系地址。然后，重复后面的处理。

也就是说，例如由于线路错误和/或终端情况的改变，通信设备1-1就不会正确地从用作对话目标成员的通信设备1中接收用户公开信息。在这种情况下，用户A的用户公开信息传输给该对话目标成员的联系地址一个预定的次数。另外，在将用户A的用户公开信息已传输给该对话目标成员的联系地址一个预定的次数之后，相隔预定的间隔，用户A的用户公开信息就再次传输给对话目标成员的联系地址，只要远程通信处理没有在其运行中挂起。

当用户信息接收部分122从通信设备1-2中接收用户公开信息，用户信息接收部分122将该用户公开信息传递给对话控制部分111。在这种情况下，在步骤S25执行的处理中由对话控制部分111输出的确定结果已经从对话目标成员接收，因此处理流程继续执行步骤S26，在步骤S26中用户X的用户公开信息提供给合成控制部分84，以便最后输出给输出部分21。

也就是说，在步骤S26所执行的处理中，合成控制部分84控制音频/视频合成部分26，用以根据从对话控制部分111所接收的用户公开信息，将字符以及图像或声音与内容的图像和声音进行合成。然后，音频/视频合成部分26将作为合成结果而获得的视频信号所表示的图像显示在显示单元41上，并将作为合成结果而获得的音频信号所表示的声音输出给扬声器42。以这种方式，如图11所示，显示单元41示出一个用户选择屏幕，显示出在步骤S25所执行的处理中接收的一些用户公开信息，以作为每一个都是对话目标成员的用户的用户公开信息。

图11是示出在用户A操作的通信设备1-1所使用的显示单元41上出现的典型用户选择屏幕的图表。

如图11所示，典型的用户选择屏幕出现在显示单元41上，如图10所示出现在显示单元41上右侧的图像作为正在再现的CS121ch内容的图像。用户选择屏幕在叠加在子屏幕151-153上的内容的图像上示出了每一个都用作对话目标成员的用户的一些用户公开信息。

例如，子屏幕151将用户X的缩略图片作为用户X的用户公开信息来显示，其中该用户X用作对话目标成员。出于同样原因，子屏幕152显示另一用户，即用户P的缩略图片，作为该另一用户P的用户公开信息，其中该用户P用作对话目标成员。以相同的方式，假设子屏幕153显示又一个用户，即用户Q的缩略图片，作为该又一用户Q的用户公开信息，其中该用户Q用作对话目标成员。由于用户Q不是使用其中的通信设备1或者由于通信故障等等，在步骤S25所执行的处理中，子屏幕153没有显示用户Q的缩略图片。在如图11所示的实例中，子屏幕153什么也不显示。值得注意的是，子屏幕151和152的每一个都在具有较高透明度的背景上显示用户的缩略图片，以便使在屏幕151和152后面的那部分内容的图片是可视的。

通过参考大窗口W来更详细地解释子屏幕151，该窗口W是将子屏幕151扩大化的结果，如下。子屏幕151显示为对话目标成员设置并存储在通信设备1-2中的作为用户X的用户设置信息的用户公开信息。用户公开信息包括用户X的缩略图片161、表示操作通信设备1-2的用户数量的用户数162、表示正在通信设备1-2中再现的内容的名称的内容名163以及内容图像164，其中该内容是作为用户X正在浏览的内容。假设用户X和用户Y使用通信设备1-2。在这种情况下，用户数162是2。在该实例中，正在通信设备1-2中再现的内容的名称是BS11ch。

也就是说，用户X允许将缩略图片161、用户数162、内容名163和内容图像164公开给用户A。换句话说，缩略图片161、用户数162、内容名163和内容图像164的每一个都具有这样的公开级别，即缩略图片161、用户数162、内容名163和内容图像164可以公开给具有关于用户X的某种属性和非公开级别的用户A。值得注意的是，只有当内容图像164的版权允许通过使用通信设备1-1来浏览该内容图像164时，内容图像164就会显示在通信设备1-1上。

还要注意的是，由作为合成结果而获得的音频信号来表示的声音是从如图11所示的扬声器42L和42R输出的，虽然上面的描述没有给出这样的解释。

在观看具有上述配置的用户选择屏幕的同时，用户A操作信号处理部分131来选择一个用户，其中该用户是要请求与其开始远程通信的用户。假设用户A选择用户X。由用户A进行操作，操作输入部分31将表示由用户A所执行的用户设置操作的操作信号提供给对话控制部分111。

一旦从操作输入部分31接收操作信号，在如图9所示的流程图的步骤S27所执行的操作中，对话控制部分111依照从该操作输入部分31接收的操作信号，选择一个开始远程通信请求的目标。开始远程通信请求的目标这里被称为请求目标。然后，对话控制部分111控制请求响应发送器部分124将发出请求开始远程通信的信号传输给所选择的请求目标，在该实例中该请求目标是由用户X操作的通信设备1-2。

一旦接收发出请求开始远程通信的信号，在随后参照图13描述的流程图的步骤S58所执行的处理中，通信设备1-2就在如图12所示的显示单元41上显示用户A的用户公开信息和开始远程通信的请求，并且将相应的声音从扬声器42输出。

在图12所示的实例中，在用户X和Y使用的通信设备1-2中所采用的显示单元41上显示了出现在如图10所示的显示单元41上的BS11ch内容的图像，并显示在该内容的右侧示出用户A的用户公开信息的子屏幕171，其中该内容是作为正在通信设备1-2中再现的内容。另外，通信设备1-2中所使用的显示单元41也显示在BS11ch内容的图像的右下角叠加的盒子，以作为示出询问是许可还是拒绝开始远程通信的请求的盒子。为了具体地描述，盒子示出了“○允许”的询问和“×拒绝”的询问。值得注意的是，在如图12所示的实例中，在子屏幕171上显示的用户公开信息包括在帧传输中传输的作为用户A的图像的实时图像，而扬声器42L和42R输出一个说“你好”的声音以作为用户A的实时声音。还值得注意的是，子屏幕171在具有高透明度的背景上显示用户A的实时图像，以允许子屏幕171后面的那部分内容图像也可以被看见。

也就是说，在如12所示的实例中，在帧传输中传输的和在子屏幕171上显示的实时图像还有从扬声器42L和42R中产生的实时声音表示用户A所发出的请求，以从用户X获得远程通信开始的许可。

看着在通信设备1-2中使用的显示单元41上出现的子屏幕171上显示的信息，其中该信息作为用户A的用户公开信息以及是许可还是拒绝开始远程通信的请求的询问，用户X就操作该操作输入部分31来输入对该询问的响应。假设用户X输入了表示接受开始远程通信请求的响应。在随后参照图13描述的流程图中的步骤S58所执行的处理中，通信设备1-2将显示这种接受的响应信号传输给通信设备1-1。

通信设备1-1中采用的请求响应接收部分123将从通信设备1-2接收的响应信号传递给对话控制部分111。在如图9所示的流程图的步骤S28所执行的处理中，对话控制部分111将检验从该请求响应接收部分123接收的响应信号，以便输出确定结果，以示出操作通信设备1-2的用户X是否已接受开始远程通信的请求。如果该确定结果表示操作通信设备1-2的用户X已经接受开始远程通信的请求，那么处理流程继续执行步骤S29，在该步骤中对话控制部分111控制发送器部分132和接收器部分133与通信设备1-2交换连接信号，以便建立与通信设备1-2的连接。然后，对话控制部分111更新存储在用户信息存储部分63中的用户设置信息，以及如果必要的话，依照更新的用户设置信息更新用户公开信息。随后，处理流程继续执行步骤S30。

也就是说，对话控制部分111在用户设置信息中记录表示如下含义的远程通信状态，即继续与操作通信设备1-2的用户X进行通信。然后，对话控制部分111控制传输控制部分112依照更新的用户设置信息来更新该用户公开信息。

值得注意的是，在建立与通信设备1-2的连接中，通信设备1-1从通信设备1-2中获取如下确认信息，即用户X的用户公开信息是否可以公开给设置在通信设备1-1中的对话目标成员，并依照该确认信息更新该用户公开信息。如果确认信息表示用户X的用户公开信息可以公开给对话目标成员，那么就允许将用户X的用户公开信息作为在用户A和用户X之间公开的远程通信状态中的远程通信伙伴的用户公开信息，公开给对话目标成员。出于同样原因，通信设备1-2还在用户A的用户公开信息上执行相似处理。

然后，在下一步S30所执行的处理中，对话控制部分111控制传输控制部分112在终止远程通信启动处理之前，将更新的用户公开信息传输给对话目标成员。值得注意的是，此时，不必将更新的用户公开信息传输给用户X，这里已经建立与该用户X的连接。

稍后，处理流程回到包括在图5所示的流程图中步骤S1之后的步骤S2。在步骤S2所执行的处理中，对话控制部分111控制输入部分22和发送器部分132，以便开始将由输入部分22所输入的实时数据作为用户A和其它用户的实时数据，经由通信网络2传输给通信设备1-2。另外，对话控制部分111控制接收器部分133开始接收由通信设备1-2传输的实时数据，以作为用户X和Y的实时数据。

然后，包括在用户X的实时数据中的图像和声音以及包括在用户Y的实时数据中的图形和声音，提供给音频/视频合成部分26。随后，依照由合成控制部分84所执行的控制，音频/视频合成部分26将包括在用户X的实时数据中的图像和声音以及包括在用户Y的实时数据中的图像和声音与CS121ch内容的图像和声音进行合成，以便将视频和音频信号作为合成结果输出给输出部分21。这样，如图12的箭头A所示，在通信设备1-1中使用的显示单元41显示了在图10所示的显示单元41上出现的图像以及叠加在该图像上的子屏幕181，其中该图像作为正进行再现的CS121ch内容的图像，而该子屏幕示出了包括在用户X和Y的实时数据中的图像以作为在开始远程通信的处理中的用户X和Y的图像。值得注意的是，还是在该实例中，子屏幕181在具有高透明度的背景上显示用户X和Y的实时图像，以允许子屏幕181后面的那部分内容图像可以被看见。

如果在步骤S28所执行的处理中由对话控制部分111产生的确定结果示出：从请求响应接收器部分123接收的响应信号表示操作通信设备1-2的用户X已拒绝(不接受)开始远程通信的请求，另一方面，处理流程就回到步骤S24，在该步骤中传输控制部分112再次控制用户信息发送器部分121产生用户A的设置用户公开信息，并将所产生的用户公开信息传输给对话目标成员的联系地址。响应于经传输的用户公开信息，通信设备1-1再次从该对话目标成员接收用户公开信息。然后，在步骤S26所执行的处理中，已接收的用户公开信息被提供给合成控制部分84，以便输出给输出部分21并最终显示在显示单元41上。

也就是说，如图12中箭头B所示那样，如果用户X拒绝启动远程通信的请求，那么如图11所示那样，通信装置1-1中使用的显示单元41示出CS121ch内容的图像右侧上的子屏幕152和153，其中该内容作为在CS121ch-内容图像上叠加的子屏幕而被再现。

在图12所示的实例的情况中，显现在图11所示的用户选择屏幕151上的子屏幕作为示出用户X的用户公开信息的屏幕而不再被显示，因为用户X拒绝了用于启动远程通信的请求。然而，在与图11所示实例相同的方式中，子屏幕152示出了作为另一对话目标成员的另一用户的缩略照片以作为另一用户的用户公开信息。出于同样原因，子屏幕153示出了作为又一对话目标成员的又一用户的缩略照片以作为该又一用户的用户公开信息。该又一用户的缩略照片是步骤S25接收的照片。在该实施例中，另一用户和又一用户分别是用户P和Q。

在该方式中，只要远程通信在其过程中没有被暂停，就重复执行步骤S24和随后的步骤的处理。

接下来，通过参考图13所示的流程图，随后的描述将通信装置1-2执行的远程通信启动处理解释为根据图9所示流程图的由通信装置1-2执行的远程通信启动处理的副本。应该指出，在图13所示的流程图所提供的典型远程通信启动处理中，按照与通信装置1-1相同的方式激活通信装置1-2以启动远程通信。所以，在图13所示流程图的步骤S51-S56以及S60-S61所执行的处理与在图9所示流程图的步骤S21-S26以及S29-S30所执行的处理基本相同。为此原因，为适当避免重复将不再详细地描述这些相同的处理。

首先，用户X操作操作输入部分31以激活通信装置1-2。然后，根据操作输入部分31所产生的操作信号，控制部分32为整个通信装置1-2接通电源。

随后，用户X操作该操作输入部分31以在由用户A操作的通信装置1-1与同时由用户X和Y操作的通信装置1-2之间输入用于产生启动远程通信请求的指令。然后，用户X操作该操作输入部分31以输入指令，来指定例如每一具有属性和非公开等级的用户以作为用户X的对话目标成员。操作输入部分31产生与这些指令相对应的操作信号并且将该信号提供给对话控制部分111。

在图13所示流程图的第一步骤S51所执行的处理中，从操作输入部分31接收了操作信号，对话控制部分111将用户设置信息存储在用户信息存储部分63。用户设置信息包括：用户名，揭示用户X和Y使用的通信装置1-2的利用状态，上述的属性，以及上述的非公开等级。属性和非公开等级是一种定义用户X和Y所操作的通信装置1-2的对话目标成员的信息。

然后，用户X选择具有诸如版权那样权利的内容以作为被浏览或执行的内容。所述内容的一个实例是具有BS11ch内容名称的内容。在下一步骤S52执行的处理中，从操作输入部分31接收了操作信号，对话控制部分111选择由一个操作信号指定的内容并且将选定内容的名称存储在用户信息存储部分63以作为用户设置信息的一部分。另外，这时，对话控制部分111将有关选定内容的信息提供给再现许可部分85以便控制内容再现部分25，以致于再现选定的内容。然后，处理进入到步骤S53。

所以，如先前参考图10所述的那样，用户X和Y操作的通信装置1-2中使用的显示单元41示出在作为操作输入部分31的远程控制器上的用户X所执行的操作中所选定和再现的BA11ch内容的图像。同时，在显示单元41两侧安装的扬声器42R和42L输出BS11ch内容的声音。

在步骤S53执行的处理中，对话控制部分111控制传输控制部分112以将用户X的用户公开信息设置为被传输到对话目标成员的信息。然后，处理流程进入步骤S54。在步骤S54执行的处理中，传输控制部分112控制用户X的用户公开信息以产生用户X的设置用户公开信息，并且传输所产生的用户公开信息到对话目标成员的联系地址。然后，处理流程进入到步骤S55。

同时，也在位于远离通信装置1-1的位置上作为一个对话目标成员的通信装置1-2中再现选定的内容，其中该通信装置1-1是由用户A操作的装置。稍后，用户A在图9所示的流程图的步骤S24处设置用户公开信息，并且产生的用户A的用户公开信息被传送到作为通信装置1-1的对话目标成员的通信装置1-2。

在步骤S55执行的处理中，对话控制部分111输出有关是否已从对话目标成员接收到用户公开信息的判断结果。如果步骤S55执行的处理中，对话控制部件111输出的判断结果表示没有从对话目标成员接收到用户公开信息，那么处理流程返回到步骤S54，在步骤S54，传输控制部件112再一次控制用户信息发送器部分121以产生用户X的设置用户公开信息并且传送产生的用户公开信息给对话目标成员的联系地址。然后，重复随后的处理。

当用户信息接收器部分122从通信装置1-1接收了用户A的用户公开信息，用户信息接收器部分122将用户公开信息传递到对话控制部分111。在该情况中，在步骤S55执行的处理中，由对话控制部分111输出的判断结果表示已经从对话目标成员接收了用户公开信息，因此，处理流程进入到步骤S56，在步骤S56，用户A的用户公开信息被提供给合成控制部分84以最终输出到输出部分21。所以，在步骤S55执行的处理中所接收的用户公开信息作为充当对话目标成员的用户的用户公开信息被显示在显示单元41上显现的用户选择屏幕上，并且扬声器42输出用户的声音。然后，处理流程进入到步骤S57。

在此刻，通信装置1-1所使用的显示单元41示出用户X和其他用户的用户公开信息。然后，在图9所示流程图的步骤S27所执行的处理中，基于用户A执行的操作，通信装置1-1将产生启动远程通信请求的信号传输给通信装置1-2。

在图13所示流程图所给出的典型远程通信启动处理的情况中，在步骤S57，对话控制部分111执行一处理以等待对话目标成员产生启动远程通信的请求。在等待状态中重复执行该处理，直到对话目标成员产生启动远程通信的请求。当用户信息接收器部分122从通信装置1-1接收了用于产生启动远程通信请求的信号，用户信息接收器部分122将该信号传递给对话控制部分111。在步骤S57执行的处理中，对话控制部分111检查从用户接收器部分122接收的响应信号以证实对话目标成员已作出了启动远程通信的请求。在该情况中，处理流程进入到步骤S58，在步骤S58，用户A的用户公开信息以及指示用于启动远程通信的请求的信息被提供给合成控制部分84以最终输出到输出部分21。

也就是说，在步骤S58执行的处理中，合成控制部分84根据从对话控制部分111接收的用户公开信息并根据以内容的图像和声音标识请求的信息来控制音频/视频合成部分26以合成字符和图像或声音。然后，音频/视频合成部分26在显示单元41上显示作为合成结果而由获得的视频信号所标识的图像，并且将作为合成结果而由获得的音频信号表示的声音输出到扬声器42。在该方式中，如先前参考图12所述那样，通信装置1-2中使用的显示单元41示出了子屏幕171，该子屏幕171显示了用户A的用户公开信息以及询问，该询问是关于启动远程通信请求是被允许或被拒绝作为在BS11ch内容图像的右侧上叠加的子屏幕。

查看作为用户A的用户公开信息而被显示在通信装置1-2使用的显示单元41上所显现的子屏幕171上的信息以及有关是否允许或拒绝启动远程通信请求的询问，用户X操作该操作输入部分31以输入对询问的响应。让我们假设：用户X输入表示接收启动远程通信请求的响应。在该情况中，操作输入部分31将表示接收启动远程通信请求的操作信号提供给对话控制部分111。

在下一步骤S59执行的处理中，从操作输入部分31接收操作信号，对话控制部分111控制请求响应发送器部分124以将表示接受启动远程通信请求的响应信号传送给通信装置1-1。处理流程进入步骤S60。

在步骤S60执行的处理中，对话控制部分111控制发送器部分132和接收器部分133以与通信装置1-1交换连接信号以便建立与通信装置1-2的连接。然后，对话控制部分111对用户信息存储部分63中存储的用户设置信息进行更新，并且如果必要的话，用户公开信息与更新的用户设置信息相一致。随后，处理流程进入步骤S61。在步骤S61执行的处理中，对话控制部分111控制传输控制部分112以在终止远程通信启动处理之前将更新的用户公开信息传送给对话目标成员。

随后，处理流程返回到图5所示流程图中包括的步骤S2，即在步骤S1之后的步骤。在步骤S2执行的处理中，对话控制部分111控制输入部分22和发送器部分132以借助于通信网络2开始将作为用户X和Y实时数据的、由输入部分22输入的实时数据传输到通信装置1-1。另外，对话控制部分111控制接收器部分133以开始接收作为用户A的实时数据的、由通信装置1-1传送的实时数据。

然后，用户A的实时数据所包括的图像和声音被提供给音频/视频合成部分26。随后，根据合成控制部分84执行的控制，音频/视频合成部分26将用户A的实时数据中包含的图像和声音与待再现的BS11ch内容的图像和声音进行合成，以将作为合成结果的输入视频和音频信号输出给输出部分21。所以通信装置1-2使用的显示单元41示出图像和叠加该图像上的子屏幕，其中所述图像显示在图10所示的显示单元41上以作为待再现的BS11ch内容的图像，并且子屏幕是示出在启动远程通信处理中作为用户A的图像的用户A的实时数据所包含的图像。

如上所述，在真正开始交换实时数据之前，能够公开给通信伙伴的用户公开信息与所述伙伴进行交换。然后，在参考接收到的用户公开信息之后，通信装置之一请求另一通信装置以启动远程通信。接收启动远程通信的请求，另一通信装置参考接收到的用户公开信息以在启动远程通信之前接收所述请求。所以，请求侧上的通信装置能够根据情况产生请求，所述情况能够通过参考响应侧上的通信装置的用户公开信息而被识别以作为响应侧上通信装置的情况。结果，能够轻松地产生请求。出于同样原因，响应侧上的通信装置能够为该请求提供响应以作为根据情况的响应，所述情况能够通过参考请求侧上的通信装置的用户公开信息而被识别以作为请求侧上通信装置的情况。结果，就可以轻松而毫不犹豫地给出请求的响应。

如上所述，用户的用户公开信息包括用户的实时数据中所包括的声音和图像。然而应该指出：用户之间相互允许查看实时数据的图像和接听实时数据的声音，在一时间点上，用户公开信息被传输，在执行实时数据交换和执行远程通信之前允许实时数据交换。也就是说，同样在该情况中，先于实际交换实时数据之前，双方都允许实时数据的交换。

如上所述，在启动远程通信之前允许启动通信装置1-1和1-2之间的远程通信。然而，在先前通过参考图9和13所示流程图而描述的远程通信启动处理作为启动通信装置1-1和通信装置1-2之间远程通信的处理来执行之后，作为设置对话目标成员之一的另一用户能够参与通信装置1-1和通信装置1-2之间的远程通信。

接下来，通过参考图14所示的流程图，随后的描述解释了通信装置1-1已经与通信装置1-2执行通信的远程通信启动处理。

也就是说，在完成图9所示流程图所表示的、作为启动与通信装置1-2的远程通信处理的远程通信启动处理之后，通信装置1-1正在执行图14所示的流程图所表示的远程通信启动处理，以启动例如与未在图中示出的通信装置1-3的远程通信，该通信装置1-3作为充当通信装置1-1的对话目标成员之一的用户P新近激活和使用的通信装置。应该指出：为适当地避免重复，不再详细地描述作为与图9所示流程图所表示的远程通信启动处理中执行的它们各自对应部分相同的处理的、图14所示流程图中所表示远程通信启动处理中所执行的处理。

在图14所示流程图的第一步骤S81，对话控制部分111进入一种如下的状态，即等待基于标准时间计量部分30产生的时间而计量的预定时间周期的推移。在该情况中，对话控制部分111重复产生有关预定时间周期是否推移的判断结果。当判断结果表示预定时间周期推移，那么处理流程进入到步骤S82，在该步骤上更新用户信息存储部分63中存储的用户设置信息，并且按照用户设置信息的更新，控制传输控制部分112以更新用户A的用户公开信息，所述用户A的用户公开信息将被传送给图9所示流程图的步骤S24所执行的处理中产生的对话目标成员，并且在同一流程图的步骤S29处执行的处理中进行更新。然后，处理流程进入到步骤S83。

在步骤S83执行的处理中，传输控制部分112控制用户信息发送器部分121以便将更新的用户A的用户公开信息传送到编目成员信息中所包含的联系地址以作为对话目标成员的联系地址。然后，处理流程进入到步骤S84。应该指出：已与其建立连接的通信装置1-2，将每一作为用户A的用户公开信息的接受者的对话目标成员排除在外。

同时，以与图13所示流程图表示的通信装置1-2所执行的远程通信启动处理相同的方式，在被激活之后，作为对话目标成员之一的用户P所操作的通信装置，即在远离通信装置1-1的位置上提供的通信装置1-3再现选定的内容，并且得到用户P的用户公开信息。然后，将用户P的用户公开信息传送给用户A操作的通信装置1-1，该通信装置1-1作为图13所示流程图的步骤S54的相同处理中的对话目标成员。

在步骤S84执行的处理中，对话控制部分111输出有关是否已从对话目标成员接收用户公开信息的判断结果。如果在步骤S84执行的处理中的对话控制部分111输出的判断结果表示没有从对话目标成员接收到用户公开信息，那么处理流程返回到步骤S81以重复在该步骤和随后步骤所执行的处理。

另一方面，如果在步骤S84执行的处理中的对话控制部分111输出的判断结果表示已从对话目标成员接收到用户公开信息，处理流程进入到步骤S85，在该步骤上，作为该情况中用户P的用户公开信息的用户公开信息被提供给合成控制部分84以最终输出到输出部分21。所以，作为充当对话目标成员的用户的用户公开信息，在步骤S84执行的处理中接收到的用户公开信息显示在显示单元41所显现的用户选定屏幕上，并且如果必要，扬声器42输出用户的声音。

查看作为用户的用户公开信息一部分、在通信装置1-3中使用的显示单元41上显现的用户选定屏幕上显示的信息，用户A操作操作输入部分31以选择用户之一。让我们假设：用户A选择了用户P以作为新近允许参与远程通信的用户。应该指出：如果用户A不希望选择用户以作为新近加入远程通信的用户，那么用户A通常关闭用户选定屏幕。操作输入部分31将表示用户A选择用户P所执行操作的操作信号提供给对话控制部分111。

在下一步骤S86执行的处理中，接收操作输入部分31的操作信号，对话控制部分111检查从操作输入部分31接收到的操作信号以输入关于是否选择用户的判断结果。如果判断结果表示没有选定用户选定屏幕上所显示的用户，也就是说，如果用户A关闭了用户选定屏幕，处理流程返回到步骤S81以重复执行该步骤和随后步骤的处理。

另一方面，如果步骤S86所执行的处理中产生的判断结果表示选定一个显示在用户选定屏幕上的用户，处理流程进入到步骤S87，在该步骤上，对话控制部分111控制请求响应发送器部分124以将产生启动远程通信请求的信号传送给选定用户所操作的通信装置。在该实例中，选定用户所操作的通信装置是用户P所操作的通信装置1-3。

响应从通信装置1-1接收到的信号，该信号作为产生启动远程通信请求的信号，通信装置1-3以与图13所示流程图的步骤S59相同的处理方式将表示接受或拒绝请求的响应信号传递给通信装置1-1。

通信装置1-1中使用的请求响应接收器部分123将从通信装置1-3接收到的响应信号传递给对话控制部分111。在下一步骤S88执行的处理中，对话控制部分111检查从请求响应接收部分123接收到的响应信号以输出关于操作通信装置1-3的用户P是接受还是拒绝了启动远程通信请求的判断结果。如果判断结果表示操作通信装置1-3的用户P拒绝(或不接受)启动远程通信的请求，那么处理流程返回到步骤S81以重复执行该步骤和随后步骤的处理。

另一方面，如果步骤S88产生的判断结果表示操作通信装置1-3的用户P接受启动远程通信的请求，处理流程进入到步骤S89，在该步骤，对话控制部分111控制该发送器部分132和该接收器部分133以与通信装置1-3交换连接信息，以便建立与通信装置1-3的连接。然后，对话控制部分111更新用户信息存储部分63中存储的用户设置信息并且控制传输控制部分112以根据更新的用户设置信息来更新用户公开信息。然后，处理流程进入到步骤S90。

在下一步骤S90执行的处理中，对话控制部分111控制传输控制部分112以在终止远程通信启动处理之前将更新的用户公开信息传送给对话目标成员。

稍后，处理流程返回到图5所示流程图中包括的步骤S2、即跟随在步骤S1之后的步骤。在步骤S2执行的处理中，对话控制部分111控制输入部分22和发送器132以借助于通信网络2将输入部分22输入的实时数据作为用户A和其他用户的实时数据传输到通信装置1-3。另外，对话控制部分111控制接收器部分133以开始接收通信装置1-3传输的、作为用户P的实时数据的实时数据。

然后，用户P的实时数据中所包含的图像和声音、用户X的实时数据中所包含的图像和声音、以及用户Y的实时数据中所包含的图像和声音被提供给音频/视频合成部分26。随后，根据合成控制部分84执行的控制，音频/视频合成部分26对用户P的实时数据中包括的图像和声音、用户X的实时数据中包括的图像和声音、用户Y的实时数据中包括的图像和声音与待再现的CS121ch内容的图像和声音进行合成，以便将作为合成结果的视频和音频输出到输出装置21。所以，通信装置1-1中使用的显示单元41示出在图10所示的显示单元41上显现的图像以作为CS121ch内容的图像，以及示出叠加在图像上的子屏幕，该子屏幕是示出在启动远程通信处理中作为用户P的图像的用户X和Y的实时数据所包括的图像。

如上所述，当正执行远程通信时，通信装置1-1周期地将用户A的用户公开信息传送给对话目标成员。如果响应用户A的用户公开信息，通信装置1-1接收对话目标成员发送的用户公开信息，那么通信装置1-1显示所接收的用户公开信息以至于用户A能够产生一种判断，该判断有关是否传输与传输了该接收的用户公开信息的目标成员启动远程通信的请求。所以，不能启动远程通信的另一用户也能够在现存的远程通信期间新近加入到该现存的远程中而不必费力，其中所述另一用户不能启动远程通信是因为在用户A启动远程通信的同时所述另一用户不能够操作通信装置。上述特征不仅应用到通信装置1-1，而且应用到任一个通信装置1。

具体地，例如，时，通信装置1-2同样执行图14所示流程图所表示的远程通信启动处理，以作为启动与通信装置1-3进行远程通信的处理。所以，通信装置1-3也开始与通信装置1-2进行远程通信。由于通信装置1-3允许与通信装置1-1和1-2的每一个进行远程通信，所以通信装置1-3能够新近加入到通信装置1-1和1-2之间的远程通信。

如上所述，在对话目标成员启动远程通信的同时由于不能操作通信装置而不能够启动远程通信的用户，也能够在现存的远程通信期间新近加入到该现存远程通信中而不必费力。

接下来，参考图15所述流程图，接下来的描述解释已经与通信装置1-3进行远程通信的通信装置1-2的远程通信启动处理。也就是说，通过通信装置1-2来执行处理图15所示流程图所给出的远程通信启动处理，以启动与通信装置1-1的远程通信，以便作为图9所示流程图所给出的远程通信启动处理的对应处理。(如上所述，通过通信装置1-1来执行处理图9所示流程图所给出的远程通信启动处理，以启动与通信装置1-2的远程通信)。换句话说，图15所示流程图所给出的远程通信启动处理与图13所示流程图所给出的远程通信启动处理相同，但除了以下情况之外，即在图15的情况中，通信装置1-2已经完成与通信装置1-3的启动远程通信处理。应该指出：为适当地避免重复，作为图13所示流程图所给出的远程通信启动处理中所执行的与它们各自对应部分相同的处理，图15所示流程图所给出的远程通信启动处理中所执行的处理将不再被详细地描述。

也就是说，当在通信装置1-2完成作为启动与充当对话目标成员的用户P所操作的通信装置1-3的远程通信处理的，即图13所示流程图所给出的远程通信启动处理之后对通信装置1-1进行启动时，通信装置1-2执行图15所示流程图所给出的远程通信启动处理。如上所述，通信装置1-2执行图15所示流程图所给出的远程通信启动处理，以作为与图9所示流程图给出的远程通信启动处理的对应处理。

如较早解释的那样，当激活用户A操作的通信装置1-1时，用户通信装置1-1的对话目标成员被设置，一个选定的内容被再现，产生用户A的用户公开信息，以及在图9所示流程图的步骤S24执行的处理中，所产生的用户公开信息被传送给作为对话目标成员之一的通信装置1-2。

在步骤S111执行的处理中，对话控制部分111进入到一种状态，即等待用户信息接收器部分122从通信装置1-1接收用户A的用户公开信息。当用户信息接收器部分122从通信装置1-1接收了用户A的用户公开信息，处理流程进入到步骤S112，在该步骤上，对话控制部分111控制传输控制部分112以验证发送用户公开信息的对话目标成员是否是在已设置的用户A的用户公开信息中的对话目标成员。然后，在图13所示流程图的步骤S54处产生的并且相同的流程图的步骤S60更新的用户公开信息作为用户X的用户公开信息被重新更新。随后，处理流程进入到步骤S113。

应该指出：另一方面，如果传送用户公开信息的对话目标成员不是已被设置的用户A用户设置信息中的对话目标成员，那么作为用户X的用户公开信息而传送给传送接收到的用户公开信息的用户的用户公开信息被重新产生。重新产生的用户公开信息典型地包括显示由于以下事实不能传输响应的信息，所述事实为用户X正在与另一对话目标成员进行通信。

然后，在步骤S113执行的处理中，传输控制部分112控制用户信息发送器部分121以将用户X的更新过的用户公开信息传送给在步骤S111执行的处理中操作通信装置1-1传输用户A的用户公开信息的用户A。然后，处理流程进入到步骤S114。

接收用户X的用户公开信息的通信装置1-1在显示单元41上显示用户X的用户公开信息。然后，基于用户A执行的操作，在图9所示流程图的步骤S27所执行的处理中，通信装置1-1将用于产生启动远程通信请求的信号传输给通信装置1-2。

通信装置1-2中使用的用户信息接收器部分122从通信装置1-1接收用于产生启动远程通信请求的信号，并且将该信号提供给对话控制部分111。在步骤S114执行的处理中，对话控制部分111检查从作为对话目标成员的通信装置1-1中由用户信息接收器部分122接收到的信号，以产生有关所述信号是否是产生启动远程通信请求的信号的判断结果，其中该对话目标成员先于产生判断结果来传输用户公开信息。如果在步骤S114执行的处理中所产生的判断结果表示从通信装置1-1中由用户信息接收器部分122接收的信号不是用于产生启动远程通信请求的信号，那么处理流程返回到步骤S111以重复执行该步骤和随后步骤的处理。

另一方面，如果在步骤S114执行的处理中所产生的判断结果表示从通信装置1-1中由用户信息接收器部分122接收的信号是用于产生启动远程通信请求的信号，那么处理流程进入到步骤S115，在步骤S115，表示启动远程通信的请求的信息以及用户A的用户公开信息被提供给合成控制部分84以作为显示图像而输出到显示单元41，并且如果必要，作为对应于图像的声音而输出到扬声器42。如先前所述，具体地，表示启动远程通信请求的信息是询问用户X接收或拒绝所述请求的询问。

查看在显示单元41上显示的、作为表示启动远程通信请求的信息和用户A的用户公开信息的信息部分，用户X操作操作输入部分31以输入表示接受或拒绝所述请求的信息。轮流地，操作输入部分31将表示接受或拒绝启动远程通信的请求的操作信号提供给对话控制部分111。

在下一步骤S116执行的处理中，对话控制部分111检查从操作输入部分31接收的的操作信号，即作为表示接受或拒绝启动远程通信的请求的操作信号，以产生有关所述操作信号是否为表示接收或拒绝请求的操作信号的判断结果。如果判断结果表示从操作输入部分31接收的操作信号是表示接收启动远程通信请求的操作信号，那么处理流程进入到步骤S117，在步骤S117，对话控制部分111控制请求响应发送器部分124以将响应信号传送给通信装置1-1以作为表示接收请求的信号。然后，处理流程进入到步骤S118。

在步骤S118执行的处理中，对话控制部分111控制发送器部分132和接收器部分133以与通信装置1-1交换连接信号，以便建立与通信装置1-1的连接。然后，对话控制部分111对用户信息存储部分63中存储的用户设置信息进行更新，并且如果必要，按照更新的用户设置信息来更新用户公开信息。随后，处理流程进入到步骤S119。在步骤S119执行的处理中，对话控制部分111控制传输控制部分112以在终止远程通信启动处理之前将更新的用户公开信息传送给对话目标成员。

随后，处理流程返回到图5所示流程图中包括的步骤S2、即跟随步骤S1之后的步骤。在步骤S1执行的处理中，对话控制部分111控制输入部分22和发送器部分132以借助于通信网络2将作为用户X和Y的实时数据的、由输入部分22输入的实时数据传送给通信装置1-1。另外，对话控制部分111控制接收器部分133启动接收由通信装置1-1传送的、作为用户A的实时数据的实时数据。

然后，用户A的实时数据中包括的图像和声音以及用户P的实时数据中包括的图像和声音被提供给音频/视频合成部分26。随后，根据合成控制部分84所执行的控制，音频/视频合成部分26将用户A的实时数据中包括的图像和声音以及用户P的实时数据中包括的图像和声音与内容的图像和声音进行合成以便将作为合成结果的视频和音频信号输出到输出部分21。所以，通信装置1-2中使用的显示单元41示出图10所示显示单元41上显现的图像以作为待再现的BS11ch内容的图像，以及显示叠加在图像上的子屏幕，该子屏幕显示了作为用户A的图像的用户A的实时数据所包括的图像以及在启动远程通信的处理中作为用户P的图像的用户P的实时数据所包含的图像。

如果步骤S116执行的处理中所产生的判断结果表示从操作输入部分31中接收的操作信号不是表示接受启动远程通信请求的操作信号，另一方面也就是说，从操作输入部分31接收的操作信号是表示拒绝请求的操作信号，处理流程进入到步骤S120，在步骤S120，对话控制部分111控制请求响应发送器部分124以将响应信号传送到通信装置1-1以作为表示拒绝请求的信号。然后，处理流程返回到步骤S111以重复执行该步骤以及随后步骤的处理。

如上所述，如果用户X即使在与充当对话目标成员的用户P的远程通信过程中接收用户公开信息，用户X就将其自身的用户公开信息传输给充当另一对话目标成员的用户A。所以，将用户X的信息告知希望启动与用户X的远程通信的用户A。结果，与用户X的远程通信能够简单地开始而不是仅仅单方面地拒绝来启动。

另外，通过在通信装置1-3中执行图15所示流程图给出的远程通信启动处理以启动与通信装置1-1的远程通信，通信装置1-1也能够启动与通信装置1-3的远程通信。由于通信装置1-1允许执行与通信装置1-2和1-3的远程通信，所以通信装置1-1被允许加入到通信装置1-2和1-3之间的远程通信中。

如上所述，当启动对话目标成员的远程通信时不利用其自身通信装置的用户也能够在执行远程通信期间容易地加入到由对话目标成员执行的远程通信中。

根据本发明，如上所述，远程通信处理能够被执行。所以，与包括传统电话机、电视电话和诸如视频会议系统的远程通信装置相比，能够执行更加真实的和自然的通信。

也就是说，在传统通信的情况中，使用传统电视机观看和收听以实时方式发布的广播内容的用户X利用音频电话机将用户X观看和收听到的广播内容的印象表现给位于遥远位置上的用户A。然而在该情况中，对于没有实际观看和收听广播内容的用户A来说，很难懂得所述情况的印象。

然而，通过使用根据本发明实施例的通信装置，彼此相距遥远的用户A和X能够同时分享内容并且，另外，能够在子屏幕等上再现用户A和X的图像，同时能够收听到它们的声音。所以，尽管用户A和X彼此相距遥远的距离，也能够提供逼真的感觉、一体性的感觉和好像正在脸对脸地进行交流的亲切的感觉。

另外，启动远程通信时，作为能够在对话目标成员之间彼此公开的用户公开信息部分，为对话目标成员而产生的用户公开信息部分能够交换，以便在通信参与者之间交换图像和声音的远程通信能够仅在交换所涉及到的用户公开信息部分之后执行。所以，由于通信参与者知道通信伙伴的情况或通信状态，因此就可以容易地交换请求和响应，以及与例如采用呼叫方法的传统电话系统情况那样允许进行一方请求的通信系统相比，更平稳地启动远程通信。结果，能够实施更加真实和自然的通信。

即使在启动一对一远程通信之后也能够交换用户公开信息。所以，根据对每一作为远程通信伙伴的候选者的对话目标成员的设置，作为远程通信伙伴的候选者的任一对话目标成员能够加入到远程通信中而不是将远程通信限制为一对一连接。所以，能够创建共享内容的更加真实、自然的空间。

而且，在远处通信的过程中，通过包括在用户设置信息中的属性和私人级别来管理对话目标成员的设置。所以，能够选择适于目前情况下通信候选者。

如上所述，能够实施更加真实的远程通信。所以，能够促进远程通信的普及。

如先前所述的由通信装置1执行的系列处理能够通过硬件和/或软件执行来实现。在该情况中，图1所示的通信装置1-1和1-2中的每一个典型地通过类似于图16所示的个人计算机401来实现。

在图16所示的个人计算机401中，CPU(中央处理单元)411是一种通过执行预先存储在ROM(只读存储器)412中和从存储部分418载入到RAM(随机存取存储器)413中的各种程序来执行不同类型处理的部件。RAM 413也用于在执行程序过程中通过CPU411适当地存储数据。

CPU411、ROM412和RAM413通过总线414彼此相连。总线414也连接到输入/输出接口415。

输入/输出接口415连接到上述的输入部分416、输出部分417、上述存储部分418以及通信部分419。用于接收用户输入指令的输入部分206包括诸如键盘和鼠标那样的输入设备，而输出部分207包括显示图像的显示单元和输出所产生的声音的扬声器。显示单元典型为CRT(阴极射线管)显示单元或LCD(液晶显示器)单元。存储单元418典型是硬磁盘存储器，包括用于存储各种程序和不同种类数据的嵌入式硬盘。包括调制解调器和终端适配器的通信部分419是一种通过网络执行与其他装置的无线或有线通信处理的单元。

输入/输出接口415也连接到驱动器420，在该驱动器上安装有记录介质。记录介质的实例是磁盘421、光盘422、磁光盘423、以及半导体存储器424。如果必要，将从记录介质读取的程序安装在存储部分418。

如上所述，如先前所述的由通信装置1执行的系列处理能够通过硬件和/或软件执行来实现。如果通过执行软件来实现上述的处理序列，那么包括软件的程序能够典型从网络或上述记录介质上被安装到嵌有专用硬件的计算机、通用个人计算机等等。通过向通用个人计算机安装各种程序，个人计算机能够执行各种功能。

如上所述，如果必要，从作为上述软件那样的记录介质中读取的程序被安装到存储部分418。记录介质本身被分配给从通信装置1的主单元分离的用户。如图16所示，也被称为插件介质的记录介质的实例是包括软盘的磁盘421、包括CD-ROM(光盘只读存储器)和DVD(数字通用光盘)的光盘422、包括MD(袖珍光盘[商标])的磁光盘423以及半导体存储器424。作为从插件介质向存储部分418安装程序的一种可选项，典型地将程序预先存储在ROM412中或嵌入存储部分418的硬盘中。

值得指出的是：在该说明书中，不仅能够沿着时间轴以先前所述顺序，而且能够同时或单独地执行上述流程图所给出的任一程序步骤。

也应该指出：该说明书中使用的技术术语‘系统’暗示包括多个装置的配置。

另外，本领域普通技术人员应该理解：在所附权利要求或其等同物的范围内，根据设计需要和其他因素，可以出现不同的修改、组合、子组合、以及改变。

Claims

1.一种由用户操作以通过网络执行通信的信息处理装置，所述信息处理装置包括：

公开信息发送器装置，用于传送用户公开信息给另一信息处理装置，其中允许向另一信息处理装置公开该用户公开信息；

显示控制装置，用于控制一个处理以显示通过所述公开信息接收器装置所接收的用户公开信息；

连接许可判断装置，用于基于从所述另一信息处理装置接收到的响应，产生有关所述连接请求装置所请求的连接作为到另一信息处理装置的连接是否被所述另一信息处理装置所允许的判断结果；以及

通信装置，一旦所述连接许可判断装置所产生的判断结果表示，所述另一信息处理装置已允许与该所述另一信息处理装置的连接，所述通信装置用于将所述用户的图像和声音传输到另一信息处理装置，并且从所述另一信息处理装置接收另一用户的图像和声音。

2.根据权利要求1的信息处理装置，其特征在于，所述用户公开信息是一种允许向另一信息处理装置公开的信息并且包括以下任意可得的信息，即关于被浏览的内容的信息、浏览内容的用户的数量、用户的声音或图像、用户周围的环境的信息以及通过所述网络而形成的连接的状态。

3.根据权利要求1的信息处理装置，其特征在于，所述公开信息发送器装置周期地或当所述公开信息接收器装置从所述另一信息处理装置接收了用户公开信息时将用户公开信息发送传输给所述另一信息处理装置。

4.根据权利要求1的信息处理装置，其特征在于，所述信息处理装置进一步包括：

5.一种通过网络执行通信的信息处理方法，所述方法包括以下步骤：

从另一信启、处理装置接收另一用户公开信息；

基于从另一信息处理装置接收到的响应，产生有关所述连接请求步骤执行的处理中所请求的连接作为到所述另一信息处理装置的连接是否被所述另一信息处理装置所允许的判断结果；以及

一旦所述连接允许判断步骤所执行的处理中所产生的判断结果表示，所述另一信息处理装置允许了与所述另一信息处理装置的连接，就进行通信以用于将所述用户的图像和声音传输到另一信息处理装置并且从所述另一信息处理装置接收另一用户的图像和声音。

6.一种记录由计算机执行的程序的记录介质，以通过网络进行通信，所述程序包括以下步骤：

从另一信息处理装置接收另一用户公开信息；

根据操作所述计算机的用户所执行的操作，产生连接到另一信息处理装置的请求；

基于从另一信息处理装置接收到的响应，产生有关所述连接请求装置所请求的连接作为到另一信息处理装置的连接是否被所述信息处理装置所允许的判断结果；以及

7.一种计算机通过网络执行通信的记录程序，所述程序包括以下步骤：

从另一信息处理装置接收另一用户公开信息；

基于从另一信息处理装置接收到响应，产生有关所述连接请求步骤执行的处理中所请求的连接作为向所述另一信息处理装置的连接是否被所述另一信息处理装置所允许的判断结果；以及

8.一种用户操作以通过网络执行通信的信息处理装置，所述信息处理装置包括：

公开信息发送器部分，用于将由信息构成的用户公开信息传送给另一信息处理装置，其中允许向所述另一信息处理装置公开该用户公开信息；

连接许可判断部分，用于基于从另一信息处理装置接收到的响应，产生有关所述连接请求装置所请求的连接作为向另一信息处理装置的连接是否被所述另一信息处理装置所允许的判断结果；以及

通信部分，一旦所述连接允许判断部分所产生的判断结果表示，所述另一信息处理装置已经允许了与所述另一信息处理装置的连接，所述通信部分用于将所述用户的图像和声音传输到另一信息处理装置，并且从所述另一信息处理装置接收另一用户的图像和声音。