CN1914884A - 借助于虚拟控制代表的用于远程通信的方法和系统 - Google Patents

Abstract

本发明涉及一种用于通过电信网络(40)在至少两个用户之间远程通信的方法和系统。第一用户借助第一端装置连接到电信网络(40)且第二用户借助第二端装置连接到电信网络(40)，而且虚拟控制代表(5，6)与每个用户关联。所述方法包括以下步骤：在第一端装置上和第二端装置上呈现两个控制代表(5，6)；借助至少一个控制代表(5，6)的动画以及通过控制代表(5，6)之间的交互将信息从第一用户传送到第二用户，而且反之亦然。

Description

借助于虚拟控制代表的用于远程通信的方法和系统

技术领域

本发明涉及一种方法和系统，至少两个用户可借助该方法和系统经由适当的终端相互通信。通过使用虚拟代表来加宽和支持通信。

背景技术

除较常规的通信装置如电话、传真或电子邮件之外，有时还有进一步的已公知为“即时消息接发”(IM)的通信服务。利用这种通信服务，使用客户程序的几个用户可实时交换所书写的消息或还相互“聊天”。由用户输入的文本实时发送到其他参与用户。然后这些用户又可通过文本输入对发送的消息作出响应。

即时消息接发的缺点在于这种通信形式局限于纯文本消息的交换。为了克服此缺点并且加宽即时消息接发中表达的可能性，很多用户使用所谓“图释(emoticon)”。图释是模仿脸或还有“表情符(smily)”的字符串，它们在书写的电子通信中用来表达情绪和感觉。

即使即时消息接发中表达的可能性由于“图释”而略微地加宽，这里仍没有以多分层、清晰、有吸引力和多媒体的方式来将特别是情感和情绪传达给聊天伙伴的进一步可能性。

发明内容

因此本发明的目的是提出一种方法和系统，电信终端的至少两个用户可利用该方法和系统以多层、有吸引力和多媒体的方式来实时相互通信。根据本发明的方法和根据本发明的系统特别地旨在于使情绪、情感和感觉的特别直接、多用和变化的通信成为可能。

为了实现上面所指的目的，本发明提出一种通过电信网络在至少两个用户之间远程通信的方法，其中第一用户通过第一终端而第二用户通过第二终端连接到电信网络，而且其中虚拟代表分配给每个用户，具有以下步骤：

-在第一终端上和第二终端上呈现两个代表；

-通过至少一个代表的动画以及通过代表之间的交互将信息从第一用户传送到第二用户，而且反之亦然。

为了清楚起见，在下文中描述了在第一与第二用户之间的仅双向通信的情形。但是，本发明也自然地覆盖经适当设计的三个或甚至更多用户之间的通信。

在根据本发明的方法中，两个用户之间的通信通过使用虚拟代表来基本地加宽和改进。用户现在不再排他地束缚于用于交换信息的书写形式，还可通过使他们相应的代表动画化来立即将信息以视觉和声音传递给相应的通信伙伴。虚拟代表不仅代表相应的用户，而且包括通信功能，特别是用于非口头通信的下述功能。于是每个代表不仅理解为图形元素，还理解为用于应用程序的程序元素或对象，这些应用程序是为了与其他用户的通信而在相应用户的终端上运行的。代表因此是小的通信控制程序。于是代表也称为“通信机器人”，在下文中简写为“combots”。

在本发明的上下文中通过远程通信来指代在某一距离之上在两个用户之间的通信，而且很广泛地加以理解。这意味着包括所有通信网络上所有通信类型。这例如发生于电信网络上，其可以例如是电话网络、无线电通信网络、计算机网络、卫星网络或这些网络的组合。根据本发明的网络优选地包括因特网或万维网。

第一用户和第二用户二者通过所谓终端来相互通信。这些终端服务于远程通信并且使得在用户之间视觉、声音和/或书写形式的信息交换成为可能。这些终端可以是电话、移动电话、PDA、计算机或类似物。在每种情况下用户还可通过不同装置相互通信。终端优选地是具有因特网功能的计算机或PC。

在本发明的上下文中“用户”是指自然人或人类个体。

根据本发明，当进行远程通信时虚拟代表(combot)分配给每个用户。该虚拟代表也可称为幽灵或化身。这是代表相应用户的图形假人。例如用户可具有公知的滑稽形象如Donald Duck或Bart Simpson作为虚拟代表。图形形象在通信期间在用户的终端上呈现给用户。同时，用户还看见代表他的通信伙伴的又一个图形对象。

于是，通过相应地使通信方的虚拟代表动画化，如例如感觉表达的信息可以以新颖的方式传达到通信伙伴。附加地或备选地，也可呈现两个代表之间的交互。

如果使一个代表动画化，这意味着其图形呈现的外表或声音随时间改变。因此代表不仅是静态画面或符号，还是动态的并且能执行大部分的变化动作。于是，代表例如可以挥手以示问候。

如果两个代表之间进行交互，这意味着不仅每个代表独立于其他代表来动画化。而且，一个代表对其他代表的动作产生反应，并且反之亦然。于是在两个代表之间发生交互事务，这两个代表相互影响并进入互动关系。于是，例如一个代表可回挥手以响应于来自其他代表的挥手。

代表的动画和/或交互优选地响应于用户命令，特别是响应于来自用户的拖放命令来发生。于是用户可单独控制他的代表，例如通过控制代表来向他的通信伙伴指示了他的当前情绪。通过相应终端的对应操作来执行控制，该终端优选地是个人计算机。如果终端具有带有鼠标型控制的图形用户界面(桌面)，则用户可特别容易地通过拖放(drag & drop)来触发他的代表的动画或交互。为此，用户将他的鼠标指示器移动到他的代表将执行的动画的图形图像上，并将该图像“拖”到他的代表的图形表示上。桌面或窗的预定区或由应用程序创建的窗区可用于此。

第二用户的代表的动画也可优选地响应于来自第一用户的命令来执行，而且反之亦然。利用此功能，代表之间的交互由此容易地成为可能。特别是如果一个用户希望他的代表执行要对其他用户的代表产生影响的动作，则该功能是有用的。于是，第一用户例如可指令他的代表向其他用户的代表抛出物品。响应来自第一用户的抛出命令以及在第二用户的代表处对于抛出的图形表示，有适当动画形式的它所抛向的代表的适当“反应”。第二用户的代表的动画于是由来自第一用户的控制命令触发。于是在使用两个代表的两个用户之间甚至可开发一种视频或计算机游戏。优选地，通过到第二用户的代表上的所述拖放，第一用户可获得第二用户的代表的这种动画。

响应于用户命令来执行的动画和/或交互优选地同时、并行和实时地呈现在两个用户的双方终端上。这意味着两个用户能够响应于输入的命令来实况地跟踪代表的行为，如同该行为就在他们相应的终端上一样。

依赖于经由代表的交换要有多快和直接地进行，由用户输入用以使用户的代表动画化的控制命令可不同地加以处理。于是，新输入的用户命令可造成正在进行的动画或交互的直接中断；该中断然后立即紧跟着用户所需的新动画。取而代之，也能够响应于新的用户输入来先完成正在进行的动画或交互，使得所需的动画立即跟着完成的动画而继续。而且，当在一定境况下在双方紧跟有数个用户命令时，所需的动画或交互可放在要执行的动画或交互的等待列表中。由用户指示的动画然后根据等待列表来依次地处理。

也能够进行的是，中断由第一用户触发的第一动画或交互，并且以由第二用户触发的动画或交互来取代第一动画或交互，而且反之亦然。如果，例如第一用户触发交互，其中他的代表向第二用户的代表射箭，则第二用户可通过指令他的代表用盾牌挡箭来中断该交互。第一用户可随后通过触发进一步的交互等来中断该第二交互。于是使用所述代表就能够在两个用户之间对动作和反应的规则交互游戏进行开发。

交互进度能够依赖于用户所预定的和/或在分配给用户的用户简档中存储于系统中的可预定参数。参数例如可包括有关相应用户的个人信息，如比如说他的国籍、他的居住地或暂住地、他的偏好和癖好等。于是，例如可以将通信中的特质特别是手势纳入考虑之中，这些特质是相应国籍或文化群所特有的。而且，通过数据采集和统计功能，相应用户简档可由系统管理并更新发展，于是适当的交互自动地用于相应用户的代表(combot)，或者至少适当的选择被提供给用户，例如若干优选交互(喜好)。于是系统具有由其支配的如下功能，该功能使用参数来自动改变并适应交互。用户可随时接通或关断该自动功能。

根据进一步的独立发明方面，为了进一步加宽用户之间通信的深度，也可进行对由用户输入到他的终端中的语音或文本的识别。然后分析经识别的语音和文本输入，于是检测它的重要性。而且，可进行对用户面部表情的视频识别(例如通过摄像机)及其分析和解释。于是针对特定的感觉表达，可优选地记录和评估用户的面部表情。在分析和解释之后，能够与他的语音或文本输入或他的面部表情的意义相协调地提供用于动画或交互的数个合适的可能性。如果用户例如由此在书写、口头或通过他的面部表情来让人知道他是高兴的，则表达高兴的适当动画(动画“微笑”或“欢笑”或“跳起”等)可提议给该用户用于他的代表的适当动画。

取代了提议功能，与语音或文本输入或面部表情的意义相协调的代表动画和/或代表之间的交互也可直接或自动进行。在这种情况下，语音或文本消息的或面部表情的意义可自动建立，因此对应代表的行为也同样可自动匹配到语音或文本消息或面部表情的意义。如果用户的语音或文本消息或面部表情例如表示“我很悲伤”，则该用户的代表可自动采用悲伤的面部表情。备选地，在该代表模仿所识别的意义之前可以先有由用户进行的确认。文本消息意义的自动识别也称为“解析”。搜索该文本以寻找关键字和项，针对这些关键字和项，适当的动画以及在适当之时还有交互就赋予给用户和/或由系统自动引入到通信中。这样的“解析”功能也可适当地应用于非文本消息，特别是语音消息。而且在消息内容的分析期间，也可使用从系统中存储的用户简档中检索的关于用户的信息。与相应用户的书写和语言习惯有关的这种信息可存储在那里，该信息然后在到动画和交互的转换期间纳入考虑之中。

特别地，如果除经由代表的通信之外，两个用户还以通常方式通过文本和/或语音消息(例如通过VoIP和/或即时消息接发)或摄像头来相互通信，则用户的面部表情、语音或文本输入的分析和解释的附加功能是有利的。

为了使得对于代表的控制命令的特别简单和直观的输入成为可能，代表的动画和交互的可能性的表示以表式概览来进行。该表式概览应用于为用户提供图形用户界面的终端中。于是，借助于以小的图形符号(“图标”或“缩略图”)的形式包含可用控制命令的用图形表示的表，用户可选择要由代表执行的动作。概览表也可称为格、矩阵或栅。

表式概览优选地具有固定数目的类，其中收集了而且可从中检索动画和交互的可能性。于是表式概览可由二乘三矩阵组成，其中矩阵的六个域中每一个代表六个最终的固定类之一。六类中的动画特别优选地收集到“情绪”、“爱幕”、“主题”、“注解”、“侵犯”和“事件”区中。

而且如果用户提供有画图功能以使得将用户在他的终端上的画图实时传送到在他的终端上的其他用户成为可能，则为用户产生了又一类通信结果。使用画图工具，用户可在他的图形用户界面上产生画图。其他用户和通信伙伴然后能够在他的终端上实时跟踪画图的创建。于是也能够发送用书写或通过代表仅能困难地呈现的信息。

而且可提议将情绪显示集成到两个通信用户的视图中，该情绪显示表示了两个代表的当前相应情绪。该情绪显示可实现为情绪条的形式和/或取决于情绪的笑到较大或较小程度的脸的形式(“表情符”)。于是每个用户可直接精确地看见他自己的情绪以及外来代表的情绪是怎样的。相应的情绪显示可在代表的动画过程中以及作为交换的结果来变化。

如果代表的自动动画还附加地在对情绪显示变化的反应中执行，则代表的行为特别地变化且逼真。于是，例如如果其情绪显示已经超出特定的限制值，则第一用户的代表可自动开始因高兴而跳起。

情绪显示可以在大部分的变化形式中呈现，例如甚至形式为“温度计”或“温度曲线”。用户的当前情绪或幽默也可通过对代表(combot)进行上色或另外进行配置来显示。如果也使通信深度依赖于当前情绪则是特别有利的。为此，该系统评估当前情绪显示并且相应地修改与用户的代表(combot)有关的动画和/或交互。

两个代表在第一终端处的呈现优选地是两个代表在第二终端处的呈现的镜像或反镜像。这例如意味着每个用户总是在左边看到他的代表而在右边看到其他用户的代表。于是即使代表雷同仍然保证清楚的分配。

如果实现以下附加特征则获得进一步的特定优点：

至少一个代表的一个动画和/或代表之间的交互优选地依赖于可预定的标准，特别是在分配给两个用户中至少一个的用户简档中存储的标准来进行。

而且两个用户中的至少一个可提供有要传送的动画和/或交互的选择。这也可依赖于可预定的标准，特别是在分配给两个用户中至少一个的用户简档中存储的标准来进行。将待传送的动画或交互的选择至少提议给该用户。

在本上下文中，有关两个用户中至少一个的细节，特别是有关性别、年龄、国籍、母语、语言习惯或模式、居住地、兴趣和/或癖好的信息，可预定为标准。

如果至少一个代表的一个动画和/或代表之间的交互响应于用户的拖放命令来进行则也是有利的，其中该拖放命令涉及该用户的实际代表或其他用户的代表，而且其中动画或交互依赖于拖放命令涉及两个代表中的哪一个来进行。

与识别语音或文本输入或视频识别相联系，这可依赖于可预定的标准，特别是在分配给两个用户中至少一个的用户简档中存储的标准来进行。如果可预定的标准包括涉及两个用户中至少一个的细节，特别是有关性别、年龄、国籍、母语、语言习惯或模式、居住地、兴趣和/或癖好的细节，则是有利的。

至少一个代表的一个动画和/或代表之间的交互可依赖于情绪显示，该情绪显示针对两个用户中的至少一个来显示他当前主导的情感情绪。于是能够特别地提供的是，代表响应于接收的情感而做出的自动反应依赖于接收代表的当前主导情绪。因此，例如如果代表的主导情绪处置得当而且该代表接收侵犯性情感，则代表的自动反应可以是简单的摇头。但是，如果接收此侵犯的代表的主导情绪是负面的，则取代简单轻微的摇头，他可以自动地握他的拳头并且诅咒。

相反地，针对两个用户中的至少一个来显示他当前主导情感情绪的情绪显示能够依赖于传送的情感和/或交互来修改。同样，要传送到两个用户中至少一个的动画和/或交互的选择能够根据针对两个用户中的至少一个来显示他的当前主导情感情绪的情绪显示而提供。

如果要传送的动画和/或交互的选择是组合的组和/或类的形式来提供则是有利的。与之相联系，类的组合和/或动画和/或交互的选择可自动地进行并且伪随机地控制。

最后，本发明还包括一种执行上述根据本发明的方法的系统。

附图说明

图1所示为用于实现根据本发明的方法的用户的用户界面的概图；

图2a到2c所示为根据本发明的用户界面的备选实施例；

图3a到3f所示为根据本发明的用户界面的又一备选实施例；

图4a和4b所示为两个虚拟代表之间的交互的例子；

图5a和5b所示为根据本发明用于选择控制命令的表的两个实施例；

图6所示为借助于根据图4a和4b的表对于用户可用的不同控制可能性；

图7所示为根据本发明的文本识别和解释(分析)；

图8a到8d所示为由用户发出的控制命令的不同处理可能性；

图9所示为两个用户的相应反镜图；

图10到28所示为在使用根据本发明的方法和系统的两个用户之间的通信的例子；

图29所示为具有基于文本的元素和根据本发明配置的元素的复杂通信的例子。

具体实施方式

现在为了更好的理解，通过举例来说明本发明的优选实施例。

下面假设称为“Franz”的第一用户正在与代表第二用户的他的朋友“Manuela”通信。二者正在通过他们相应的计算机在因特网上通信。Franz和Manuela都具有用于相互通信的在他们相应的计算机上运行的通信应用。该应用的用户界面1通过图1中的例子表示。

用户界面1是Franz用来与Manuela通信的界面。于是图1再现了当与Manuela通信时Franz在他的屏幕上所见的。Manuela在她的计算机屏幕上具有类似于用户界面1来构造的界面。

下面仅说明用户界面1的结构。

用户界面1实现为具有三个主要部分2、3和4的独立窗。部分2可称为动画部分。Franz和Manuela的虚拟代表5和6呈现在该部分中。部分3是文本和控制部分。在Franz和Manuela之间交换的文本消息呈现于此。用于控制通信的控制面板也容纳在部分3中。最后，部分4是菜单条。

两个用户的两个虚拟代表5和6(combot)可在动画部分2中看到。Franz的虚拟代表5是汽车，而Manuela的虚拟代表6是玩偶。上面的名签7和8用于更好地分配代表。如图1所示，Franz的代表5当前处于动画阶段并向Manuela的代表6发送心9。以此方式，Franz通过他的代表5表达他对Manuela的爱情。

小窗10a和10b在相应的角落中布置在代表5和6上方。这些窗展示在此精确时刻由相应的用户执行什么动作。如果例如铅笔出现在窗10b则Franz知道Manuela当前正在使用后面详细说明的画图功能。

文本和控制部分3分成消息区11、控制条12和起草区13。已在Franz和Manuela之间交换的文本消息将在消息区11中看到。为了编写并发送文本消息到Manuela，Franz使用起草部分13。Franz可通过他的键盘在起草区13中输入文本消息给Manuela。一旦他已经产生了文本消息，他可以通过按下按钮14将它发送到Manuela。发送的语音消息然后出现在Franz的消息区11中和Manuela的消息区中。

为了控制他的代表5，Franz使用控制条12。控制条12具有数个按钮15。代表5和6的不同动画可通过这些按钮15来触发。于是图“1”中指示的“心动画”可通过将心符号拖放到Franz的汽车上来触发。通过将拳击手套拖到Manuela的玩偶上，于是可以使Franz的代表5拳击玩偶。

可通过按下按钮16来打开具有进一步控制命令的概表，如通过图5a和5b的例子示出的。

按钮17使动画部分2的打开和关闭(显示和隐藏)成为可能。

而且，通过呈现为铅笔符号的按钮18，Franz可以在消息部分11中徒手画出在Manuela的消息部分中实时理解的任何预期图形。这样画出的图形的例子用标号19强调。而且，在部分11的上下文中，已交换的情感也用符号显示，即显示了形成这个仍在进行的通信历史的一部分的情感。此处，例如，显示了标号19H给出的且呈现为“拳击手套”的情感，这是“Franz”以前发送给“Manuela”的很有侵犯性的情感。通过点击该历史性情感的符号19H，它可立即自发地重复。

所有既往通信话路的适当历史可通过菜单条4来检索(通过按下“历史”按钮)。而且，也有可能在适当之时按顺序访问某人自己的文件(通过按下“文件”按钮)以将这些发送到通信伙伴。最后，用于因特网上联合冲浪的话路也可通过按钮“surf*2”来开始。

图2a所示为动画部分2的备选配置。不同于图1，此处部分2附加地具有情绪显示20.1和20.2。情绪显示20.1是风格化的脸(“表情符”)，它通过其面部表情来示出相应代表的和对应用户的当前情绪。如图所示，“Franz”的情绪比“Vroni”的好，因为“Franz”情绪显示20.1a(“表情符”)的笑比“Vroni”表情符20.1b的更宽。情绪显示也可交替地或附加地分别以情绪条20.2a和20.2b的形式来实现。这里，条的长度指示了情绪质量。

与图1相比，图2b和2c示出了两个虚拟代表之间的交互呈现的两个进一步变化。在每种情况下呈现用户“Franz”的桌面。

在图2b的情况下，他的通信伙伴“Vroni”的虚拟代表(combot)21存储在桌面23上。如果“Franz”现在想向“Vroni”发送情感，则他通过点击鼠标或拖放到“Vroni”的combot 21上来发送情感。在所谓“发送情感”的情况下，思考泡24的呈现立即出现在发送者(“Franz”)的桌面23上，如图2c所示。Combot 22和21以及情感自身(此处例如是从Franz的combot 22飞向Vroni的combot 21的飞行心)的传送是呈现在思考泡24中。所有东西都以镜像出现在Vroni的桌面上(未呈现)。

在“接收的情感”的情况下，以下发生在接收者的桌面上：初始地，“Vroni”的代表21通常不再为接收者“Franz”所留意。但是，如果通信伙伴“Vroni”已从她的计算机向用户“Franz”的计算机发送对应的动画命令，则分配给存储的代表21的思考或语音泡24可突然和自动出现。然后两个代表21和22的动画发生在打开的思考泡24中。

如果用户在他的桌面上已经存储数个不同通信伙伴的代表，则用户也可同时指引对几个通信伙伴的通信。如果用户例如希望同时向两个用户发送相同的动画，则他可将两个对应的代表组合到组中。用户可通过单个的“拖放”到形成的组上在单个过程中发送预期动画到两个通信伙伴。可使用代表组如例如暂时或永久组的这一“智能”信息形成来创建多数变化的组。数个单独代表可也可组合到单组代表中。该组代表(“Groupcombot”)是单独的代表，用户可借助于它来同等地进入与整个通信伙伴组的联系中。

此外，该系统提供以下参考或通知功能：如果在系统没有引起自动反应的情况下接收者“Franz”没有通过对其进行手动反应来响应该情感，则指向该接收的情感的指示器21Z就显示在Vroni的combot 21处。该指示器21Z例如是当前还未经反应的情感的数目。如果对于到来的情感而潜在的接收者“Franz”不在场，则他可以随后立即识别在他缺席期间是否以及有多少情感已到达并且能对它们进行反应。

基于监视接收者的活动，该系统确定潜在的接收者是否已注意或遗漏这些情感。例如如果接收者在情感呈现期间以及随后至少五秒没有执行鼠标或键盘输入，则系统假定接收者遗漏动画。可选地或附加地，可通过连接到接收者计算机的摄像机来进行活动识别。使用摄像机，系统检查接收者是否在场。摄像机也可由接收者用作输入。然后接收者例如可以通过由摄像机识别的手移动来直接向他的计算机发送命令例如用于控制他的combot或对接收的情感进行反应。

在附加步骤中，摄像机甚至可优选地以实时监视的形式来识别用户的身体语言。通过摄像机，经常地记录用户的行为。借助识别或解释软件，系统能解释所户用户的行为并且与该用户的行为相协调地实时动画虚拟代表。由于摄像机记录，例如可确定用户刚采用了指示了他是悲伤的态度。用户的combot然后将自动地同时表达用户的悲伤。摄像机识别允许combot就如它以前一样地模仿用户的任何行为。摄像机检测用户的情绪或态度或甚至气氛。检测的情绪然后由系统自动传送到combot。于是，如果用户例如握拳，则这个动作由摄像机记录、然后由系统解释并最终引起该用户的combot再次展现用户的动作：combot握拳，像用户一样。

利用刚才说明的用户持续观察，通过combot可进行特别直观的通信。用户不需要向他的combot发主动命令，而是仅需坐在他的计算机前并自然地行动。用户在通信期间的无意识直接的和直观的反应完全自动直接地传送到combot上，而不需要用户这部分上有意识的主动性来达到该效果。

如果接收者遗漏了动画，则指示器21z显示在对应的combot处。此外，在为此目的而提供的日志中制作关于遗漏情感的条目(所谓“历史”)。接收者通过日志和/或指示器21Z可再次触发或重放遗漏的动画。于是系统为遗漏的动画提供一类记录器或存储器功能。

在接收的情感的情况下优选地呈现语音泡，但是在外发情感的情况下是思考泡。但是不同的呈现方式可以涉及情感是否已经传送。如果用户只希望准备情感的传送(编辑模式和/或预览模式)，则思考泡出现在他的桌面上。初始地，还没有东西出现在通信伙伴的桌面上。但是，感情一经传送(交互模式)，语音泡就出现在双方桌面上。图2c示出了另一变化：

在图2c中两个虚拟代表21和22存储在图2c中的相应桌面23上。此处通过将两个代表组合在总体呈现中来进行动画，该总体呈现即所谓“场所”，优选地具有管或圆柱25的形式。

图3a到3f所示为虚拟代表的操作和交互的进一步的变化。图3a所示为桌面，即名为Bob的用户的屏幕表面。在他的桌面上，Bob存储了形式为雪人的代表59。代表59分配给Bob的朋友Alice。Bob与Alice可通过代表59进行通信。

如果Bob现在想与Alice通信，则他简单地将他的鼠标光标41移动到代表59上。一旦光标41在代表59上(所谓“MouseOver”)，围绕代表59的圆形菜单60自动出现(见图3b)。通过在菜单部分上点击，Bob现在可触发各种动作。可选地，可进行菜单显示和选择，使得Bob点击代表59使得菜单出现，在该过程中保持鼠标按钮按下，然后当鼠标按钮按下时，将光标41移动到对应的菜单点上，而且最后通过释放鼠标按钮(所谓“释放”)来选择菜单点。

如果Bob例如现在激活“消息”菜单部分，则他到达如下应用，他可利用该应用来生成对于Alice的文本消息。如果Bob用他的光标41选择“情感”菜单部分(见图3c)，则出现概览表28(见图3d)，其细节在图5a和5b中也可见。

很多图标列在概览表28中。Bob可通过点击、拖和放(drag & drop)将这些图标之一放在Alice的代表59上。这通过图3e中的例子来呈现。Bob将“生气的表情符”拖动代表59上以便让Alice知道他情绪不佳。一旦Bob放下表情符，又一代表61(见图3f)自动出现在Bob的桌面上。代表61代表了Bob而且显示由Bob选择的情感。一旦Bob的代表的动画完成，它再次从Bob的桌面消失。

Bob所选动画还在Alice的桌面上表现它自己，于是那里存储的代表Bob的代表执行Bob所选动画。在Alice一侧不出现Alice的代表。

图4a和4b通过实例示出了两个虚拟代表26和27之间的典型交互。左边的代表26(“小人”combot)已由他的拥有者动画化，通过对动画命令“炸弹”的选择，向通信伙伴的代表27(“汽车”combot)扔炸弹。结果虚拟代表27被炸弹击中并爆炸(见图4b)。代表26后面的用户例如可以选择动作“扔炸弹”以便表达他对于相对通信伙伴的愤怒。

图5a和5b示出了可通过按下按钮16(见图1)来调用的命令表的两个实施例28a和28b。

可借助虚拟代表(combot)来实现的所有动作都呈现在总体格29中的表28a中。每个可用的动画通过对应的方图标呈现在表28a中。图标各自可根据共同组来分配(例如根据“爱慕”、“友谊”等)。总体格29分成两部分30a和30b。每个用户随意可用的基本动画(“基本情感”)如笑、哭等位于第一部分30a中。另一方面每个用户特有的特殊情感(“黄金情感”)位于第二部分30b中。代表的这些特质例如可由用户购买、与其他用户交换或交易获得。

在开始表29(概览表)中还提供了图标不仅直接代表感情或动画还代表整组动画。于是，心图标32代表“爱慕动画”组。通过按下图标32，进一步打开子表31，然后用户可为他的代表从中选择所需的爱慕动画。于是组包括情感的基本呈现的几个变化，如例如此处描述的心呈现。

那些不能分配到组的动画呈现在分开的列33中。

在根据图5b的实施例中示出了情感的另一类分布，其中概览表28b限于六个域。这些域中的每个域代表整类动画。相应的类(例如类34“情绪”)通过按下表28b中的对应域来示出。然后可在该类中选择所需动画。另一类包括例如所有侵犯性情感类型而且在开始表28b中用炸弹来符号化。包含各类情感用于选择的子表通过点击该符号来打开。类中收集的情感不仅在它们的呈现形式上不同而且根本上也不同。这意味着各类情感可分配到类。它们具有共同含义、内容表述或主导情绪。此处描述的侵犯性情感类包括例如炸弹动画、闪电动画或射击动画。

图6所示为用户如何借助于表28来选择和触发所需动画。基本有三个变化A到C，其中开始两个变化是使用“拖放”原理来实现。三个变化通过对应的箭头来指示。

在变化A中，用户将所选图标拖到对应的代表上并将它放在那里。这样操作的代表然后立即执行所需的动画。在根据图6的例子中，雷雨云被选择并拖到外来的代表6上。其结果是雷雨云从用户的实际代表5发送到外来的代表6并使他湿透。

在变化B中，图标被拖到消息区11中并放在那里。这造成所选图标出现在相应通信伙伴的消息区中。通过点击该图标，该通信伙伴然后可触发由对方发送的动画。

在变化C中，图标简单地由用户点击。该图标由此在当前光标位置那儿结合到起草区13中。一旦结合了图标，适当的文本可附加地自动地赋予给用户。如果用户例如由此点击“生日蛋糕”图标，则“生日快乐！”文本也可出现在起草区13中的“生日蛋糕”之上。通过按下发送按钮14，书写的文本消息随结合的图标发送到通信伙伴。

在图6中，也称为“图释”的小脸也可在消息区11中看到。表达特定情绪的这些脸如图所示可插入消息文本中。为此，用户在起草区13中写文本消息时仅需输入他所需的图释的字符串，例如：-)。该字符串然后自动转换成对应的脸，此处为(。当对发送按钮14进行操作时，以图释完成的文本然后发送到所述通信伙伴。

从对于表28中显示的情感的选择而来的每个单独情感也可通过双击立即激活。

自动文本识别和解释(“解析”)呈现在图7中。当用户将文本35输入到他的起草区13中，它的意义则自动地断定。

所断定的项然后呈现给用户，此处是语音泡36的形式。同时，与刚输入的文本的意义很相配的两个动画以图标37的形式提议给用户。在根据图7的例子中，用户已输入了带有生日祝愿的问候文本。因此，“爱慕动画”和“生日蛋糕动画”提议给用户。也做出如下设置：响应于输入文本之意义的该代表的动画是自动的，而无用户选择的可能性。

用于对用户发出的动画命令进行处理的各种备选在图8a到8d中图示。

借助根据图8a的备选，当用户向他的代表发出命令以执行新的动画38b时，该代表的动画38a立即中断和由新的动画38b所取代。在控制命令的该处理期间有直接和无延迟的实施，于是该代表的行为具有快速和动态效果。

不同于图8a，在根据图8b的备选中，动画首先在新的动画38b发生之前完成。禁止了原来提议的随后动画38c。

利用根据图8c的备选，由用户触发的所有动画以线性的连续性来执行。

没有动画的抑制。还根据它们的流年顺序将所请求的动画放置在所谓“播放列表”中并连续执行。

图8d中示出了能够如何处理和再现两个代表之间的重复交互。第一用户使他的代表执行动作38a。然后这由第二用户39a的代表的复制所中断，对于它这部分，这是替代执行的，直至第一用户的代表再次通过动作38b进行反应为止。

在图9中，第一和第二用户的动画部分2a和2b相关于彼此镜反向地呈现。第一和第二用户分别以描述的方式使用他们的动画部分2a和2b以便通过他们的代表彼此交换情感。该交换在网络40(例如因特网)上进行。对于第一用户(“我的PC”)和第二用户(“你的PC”)，用户自己的代表呈现在左边而外来的代表在右边，从而造成镜像视图。当通过代表通信时，两个用户在他们相应的动画部分同时看见相同序列。因此可以说两个用户看到“一切”，即进行之中的过程全体。

对于其他，也设置了虚拟代表可由用户购买、收集和交换。于是一些代表可以只存在于有限版本中或甚至是唯一的，使得不同代表具有不同商业价值。虚拟代表的销售和散播可通过这种手段基本地得以改进。

图10到28所示为如可能在Franz和Manuela之间发生的通信的例子。图10到28各自再现Franz的用户界面1的快照(“屏幕快照”)。图10表示该通信的开始，而图28表示结束。

为了与Manuela开始通信话路，Franz用他的鼠标光标来操作E按钮17(见图10)。动画部分2由此打开，其中呈现Franz和Manuela的虚拟代表5和6(见图11)。Manuela的名签8变灰，这表示Manuela尚未与Franz联系，即Manuela仍“离线”。在图12中Manuela现在“在线”，因为Manuela的名签8像Franz一样地加亮。而且，聚光灯42现在同样对准Manuela的代表。

如图13所示，Franz已向Manuela发送第一文本消息，Manuela也立即对其进行回复(见图14)。当Manuela正在输入她的文本时，手出现在Franz的窗10b中，其指示了Manuela现在正在执行动作。在她的文本输入之后，Manuela用已经描述的画图功能指示了“悲伤的脸”19。使用呈现在窗10b中的铅笔，Franz可看到Manuela现在正在画图(见图15)。

响应于Manuela的轻微嘲弄画图19，Franz输入进一步的文本并将他的鼠标光标41移到呈现“拳击手套”的动画按钮43上(见图16)。通过拖放，Franz将拳击手套43移动到Manuela的代表上(见图17)，于是触发了交互，其中Franz的代表向Manuela的代表打出拳击手套(见图18)。Manuela的代表被这击中并倒下(见图19)。于是对于她这部分，Manuela随即触发交互，其中她的代表将雷雨云放在Franz的代表上方(见图20到22)。为了再次使这恰当，Manuela随后通过她的代表向Franz的代表发送皱起的嘴唇(见图23)。

为了表达他对于皱起嘴唇的好感，Franz这次将他的鼠标光标41移到心44上(见图24)并将这拖到他的代表上(见图25)。于是触发动画，其中Franz的代表发送出小的心(见图26)。

最后，Franz还在他的起草部分13中准备另一文本消息。他用借助画图功能随手画的结束问候45来修饰该消息(见图27)。为了发送文本消息，Franz用他的鼠标光标41点击发送按钮14(见图28)。在派送之后，该消息呈现在Franz的和Manuela的相应消息部分中。

另一用户界面50呈现在图29中。这提供了具有以下区的备选布局：

首先，有包含消息部分的通信区51，而且当前通信通过它实时或接近实时地进行，以及有带有起草部分的准备区53，其中相应用户在通过按下发送按钮将投稿(文本、图形、情感等)发送到其他用户之前可准备他打算的稿件。还提供了带有控制条的滑块52，该滑块将区51和53彼此分开并且提供用于文本输入、用于画图等的控制元素。于是该界面50的结构基本对应于图1中已经呈现的界面。

此处在图29中，现在还提供带有历史的概览区55，其中列出所有以前的通信。列表可以是与流年、主题或用户相关的。也位于底端的是带有菜单条的区55，它包含与图1呈现的菜单条可比较的各种功能按钮。

图29中所示的布局还具有用于在单个(正在进行或已经完成的)通信中导航的另一导航区56。为此，尤其存在带有段51的可移动窗，其包括导航区中的子区，其中该子区然后放大呈现在区51中。因此这是放大或扩大功能。在正在进行的通信期间，段57总是实时对区51进行跟踪。通过该“跟踪”，用户总是具有通信中的概览和取向。通过移动该段57，他可以随时跳到任意点，这些点然后放大显示在区51中，因此如果适当则用户可在该点精确地补充通信。于是使通信的交错补充和在适当之时的修改成为可能。

用户界面50还具有另一分开区，其中两个用户的代表5和6(combot)(此处“Franz”的汽车和“Vroni”的眼睛)呈现在交互中。但是，在这种情况下，不仅仅是非口头通信通过情感来呈现，如前所述(图1-29)。这里，现在也显示在两个用户之间进行的通信的剩余部分，如例如文件(文件传送)或文本(通过电子邮件、SMS等)的传送、即时消息接发或聊天以及电话对话(VoIP，PSTN)等。为此，将适当的符号58动画化和加以呈现，如例如指示了文件传送的从combot 5飞向combot 6的文档。于是用户获得在他们之间进行的各种类型通信的总览。

两个或更多用户可以用刚才描述的通信方法和系统以特别有吸引力、多样和变化的方式来互相通信。特别是通过使用虚拟代表和他们的动画或交互，情绪、感觉和情感能够以特别有效和清楚的方式在用户之间交换。

借助所述发明，特别是通过鼠标点击和拖放的用户友好的操作，能够实现非常方便的非口头通信。所述代表(combot)和发生在它们之间的情感传送的呈现给用户非常灵巧的印象以及因此使相应感情的传送非常清楚和直接，这些甚至可再现手势、身体语言和面部表情。Combot之间的交互，特别是可预定的和自动可控的交互，向有关联的通信伙伴赋予了新颖的通信形式，其中内容通信的实际水平与有趣好玩的水平相结合。根据本发明，用户的个人特质和偏好是通过对用户具体数据的系统支持的记录和评估来纳入考虑之中，并且增加了通信的方便性和接受度。

附图标号列表

1：用户界面

2：动画部分

3：文本和控制部分

4：菜单条

5，6：虚拟代表

7，8：名签

9：动画

10：窗

11：消息部分

12：控制条

13：起草部分

14：发送按钮

15：动画按钮

16：表按钮

17：E按钮

18：画图工具

19：画图

19H：用于历史性情感的符号

20.1a：形式为表情符的情绪显示

20.1b

20.2a：情绪显示条

20.2b

21，22：虚拟代表

21Z：指向进入的情感数目的指示器

23：桌面

24：思考泡

25：圆柱

26，27：虚拟代表

28：动画表

29：总体格

30：部分

31：子表

32：图标

33：列

34：类

35：文本消息

36：语音泡

37：图标

38，39：动画

40：网络

41：鼠标光标

42：聚光灯

43：交互按钮

44：动画按钮

45：画图

50：备选布局中的用户界面

51：带有消息部分的通信区

52：带有控制条的滑块

53：带有起草部分的准备区

54：带有历史的概览区

55：带有菜单条的下部区

56：导航区

57：导航区中的段

58：用于正在进行的通信的动画化显示符号

59：代表

60：圆形菜单

61：代表。

权利要求书

(按照条约第19条的修改)

1.一种通过电信网络(40)在至少两个用户之间远程通信的方法，其中第一用户通过第一终端而第二用户通过第二终端连接到所述电信网络(40)，而且其中虚拟代表(5，6)分配给每个用户，具有以下步骤：

-在所述第一终端上和所述第二终端上呈现所述两个代表(5，6)；

-通过至少一个代表(5，6)的动画以及通过所述代表之间的交互将信息从所述第一用户传送到所述第二用户，而且反之亦然，其中所述动画和/或交互响应于用户的拖放命令来进行，而且其中所述第二用户的所述代表(6)的动画响应于所述第一用户的命令来进行，而且反之亦然。

2.根据权利要求1的方法，其中响应于用户命令来进行的所述动画和/或交互同时、并行和实时地呈现在两个用户的双方终端上。

3.根据权利要求1至2之一的方法，还具有以下步骤中的至少一个：

-响应于用以执行所需动画或交互(38b)的新用户命令，直接中断正在进行的动画或交互(38a)；

-响应于用以执行所需动画或交互(38b)的用户命令，结束由所需动画或交互(38b)跟随的正在进行的动画或交互(38a)；

-响应于用以执行所需动画或交互(38f)的用户命令，将所需动画或交互(38f)放置在要执行的动画或交互(38a-38e)的等待列表中；或者

-中断由所述第一用户触发的第一动画或交互而且以由所述第二用户触发的第二动画或交互来取代所述第一动画或交互，而且反之亦然。

4.根据前述权利要求之一的方法，还具有以下步骤：

-识别用户对他的终端的语音或文本输入(35)；以及

-分析和解释所述语音或文本输入(35)，和/或还具有以下步骤：

-视频识别用户的面部表情；以及

-分析和解释所述用户的面部表情。

5.根据权利要求4的方法，还具有以下步骤：

-提供与所述语音或文本输入(35)的或所述面部表情的意义相协调的数个合适的动画或交互可能性，或还具有以下步骤：

-与所述语音或文本输入(35)的或所述面部表情的意义相协调地执行代表(5，6)的动画和/或所述代表(5，6)之间的交互。

6.根据前述权利要求之一的方法，还具有以下步骤：

-以表式概览(28)呈现所述代表(5，6)的动画和交互可能性，其中特别地是所述表式概览具有固定数目的类，在所述类中收集并且可检索所述动画和交互可能性。

7.根据前述权利要求之一的方法，还具有以下步骤：

-提供画图功能(18)以使得将用户在他的终端上的画图(19)实时传送到在他的终端上的其他用户成为可能，和/或还具有以下步骤：

-在所述两个用户的相应终端上呈现对所述两个代表(5，6)的当前相应情绪进行指示的情绪显示(20)，特别地还具有以下步骤：

-执行代表的动画作为对于情绪显示修改的反应。

8.根据前述权利要求之一的方法，其中所述两个代表(5，6)在所述第一终端处的呈现是所述两个代表(5，6)在所述第二终端处的呈现的镜像或反镜像，和/或其中至少一个代表(5，6)的一个动画和/或所述代表(5，6)之间的交互依赖于可预定的标准，特别是在分配给所述两个用户中至少一个的用户简档中存储的标准来进行。

9.根据前述权利要求之一的方法，其中将待传送的动画和/或交互的选择提供给所述两个用户的至少一个，和/或

其中根据可预定的标准，特别是在分配给所述两个用户中至少一个的用户简档中存储的标准，至少将待传送的动画和/或交互的选择提议给所述用户。

10.根据权利要求8至9之一的方法，其中所述可预定的标准包括有关所述两个用户中至少一个的细节，特别是有关性别、年龄、国籍、母语、语言习惯或模式、居住地、兴趣和/或癖好的细节。

11.根据前述权利要求之一的方法，其中至少一个代表(5，6)的一个动画和/或所述代表(5，6)之间的交互响应于用户的拖放命令来进行，其中所述拖放命令涉及该用户自己的代表(5)或其他用户的代表(6)，而且其中所述动画或交互依赖于所述拖放命令涉及到所述两个代表(5，6)中的哪一用户来进行。

12.根据权利要求4或5之一的方法，其中所述语音或文本输入的识别或所述视频识别根据可预定的标准、特别是在分配给所述两个用户中至少一个的用户简档中存储的标准来进行，其中特别地是所述可预定的标准包括有关所述两个用户的至少一个用户的细节，特别是有关性别、年龄、国籍、母语、语言习惯或模式、居住地、兴趣和/或癖好的细节。

13.根据权利要求7的方法，其中至少一个代表(5，6)的一个动画和/或所述代表(5，6)之间的交互依赖于针对所述两个用户中的至少一个来显示他当前主导情感情绪的所述情绪显示，和/或

其中该情绪显示针对所述两个用户中的至少一个来显示他当前主导的情感情绪，而且其中该情绪显示根据所述传送的情感和/或交互来修改。

14.根据权利要求7和9的方法，其中根据针对两个用户中的至少一个来显示他当前主导的情感情绪的所述情绪显示来提供向所述两个用户的至少一个所提供的要传送的动画和/或交互的选择。

15.根据权利要求9的方法，其中以组合的组和/或类的形式来提供向所述两个用户的至少一个所提供的要传送的动画和/或交互的选择，

其中特别地，至少所述类的组合和/或所述动画和/或交互的选择是自动的而且伪随机地控制。

16.一种执行根据权利要求1至15之一的方法的系统。

Claims (17)

1.一种通过电信网络(40)在至少两个用户之间远程通信的方法，其中第一用户通过第一终端而第二用户通过第二终端连接到所述电信网络(40)，而且其中虚拟代表(5，6)分配给每个用户，具有以下步骤：

-在所述第一终端上和所述第二终端上呈现所述两个代表(5，6)；

-通过至少一个代表(5，6)的动画以及通过所述代表之间的交互将信息从所述第一用户传送到所述第二用户，而且反之亦然。

2.根据权利要求1的方法，其中所述动画和/或交互响应于用户命令特别是响应于用户的拖放命令来进行，而且其中所述第二用户的所述代表(6)的动画特别地响应于所述第一用户的命令来进行，而且反之亦然。

3.根据权利要求2的方法，其中响应于用户命令来进行的所述动画和/或交互同时、并行和实时地呈现在两个用户的双方终端上。

4.根据权利要求2至3中之一的方法，还具有以下步骤之一：

-响应于用以执行所需动画或交互(38b)的新用户命令，直接中断正在进行的动画或交互(38a)；

-响应于用以执行所需动画或交互(38b)的用户命令，结束由所需动画或交互(38b)跟随的正在进行的动画或交互(38a)；

-响应于用以执行所需动画或交互(38f)的用户命令，将所需动画或交互(38f)放置在要执行的动画或交互(38a-38e)的等待列表中；或者

-中断由所述第一用户触发的第一动画或交互而且以由所述第二用户触发的第二动画或交互来取代所述第一动画或交互，而且反之亦然。

5.根据前述权利要求之一的方法，还具有以下步骤：

-识别用户对他的终端的语音或文本输入(35)；以及

-分析和解释所述语音或文本输入(35)，和/或还具有以下步骤：

-视频识别用户的面部表情；以及

-分析和解释所述用户的面部表情。

6.根据权利要求5的方法，还具有以下步骤：

-提供与所述语音或文本输入(35)的或所述面部表情的意义相协调的数个合适的动画或交互可能性，或还具有以下步骤：

-与所述语音或文本输入(35)的或所述面部表情的意义相协调地执行代表(5，6)的动画和/或所述代表(5，6)之间的交互。

7.根据前述权利要求之一的方法，还具有以下步骤：

-以表式概览(28)呈现所述代表(5，6)的动画和交互可能性，其中特别地是所述表式概览具有固定数目的类，在所述类中收集并且可检索所述动画和交互可能性。

8.根据前述权利要求之一的方法，还具有以下步骤：

-提供画图功能(18)以使得将用户在他的终端上的画图(19)实时传送到在他的终端上的其他用户成为可能，和/或还具有以下步骤：

-在所述两个用户的相应终端上呈现对所述两个代表(5，6)的当前相应情绪进行指示的情绪显示(20)，特别地还具有以下步骤：

-执行代表的动画作为对于情绪显示修改的反应。

9.根据前述权利要求之一的方法，其中所述两个代表(5，6)在所述第一终端处的呈现是所述两个代表(5，6)在所述第二终端处的呈现的镜像或反镜像，和/或其中至少一个代表(5，6)和/或所述代表(5，6)之间交互的一个动画依赖于可预定的标准，特别是在分配给所述两个用户中至少一个的用户简档中存储的标准来进行。

10.根据前述权利要求之一的方法，其中将待传送的动画和/或交互的选择提供给所述两个用户的至少一个，和/或

其中根据可预定的标准，特别是在分配给所述两个用户中至少一个的用户简档中存储的标准，至少将待传送的动画和/或交互的选择提议给所述用户。

11.根据权利要求9至10之一的方法，其中所述可预定的标准包括有关所述两个用户中至少一个的细节，特别是有关性别、年龄、国籍、母语、语言习惯或模式、居住地、兴趣和/或癖好的细节。

12.根据前述权利要求之一的方法，其中至少一个代表(5，6)的一个动画和/或所述代表(5，6)之间的交互响应于用户的拖放命令来进行，其中所述拖放命令涉及该用户自己的代表(5)或其他用户的代表(6)，而且其中所述动画或交互依赖于所述拖放命令涉及到所述两个代表(5，6)中的哪一用户来进行。

13.根据权利要求5或6之一的方法，其中所述语音或文本输入的识别或所述视频识别根据可预定的标准，特别是在分配给所述两个用户中至少一个的用户简档中存储的标准来进行，其中特别地是所述可预定的标准包括有关所述两个用户的至少一个用户的细节，特别是有关性别、年龄、国籍、母语、语言习惯或模式、居住地、兴趣和/或癖好的细节。

14.根据权利要求8的方法，其中至少一个代表(5，6)的一个动画和/或所述代表(5，6)之间的交互依赖于所述情绪显示，该情绪显示针对所述两个用户中的至少一个来显示他当前主导的情感情绪，和/或其中

该情绪显示针对所述两个用户中的至少一个来显示他当前主导的情感情绪，而且其中该情绪显示根据所述传送的情感和/或交互来修改。

15.根据权利要求8和10的方法，其中根据针对两个用户中的至少一个来显示他当前主导的情感情绪的所述情绪显示来提供向所述两个用户的至少一个所提供的要传送的动画和/或交互的选择。

16.根据权利要求10的方法，其中以组合的组和/或类的形式来提供向所述两个用户的至少一个所提供的要传送的动画和/或交互的选择，其中特别地，至少所述类的组合和/或所述动画和/或交互的选择是自动的而且伪随机地控制。

17.一种执行根据权利要求1至16之一的方法的系统。

Images