CN107533417A - 在通信会话中呈现消息 - Google Patents

在通信会话中呈现消息 Download PDF

Info

Publication number
CN107533417A
CN107533417A CN201680022014.0A CN201680022014A CN107533417A CN 107533417 A CN107533417 A CN 107533417A CN 201680022014 A CN201680022014 A CN 201680022014A CN 107533417 A CN107533417 A CN 107533417A
Authority
CN
China
Prior art keywords
participant
message
communication session
user
vision
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680022014.0A
Other languages
English (en)
Other versions
CN107533417B (zh
Inventor
D·布伦施
J·T·福尔克纳
M·R·斯威夫特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN107533417A publication Critical patent/CN107533417A/zh
Application granted granted Critical
Publication of CN107533417B publication Critical patent/CN107533417B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H04L51/046—Interoperability with other network applications or services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1083—In-session procedures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72436—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for text messaging, e.g. short messaging services [SMS] or e-mails
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/42382—Text-based messaging services in telephone networks such as PSTN/ISDN, e.g. User-to-User Signalling or Short Message Service for fixed networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/567—Multimedia conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/42—Graphical user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2203/00—Aspects of automatic or semi-automatic exchanges
    • H04M2203/10—Aspects of automatic or semi-automatic exchanges related to the purpose or context of the telephonic communication
    • H04M2203/1016—Telecontrol
    • H04M2203/1025—Telecontrol of avatars

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

描述了用于在通信会话中呈现消息的技术。在至少一些实施例中，消息由通信会话中的参与者发送。所述消息在通信会话的图形用户界面(GUI)中呈现，并且视觉地链接到所述参与者的视觉表示。根据一个或多个实施方式，节制在通信会话的GUI中呈现的消息的数量。

Description

在通信会话中呈现消息
背景技术
现代通信系统具有一系列功能，所述功能包括将各种通信模态与不同的服务进行集成。例如，即时消息、语音/视频通信、数据/应用共享、白板和其它形式的通信可以与订户的存在和可用性信息相组合。这样的系统使得用户能够在通信会话期间交换各种类型的媒体，并且可以与提供不同种类的通信和协作功能的多模通信系统集成。这种集成系统有时被称为统一通信和协作(UC&C)系统。
虽然现代通信系统在通信中提供了增加的灵活性，其也呈现了许多实现挑战。例如，在不同设备处的不同用户之间的通信会话不仅可能包括语音和视频数据的交换，并且还可能包括在参与者之间交换的消息，例如文本、超链接、照片、预先录制的视频等等。使消息能够以使其不被通信会话中的参与者错过的方式来呈现呈现出许多挑战。
发明内容
提供本发明内容以便以简化形式介绍一些构思，这些构思在下面的具体实施方式中进一步描述。本发明内容不旨在标识所要求保护的主题的关键特征或基本特征，也不旨在用于帮助确定所要求保护的主题的范围。
描述了用于在通信会话中呈现消息的技术。在至少一些实施例中，消息由通信会话中的参与者发送。该消息在通信会话的图形用户界面(GUI)中呈现，并且视觉地链接到该参与者的视觉表示。根据一个或多个实施方式，节制在通信会话的GUI中呈现的消息的数量。
附图说明
具体实施方式参照附图进行描述。在附图中，附图标记的最左边的数字标识该附图标记在其中首次出现的附图。在说明书和附图中的不同实例中使用相同的附图标记可以指示相似或相同的项目。
图1是可操作为采用本文讨论的技术的示例性实施方式中的环境的图示。
图2描绘了根据一个或多个实施例，用于在通信会话中显示用户的视觉表示的示例性实现场景。
图3描绘了根据一个或多个实施例，用于显示加入通信会话的用户的视觉表示的示例性实现场景。
图4描绘了根据一个或多个实施例，用于基于通信会话中的用户活动来布置用户视觉的示例性实现场景。
图5描绘了根据一个或多个实施例，用于基于通信会话中的用户活动来布置多用户视觉的示例性实现场景。
图6描绘了根据一个或多个实施例，用于响应于额外的参与者来布置用于通信会话的客户端GUI的示例性实现场景。
图7描绘了根据一个或多个实施例，用于布置用于共享内容的通信会话的客户端GUI的示例性实现场景。
图8描绘了根据一个或多个实施例的客户端GUI的示例性布置。
图9描绘了根据一个或多个实施例的示例性站行(standing row)表。
图10是根据一个或多个实施例，描述用于指定通信会话中的一个或多个参与者的视觉配置的方法中的步骤的流图。
图11是根据一个或多个实施例，描述用于向通信会话中的一个或多个参与者呈现用户视觉的方法中的步骤的流图。
图12是根据一个或多个实施例，描述用于确定通信会话中的一个或多个参与者的视觉配置的方法中的步骤的流图。
图13是根据一个或多个实施例，描述用于查明通信会话中的参与者的活动的方法中的步骤的流图。
图14是根据一个或多个实施例，描述用于查明通信会话中的活跃参与者的活动等级的方法中的步骤的流图。
图15描绘了根据一个或多个实施例，用于在通信会话期间呈现消息的示例性实现场景。
图16描绘了根据一个或多个实施例，用于在通信会话期间呈现多媒体通知的示例性实现场景。
图17描绘了根据一个或多个实施例，用于呈现对多个消息的通知的示例性实现场景。
图18是根据一个或多个实施例，描述用于呈现来自通信会话中的参与者的消息的方法中的步骤的流图。
图19是描述根据一个或多个实施例，用于基于通信会话的消息的门限数量来呈现消息的方法中的步骤的流图。
图20示出了如参考图1所描述的示例性系统和计算设备，其被配置为实现本文所描述的技术的实施例。
具体实施方式
概述
描述了用于在通信会话中呈现消息的技术。在至少一些实施方式中，通信会话是指通信媒体在不同通信端点之间的实时交换。通信会话的示例包括互联网协议语音(VoIP)呼叫、视频呼叫、文本消息传递、文件传送、内容共享和/或其组合。在至少一些实施例中，通信会话表示统一通信和协作(UC&C)会话。
根据各种实施方式，建立通信会话并且向通信会话中的不同参与者呈现通信会话的图形用户界面(GUI)。GUI中包含参与者的视觉表示，例如实时视频馈入、头像等。当通信会话正在进行中时，参与者发送作为通信会话的一部分的消息，所述消息例如基于文本的消息、照片、超链接等等。因此，该消息在GUI内显示，并且视觉地链接到该参与者的视觉表示，以提供该消息是由该参与者发送的视觉提示。例如，该消息在GUI的主要区域内呈现，例如覆盖在参与者的视觉表示的一部分上。
在至少一些实施方式中，将消息视觉地链接到该视觉表示的方式基于参与者在通信中活跃程度。例如，相比于针对消极参与者，可以针对活跃参与者以不同的方式视觉地链接消息。
因此，本文所描述的技术提供视觉上令人愉悦和直观的方式用于向通信会话中的参与者呈现消息，使得参与者不太可能错过所述消息。此外，通过在通信会话的GUI的主要区域中自动呈现所述消息，来减少查看在通信会话期间发送的消息所需的用户交互的数量。
根据一个或多个实施方式，通信会话中的参与者发送多个消息。例如，互相并发发送和/或快速地相继发送所述消息。因此，将消息的接收速率与消息门限进行比较，所述消息门限指定指定时间段内的消息的门限数量。如果消息超过消息门限，则呈现消息指示符，其提供所述消息可用于查看的视觉提示。例如，为了避免将具有许多消息的众多参与者呈现在一起，消息不会自动呈现，而是缓冲以供稍后呈现。参与者可以选择消息指示符以使得显示包括所述消息的消息窗口。因此，本文描述的技术可以节制在特定时间向通信会话中的参与者呈现的消息的数量，以避免用户失落并减少通信会话的GUI的混乱。
在下面的讨论中，首先描述了可操作为采用本文描述的技术的示例性环境。接下来，标题为“视觉配置的示例性实现场景”和“视觉配置的示例性过程”的部分描述了根据一个或多个实施例，用于通信会话的视觉配置的一些示例性实现场景和过程。之后，标题为“用于消息呈现的示例性实现场景”和“用于消息呈现的示例性过程”的部分描述了根据一个或多个实施例，用于通信会话中的消息呈现的一些示例性实现场景和过程。最后，标题为“示例性系统和设备”的部分描述了可操作为采用根据一个或多个实施例在本文讨论的技术的示例性系统和设备。
已经呈现了根据一个或多个实施例对示例性实施方式的概述，现在考虑在其中可以采用示例性实施方式的示例性环境。
示例性环境
图1是可操作为采用本文描述的技术的示例性实施方式中的环境100的图示。通常，环境100包括能够经由各种不同模态进行通信的各种设备、服务和网络。例如，环境100包括连接到网络104的客户端设备102。客户端设备102可以以各种方式来配置，其例如传统计算机(例如，台式个人计算机、膝上型计算机等)、移动台、娱乐设备、智能电话、可穿戴设备、上网本、游戏机、手持设备(例如，平板电脑)、混合现实设备(例如，虚拟现实(VR)耳机)等)等等。出于以下讨论的目的，讨论了单个客户端设备102的属性，但是应当理解，所讨论的属性类似地应用于客户端设备102的不同实例。
网络104代表向客户端设备102提供与各种网络和/或服务(例如互联网)的连接的网络。网络104可以经由各种不同的连接技术向客户端设备102提供连接，所述连接技术例如宽带电缆、数字用户线(DSL)、无线蜂窝、无线数据连接(例如，WiFiTM)、T载波(例如，T1)、以太网等。在至少一些实施方式中，网络104代表不同的互连有线和无线网络。
客户端设备102包括使得能够执行各种活动和任务的各种不同的功能体。例如，客户端设备102包括操作系统106、应用108、通信客户端110和通信模块112。通常，操作系统106代表用于抽象客户端设备102的各种系统组件的功能体，例如硬件、内核级模块和服务等。例如，操作系统106可以将客户端设备102的各种组件抽象到应用108，以启用所述组件和应用108之间的交互。
应用108代表用于经由客户端设备102来执行不同任务的功能体。应用108的示例包括文字处理应用、电子表格应用、网络浏览器、游戏应用等。应用108可以本地安装在客户端设备102上，以便经由本地运行时环境来执行，和/或应用108可以代表门户到远程功能，所述远程功能例如基于云的服务、网络应用等。因此，应用108可以采取各种形式，例如本地执行的代码，门户到远程托管服务等等。
通信客户端110代表经由客户端设备102来启用不同形式的通信的功能体。通信客户端110的示例包括语音通信应用(例如，VoIP客户端)、视频通信应用、消息传递应用、内容共享应用、统一通信协作(UC&C)应用及其组合。例如，通信客户端110使得能够组合不同的通信模态以提供不同的通信场景。
通信模块112代表使得客户端设备102能够在有线和/或无线连接上传输数据的功能体。例如，通信模块112代表用于经由各种不同的有线和/或无线技术和协议在网络104上进行数据通信的硬件和逻辑单元。
客户端设备102还包括显示设备114和相机116。显示设备114通常代表用于客户端设备102的视觉输出的功能体。另外，显示设备114代表用于接收诸如触摸输入、笔输入等各种类型的输入的功能体。
相机116代表捕获和记录诸如静止图像、视频等视觉图像的功能体。相机116包括各种图像捕获组件，例如孔、透镜、反射镜、棱镜、电子图像传感器、视频采集卡等。
在至少一些实施方式中，通信客户端110代表到通信服务118的接口。通常，通信服务118代表执行用于管理不同客户端设备102之间的通信的各种任务的服务。例如，通信服务118可以管理不同客户端设备102的通信客户端110之间的通信会话的发起、稳定(moderation)和终止。
通信服务118保持跨越许多不同网络的存在，并且可以根据各种不同的架构来实现，所述架构例如基于云的服务、分布式服务、基于web的服务等等。通信服务118的示例包括VoIP服务、在线会话服务、UC&C服务等。
除了本文描述的技术之外，通信客户端110还包括客户端图形用户界面(GUI)模块120、布局模块122、面部检测模块124、活动检测模块126和消息传递模块128。客户端GUI模块120代表生成和输出用于通信客户端110的GUI的功能体。布局模块122代表为客户端GUI模块120执行各种视觉布置和布局计算的功能体。例如，如下所描述的，布局模块122接收用于通信会话的各种状态信息，并生成视觉布置数据，所述视觉布置数据指定如何在视觉上布置通信会话的GUI的视觉属性。
面部检测模块124代表检测传入视频中的面部的图像的功能体，所述传入视频例如从相机116捕获的视频和/或从其它设备接收的视频数据。在至少一些实施方式中，面部检测模块124量化在特定视频馈入中检测到的不同的面部图像的数量，并将该信息传输给其它功能体。例如，面部检测模块124将在特定视频馈入中检测到的面部图像的数量传输给布局模块122。布局模块122使用该数字来确定用于显示该特定视频馈入的视觉布局，例如用于显示该视频馈入的屏幕空间的量。
活动检测模块126代表在通信会话期间检测各种类型的活动并且基于它们各自的活动等级对通信会话中的参与者进行分类和/或标记的功能体。例如，在通信会话期间经常说话的参与者使得活动检测模块126在参与者的媒体流中检测到频繁的语音信号，活动检测模块126将该参与者标记为活跃参与者。此外，如果不同的参与者在通信会话期间很少说话，使得活动检测模块126在参与者的媒体流中检测到很少或没有监测到语音信号，则参与者被标记为消极参与者。活动检测模块126保持存储针对通信会话中的不同参与者的活动信息的活动日志130。
例如，活动日志130包括针对不同个体参与者的用户标识符，并且包括指定个体参与者是活跃参与者还是消极参与者的活动标志。此外，活动日志130可以包括活跃参与者的活动分数，所述活动分数将较活跃的参与者与较不活跃的参与者区分开。活动检测模块126将该信息提供给不同的实体和功能体，以告知与通信会话有关的各种决定。
例如，活动检测模块126将通信会话中的不同参与者的活动标签传输给布局模块122，并且布局模块122使用该活动信息来确定通信会话的GUI的视觉布局。例如，并如下所述，相比于消极参与者的视觉表示，更加显着地(例如，更大地)来显示通信会话中的活跃参与者的视觉表示。此外，在通信会话期间可能发生活动等级的变化，从而活动检测模块126针对参与者的活动等级动态地进行评估，并且如果其活动等级改变则可以对其重新标记。
消息传递模块128代表处理通信客户端110的不同消息传递任务的功能体。例如，消息传递模块128从通信会话中的参与者接收传入消息，并且指示布局模块122如何视觉地呈现该消息。通常，消息传递模块128被配置为处理各种不同类型的消息、例如文本消息、媒体消息(例如，照片、视频、音频等)、超链接、文件等。如在下面的讨论中进一步详细描述的，消息传递模块128使得能够在通信会话期间呈现消息，从而相比于典型的消息传递技术，消息对通信会话中的参与者来说是以无缝和较不莽撞的方式可消耗的。
虽然通信客户端110的各个模块被描绘为在客户端设备102上实现，但是应当理解，在一些额外的或可替代的实现中，可以经由基于网络的服务(例如通信服务118)来部分地或全部地实现一个或多个模块的功能。例如，通信服务118可以利用从通信会话的媒体流捕获的数据来做出用于在通信会话中涉及的设备处呈现GUI的布局决定。
环境100还描绘了在客户端设备102的不同实例之间正在进行通信会话132。通信会话132例如代表语音和视频在不同客户端设备102之间的实时交换。作为通信会话132的一部分，客户端GUI 134在显示设备114上显示。通常，客户端GUI 134包括通信会话132的不同属性的视觉表示。例如，客户端GUI 134包括通信会话132中的参与者的视觉表示，所述参与者例如不同客户端设备102的用户。如下面进一步详细描述的，采用本文描述的技术基于各种因素来确定客户端GUI 134的视觉布置，所述各种因素例如通信会话中的参与者的总数量、在特定位置处呈现的参与者的数量、个体参与者的活动等级等等。
已经描述了本文所描述的技术可以在其中操作的示例性环境，以下部分首先讨论用于通信会话参与者的视觉配置的示例性场景和过程，随后讨论根据一个或多个实施方式用于呈现通信会话中的消息的示例性场景和过程。
视觉配置的示例性实现场景
以下部分描述了根据一个或多个实施方式用于通信会话参与者的视觉配置的一些示例性实现场景。所述实现场景可以在以上讨论的环境100和/或任意其它适当的环境中实现。
图2描绘了根据一个或多个实施方式，用于显示通信会话中的用户的视觉表示的示例性实现场景200。场景200包括上文参考环境100所引入的各种实体和组件。
在场景200中，在客户端设备102a、客户端设备102b和客户端设备102c之间正在进行通信会话202。通常，客户端设备102a-102c表示以上引入的客户端设备102的不同实例。通信会话202表示不同通信媒体在客户端设备102a-102c之间的交换，所述通信媒体例如音频、视频、文件、媒体内容和/或其组合。在该特定示例中，通信会话202涉及在网络104上语音数据和视频数据在客户端设备102a-102c之间的实时交换。根据各种实施方式，通信会话202由通信服务118管理。
作为通信会话202的一部分，客户端设备102a的显示设备114显示客户端GUI 134，GUI 134表示通信客户端110的GUI。在客户端GUI 134内显示的是参与该通信会话的参与者(即，用户)的视觉表示。例如，客户端GUI 134包括站行204、坐行(sitting row)206和预览窗口208，每个窗口显示通信会话中参与者的不同视觉表示(“用户视觉”)。
根据各种实施方式，站行204代表客户端GUI 134中的最初利用用户视觉填充的区域。例如，在通信会话202的启动期间，站行204利用加入通信会话202的初始用户的用户视觉来填充。当填充到站行的用户视觉的数量达到门限数量时，后续的用户视觉被填充到坐行206。如下面进一步详细描述的，当通信会话202正在进行时，至少部分地基于通信会话期间的用户活动来确定站行204和坐行206的视觉配置。例如，站行204中呈现的用户视觉大于在坐行206中呈现的用户视觉，并因此，可以为最活跃的用户保留站行204用于用户视觉。例如，站行204代表客户端GUI 134的活动区域。在坐行206中表示在通信会话202期间较不活跃和/或消极的用户。例如，坐行206代表客户端GUI 134的消极区域。
预览窗口208是利用呈现在客户端设备102a处的用户210a的用户视觉来填充的。例如，来自相机116的视频馈入在预览窗口208内呈现，作为对用户210a的通知：来自相机116的视频馈入正被流式传输至参加通信会话202的其它客户端设备。
根据本文所描述的技术，基于在不同客户端设备102处检测到的用户数量来配置客户端GUI 134中呈现的用户视觉。例如，客户端设备102c处的面部检测模块124检查在客户端设备102c处捕获的视频馈入并检测该视频馈入中的用户210c的单个面部图像。通常，面部检测模块124可以采用任意适当的面部识别技术。因此，作为通信会话202的一部分，客户端设备102c的通信客户端110c指示客户端设备102a的通信客户端110a根据单用户场景来呈现来自客户端设备102c的视频馈入。例如，通信客户端110c向通信客户端110a通知：来自客户端设备102c的视频馈入中存在单用户图像。因此，通信客户端110a裁剪来自客户端设备102c的视频馈入，并将该视频馈入呈现为站行204内的单用户视觉212。如所描绘的，单用户视觉212包括用户210c的单个视觉表示。
单用户视觉212例如是通过裁剪从客户端设备102c接收到的较大的视频帧而生成的。例如，作为通信会话202的一部分而从客户端设备102c接收到的视频馈入具有与单用户视觉212的宽高比不同的宽高比。在一个示例性实施方式中，从客户端设备102c接收到的视频馈入具有16∶9的宽高比。然而，响应于查明在客户端设备102c处存在单个用户，客户端设备102a的布局模块122将该视频馈入裁剪至例如1∶1的宽高比以用于在客户端GUI134中显示。
继续场景200，客户端设备102b处的面部检测模块124检查在客户端设备102b处捕获的视频馈入，并检测该视频馈入中的用户210b的多个面部图像(例如，两个面部图像)。因此，作为通信会话202的一部分，客户端设备102b的通信客户端110b指示通信客户端110a根据多用户场景来呈现来自客户端设备102b的视频馈入。例如，通信客户端110b向通信客户端110a通知：来自客户端设备102b的视频馈入中存在多个用户图像。因此，通信客户端110a将来自客户端设备102b的视频馈入呈现为站行204内的多用户视觉214。如所描绘的，多用户视觉214包括多个用户210b的视觉表示。
在至少一些实施方式中，多用户视觉214以其在从客户端设备102b的视频馈入中被接收的宽高比(例如16∶9)来呈现。可替代地，可以裁剪来自客户端设备的视频馈入，以使得在保持用户210b在多用户视觉214内的视觉表示的同时，多用户视觉214能够在站行204中适应。
如场景200中进一步描绘的，坐立行206包括用于通信会话202中的其他参与者的用户视觉216。例如，相比于在站行204中表示的那些用户，用户视觉216表示较晚加入该通信会话202的用户。可替代地或另外地，相比于在站行204中表示的那些用户，用户视觉202表示较不活跃的用户。
根据各种实施方式，可以以各种方式生成用于各种用户视觉的图形。例如，可以经由不同客户端设备102处的相机来捕获实时视频馈入，并且将其作为通信会话202的一部分来流式传输。可替代地，特定用户视觉可以包括诸如头像和/或快照等代表特定用户的静态图像。例如，如果在特定客户端设备102处的视频馈入是不活动的和/或具有差的质量，则将客户端设备的用户的头像呈现为用户视觉。可替代地或另外地，用户可以选择快照控制来手动捕获用作用户视觉的快照。
虽然场景200是参考在客户端设备102a上显示用户视觉来讨论的，但是应当理解，类似的逻辑可以应用于在通信会话中涉及的其它客户端设备(例如，客户端设备102b、102c)上布置和显示用户视觉。
图3描绘了根据一个或多个实施方式，用于显示加入通信会话的用户的视觉表示的示例性实现场景300。场景300包括上文参考环境100引入的各种实体和组件。
在场景300的上部，客户端GUI 134在显示设备114上显示。呈现在客户端GUI 134内的是被呈现用于通信会话的用户视觉302和预览窗口208。通常，场景300的上部表示两个用户已经加入通信会话的场景，即，由用户视觉302表示一个用户，并且在预览窗口208中表示另一个用户。如所描绘的，当仅两个用户连接用于通信会话时，用户视觉302显示为全窗口和/或全屏视觉。此外，预览窗口208呈现为用户视觉302的插图(inset)。虽然用户视觉302是利用单个用户来描绘的，但是类似的逻辑可以应用于在单个位置/设备处的多个用户，从而在用户视觉302内描绘多个用户。
进入场景300的下一部分，另一用户加入该通信会话，并因此减小用户视觉302的大小以容纳所述另一用户的用户视觉304。例如，裁剪针对不同用户的视频馈入，使得用户视觉302、304在客户端GUI 134内具有相同的大小和/或宽高比。另外，注意预览窗口208在客户端GUI 134中的、用户视觉302、304之外的(例如，其下方)区域中呈现。
继续到场景300的下一部分，又一用户加入该通信会话。因此，在尺寸和/或宽高比方面减小用户视觉302、304以容纳该传入用户的用户视觉306。因此，用户视觉302-306呈现为客户端GUI 134的站行204的一部分，并且在客户端GUI 134内呈现坐行206。
进入场景300的较低部分，另外的用户加入该通信会话，并因此将所述另外用户的用户视觉308填充到坐行206。例如，站行204被认为处于最大视觉容量，使得将另外用户的视觉填充到坐行206。如下面进一步讨论的，对站行204和坐行206的重新配置可以基于参与通信会话的用户的活动等级的差异而发生。
因此，场景300示出了在站行204内同等地分配空间直到站行204处于最大视觉容量的同时，将用户视觉填充到客户端GUI 134以最大化用户视觉的大小。此外，一旦站行204处于最大视觉容量，则将额外的用户视觉填充到坐行206。
图4描绘了根据一个或多个实施方式，用于基于通信会话中的用户活动来布置用户视觉的示例性实现场景400。场景400包括上文参照环境100引入的各种实体和组件，并且至少一些实施方式中表示上述场景200、300中的一个或多个场景的扩展和/或变型。
场景400的上部包括客户端GUI 134，客户端GUI 134在显示设备114上显示并且其站行204和坐行206利用参与通信会话的用户的用户视觉来填充。如上所讨论的，可以基于相应用户加入该通信会话的顺序，利用用户视觉来填充站行204和坐行206。可替代地或另外地，可以基于相应用户的活动等级，利用用户视觉来填充站行204和坐行206。例如，活动检测模块126基于在来自不同参与者的相应客户端设备的媒体流中检测到的语音数据来量化通信会话中的参与者的活动等级。通常，可以以各种方式来量化参与者的活动等级，例如基于从该参与者检测到的语音输入的总量、最近何时从该参与者检测到语音数据、多频繁地从该参与者监测到语音数据等等。
除了场景400之外，站行204利用通信会话中最活跃的参与者的用户视觉来填充。例如，活动检测模块126确定通信会话中的参与者的相对活动等级，并且向布局模块122通知该相对活动等级。随后，布局模块122利用该活动信息来确定要将哪些用户视觉填充到站行204，以及要将哪些填充到坐行206。在该特定场景中，将三个最活跃的参与者的用户视觉填充到站行204，所述三个最活跃的参与者的用户视觉包括活跃参与者404的用户视觉402。此外，将剩余参与者的用户视觉填充到坐行206，所述剩余参与者的用户视觉包括较不活跃的参与者408的用户视觉406。
进行到场景400的较低部分，检测关于参与者408的活动改变410。例如，活动检测模块126例如基于从参与者408检测到的语音数据增加而检测到参与者408的活动等级增加。因此，活动检测模块126向布局模块122提供更新的活动信息，所述信息包括对参与者408的活动等级的增加的指示。基于更新的活动信息，布局模块122标识出参与者404是当前在站行204中表示的最不活跃的参与者。因此，布局模块122将参与者408升级至站行204，并且将参与者404降级至坐行206。因此，参与者408的用户视觉412替换了站行204中的用户视觉402，并且在坐行206中呈现用户404的用户视觉414。
除了场景400之外，不断地监视和量化不同参与者的活动等级，使得可以响应于活动等级的改变来实现对站行204和坐行206的改变。例如，响应于通信会话中的参与者的活动等级的进一步改变来实现到站行204的升级和/或到坐行206的降级。
图5描绘了根据一个或多个实施方式，用于基于通信会话中的用户活动来布置多用户视觉的示例性实现场景500。场景400包括上文参考环境100引入的各种实体和组件，并且在至少一些实施方式中表示上述场景200-400中的一个或多个场景的扩展和/或变型。
场景500的上部包括客户端GUI 134，客户端GUI 134在显示设备114上显示并且其站行204和坐行206利用参与通信会话的用户的用户视觉来填充。通常，站行204和坐行206是基于各种参数来填充的，所述各种参数例如参与者加入顺序和/或通信会话的活动等级。
坐行206包括用户视觉502，其表示存在于连接到通信会话的特定客户端设备处的多个参与者504。例如，面部检测模块124检测客户端设备处的参与者504，并且通知布局模块122多个参与者504存在于客户端设备处。因此，布局模块122使用用户视觉502来表示坐行206中的参与者504。
继续到场景500的较低部分，检测关于参与者504的活动改变506。例如，活动检测模块126例如通过在来自参与者504的媒体馈入中检测到语音数据超过语音活动门限，检测到来自参与者506的语音活动的增加。因此，活动检测模块126将更新的活动信息传输给布局模块122，所述布局模块包括对参与者504是通信会话中的活跃参与者的指示。基于更新的活动信息，布局模块122查明要将参与者504升级至站行204。此外，布局模块122确定要使用多用户视觉来表示参与者504。例如，捕获参与者504的视频馈入的客户端设备处的面部检测模块124通知布局模块122：要将视频馈入呈现为多用户视觉。
基于来自活动检测模块126的更新的活动信息，布局模块查明由用户视觉508、512表示的参与者是在站行204中表示的两个最不活跃的参与者。因此，布局模块122将最不活跃的参与者降级至坐行206并且将参与者504升级至站行204。因此，将降级的参与者的用户视觉512、514填充到坐行206。此外，将多用户视觉516填充到站行204以替换用户视觉508、510。多用户视觉516例如包括表示多个用户504的视频馈入。
根据各种实施方式，如果参与者504的用户活动减少和/或如果在坐行206中表示的一个或多个参与者的用户活动增加，则参与者504可以降级至坐行206，使得在坐行206中表示的两个最活跃的参与者升级并在站行204中表示，以替换多用户视觉516。
因此，场景500示出了本文描述的技术可以用于基于在通信会话期间检测到的、关于多个用户的检测到的活动来配置客户端GUI 134。
图6描绘了根据一个或多个实施方式，用于响应于额外的参与者来布置通信会话的客户端GUI的示例性实现场景600。场景600包括上文参考环境100引入的各种实体和组件，并且在至少一些实施方式中，表示上述场景200-500中的一个或多个场景的扩展和/或变型。
场景600的上部包括客户端GUI 134，客户端GUI 134在显示设备114上显示并且其站行204和坐行206利用参与通信会话的用户的用户视觉来填充。通常，站行204和坐行206是基于各种参数来填充的，所述各种参数例如参与者加入顺序和/或通信会话的活动等级。
站行204包括用于通信会话的参与者604的单用户视觉602。例如，当参与者604加入通信会话时，参与者604例如由面部检测模块124检测为单个参与者。因此，指示布局模块122根据单用户场景来针对参与者604呈现视频馈入。
除了场景600之外，参与者606加入参与者604以进行通信会话。例如，参与者606进入参与者604所在并且通信会话正在进行的房间(例如，会议室、办公室等)。因此，面部检测模块124检测到包括参与者604的视频馈入中存在额外的用户，并生成多用户通知608。响应于多用户通知608，布局模块122将包括参与者604、606的视频图像的多用户视觉610填充至站行204。为了为多用户视觉610腾出空间，布局模块122将最不活跃的参与者从站行204降级至坐行206。因此，从站行204移除最不活跃的参与者的用户视觉612，并且将最不活跃的参与者的用户视觉614填充到坐行206。
因此，场景600示出了参与通信会话的特定位置处的用户数量的变化可能导致客户端GUI 134的配置的改变，例如以容纳额外的用户。虽然场景600是关于检测到额外的用户来讨论的，但是应当理解，类似的逻辑可以应用于检测较少的用户。例如，反过来考虑场景600，使得参与者606离开用户604正在参与通信会话的位置。在这种场景中，面部检测模块124检测到该位置处的参与者的数量减少，并且向布局模块122发送通知，所述通知指示该位置处的多个参与者已经改变，例如减少至一个参与者。因此，布局模块122将参与者604的用户表示重新配置为包括用户604的单用户视觉602。此外，将最活跃的参与者从坐行206升级至站行。
图7描绘了根据一个或多个实施方式，用于布置用于共享内容的通信会话的客户端GUI的示例性实现场景700。场景700包括上文参考环境100引入的各种实体和组件，并且在至少一些实施方式中表示上述场景200-600中的一个或多个场景的扩展和/或变型。
场景700的上部包括客户端GUI 134，客户端GUI 134在显示设备114上显示并且其站行204和坐行206利用参与通信会话的用户的用户视觉来填充。通常，站行204和坐行206是基于各种参数来填充的，所述各种参数例如参与者加入顺序和/或通信会话的活动等级。坐行206包括通信会话中的参与者704的单用户视觉702。
对于场景700，参与者704具有要作为通信会话的一部分来共享的内容706。内容706例如表示物理地存在于参与者704的位置处的内容，其例如白板和/或其它物理介质上的内容。可替代地或另外地，内容706表示参与者704希望共享的数字内容，例如参与者704的桌面用户界面上的内容、存储在文件存储位置中的电子内容文件等。
因此，并且进行到场景700的较低部分，参与者704生成共享空间请求708，所述请求708请求客户端GUI 134内的额外的显示空间，以使内容706能够与通信会话中的其他参与者共享。例如，参与者704在其客户端GUI 134的相应实例处选择共享控制710。响应于共享空间请求708，在站行204中向参与者704提供共享帧712。例如，将单用户视觉702扩展至共享帧712。因此，内容706在共享帧712内是可查看的。参与者706可以与内容706交互，并且在共享帧712中这样的交互对通信会话的其他参与者是可查看的。
为了为共享帧712提供空间，将最不活跃的参与者从站行204降级至坐行206。例如，将站行204中的最不活跃的参与者的用户视觉714移除，并且将最不活跃的参与者的用户视觉716填充至坐行206。
根据一个或多个实施方式，当参与者704完成共享内容706时，参与者704可以指示：参与者704完成了共享。例如，参与者704可以再次选择共享控制710。作为响应，移除共享帧712并经由单用户视觉702来表示该参与者。例如，返回到场景700的上部，经由站行204中的单用户视觉702来表示参与者704。此外，将最活跃的参与者从坐行206升级至站行。
因此，场景700示出了可以分配共享空间以使得用户能够在通信会话期间共享内容。此外，分配共享空间包括基于参与通信会话的参与者的用户活动来重新配置客户端GUI134。
图8描绘了在显示设备114上显示的客户端GUI 134的示例性布置，所述客户端GUI134包括站行204和坐行206。在该特定示例中，站行204填充有两个多用户视觉，即多用户视觉802和多用户视觉804。通常，多用户视觉802、804是使用在多用户视觉802、804中表示的参与者所处于的位置处捕获的视频馈入来生成的。例如，在多用户视觉802、804二者中描绘的参与者被确定为通信会话中最活跃的参与者。因此，在客户端GUI 134中视觉地确定包括所述参与者的视频馈入的尺寸，以使得多用户视觉802、804能够一起呈现。此外，坐行206是利用通信会话中的其他参与者的用户视觉来填充的，所述其他参与者例如被确定为相比于在多用户视觉802、804中描绘的那些参与者来说较不活跃的参与者。
图9描绘了根据一个或多个实施方式的示例性站行表900。通常，站行表902指定要在通信会话期间应用的不同用户视觉的配置。站行表904包括要素列902、单用户视觉列904和多用户视觉列906。通常，要素列902标识在通信会话期间的传入媒体流中接收到的不同的可能要素。单用户视觉列904对应于单用户视觉的视觉大小(例如，宽高比)。例如，单用户视觉列904对应于1∶1的宽高比。多用户视觉列对应于多用户视觉的视觉尺寸。例如，多用户视觉列906对应于16∶9的宽高比。
站行表900指定如果在视频流中检测到单个面部，则将使用单用户视觉来呈现站行中的视频流。如果在视频流中检测到多于一个的面部，并且视频流具有宽的宽高比(例如，16∶9)，则将使用多用户视觉呈现站行中的视频流。如果在视频流中检测到多于一个面部，并且视频流具有窄的宽高比(例如，14∶9)，则将使用单用户视觉来呈现站行中的视频流。如果从会议室或其他多用户空间接收到视频流，则以多用户视觉来呈现该视频流。
如果视频流是在移动设备(例如，平板电脑、移动电话等)处以肖像模式生成的，则视频流将以单用户视觉来呈现。如果站行参与者是经由用户特定头像(例如，静态图像而不是实况视频流)来表示的，则通过将所述用户特定头像填充到单用户视觉来表示该站行参与者。如果不存在站行参与者的用户特定头像或视频馈入，则经由占位符单用户视觉来表示该参与者。如果在视频流中检测到单个面部，并且共享模式是活动的(例如，响应于来自参与者的共享请求)，则将使用多用户视觉来呈现站行中的视频流。
因此，站行表900指定用于表示通信会话中的参与者的不同配置的不同逻辑。这些特定要素配置和视觉表示仅是出于示例的目的而呈现的，并且应当理解，可以根据本文所描述的技术来采用各种不同的要素和视觉表示。
在讨论了一些示例性实现场景之后，现在考虑根据一个或多个实施例对一些示例性过程的讨论。
视觉配置示例性过程
以下讨论描述了根据一个或多个实施例，用于通信会话参与者的视觉配置的一些示例性过程。可以在图1的环境100、图20的系统2000和/或任意其它适当的环境中采用该示例性过程。该程序例如表示用于实现上述实现场景的示例性过程。在至少一些实施方式中，针对各种过程描述的步骤是自动实现的，而与用户交互无关。根据各种实施方式，可以本地地(例如，由客户端设备102处的通信客户端110)和/或在基于网络的服务(例如通信服务118)处执行所述过程。
图10是描述根据一个或多个实施方式的方法中的步骤的流图。所述方法描述了根据一个或多个实施方式，用于指定通信会话中的一个或多个参与者的视觉配置的示例性过程。
步骤1000查明在第一设备和第二设备之间建立通信会话。例如，通信客户端110发起与另一个通信客户端110的通信会话，或者加入现有的通信会话。此外，客户端GUI模块120生成用于通信会话的客户端GUI。
步骤1002检测针对在第一设备处存在的、通信会话的一个或多个参与者的参与者计数。例如，参与者计数是经由在第一设备处捕获的视频数据来检测的，所述视频数据例如来自在第一设备处的相机116捕获的视频馈入。在至少一些实施方式中，面部检测模块124通过查明经由对视频数据的面部识别处理检测到的不同面部的数量来确定参与者计数。
步骤1004基于参与者计数来确定要用于视觉地表示一个或多个参与者的视觉配置。面部检测模块124例如将参与者计数传输至布局模块122。基于参与者计数，布局模块122确定视觉配置。例如，如果参与者计数＝1，则将视觉配置确定为用于表示单个参与者的单用户视觉。如果参与者计数＞1，则将视觉配置确定为用于表示多个参与者的多用户视觉。
步骤1006将指令传输至第二设备，所述指令指定用于视觉地表示第二设备处的一个或多个参与者的视觉配置。例如，第一设备处的通信客户端110将该指令传输至第二设备处的通信客户端110。因此，第二设备处的通信客户端110可以利用该指令，至少部分地基于所述指令中指定的视觉配置使得在第二设备处显示一个或多个参与者的视觉表示。
图11是描述根据一个或多个实施方式的方法中的步骤的流图。该方法描述了根据一个或多个实施方式，用于向通信会话中的一个或多个参与者呈现用户视觉的示例性过程。
步骤1100查明建立了涉及多个不同设备处的多个参与者的通信会话。例如，在第一设备处的通信客户端110发起与第二设备处的另一通信客户端110的通信会话，或者加入现有的通信会话。
步骤1102标识用于视觉地表示在所述多个不同设备中的设备处存在的、通信会话中的多个参与者中的一个或多个参与者的指令。例如，第一设备处的通信客户端110从第二设备接收指令。通常，所述指令指定用于视觉地表示一个或多个参与者的视觉配置。所述指令例如指定一个或多个参与者的视觉的相对大小，例如一个或多个参与者是否经由单用户视觉、多用户视觉等来显示。
步骤1104查明通信会话的多个参与者中的至少一些参与者的活动等级。活动检测模块126例如检测通信会话中参与者的活动的相对等级。在至少一些实施方式中，基于在来自不同参与者的客户端设备的媒体流中检测到的语音数据来检测所述活动。一般来说，将参与者分为较活跃的(“活跃”)参与者和较不活跃的(“消极”)参与者。下面详细地描述用于检测和表征活动等级的示例性方法。
步骤1106基于所述指令和活动等级来确定要用于视觉地表示所述一个或多个参与者的视觉配置。例如，第一客户端设备处的布局模块122利用所述指令和检测到的活动等级来确定用于表示在通信会话中涉及的、第二设备处存在的一个或多个参与者的视觉配置。下文详细描述确定通信会话中的参与者的视觉配置的示例性方式。
步骤1108基于所述视觉配置来呈现一个或多个参与者的用户视觉。布局模块122例如将视觉配置信息传输至客户端GUI模块120。通常，视觉配置信息指定要用于表示一个或多个参与者的视觉的大小，以及是要将所述一个或多个参与者视觉地表示为活跃参与者还是消极参与者。客户端GUI模块120利用视觉配置信息将一个或多个参与者的用户视觉填充至客户端GUI 134。贯穿本公开内容详细描述了基于不同的参与者场景来显示用户视觉的示例性方式。
图12是描述根据一个或多个实施方式的方法中的步骤的流图。该方法描述了根据一个或多个实施方式，用于确定通信会话中的一个或多个参与者的视觉配置的示例性过程。该方法例如描述了用于执行上文参照图11描述的过程中的步骤1106的示例性过程。
步骤1200查明是要根据单用户视觉还是多用户视觉来呈现一个或多个参与者的用户视觉。例如，第一设备处的布局模块122基于从第二设备接收到的指令来确定是要根据单用户场景还是多用户场景来在第一设备处呈现针对来自第二设备的视频馈入的用户视觉。
如果要根据单用户视觉(“单”)来呈现用户视觉，则步骤1202确定单用户视觉的参与者是活跃的还是消极的。下面详细说明确定参与者是活跃的还是消极的一种示例性方法。如果参与者是活跃的(“活跃”)，则步骤1204确定要使用活跃的单用户视觉来呈现所述单用户视觉。例如，可以将单用户视觉呈现为客户端GUI 134的活动视觉区域的一部分，例如呈现在站行204中。
如果参与者是消极的(“消极”)，则步骤1206确定要将单用户视觉呈现为消极的单用户视觉。例如，将单用户视觉呈现在客户端GUI 134的消极用户区域中，例如呈现在坐行206中。
返回到步骤1200，如果要根据多用户视觉(“多”)来呈现用户视觉，则步骤1208确定多用户视觉的参与者是活跃的还是消极的。如果参与者是活跃的(“活跃”)，则步骤1210确定要使用活跃的多用户视觉来呈现所述多用户视觉。例如，将所述多用户视觉呈现为客户端GUI 134的活动视觉区域的一部分，例如呈现在站行204中。
如果参与者是消极的(“消极”)，则步骤1212确定要将多用户视觉呈现为消极的多用户视觉。例如，将多用户视觉呈现在客户端GUI 134的消极用户区域中，例如呈现在坐行206中。
图13是描述根据一个或多个实施方式的方法中的步骤的流图。所述方法描述了根据一个或多个实施方式，用于查明通信会话中的参与者的活动的示例性过程。例如，所述方法描述了用于执行上文参照图11描述的过程中的步骤1104的示例性过程。
步骤1300查明在来自通信会话中的参与者的媒体流中是否检测到语音信号。通常，媒体流是通信会话的一部分，例如其作为包括在客户端设备处捕获的视频数据和音频数据的媒体流的一部分。例如，通信会话中涉及的客户端设备的活动检测模块126查明在从通信会话中涉及的另一个客户端设备接收到的媒体流中是否检测到语音信号。
如果在所述媒体流中没有检测到语音信号(“否”)，则步骤1302将参与者标记为消极的参与者。活动检测模块126例如更新活动日志130以指示参与者是消极的参与者。
如果在媒体流中检测到语音信号(“是”)，则步骤1304查明所述语音信号是否满足门限信号强度。例如，活动检测模块126将所述语音信号与门限信号强度进行比较。可以以例如门限音量电平、门限最小信号强度值等各种方式来指定门限信号强度。
如果语音信号不满足所述门限信号强度(“否”)，则过程返回到步骤1302，并且将参与者被标记为消极参与者。
如果语音信号满足门限信号强度(“是”)，则步骤1306查明语音信号是否满足门限持续时间。可以以例如毫秒、秒等各种方式来指定门限持续时间。如果语音信号不满足门限持续时间(“否”)，则该过程返回到步骤1306，并将参与者标记为消极参与者。
如果语音信号满足门限持续时间(“是”)，则步骤1310将参与者标记为活跃参与者。活动检测模块126例如更新活动日志130以将参与者分类为活跃参与者。
可以在通信会话期间连续地和/或定期地执行该过程以查明参与者是活跃的还是消极的。例如，如果将参与者标记为消极参与者，则针对语音数据连续地监视来自参与者的媒体流。因此，如果参与者随后在通信会话期间开始说话，使得检测到符合指定门限的语音数据，则可以将参与者重新标记为活跃参与者。此外，如果活跃参与者在通信会话期间停止说话，则可以将该活跃参与者标记为最不活跃的参与者和/或被重新标记为消极参与者。
图14是描述根据一个或多个实施方式的方法中的步骤的流图。该方法描述了根据一个或多个实施方式，用于查明通信会话中的活跃参与者的活动等级的示例性过程。
步骤1400确定从活跃参与者接收的语音信号的持续时间。所述持续时间例如可以是基于单个语音事件来确定的，其例如从活跃参与者接收到的单个不间断语音信号流的持续时间。可替代地或另外地，所述持续时间可以是基于在指定时间段内来自参与者的多个不同离散语音事件来确定的。
步骤1402确定自从活跃参与者检测到最后的语音信号之后经过的时间。所述最后的语音信号例如对应于来自活跃参与者的满足门限信号强度和/或门限持续时间的语音信号。可以以例如毫秒、秒、分钟等各种方式来指定经过的时间。
步骤1404基于语音信号的持续时间和所述经过的时间来生成针对活跃用户的活动分数。例如，当将参与者标记为如上所述的活跃参与者时，给予所述参与者默认的活动分数。随后，可以基于参与者是较活跃还是较不活跃来调整所述参与者的活动分数。例如，响应于检测到来自参与者的语音信号的较长持续时间和/或响应于自从来自参与者的最近语音信号之后的较短的经过时间，活动分数增加。相反，响应于检测到来自参与者的语音信号的较短持续时间和/或响应于自从来自参与者的最近语音信号之后的较长的经过时间，活动分数减少。因此，相比于向所述通信会话贡献较短持续时间的语音输入和较不频繁的语音输入的参与者，向通信会话贡献较长持续时间的语音输入和较频繁的语音输入的参与者具有较高的活动分数。在至少一些实施方式中，与不同的活跃参与者相比具有较低的活动分数的活跃参与者被认为是与所述不同的活跃参与者相比来说较不活跃的参与者。
步骤1406确定所述活动分数是否低于门限活动分数。如果活动分数低于门限活动分数(“是”)，则步骤1408将参与者标记为消极参与者。活动检测模块126例如更新活动日志130以指示参与者是消极参与者。在至少一些实施方式中，将参与者标记为消极参与者导致将所述参与者的视觉表示从客户端GUI 134的活跃区域(例如，站行204)转移(例如，降级)到客户端GUI 134的消极区域(例如坐行206)。
如果活动分数不低于门限活动分数(“否”)，则过程返回到步骤1400。例如，可以连续地和/或定期地调整活跃参与者的活动分数以考虑参与者的活动的改变。因此，可以采用本文描述的技术来动态地评估通信会话期间的活动等级，以查明参与者是活跃的还是消极的，例如上文参照图13所描述的。此外，可以动态地评估活跃参与者以标识较活跃和较不活跃的参与者，并且如果参与者的活动等级低于门限，则将活跃参与者重新标志为消极参与者。
已经讨论了用于通信会话参与者的视觉配置的一些示例性实现场景和过程，现在考虑根据一个或多个实施方式，对用于在通信会话中呈现消息的一些示例性实现场景和过程的讨论。
用于消息呈现的示例性实现场景
以下部分描述了根据一个或多个实施方式，用于在通信会话中呈现消息的一些示例性实现场景。可以在上文讨论的环境100和/或任意其它适当的环境中实现所述实现场景。
图15描绘了根据一个或多个实施方式，用于在通信会话期间呈现消息的示例性实现场景1500。场景1500包括上文参考环境100引入的各种实体和组件，并且在至少一些实施方式中表示上述场景中的一个或多个场景的扩展和/或变型。
场景1500包括客户端GUI 134，客户端GUI 134在显示设备114上显示并且其站行204和坐行206利用参与通信会话的用户的用户视觉来填充。除了场景1500之外，通信会话中的参与者发送消息作为通信会话的一部分。因此，将消息1502重叠在站行204的用户视觉1504上显示。消息1502是经由来自由用户视觉1504表示的参与者的输入来生成的。如所示，消息1502包括消息内容(在该示例中为文本)并标识由发送该消息的用户视觉1504所表示的参与者，即“Frank M”。因此，利用发送消息1502的参与者来视觉地标识该消息，并将其与该参与者的用户视觉一起呈现。
进一步描绘的是由坐行206中的用户视觉1508表示的参与者发送的消息1506。例如，消息1506是由用户视觉1508所表示的消极参与者发送的。消息1506包括消息内容(在该示例中为文本)，并标识发送该消息的用户，即“Sade O”。如所示，例如经由视觉指针1510将消息1506视觉地与用户视觉1508关联，所述视觉指针1510将消息1506视觉地链接到用户视觉1508。
根据各种实施方式，当通信会话正在进行时，随着消息1502、1506由相应的参与者生成，实时地呈现消息1502、1506。因此，本文中描述的用于在通信会话中呈现消息的技术使得能够在通信会话期间以能够容易地查看消息并将其归因于发送用户的方式来呈现消息。此外，在不需要参与者在通信会话期间将其焦点从用户视觉移开并且不需要通信会话中的参与者导航到单独的窗口来查看该消息的情况下呈现消息。
在至少一些实施方式中，消息1502、1506是可选择的，以查看额外的消息，所述额外的消息例如发送参与者的消息历史和/或包括在通信会话期间发送的消息的时间顺序列表的消息窗口。
图16描绘了根据一个或多个实施方式，用于在通信会话期间呈现多媒体通知的示例性实现场景1600。场景1600包括上文参考环境100引入的各种实体和组件，并且在至少一些实施方式中表示上述场景中的一个或多个场景的扩展和/或变型。
场景1600包括客户端GUI 134，客户端GUI 134在显示设备114上显示并且其站行204和坐行206利用参与通信会话的用户的用户视觉来填充。除了场景1600之外，通信会话中的参与者发送消息作为通信会话的一部分。例如，由用户视觉1602表示的参与者“FrankM”发送消息1604，在这种情况下，所述消息1604包括图像。根据各种实施方式，消息1604是可选择的，以查看该图像的较大版本和/或取回该图像的副本。
另外，对场景1600，由视觉1606表示参与者“Devi B”发送包括超链接的消息1608。所述超链接例如是可选择的以导航到与该超链接相关联的网络资源，例如网站。
因此，场景1600示出了用于在通信会话中呈现消息的技术可以用于呈现具有各种各样的不同类型的内容的消息，并且所述消息是交互式的，以使得能够响应于与所述消息的用户交互来执行各种动作。
图17描绘了根据一个或多个实施方式，用于呈现对多个消息的通知的示例性实现场景1700。场景1700包括上文参考环境100引入的各种实体和组件，并且在至少一些实施方式中表示上述场景中的一个或多个场景的扩展和/或变型。
场景1700的上部包括客户端GUI 134，客户端GUI 134在显示设备114上显示并且其站行204和坐行206利用参与通信会话的用户的用户视觉来填充。另外，对场景1700，通信会话中的参与者发送消息作为通信会话的一部分。然而，消息传递模块128检测到在短时间段内发送了许多消息。例如，消息传递模块检测到在特定的预先指定的显示时段内超过了门限数量的消息。因此，取代如场景1500、1600中所描绘那样分别视觉地呈现每个消息，消息传递模块128呈现消息通知1702，其提供关于已经发送的多个消息可用于查看的视觉指示。
在场景1700的上部中还描绘的是突出显示的用户视觉1704、1706。用户视觉1704、1706被突出显示以指示：由突出显示的视觉表示的参与者正在发送由消息通知1702表示的消息。因此，查看客户端GUI 134的参与者可以确定多个消息可用于查看，以及由用户视觉1704、1706表示的参与者正在发送所述消息中的至少一些消息。
进入场景1700的较低部分，用户选择消息通知1702，这使得呈现消息窗口1708。通常，消息窗口1708填充有被发送以使得呈现消息通知1702的多个消息。因此，通信会话中的参与者可以经由消息窗口1708来查看消息，并且可以将消息输入到消息窗口1708。尽管消息窗口1708被描绘为包括基于文本的消息，但应当理解，可以将具有诸如图像、视频、音频、内容文件等各种各样的其它类型的媒体填充到消息窗口1708。
因此，场景1700示出了可以采用用于在通信会话中呈现消息的技术来节制(例如，限制)在通信会话期间与用户视觉一起呈现的消息的数量，从而防止客户端GUI 134在活跃的消息传递场景期间在视觉上不堪重负。
用于消息呈现的示例性过程
以下讨论描述了根据一个或多个实施例，在通信会话中呈现消息的一些示例性过程。可以在图1的环境100、图20的系统2000和/或任意其它适当的环境中采用所述示例性过程。所述过程例如代表了用于实现上述实现场景的示例性过程。在至少一些实施方式中，针对各种过程描述的步骤是自动实现的，而与用户交互无关。根据各种实施方式，可以本地地(例如，由客户端设备102处的通信客户端110)和/或在基于网络的服务(例如通信服务118)处执行所述过程。
图18是描述根据一个或多个实施方式的方法中的步骤的流图。该方法描述了根据一个或多个实施方式，用于呈现来自通信会话中的参与者的消息的示例性过程。
步骤1800检测到通信会话中的参与者发送消息。消息传递模块128例如检测到通信会话中的参与者经由到客户端设备102的输入生成消息。所述消息包括一种或多种类型的媒体，例如文本、图像、超链接等。
步骤1802标识通信会话的图形用户界面(GUI)内的参与者的视觉表示。布局模块122例如查明在其中显示参与者的用户视觉的、GUI的区域。通常，GUI包括针对通信会话中的不同参与者的视觉表示，并且布局模块122被配置为区分不同的视觉表示。
步骤1804查明用于将消息视觉地链接到用户的视觉表示的链接配置。通常，链接配置表示指定参与者的视觉表示与要呈现的消息之间的视觉关系的呈现逻辑。在至少一些实施方式中，链接配置基于用户是通信会话中的活跃参与者还是消极参与者。上文讨论了查明参与者是活跃参与者还是消极参与者的示例性方式。
步骤1806通过在所述GUI内并根据所述链接配置将消息视觉地链接到参与者的视觉表示来在所述GUI内呈现所述消息的至少一部分。通常，视觉链接将所述消息视觉地关联至所述视觉表示，并提供所述消息是由所述视觉表示所表示的用户发送的视觉指示。在上述示例性实现场景中描绘了不同的视觉链接技术的示例，例如将消息叠加在所述视频表示上、紧邻所述视觉表示来呈现所述消息等。
在至少一些实施方式中，基于参与者是活跃参与者还是消极参与者来将消息视觉地链接到所述视觉表示。例如，活跃参与者具有与消极参与者不同的链接配置。因此，可以以取决于不同参与者类型的不同方式来呈现消息。
图19是描述根据一个或多个实施方式的方法中的步骤的流图。所述方法描述了根据一个或多个实施方式，用于基于通信会话的消息的门限数量来呈现消息的示例性过程。
步骤1900检测到通信会话中的一个或多个参与者发送作为通信会话的一部分的消息。消息传递模块128例如在通信会话中检测由一个或多个参与者发送的消息的数量。
步骤1902查明所述消息是否超过在指定时间段内发送的消息的门限数量。消息传递模块128例如跟踪在通信会话期间发送消息的速率，所述速率例如在通信会话期间每秒的消息。例如，如果若干用户同时和/或相继地发送消息，则消息传递模块128检测到高消息速率。因此，消息门限可以表示消息速率。
在至少一些实施方式中，消息门限基于通信会话的GUI的大小(例如，区域、长度、宽度等)。大的GUI可能例如具有比小GUI要高的消息门限。例如，大的GUI能够显示比小的GUI要多的消息，因此比小显示器具有更高的消息门限。因此，消息传递模块128通过查明通信会话的GUI的大小来确定消息门限，并且基于该大小来调整消息门限。
如果所述消息不超过消息的门限数量(“否”)，则步骤1904呈现视觉地链接到一个或多个参与者的一个或多个视觉表示的消息，所述参与者是在通信会话中发送所述消息的参与者。例如，将消息呈现为视觉地链接到通信会话的GUI中的一个或多个参与者的实况视频馈入和/或头像。上面详细描述了用于将消息视觉地链接到参与者的视觉表示的示例性方式。
如果所述消息超过消息的门限数量(“是”)，则步骤1906呈现所述消息的视觉指示符。所述消息例如不会自动地显示在通信会话的GUI中。视觉指示符通常表示提供消息是可用于查看的视觉提示的图标或其它图形，但不包括消息本身。在至少一些实施方式中，将发送所述消息的参与者的用户视觉突出显示，以指示所述消息所源自的参与者。
步骤1908接收对视觉指示符的用户选择。例如，消息传递模块128查明用户提供输入以选择视觉指示符。
步骤1910呈现包括所述消息中的至少一些消息的消息窗口。所述消息窗口是响应于对视觉指示符的用户选择而呈现的，并且其包括用于所述消息中的至少一些消息的媒体。此外，参与者可以与消息窗口交互以生成进一步的消息。
因此，在至少一些实施方式中，当消息超过消息门限时，存储所述消息以供稍后呈现，并且除非用户选择视觉指示符，否则不呈现所述消息。例如，所述消息不是独立于用于请求呈现所述消息的用户输入来呈现的。
因此，本文描述的技术使得能够以直观的方式来呈现在通信会话期间发送的消息，使得在不模糊通信会话的其它视觉方面的情况下所述消息是容易地可查看的。
已经讨论了一些示例过程，现在考虑根据一个或多个实施例对示例性系统和设备的讨论。
示例性系统和设备
图20示出了整体在2000处的示例性系统，其包括代表可以实现本文描述的各种技术的一个或多个计算系统和/或设备的示例性计算设备2002。例如，上文参考图1讨论的客户端设备102和/或通信服务118可以具体体现为计算设备2002。计算设备2002可以是例如服务提供商的服务器、与客户端相关联的设备(例如，客户端设备)、片上系统和/或任意其它适当的计算设备或计算系统。
如所示的示例性计算设备2002包括处理系统2004、一个或多个计算机可读介质2006、以及通信地互相耦合的一个或多个输入/输出(I/O)接口2008。虽然未示出，但是计算设备2002还可以包括系统总线或者将各种组件互相耦合的其它数据和命令传递系统。系统总线可以包括不同的总线结构中的任意一种或其组合，所述不同的总线结构例如存储器总线或存储器控制器、外围总线、通用串行总线、和/或使用各种总线架构中的任意一种的处理器或本地总线。还考虑各种其它示例，例如控制和数据线。
处理系统2004代表使用硬件来执行一个或多个操作的功能体。因此，处理系统2004被示出为包括可被配置为处理器、功能块等的硬件元件2010。这可以包括在硬件中实现为使用一个或多个半导体形成的专用集成电路或其它逻辑器件。硬件元件2010不受形成其的材料或其中所采用的处理机构的限制。例如，处理器可以由半导体和/或晶体管(例如，电子集成电路(IC))组成)。在这种上下文中，处理器可执行的指令可以是电子可执行的指令。
计算机可读介质2006被示出为包括存储器/存储装置2012。存储器/存储装置2012代表与一个或多个计算机可读介质相关联的存储器/存储装置容量。存储器/存储装置2012可以包括易失性介质(例如随机存取存储器(RAM))和/或非易失性介质(例如只读存储器(ROM)、闪速存储器、光盘、磁盘等)。存储器/存储装置2012可以包括固定介质(例如，RAM、ROM、固定硬盘驱动器等等)以及可移动介质(例如，闪存、可移动硬盘驱动器、光盘等)。可以以下面进一步描述的各种其它方式来配置计算机可读介质2006。
输入/输出接口2008代表允许用户将命令和信息输入到计算设备2002并且还允许使用各种输入/输出设备向用户和/或其它组件或设备呈现信息的功能体。输入设备的示例包括键盘、光标控制设备(例如，鼠标)、麦克风(例如，用于语音识别和/或口头输入)、扫描仪、触摸功能单元(例如，被配置为检测物理触摸的电容或其它传感器)、相机(例如，其可以采用例如红外频率等可见或不可见的波长来检测运动，所述运动不涉及作为手势的触摸)等。输出设备的示例包括显示设备(例如，监视器或投影仪)、扬声器、打印机、网卡、触觉响应设备等。因此，可以以下面进一步描述的各种方式来配置计算设备2002，以支持用户交互。
本文可以在软件、硬件元件或程序模块的一般上下文中描述各种技术。通常，这些模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、要素、组件、数据结构等。如本文所用的术语“模块”、“功能体”、“实体”和“组件”通常表示软件、固件、硬件或其组合。本文描述的技术的特征是平台无关的，这意味着这些技术可以在具有各种处理器的各种商业计算平台上实现。
对所描述的模块和技术的实现可以存储在某种形式的计算机可读介质上或者跨越其进行传输。所述计算机可读介质可以包括可以由计算设备2002访问的各种介质。作为示例而非限制，计算机可读介质可以包括“计算机可读存储介质”和“计算机可读信号介质“。
相比于仅信号传输、载波或信号本身，“计算机可读存储介质”可以指的是能够持续存储信息的介质和/或设备。计算机可读存储介质本身不包括信号。计算机可读存储介质包括例如易失性和非易失性、可移动和不可移动介质和/或以适用于存储信息的方法或技术实现的存储设备等硬件，所述信息例如计算机可读指令、数据结构、程序模块、逻辑元件/电路或其它数据等。计算机可读存储介质的示例可以包括但不限于RAM、ROM、EEPROM、闪速存储器或其它存储技术、CD-ROM、数字多功能光盘(DVD)或其它光学存储器、硬盘、磁带盒、磁带、磁盘存储器或其它磁存储设备、或其它存储设备、有形介质或适于存储所需信息并能够由计算机访问的制品。
“计算机可读信号介质”可以指的是被配置为例如经由网络向计算设备2002的硬件发送指令的信号承载介质。信号介质通常可以具体体现计算机可读指令、数据结构、程序模块或调制数据信号中的其它数据，例如载波、数据信号或其它传输机制。信号介质还包括任意信息传递介质。术语“调制的数据信号”意味着以在信号中来编码信息的方式设置或改变其特征中的一个或多个的信号。作为举例而非限制的方式，通信介质包括有线介质和无线介质，所述有线介质例如有线网络或直接有线连接，所述无线介质例如声、射频(RF)、红外和其它无线介质。
如前所述，硬件元件2010和计算机可读介质2006代表以硬件形式实现的指令、模块、可编程设备逻辑单元和/或固定设备逻辑单元，其可以在一些实施例中用于实现本文所描述的技术的至少一些方面。硬件元件可以包括集成电路或片上系统的组件、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、复杂可编程逻辑器件(CPLD)以及以硅实现的其它实现或其它硬件设备。在这种上下文中，硬件元件可以操作作为执行由指令、模块定义的程序任务的处理设备、和/或由所述硬件元件具体实现的逻辑单元以及用于存储用于执行的指令(例如，先前描述的计算机可读存储介质)的硬件设备。
前述的组合也可以用于实现本文描述的各种技术和模块。因此，可以将软件、硬件或程序模块和其它程序模块实现为在某种形式的计算机可读存储介质上体现和/或由一个或多个硬件元件2010体现的一个或多个指令和/或逻辑单元。计算设备2002可以被配置为实现与软件和/或硬件模块相对应的特定指令和/或功能。因此，可以例如通过使用处理系统的计算机可读存储介质和/或硬件元件2010，至少部分地以硬件来实现可由计算设备2002作为软件执行的模块。所述指令和/或功能可以是由一个或多个制品(例如，一个或多个计算设备2002和/或处理系统2004)可执行/操作的以实现本文描述的技术、模块和示例。
如图20进一步所示，当在个人计算机(PC)、电视设备和/或移动设备上运行应用时，示例性系统2000能够针对无缝的用户体验而启用普遍存在的环境。服务和应用在所有三种环境中运行基本相似，以便在使用应用、播放视频游戏、观看视频等情况下从一个设备转换到下一个设备时具有共同的用户体验。
在示例性系统2000中，多个设备通过中央计算设备互连。中央计算设备可以是多个设备本地的，或者可以远离所述多个设备来定位。在一个实施例中，中央计算设备可以是通过网络、互联网或其它数据通信链路连接到多个设备的一个或多个服务器计算机的云。
在一个实施例中，这种互连架构使得能够跨多个设备来递送功能，以向多个设备的用户提供公同的和无缝的体验。所述多个设备中的每一个可能具有不同的物理需求和能力，并且中央计算设备使用平台来使得能够向设备传递针对该设备定制并且对所有设备而言是共同的体验。在一个实施例中，创建目标设备的“类”，并且针对设备的通用类定制体验。一类设备可以由该设备的物理特征、使用类型或其它共同特性来定义。
在各种实施方式中，计算设备2002可以采取各种不同的配置，例如用于计算机2014、移动电话2016和电视2018用途。这些配置中的每一个配置包括可以具有基本不同的构造和能力的设备，因此可以根据不同设备类别中的一个或多个来配置计算设备2002。例如，计算设备2002可以被实现为包括个人计算机、台式计算机、多屏幕计算机、膝上型计算机、上网本等的计算机2014类设备。
计算设备2002还可以实现为包括移动设备的移动2016类设备，其例如移动电话、便携式音乐播放器、便携式游戏设备、平板计算机、可穿戴设备、多屏幕计算机等。计算设备2002还可以实现为电视2018类设备，其包括在休闲观看环境中的具有或连接到一般较大屏幕的设备。这些设备包括电视机、机顶盒、游戏机等。
本文描述的技术可以由计算设备2002的这些各种配置来支持，并且不限于本文所描述的技术的具体示例。例如，参考通信客户端110和/或通信服务118讨论的功能可以全部或部分地通过使用分布式系统来实现，例如经由以下描述的平台2022在“云”2020上实现。
云2020包括和/或代表资源2024的平台2022。平台2022抽象(abstract)云2020的硬件(例如，服务器)和软件资源的底层功能。资源2024可以包括在远离计算设备2002的服务器上执行计算机处理时可以使用的应用和/或数据。资源2024还可以包括在互联网上和/或通过订户网络(例如蜂窝或Wi-Fi网络)提供的服务。
平台2022可以抽象资源和功能，以将计算设备2002与其它计算设备连接。平台2022还可以用于抽象对资源的缩放，以向经由平台2022实现的资源2024遇到的需求提供相应等级的缩放。因此，在互连设备实施例中，本文所描述的功能的实现可以分布在整个系统2000中。例如，功能可以部分地在计算设备2002上实现以及经由抽象云2020的功能的平台2022来实现。
本文讨论的是可以被实现以执行本文讨论的技术的数种方法。可以以硬件、固件或软件或其组合来实现所述方法的各方面。这些方法被示出为指定由一个或多个设备执行的操作的步骤集，并且不必限于被显示用于由相应的块执行所述操作的顺序。此外，根据一个或多个实施方式，可以将关于特定方法的操作与不同方法的操作进行组合和/或互换。可以经由参照环境100讨论的各个实体之间的交互来实现所述方法的各方面。
本文讨论的实施方式包括：
示例1：一种用于在通信会话中视觉地呈现消息的系统，所述系统包括：至少一个处理器；以及一个或多个计算机可读存储介质，其包括存储在其上的指令，所述指令响应于由所述至少一个处理器执行，使得所述系统执行包括以下各项的操作：检测到通信会话中的参与者发送消息；在所述通信会话的图形用户界面(GUI)内标识所述参与者的视觉表示；基于所述用户是所述通信会话中的活跃参与者还是消极参与者，来查明用于将所述消息视觉地链接到所述用户的所述视觉表示的链接配置；以及通过在所述GUI内并且根据所述链接配置将所述消息视觉地链接到所述参与者的所述视觉表示，在所述GUI内呈现所述消息的至少一部分。
示例2：如示例1所述的系统，其中，所述图形表示包括视频馈入，所述视频馈入包括所述用户的实况图像。
示例3：如示例1或2中的一个或多个所述的系统，其中，所述标识包括标识显示器中的在其中显示所述视觉表示的区域。
示例4：如示例1-3中的一个或多个所述的系统，其中，所述查明包括基于所述参与者在所述通信会话中被标记为活跃参与者来查明活跃参与者链接配置。
示例5：如示例1-4中的一个或多个所述的系统，其中，所述查明包括基于所述参与者在所述通信会话中被标记为消极参与者来查明消极参与者链接配置。
示例6：如示例1-5中的一个或多个所述的系统，其中，活跃参与者的链接配置不同于消极参与者的链接配置。
示例7：如示例1-6中的一个或多个所述的系统，其中，所述查明包括基于所述参与者在所述通信会话中被标记为活跃参与者来查明活跃参与者链接配置，并且其中，所述呈现包括根据所述活跃参与者链接配置，将所述消息的所述至少一部分呈现为所述参与者的所述视觉表示的至少一部分上的覆盖物。
示例8：如示例1-7中的一个或多个所述的系统，其中，所述查明包括基于所述参与者在所述通信会话中被标记为消极参与者来查明消极参与者链接配置，并且其中，所述呈现包括根据所述消极参与者链接配置，相邻于所述参与者的所述视觉表示来呈现所述消息的所述至少一部分。
示例9：如示例1-8中的一个或多个所述的系统，其中，所述GUI包括活跃参与者区域和消极参与者区域，并且其中，所述呈现包括取决于所述参与者是活跃参与者还是消极参与者，在所述活跃参与者区域或所述消极参与者区域中呈现所述图像的所述至少一部分。
示例10：如示例1-9中的一个或多个示例所述的系统，其中，所述操作还包括：从所述通信会话中的参与者接收进一步的消息；查明所述进一步的消息超过消息门限，所述消息门限指定在指定时间段内的消息的门限数量；以及在所述GUI内呈现所述进一步的消息可用于查看的视觉通知。
示例11：一种用于在通信会话中视觉地呈现消息的计算机实现的方法，所述方法包括：检测到通信会话中的参与者发送消息；由计算系统在所述通信会话的图形用户界面(GUI)内标识所述参与者的视觉表示；基于所述用户是所述通信会话中的活跃参与者还是消极参与者，来查明用于将所述消息视觉地链接到所述用户的所述视觉表示的链接配置；以及通过在所述GUI内并且根据所述链接配置将所述消息视觉地链接到所述参与者的所述视觉表示，由所述计算系统在所述GUI内呈现所述消息的至少一部分。
示例12：如示例11所述的方法，其中，所述参与者的所述视觉表示包括所述参与者的实况视频馈入，并且其中，所述呈现包括将所述消息的所述至少一部分呈现为所述实况视频馈入的至少一部分上的覆盖物。
示例13：如示例11或12中的一个或多个所述的方法，还包括查明所述参与者是所述通信会话中的活跃参与者，并且其中，所述呈现包括基于所述查明，将所述消息的所述至少一部分呈现为所述参与者的所述视觉表示的至少一部分上的视觉覆盖物。
示例14：如示例11-13中的一个或多个示例所述的方法，还包括查明所述参与者是所述通信会话中的消极参与者，并且其中，所述呈现包括基于所述查明，相邻于所述参与者的所述视觉表示来呈现所述消息的所述至少一部分。
示例15：如示例11-14中的一个或多个所述的方法，其中，所述呈现包括将消息媒体和所述参与者的标识符呈现为所述消息的所述至少一部分中的一部分。
示例16：一种用于在通信会话中呈现对消息的指示的计算机实现的方法，所述方法包括：检测到所述通信会话中的一个或多个参与者将所述消息发送作为通信会话的一部分；查明所述消息是否超过在指定时间段内发送的消息的门限数量；以及基于所述消息是否超过在所述指定时间段内发送的所述消息的门限数量，在所述通信会话的图形用户界面(GUI)内呈现对所述消息的指示。
示例17：如示例16所述的方法，其中，所述消息的门限数量是基于所述GUI的大小来确定的。
示例18：如示例16或17中的一个或多个示例所述的方法，其中，所述查明包括查明所述消息不超过所述消息的门限数量，并且其中，所述呈现包括在所述GUI中呈现所述消息，并且所述消息视觉地链接到通信会话中的一个或多个参与者的一个或多个视觉表示。
示例19：如示例16-18中的一个或多个示例所述的方法，其中，所述查明包括查明所述消息超过所述消息的门限数量，并且其中，所述呈现包括呈现视觉指示符，所述视觉指示符是可选择的以使得呈现所述消息。
示例20：如示例16-19中的一个或多个示例所述的方法，其中，所述查明包括查明所述消息超过所述消息的门限数量，其中，所述呈现包括呈现视觉指示符，所述视觉指示符是可选择的以使得呈现所述消息，所述方法还包括：接收对所述视觉指示符的用户选择；以及在所述GUI中呈现包括所述消息中的至少一些消息的消息窗口。
结论
描述了用于在通信会话中呈现消息的技术。尽管已经以特定于结构特征和/或方法动作的语言来描述了实施例，但是应当理解，在所附权利要求中限定的实施例不必限于所描述的特定特征或动作。相反地，将具体特征和动作公开为用于实现所要求保护的实施例的示例性形式。

Claims (15)

1.一种用于在通信会话中视觉地呈现消息的系统，所述系统包括：
至少一个处理器；以及
一个或多个计算机可读存储介质，其包括存储在其上的指令，所述指令响应于由所述至少一个处理器执行使得所述系统执行包括以下各项的操作：
检测到通信会话中的参与者发送消息；
在所述通信会话的图形用户界面(GUI)内标识所述参与者的视觉表示；
基于所述用户是所述通信会话中的活跃参与者还是被动参与者，来探知用于将所述消息视觉地链接到所述用户的所述视觉表示的链接配置；以及
通过在所述GUI内并且根据所述链接配置将所述消息视觉地链接到所述参与者的所述视觉表示，在所述GUI内呈现所述消息的至少一部分。
2.根据权利要求1所述的系统，其中，所述图形表示包括视频反馈，所述视频反馈包括所述用户的实况图像。
3.根据权利要求1所述的系统，其中，所述标识包括标识显示器中的在其中显示所述视觉表示的区域。
4.根据权利要求1所述的系统，其中，所述查明包括基于所述参与者在所述通信会话中被标记为活跃参与者来查明活跃参与者链接配置。
5.根据权利要求1所述的系统，其中，所述查明包括基于所述参与者在所述通信会话中被标记为消极参与者来查明消极参与者链接配置。
6.根据权利要求1所述的系统，其中，活跃参与者的链接配置不同于消极参与者的链接配置。
7.根据权利要求1所述的系统，其中，所述查明包括基于所述参与者在所述通信会话中被标记为活跃参与者来查明活跃参与者链接配置，并且其中，所述呈现包括根据所述活跃参与者链接配置，将所述消息的所述至少一部分呈现为所述参与者的所述视觉表示的至少一部分上的覆盖物。
8.根据权利要求1所述的系统，其中，所述查明包括基于所述参与者在所述通信会话中被标记为消极参与者来查明消极参与者链接配置，并且其中，所述呈现包括根据所述消极参与者链接配置，相邻于所述参与者的所述视觉表示来呈现所述消息的所述至少一部分。
9.根据权利要求1所述的系统，其中，所述GUI包括活跃参与者区域和消极参与者区域，并且其中，所述呈现包括取决于所述参与者是活跃参与者还是消极参与者，在所述活跃参与者区域或所述消极参与者区域中呈现所述图像的所述至少一部分。
10.根据权利要求1所述的系统，其中，所述操作还包括：
从所述通信会话中的参与者接收进一步的消息；
查明所述进一步的消息超过消息门限，所述消息门限指定在指定时间段内的消息的门限数量；以及
在所述GUI内呈现所述进一步的消息可用于查看的视觉通知。
11.一种用于在通信会话中视觉地呈现消息的计算机实现的方法，所述方法包括：
检测到通信会话中的参与者发送消息；
由计算系统在所述通信会话的图形用户界面(GUI)内标识所述参与者的视觉表示；
基于所述用户是所述通信会话中的活跃参与者还是消极参与者，来查明将所述消息视觉地链接到所述用户的所述视觉表示的链接配置；以及
通过在所述GUI内并且根据所述链接配置将所述消息视觉地链接到所述参与者的所述视觉表示，由所述计算系统在所述GUI内呈现所述消息的至少一部分。
12.根据权利要求11所述的方法，其中，所述参与者的所述视觉表示包括所述参与者的实况视频馈入，并且其中，所述呈现包括将所述消息的所述至少一部分呈现为所述实况视频馈入的至少一部分上的覆盖物。
13.根据权利要求11所述的方法，还包括查明所述参与者是所述通信会话中的活跃参与者，并且其中，所述呈现包括基于所述查明，将所述消息的所述至少一部分呈现为所述参与者的所述视觉表示的至少一部分上的视觉覆盖物。
14.根据权利要求11所述的方法，还包括查明所述参与者是所述通信会话中的消极参与者，并且其中，所述呈现包括基于所述查明，相邻于所述参与者的所述视觉表示来呈现所述消息的所述至少一部分。
15.根据权利要求11所述的方法，其中，所述呈现包括将消息媒体和所述参与者的标识符呈现为所述消息的所述至少一部分中的一部分。
CN201680022014.0A 2015-04-16 2016-04-12 在通信会话中呈现消息 Active CN107533417B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201562148426P 2015-04-16 2015-04-16
US62/148,426 2015-04-16
US14/806,291 2015-07-22
US14/806,291 US10061467B2 (en) 2015-04-16 2015-07-22 Presenting a message in a communication session
PCT/US2016/027056 WO2016168158A1 (en) 2015-04-16 2016-04-12 Presenting a message in a communication session

Publications (2)

Publication Number Publication Date
CN107533417A true CN107533417A (zh) 2018-01-02
CN107533417B CN107533417B (zh) 2021-01-05

Family

ID=55806837

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680022014.0A Active CN107533417B (zh) 2015-04-16 2016-04-12 在通信会话中呈现消息

Country Status (4)

Country Link
US (1) US10061467B2 (zh)
EP (1) EP3266190B1 (zh)
CN (1) CN107533417B (zh)
WO (1) WO2016168158A1 (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110457095A (zh) * 2018-05-07 2019-11-15 苹果公司 多参与者实时通信用户界面
CN112312224A (zh) * 2020-04-30 2021-02-02 北京字节跳动网络技术有限公司 信息显示方法、装置和电子设备
CN113535021A (zh) * 2021-07-21 2021-10-22 上海掌门科技有限公司 一种用于发送会话消息的方法、设备、介质及程序产品
US11360634B1 (en) 2021-05-15 2022-06-14 Apple Inc. Shared-content session user interfaces
US11399155B2 (en) 2018-05-07 2022-07-26 Apple Inc. Multi-participant live communication user interface
US11431891B2 (en) 2021-01-31 2022-08-30 Apple Inc. User interfaces for wide angle video conference
US11435877B2 (en) 2017-09-29 2022-09-06 Apple Inc. User interface for multi-user communication session
US11513667B2 (en) 2020-05-11 2022-11-29 Apple Inc. User interface for audio message
US11770600B2 (en) 2021-09-24 2023-09-26 Apple Inc. Wide angle video conference
US11893214B2 (en) 2021-05-15 2024-02-06 Apple Inc. Real-time communication user interface
US11895391B2 (en) 2018-09-28 2024-02-06 Apple Inc. Capturing and displaying images with multiple focal planes
US11907605B2 (en) 2021-05-15 2024-02-20 Apple Inc. Shared-content session user interfaces

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013086663A1 (en) * 2011-12-16 2013-06-20 Zynga Inc. Providing social network content in games
US10075482B2 (en) * 2015-09-25 2018-09-11 International Business Machines Corporation Multiplexed, multimodal conferencing
WO2017147744A1 (zh) * 2016-02-29 2017-09-08 华为技术有限公司 一种移动终端、可穿戴设备和消息传送方法
US10116898B2 (en) 2016-11-18 2018-10-30 Facebook, Inc. Interface for a video call
US10079994B2 (en) * 2016-11-18 2018-09-18 Facebook, Inc. Methods and systems for displaying relevant participants in a video communication
CN106507133B (zh) * 2016-11-28 2019-07-26 北京金山安全软件有限公司 弹幕消息的处理方法、装置、系统及其设备
US9924136B1 (en) * 2017-01-30 2018-03-20 Microsoft Technology Licensing, Llc Coordinated display transitions of people and content
CN114257773A (zh) * 2017-03-08 2022-03-29 索尼公司 图像处理设备和图像处理方法
US10895970B2 (en) * 2018-06-13 2021-01-19 Microsoft Technology Licensing, Llc Display control to implement a control bar
NO344903B1 (en) * 2019-06-28 2020-06-22 Pexip AS Intelligent adaptive and corrective layout composition
KR20220031170A (ko) 2020-09-04 2022-03-11 라인플러스 주식회사 온라인 미팅 노트 공유 방법 및 시스템
US11405589B1 (en) * 2021-05-25 2022-08-02 Nooncake Inc Interactive video conferencing interface
US11552816B2 (en) 2021-06-02 2023-01-10 Microsoft Technology Licensing, Llc Targeted positioning of message content for interfaces identifying multiple users
CN116055667A (zh) * 2021-10-20 2023-05-02 瑞轩科技股份有限公司 会议系统及其操作方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050099492A1 (en) * 2003-10-30 2005-05-12 Ati Technologies Inc. Activity controlled multimedia conferencing
CN101946511A (zh) * 2008-02-14 2011-01-12 微软公司 用于为多媒体会议事件生成视觉合成的技术
US20130120522A1 (en) * 2011-11-16 2013-05-16 Cisco Technology, Inc. System and method for alerting a participant in a video conference
CN103634681A (zh) * 2013-11-29 2014-03-12 腾讯科技(成都)有限公司 直播互动方法、装置、客户端、服务器及系统
CN103797438A (zh) * 2011-06-24 2014-05-14 谷歌公司 多个参与者间群组对话
CN104025538A (zh) * 2011-11-03 2014-09-03 Glowbl公司 通信界面和通信方法、相应的计算机程序以及相应的登记介质

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7081915B1 (en) 1998-06-17 2006-07-25 Intel Corporation Control of video conferencing using activity detection
US6304648B1 (en) 1998-12-21 2001-10-16 Lucent Technologies Inc. Multimedia conference call participant identification system and method
US6559863B1 (en) * 2000-02-11 2003-05-06 International Business Machines Corporation System and methodology for video conferencing and internet chatting in a cocktail party style
US7127685B2 (en) 2002-04-30 2006-10-24 America Online, Inc. Instant messaging interface having a tear-off element
US7386799B1 (en) * 2002-11-21 2008-06-10 Forterra Systems, Inc. Cinematic techniques in avatar-centric communication during a multi-user online simulation
US7454460B2 (en) 2003-05-16 2008-11-18 Seiko Epson Corporation Method and system for delivering produced content to passive participants of a videoconference
US20050210394A1 (en) 2004-03-16 2005-09-22 Crandall Evan S Method for providing concurrent audio-video and audio instant messaging sessions
US7554571B1 (en) 2005-03-18 2009-06-30 Avaya Inc. Dynamic layout of participants in a multi-party video conference
US7768543B2 (en) 2006-03-09 2010-08-03 Citrix Online, Llc System and method for dynamically altering videoconference bit rates and layout based on participant activity
US8223186B2 (en) 2006-05-31 2012-07-17 Hewlett-Packard Development Company, L.P. User interface for a video teleconference
US8446454B2 (en) 2007-05-21 2013-05-21 Polycom, Inc. Dynamic adaption of a continuous presence videoconferencing layout based on video content
US8887069B2 (en) 2009-03-31 2014-11-11 Voispot, Llc Virtual meeting place system and method
WO2010141023A1 (en) 2009-06-04 2010-12-09 Hewlett-Packard Development Company, L.P. Video conference
US20100309284A1 (en) 2009-06-04 2010-12-09 Ramin Samadani Systems and methods for dynamically displaying participant activity during video conferencing
US10210481B2 (en) 2009-07-14 2019-02-19 Bitvore Corp. Relational presentation of communications and application for transaction analysis
US9449614B2 (en) 2009-08-14 2016-09-20 Skype Controlling multi-party communications
KR101636716B1 (ko) 2009-12-24 2016-07-06 삼성전자주식회사 발언자를 구별하는 영상 회의 장치 및 방법
US20110271192A1 (en) 2010-04-30 2011-11-03 American Teleconferencing Services Ltd. Managing conference sessions via a conference user interface
US20120166534A1 (en) 2010-12-27 2012-06-28 Avaya Inc. System and method for grouping conference participants
CN102611872B (zh) 2011-01-19 2014-07-02 株式会社理光 基于感兴趣区域动态检测的场景影像转换系统和方法
US8701020B1 (en) 2011-02-01 2014-04-15 Google Inc. Text chat overlay for video chat
US8537195B2 (en) 2011-02-09 2013-09-17 Polycom, Inc. Automatic video layouts for multi-stream multi-site telepresence conferencing system
US20130063542A1 (en) 2011-09-14 2013-03-14 Cisco Technology, Inc. System and method for configuring video data
US8966404B2 (en) 2011-11-11 2015-02-24 Apollo Education Group, Inc. Hierarchy-indicating graphical user interface for discussion threads
US20130169742A1 (en) 2011-12-28 2013-07-04 Google Inc. Video conferencing with unlimited dynamic active participants
US20130198629A1 (en) 2012-01-28 2013-08-01 Microsoft Corporation Techniques for making a media stream the primary focus of an online meeting
US20130215214A1 (en) 2012-02-22 2013-08-22 Avaya Inc. System and method for managing avatarsaddressing a remote participant in a video conference
US20130311935A1 (en) 2012-05-21 2013-11-21 Nokia Corporation Apparatus and method for creating user groups
US8890923B2 (en) 2012-09-04 2014-11-18 Cisco Technology, Inc. Generating and rendering synthesized views with multiple video streams in telepresence video conference sessions
US20140071223A1 (en) 2012-09-10 2014-03-13 Rebaca Technologies Peer-to-peer video conferencing
US9781385B2 (en) * 2013-03-15 2017-10-03 Blue Jeans Network User interfaces for presentation of audio/video streams
US9226121B2 (en) 2013-08-02 2015-12-29 Whatsapp Inc. Voice communications with real-time status notifications
US20150049162A1 (en) 2013-08-15 2015-02-19 Futurewei Technologies, Inc. Panoramic Meeting Room Video Conferencing With Automatic Directionless Heuristic Point Of Interest Activity Detection And Management
US9706040B2 (en) 2013-10-31 2017-07-11 Udayakumar Kadirvel System and method for facilitating communication via interaction with an avatar
US9307200B2 (en) 2014-04-10 2016-04-05 Cisco Technology, Inc. Use of face and motion detection for best view framing in video conference endpoint
US9584763B2 (en) 2014-11-06 2017-02-28 Cisco Technology, Inc. Automatic switching between dynamic and preset camera views in a video conference endpoint
US20160308920A1 (en) 2015-04-16 2016-10-20 Microsoft Technology Licensing, Llc Visual Configuration for Communication Session Participants
US9641585B2 (en) 2015-06-08 2017-05-02 Cisco Technology, Inc. Automated video editing based on activity in video conference

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050099492A1 (en) * 2003-10-30 2005-05-12 Ati Technologies Inc. Activity controlled multimedia conferencing
CN101946511A (zh) * 2008-02-14 2011-01-12 微软公司 用于为多媒体会议事件生成视觉合成的技术
CN103797438A (zh) * 2011-06-24 2014-05-14 谷歌公司 多个参与者间群组对话
CN104025538A (zh) * 2011-11-03 2014-09-03 Glowbl公司 通信界面和通信方法、相应的计算机程序以及相应的登记介质
US20130120522A1 (en) * 2011-11-16 2013-05-16 Cisco Technology, Inc. System and method for alerting a participant in a video conference
CN103634681A (zh) * 2013-11-29 2014-03-12 腾讯科技(成都)有限公司 直播互动方法、装置、客户端、服务器及系统

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11435877B2 (en) 2017-09-29 2022-09-06 Apple Inc. User interface for multi-user communication session
US11849255B2 (en) 2018-05-07 2023-12-19 Apple Inc. Multi-participant live communication user interface
US11399155B2 (en) 2018-05-07 2022-07-26 Apple Inc. Multi-participant live communication user interface
CN110457095A (zh) * 2018-05-07 2019-11-15 苹果公司 多参与者实时通信用户界面
US11895391B2 (en) 2018-09-28 2024-02-06 Apple Inc. Capturing and displaying images with multiple focal planes
CN112312224A (zh) * 2020-04-30 2021-02-02 北京字节跳动网络技术有限公司 信息显示方法、装置和电子设备
US11513667B2 (en) 2020-05-11 2022-11-29 Apple Inc. User interface for audio message
US11431891B2 (en) 2021-01-31 2022-08-30 Apple Inc. User interfaces for wide angle video conference
US11467719B2 (en) 2021-01-31 2022-10-11 Apple Inc. User interfaces for wide angle video conference
US11671697B2 (en) 2021-01-31 2023-06-06 Apple Inc. User interfaces for wide angle video conference
US11449188B1 (en) 2021-05-15 2022-09-20 Apple Inc. Shared-content session user interfaces
US11822761B2 (en) 2021-05-15 2023-11-21 Apple Inc. Shared-content session user interfaces
US11360634B1 (en) 2021-05-15 2022-06-14 Apple Inc. Shared-content session user interfaces
US11893214B2 (en) 2021-05-15 2024-02-06 Apple Inc. Real-time communication user interface
US11907605B2 (en) 2021-05-15 2024-02-20 Apple Inc. Shared-content session user interfaces
US11928303B2 (en) 2021-05-15 2024-03-12 Apple Inc. Shared-content session user interfaces
CN113535021B (zh) * 2021-07-21 2022-12-06 上海掌门科技有限公司 一种用于发送会话消息的方法、设备、介质及程序产品
CN113535021A (zh) * 2021-07-21 2021-10-22 上海掌门科技有限公司 一种用于发送会话消息的方法、设备、介质及程序产品
US11770600B2 (en) 2021-09-24 2023-09-26 Apple Inc. Wide angle video conference
US11812135B2 (en) 2021-09-24 2023-11-07 Apple Inc. Wide angle video conference

Also Published As

Publication number Publication date
EP3266190A1 (en) 2018-01-10
WO2016168158A1 (en) 2016-10-20
CN107533417B (zh) 2021-01-05
US10061467B2 (en) 2018-08-28
US20160306504A1 (en) 2016-10-20
EP3266190B1 (en) 2019-01-30

Similar Documents

Publication Publication Date Title
CN107533417A (zh) 在通信会话中呈现消息
US11750774B2 (en) Systems and methods for triggering livestream communications between users based on proximity-based criteria for avatars within virtual environments that correspond to the users
CN107534656A (zh) 用于通信会话参与者的可视配置
US20230143707A1 (en) Immersive virtual entertainment system
CN105009062B (zh) 浏览被显示为瓦块的电子消息
CN103023961B (zh) 经由墙型计算设备的工作空间协作
EP2880858B1 (en) Using an avatar in a videoconferencing system
US20160074757A1 (en) Single user multiple presence in multi-user game
CN108702484A (zh) 通信事件
CN106716921A (zh) 会话历史范围控制
KR101642550B1 (ko) 네크워크 시스템 및 그 동작 방법
CN107633381A (zh) 多用户和多设备协作
US20100165396A1 (en) Information communication system, user terminal and information communication method
CN108702483A (zh) 通信事件
WO2012140562A1 (en) System and method for developing evolving online profiles
CN107534679A (zh) 针对通信会话的端点控制
CN107077348A (zh) 跨设备的经分割的应用呈现
CN106105173A (zh) 利用单个动作停止记录并发送
CN106105174A (zh) 自动相机选择
JP2021086626A (ja) ビデオチャットに利用可能な評判バッチを提供する方法、システム、およびコンピュータプログラム
CN113411656A (zh) 信息处理方法、装置、计算机设备及存储介质
JP2021528710A (ja) マルチプロフィールを提供する方法およびシステム
CN108429668A (zh) 一种消息处理方法、装置、终端及系统
CN115193043A (zh) 一种游戏信息发送方法、装置、计算机设备及存储介质
Flanagan et al. Issues in measuring the benefits of multimodal interfaces

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant