CN111698452A - 在线群体状态反馈方法、系统及装置 - Google Patents

在线群体状态反馈方法、系统及装置 Download PDF

Info

Publication number
CN111698452A
CN111698452A CN202010598339.1A CN202010598339A CN111698452A CN 111698452 A CN111698452 A CN 111698452A CN 202010598339 A CN202010598339 A CN 202010598339A CN 111698452 A CN111698452 A CN 111698452A
Authority
CN
China
Prior art keywords
audience
client
expression
state
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010598339.1A
Other languages
English (en)
Inventor
房东升
贾诗童
赵书祥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bank of China Ltd
Original Assignee
Bank of China Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bank of China Ltd filed Critical Bank of China Ltd
Priority to CN202010598339.1A priority Critical patent/CN111698452A/zh
Publication of CN111698452A publication Critical patent/CN111698452A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • H04N7/152Multipoint control units therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • H04N7/155Conference systems involving storage of or access to video conference sessions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • H04N7/157Conference systems defining a virtual conference space and using avatars or agents

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明公开了一种在线群体状态反馈方法、系统及装置,该方法包括:采集远程会议各个听众客户端的状态信息;根据各个听众客户端的状态信息,生成听众表情图,其中,听众表情图用于反映各个听众客户端的听众状态;在远程会议主讲客户端的屏幕上,显示听众表情图。本发明利用表情图反映各个听众客户端的听众状态,能够使得主讲客户端直观、快速、及时了解到各个听众客户端的听众状态。

Description

在线群体状态反馈方法、系统及装置
技术领域
本发明涉及互联网领域,尤其涉及一种在线群体状态反馈方法、系统及装置。
背景技术
本部分旨在为权利要求书中陈述的本发明实施例提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
众所周知,基于互联网等通讯手段的远程会议,由于能够实现高效率、跨区域的沟通和交流,备受各行各业的青睐。在远程会议中,如何精准、快捷地获取听众者的状态,对于会议主持人或主讲人十分重要的。
目前,市场上的各种视频会议软件,仅支持主讲人打开视频的方式来观察听众的参会状态。当远程会议的听众人数较少(如十人以内),主讲人通过打开摄像头视频,或者通过听众语音的方式,能够及时获知听众的参会状态。当远程会议的听众人数较多(如几十人甚至几百人)时,如果主讲人将所有听众的视频窗口显示在屏幕,来观察听众的参会状态,不仅会占据很大屏幕面积,而且会影响主讲人对屏幕的操作。针对一些出于隐私考虑而不愿意打开摄像头的听众,更难让主讲人获知其参会状态。
针对上述问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例中提供了一种在线群体状态反馈方法,用以解决现有视频会议软件,仅支持主讲客户端通过打开视频的方式来观察听众客户端的参会状态,存在难以有效反馈听众状态的技术问题,该方法包括:采集远程会议各个听众客户端的状态信息;根据各个听众客户端的状态信息,生成听众表情图,其中,听众表情图用于反映各个听众客户端的听众状态;在远程会议主讲客户端的屏幕上,显示听众表情图。
本发明实施例中还提供了一种在线群体状态反馈系统,用以解决现有视频会议软件,仅支持主讲客户端通过打开视频的方式来观察听众客户端的参会状态,存在难以有效反馈听众状态的技术问题,该系统包括:服务器、主讲客户端和多个听众客户端;其中,服务器,与主讲客户端和各个听众客户端分别通信,用于采集远程会议各个听众客户端的状态信息,以及根据各个听众客户端的状态信息,生成听众表情图,发送给主讲客户端,其中,听众表情图用于反映各个听众客户端的听众状态;主讲客户端,用于接收服务器发送的听众表情图,并在屏幕上显示。
本发明实施例中还提供了一种在线群体状态反馈装置,用以解决现有视频会议软件,仅支持主讲客户端通过打开视频的方式来观察听众客户端的参会状态,存在难以有效反馈听众状态的技术问题,该装置包括:状态信息采集模块,用于采集远程会议各个听众客户端的状态信息;状态表情图生成模块,用于根据各个听众客户端的状态信息,生成听众表情图,其中,听众表情图用于反映各个听众客户端的听众状态;状态表情显示模块,用于在远程会议主讲客户端的屏幕上,显示听众表情图。
本发明实施例中还提供了一种计算机设备,用以解决现有视频会议软件,仅支持主讲客户端通过打开视频的方式来观察听众客户端的参会状态,存在难以有效反馈听众状态的技术问题,该计算机设备包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述在线群体状态反馈方法。
本发明实施例中还提供了一种计算机可读存储介质,用以解决现有视频会议软件,仅支持主讲客户端通过打开视频的方式来观察听众客户端的参会状态,存在难以有效反馈听众状态的技术问题,该计算机可读存储介质存储有执行上述在线群体状态反馈方法的计算机程序。
本发明实施例中,在采集到远程会议各个听众客户端的状态信息后,根据各个听众客户端的状态信息,生成用于反映各个听众客户端听众状态的听众表情图,并显示于远程会议主讲客户端的屏幕上。本发明实施例利用表情图反映各个听众客户端的听众状态,能够使得主讲客户端直观、快速、及时了解到各个听众客户端的听众状态。
进一步地,根据各个听众客户端对应的表情图,合成一个反映远程会议的总听众状态的总表情图,能够使得主讲客户端更直观、快速了解会议听众的整体反馈状态。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1为本发明实施例中提供的一种在线群体状态反馈系统示意图;
图2为本发明实施例中提供的一种在线群体状态反馈方法流程图;
图3为本发明实施例中提供的一种在线群体状态反馈装置示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚明白,下面结合附图对本发明实施例做进一步详细说明。在此,本发明的示意性实施例及其说明用于解释本发明,但并不作为对本发明的限定。
在本说明书的描述中,所使用的“包含”、“包括”、“具有”、“含有”等,均为开放性的用语,即意指包含但不限于。参考术语“一个实施例”、“一个具体实施例”、“一些实施例”、“例如”等的描述意指结合该实施例或示例描述的具体特征、结构或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。各实施例中涉及的步骤顺序用于示意性说明本申请的实施,其中的步骤顺序不作限定,可根据需要作适当调整。
本发明实施例中提供了一种在线群体状态反馈系统,图1为本发明实施例中提供的一种在线群体状态反馈系统示意图,如图1所示,该系统可以包括:服务器10、主讲客户端20和多个听众客户端30;
其中,服务器10,与主讲客户端20和各个听众客户端30分别通信,用于采集远程会议各个听众客户端30的状态信息,以及根据各个听众客户端30的状态信息,生成听众表情图,发送给主讲客户端20,其中,听众表情图用于反映各个听众客户端30的听众状态;主讲客户端20,用于接收服务器10发送的听众表情图,并在屏幕上显示。
在一个实施例中,本发明实施例中的服务器10可以根据每个听众客户端30的状态信息,生成每个听众客户端30对应的表情图,并将每个听众客户端30对应的表情图发送给主讲客户端20,使得主讲客户端20在屏幕上显示各个听众客户端30对应的表情图。通过该实施例,主讲客户端20的主讲人能够直观、清晰地观察到每个听众客户端30的状态。
由于听众数量比较大的情况下,在屏幕上显示大量数目的表情图,难以快速了解到远程会议听众的整体状态,因而,在另一个实施例中,本发明实施例中的服务器10根据各个听众客户端30对应的表情图,合成一个总表情图,其中,总表情图用于反映远程会议的总听众状态。
在具体实施过程中,由于会议主讲者往往更在意领导等重要参会者反馈的状态,因而,在一个实施例中,本发明实施例中的服务器10在根据各个听众客户端30对应的表情图合成总表情图的时候,可以首先获取各个听众客户端30的权重值,然后根据各个听众客户端30的权重值,对各个听众客户端30对应表情图的状态信息进行加权平均,得到反映远程会议总听众状态的总表情图。
需要说明的是,本发明实施例中采集的各个听众客户端30的状态信息可以包括但不限于:听众客户端30与主讲客户端20之间的网络连接状态信息、听众客户端30的听众行为状态信息(例如,听众操作鼠标、键盘等外接设备的行为信息,听众主动反馈的状态信息)。
可选地,本发明实施例中的服务器10在采集各个听众客户端30的状信息时可以通过但不限于如下三种方式:
方式一:主动获取听众客户端30与主讲客户端20之间的网络状态,具体包括:按照第一预设时间间隔,发起网络连通性测试请求,进而获取网络联通性测试结果,其中,网络连通性测试请求用于检测主讲客户端20到各个听众终端的网络连通性情况。
方式二:主动获取听众客户端30的听众行为信息,具体包括:按照第二预设时间间隔,采集各个听众客户端30的听众行为信息;比对各个听众客户端30相邻两次的听众行为信息;获取比对结果超出预设条件的一个或多个听众客户端30的听众行为信息。
方式三:获取听众通过听众客户端30反馈的状态,具体包括:在各个听众客户端30的屏幕上,显示状态反馈控件;获取各个听众客户端30通过状态反馈控件反馈的状态信息。
基于同一发明构思,本发明实施例中还提供了一种在线群体状态反馈方法,可以应用但不限于图1所示的在线群体状态反馈系统。
图2为本发明实施例中提供的一种在线群体状态反馈方法流程图,如图2所示,该方法可以包括如下步骤:
S201,采集远程会议各个听众客户端的状态信息。
需要说明的是,上述S201采集的各个听众客户端的状态信息可以包括但不限于:听众客户端与主讲客户端之间的网络连接状态信息、听众客户端的听众行为状态信息(例如,听众操作鼠标、键盘等外接设备的行为信息,听众的面部表情信息、听众主动反馈的状态信息等)。
为了让主讲人了解听众客户端与主讲客户端之间的网络状态,在一个实施例中,上述S201可以通过如下步骤来实现:按照第一预设时间间隔,发起网络连通性测试请求,其中,网络连通性测试请求用于检测主讲客户端到各个听众终端的网络连通性情况;获取网络联通性测试结果。在具体实施时,可以在主讲客户端上线后,调用主讲客户端的网络主动检查模块,按照固定时间间隔主动发起网络连通性检测请求,以检测主讲客户端和听众客户端之间的网络是否连通,确保主讲客户端和听众客户端之间网络的实时连通性,避免发生主讲人网络断掉,却没意识到一直讲的情况,也避免某些听众因为网络问题听不到主讲人的声音。可选地,如果出现网络连接不良,延时过长等问题,可以在主讲客户端及时地进行弹窗提示。
为了让主讲人了解各个听众的参会状态,在一个实施例中,上述S201可以通过如下步骤来实现:按照第二预设时间间隔,采集各个听众客户端的听众行为信息;比对各个听众客户端相邻两次的听众行为信息;获取比对结果超出预设条件的一个或多个听众客户端的听众行为信息。
在远程会议场景中,听众有时会处于既不说话,也不发评论,也不打开摄像头的情形,主讲人很难了解到听众的参会状态。在这种情况下,需要借助其它手段,例如,通过采集听众操作鼠标、键盘等外接设备的动作信息,或通过红外热成像仪或动作捕捉仪采集听众的面部表情或肢体动作(例如,托腮、鼓掌等)等行为信息,映射为相应的听众状态,以状态表情图的形式呈现给主讲人,能够便于主讲人在没有打开听众视频的情况下,也能了解到听众的参会状态。对于可采集听众视频信息的场景,可以从采集的视频图像流信息中提取听众的表情或动作信息。
为了便于听众反馈状态,在一个实施例中,上述S201可以通过如下步骤来实现:在各个听众客户端的屏幕上,显示状态反馈控件;获取各个听众客户端通过状态反馈控件反馈的状态信息。在具体实施时,可以在听众客户端屏幕上会议窗口的某一区域显示一个或多个状态反馈控件,例如,用于表征“太棒啦”、“听不懂”、“无聊”等相应信息的控件,可选地,状态反馈控件可以是按钮的形式,也可以是划分的子区域,通过点击某一状态对应的按钮,或在某一状态对应的子区域内点击,实现反馈相应状态的目的。
需要注意的是,由于采集的状态信息不同,上述S201采用的采集方式也不同,在采集听众客户端与主讲客户端之间网络状态的时候,可以通过定时发送网络连通性测试请求的方式实现,而在采集听众客户端的听众行为状态时,可以结合各个听众参会使用的设备来确定采用什么方式采集信息,例如,通过摄像头、红外热成像仪或动作捕捉仪采集听众的各种行为状态信息。
当采集听众的肢体动作信息时,可以在当听众登录上线后,红外热成像仪/动作捕捉仪自动打开,开始捕获听众的肢体动作。每隔某一固定的时间间隔(如几毫秒),采集一次听众动作,传到动作收集模块,与已经采集到的结果作对比。若误差大于设定值,说明这两个动作区别明显,将其并保存下来,并传给肢体动作分析模块;否则,不保存。
当采集听众的面部表情信息时,检查听众客户端是否打开摄像头。若是摄像头是打开状态,则通过摄像头采集听众的视频图像流,从视频图像流的每帧图像中提取听众的面部表情信息。
S202,根据各个听众客户端的状态信息,生成听众表情图,其中,听众表情图用于反映各个听众客户端的听众状态。
在具体实施时,可以将听众状态进行分类,并将每一种状态映射为一种表情图。需要注意的是,本发明实施例中的表情图可以包括但不限于:表情符号、表情图案或颜色控件。即通过不同的表情符号、不同的表情图案或不同颜色的控件,代表不同的听众状态,包括但不限于:“思考”、“讲的真好”、“生气”、“听不懂”或“烦躁”等状态。
例如,将听众“托腮”的动作信息映射为“思考”的一个表情图,将听众“鼓掌”的动作信息映射为“讲的真好”的一个表情图;肢体动作分析和表情分析既可同时进行,又可以单独进行。若摄像头未打开,采集不到表情图像时,仅对肢体动作做分析。
需要注意的是,当听众人数较少时,可以将所有听众的表情图显示在主讲客户端的屏幕上;当听众人数较多时,显示所有听众的表情图仍会占用较大屏幕面积,因而可以将所有听众的表情按照算法进行计算,得出一个总表情图来代表整体听众状态,以便主讲人直观、快速了解听众反应状态。
因而,在一个实施例中,上述S202可以通过如下步骤来实现:根据每个听众客户端的状态信息,生成每个听众客户端对应的表情图。
进一步地,在根据每个听众客户端的状态信息,生成每个听众客户端对应的表情图之后,还可以根据各个听众客户端对应的表情图,合成一个总表情图,其中,总表情图用于反映远程会议的总听众状态。
当听众中有代表人物或者重要人物(如领导、检察官等)出席时,可根据实际情况对听众的状态信息进行加权处理。在生成总表情图时,权重值大的听众用户的状态信息会在一定程度上突现出来,更好地让主讲人得知重要人物的反应状态。
可选地,在根据各个听众客户端对应的表情图合成总表情图的时候,可以通过如下步骤来实现:获取各个听众客户端的权重值;根据各个听众客户端的权重值,对各个听众客户端对应表情图的状态信息进行加权平均,得到反映远程会议总听众状态的总表情图。本发明实施例中,可以获取不同听众的身份信息,进而根据不同听众的身份信息,配置不同听众的权重值。在具体实施时,可以根据实际情况,增加或削弱不同听众的权重。
在一个实施例中,本发明实施例中,在根据各个听众客户端的状态信息生成听众表情图的时候,可以通过深度学习,训练一个基于卷积神经网络的表情图生成模型,以便将各个听众客户端的状态信息,输入到该表情图生成模型,快速输出对应的表情图。在训练模型的过程中,可以采用广义下降算法等优化算法对模型进行优化。
S203,在远程会议主讲客户端的屏幕上,显示听众表情图。
需要说明的是,如果上述S202生成的是各个听众客户端对应的表情图,则上述S203可以在远程会议主讲客户端的屏幕上,显示各个听众客户端对应的表情图;如果上述S202生成的是反映远程会议的总听众状态的总表情图,则上述S203可以在远程会议主讲客户端的屏幕上,显示该总表情图。
在具体实施时,可以在主讲客户端的视频会议窗口上显示“分开显示”和“汇总显示”控件,若选择“分开显示”控件,则显示所有听众的表情图;若选择“汇总显示”控件,则只显示一个总表情图代表整体听众状态。
由上可知,本发明实施例中提供的在线群体状态反馈方法,在采集到远程会议各个听众客户端的状态信息后,根据各个听众客户端的状态信息,生成用于反映各个听众客户端听众状态的听众表情图,并显示于远程会议主讲客户端的屏幕上。本发明实施例利用表情图反映各个听众客户端的听众状态,能够使得主讲客户端直观、快速、及时了解到各个听众客户端的听众状态。
基于同一发明构思,本发明实施例中还提供了一种在线群体状态反馈装置,如下面的实施例所述。由于该装置实施例解决问题的原理与在线群体状态反馈方法相似,因此该装置实施例的实施可以参见方法的实施,重复之处不再赘述。
图3为本发明实施例中提供的一种在线群体状态反馈装置示意图,如图3所示,该装置可以包括:状态信息采集模块31、状态表情图生成模块32、状态表情显示模块33。
其中,状态信息采集模块31,用于采集远程会议各个听众客户端的状态信息;状态表情图生成模块32,用于根据各个听众客户端的状态信息,生成听众表情图,其中,听众表情图用于反映各个听众客户端的听众状态;状态表情显示模块33,用于在远程会议主讲客户端的屏幕上,显示听众表情图。
由上可知,本发明实施例中提供的在线群体状态反馈装置,通过状态信息采集模块31采集远程会议各个听众客户端的状态信息;通过状态表情图生成模块32根据各个听众客户端的状态信息,生成用于反映各个听众客户端听众状态的听众表情图;通过状态表情显示模块33将用于反映各个听众客户端听众状态的听众表情图显示于远程会议主讲客户端的屏幕上。本发明实施例利用表情图反映各个听众客户端的听众状态,能够使得主讲客户端直观、快速、及时了解到各个听众客户端的听众状态。
在一个实施例中,本发明实施例中提供的在线群体状态反馈装置中,状态表情图生成模块32可以包括:表情图生成子模块321和表情图合成子模块322;其中,表情图生成子模块321用于根据每个听众客户端的状态信息,生成每个听众客户端对应的表情图;表情图合成子模块322用于根据各个听众客户端对应的表情图,合成一个总表情图,其中,总表情图用于反映远程会议的总听众状态。
在一个实施例中,本发明实施例中提供的在线群体状态反馈装置中,状态信息采集模块31可以包括:网络连通性测试子模块311,用于按照第一预设时间间隔,发起网络连通性测试请求,进而获取网络联通性测试结果,其中,网络连通性测试请求用于检测主讲客户端到各个听众终端的网络连通性情况。
在一个实施例中,本发明实施例中提供的在线群体状态反馈装置中,状态信息采集模块31可以包括:听众行为信息采集子模块312,用于按照第二预设时间间隔,采集各个听众客户端的听众行为信息,比对各个听众客户端相邻两次的听众行为信息,进而获取比对结果超出预设条件的一个或多个听众客户端的听众行为信息。
在一个实施例中,本发明实施例中提供的在线群体状态反馈装置中,状态信息采集模块31可以包括:状态信息反馈子模块313,用于在各个听众客户端的屏幕上,显示状态反馈控件,进而获取各个听众客户端通过状态反馈控件反馈的状态信息。
基于同一发明构思,本发明实施例中还提供了一种计算机设备,用以解决现有视频会议软件,仅支持主讲客户端通过打开视频的方式来观察听众客户端的参会状态,存在难以有效反馈听众状态的技术问题,该计算机设备包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述在线群体状态反馈方法。
基于同一发明构思,本发明实施例中还提供了一种计算机可读存储介质,用以解决现有视频会议软件,仅支持主讲客户端通过打开视频的方式来观察听众客户端的参会状态,存在难以有效反馈听众状态的技术问题,该计算机可读存储介质存储有执行上述在线群体状态反馈方法的计算机程序。
综上所述,本发明实施例中提供了一种在线群体状态反馈方法、系统、装置、计算机设备及计算机可读存储介质,主要包括:状态收集、状态分析和状态反馈三大部分。其中,状态收集部分用于收集听众状态信息,包括但不限于:听众的网络状态、外接设备(如鼠标,键盘)状态、听众行为信息(如肢体动作、面部表情)等;状态分析部分用于对收集到的状态信息进行分类处理,例如,基于预先通过机器学习训练好的状态表情分类模型对采集到的状态信息进行分类,将采集的状态信息映射为相应的表情图;状态反馈部分用于对状态分析部分处理后的结果,通过直接明了的形式(如表情符号、颜色、图案等)反馈给主讲客户端(例如,主讲人或主持人的客户端),如根据状态分析结果,绘制成不同的表情符号,显示于主讲客户端屏幕上。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (15)

1.一种在线群体状态反馈方法,其特征在于,包括:
采集远程会议各个听众客户端的状态信息;
根据各个听众客户端的状态信息,生成听众表情图,其中,所述听众表情图用于反映各个听众客户端的听众状态;
在所述远程会议主讲客户端的屏幕上,显示所述听众表情图。
2.如权利要求1所述的方法,其特征在于,根据各个听众客户端的状态信息,生成听众表情图,包括:
根据每个听众客户端的状态信息,生成每个听众客户端对应的表情图。
3.如权利要求2所述的方法,其特征在于,在根据每个听众客户端的状态信息,生成每个听众客户端对应的表情图之后,所述方法还包括:
根据各个听众客户端对应的表情图,合成一个总表情图,其中,所述总表情图用于反映所述远程会议的总听众状态。
4.如权利要求3所述的方法,其特征在于,根据各个听众客户端对应的表情图,合成一个总表情图,包括:
获取各个听众客户端的权重值;
根据各个听众客户端的权重值,对各个听众客户端对应表情图的状态信息进行加权平均,得到反映所述远程会议总听众状态的总表情图。
5.如权利要求1至4任一项所述的方法,其特征在于,采集远程会议各个听众客户端的状态信息,包括:
按照第一预设时间间隔,发起网络连通性测试请求,其中,所述网络连通性测试请求用于检测主讲客户端到各个听众终端的网络连通性情况;
获取网络联通性测试结果。
6.如权利要求1至4任一项所述的方法,其特征在于,采集远程会议各个听众客户端的状态信息,包括:
按照第二预设时间间隔,采集各个听众客户端的听众行为信息;
比对各个听众客户端相邻两次的听众行为信息;
获取比对结果超出预设条件的一个或多个听众客户端的听众行为信息。
7.如权利要求1至4任一项所述的方法,其特征在于,采集远程会议各个听众客户端的状态信息,包括:
在各个听众客户端的屏幕上,显示状态反馈控件;
获取各个听众客户端通过所述状态反馈控件反馈的状态信息。
8.一种在线群体状态反馈系统,其特征在于,包括:服务器、主讲客户端和多个听众客户端;
其中,服务器,与所述主讲客户端和各个听众客户端分别通信,用于采集远程会议各个听众客户端的状态信息,以及根据各个听众客户端的状态信息,生成听众表情图,发送给所述主讲客户端,其中,所述听众表情图用于反映各个听众客户端的听众状态;
所述主讲客户端,用于接收所述服务器发送的听众表情图,并在屏幕上显示。
9.一种在线群体状态反馈装置,其特征在于,包括:
状态信息采集模块,用于采集远程会议各个听众客户端的状态信息;
状态表情图生成模块,用于根据各个听众客户端的状态信息,生成听众表情图,其中,所述听众表情图用于反映各个听众客户端的听众状态;
状态表情显示模块,用于在所述远程会议主讲客户端的屏幕上,显示所述听众表情图。
10.如权利要求9所述的装置,其特征在于,所述状态表情图生成模块包括:
表情图生成子模块,用于根据每个听众客户端的状态信息,生成每个听众客户端对应的表情图;
表情图合成子模块,用于根据各个听众客户端对应的表情图,合成一个总表情图,其中,所述总表情图用于反映所述远程会议的总听众状态。
11.如权利要求9所述的装置,其特征在于,所述状态信息采集模块包括:
网络连通性测试子模块,用于按照第一预设时间间隔,发起网络连通性测试请求,进而获取网络联通性测试结果,其中,所述网络连通性测试请求用于检测主讲客户端到各个听众终端的网络连通性情况。
12.如权利要求9所述的装置,其特征在于,所述状态信息采集模块包括:
听众行为信息采集子模块,用于按照第二预设时间间隔,采集各个听众客户端的听众行为信息,比对各个听众客户端相邻两次的听众行为信息,进而获取比对结果超出预设条件的一个或多个听众客户端的听众行为信息。
13.如权利要求9所述的装置,其特征在于,所述状态信息采集模块包括:
状态信息反馈子模块,用于在各个听众客户端的屏幕上,显示状态反馈控件,进而获取各个听众客户端通过所述状态反馈控件反馈的状态信息。
14.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7任一项所述在线群体状态反馈方法。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有执行权利要求1至7任一项所述在线群体状态反馈方法的计算机程序。
CN202010598339.1A 2020-06-28 2020-06-28 在线群体状态反馈方法、系统及装置 Pending CN111698452A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010598339.1A CN111698452A (zh) 2020-06-28 2020-06-28 在线群体状态反馈方法、系统及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010598339.1A CN111698452A (zh) 2020-06-28 2020-06-28 在线群体状态反馈方法、系统及装置

Publications (1)

Publication Number Publication Date
CN111698452A true CN111698452A (zh) 2020-09-22

Family

ID=72484146

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010598339.1A Pending CN111698452A (zh) 2020-06-28 2020-06-28 在线群体状态反馈方法、系统及装置

Country Status (1)

Country Link
CN (1) CN111698452A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112988318A (zh) * 2021-05-20 2021-06-18 全时云商务服务股份有限公司 一种感知共享结果与状态的方法、系统和可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109035085A (zh) * 2018-07-10 2018-12-18 上海进馨网络科技有限公司 一种在线课程助教方法及计算机设备
CN109523290A (zh) * 2018-09-14 2019-03-26 平安科技(深圳)有限公司 基于听众微表情的听讲评价方法、装置、设备及介质
CN109819326A (zh) * 2019-01-16 2019-05-28 中央电视台 一种电视台竞争格局评估方法及装置
CN110059614A (zh) * 2019-04-16 2019-07-26 广州大学 一种基于人脸情绪识别的智能辅助教学方法及系统
JP2019148849A (ja) * 2018-02-26 2019-09-05 京セラドキュメントソリューションズ株式会社 理解度判定システムおよび理解度判定プログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019148849A (ja) * 2018-02-26 2019-09-05 京セラドキュメントソリューションズ株式会社 理解度判定システムおよび理解度判定プログラム
CN109035085A (zh) * 2018-07-10 2018-12-18 上海进馨网络科技有限公司 一种在线课程助教方法及计算机设备
CN109523290A (zh) * 2018-09-14 2019-03-26 平安科技(深圳)有限公司 基于听众微表情的听讲评价方法、装置、设备及介质
CN109819326A (zh) * 2019-01-16 2019-05-28 中央电视台 一种电视台竞争格局评估方法及装置
CN110059614A (zh) * 2019-04-16 2019-07-26 广州大学 一种基于人脸情绪识别的智能辅助教学方法及系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112988318A (zh) * 2021-05-20 2021-06-18 全时云商务服务股份有限公司 一种感知共享结果与状态的方法、系统和可读存储介质

Similar Documents

Publication Publication Date Title
JP4503710B2 (ja) 通信方法及び端末
CN110418095B (zh) 虚拟场景的处理方法、装置、电子设备及存储介质
US20050131744A1 (en) Apparatus, system and method of automatically identifying participants at a videoconference who exhibit a particular expression
EP3739573B1 (en) Information processing device, information processing method, and program
CN111556279A (zh) 即时会话的监控方法和通信方法
CN108139988A (zh) 信息处理系统和信息处理方法
CN104135638B (zh) 优化的视频快照
CN111698452A (zh) 在线群体状态反馈方法、系统及装置
US20050131697A1 (en) Speech improving apparatus, system and method
US20230093298A1 (en) Voice conference apparatus, voice conference system and voice conference method
CN113591515A (zh) 专注度处理方法、装置及存储介质
Otsuka Multimodal conversation scene analysis for understanding people’s communicative behaviors in face-to-face meetings
US11227148B2 (en) Information processing apparatus, information processing method, information processing program, and information processing system
CN111476903A (zh) 虚拟交互实现控制方法、装置、计算机设备及存储介质
US11984137B2 (en) Two-way communication support system and storage medium
US11792353B2 (en) Systems and methods for displaying users participating in a communication session
US20210201139A1 (en) Device and method for measuring a characteristic of an interaction between a user and an interaction device
JP7465040B1 (ja) コミュニケーション可視化システム
CN111770300A (zh) 一种会议信息处理的方法及虚拟现实头戴设备
US11799679B2 (en) Systems and methods for creation and application of interaction analytics
WO2022059088A1 (ja) 人物評価情報生成方法
Huang et al. An Investigation on the Effectiveness of Multimodal Fusion and Temporal Feature Extraction in Reactive and Spontaneous Behavior Generative RNN Models for Listener Agents
JP6823367B2 (ja) 画像表示システム、画像表示方法、および画像表示プログラム
US20230291594A1 (en) Systems and Methods for Creation and Application of Interaction Analytics
WO2022079774A1 (ja) 分析装置、分析システム、分析方法、およびプログラムが格納された非一時的なコンピュータ可読媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200922