CN113783709A - 基于会议系统的参会人员监测处理方法、装置、智能终端 - Google Patents
基于会议系统的参会人员监测处理方法、装置、智能终端 Download PDFInfo
- Publication number
- CN113783709A CN113783709A CN202111014854.1A CN202111014854A CN113783709A CN 113783709 A CN113783709 A CN 113783709A CN 202111014854 A CN202111014854 A CN 202111014854A CN 113783709 A CN113783709 A CN 113783709A
- Authority
- CN
- China
- Prior art keywords
- conference
- data
- participants
- image data
- target user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 89
- 238000003672 processing method Methods 0.000 title claims abstract description 25
- 238000000034 method Methods 0.000 claims abstract description 37
- 238000012545 processing Methods 0.000 claims abstract description 19
- 210000005252 bulbus oculi Anatomy 0.000 claims description 39
- 238000004422 calculation algorithm Methods 0.000 claims description 17
- 238000003860 storage Methods 0.000 claims description 13
- 238000005516 engineering process Methods 0.000 claims description 12
- 238000005457 optimization Methods 0.000 claims description 9
- 230000002194 synthesizing effect Effects 0.000 claims description 5
- 238000012163 sequencing technique Methods 0.000 claims description 3
- 230000001939 inductive effect Effects 0.000 claims description 2
- 230000008569 process Effects 0.000 description 13
- 230000009471 action Effects 0.000 description 12
- 230000006870 function Effects 0.000 description 12
- 238000004458 analytical method Methods 0.000 description 7
- 230000033764 rhythmic process Effects 0.000 description 7
- 238000004590 computer program Methods 0.000 description 6
- 230000006872 improvement Effects 0.000 description 6
- 230000006399 behavior Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000004044 response Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 238000011161 development Methods 0.000 description 4
- 210000001508 eye Anatomy 0.000 description 4
- 230000001815 facial effect Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 238000010276 construction Methods 0.000 description 3
- 210000000887 face Anatomy 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- 230000001965 increasing effect Effects 0.000 description 3
- 230000003542 behavioural effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006996 mental state Effects 0.000 description 2
- 230000036651 mood Effects 0.000 description 2
- 238000012216 screening Methods 0.000 description 2
- 238000005267 amalgamation Methods 0.000 description 1
- 230000003796 beauty Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
- H04L12/1822—Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
- G06Q10/06393—Score-carding, benchmarking or key performance indicator [KPI] analysis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Human Resources & Organizations (AREA)
- Entrepreneurship & Innovation (AREA)
- Strategic Management (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Development Economics (AREA)
- Educational Administration (AREA)
- Economics (AREA)
- Tourism & Hospitality (AREA)
- Game Theory and Decision Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Telephonic Communication Services (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了基于会议系统的参会人员监测处理方法、装置、智能终端，其中，上述基于会议系统的参会人员监测处理方法包括：获取收集各应用程序的登录信息，并将收集的与各应用程序对应的登录信息存储在预设的密码管理器；基于所述密码管理器，复制提取与指定应用程序对应的登录信息；控制需登录的所述指定应用程序获取复制的登录信息自动识别填充，通过自动识别填充的登录信息完成登录。与现有技术相比，本发明方案通过摄像头对参会人员行为外貌进行识别，对参会人员的专注度、外貌特征以及性别特征进行综合分析得出会议的目标用户群体，以及输出参会人员的行为信息辅助演讲者进行演讲和控场，提高演讲者的演讲技巧以及提高演讲氛围。
Description
技术领域
本发明涉及会议系统技术领域，尤其涉及的是基于会议系统的参会人员监测处理方法、装置、智能终端。
背景技术
随着电子技术的发展，尤其是摄像头拍摄技术及图像处理技术快速发展，会议系统的使用越来越普及；现有技术的会议系统中、无法实现在会议中对参会成员的专注度进行监测，无法了解每个参会人员参会情况。
因此，现有技术还有待改进和发展。
发明内容
本发明的主要目的在于提供一种基于会议系统的参会人员监测处理方法、装置、智能终端及计算机可读存储介质，旨在解决现有技术的会议系统中、无法实现在会议中对参会成员的专注度进行监测，无法了解每个参会人员参会情况的问题。
为了实现上述目的，本发明第一方面提供一种基于会议系统的参会人员监测处理方法，其中，上述方法包括：
采集获取会议参会人员的图像数据；
基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据，其中，所述专注度数据通过所述图像数据中的人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按预定算法得到；
基于所述参会人员的专注度数据，输出参会人员参会情况统计数据。
可选的，上述基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据的步骤之后包括：
根据参会人员的离场率和专注度数据确定目标用户，并确认参会人员中目标用户的占比数据；
统计目标用户的各特征的占比，得到目标用户画像报告；
输出目标用户画像报告。
可选的，上述基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据的步骤之后还包括：
基于所述会议参会人员的图像数据，确定会议中参会人员的离场率、会议演讲长度偏差数据；
基于确定的会议中参会人员的离场率、专注度数据、会议演讲长度偏差对当前会议进行演讲评分；
基于演讲评分、实时评分及优化建议，合成会议报告并输出。
可选的，上述采集获取会议参会人员的图像数据的步骤包括：
检测到会议开启，每隔预定时间拍摄获取会议全景图像；
基于所述会议全景图像，获取会议参会人员的图像数据。
可选的，上述基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据的步骤包括：
对所述会议参会人员的图像数据进行识别处理；
按时间序列识别每一张图像的人脸及位置；
通过图像识别技术确定当前图像中参会人员信息、中途离场人员信息、人员配饰信息及衣着信息，并对同一人员的人脸朝向、手机屏幕亮度、手势按时间序列归纳排序；
通过图像识别技术从所述图像数据中识别出参会人员的人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标；其中，所述人脸朝向数据包括：摄像头可拍摄范围大于半脸时，判断为人脸正向，否则判断为人脸负向；所述手机屏幕不亮指标为通过检测人脸面前的物体，图像识别手机，分为亮与不亮；如果识别不出手机，则判断为不亮；所述眼球聚焦度数据为识别眼球聚焦朝向，朝向屏幕中心点50％范围则为聚焦，否则为不聚焦；
基于所述人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按预定算法得到所述专注度数据。
可选的，上述基于所述人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按预定算法得到所述专注度数据包括：
通过公式：所述专注度数据＝50％×人脸正向概率+30％×眼球聚焦概率+20％×屏幕不亮概率，得到所述专注度数据。
可选的，上述统计目标用户的各特征的占比，得到目标用户画像报告的步骤包括：
根据所述基于会议参会人员的图像数据，识别计算参会人员离场率，识别参会人员的衣着及配饰、发型、年龄及性别，其中，离场率＝离场次数/拍摄图像次数；
基于所述参会人员离场率，确认会议目标用户；
基于确认会议目标用户，识别目标用户的外貌特征构建画像；
统计目标用户中各外貌特征的占比，生成目标用户画像报告。
本发明第二方面提供一种基于会议系统的参会人员监测处理装置，其中，上述装置包括：
图像获取模块，用于采集获取会议参会人员的图像数据；
专注度识别模块，用于基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据，其中，所述专注度数据通过所述图像数据中的人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按预定算法得到；
输出控制模块，用于基于所述参会人员的专注度数据，输出参会人员参会情况统计数据；
用户画像模块，用于根据参会人员的离场率和专注度数据确定目标用户，并确认参会人员中目标用户的占比数据；统计目标用户的各特征的占比，得到目标用户画像报告；输出目标用户画像报告；
会议报告生成模块，用于基于所述会议参会人员的图像数据，确定会议中参会人员的离场率、会议演讲长度偏差数据；基于确定的会议中参会人员的离场率、专注度数据、会议演讲长度偏差对当前会议进行演讲评分，基于演讲评分、实时评分及优化建议，合成会议报告并输出。
本发明第三方面提供一种智能终端，上述智能终端包括存储器、处理器以及存储在上述存储器上并可在上述处理器上运行的基于会议系统的参会人员监测处理程序，上述基于会议系统的参会人员监测处理程序被上述处理器执行时实现任意一项上述基于会议系统的参会人员监测处理方法的步骤。
本发明第四方面提供一种存储介质，上述存储介质上存储有基于会议系统的参会人员监测处理程序，上述基于会议系统的参会人员监测处理程序被处理器执行时实现任意一项上述基于会议系统的参会人员监测处理方法的步骤。
由上可见，本发明方案中，提出了一种基于会议电视摄像头拍摄图像及图像处理的会议成员专注度监测方法，本发明使会议系统增加了新功能：具有在会议中对参会成员的专注度进行监测的功能，可以及时了解参会人员参会情况，并可根据参会人员专注度提出对会议内容感兴趣的目标用户的用户画像，以帮助会议演讲者调整演讲方式。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。
图1是本发明实施例提供的一种基于会议系统的参会人员监测处理方法的流程示意图；
图2是本发明实施图1中步骤S100的具体流程示意图；
图3是本发明实施图1中步骤S200的具体流程示意图；
图4是本发明实施例提供的基于会议系统的参会人员监测处理过程的具体流程示意图；
图5是本发明实施例提供的一种基于会议系统的参会人员监测处理装置的结构示意图；
图6是本发明实施例提供的一种智能终端的内部结构原理框图。
具体实施方式
以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本发明实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况下，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本发明的描述。
应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
如在本说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当…时”或“一旦”或“响应于确定”或“响应于检测到”。类似的，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述的条件或事件]”或“响应于检测到[所描述条件或事件]”。
下面结合本发明实施例的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
在下面的描述中阐述了很多具体细节以便于充分理解本发明，但是本发明还可以采用其它不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本发明内涵的情况下做类似推广，因此本发明不受下面公开的具体实施例的限制。
随着互联网技术的快速发展，人们对基于互联网的线上会议、线上课程的使用需求日渐增加，当公司员工出差时，或学校因某种因素无法回到学校正常开学时，依然可以通过线上会议以及网课的方式正常进行开会和上课。但由于隔着网络无法像正常开会和上课一样轻易的发现参会人员或学生的走神，以及发现哪个参会人员或学生对自己的演讲内容特别感兴趣。同样的，不仅在线上开会、授课以及演讲时会出现难以辨别听众专注度、感兴趣程度，线下开会、演讲以及授课时演讲者一边进行演讲也无法同时顾及并分析所有人的专注度、感兴趣程度。
为了解决现有技术的问题，本发明方案中，提出了一种基于会议电视摄像头拍摄图像及图像处理的会议成员专注度监测方法，本发明使会议系统增加了新功能：具有在会议中对参会成员的专注度进行监测的功能，可以及时了解参会人员参会情况，并可根据参会人员专注度提出对会议内容感兴趣的目标用户的用户画像，以帮助会议演讲者调整演讲方式。
示例性方法
如图1所示，本发明实施例提供一种基于会议系统的参会人员监测处理方法，具体的，上述方法包括如下步骤：
步骤S100、采集获取会议参会人员的图像数据；
在本实施例中，参会人员监测系统或应用软件通过摄像头采集所述参会人员的图像数据，包括所述参会人员的穿着打扮外貌，以及所述参会人员的动作。所述参会人员的穿着打扮外貌用于判断所述参会人员的性别、年龄等属性为演讲者提供目标用户群体的参考数值，所述参会人员的动作包括面部朝向，手部躯体姿势等行为，通过上述面部朝向判断所述参会人员是否在注视演讲者或屏幕，通过所述手部躯体姿势推断所述参会人员的心境是放松、焦急还是不耐烦，为所述演讲者提供各参会人员的心理状态。
当会议为线上会议时，所述线上会议室控制通过所述参会人员的摄像头开启最大拍摄视角采集各参会人员面部或包括上半身的图像数据；当所述会议为线下会议时，利用广角摄像头或可转动视角摄像头定时或实时的采集所述会议现场参会人员的所述图像数据。通过本方法步骤实现对线上或线下参会人员的实时或定时监测，辅助演讲者对参会人员的听讲情况进行观察。
步骤S200、基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据，其中，所述专注度数据通过所述图像数据中的人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按预定算法得到；
在本实施例中，所述监测系统根据所述图像数据，确定所述图像数据中参会人员的专注度数据，具体包括：通过图像识别技术，识别所述图像数据中每个参会人员的面部朝向数据，当所述参会人员的面部朝向面向屏幕或演讲者时判断所述参会人员相对专注；识别所述图像数据中每个参会人员的眼球聚焦度数据，与所述面部朝向数据类似，当所述眼球聚焦朝向为屏幕或演讲者或其聚焦轨迹在所述演讲者和屏幕间改变时，判断所述参会人员的专注度相对较高；所述手机屏幕不亮指标为判断所述参会人员面部以及面部附近的亮度或手部动作判断用户是否在使用手机或其他类似电子产品，当判断参会人员面部附近亮度较高，或分析所述参会人员手部动作行为判断所述参会人员正在使用手机，则认为所述参会人员专注度相对较低。除此之外，还可通过其他分析所述参会人员行为动作注意力的方式对参会人员的专注度数据进行采集。在本方法步骤中，通过根据实时或定时回传的所述图像数据分析得到所述参会人员的专注度数据，辅助演讲者对演讲或会议的节奏进行把控，或帮助授课老师找出上课注意力不集中同学的，提高上课效率。
步骤S300、基于所述参会人员的专注度数据，输出参会人员参会情况统计数据。
在本实施例中，所述监测系统基于分析得到的所述专注度数据，输出所述参会人员的参会情况的统计数据，并发送给会议、演讲或网课的演讲者。所述统计数据例如当前专注听讲的参会人员的占比，专注听讲参会人员中在各性别、年龄段、衣着品味人员中的占比，即通过数据筛选得到目标用户。返回的频率根据演讲者需求设置，当所述演讲者仅希望知道一场演讲结束后，自己演讲内容的目标用户群体以及演讲过程中用户专注度变化，即设置在演讲过后通过在所述监测系统中手动调用的方式向所述演讲者反馈；当所述演讲者希望在演讲过程中持续的接收到所述参会人员的专注状态反馈，对应调整演讲节奏，则设置所述监测系统实时或固定较短的间隔时间内返回一次所述参会情况统计数据。
当所述演讲为线上演讲时，所述系统通过软件应用方式在所述演讲者的电脑上进行显示，例如使用饼状图或柱状图的方式显示当前高专注度参会人员的比例，以及显示高专注度参会人员的特征，及时捕捉到目标用户群体，并变更演讲风格抓住目标用户群体的注意力；当所述演讲为线下演讲时，所述系统可通过无线传输的方式将所述参会情况统计数据发送至所述演讲者佩戴的耳机、智能眼镜或其他随身智能设备上。在本方法步骤中，所述监测系统通过将所述参会情况统计数据传输给演讲者的方式提高所述演讲者把控演讲节奏，提高演讲技巧，为演讲者与参会人员提供更好的演讲和听讲体验。
另外，通过对所述图像的分析除了可分析得到所述参会人员的专注度情况，还可根据专注度较高的参会人员的外貌特征以及穿着打扮输出对演讲、会议内容感兴趣的目标用户的用户画像，包括目标用户中占比较大的性别、年龄段、衣着打扮风格等数据，进一步为定位以及获取目标用户提供有效帮助。
由上可见，本发明实施例提供的基于会议系统的参会人员监测处理方法中，提出了一种基于会议电视或会议现场摄像头拍摄图像及图像处理的会议成员专注度监测方法，本发明使会议系统增加了新功能：具有在会议中对参会成员的专注度进行监测的功能，可以及时了解参会人员参会情况，以帮助会议演讲者调整演讲方式。
具体的，在本实施例中，当所述会议为线下会议时，所述监测系统通过广角摄像头获取会议参会人员的图像数据，当上述获取参会人员图像数据的摄像头为其他设备时，可参照本实施例中的具体方案。
在一种应用场景中，当演讲会议开始后，所述参会人员监测系统控制开启摄像头采集获取含有会议参会人员的图像数据。
具体的，在本实施例中，如图2所示，上述步骤S100包括：
步骤S101、检测到会议开启，每隔预定时间拍摄获取会议全景图像；
步骤S102、基于所述会议全景图像，获取会议参会人员的图像数据。
举例说明，在某演说家的演讲会上，当所述参会人员监测系统检测到会议开启的操作指令，控制开启用于拍摄会场参会人员的广角摄像头，并控制实时或每隔预定时间对所述会议厅内包含所有参会人员的全景图像进行拍照，获取所有演讲会参会人员的图像数据，当所述会议厅较大时，设置所述广角摄像头的运动路径和角度，控制每隔预定时间例如十秒为一循环获得一次含有所有参会人员图像数据的全景图像，所述图像数据用于提取各参会人员的外貌穿着、动作表情以得到对应各参会人员的性别、年龄属性以及对会议的关注程度。通过本步骤方法实现每隔预定时间获取一次所有参会人员的图像信息，以确保对每个参会人员进行分析，得到参会人员对会议的关注度以及整体演讲氛围，为所述演说家提供演讲帮助。
在一种应用场景中，所述监测系统基于拍摄得到的参会人员图像数据，分析用于表征所述参会人员听讲专注度的专注度数据，所述专注度数据通过对所述图像数据中的参会人员的人脸朝向数据、眼球聚焦数据以及屏幕是否亮屏等指标分析得到。
具体的，如图3所示，上述步骤S200包括：
步骤S201、对所述会议参会人员的图像数据进行识别处理；
步骤S202、按时间序列识别每一张图像的人脸及位置；
步骤S203、通过图像识别技术确定当前图像中参会人员信息、中途离场人员信息、人员配饰信息及衣着信息，并对同一人员的人脸朝向、手机屏幕亮度、手势按时间序列归纳排序；
步骤S204、通过图像识别技术从所述图像数据中识别出参会人员的人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标；其中，所述人脸朝向数据包括：摄像头可拍摄范围大于半脸时，判断为人脸正向，否则判断为人脸负向；所述手机屏幕不亮指标为通过检测人脸面前的物体，图像识别手机，分为亮与不亮；如果识别不出手机，则判断为不亮；所述眼球聚焦度数据为识别眼球聚焦朝向，朝向屏幕中心点50％范围则为聚焦，否则为不聚焦；
步骤S205、基于所述人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按预定算法得到所述专注度数据。
具体的，所述基于所述人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按预定算法得到所述专注度数据包括：
通过公式：所述专注度数据＝50％×人脸正向概率+30％×眼球聚焦概率+20％×屏幕不亮概率，得到所述专注度数据。
举例说明，所述监测系统控制对获取的所述图像数据进行识别处理，查找所述图像数据中的参会人员部分数据，并按照时间顺序对每一张图像中的对应参会人员的人脸以及位置进行追踪和分析，通过所述分析确定每个参会人员的动作以及行径记录，包括离场次数、服饰信息、平均的人脸朝向、手机屏幕亮度以及手势。其中所述人脸朝向数据用于判断所述参会人员是否处于听讲状态，具体的，当所述摄像头拍摄得到的图像数据中，拍摄到所述用户的人脸面积超过一半面向摄像头则判断所述参会人员的脸面向屏幕或演讲者；所述眼球聚焦朝向为通过分析所述图像数据中参会人员的眼球聚焦位置，判断所述参会人员是否看向所述屏幕或所述演讲者，具体的，当根据算法判断所述眼球聚焦朝向为屏幕中心点50％范围内则判断为聚焦即处于听讲状态，反之判断为不聚焦、未听讲状态；所述手机屏幕不亮指标为，通过检测所述参会人员人脸位置前方物体是否为手机以及亮屏或灭屏，分析所述参会人员是否在使用手机，是否认真听讲。
通过上述人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按照预定算法得到所述专注度数据，具体的，上述预定算法为：专注度数据＝50％×人脸正向概率+30％×眼球聚焦概率+20％×屏幕不亮概率，通过人脸正向面对屏幕的时间、眼球聚焦时间以及屏幕不亮时间结合各部分相对应比值得到一概率值。例如当参会人员A人脸正向面对屏幕、眼球聚焦向屏幕或演讲者以及手机屏幕不亮指标均占50％的时间时，即所述参会人员A的专注度数据为50％，同时所述专注度数据的范围为0％-100％，且考虑到参会人员实际上无法100％集中注意力在演讲上，故判断当所述参会人员的专注度数据超过70％则认为该参会人员在认真听讲。通过上述将参会人员的听讲注意力进行量化得到数据化的听讲氛围，使演讲者更直观的了解当前参会人员的听讲热情。
进一步地，所述基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据的步骤之后包括：
根据参会人员的离场率和专注度数据确定目标用户，并确认参会人员中目标用户的占比数据；
统计目标用户的各特征的占比，得到目标用户画像报告；
输出目标用户画像报告。
其中，所述统计目标用户的各特征的占比，得到目标用户画像报告的步骤包括：
根据所述基于会议参会人员的图像数据，识别计算参会人员离场率；
基于所述参会人员离场率，确认会议目标用户；
基于确认会议目标用户，识别目标用户的外貌特征构建画像；
统计目标用户中各外貌特征的占比，生成目标用户画像报告。
本发明在一种应用场景中，通过所述参会人员的图像数据，识别各参会人员的立场次数离场率等参数，并进一步的结合参会人员的外貌特征自动生成目标用户画像报告。
举例说明，将所述参会人员的性别、年龄、发型以及衣着配饰进行识别，将上述特征登记为同一参会人员的外貌特征，同时对所述参会人员的离场率进行分析，所述离场率为拍摄到该参会人员不在坐席上的图像的次数除以演讲会开始以来总的拍摄次数，即离场率＝离场次数/拍摄图像次数。基于所述获取的参会人员的离场率，确认所述演讲会的目标用户，例如所述监测系统采集所有人的离场率，取最低的前20％的参会人员为目标用户；还可通过取所述专注度数据最高的20％的参会人员为所述目标用户；为更进一步对真正认真听讲的目标用户进行判断，结合所述离场率以及专注度数据得到双指标都较优秀的参会人员为所述目标用户。并对所述目标用户的外貌特征构建画像进行数据统计，所述外貌特征构建画像即为所述参会人员的外貌、服饰、个人特征，例如配饰、发型、年龄性别等数据。例如当所述演讲者的演讲内容为主机游戏相关时，所述目标用户中男性占72％、且其中占有比例最高的年龄段为18-25岁，则当所有外貌特征构建画像数据统计完成后，所述数据得出的结论为，该主机游戏演讲以及相关产品的目标用户为18-25岁男性，服饰偏运动装，不戴眼镜的较多。同时将上述数据输出并传输至所述演讲者的随身穿戴设备上，演讲者在演讲时根据上述目标用户的目标用户画像报告与参会人员聊一些相关内容，通过增加与所述目标用户互动的形式带来更好的演讲气氛。
在一种应用场景中，所述监测系统综合根据上述步骤中参会人员的专注度数据、离场率、会议长度偏差数据等对整体演讲或会议进行评分，实时分析优化建议并合成会议报告输出。
举例说明，所述监测系统基于所述摄像头拍摄的所述参会人员的图像数据以及演讲者的演讲内容，确定参会人员的离场率、专注度数据以及演讲长度偏差，所述演讲长度偏差为预定演讲进程与当前演讲进程的对比，当演讲者演讲到同一位置内容时所花时间较短，则判断所述演讲较快；当演讲者演讲到同一内容位置所花时间与预定时间偏差越大则判断所述演讲长度偏差越大。所述离场率以及专注度数据的获取方法在上述步骤中已进行描述，再次不再过多赘述。所述监测系统根据上述获取的参会人员离场率、专注度数据以及演讲长度偏差进行评分得到实时评分以及演讲评分。所述实时评分为仅根据参会人员听讲状态得出的评分，具体计算方法包括实时评分＝(1-离场率)×3+专注度×5，满分八分；所述演讲评分为结合参会人员听讲状态以及演讲者演讲状态得到的评分，其具体的计算方法包括
满分为十分。同时所述监测系统通过对数据进行智能分析得出会议改进点，例如所述监测系统对演讲进行实时分析得出的改进点包括提示演讲者离场率较高，用户玩手机的行为较多等；若所述监测系统在演讲结束后对整体演讲作出评价得出改进点则根据会议过程中的各数据的变化分为演讲开始期间、演讲中期、演讲末期提出阶段性优化建议，例如当演讲者使用PPT演讲到某一页时实时评分低4分，则记录该页数并在优化建议中指出该页PPT需继续斟酌的。同时将上述演讲评分、实时评分以及优化建议合成会议报告实时或间隔性的输出。通过本步骤方法，演讲者不仅可以实时获取到更详细的参会人员听讲数据以及自身演讲速度数据，还可根据智能分析的优化建议实时了解到演讲的不足并做出反应，在演讲结束后还可根据演讲过程中的数据分析反思演讲过程中的薄弱点，提高演讲技巧。
在本实施例中，还基于一种应用场景对上述基于会议系统的参会人员监测处理方法进行具体说明，图4是本发明实施例提供的基于会议系统的参会人员监测处理过程的具体流程示意图，其步骤包括：
步骤S10、开始，进入步骤S11；
步骤S11、摄像头采集参会人员的图像数据，进入步骤S12；
步骤S12、控制对所述图像数据进行处理，进入步骤S13；
步骤S13、根据所述数据对参会人员的专注度进行分析判断，得到会议中专注听见的参会用户的数据，进入步骤S14；
步骤S14、对专注度高的参会人员的用户画像，即外貌特征进行采集，手机高专注度参会人员所拥有的外貌特征，进入步骤S15；
步骤S15、根据所述图像数据以及收集演讲者的演讲数据分析得到演讲评分，所述演讲数据包括演讲的进程节奏，进入步骤S16；
步骤S16、将上述分析得出的数据以及报告进行输出，进入步骤S20；
步骤S20、结束。
由上可见，在本发明具体应用实施例中，用于监测参会人员的监测系统控制摄像头采集参会人员的图像数据，并将获取的含有参会人员外貌信息的图像进行数据处理，通过所述图像判断各参会人员的听讲专注度，并综合得到参加会议整体人员的专注度数据。进一步的，提取专注度较高的参会人员的用户图像，包括性别、外貌以及衣着喜好，并通过统计分析得到高专注度参会人员的共同外貌特征。进一步的，通过对所述参会人员的图像数据进行分析得到演讲者的演讲评分，最后将上述信息进行合成并输出。
示例性设备
如图5中所示，对应于上述基于会议系统的参会人员监测处理方法，本发明实施例还提供一种基于会议系统的参会人员监测处理装置，上述基于会议系统的参会人员监测处理装置包括：
图像获取模块510，用于采集获取会议参会人员的图像数据；
在本实施例中，参会人员监测系统或应用软件通过摄像头采集所述参会人员的图像数据，包括所述参会人员的穿着打扮外貌，以及所述参会人员的动作。所述参会人员的穿着打扮外貌用于判断所述参会人员的性别、年龄等属性为演讲者提供目标用户群体的参考数值，所述参会人员的动作包括面部朝向，手部躯体姿势等行为，通过上述面部朝向判断所述参会人员是否在注视演讲者或屏幕，通过所述手部躯体姿势推断所述参会人员的心境是放松、焦急还是不耐烦，为所述演讲者提供各参会人员的心理状态。
当会议为线上会议时，所述线上会议室控制通过所述参会人员的摄像头开启最大拍摄视角采集各参会人员面部或包括上半身的图像数据；当所述会议为线下会议时，利用广角摄像头或可转动视角摄像头定时或实时的采集所述会议现场参会人员的所述图像数据。通过本方法步骤实现对线上或线下参会人员的实时或定时监测，辅助演讲者对参会人员的听讲情况进行观察。
专注度识别模块520，用于基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据，其中，所述专注度数据通过所述图像数据中的人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按预定算法得到；
在本实施例中，所述监测系统根据所述图像数据，确定所述图像数据中参会人员的专注度数据，具体包括：通过图像识别技术，识别所述图像数据中每个参会人员的面部朝向数据，当所述参会人员的面部朝向面向屏幕或演讲者时判断所述参会人员相对专注；识别所述图像数据中每个参会人员的眼球聚焦度数据，与所述面部朝向数据类似，当所述眼球聚焦朝向为屏幕或演讲者或其聚焦轨迹在所述演讲者和屏幕间改变时，判断所述参会人员的专注度相对较高；所述手机屏幕不亮指标为判断所述参会人员面部以及面部附近的亮度或手部动作判断用户是否在使用手机或其他类似电子产品，当判断参会人员面部附近亮度较高，或分析所述参会人员手部动作行为判断所述参会人员正在使用手机，则认为所述参会人员专注度相对较低。除此之外，还可通过其他分析所述参会人员行为动作注意力的方式对参会人员的专注度数据进行采集。在本方法步骤中，通过根据实时或定时回传的所述图像数据分析得到所述参会人员的专注度数据，辅助演讲者对演讲或会议的节奏进行把控，或帮助授课老师找出上课注意力不集中同学的，提高上课效率。
输出控制模块530，用于基于所述参会人员的专注度数据，输出参会人员参会情况统计数据；
在本实施例中，所述监测系统基于分析得到的所述专注度数据，输出所述参会人员的参会情况的统计数据，并发送给会议、演讲或网课的演讲者。所述统计数据例如当前专注听讲的参会人员的占比，专注听讲参会人员中在各性别、年龄段、衣着品味人员中的占比，即通过数据筛选得到目标用户。返回的频率根据演讲者需求设置，当所述演讲者仅希望知道一场演讲结束后，自己演讲内容的目标用户群体以及演讲过程中用户专注度变化，即设置在演讲过后通过在所述监测系统中手动调用的方式向所述演讲者反馈；当所述演讲者希望在演讲过程中持续的接收到所述参会人员的专注状态反馈，对应调整演讲节奏，则设置所述监测系统实时或固定较短的间隔时间内返回一次所述参会情况统计数据。
当所述演讲为线上演讲时，所述系统通过软件应用方式在所述演讲者的电脑上进行显示，例如使用饼状图或柱状图的方式显示当前高专注度参会人员的比例，以及显示高专注度参会人员的特征，及时捕捉到目标用户群体，并变更演讲风格抓住目标用户群体的注意力；当所述演讲为线下演讲时，所述系统可通过无线传输的方式将所述参会情况统计数据发送至所述演讲者佩戴的耳机、智能眼镜或其他随身智能设备上。在本方法步骤中，所述监测系统通过将所述参会情况统计数据传输给演讲者的方式提高所述演讲者把控演讲节奏，提高演讲技巧，为演讲者与参会人员提供更好的演讲和听讲体验。
用户画像模块540，用于根据参会人员的离场率和专注度数据确定目标用户，并确认参会人员中目标用户的占比数据；统计目标用户的各特征的占比，得到目标用户画像报告；输出目标用户画像报告；
在本实施例中，基于所述参会人员的专注度数据，确认参会人员中高专注度的目标用户以及所述目标用户的占比，进一步的统计所述目标用户的各特征的占比，例如在一次美容产品的演讲会上，高专注度用户中高占比性别为女，而高占比年龄为25-30岁且长头发较多，通过上述统计计算方法得到所述目标用户的画像报告，并输出。通过本方法步骤，自动分析得到演讲会参会人员中的目标用户以及目标用户的特征，有助于演讲会的顺利进行以及相应的推广。
会议报告生成模块550，用于基于所述会议参会人员的图像数据，确定会议中参会人员的离场率、会议演讲长度偏差数据；基于确定的会议中参会人员的离场率、专注度数据、会议演讲长度偏差对当前会议进行演讲评分，基于演讲评分、实时评分及优化建议，合成会议报告并输出。
在本实施例中，通过拍摄得到的会议参会人员的图像数据，确定参会人员的离场率、会议演讲长度偏差、专注度等数据，基于所述数据对演讲或会议进行评分、数据反馈合并以及输出，得到规范化、量化的演讲效果反馈，有助于使用者对演讲会进行重复学习和改进，为之后的演讲和推广做出积极地改进，提高演讲者的演讲技巧、效果以及有助于演讲会的推广。
由上可见，本发明提供的基于会议系统的参会人员监测处理装置使会议系统增加了新功能：具有在会议中对参会成员的专注度进行监测的功能，可以及时了解参会人员参会情况，并可根据参会人员专注度提出对会议内容感兴趣的目标用户的用户画像，以帮助会议演讲者调整演讲方式。
具体的，本实施例中，上述基于会议系统的参会人员监测处理装置的各模块的具体功能可以参照上述基于会议系统的参会人员监测处理方法中的对应描述，在此不再赘述。
基于上述实施例，本发明还提供了一种智能终端，其原理框图可以如图6所示。上述智能终端包括通过系统总线连接的处理器、存储器、网络接口。其中，该智能终端的处理器用于提供计算和控制能力。该智能终端的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和基于会议系统的参会人员监测处理程序。该内存储器为非易失性存储介质中的操作系统和基于会议系统的参会人员监测处理程序的运行提供环境。该智能终端的网络接口用于与外部的终端通过网络连接通信。该基于会议系统的参会人员监测处理程序被处理器执行时实现上述任意一种基于会议系统的参会人员监测处理方法的步骤。
本领域技术人员可以理解，图6中示出的原理框图，仅仅是与本发明方案相关的部分结构的框图，并不构成对本发明方案所应用于其上的智能终端的限定，具体的智能终端可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，提供了一种智能终端，上述智能终端包括存储器、处理器以及存储在上述存储器上并可在上述处理器上运行的基于会议系统的参会人员监测处理程序，上述基于会议系统的参会人员监测处理程序被上述处理器执行时进行以下操作指令：
采集获取会议参会人员的图像数据；
基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据，其中，所述专注度数据通过所述图像数据中的人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按预定算法得到；
基于所述参会人员的专注度数据，输出参会人员参会情况统计数据。
本发明实施例还提供一种计算机可读存储介质，上述计算机可读存储介质上存储有基于会议系统的参会人员监测处理程序，上述基于会议系统的参会人员监测处理程序被处理器执行时实现本发明实施例提供的任意一种基于会议系统的参会人员监测处理方法的步骤。
应理解，上述实施例中各步骤的序号大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将上述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。上述系统中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各实例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟是以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中，应该理解到，所揭露的装置/终端设备和方法，可以通过其它的方式实现。例如，以上所描述的装置/终端设备实施例仅仅是示意性的，例如，上述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以由另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。
上述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，上述计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，上述计算机程序包括计算机程序代码，上述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。上述计算机可读介质可以包括：能够携带上述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，RandomAccess Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，上述计算机可读存储介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减。
以上所述实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解；其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不是相应技术方案的本质脱离本发明各实施例技术方案的精神和范围，均应包含在本发明的保护范围之内。
Claims (10)
1.一种基于会议系统的参会人员监测处理方法，其特征在于，所述方法包括：
采集获取会议参会人员的图像数据；
基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据，其中，所述专注度数据通过所述图像数据中的人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按预定算法得到；
基于所述参会人员的专注度数据，输出参会人员参会情况统计数据。
2.根据权利要求1所述的基于会议系统的参会人员监测处理方法，其特征在于，所述基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据的步骤之后包括：
根据参会人员的离场率和专注度数据确定目标用户，并确认参会人员中目标用户的占比数据；
统计目标用户的各特征的占比，得到目标用户画像报告；
输出目标用户画像报告。
3.根据权利要求1所述的基于会议系统的参会人员监测处理方法，其特征在于，所述基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据的步骤之后还包括：
基于所述会议参会人员的图像数据，确定会议中参会人员的离场率、会议演讲长度偏差数据；
基于确定的会议中参会人员的离场率、专注度数据、会议演讲长度偏差对当前会议进行演讲评分；
基于演讲评分、实时评分及优化建议，合成会议报告并输出。
4.根据权利要求1所述的基于会议系统的参会人员监测处理方法，其特征在于，所述采集获取会议参会人员的图像数据的步骤包括：
检测到会议开启，每隔预定时间拍摄获取会议全景图像；
基于所述会议全景图像，获取会议参会人员的图像数据。
5.根据权利要求1所述的基于会议系统的参会人员监测处理方法，其特征在于，所述基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据的步骤包括：
对所述会议参会人员的图像数据进行识别处理；
按时间序列识别每一张图像的人脸及位置；
通过图像识别技术确定当前图像中参会人员信息、中途离场人员信息、人员配饰信息及衣着信息，并对同一人员的人脸朝向、手机屏幕亮度、手势按时间序列归纳排序；
通过图像识别技术从所述图像数据中识别出参会人员的人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标；其中，所述人脸朝向数据包括：摄像头可拍摄范围大于半脸时，判断为人脸正向，否则判断为人脸负向；所述手机屏幕不亮指标为通过检测人脸面前的物体，图像识别手机，分为亮与不亮；如果识别不出手机，则判断为不亮；所述眼球聚焦度数据为识别眼球聚焦朝向，朝向屏幕中心点50％范围则为聚焦，否则为不聚焦；
基于所述人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按预定算法得到所述专注度数据。
6.根据权利要求5所述的基于会议系统的参会人员监测处理方法，其特征在于，所述基于所述人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按预定算法得到所述专注度数据包括：
通过公式：所述专注度数据＝50％×人脸正向概率+30％×眼球聚焦概率+20％×屏幕不亮概率，得到所述专注度数据。
7.根据权利要求2所述的基于会议系统的参会人员监测处理方法，其特征在于，所述统计目标用户的各特征的占比，得到目标用户画像报告的步骤包括：
根据所述基于会议参会人员的图像数据，识别计算参会人员离场率；
基于所述参会人员离场率，确认会议目标用户；
基于确认会议目标用户，识别目标用户的外貌特征构建画像；
统计目标用户中各外貌特征的占比，生成目标用户画像报告。
8.一种基于会议系统的参会人员监测处理装置，其特征在于，所述装置包括：
图像获取模块，用于采集获取会议参会人员的图像数据；
专注度识别模块，用于基于会议参会人员的图像数据，确定所述图像数据中的参会人员的专注度数据，其中，所述专注度数据通过所述图像数据中的人脸朝向数据、眼球聚焦度数据、手机屏幕不亮指标按预定算法得到；
输出控制模块，用于基于所述参会人员的专注度数据，输出参会人员参会情况统计数据；
用户画像模块，用于根据参会人员的离场率和专注度数据确定目标用户，并确认参会人员中目标用户的占比数据；统计目标用户的各特征的占比，得到目标用户画像报告；输出目标用户画像报告；
会议报告生成模块，用于基于所述会议参会人员的图像数据，确定会议中参会人员的离场率、会议演讲长度偏差数据；基于确定的会议中参会人员的离场率、专注度数据、会议演讲长度偏差对当前会议进行演讲评分，基于演讲评分、实时评分及优化建议，合成会议报告并输出。
9.一种智能终端，其特征在于，所述智能终端包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的基于会议系统的参会人员监测处理程序，所述基于会议系统的参会人员监测处理程序被所述处理器执行时实现如权利要求1-7任意一项所述基于会议系统的参会人员监测处理方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有基于会议系统的参会人员监测处理程序，所述基于会议系统的参会人员监测处理程序被处理器执行时实现如权利要求1-7任意一项所述基于会议系统的参会人员监测处理方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111014854.1A CN113783709B (zh) | 2021-08-31 | 2021-08-31 | 基于会议系统的参会人员监测处理方法、装置、智能终端 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111014854.1A CN113783709B (zh) | 2021-08-31 | 2021-08-31 | 基于会议系统的参会人员监测处理方法、装置、智能终端 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113783709A true CN113783709A (zh) | 2021-12-10 |
| CN113783709B CN113783709B (zh) | 2024-03-19 |
Family
ID=78840261
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111014854.1A Active CN113783709B (zh) | 2021-08-31 | 2021-08-31 | 基于会议系统的参会人员监测处理方法、装置、智能终端 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113783709B (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114826804A (zh) * | 2022-06-30 | 2022-07-29 | 天津大学 | 一种基于机器学习的远程会议质量监控的方法和系统 |
| CN116665111A (zh) * | 2023-07-28 | 2023-08-29 | 深圳前海深蕾半导体有限公司 | 基于视频会议系统的注意力分析方法、系统及存储介质 |
Citations (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007102344A (ja) * | 2005-09-30 | 2007-04-19 | Fujifilm Corp | 自動評価装置、プログラムおよび方法 |
| JP2007213282A (ja) * | 2006-02-09 | 2007-08-23 | Seiko Epson Corp | 講演者支援装置および講演者支援方法 |
| KR20140132231A (ko) * | 2013-05-07 | 2014-11-17 | 삼성전자주식회사 | 영상 회의 시 단말기를 제어하기 위한 방법, 장치 및 기록 매체 |
| CN104820863A (zh) * | 2015-03-27 | 2015-08-05 | 北京智慧图科技有限责任公司 | 一种消费者画像生成方法及装置 |
| JP2016032261A (ja) * | 2014-07-30 | 2016-03-07 | Kddi株式会社 | 集中度推定装置、方法及びプログラム |
| JP2017140107A (ja) * | 2016-02-08 | 2017-08-17 | Kddi株式会社 | 集中度の推定装置 |
| CN107918755A (zh) * | 2017-03-29 | 2018-04-17 | 广州思涵信息科技有限公司 | 一种基于人脸识别技术的实时专注度分析方法及系统 |
| CN109413366A (zh) * | 2018-12-24 | 2019-03-01 | 杭州欣禾工程管理咨询有限公司 | 一种基于状态管理的无纸化智慧视频会议系统 |
| CN109522815A (zh) * | 2018-10-26 | 2019-03-26 | 深圳博为教育科技有限公司 | 一种专注度评估方法、装置及电子设备 |
| CN110647807A (zh) * | 2019-08-14 | 2020-01-03 | 中国平安人寿保险股份有限公司 | 异常行为确定方法、装置、计算机设备和存储介质 |
| US20200160278A1 (en) * | 2018-11-15 | 2020-05-21 | International Business Machines Corporation | Cognitive scribe and meeting moderator assistant |
| WO2020118669A1 (zh) * | 2018-12-11 | 2020-06-18 | 深圳先进技术研究院 | 检测学生专注度的方法、计算机存储介质及计算机设备 |
| CN111325082A (zh) * | 2019-06-28 | 2020-06-23 | 杭州海康威视系统技术有限公司 | 一种人员专注度分析方法及装置 |
| CN111444389A (zh) * | 2020-03-27 | 2020-07-24 | 焦点科技股份有限公司 | 一种基于目标检测的会议视频分析方法及系统 |
| CN111652648A (zh) * | 2020-06-03 | 2020-09-11 | 陈包容 | 智能生成个性化组合促销方案的方法及具有该方法的系统 |
| CN111698300A (zh) * | 2020-05-28 | 2020-09-22 | 北京联合大学 | 一种在线教育系统 |
| CN111815407A (zh) * | 2020-07-02 | 2020-10-23 | 杭州屏行视界信息科技有限公司 | 一种搭建用户画像的方法及装置 |
| CN112465543A (zh) * | 2020-11-25 | 2021-03-09 | 宁波阶梯教育科技有限公司 | 一种用户画像生成方法、设备和计算机存储介质 |
| CN112565669A (zh) * | 2021-02-18 | 2021-03-26 | 全时云商务服务股份有限公司 | 一种网络视频会议中度量参会人注意力的方法 |
| CN112749677A (zh) * | 2021-01-21 | 2021-05-04 | 高新兴科技集团股份有限公司 | 玩手机行为识别方法、装置和电子设备 |
| CN112801052A (zh) * | 2021-04-01 | 2021-05-14 | 北京百家视联科技有限公司 | 一种用户专注度检测方法及用户专注度检测系统 |
| CN113034319A (zh) * | 2020-12-24 | 2021-06-25 | 广东国粒教育技术有限公司 | 一种在教学管理中的用户行为数据处理方法及装置、电子设备和存储介质 |
| CN113077142A (zh) * | 2021-03-31 | 2021-07-06 | 国家电网有限公司 | 智能学员画像方法、系统及终端设备 |
| CN113095259A (zh) * | 2021-04-20 | 2021-07-09 | 上海松鼠课堂人工智能科技有限公司 | 远程在线课程教学管理方法 |
| CN113256129A (zh) * | 2021-06-01 | 2021-08-13 | 南京奥派信息产业股份公司 | 一种专注度分析方法、系统及计算机可读存储介质 |
| CN113283334A (zh) * | 2021-05-21 | 2021-08-20 | 浙江师范大学 | 一种课堂专注度分析方法、装置和存储介质 |
-
2021
- 2021-08-31 CN CN202111014854.1A patent/CN113783709B/zh active Active
Patent Citations (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007102344A (ja) * | 2005-09-30 | 2007-04-19 | Fujifilm Corp | 自動評価装置、プログラムおよび方法 |
| JP2007213282A (ja) * | 2006-02-09 | 2007-08-23 | Seiko Epson Corp | 講演者支援装置および講演者支援方法 |
| KR20140132231A (ko) * | 2013-05-07 | 2014-11-17 | 삼성전자주식회사 | 영상 회의 시 단말기를 제어하기 위한 방법, 장치 및 기록 매체 |
| JP2016032261A (ja) * | 2014-07-30 | 2016-03-07 | Kddi株式会社 | 集中度推定装置、方法及びプログラム |
| CN104820863A (zh) * | 2015-03-27 | 2015-08-05 | 北京智慧图科技有限责任公司 | 一种消费者画像生成方法及装置 |
| JP2017140107A (ja) * | 2016-02-08 | 2017-08-17 | Kddi株式会社 | 集中度の推定装置 |
| CN107918755A (zh) * | 2017-03-29 | 2018-04-17 | 广州思涵信息科技有限公司 | 一种基于人脸识别技术的实时专注度分析方法及系统 |
| CN109522815A (zh) * | 2018-10-26 | 2019-03-26 | 深圳博为教育科技有限公司 | 一种专注度评估方法、装置及电子设备 |
| US20200160278A1 (en) * | 2018-11-15 | 2020-05-21 | International Business Machines Corporation | Cognitive scribe and meeting moderator assistant |
| WO2020118669A1 (zh) * | 2018-12-11 | 2020-06-18 | 深圳先进技术研究院 | 检测学生专注度的方法、计算机存储介质及计算机设备 |
| CN109413366A (zh) * | 2018-12-24 | 2019-03-01 | 杭州欣禾工程管理咨询有限公司 | 一种基于状态管理的无纸化智慧视频会议系统 |
| CN111325082A (zh) * | 2019-06-28 | 2020-06-23 | 杭州海康威视系统技术有限公司 | 一种人员专注度分析方法及装置 |
| CN110647807A (zh) * | 2019-08-14 | 2020-01-03 | 中国平安人寿保险股份有限公司 | 异常行为确定方法、装置、计算机设备和存储介质 |
| CN111444389A (zh) * | 2020-03-27 | 2020-07-24 | 焦点科技股份有限公司 | 一种基于目标检测的会议视频分析方法及系统 |
| CN111698300A (zh) * | 2020-05-28 | 2020-09-22 | 北京联合大学 | 一种在线教育系统 |
| CN111652648A (zh) * | 2020-06-03 | 2020-09-11 | 陈包容 | 智能生成个性化组合促销方案的方法及具有该方法的系统 |
| CN111815407A (zh) * | 2020-07-02 | 2020-10-23 | 杭州屏行视界信息科技有限公司 | 一种搭建用户画像的方法及装置 |
| CN112465543A (zh) * | 2020-11-25 | 2021-03-09 | 宁波阶梯教育科技有限公司 | 一种用户画像生成方法、设备和计算机存储介质 |
| CN113034319A (zh) * | 2020-12-24 | 2021-06-25 | 广东国粒教育技术有限公司 | 一种在教学管理中的用户行为数据处理方法及装置、电子设备和存储介质 |
| CN112749677A (zh) * | 2021-01-21 | 2021-05-04 | 高新兴科技集团股份有限公司 | 玩手机行为识别方法、装置和电子设备 |
| CN112565669A (zh) * | 2021-02-18 | 2021-03-26 | 全时云商务服务股份有限公司 | 一种网络视频会议中度量参会人注意力的方法 |
| CN113077142A (zh) * | 2021-03-31 | 2021-07-06 | 国家电网有限公司 | 智能学员画像方法、系统及终端设备 |
| CN112801052A (zh) * | 2021-04-01 | 2021-05-14 | 北京百家视联科技有限公司 | 一种用户专注度检测方法及用户专注度检测系统 |
| CN113095259A (zh) * | 2021-04-20 | 2021-07-09 | 上海松鼠课堂人工智能科技有限公司 | 远程在线课程教学管理方法 |
| CN113283334A (zh) * | 2021-05-21 | 2021-08-20 | 浙江师范大学 | 一种课堂专注度分析方法、装置和存储介质 |
| CN113256129A (zh) * | 2021-06-01 | 2021-08-13 | 南京奥派信息产业股份公司 | 一种专注度分析方法、系统及计算机可读存储介质 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114826804A (zh) * | 2022-06-30 | 2022-07-29 | 天津大学 | 一种基于机器学习的远程会议质量监控的方法和系统 |
| CN116665111A (zh) * | 2023-07-28 | 2023-08-29 | 深圳前海深蕾半导体有限公司 | 基于视频会议系统的注意力分析方法、系统及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113783709B (zh) | 2024-03-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107203953B (zh) | 一种基于互联网、表情识别和语音识别的教学系统及其实现方法 | |
| US11836631B2 (en) | Smart desk having status monitoring function, monitoring system server, and monitoring method | |
| US11433275B2 (en) | Video streaming with multiplexed communications and display via smart mirrors | |
| US20220392625A1 (en) | Method and system for an interface to provide activity recommendations | |
| CN113783709B (zh) | 基于会议系统的参会人员监测处理方法、装置、智能终端 | |
| CN110890140A (zh) | 基于虚拟现实的自闭症康复训练及能力评估系统及方法 | |
| CN108363706A (zh) | 人机对话交互的方法和装置、用于人机对话交互的装置 | |
| CN107945848A (zh) | 一种健身指导实现方法、装置、设备和介质 | |
| CN107480766B (zh) | 多模态虚拟机器人的内容生成的方法和系统 | |
| US10580434B2 (en) | Information presentation apparatus, information presentation method, and non-transitory computer readable medium | |
| CN107040746B (zh) | 基于语音控制的多人视频聊天方法及装置 | |
| JP7278307B2 (ja) | コンピュータプログラム、サーバ装置、端末装置及び表示方法 | |
| WO2022161037A1 (zh) | 一种用户确定方法、电子设备和计算机可读存储介质 | |
| US9361316B2 (en) | Information processing apparatus and phrase output method for determining phrases based on an image | |
| CN111696538A (zh) | 语音处理方法、装置和介质 | |
| US20230116624A1 (en) | Methods and systems for assisted fitness | |
| Bao et al. | An emotion recognition method based on eye movement and audiovisual features in MOOC learning environment | |
| CN110491384B (zh) | 一种语音数据处理方法及装置 | |
| CN111696536A (zh) | 语音处理方法、装置和介质 | |
| WO2023221233A1 (zh) | 交互式镜面装置、系统及方法 | |
| Ou et al. | Analyzing and predicting focus of attention in remote collaborative tasks | |
| CN112908362A (zh) | 基于采集机器人终端的系统、机器人终端、方法及介质 | |
| EP4018647A1 (en) | Electronic device and method for eye-contact training | |
| EP3288035B1 (en) | Personal audio analytics and behavior modification feedback | |
| Zhang et al. | Temporal attention and consistency measuring for video question answering |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information |
Country or region after: China Address after: 402760 no.1-10 Tieshan Road, Biquan street, Bishan District, Chongqing Applicant after: Chongqing Yifang Technology Co.,Ltd. Address before: 518057 area a, 21 / F, Konka R & D building, 28 Keji South 12 road, Yuehai street, Nanshan District, Shenzhen City, Guangdong Province Applicant before: Easy city square network technology Co.,Ltd. Country or region before: China |
|
| CB02 | Change of applicant information | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |