CN114064943A - 会议管理方法、装置、存储介质及电子设备 - Google Patents

会议管理方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN114064943A
CN114064943A CN202111416451.XA CN202111416451A CN114064943A CN 114064943 A CN114064943 A CN 114064943A CN 202111416451 A CN202111416451 A CN 202111416451A CN 114064943 A CN114064943 A CN 114064943A
Authority
CN
China
Prior art keywords
conference
information
data
segment
keyword
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111416451.XA
Other languages
English (en)
Inventor
安勇正
朱海涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202111416451.XA priority Critical patent/CN114064943A/zh
Publication of CN114064943A publication Critical patent/CN114064943A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/35Clustering; Classification
    • G06F16/353Clustering; Classification into predefined classes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/237Lexical tools
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/279Recognition of textual entities
    • G06F40/289Phrasal analysis, e.g. finite state techniques or chunking

Abstract

本申请实施例公开了一种会议管理方法、装置、存储介质及电子设备,其中,方法包括:响应于输入的会议信息查询请求,基于所述会议信息查询请求向服务端进行会议信息查询,接收由所述服务端发送的会议片段数据,其中,所述会议片段数据为所述服务端基于所述会议信息查询请求对应的目标片段信息所确定;采用本申请实施例,可以提高会议管理的便捷性。

Description

会议管理方法、装置、存储介质及电子设备
技术领域
本申请涉及计算机技术领域,尤其涉及一种会议管理方法、装置、存储介质及电子设备。
背景技术
随着通信技术的发展,用户可以通过持有的计算机、平板等设备来远程参与会议;在会议过程中,可以录制会议过程中的会议数据并进行保存,通过采集会议过程中的多媒体会议数据,可在会议后进行诸如会议数据回看、会议数据编辑、会议数据分享等会议管理。
发明内容
本申请实施例提供了一种会议管理方法、装置、存储介质及电子设备,所述技术方案如下:
第一方面,本申请实施例提供了一种会议管理方法,所述方法包括:
响应于输入的会议信息查询请求,基于所述会议信息查询请求向服务端进行会议信息查询;
接收由所述服务端发送的会议片段数据,其中,所述会议片段数据为所述服务端基于所述会议信息查询请求对应的目标片段信息所确定。
第二方面,本申请实施例提供了一种会议管理方法,所述方法包括:
获取客户端上会议信息查询请求所对应的目标片段信息,确定所述目标片段信息对应的会议片段数据;
将所述会议片段数据发送至所述客户端。
第三方面,本申请实施例提供了一种会议管理装置,所述装置包括:
信息查询模块,用于响应于输入的会议信息查询请求,基于所述会议信息查询请求向服务端进行会议信息查询;
数据获取模块,用于接收由所述服务端发送的会议片段数据,其中,所述会议片段数据为所述服务端基于所述会议信息查询请求对应的目标片段信息所确定。
第四方面,本申请实施例提供了一种会议管理装置,所述装置包括:
数据确定模块,用于获取客户端上会议信息查询请求所对应的目标片段信息,确定所述目标片段信息对应的会议片段数据;
数据发送模块,用于将所述会议片段数据发送至所述客户端。
第五方面,本申请实施例提供一种计算机存储介质,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行上述的方法步骤。
第六方面,本申请实施例提供一种电子设备,可包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述计算机程序适于由所述处理器加载并执行上述的方法步骤。
本申请一些实施例提供的技术方案带来的有益效果至少包括:
在本申请一个或多个实施例中,客户端可以响应于用户输入的会议信息查询请求,然后基于所述会议信息查询请求向服务端进行会议信息查询;然后就可以接收到由所述服务端发送的会议片段数据,通常所述会议片段数据为服务端基于所述会议信息查询请求对应的目标片段信息所确定。这样可以避免用户采用诸如人工翻阅多媒体会议数据、查找会议记录等复杂方式才能查找到用户感兴趣的会议片段,整个会议管理过程用户仅需输入会议信息查询请求,就可以快速获取到会议片段数据,可以快速实现会议片段数据的获取,提升了会议管理的便捷性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种会议管理方法的流程示意图;
图2是本申请实施例提供的会议管理方法涉及的一种会议片段数据获取的场景示意图;
图3是本申请实施例提供的会议管理方法涉及的另一种会议片段数据获取的场景示意图;
图4是本申请实施例提供的另一种会议管理方法的流程示意图;
图5是本申请实施例提供的一种会议管理的界面示意图;
图6是本申请实施例提供的一种信息查询界面的界面示意图;
图7是本申请实施例提供的另一种会议管理方法的流程示意图;
图8是本申请实施例提供的另一种会议管理方法的流程示意图;
图9是本申请实施例提供的一种会议管理系统的架构示意图;
图10是本申请实施例提供的一种会议管理装置的结构示意图;
图11是本申请实施例提供的另一种会议管理装置的结构示意图;
图12a是本申请实施例提供的另一种会议管理装置的结构示意图;
图12b是本申请实施例提供的另一种会议管理装置的结构示意图
图13是本申请实施例提供的一种电子设备的结构示意图;
图14是本申请实施例提供的操作系统和用户空间的结构示意图;
图15是图13中安卓操作系统的架构图;
图16是图13中IOS操作系统的架构图;
图17是本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
在本申请的描述中,需要理解的是,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。在本申请的描述中,需要说明的是,除非另有明确的规定和限定,“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本申请中的具体含义。此外,在本申请的描述中,除非另有说明,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
下面结合具体的实施例对本申请进行详细说明。
在一个实施例中,如图1所示,特提出了一种会议管理方法,该方法可依赖于计算机程序实现,可运行于基于冯诺依曼体系的会议管理装置上。该计算机程序可集成在应用中,也可作为独立的工具类应用运行。所述会议管理装置可以为一种客户端,包括但不限于:个人电脑、平板电脑、手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其它处理设备等。在不同的网络中客户端设备可以叫做不同的名称,例如:用户设备、接入客户端、用户单元、用户站、移动站、移动台、远方站、远程客户端、移动设备、用户客户端、客户端、无线通信设备、用户代理或用户装置、蜂窝电话、无绳电话、5G网络或未来演进网络中的客户端设备等。
具体的,该会议管理方法包括:
S101:响应于输入的会议信息查询请求,基于所述会议信息查询请求向服务端进行会议信息查询。
可以理解的,用户在针对会议所录制的多媒体会议数据进行会议管理时,客户端可以响应于用户所输入的会议信息查询请求,具体实施中用户通常针对多媒体会议数据输入进行信息查询的搜索词,客户端可随之获取会议信息查询请求对应的搜索词;
所述会议信息查询请求可以理解为用于查询多媒体会议数据中会议片段数据,在本申请可基于会议信息查询请求对应的目标片段信息来确定会议片段数据;在一些实施例中,客户端的用户在输入会议信息查询请求时会随之输入对应的搜索词。在本申请可基于用户的会议信息查询请求对应的搜索词查询多媒体会议数据中与搜索词相关的会议片段数据。
所述多媒体会议数据可理解为对会议全程的会议记录,在一些实施场景中:参与会议的客户端通常可通过摄像头、麦克风等设备采集到参会人员的会议语音和/或视频图像。通过记录会议过程中的多媒体会议数据,可实现会议后的会议管理,如参与会议的客户端的用户可在会后查看相应的会议数据来获取相应的会议信息。
可以理解的,多媒体会议数据可以是在诸如会议办公、会议教学、会议培训等会议场景下的记录。例如,在多媒体会议过程中,参与会议的客户端可采集到本端人员的会议数据(如语音、视频等)并上传至服务端,由服务端分别发送至其他参与会议的客户端上播放,从而使得各个参会人员在远程场景下也能即时沟通,多媒体会议数据可以理解为对前述远程会议场景产生的多媒体数据的记录,在一些实施方式中,多媒体会议数据是对会议场景中的原始会议数据的直接记录,可以理解原始会议数据,其未经过诸如实时会议字幕、添加会议文本纪要等对原始文件数据的数据再处理过程。
可以理解的,客户端的用户可采用信息查询的方式通过输入相应搜索词,搜索词描述用户在进行信息搜索时针对记录的多媒体会议的查询意图,通过搜索词来搜索多媒体会议数据中搜索词关联的会议片段数据,实现了方便的会议管理,用户可基于实际需求仅输入搜索词就获取到相关的会议片段数据,会议片段数据可高度还原多媒体会议场景中搜索词相关的会议情形,不需会后客户端的用户人工查找感兴趣的会议片段,减少了用户在进行会议管理时的时间成本以及人力成本,同时较之于采用反馈会议文本记录的形式,客户端以搜索词对应的会议片段数据的形式向用户进行反馈,会议片段数据可以是片段语音、片段视频等类型的数据,这样可高度还原会议情形避免文本形式单一无法还原会议情形所造成的信息遗漏,例如会议记录通常是直接基于会议音频转化过来的,但是会议场景中会议关键信息不仅仅包含会议音频,还至少包括会议视频中出现的会议元素,如参会者特征、展示的会议多媒体文件(如PPT)等。
在一种具体的实施场景中,当用户通过客户端上的用于信息管理的信息搜索服务或信息搜索应用输入会议信息查询请求进行搜索查询时,客户端可获取到会议信息查询请求输入时的搜索语句,客户端在获取到用户输入会议信息查询请求时的搜索语句之后,搜索语句可直接作为搜索词;
进一步的,考虑到用户日常输入的搜索语句会存在信息冗余或信息不准等情况,客户端可以对查询语句进行语义理解,经语义理解处理后可确定搜索语句的搜索关键词,进而将搜索关键词作为会议信息查询请求对应的搜索词,在一些实施方式中,客户端可以对搜索语句提取搜索关键词,例如可以采用搜索关键词抽取的方法,如,关键词抽取通常使用特定的计算规则计算用户的输入搜索语句中每个词的权重,选取权重大的词作为搜索关键词;在一些实施方式中,客户端可以结合“搜索语句”词句的语义,然后综合生成搜索关键词,如,搜索关键词生成的方法通常可以“理解”用户输入的搜索语句,然后基于用户的意图(也即查询语句的语义)生成一些搜索关键词。采用这种方式可以生成新的词语(也即生成关键词),如用户输入“自然语言处理语音数据”,搜索关键词生成式的方法会依据训练语料产生不同的结果。例如会生成“语音识别”、“语义分析”。也即生成新的词语,在生成词语时可以根据训练语料制作的词表来计算概率,从而基于搜索关键词作为搜索词在搜索服务中搜索,等等。
S102:接收由所述服务端发送的会议片段数据,其中,所述会议片段数据为所述服务端基于所述会议信息查询请求对应的目标片段信息所确定。
可以理解的,客户端可以基于服务端来获取会议片段数据,可以确定会议信息查询请求对应的目标片段信息,然后基于目标片段信息可通过服务端找到对应的会议片段数据。在一些实施例中,会议片段数据可以基于会议关键词集合中所述搜索词对应的目标片段信息所确定,通常会议关键词集合为多媒体会议数据对应的会议关键词集合。
所述会议关键词集合通常可以包含多个会议关键词,会议关键词可以理解为基于多媒体会议数据所提取出的关键词,在一些实施方式中:关键词具有关键词信息(如时间戳信息、会议标识等),通过关键词携带的关键词信息可以映射或对应到相应的会议片段数据;也就是说,在本申请中可以查询搜索词相匹配的关键词来获取关键词携带的关键词信息,在一些实施例中关键词信息也可称之为(搜索)片段信息,关键词信息(片段信息)用于在多媒体会议数据中定位到相应片段的会议片段数据,以实现基于搜索词对多媒体会议数据中特定的会议片段数据的查询。在一些实施方式中,会议关键词集合中的关键词不基于分割的音视频语音片段数据生成,会议关键词集合中的关键词也不基于多媒体会议数据的字幕生成,可以理解为,多媒体会议数据中不包含实时会议字幕。
可以理解的,所述会议关键词集合可以是以会议关键词库、会议关键词表、会议关键词组等形式进行表征。
所述目标片段信息用于查询多媒体会议数据中的会议片段数据,目标片段信息是与搜索词相匹配的会议关键词的片段信息,目标片段信息包括但不限于目标时间信息、目标会议标识、目标讲话者的身份信息、目标会议类型信息等信息中的至少一种。基于目标片段信息可获取到相应的会议片段数据。
可以理解的,客户端在获取搜索词对应的会议片段数据的过程中,可以基于服务端进行。
在一种具体的实施场景中:客户端可以获取所述会议信息查询请求的搜索词,然后在会议关键词集合中查询所述搜索词对应的目标片段信息;之后再向服务端查询所述目标片段信息对应的会议片段数据;通常所述关键词集合由所述服务端基于多媒体会议数据所生成;
可以理解的,服务端在多媒体会议过程中,对诸如参与会议的所有人员的发言、会议展示元素(如会议PPT)等进行记录,以生成多媒体会议数据,然后对多媒体会议数据提取相关的会议关键词,会议关键词提取过程中也会基于会议关键词对应的会议片段数据生成会议关键词的(会议)片段信息,以便基于片段信息快速从多媒体会议数据中获取到会议关键词对应的会议片段数据。可以理解为:会议关键词对应多媒体会议数据中的至少一个会议片段数据,例如多媒体会议数据可以是会议视频,则会议片段数据可以理解为会议关键词对应的一个会议片段视频;服务端可以基于前述提取的会议关键词生成会议关键词集合,会议关键词也会携带(会议)片段信息。
在一些实施例中,为了便于信息管理,服务端可以在生成多媒体会议数据对应的会议关键词集合之后,基于服务端与客户端之间的通信连接,将会议关键词集合发送至客户端;也就是说客户端可以在多媒体会议结束之后,存储多媒体会议的会议关键词集合,以便后续客户端的用户进行信息查询。
例如,如图2所示,图2是本申请涉及的一种会议片段数据获取的场景示意图,在图2中,客户端的用户向客户端的显示组件(如触摸屏)输入(会议)信息查询请求,客户端所包含的处理组件检测到会议信息查询请求输入时,可随之获取到会议信息查询请求对应的搜索词,客户端然后在会议关键词集合中查询与搜索词匹配的会议关键词。若在会议关键词集合中未查询到与搜索词匹配的会议关键词,则控制显示组件输出提示信息。若在会议关键词集合中查询到与搜索词匹配的会议关键词,则客户端获取会议关键词携带的关键片段信息,可以将关键片段信息作为目标片段信息,也可以从关键片段信息中提取目标片段信息(如片段时间信息),例如关键片段信息包含多个属性参数,则可以从多个属性参数中选取至少一个作为目标片段信息。然后基于目标片段信息向服务端请求其对应的会议片段数据;服务端接收到目标片段信息之后,向客户端反馈目标片段数据对应的会议片段数据。
在一种具体的实施场景中:客户端也可不存储会议关键词集合,也即服务端不向客户端预先发送多媒体会议的关键词集合,在客户端接收到用户所输入的会议信息查询请求继而确定会议信息查询请求对应的搜索词之后,直接发送至服务端进行处理,也即:客户端获取所述会议信息查询请求的搜索词,向服务端发送搜索词,继而接收服务端发送的会议片段数据;进一步的,所述搜索词用于指示所述服务端在所述多媒体会议数据对应的会议关键词集合中确定所述搜索词对应的目标片段信息并获取所述目标片段信息对应的所述会议片段数据,也就是说:服务端在接收到客户端发送的搜索词之后,例如,如图3所示,图3是本申请涉及的另一种会议片段数据获取的场景示意图,服务端在会议关键词集合中查询与搜索词匹配的会议关键词。若在会议关键词集合中未查询到与搜索词匹配的会议关键词,则可以向客户端发送提示信息。若在会议关键词集合中查询到与搜索词匹配的会议关键词,则服务端获取会议关键词携带的关键片段信息,将关键片段信息作为目标片段信息,也可以从关键片段信息中提取目标片段信息(如片段时间信息)。然后服务端从多媒体会议数据中获取目标片段信息指示的会议片段数据,服务端将会议片段数据发送至客户端。
可以理解的,在一些实施例中,在客户端上可以不向用户展示多媒体会议数据对应的完整的会议记录,用户可以不基于会议记录才能去查询所期望的会议片段。一方面,会议记录通常数据量较大用户需要长时间浏览才能定位到符合预期的会议记录位置,造成会议管理的效率不高;另一方面,可以不必浏览完整会议记录来确定的会议记录位置,从而根据该会议记录位置在多媒体会议数据中获取会议记录位置所唯一映射的会议片段,这种方式会议片段数据的获取流程复杂不便捷,在本申请中,客户端的用户仅需输入搜索词,即可基于搜索可语义关联到多媒体会议数据中的一个乃至多个会议片段数据,简化了整个会议片段数据的获取流程,可以实现根据搜索词的语义快速定位到相关联的会议片段数据,所最终获取的会议片段数据更契合片段查询预期的用户需求。
在本申请实施例中,客户端可以响应于用户输入的会议信息查询请求,然后基于所述会议信息查询请求向服务端进行会议信息查询;然后就可以接收到由所述服务端发送的会议片段数据,通常所述会议片段数据为服务端基于所述会议信息查询请求对应的目标片段信息所确定。可以避免用户采用诸如人工翻阅多媒体会议数据、查找会议记录等复杂方式才能查找到用户感兴趣的会议片段,整个会议管理过程用户仅需输入会议信息查询请求,就可以快速获取到会议片段数据,可以实现快速实现会议片段数据的获取,提升了会议管理的便捷性。
请参见图4,图4是本申请提出的一种会议管理方法的另一种实施例的流程示意图。具体的:
S201:在多媒体会议过程中,采集参与所述多媒体会议的会议者所对应的多媒体会议数据,将所述多媒体会议数据发送至服务端;
所述多媒体会议数据用于服务端基于多媒体会议数据生成会议关键词集合;
可以理解的,参与会议的用户可以通过客户端与服务端建立通信连接以组建多媒体会议,客户端的用户通常可通过图像采集部件、音频采集部件等设备采集到当前参会人员的会议语音、视频图像等多媒体会议数据,客户端将可将采集到的多媒体会议数据传输至服务端,由服务端将多媒体会议数据实时同步至其他客户端上播放,从而使得各个参会人员在多媒体会议场景下也能即时沟通。
可以理解的,服务端可以保存多媒体会议过程中的多媒体会议数据,服务端保存的多媒体会议数据通常包含参与会议的所有客户端的用户在会议场景下的多媒体数据。可以便于会议管理,方便用户对多媒体会议进行会议回看、会议复盘。
根据一些实施例中,服务端在多媒体会议过程中,对诸如参与会议的所有人员的发言、会议展示元素(如会议PPT)、会议图像等进行记录,以生成多媒体会议数据,然后对多媒体会议数据提取相关的会议关键词,会议关键词提取过程中:也会基于会议关键词对应的会议片段数据生成会议关键词的(会议)片段信息,以便基于片段信息快速从多媒体会议数据中获取到会议关键词对应的会议片段数据。可以理解为:会议关键词对应多媒体会议数据中的至少一个会议片段数据,例如多媒体会议数据可以是会议视频,则会议片段数据可以理解为会议关键词对应的一个会议片段视频;服务端可以基于前述提取的会议关键词生成会议关键词集合,会议关键词也会携带(会议)片段信息,(会议)片段信息包括但不限于时间信息、会议标识、讲话者的身份信息、会议类型信息等信息中的至少一种。基于(会议)片段信息可获取到其对应的会议片段数据。
S202:从所述服务端获取所述会议关键词集合。
可以理解的,客户端可以与服务端建立通信连接,客户端基于通信连接可以向服务端发送针对会议关键词集合的集合获取请求,服务端响应于该集合获取请求,向客户端反馈会议关键词集合,以完成客户端获取会议关键词集合的步骤。
可选的,服务端可以在多媒体会议结束且生成会议关键词集合之后,主动向参与会议的至少一个客户端反馈该多媒体会议的会议关键词集合。
可选的,客户端的用户在多媒体会议结束之后,基于实际会议需要,可以再次了解已结束的多媒体会议的会议信息,对于客户端而言,客户端可以在检测到用户针对已结束的多媒体会议的人机交互操作时,客户端向服务端发送针对会议关键词集合的集合获取请求,服务端响应于该集合获取请求,向客户端反馈会议关键词集合。例如,客户端在界面上展示多个已结束的历史多媒体会议,在检测到用户针对多个历史多媒体会议中多媒体会议的触控操作时,客户端向服务端发送集合获取请求。
S203:基于多媒体会议数据对应的会议关键词集合,确定至少一个参考关键词,展示各所述参考关键词。
可以理解的,服务端提取出会议关键词集合并发送至客户端后,客户端在接收到会议关键词集合之后,可以向用户推送搜索推荐词,例如,在用于会议信息搜索的界面展示搜索推荐词,以便于用户有目的地检索会议片段数据,以及向用户展示与其搜索意图可能相关的词,可以避免用户手动输入搜索词,提高信息搜索效率。
参考关键词可理解为会议关键词集合中客户端向当前用户所推荐的信息查询推荐词。
在一种可行的实施方式中,客户端可以基于会议关键词集合中各会议关键词的历史搜索频率,按照频率高低顺序选择目标数量的参考关键词,历史搜索频率可以理解为其他用户在所对应的客户端上针对同一多媒体会议数据或同类型多媒体会议数据的搜索频率参数,如总搜索次数。基于历史搜索频率可提高推荐搜索的准确率。
在一种可行的实施方式中,客户端也可以采用随机筛选的方式从会议关键词集合中确定至少一个参考关键词,如确定目标数量的参考关键词,目标数量的选取基于客户端显示界面的推荐词最大容纳数量确定。
示意性的,客户端的用户在完成某次多媒体会议之后,基于实际需求意图对多媒体会议的多媒体会议数据中的某个片段进行回看,客户端的用户可在客户端的显示界面上通过搜索词进行信息查询以查找相应的会议片段数据。例如,如图5所示,图5是本申请涉及的一种会议管理的界面示意图,在图5所示的会议管理界面中,客户端的用户可以通过诸如“一键会议”功能发起新的多媒体会议,在图5中还显示有“历史会议”相关选项,历史会议可理解为客户端的用户历史参与过的多媒体会议,客户端向用户提供“历史会议”的查询功能,基于此用户可对历史参与的多媒体会议的多媒体会议数据进行信息查询,如查询某个会议片段。具体而言,用户可以在客户端上针对某多媒体会议输入触控操作,以开启针对“某多媒体会议”的信息查询功能,客户端可响应于用户输入的触控操作,首先向用户展示针对“某多媒体会议”的信息查询界面。
示意性的,如图6所示,图6是一种信息查询界面的界面示意图,在信息查询界面中用户可针对前述“某多媒体会议”进行信息查询,以获取相应的会议片段数据。进一步的,客户端可以在如图6所示的界面上向用户展示与其搜索意图可能相关的词,具体实施中,客户端基于“某多媒体会议”的会议关键词集合,确定相应数量的参考关键词,然后在加载信息查询界面的过程中,客户端在如图6所示的显示界面中将前述确定的参考关键词进行展示,如图6中显示有“参考关键词1”、“参考关键词2”、...“参考关键词X”,展示参考关键词可供用户进行选择,以避免用户手动输入搜索词,以及可向用户提示多媒体会议的相关搜索词,以提高信息搜索效率。
S204:响应于输入的会议信息查询请求,获取所述会议信息查询请求的搜索词;
具体可参见S101,此处不再赘述。
S205:获取多媒体会议数据对应的会议关键词集合,在会议关键词集合中确定所述搜索词对应的搜索片段信息;
根据一些实施例中,会议关键词集合通常可以包含多个(会议)关键词,(会议)关键词可以理解为基于多媒体会议数据所提取出的关键词,在一些实施方式中:关键词具有搜索片段信息(如时间戳信息、会议标识等),通过关键词携带的搜索片段信息中的数据可以映射或对应到相应的会议片段数据;也就是说,在本申请中可以查询搜索词相匹配的关键词来获取关键词携带的搜索片段信息,在一些实施例中搜索片段信息也可称之为关键词信息,搜索片段信息在本申请中用于在多媒体会议数据中定位到相应片段的会议片段数据,以实现基于搜索词对多媒体会议数据中特定的会议片段数据的查询。
所述搜索片段信息用于查询多媒体会议数据中的会议片段数据,搜索片段信息是与搜索词相匹配的会议关键词的片段信息,搜索片段信息包括但不限于片段时间参数、会议标识、讲话者的身份信息、会议类型信息、关键词等信息中的至少一种。基于搜索片段信息确定的目标片段信息可获取到相应的会议片段数据。
所述会议关键词集合包括至少一个(会议)关键词以及所述关键词的关键片段信息。
S206:从所述搜索片段信息中确定目标片段信息。
在一种可行的实施方式中,客户端可以直接将关键片段信息作为目标片段信息,客户端将该目标片段信息发送至服务端,由服务端从目标片段信息中获取相应数据以从多媒体会议数据中获取会议片段数据,例如服务端可以从目标片段信息中获取片段时间参数(可理解为片段时间参数可在多媒体会议数据中映射到指定时间段的会议片段数据),然后在多媒体会议数据中提取相应片段时间参数指示的会议片段数据即可。
可以理解的,通常关键词对应的关键片段信息包含多种类型的会议属性参数,如片段时间参数类型的参数、会议标识类型的参数、讲话者的身份信息类型的参数、会议类型的参数、会议环节信息等等,考虑到提高会议管理过程中会议查询的效率,若基于多种类型的数据提供至服务端就需要较长的时间才能提取到相应的会议片段数据;基于此,为了提高信息查询的效率,在本申请中:客户端可以从搜索词对应的搜索片段信息中提取关键的或有用的目标片段信息,此种情形下的目标片段信息可辅助服务端直接获取到目标片段信息而不需要进行数据提取处理以获取有用的数据。
在一种具体的实施场景中,客户端可以从所述搜索片段信息中确定片段时间参数,将所述片段时间参数作为所述搜索词对应的目标片段信息;具体而言可以:从搜索片段信息所包含的至少一个会议属性参数中确定片段时间参数,将片段时间参数作为搜索词对应的目标片段信息。可以理解为,客户端从搜索片段信息对应的各会议属性参数(诸如片段时间参数类型的参数、会议标识类型的参数、讲话者的身份信息类型的参数、会议类型的参数等)中获取可以从多媒体会议数据中唯一标识或唯一获取到会议片段数据的片段时间参数,例如片段数据参数可以是会议片段数据对应的时间戳,也即片段时间参数为会议片段数据的时间信息。客户端再将片段时间参数作为搜索词对应的目标片段信息;
在一种具体的实施场景中,搜索片段信息对应多媒体会议数据中的会议片段,在多媒体会议数据中,可能会存在多个会议片段的关键词相同或类似的情形,可以理解为:所述搜索词对应的搜索片段信息为多个的情形;在一些实施场景,用户可能仅期望查询一个会议片段数据;基于此,可引入辅助参考参数再结合片段时间参数来确定用户所期望查询的会议片段数据。
客户端在会议关键词集合查询到的搜索词所对应的搜索片段信息存在多个,客户端可以从各所述搜索片段信息分别对应的至少一个会议属性参数中确定片段时间参数和辅助参考参数,将所述片段时间参数和辅助参考参数作为所述搜索词对应的目标片段信息。
可选的,在搜索片段信息为多个时,客户端可以向用户展示多个搜索片段信息,由用户基于各搜索片段信息选择辅助参考参数和片段时间参数以至少映射一个片段信息对应的会议片段数据,从而与其他非用户期望的片段数据对应的搜索片段信息区分开。
可选的,在搜索片段信息为多个时,客户端可以获取搜索词对应的历史片段浏览记录,历史片段浏览记录为至少一个参考用户在浏览搜索词对应的历史会议片段数据时生成,通过获取最高频次对应的历史会议片段数据所对应的参考搜索片段信息,来确定辅助参考参数和片段时间参数,具体的,客户端基于参考搜索片段信息提取辅助参考参数和片段时间参数,从而将所述片段时间参数和辅助参考参数作为所述搜索词对应的目标片段信息。服务端接收到片段时间参数和辅助参考参数之后,可以基于片段时间参数和辅助参考参数从多个搜索片段信息中进行搜索,搜索“片段时间参数和辅助参考参数”对应的会议片段数据。此时获取到的会议片段时间通常较大概率符合用户搜索预期,提升了会议搜索管理过程中的智能性。
进一步的,所述辅助参考参数可以包括会议标识参数、会议者身份参数以及会议环节参数等除片段时间参数之外的会议属性参数。
S207:向服务端获取所述目标片段信息对应的会议片段数据。
具体可参考本申请其他实施例的方法步骤,此处不再赘述。
在本申请实施例中,客户端可以响应于用户针对多媒体会议数据所输入的会议信息查询请求,确定所述会议信息查询请求对应的搜索词;然后基于服务端在所述多媒体会议数据对应的会议关键词集合中确定所述搜索词对应的目标片段信息,就可以快速定位并获取到目标片段信息对应的会议片段数据。可以避免用户采用诸如人工翻阅多媒体会议数据、查找会议记录等复杂方式才能查找到用户感兴趣的会议片段,整个会议管理过程用户仅需输入会议信息查询请求,就可以快速获取到会议片段数据,可以实现快速实现会议片段数据的获取,提升了会议管理的便捷性;以及,基于搜索词对应的搜索片段信息中提取关键的或有用的目标片段信息,可辅助服务端直接获取到目标片段信息而不需要进行数据提取处理,提升了信息查询的效率;以及,在搜索片段信息确定时将辅助参考参数纳入参考,可以在存在多个会议片段数据的情况下实现唯一获取到用户期望获取的会议片段数据,提升了信息获取过程的普适性;以及,会议管理所涉及的诸如关键词集合确定、关键词提取、关键词扩展等需要强大算力的过程部署在服务端,可提升会议管理过程中双端的协同处理能力。
在一个实施例中,如图7所示,特提出了一种会议管理方法,该方法可依赖于计算机程序实现,可运行于基于冯诺依曼体系的会议管理装置上。该计算机程序可集成在应用中,也可作为独立的工具类应用运行。所述会议管理装置可以是一种服务端。
具体的,该会议管理方法包括:
S301:获取客户端上会议信息查询请求所对应的目标片段信息,确定所述目标片段信息对应的会议片段数据。
在一个或多个实施例,服务端可以先从至少一个客户端获取多媒体会议数据,确定多媒体会议数据对应的会议关键词集合;
根据一些实施例中,各参与会议的用户可以通过客户端与服务端建立通信连接以组建多媒体会议,客户端的用户通常可通过图像采集部件、音频采集部件等设备采集到当前参会人员的会议语音、视频图像等多媒体会议数据,服务端可获取客户端采集到的多媒体会议数据,由服务端将多媒体会议数据实时同步至其他客户端上播放,从而使得各个参会人员在多媒体会议场景下也能即时沟通。同时,服务端可以保存多媒体会议过程中的多媒体会议数据,服务端保存的多媒体会议数据通常包含参与会议的所有客户端的用户在会议场景下的多媒体数据。可以便于会议管理,方便用户对多媒体会议进行会议回看、会议复盘。
在一种可行的实施方式中,服务端从至少一个客户端获取多媒体会议数据之后,然后对多媒体会议数据提取相关的会议关键词,会议关键词提取过程中:也会基于会议关键词对应的会议片段数据生成会议关键词的(会议)片段信息,以便基于片段信息快速从多媒体会议数据中获取到会议关键词对应的会议片段数据。
在一种可行的实施方式中,服务端可以不将多媒体会议数据转化为会议记录而是直接对多媒体会议数据进行关键词识别处理以提取会议关键词。
关键词识别处理可以立即为一多媒体会议过程中的多媒体会议数据为研究对象,服务端在采集到多媒体会议数据之后,通过对多媒体会议数据进行多媒体信号处理(如对多媒体音视频信号进行预处理)和关键词语义识别,让服务端自动识别和理解用户在多媒体会议过程中的口述语音,并提取多媒体会议过程中的关键词信息。
可以理解的,服务端对多媒体会议数据进行关键词识别处理,可以无需经会议文本识别而直接得到所述多媒体会议数据中的会议关键词集合。
可以理解的,会议过程中的多媒体会议流(如会议音频流、会议视频流)实际上是一种多媒体信号波,服务端在开始对多媒体信号波进行关键词语义识别时,需要对采集的多媒体信号波进行预处理,消除因为环境噪声、回声等干扰因素影响采集多媒体信号的质量,在实际实施中,会对通过服务端采集的信号波进行预处理,所述预处理包含端点检测、降噪、波束形成,经过预处理后的多媒体会议数据进行后置滤波消除残留的信号噪声(如音频噪声部分、图像噪声部分),然后通过自动增益算法调节采集的多媒体会议信号波能量。再进行下一步的关键词语义识别处理。
具体的,在关键词语义识别处理的之前,通常需要获取大量会议样本数据训练关键词识别模型,服务端可以从已有的会议音视频数据库中获取全部或部分会议样本数据,和/或获取采用录制设备对实际语言环境下录制的会议样本数据,然后提取会议样本数据中的会议特征向量(特征向量可由高维度的会议音频特征向量和/或会议图像特征向量构成)。
提取会议特征向量,所述会议特征向量是以自然语言表达的非结构化数据特有的会议关键语义属性,以会议为例,会议特征向量包括会议意图、会议数据主题说明、底层会议特征含义等会议语义要素,会议语义要素从信号类型区分可分为高维度的会议音频特征向量、会议图像特征向量。所述会议语义要素是能够表达本次会议对象本身的关键语义以及在环境中关键语义的多种特征,所述会议语义要素可以是组成会议底层元素的顺序、特征信号的会议顺序、特征信号的会议情感信息、特征信号的互信息等。
其中,组成底层元素可以理解为组成一段会议最小的组成单位,以会议音频为例,最小组成单位是每个字的发音。
特征信号的会议顺序为会议过程中表达一句话(一个意思)组成的各个词特征信号的先后顺序。
特征信号的会议情感信息为会议过程中该特征信号在这个会议句子(某个会议发言者说的会议句)中所表达的情感含义,所述情感含义可以理解为特征信号在会议句子是高昂还是低沉、是褒义还是贬义、是欣喜还是悲伤等。
互信息是指某个词或字对应的特征信号和类别之间的统计独立关系,互信息常应用于度量两个对象之间的相互性。
在本实施例中,提取的语义特征对于整个多媒体会议数据来说,它包括但不限于多媒体会议过程中的关键会议词信息、会议词频分布信息、语法级的实体会议信息、语义级的会议主题等。
以会议特征向量的提取过程为例,通过对会议样本数据进行数字化处理以及预处理,数字化处理包含反混叠滤波、采样、A/D转换等等,所述预处理包括对会议样本数据采样量化、预加重、加窗分帧以及端点检测,经所述数字化处理以及预处理之后,会议样本数据的高频分辨率被提高,方便对所述关键词识别模型的后续训练。示意性的,可以首先利用离散傅氏变换的快速算法对上述会议样本数据进行从时域/频域的转换,得到能量频率;之后,可以利用三角带通滤波方法,依照梅尔刻度分布,将上述会议样本数据的能量频谱进行卷积计算,得到多个输出对数能量,最后对上述多个输出对数能量构成的向量进行离散余弦变换,生成特征向量;还可以利用线性预测编码方法,通过对上述会议样本数据进行解析,生成声道激励和转移函数的参数,并以所生成的参数作为特征参数,生成会议特征向量。在一些实施场景中,会议特征向量中的声学特征成分通常高于图像特征成分。
在本实施例中,所述关键词识别模型为神经网络模型,所述神经网络模型是由许多节点中各节点的简单非线性模拟处理要素密集互连配置而成的,是一种模仿了生物神经元的系统模型。所述神经网络模型通过使至少一个节点的输入与每一个节点的输出连接形成,类似于真实神经元的突触连接。每个神经元表达了一种特定的输出函数,即激励函数,每两个神经元之间的连接都包含一个连接强度,即作用于通过该连接的信号的加权值。在本实施例中,将会议样本数据输入至神经网络模型进行训练,可以得到训练之后的关键词识别模型,该关键词识别模型具有多媒体过程中关键信息特征抽取、语义知识概括和学习记忆的能力,通常所述神经网络模型学习到的信息或知识储存在每个单元节点之间的连接矩阵上。
可选的,所述关键词识别模型可以是基于卷积神经网络(Convolutional NeuralNetwork,CNN)模型,深度神经网络(Deep Neural Network,DNN)模型、循环神经网络(Recurrent Neural Networks,RNN)、模型、嵌入(embedding)模型、梯度提升决策树(Gradient Boosting Decision Tree,GBDT)模型、逻辑回归(Logistic Regression,LR)模型等模型中的一种或多种的拟合实现的。
具体的,服务端在获取到所述会议样本数据的会议特征向量时,对所述会议特征向量进行标注,所述标注可以理解为对所述会议样本数据对应的关键信息(关键信息包含关键词以及关键词对应的关键片段信息)进行标注,将所述会议特征向量输入至初始的关键词识别模型进行训练,基于已经标注的会议样本数据对关键词识别模型进行训练,可以得到训练好的关键词识别模型。
需要说明的是,关键词识别模型完成训练之后,实际应用阶段,服务端可将多媒体会议数据直接输入至关键词识别模型中,关键词识别模型可以输出多媒体会议数据对应的至少一个会议关键词信息,会议关键词信息包含会议关键词信息以及会议关键词信息对应的关键片段信息,以进一步生成包含所有会议关键词信息的会议关键词集合。
可以理解的,服务端可以获取客户端上会议信息查询请求所对应的目标片段信息,确定所述目标片段信息对应的会议片段数据;
在一个或多个实施例中,服务端可以是基于所述会议关键词集合以及客户端上所输入会议信息查询请求的搜索词,获取所述搜索词对应的目标片段信息。以此得到会议信息查询请求所对应的目标片段信息;
根据一些实施例中,客户端的用户可采用信息查询的方式通过输入相应搜索词,搜索词描述用户在进行信息搜索时针对记录的多媒体会议的查询意图,客户端的用户通过搜索词来搜索多媒体会议数据中搜索词关联的会议片段数据;具体实施中,客户端可将搜索词发送至服务端,服务端基于搜索词以及多媒体会议数据对应的关键词集合,获取搜索词对应的目标片段信息;
可以理解的,服务端可以在会议关键词集合中确定所述搜索词对应的搜索片段信息,然后从搜索片段信息中确定目标片段信息。进一步的,搜索片段信息可以包括片段时间参数类型的参数、会议标识类型的参数、讲话者的身份信息类型的参数、会议类型的参数、会议环节信息等等。
在一些实施例中,服务端查询到的搜索片段信息对应一个多媒体会议数据中的会议片段,在多媒体会议数据中,服务端查询到的可能会存在多个会议片段的关键词相同或类似的情形,可以理解为:所述搜索词对应的搜索片段信息为多个的情形;在一些实施场景,用户可能仅期望查询一个会议片段数据;基于此,可引入辅助参考参数再结合片段时间参数来确定用户所期望查询的会议片段数据。
进一步的,在搜索片段信息为多个时,服务端可以将多个搜索片段信息均发生至客户端,客户端可以向用户展示多个搜索片段信息,由用户基于各搜索片段信息选择辅助参考参数和片段时间参数发送至服务端,服务端基于辅助参考参数以及片段时间参数,可以基于较少的数据交互量达到至少映射一个片段信息对应的会议片段数据的效果,从而与其他非用户期望的片段数据对应的搜索片段信息区分开。
在一种可行的实施方式中,在搜索片段信息为多个时,服务端可以获取搜索词对应的历史片段浏览记录,历史片段浏览记录为至少一个参考用户在浏览搜索词对应的历史会议片段数据时生成,通过获取最高频次对应的历史会议片段数据所对应的参考搜索片段信息,来确定辅助参考参数和片段时间参数,具体的,服务端基于参考搜索片段信息提取辅助参考参数和片段时间参数,从而将所述片段时间参数和辅助参考参数作为所述搜索词对应的目标片段信息,这样服务端可以直接基于历史片段浏览记录从搜索词对应的多个会议片段数据中预测用户大概率期望选中的会议片段数据,提升了会议管理的智能性,同时整个过程,目标片段信息的数据量较小,服务端无需对目标片段信息再提取处理。
进一步的,所述辅助参考参数可以包括会议标识参数、会议者身份参数以及会议环节参数等。
根据一些实施例中,客户端的用户可采用信息查询的方式通过输入相应搜索词进行信息查询,客户端再预先基于服务端发送的会议关键词集合中确定搜索词对应的目标片段信息,服务端从客户端获取搜索词对应的目标片段信息。
S302:将所述会议片段数据发送至所述客户端。
示意性的,服务端可以从目标片段信息中获取片段时间参数,然后在多媒体会议数据中提取相应片段时间参数指示的会议片段数据进而将会议片段数据传输至客户端。
示意性的,服务端可以从目标片段信息中获取片段时间参数和辅助参考参数,然后在多媒体会议数据中提取相应片段时间参数和辅助参考参数共同指示的会议片段数据进而将会议片段数据传输至客户端。
在本申请实施例中,服务端可以从客户端获取多媒体会议数据,确定多媒体会议数据对应的会议关键词集合,然后实际应用中基于所述会议关键词集合以及所述客户端上所输入的搜索词,以获取搜索词对应的目标片段信息,从而可以将所述目标片段信息对应的会议片段数据传输至所述客户端。可以避免用户采用诸如人工翻阅多媒体会议数据、查找会议记录等复杂方式才能查找到用户感兴趣的会议片段,整个会议管理过程用户仅需输入会议信息查询请求,就可以快速获取到会议片段数据,可以实现快速实现会议片段数据的获取,提升了会议管理的便捷性;以及,涉及到一种无需对多媒体会议数据进行文本形式的会议记录转换即可直接提取会议关键词的方式,节省了数据处理量,简化了会议关键词提取的流程,提升了会议管理的智能性。
请参见图8,图8是本申请提出的一种会议管理方法的另一种实施例的流程示意图。具体的:
S401:从至少一个客户端获取多媒体会议数据。
具体可参考本申请其他实施例的方法步骤,此处不再赘述。
执行所述确定多媒体会议数据对应的会议关键词集合的步骤。
S402:对多媒体会议数据进行文本转换处理,得到所述多媒体会议数据的会议记录,从所述会议记录中提取会议关键词集合。
可以理解的,服务端对多媒体会议数据进行语音识别,将多媒体会议数据转换为文本形式的会议记录,以完成文本转换处理;在一些实施方式中,服务端可以训练有文本转换模型,文本转换模型基于神经网络模型采用样本数据训练得到,可以将多媒体会议数据输入至文本转换模型中,输出会议记录。然后服务端再从文本形式的会议记录中去提取会议关键词集合。
在一种具体的实施场景中,从所述会议记录中提取会议关键词集合包括:
1、服务端对所述会议记录进行分词处理,得到至少一个参考词;
在本申请中服务端可调用分词服务对所述会议记录进行分词处理,使用分词服务进行分词处理之后,会议记录被切分为一系列单词,这些单词也即参考词,同时分词处理之后还可确定该参考词的词性(如名词、时间词、动词、数词等等),也即对每个参考词标记词性。
可选的,考虑分词处理后可能存在冗余数据,因此可对得到的所有参考词进行去重处理,去除冗余数据。
在一些实施方式中,服务端调用的分词服务可以是结巴分词服务,基于结巴分词服务可以将连续的会议词序列按照一定的规范重新组合成词序列的过程,从而得到一个个参考词。
2、基于所述至少一个参考词以及词向量库,从所述至少一个参考词中确定会议关键词集合。
可以理解的,服务端可以在词向量库中获取各所述参考词对应的参考词向量,对所述参考词向量进行聚类处理,得到至少一个关键词;
所述词向量库保存有大量样本词对应的词向量。在实际应用中:通常预先利用神经网络模型学习词语在作为样本数据的语料库中的出现情况,神经网络模型将语料库中每一样本词进行转化,得到与每一样本词对应的词向量。具体实施中,基于需求选取作为样本数据的语料库,在一些实施方式中,在对语料库进行分词后还需进行数据清理,以剔除语料库中的分词的词性标注、语音特殊字符、网页链接、无效数字等冗余信息,最终得到语料库中的语言分词(如中文分词)。然后再采用神经网络模型将语料库中每一样本词进行转化,得到与每一样本词对应的词向量。神经网络模型可以把词语嵌入到一个高维的空间中,在一些实施方式中通常在100-500维,在新的高维空间中样本词被表示为词向量的形式。
在一些实施方式中,神经网络模型可以是Word2Vec模型,作为样本数据的语料库中保存有对大量样本语料进行分词后的分词结果也即大量的样本词,通过Word2Vec模型可以将样本词转化为词向量。Word2Vec模型用来训练以重新建构语言学之词文本。模型网络以词的形式表现,在word2vec中词袋模型假设下,通常词的顺序是不重要的。训练完成之后,word2vec模型可用来映射每个样本词到一个向量,可用来表示词对词之间的关系,该向量为神经网络之隐藏层。使用word2vec对清洗过的分词构建词向量,基于此即可得到包含词向量的词向量库。
在本申请中,确定会议关键词集合的过程是直接基于词向量库查询参考词对应的参考词向量,这样可节省在实际应用中,再对参考词进行向量化的数据处理时间,可快速实现获取到参考词的参考词向量,提升信息管理的效率。具体实施中,服务端可以在预先训练的词向量库中获取各所述参考词对应的参考词向量。
以下对参考词向量进行聚类处理的过程进行释义,如下:
对参考词向量进行聚类处理,具体实施中,会预设针对会议关键词提取的聚类数x,聚类处理的目的是需要将所有参考词向量构成的数据集合经过聚类得到聚类数x指示数量的集合。
聚类处理过程中:
1、从数据集合随机选择x个参考词向量作为质心;
2、对数据集中每一个参考词向量,计算参考词向量与每一个质心的距离(如欧式距离、曼哈顿距离),将参考词向量划分至最短距离指示的质心所属的集合中;
3、然后在基于质心计算公式对每个集合重新计算质心;
4、计算新的质心与原质心的目标距离,基于该距离确定聚类处理过程是否终止,若终止,则对类别内各个参考词向量进行聚类大小排序,取每个类别排名前X个词汇作为(会议)关键词;若不终止,执行上述2-4步骤。
可选的,基于该距离确定聚类处理过程是否终止,可以是设置距离阈值,在目标距离小于距离阈值时,确定终止,反之则继续执行上述2-4步骤。
可选的,上述(两两特征向量的)距离可以是采用欧式距离公式、曼哈顿距离公式、余弦距离公式、相关系数距离公式等中的至少一种计算得到。
可以理解的,在确定各关键词之后,然后确定各关键词对应的关键片段信息,由于在从多媒体会议数据转换为会议记录的过程中,参考关键词映射的多媒体会议数据中的相应会议片段;因此,在确定关键词时服务端也会随之将该会议片段的片段信息作为关键片段信息与该关键词进行关联;
根据一些实施例中,会议片段信息包括但不限于片段时间信息、片段会议标识、片段讲话者的身份信息、片段会议类型信息等信息中的至少一种。
服务端确定各所述关键词对应的关键片段信息,生成包含各所述关键词以及所述关键词的所述关键片段信息的会议关键词集合。
在一些实施例中,服务端生成会议关键词集合之后,可将会议关键词集合随之同步至客户端,或保存至本地。
S403:对所述会议关键词集合中的至少一个关键词进行语义扩展处理,得到所述语义扩展处理后的所述会议关键词集合。
可以理解的,在本申请中生成会议关键词集合之后,还可以对会议关键词集合中的会议关键词进行语义扩展处理,以增加用户信息搜索时的关键词范围;
具体实施中:服务端通过获取所述会议关键词集合中的至少一个关键词分别对应的语义关联词,然后将所述关键词对应的语义关联词加入所述会议关键词集合中。
在一种可行实施方式中,基于搜索引擎服务查询关键词对应的语义关联词,语义关联词可以是上位词、同义词、下位词等等,基于此可获取到相应关键词对应的语义关联词;
例如:“攻击”的词性有两种,分为动词和名词。针对名词词性,上位词是比“攻击”含义更广的词语,例如包括“操作”、“方法”、“事件”同义词是意思相近的词语,例如包含“突击”、“攻击”、“进攻”;下位词是词义更特殊的词语,可以理解为某一种特殊的攻击,例如包括“轰炸”。
在一种可行实施方式中,可以基于前述的词向量库来确定关键词对应的语义关联词;具体实施中,可以获取词向量库,基于所述词向量库确定与所述会议关键词集合中各所述关键词相关联的语义关联词。
其确定语义关联词过程可以是计算词向量库与关键词的词向量的距离满足阈值的词向量,基于该词向量就可以确定语义关联词;
可选的,上述距离可以是采用欧式距离公式、曼哈顿距离公式、余弦距离公式、相关系数距离公式等中的至少一种计算得到。
可选的,在一些实施场景中,词向量库生成所基于的样本数据的语料库可来源与历史多媒体会仪数据,基于大量的多媒体会议数据作为语料库进而生成得到的词向量库,更能适应以及契合多媒体会议场景下的会议需求,避免处理计算误差,影响会议查询的准确性。
可以理解的,服务端执行所述将所述参考关键词对应的语义关联词加入所述关键词集合中,具体实施中:将语义关联词作为关键词的相关联的词加入至关键词集合中,还需对语义关联词添加片段信息,具体可以将关键词的关键片段信息与语义关联词进行关联处理(可以采用数组映射、添加地址链接等方式实现关联);
在一种具体的实施场景中,服务端获取所述关键词对应的关键片段信息,然后将所述关键片段信息与所述语义关联词进行关联处理,将所述关联处理后的所述语义关联词加入至所述关键词集合中。前述过程中,实则是将关键片段信息作为所述语义关联词的片段信息属性,将关联所述片段信息属性的所述语义关联词加入至所述关键词集合中;
基于此:关键词与关键词对应的语义关联词具有同样的关键片段信息,这样用户在搜索时,搜索关键词或语义关联词均可映射到关键片段信息对应的同一会议片段数据;
在一种可行的实施方式中,在为语义关联词设置片段信息属性的过程中,可以将除关键词之外的原语义关联词在历史会议中的会议片段成分纳入参考,这样可呈现更为丰富的搜索结果。具体实施中,可理解为:除了将语义关联词对应的片段信息属性设置为“关键词对应的关键片段信息”还引入历史关键片段信息;所述历史关键片段信息对应的历史多媒体会议与所述关键片段信息对应的多媒体会议属于同一会议类型;
历史多媒体会议可理解为会议召开时间在当前信息搜索的多媒体会议之前的会议,两者同属于一会议类型;
例如,针对某一会议类型的多媒体会议事项,实际应用中可能会召开多场多媒体会议,例如多媒体会议1、多媒体会议2、...多媒体会议x;通过在设置为语义关联词设置片段信息属性的过程中,将历史会议中语义关联词对应的历史片段信息纳入参考,这样用户在信息查询时,可向用户反馈当前多媒体会议数据中的会议片段数据以及属于同一会议类型的历史会议数据中的历史会议片段数据。这样可覆盖到更全面的信息查询范围,向用户展示搜索词对应的同一会议类型中多个不同多媒体会议场景中的会议片段数据,提升了信息管理的智能性以及便捷性。
具体实施中,服务端可以获取语义关联词对应历史关键片段信息,将所述历史关键片段信息与关键片段信息作为所述语义关联词的片段信息属性,然后将关联所述片段信息属性的所述语义关联词加入至所述关键词集合中。可以实现用户根据搜索快速回看会议片段数据的功能以及可实现同一会议类型的多场不同多媒体会议的关键片段数据的获取,提大的提高了会议管理的便捷性。
S404:基于所述会议关键词集合以及所述客户端上会议信息查询请求对应的搜索词,获取所述搜索词对应的目标片段信息;
具体可参考本申请其他实施例的方法步骤,此处不再赘述。
S405:确定所述目标片段信息对应的会议片段数据,将所述会议片段数据传输至所述客户端。
具体可参考本申请其他实施例的方法步骤,此处不再赘述。
在本申请实施例中,服务端可以从至少一个客户端获取多媒体会议数据,确定多媒体会议数据对应的会议关键词集合,然后实际应用中基于所述会议关键词集合以及所述客户端上所输入的搜索词,以获取搜索词对应的目标片段信息,从而可以将所述目标片段信息对应的会议片段数据传输至所述客户端。可以避免用户采用诸如人工翻阅多媒体会议数据、查找会议记录等复杂方式才能查找到用户感兴趣的会议片段,整个会议管理过程用户仅需输入会议信息查询请求,就可以快速获取到会议片段数据,可以实现快速实现会议片段数据的获取,提升了会议管理的便捷性;以及,通过引入了自然语言处理算法,从多媒体会议数据识别产生的会议记录中来提取出会议关键词生成会议关键词集合;客户端的用户不再需要遍历整个会议过程去查找自己感兴趣的内容,仅基于搜索词就可以获取会议片段,提高了会议管理的智能性;以及,会议关键词集合可通过语义分析方式对关键词的内容进行扩展,实现了关键词范围的扩大,从而实现了用户可以根据关键词快速获取兴趣会议片段数据。
请参见图9,图9为本申请实施例提供的一种会议管理系统的架构示意图。如图9所示,所述游戏离线处理系统包括客户端集群和服务端100。
所述客户端集群可以包括至少一个客户端,如图9所示,具体包括用户1对应的客户端1、用户2对应的游戏客户端2、…、用户n对应的客户端n,n为大于0的整数。
客户端集群中的各客户端可以是具备通信功能的电子设备,该电子设备包括但不限于:可穿戴设备、手持设备、个人电脑、平板电脑、车载设备、智能手机、计算设备或连接到无线调制解调器的其它处理设备等。在不同的网络中电子设备可以叫做不同的名称,例如:用户设备、接入客户端、用户单元、用户站、移动站、移动台、远方站、远程客户端、移动设备、用户客户端、客户端、无线通信设备、用户代理或用户装置、蜂窝电话、无绳电话、个人数字处理(personal digital assistant,PDA)、5G网络或未来演进网络中的电子设备等。
所述服务端100可以是单独的服务器设备,例如:机架式、刀片、塔式、或者机柜式的服务器设备,或采用工作站、大型计算机等具备较强计算能力硬件设备;也可以是采用多个服务器组成的服务器集群,所述服务集群中的各服务器可以是以对称方式组成的,其中每台服务器在业务链路中功能等价、地位等价,各服务器均可单独对外提供服务,所述单独提供服务可以理解为无需另外的服务器的辅助。
根据一些实施例中,服务端100与客户端集群中的至少一个客户端可建立通信连接,基于该通信连接完成会议管理过程中数据的交互;
需要说明的是,服务端100与客户端集群中的至少一个客户端通过网络建立通信连接进行交互通信,其中,网络可以是无线网络,也可以是有线网络,无线网络包括但不限于蜂窝网络、无线局域网、红外网络或蓝牙网络,有线网络包括但不限于以太网、通用串行总线(universal serial bus,USB)或控制器局域网络。在一些实施例中,使用包括超文本标记语言(Hyper Text Mark-up Language,HTML)、可扩展标记语言(Extensible MarkupLanguage,XML)等的技术和/或格式来代表通过网络交换的数据(如目标压缩包)。此外还可以使用诸如安全套接字层(Secure Socket Layer,SSL)、传输层安全(Transport LayerSecurity,TLS)、虚拟专用网络(Virtual Private Network,VPN)、网际协议安全(InternetProtocol Security,IPsec)等常规加密技术来加密所有或者一些链路。在另一些实施例中,还可以使用定制和/或专用数据通信技术取代或者补充上述数据通信技术。
进一步的,上述实施例提供的会议管理系统实施例与一些实施例中的所述会议管理方法属于同一构思,其体现实现过程详见方法实施例,这里不再赘述。
下面将结合图10,对本申请实施例提供的会议管理装置进行详细介绍。需要说明的是,图10所示的会议管理装置,用于执行本申请图1~图9所示实施例的方法,为了便于说明,仅示出了与本申请实施例相关的部分,具体技术细节未揭示的,请参照本申请图1~图9所示的实施例。
请参见图10,其示出本申请实施例的会议管理装置的结构示意图。该会议管理装置1可以通过软件、硬件或者两者的结合实现成为用户客户端的全部或一部分。根据一些实施例,该会议管理装置1包括信息查询模块11和数据获取模块12,具体用于:
信息查询模块11,用于响应于输入的会议信息查询请求,基于所述会议信息查询请求向服务端进行会议信息查询;
数据获取模块12,用于接收由所述服务端发送的会议片段数据,其中,所述会议片段数据为所述服务端基于所述会议信息查询请求对应的目标片段信息所确定。
可选的,所述信息查询模块11,具体用于:
获取所述会议信息查询请求的搜索词,在会议关键词集合中查询所述搜索词对应的目标片段信息;向服务端查询所述目标片段信息对应的会议片段数据;所述关键词集合由所述服务端基于多媒体会议数据所生成;或,
获取所述会议信息查询请求的搜索词,向服务端发送所述搜索词,所述搜索词用于指示所述服务端在会议关键词集合中查询所述搜索词对应的目标片段信息。
可选的,所述信息查询模块11,具体用于:
在会议关键词集合中确定所述搜索词对应的搜索片段信息,从所述搜索片段信息中确定目标片段信息。
可选的,所述信息查询模块11,具体用于:
从所述搜索片段信息中确定片段时间参数,将所述片段时间参数作为所述搜索词对应的目标片段信息。
所述信息查询模块11,具体用于:
从所述搜索片段信息中确定片段时间参数和辅助参考参数,将所述片段时间参数和所述辅助参考参数作为所述搜索词对应的目标片段信息。
可选的,如图11所示,所述装置1,还包括:
关键词确定模块13,用于基于多媒体会议数据对应的会议关键词集合,确定至少一个参考关键词;
所述关键词确定模块13,还用于展示各所述参考关键词。
可选的,所述装置1,还用于:
在多媒体会议过程中,采集参与所述多媒体会议的会议者所对应的多媒体会议数据,将所述多媒体会议数据发送至服务端,所述多媒体会议数据用于服务端基于多媒体会议数据生成会议关键词集合;或,
在多媒体会议过程中,采集参与所述多媒体会议的会议者所对应的多媒体会议数据,将所述多媒体会议数据发送至服务端,从所述服务端获取的会议关键词集合;所述多媒体会议数据用于服务端基于多媒体会议数据生成会议关键词集合。
需要说明的是,上述实施例提供的会议管理装置在执行会议管理方法时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的会议管理装置与会议管理方法实施例属于同一构思,其体现实现过程详见方法实施例,这里不再赘述。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
请参见图12a,其示出本申请实施例的会议管理装置的结构示意图。该会议管理装置2可以通过软件、硬件或者两者的结合实现成为用户客户端的全部或一部分。根据一些实施例,该会议管理装置2包括数据确定模块21和数据发送模块22,具体用于:
数据确定模块21,用于获取客户端上会议信息查询请求所对应的目标片段信息,确定所述目标片段信息对应的会议片段数据;
数据发送模块22,用于将所述会议片段数据发送至所述客户端。
可选的,如图12b所示,所述装置2,还包括词集合确定模块23,其中,
所述词集合确定模块23,具体用于:从至少一个客户端获取多媒体会议数据,确定多媒体会议数据对应的会议关键词集合;
所述数据确定模块21,具体用于:基于所述会议关键词集合以及所述客户端上会议信息查询请求对应的搜索词,获取所述搜索词对应的目标片段信息。
可选的,所述词集合确定模块23,具体用于:
对多媒体会议数据进行文本转换处理,得到所述多媒体会议数据的会议记录,从所述会议记录中提取会议关键词集合;或,
对多媒体会议数据进行关键词识别处理,得到所述多媒体会议数据中的会议关键词集合。
可选的,所述词集合确定模块23,具体用于:
对所述会议记录进行分词处理,得到至少一个参考词;
基于所述至少一个参考词以及词向量库,从所述至少一个参考词中确定会议关键词集合。
可选的,所述词集合确定模块23,具体用于:
在词向量库中获取各所述参考词对应的参考词向量,对所述参考词向量进行聚类处理,得到至少一个关键词;
确定各所述关键词对应的关键片段信息,生成会议关键词集合,所述会议关键词集合包含所述至少一个关键词以及所述关键词对应的所述关键片段信息。
可选的,所述装置2,具体用于:
对所述会议关键词集合中的至少一个关键词进行语义扩展处理,得到所述语义扩展处理后的所述会议关键词集合。
可选的,所述装置2,具体用于:
获取所述会议关键词集合中的至少一个关键词分别对应的语义关联词,将所述关键词对应的语义关联词加入所述会议关键词集合中。
可选的,所述装置2,具体用于:
获取词向量库,基于所述词向量库确定与所述会议关键词集合中各所述关键词相关联的语义关联词。
可选的,所述装置2,具体用于:
获取所述关键词对应的关键片段信息;
将所述关键片段信息与所述语义关联词进行关联处理,将所述关联处理后的所述语义关联词加入至所述关键词集合中。
可选的,所述装置2,具体用于:
将所述关键片段信息作为所述语义关联词的片段信息属性,将关联所述片段信息属性的所述语义关联词加入至所述关键词集合中;或,
获取所述语义关联词对应历史关键片段信息,将所述历史关键片段信息与所述关键片段信息作为所述语义关联词的片段信息属性,将关联所述片段信息属性的所述语义关联词加入至所述关键词集合中,其中,所述历史关键片段信息对应的历史多媒体会议与所述关键片段信息对应的多媒体会议属于同一会议类型。
需要说明的是,上述实施例提供的会议管理装置在执行会议管理方法时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的会议管理装置与会议管理方法实施例属于同一构思,其体现实现过程详见方法实施例,这里不再赘述。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
本申请实施例还提供了一种计算机存储介质,所述计算机存储介质可以存储有多条指令,所述指令适于由处理器加载并执行如上述图1~图9所示实施例的所述会议管理方法,具体执行过程可以参见图1~图9所示实施例的具体说明,在此不进行赘述。
本申请还提供了一种计算机程序产品,该计算机程序产品存储有至少一条指令,所述至少一条指令由所述处理器加载并执行如上述图1~图9所示实施例的所述会议管理方法,具体执行过程可以参见图1~图9所示实施例的具体说明,在此不进行赘述。
请参考图13,其示出了本申请一个示例性实施例提供的电子设备的结构方框图。本申请中的电子设备可以包括一个或多个如下部件:处理器110、存储器120、输入装置130、输出装置140和总线150。处理器110、存储器120、输入装置130和输出装置140之间可以通过总线150连接。
处理器110可以包括一个或者多个处理核心。处理器110利用各种接口和线路连接整个电子设备内的各个部分,通过运行或执行存储在存储器120内的指令、程序、代码集或指令集,以及调用存储在存储器120内的数据,执行电子设备100的各种功能和处理数据。可选地,处理器110可以采用数字信号处理(digital signal processing,DSP)、现场可编程门阵列(field-programmable gate array,FPGA)、可编程逻辑阵列(programmable logicArray,PLA)中的至少一种硬件形式来实现。处理器110可集成中央处理器(centralprocessing unit,CPU)、图像处理器(graphics processing unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器110中,单独通过一块通信芯片进行实现。
存储器120可以包括随机存储器(random Access Memory,RAM),也可以包括只读存储器(read-only memory,ROM)。可选地,该存储器120包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器120可用于存储指令、程序、代码、代码集或指令集。存储器120可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等,该操作系统可以是安卓(Android)系统,包括基于Android系统深度开发的系统、苹果公司开发的IOS系统,包括基于IOS系统深度开发的系统或其它系统。存储数据区还可以存储电子设备在使用中所创建的数据比如电话本、音视频数据、聊天记录数据,等。
参见图14所示,存储器120可分为操作系统空间和用户空间,操作系统即运行于操作系统空间,原生及第三方应用程序即运行于用户空间。为了保证不同第三方应用程序均能够达到较好的运行效果,操作系统针对不同第三方应用程序为其分配相应的系统资源。然而,同一第三方应用程序中不同应用场景对系统资源的需求也存在差异,比如,在本地资源加载场景下,第三方应用程序对磁盘读取速度的要求较高;在动画渲染场景下,第三方应用程序则对GPU性能的要求较高。而操作系统与第三方应用程序之间相互独立,操作系统往往不能及时感知第三方应用程序当前的应用场景,导致操作系统无法根据第三方应用程序的具体应用场景进行针对性的系统资源适配。
为了使操作系统能够区分第三方应用程序的具体应用场景,需要打通第三方应用程序与操作系统之间的数据通信,使得操作系统能够随时获取第三方应用程序当前的场景信息,进而基于当前场景进行针对性的系统资源适配。
以操作系统为Android系统为例,存储器120中存储的程序和数据如图15所示,存储器120中可存储有Linux内核层320、系统运行时库层340、应用框架层360和应用层380,其中,Linux内核层320、系统运行库层340和应用框架层360属于操作系统空间,应用层380属于用户空间。Linux内核层320为电子设备的各种硬件提供了底层的驱动,如显示驱动、音频驱动、摄像头驱动、蓝牙驱动、Wi-Fi驱动、电源管理等。系统运行库层340通过一些C/C++库来为Android系统提供了主要的特性支持。如SQLite库提供了数据库的支持,OpenGL/ES库提供了3D绘图的支持,Webkit库提供了浏览器内核的支持等。在系统运行时库层340中还提供有安卓运行时库(Android runtime),它主要提供了一些核心库,能够允许开发者使用Java语言来编写Android应用。应用框架层360提供了构建应用程序时可能用到的各种API,开发者也可以通过使用这些API来构建自己的应用程序,比如活动管理、窗口管理、视图管理、通知管理、内容提供者、包管理、通话管理、资源管理、定位管理。应用层380中运行有至少一个应用程序,这些应用程序可以是操作系统自带的原生应用程序,比如联系人程序、短信程序、时钟程序、相机应用等;也可以是第三方开发者所开发的第三方应用程序,比如游戏类应用程序、即时通信程序、相片美化程序等。
以操作系统为IOS系统为例,存储器120中存储的程序和数据如图16所示,IOS系统包括:核心操作系统层420(Core OS layer)、核心服务层440(Core Services layer)、媒体层460(Media layer)、可触摸层480(Cocoa Touch Layer)。核心操作系统层420包括了操作系统内核、驱动程序以及底层程序框架,这些底层程序框架提供更接近硬件的功能,以供位于核心服务层440的程序框架所使用。核心服务层440提供给应用程序所需要的系统服务和/或程序框架,比如基础(Foundation)框架、账户框架、广告框架、数据存储框架、网络连接框架、地理位置框架、运动框架等等。媒体层460为应用程序提供有关视听方面的接口,如图形图像相关的接口、音频技术相关的接口、视频技术相关的接口、音视频传输技术的无线播放(AirPlay)接口等。可触摸层480为应用程序开发提供了各种常用的界面相关的框架,可触摸层480负责用户在电子设备上的触摸交互操作。比如本地通知服务、远程推送服务、广告框架、游戏工具框架、消息用户界面接口(User Interface,UI)框架、用户界面UIKit框架、地图框架等等。
在图16所示出的框架中,与大部分应用程序有关的框架包括但不限于:核心服务层440中的基础框架和可触摸层480中的UIKit框架。基础框架提供许多基本的对象类和数据类型,为所有应用程序提供最基本的系统服务,和UI无关。而UIKit框架提供的类是基础的UI类库,用于创建基于触摸的用户界面,iOS应用程序可以基于UIKit框架来提供UI,所以它提供了应用程序的基础架构,用于构建用户界面,绘图、处理和用户交互事件,响应手势等等。
其中,在IOS系统中实现第三方应用程序与操作系统数据通信的方式以及原理可参考Android系统,本申请在此不再赘述。
其中,输入装置130用于接收输入的指令或数据,输入装置130包括但不限于键盘、鼠标、摄像头、麦克风或触控设备。输出装置140用于输出指令或数据,输出装置140包括但不限于显示设备和扬声器等。在一个示例中,输入装置130和输出装置140可以合设,输入装置130和输出装置140为触摸显示屏,该触摸显示屏用于接收用户使用手指、触摸笔等任何适合的物体在其上或附近的触摸操作,以及显示各个应用程序的用户界面。触摸显示屏通常设置在电子设备的前面板。触摸显示屏可被设计成为全面屏、曲面屏或异型屏。触摸显示屏还可被设计成为全面屏与曲面屏的结合,异型屏与曲面屏的结合,本申请实施例对此不加以限定。
除此之外,本领域技术人员可以理解,上述附图所示出的电子设备的结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。比如,电子设备中还包括射频电路、输入单元、传感器、音频电路、无线保真(wireless fidelity,WiFi)模块、电源、蓝牙模块等部件,在此不再赘述。
在本申请实施例中,各步骤的执行主体可以是上文介绍的电子设备。可选地,各步骤的执行主体为电子设备的操作系统。操作系统可以是安卓系统,也可以是IOS系统,或者其它操作系统,本申请实施例对此不作限定。
本申请实施例的电子设备,其上还可以安装有显示设备,显示设备可以是各种能实现显示功能的设备,例如:阴极射线管显示器(cathode ray tubedisplay,简称CR)、发光二极管显示器(light-emitting diode display,简称LED)、电子墨水屏、液晶显示屏(liquid crystal display,简称LCD)、等离子显示面板(plasma display panel,简称PDP)等。用户可以利用电子设备101上的显示设备,来查看显示的文字、图像、视频等信息。所述电子设备可以是智能手机、平板电脑、游戏设备、AR(Augmented Reality,增强现实)设备、汽车、数据存储装置、音频播放装置、视频播放装置、笔记本、桌面计算设备、可穿戴设备诸如电子手表、电子眼镜、电子头盔、电子手链、电子项链、电子衣物等设备。
在图7所示的电子设备中,其中电子设备可以是一种客户端,处理器110可以用于调用存储器120中存储的会议管理应用程序,并具体执行以下操作:
响应于输入的会议信息查询请求,基于所述会议信息查询请求向服务端进行会议信息查询;
接收由所述服务端发送的会议片段数据,其中,所述会议片段数据为所述服务端基于所述会议信息查询请求对应的目标片段信息所确定。
在一个实施例中,所述处理器1001在执行所述基于所述会议信息查询请求向服务端进行会议信息查询时,具体执行以下步骤:
获取所述会议信息查询请求的搜索词,在会议关键词集合中查询所述搜索词对应的目标片段信息;向服务端查询所述目标片段信息对应的会议片段数据;所述关键词集合由所述服务端基于多媒体会议数据所生成;或,
获取所述会议信息查询请求的搜索词,向服务端发送所述搜索词,所述搜索词用于指示所述服务端在会议关键词集合中查询所述搜索词对应的目标片段信息。
在一个实施例中,所述处理器1001在执行所述在会议关键词集合中查询所述搜索词对应的目标片段信息时,具体执行以下步骤:
在会议关键词集合中确定所述搜索词对应的搜索片段信息,从所述搜索片段信息中确定目标片段信息。
在一个实施例中,所述处理器1001在执行所述从所述搜索片段信息中获取目标片段信息时,具体执行以下步骤:
从所述搜索片段信息中确定片段时间参数,将所述片段时间参数作为所述搜索词对应的目标片段信息。
在一个实施例中,所述处理器1001在执行所述从所述搜索片段信息中获取目标片段信息时,具体执行以下步骤:
从所述搜索片段信息中确定片段时间参数和辅助参考参数,将所述片段时间参数和所述辅助参考参数作为所述搜索词对应的目标片段信息。
在一个实施例中,所述处理器1001在执行所述响应于所输入的会议信息查询请求之前,还执行以下步骤:
基于多媒体会议数据对应的会议关键词集合,确定至少一个参考关键词;
展示各所述参考关键词。
在一个实施例中,所述处理器1001在执行所述信息管理方法时,还执行以下步骤:
在多媒体会议过程中,采集参与所述多媒体会议的会议者所对应的多媒体会议数据,将所述多媒体会议数据发送至服务端,所述多媒体会议数据用于服务端基于多媒体会议数据生成会议关键词集合;或,
在多媒体会议过程中,采集参与所述多媒体会议的会议者所对应的多媒体会议数据,将所述多媒体会议数据发送至服务端,从所述服务端获取的会议关键词集合;所述多媒体会议数据用于服务端基于多媒体会议数据生成会议关键词集合。
请参见图17,为本申请实施例提供了另一种电子设备的结构示意图。如图17所示,所述电子设备1000可以包括:至少一个处理器1001,至少一个网络接口1004,用户接口1003,存储器1005,至少一个通信总线1002。
其中,通信总线1002用于实现这些组件之间的连接通信。
其中,用户接口1003可以包括显示屏(Display)、摄像头(Camera),可选用户接口1003还可以包括标准的有线接口、无线接口。
其中,网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。
其中,处理器1001可以包括一个或者多个处理核心。处理器1001利用各种借口和线路连接整个服务器1000内的各个部分,通过运行或执行存储在存储器1005内的指令、程序、代码集或指令集,以及调用存储在存储器1005内的数据,执行服务器1000的各种功能和处理数据。可选的,处理器1001可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable Logic Array,PLA)中的至少一种硬件形式来实现。处理器1001可集成中央处理器(Central Processing Unit,CPU)、图像处理器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示屏所需要显示的内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器1001中,单独通过一块芯片进行实现。
其中,存储器1005可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。可选的,该存储器1005包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器1005可用于存储指令、程序、代码、代码集或指令集。存储器1005可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现上述各个方法实施例的指令等;存储数据区可存储上面各个方法实施例中涉及到的数据等。存储器1005可选的还可以是至少一个位于远离前述处理器1001的存储装置。如图17所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及应用程序。
在图17所示的电子设备1000中,用户接口1003主要用于为用户提供输入的接口,获取用户输入的数据;而处理器1001可以用于调用存储器1005中存储的应用程序,并具体执行以下操作:
获取客户端上会议信息查询请求所对应的目标片段信息,确定所述目标片段信息对应的会议片段数据;
将所述会议片段数据发送至所述客户端。
在一个实施例中,所述处理器1001在执行所述获取客户端上会议信息查询请求所对应的目标片段信息之前,还执行以下步骤:
从至少一个客户端获取多媒体会议数据,确定多媒体会议数据对应的会议关键词集合;
所述获取客户端上会议信息查询请求所对应的目标片段信息,包括:
基于所述会议关键词集合以及所述客户端上会议信息查询请求对应的搜索词,获取所述搜索词对应的目标片段信息。
在一个实施例中,所述处理器1001在执行所述确定多媒体会议数据对应的会议关键词集合时,具体执行以下步骤:
对多媒体会议数据进行文本转换处理,得到所述多媒体会议数据的会议记录,从所述会议记录中提取会议关键词集合;或,
对多媒体会议数据进行关键词识别处理,得到所述多媒体会议数据中的会议关键词集合。
在一个实施例中,所述处理器1001在执行,所述从所述会议记录中提取会议关键词集合时,具体执行以下步骤:
对所述会议记录进行分词处理,得到至少一个参考词;
基于所述至少一个参考词以及词向量库,从所述至少一个参考词中确定会议关键词集合。
在一个实施例中,所述处理器1001在执行所述基于所述至少一个参考词以及词向量库,从所述至少一个参考词中确定会议关键词集合时,具体执行以下步骤:
在词向量库中获取各所述参考词对应的参考词向量,对所述参考词向量进行聚类处理,得到至少一个关键词;
确定各所述关键词对应的关键片段信息,生成会议关键词集合,所述会议关键词集合包含所述至少一个关键词以及所述关键词对应的所述关键片段信息。
在一个实施例中,所述处理器1001在执行所述会议管理方法时,具体执行以下步骤:
对所述会议关键词集合中的至少一个关键词进行语义扩展处理,得到所述语义扩展处理后的所述会议关键词集合。
在一个实施例中,所述处理器1001在执行所述对所述会议关键词集合中的至少一个关键词进行语义扩展处理,得到所述语义扩展处理后的所述会议关键词集合时,具体执行以下步骤:
获取所述会议关键词集合中的至少一个关键词分别对应的语义关联词,将所述关键词对应的语义关联词加入所述会议关键词集合中。
在一个实施例中,所述处理器1001在执行所述获取各所述关键词对应的语义关联词时,具体执行以下步骤:
获取词向量库,基于所述词向量库确定与所述会议关键词集合中各所述关键词相关联的语义关联词。
在一个实施例中,所述处理器1001在执行所述将所述参考关键词对应的语义关联词加入所述关键词集合中时,具体执行以下步骤:
获取所述关键词对应的关键片段信息;
将所述关键片段信息与所述语义关联词进行关联处理,将所述关联处理后的所述语义关联词加入至所述关键词集合中。
在一个实施例中,所述处理器1001在执行所述将所述关键片段信息与所述语义关联词进行关联处理时,具体执行以下步骤:
将所述关键片段信息作为所述语义关联词的片段信息属性,将关联所述片段信息属性的所述语义关联词加入至所述关键词集合中;或,
获取所述语义关联词对应历史关键片段信息,将所述历史关键片段信息与所述关键片段信息作为所述语义关联词的片段信息属性,将关联所述片段信息属性的所述语义关联词加入至所述关键词集合中,其中,所述历史关键片段信息对应的历史多媒体会议与所述关键片段信息对应的多媒体会议属于同一会议类型。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体或随机存储记忆体等。
以上所揭露的仅为本申请较佳实施例而已,当然不能以此来限定本申请之权利范围,因此依本申请权利要求所作的等同变化,仍属本申请所涵盖的范围。

Claims (21)

1.一种会议管理方法,其特征在于,应用于客户端,所述方法包括:
响应于输入的会议信息查询请求,基于所述会议信息查询请求向服务端进行会议信息查询;
接收由所述服务端发送的会议片段数据,其中,所述会议片段数据为所述服务端基于所述会议信息查询请求对应的目标片段信息所确定。
2.根据权利要求1所述的方法,其特征在于,所述基于所述会议信息查询请求向服务端进行会议信息查询,包括:
获取所述会议信息查询请求的搜索词,在会议关键词集合中查询所述搜索词对应的目标片段信息;向服务端查询所述目标片段信息对应的会议片段数据;所述关键词集合由所述服务端基于多媒体会议数据所生成;或,
获取所述会议信息查询请求的搜索词,向服务端发送所述搜索词,所述搜索词用于指示所述服务端在会议关键词集合中查询所述搜索词对应的目标片段信息。
3.根据权利要求2所述的方法,其特征在于,所述在会议关键词集合中查询所述搜索词对应的目标片段信息,包括:
在会议关键词集合中确定所述搜索词对应的搜索片段信息,从所述搜索片段信息中确定目标片段信息。
4.根据权利要求3所述的方法,其特征在于,所述从所述搜索片段信息中获取目标片段信息,包括:
从所述搜索片段信息中确定片段时间参数,将所述片段时间参数作为所述搜索词对应的目标片段信息。
5.根据权利要求3所述的方法,其特征在于,所述从所述搜索片段信息中获取目标片段信息,包括:
从所述搜索片段信息中确定片段时间参数和辅助参考参数,将所述片段时间参数和所述辅助参考参数作为所述搜索词对应的目标片段信息。
6.根据权利要求1所述的方法,其特征在于,所述响应于输入的会议信息查询请求之前,还包括:
基于多媒体会议数据对应的会议关键词集合,确定至少一个参考关键词;
展示各所述参考关键词。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在多媒体会议过程中,采集参与所述多媒体会议的会议者所对应的多媒体会议数据,将所述多媒体会议数据发送至服务端,所述多媒体会议数据用于服务端基于多媒体会议数据生成会议关键词集合;或,
在多媒体会议过程中,采集参与所述多媒体会议的会议者所对应的多媒体会议数据,将所述多媒体会议数据发送至服务端,从所述服务端获取的会议关键词集合;所述多媒体会议数据用于服务端基于多媒体会议数据生成会议关键词集合。
8.一种会议管理方法,其特征在于,应用于服务端,所述方法包括:
获取客户端上会议信息查询请求所对应的目标片段信息,确定所述目标片段信息对应的会议片段数据;
将所述会议片段数据发送至所述客户端。
9.根据权利要求8所述的方法,其特征在于,所述获取客户端上会议信息查询请求所对应的目标片段信息之前,还包括:
从至少一个客户端获取多媒体会议数据,确定多媒体会议数据对应的会议关键词集合;
所述获取客户端上会议信息查询请求所对应的目标片段信息,包括:
基于所述会议关键词集合以及所述客户端上会议信息查询请求对应的搜索词,获取所述搜索词对应的目标片段信息。
10.根据权利要求9所述的方法,其特征在于,所述确定多媒体会议数据对应的会议关键词集合,包括:
对多媒体会议数据进行文本转换处理,得到所述多媒体会议数据的会议记录,从所述会议记录中提取会议关键词集合;或,
对多媒体会议数据进行关键词识别处理,得到所述多媒体会议数据中的会议关键词集合。
11.根据权利要求10所述的方法,其特征在于,所述从所述会议记录中提取会议关键词集合,包括:
对所述会议记录进行分词处理,得到至少一个参考词;
基于所述至少一个参考词以及词向量库,从所述至少一个参考词中确定会议关键词集合。
12.根据权利要求11所述的方法,其特征在于,所述基于所述至少一个参考词以及词向量库,从所述至少一个参考词中确定会议关键词集合,包括:
在词向量库中获取各所述参考词对应的参考词向量,对所述参考词向量进行聚类处理,得到至少一个关键词;
确定各所述关键词对应的关键片段信息,生成会议关键词集合,所述会议关键词集合包含所述至少一个关键词以及所述关键词对应的所述关键片段信息。
13.根据权利要求10所述的方法,其特征在于,所述方法还包括:
对所述会议关键词集合中的至少一个关键词进行语义扩展处理,得到所述语义扩展处理后的所述会议关键词集合。
14.根据权利要求13所述的方法,其特征在于,所述对所述会议关键词集合中的至少一个关键词进行语义扩展处理,得到所述语义扩展处理后的所述会议关键词集合,包括:
获取所述会议关键词集合中的至少一个关键词分别对应的语义关联词,将所述关键词对应的语义关联词加入所述会议关键词集合中。
15.根据权利要求14所述的方法,其特征在于,所述获取各所述关键词对应的语义关联词,包括:
获取词向量库,基于所述词向量库确定与所述会议关键词集合中各所述关键词相关联的语义关联词。
16.根据权利要求14所述的方法,其特征在于,所述将所述参考关键词对应的语义关联词加入所述关键词集合中,包括:
获取所述关键词对应的关键片段信息;
将所述关键片段信息与所述语义关联词进行关联处理,将所述关联处理后的所述语义关联词加入至所述关键词集合中。
17.根据权利要求16所述的方法,其特征在于,所述将所述关键片段信息与所述语义关联词进行关联处理,包括:
将所述关键片段信息作为所述语义关联词的片段信息属性,将关联所述片段信息属性的所述语义关联词加入至所述关键词集合中;或,
获取所述语义关联词对应历史关键片段信息,将所述历史关键片段信息与所述关键片段信息作为所述语义关联词的片段信息属性,将关联所述片段信息属性的所述语义关联词加入至所述关键词集合中,其中,所述历史关键片段信息对应的历史多媒体会议与所述关键片段信息对应的多媒体会议属于同一会议类型。
18.一种会议管理装置,其特征在于,所述装置包括:
信息查询模块,用于响应于输入的会议信息查询请求,基于所述会议信息查询请求向服务端进行会议信息查询;
数据获取模块,用于接收由所述服务端发送的会议片段数据,其中,所述会议片段数据为所述服务端基于所述会议信息查询请求对应的目标片段信息所确定。
19.一种会议管理装置,其特征在于,所述装置包括:
数据确定模块,用于获取客户端上会议信息查询请求所对应的目标片段信息,确定所述目标片段信息对应的会议片段数据;
数据发送模块,用于将所述会议片段数据发送至所述客户端。
20.一种计算机存储介质,其特征在于,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行如权利要求1~7或8-17任意一项的方法步骤。
21.一种电子设备,其特征在于,包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述计算机程序适于由所述处理器加载并执行如权利要求1~7或8-17任意一项的方法步骤。
CN202111416451.XA 2021-11-25 2021-11-25 会议管理方法、装置、存储介质及电子设备 Pending CN114064943A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111416451.XA CN114064943A (zh) 2021-11-25 2021-11-25 会议管理方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111416451.XA CN114064943A (zh) 2021-11-25 2021-11-25 会议管理方法、装置、存储介质及电子设备

Publications (1)

Publication Number Publication Date
CN114064943A true CN114064943A (zh) 2022-02-18

Family

ID=80276259

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111416451.XA Pending CN114064943A (zh) 2021-11-25 2021-11-25 会议管理方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN114064943A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115471187A (zh) * 2022-09-05 2022-12-13 漱玉平民大药房连锁股份有限公司 一种确认线下会议参会人员的方法、设备及介质
US20230308501A1 (en) * 2022-03-25 2023-09-28 Lenovo (United States) Inc. Organic conversations in a virtual group setting

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230308501A1 (en) * 2022-03-25 2023-09-28 Lenovo (United States) Inc. Organic conversations in a virtual group setting
US11949727B2 (en) * 2022-03-25 2024-04-02 Lenovo (United States) Inc. Organic conversations in a virtual group setting
CN115471187A (zh) * 2022-09-05 2022-12-13 漱玉平民大药房连锁股份有限公司 一种确认线下会议参会人员的方法、设备及介质
CN115471187B (zh) * 2022-09-05 2023-06-16 漱玉平民大药房连锁股份有限公司 一种确认线下会议参会人员的方法、设备及介质

Similar Documents

Publication Publication Date Title
CN110462730B (zh) 促进以多种语言与自动化助理的端到端沟通
JP6647351B2 (ja) 候補応答情報を生成する方法及び装置
CN110517689B (zh) 一种语音数据处理方法、装置及存储介质
WO2016197767A2 (zh) 一种表情输入方法、装置、终端和计算机可读存储介质
US11257487B2 (en) Dynamic and/or context-specific hot words to invoke automated assistant
CN107294837A (zh) 采用虚拟机器人进行对话交互的方法和系统
CN109256133A (zh) 一种语音交互方法、装置、设备及存储介质
KR102603717B1 (ko) 네트워크 시스템에서 도메인-특정 모델의 생성
WO2015196987A1 (zh) 支持自然语言的数据查询方法、开放平台及用户终端
CN114064943A (zh) 会议管理方法、装置、存储介质及电子设备
CN110692042A (zh) 在基于音频的计算环境中执行请求的动作的平台选择
CN112232066A (zh) 一种教学纲要生成方法、装置、存储介质及电子设备
CN114065720A (zh) 会议纪要生成方法、装置、存储介质及电子设备
CN113850898A (zh) 场景渲染方法及装置、存储介质及电子设备
CN116737883A (zh) 人机交互方法、装置、设备及存储介质
CN111147894A (zh) 一种手语视频的生成方法、装置及系统
US20200159824A1 (en) Dynamic Contextual Response Formulation
CN116189663A (zh) 韵律预测模型的训练方法和装置、人机交互方法和装置
CN115623134A (zh) 会议音频处理方法、装置、设备及存储介质
WO2022213943A1 (zh) 消息发送方法、消息发送装置、电子设备和存储介质
CN113763925B (zh) 语音识别方法、装置、计算机设备及存储介质
CN111966803B (zh) 对话模拟方法、装置、存储介质及电子设备
CN111556096B (zh) 信息推送方法、装置、介质及电子设备
CN112632241A (zh) 智能会话的方法、装置、设备和计算机可读介质
CN113961680A (zh) 基于人机交互的会话处理方法及装置、介质、电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination