CN110602432B - 基于生物识别的会议系统及会议数据传输方法 - Google Patents
基于生物识别的会议系统及会议数据传输方法 Download PDFInfo
- Publication number
- CN110602432B CN110602432B CN201910785475.9A CN201910785475A CN110602432B CN 110602432 B CN110602432 B CN 110602432B CN 201910785475 A CN201910785475 A CN 201910785475A CN 110602432 B CN110602432 B CN 110602432B
- Authority
- CN
- China
- Prior art keywords
- conference
- user
- controller
- terminal
- voice
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 21
- 230000005540 biological transmission Effects 0.000 title claims abstract description 15
- 230000001815 facial effect Effects 0.000 claims abstract description 70
- 238000012795 verification Methods 0.000 claims description 8
- 239000000725 suspension Substances 0.000 claims description 7
- 238000012546 transfer Methods 0.000 claims description 6
- 230000000694 effects Effects 0.000 abstract description 5
- 238000001514 detection method Methods 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000000977 initiatory effect Effects 0.000 description 2
- 238000013136 deep learning model Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003062 neural network model Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C1/00—Registering, indicating or recording the time of events or elapsed time, e.g. time-recorders for work people
- G07C1/10—Registering, indicating or recording the time of events or elapsed time, e.g. time-recorders for work people together with the recording, indicating or registering of other data, e.g. of signs of identity
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
- H04L63/0428—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Hardware Design (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Software Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Telephonic Communication Services (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明涉及一种基于生物识别的会议系统及会议数据传输方法,所述系统包括会议终端和会议控制器,各个所述会议终端分别设置于各个参会人员处,所述会议终端与所述会议控制器进行通信;所述会议终端包括:图像采集设备,用于通过摄像头采集参加会议的用户的面部图像;语音采集设备,用于通过麦克风采集参加会议的用户的语音;语音播放设备,用于播放通过所述会议控制器转发的其他会议终端的语音;以及显示屏,用于播放所述会议控制器发送的其他会议终端的图像。本发明通过面部图像的识别绑定会议终端和用户,并且通过对具有控制权的用户的语音检测可以直接执行对应的语音控制指令,操作更加方便,视频会议效果更好,适用于大范围推广应用。
Description
技术领域
本发明涉及视频会议技术领域,具体是指一种基于生物识别的会议系统及会议数据传输方法。
背景技术
视频会议系统是一种基于会议控制器,建立多个会议终端之间视频会议连接的系统。通过视频会议系统,多个用户可以足不出户,无需坐到同一个办公室既可以进行视频会议,体验到面对面开会的真实感。因此,视频会议越来越多地受到人们的欢迎。
然而,现有的视频会议系统中,用户在需要执行控制指令,例如静音、转移控制权时都需要用户手动进行操作,例如以电脑作为会议终端时,使用鼠标点击对应的按键操作,这样给用户带来了很多的不便,并且多个用户同时操作不同的控制指令时,可能会引起冲突,而无法正确执行用户的控制指令,影响会议开展效果。
发明内容
本发明提供了一种基于生物识别的会议系统及会议数据传输方法,其目的在于克服现有技术中的缺陷,通过面部图像的识别绑定会议终端和用户,并且通过对具有控制权的用户的语音检测可以直接执行对应的语音控制指令,操作更加方便,视频会议效果更好。
为了实现上述目的,本发明具有如下构成:
该基于生物识别的会议系统,包括会议终端和会议控制器,各个所述会议终端分别设置于各个参会人员处,所述会议终端与所述会议控制器进行通信;
所述会议终端包括:
图像采集设备,用于通过摄像头采集参加会议的用户的面部图像;
语音采集设备,用于通过麦克风采集参加会议的用户的语音;
语音播放设备,用于播放通过所述会议控制器转发的其他会议终端的语音;
显示屏,用于播放所述会议控制器发送的其他会议终端的图像;其中:
所述会议控制器接收到所述会议终端发出的会议开始请求时,所述会议控制器对所述图像采集设备采集的面部图像进行人脸识别,确认所述面部图像的用户身份ID;
所述会议控制器判断所述用户身份是否具有开始会议权限,如果是,则所述会议控制器推送参会人员选择列表至发送会议开始请求的会议终端,所述参会人员选择列表包括可选的参会人员的用户身份ID列表;
所述会议控制器根据开始会议的用户在所述参会人员选择列表中的选择,确定各个参会人员的用户身份ID;
所述会议控制器获取各个所述会议终端的图像采集设备采集的面部图像,分别对所述面部图像进行人脸识别,确认各个所述面部图像的用户身份ID;
所述会议控制器比对从图像中识别到的用户身份ID和参会人员的用户身份ID,判断是否有参会人员未出现在会议终端采集到的面部图像中;
如果存在,则所述会议控制器查找未出现在会议终端采集到的面部图像中的参会人员的联系方式,向该参会人员发送会议参加提醒,并记录该参会人员的缺席信息;
所述会议控制器建立参加会议的各个会议终端之间的连接,开始视频会议,并默认将语音控制权交给发送会议开始请求的用户;
所述会议控制器判断具有语音控制权的用户所对应的会议终端,将该会议终端设定为控制权会议终端;
所述会议控制器接收到控制权会议终端的语音采集设备采集到的语音时,检测所述语音中是否包括具有语音控制权的用户的语音;
如果是,则所述会议控制器判断具有语音控制权的用户的语音是否存在预设的控制指令关键词,如果存在,则执行所述控制指令关键词所对应的控制指令。
可选地,所述控制指令包括会议暂停、会议继续、会议终止、会议视频录制、会议加密、会议解密、多媒体展示、会议音量调整和转移控制权中的至少一种。
可选地,所述会议控制器检测到具有控制权的用户的语音,且用户的语音中存在转移控制权的控制指令时,所述会议控制器接收控制权会议终端的语音采集设备采集的语音,并识别具有控制权的用户的语音中接收控制权的用户身份ID;
所述会议控制器根据接收控制权的用户身份ID将该用户身份ID设定为具有控制权的用户;
所述会议控制器判断发送具有控制权的用户的图像的会议终端,将该会议终端作为新的控制权会议终端。
可选地,所述会议控制器还存储有各个用户身份ID所对应的用户密钥;
所述会议控制器在接收到各个所述会议终端发送的图像采集设备采集的面部图像并识别得到用户身份ID之后,将所述会议终端与所对应的用户身份ID进行绑定;
所述会议控制器检测到具有控制权的用户发送的语音中有会议加密指令时,开启会议加密模式;
于会议加密模式下,所述会议控制器每隔预设时间将传输至每个会议终端的数据进行加密,且加密时,针对每个会议终端的发送数据,采用所对应的会议终端的用户密钥进行加密;
所述会议终端接收到加密的数据时,提醒用户当前处于会议加密模式,并提醒用户输入用户密钥,并采用用户输入的用户密钥对数据进行解密;
如果解密成功,则所述会议终端播放接收到的数据;
如果解密失败,则所述会议终端显示密钥错误提示,并发送解密失败通知至所述会议控制器;
所述会议控制器接收到所述会议终端所对应的解密失败时,查找所述会议终端所绑定的用户身份ID,并记录该用户身份ID的离席信息。
可选地,所述会议控制器检测到具有控制权的用户发送的语音中有会议解密指令时,停止所述会议加密模式,并将会议加密模式解除通知发送至各个所述会议终端。
可选地,所述会议控制器于会议加密模式下接收到所述会议终端所对应的解密失败并记录该用户身份ID的离席信息之后,将所对应的会议终端设定为暂停会议终端,并不再向该会议终端继续发送视频会议数据。
可选地,所述暂停会议终端接收到用户的重新开始会议请求时,判断当前的会议模式是否为会议加密模式;
如果是会议加密模式,则所述暂停会议终端提醒用户输入用户密钥,并采集用户的面部图像,所述暂停会议终端将重新开始会议请求、用户的面部图像和用户输入的用户密钥发送至所述会议控制器;
如果是会议解密模式,则所述暂停会议终端采集用户的面部图像,所述暂停会议终端将用户的面部图像和重新开始会议请求发送至所述会议控制器。
可选地,所述会议控制器接收到重新开始会议请求时,判断当前的会议模式是否为会议加密模式;
如果是会议加密模式,则所述会议控制器验证用户密钥,并验证用户的面部图像是否识别到所绑定的用户身份ID的人脸,如果用户密钥验证成功且面部图像验证成功,则所述会议控制器将暂停会议终端重新加入会议,并记录用户的返回信息,否则,所述会议控制器仍然将所述会议终端设置为暂停会议终端;
如果是会议解密模式,则所述会议控制器验证用户的面部图像是否识别到所绑定的用户身份ID的人脸,如果面部图像验证成功,则所述会议控制器将暂停会议终端重新加入会议,并记录用户的返回信息,否则,所述会议控制器仍然将所述会议终端设置为暂停会议终端。
本发明实施例还提供一种会议数据传输方法,采用所述的基于生物识别的会议系统,所述方法包括如下步骤:
一会议终端接收到用户的会议开始请求时,通过所述图像采集设备采集用户的面部图像;
所述会议终端将会议开始请求和用户的面部图像发送至所述会议控制器;
所述会议控制器接收到所述会议终端发出的会议开始请求时,所述会议控制器对所述图像采集设备采集的面部图像进行人脸识别,确认所述面部图像的用户身份ID;
所述会议控制器判断所述用户身份是否具有开始会议权限,如果是,则所述会议控制器推送参会人员选择列表至发送会议开始请求的会议终端,所述参会人员选择列表包括可选的参会人员的用户身份ID列表;
所述会议终端的显示屏显示所述参会人员选择列表,并将用户选择的参会人员的指令发送至所述会议控制器;
所述会议控制器根据开始会议的用户在所述参会人员选择列表中的选择,确定各个参会人员的用户身份ID;
所述会议控制器获取各个所述会议终端的图像采集设备采集的面部图像,分别对所述面部图像进行人脸识别,确认各个所述面部图像的用户身份ID;
所述会议控制器比对从图像中识别到的用户身份ID和参会人员的用户身份ID,判断是否有参会人员未出现在会议终端采集到的面部图像中;
如果存在,则所述会议控制器查找未出现在会议终端采集到的面部图像中的参会人员的联系方式,向该参会人员发送会议参加提醒,并记录该参会人员的缺席信息;
所述会议控制器建立参加会议的各个会议终端之间的连接,开始视频会议,并默认将语音控制权交给发送会议开始请求的用户;
所述会议控制器判断具有语音控制权的用户所对应的会议终端,将该会议终端设定为控制权会议终端;
所述会议控制器接收到控制权会议终端的语音采集设备采集到的语音时,检测所述语音中是否包括具有语音控制权的用户的语音;
如果是,则所述会议控制器判断具有语音控制权的用户的语音是否存在预设的控制指令关键词,如果存在,则执行所述控制指令关键词所对应的控制指令。
采用了该发明中的基于生物识别的会议系统及会议数据传输方法,具有如下有益效果:
本发明通过面部图像的识别绑定会议终端和用户,并且通过对具有控制权的用户的语音检测可以直接执行对应的语音控制指令,默认具有控制权的用户为发起会议请求的用户,并且可以由用户自由选择参加会议的人员,并可以采用图像识别的方式自动实现会议签到,操作更加方便,视频会议效果更好;进一步地,在会议进行过程中,可以方便地进行控制权的转移,保证同一时间段只有一个用户具有控制权的同时,还为更多用户提供了控制的可能,适用于大范围推广应用。
附图说明
图1为本发明一实施例的基于生物识别的会议系统的结构示意图;
图2为本发明一实施例的会议终端的结构框图;
图3为本发明一实施例的控制权转移的流程图;
图4为本发明一实施例的会议加密模式的流程图;
图5为本发明一实施例的基于生物识别的会议数据传输方法的流程图。
附图标记:
M100 会议终端
M110 图像采集设备
M120 语音采集设备
M130 语音播放设备
M140 显示屏
M200 会议控制器
具体实施方式
为了能够更清楚地描述本发明的技术内容,下面结合具体实施例来进行进一步的描述。
为了解决现有技术中的技术问题,本发明提供了一种基于生物识别的会议系统。如图1所示,在本发明一实施例中,所述基于生物识别的会议系统包括会议终端M100和会议控制器M200,各个所述会议终端M100分别设置于各个参会人员处,所述会议终端M100与所述会议控制器M200进行通信。
如图2所示,所述会议终端M100包括:
图像采集设备M110,用于通过摄像头采集参加会议的用户的面部图像;
语音采集设备M120,用于通过麦克风采集参加会议的用户的语音;
语音播放设备M130,用于播放通过所述会议控制器M200转发的其他会议终端M100的语音;
显示屏M140,用于播放所述会议控制器M200发送的其他会议终端M100的图像。
所述会议终端M100可以是用户使用的手机、平板电脑等移动终端,用户可以很方便地使用自己的移动终端参加视频会议。在其他可选的实施方式中,所述会议终端M100也可以是用户的笔记本电脑或者专门的会议终端M100等,均属于本发明的保护范围之内。
所述会议控制器M200接收到所述会议终端M100发出的会议开始请求时,所述会议控制器M200对所述图像采集设备采集的面部图像进行人脸识别,确认所述面部图像的用户身份ID;本发明中的人脸识别可以采用既有的人脸数据库进行人脸比对,计算人脸的相似度确定身份ID,也可以采用训练好的深度学习模型(例如卷机神经网络模型)来进行人脸比对等,在其他可选的实施方式中,也可以采用其他现有的人脸识别方式,均属于本发明的保护范围之内;
所述会议控制器M200判断所述用户身份是否具有开始会议权限,如果是,则所述会议控制器M200推送参会人员选择列表至发送会议开始请求的会议终端M100,所述参会人员选择列表包括可选的参会人员的用户身份ID列表;
所述会议控制器M200根据开始会议的用户在所述参会人员选择列表中的选择,确定各个参会人员的用户身份ID;由此,所述会议控制器M200可以实现参会人员的快速选择;
所述会议控制器M200获取各个所述会议终端M100的图像采集设备M110采集的面部图像,分别对所述面部图像进行人脸识别,确认各个所述面部图像的用户身份ID;
所述会议控制器M200比对从图像中识别到的用户身份ID和参会人员的用户身份ID,判断是否有参会人员未出现在会议终端M100采集到的面部图像中;
如果存在,则所述会议控制器M200查找未出现在会议终端M100采集到的面部图像中的参会人员的联系方式,向该参会人员发送会议参加提醒,并记录该参会人员的缺席信息;由此,本发明可以实现参会人员的自动签到,自动记录未参会人员的信息;
所述会议控制器M200建立参加会议的各个会议终端M100之间的连接,开始视频会议,并默认将语音控制权交给发送会议开始请求的用户;在视频会议过程中,会议控制器M200采集各个会议终端M100发送的图像和语音,将语音转发至其他各个会议终端M100,并且将各个会议终端M100的图像进行合成,将合成后的图像转发至各个会议终端M100;
使用该会议终端M100的各个用户无需坐在一起既可以实现“面对面”的会议,沟通更加方便。
所述会议控制器M200判断具有语音控制权的用户所对应的会议终端M100,将该会议终端M100设定为控制权会议终端M100;
所述会议控制器M200接收到控制权会议终端M100的语音采集设备M120采集到的语音时,检测所述语音中是否包括具有语音控制权的用户的语音;
如果是,则所述会议控制器M200判断具有语音控制权的用户的语音是否存在预设的控制指令关键词,如果存在,则执行所述控制指令关键词所对应的控制指令。用户的语音识别可以采用现有的语音识别方式,识别其中是否有预设的控制指令关键词。
因此,所述会议控制器M200在视频会议开始之后,需要检测语音指令时,无需检测每个会议终端M100发送的语音,只需要对控制器会议终端M100的语音进行识别即可,可以大大降低会议终端M100识别语音指令的数据处理量,并且对语音指令的识别更加准确和高校。
在该实施例中,所述控制指令包括会议暂停、会议继续、会议终止、会议视频录制、会议加密、会议解密、多媒体展示、会议音量调整和转移控制权中的至少一种。控制指令关键词可以是跟控制指令密切相关的一些预设的关键词,例如,“会议暂停”指令控制的控制指令关键词可以包括“暂停会议”、“暂停”、“等一下继续”等,“会议加密”指令控制的控制指令关键词可以包括“机密”、“加密”等。
如图3所示,所述会议控制器M200检测到具有控制权的用户的语音,且用户的语音中存在转移控制权的控制指令时,所述会议控制器M200接收控制权会议终端M100的语音采集设备M120采集的语音,并识别具有控制权的用户的语音中接收控制权的用户身份ID;
所述会议控制器M200根据接收控制权的用户身份ID将该用户身份ID设定为具有控制权的用户;
所述会议控制器M200判断发送具有控制权的用户的图像的会议终端M100,将该会议终端M100作为新的控制权会议终端M100。
由此,通过本发明的会议系统,可以方便地进行控制权的转移,保障同一时段只有一个用户进行控制,并且其他用户也在前一具有控制权的用户进行控制权转移后也可以实现控制。
在该实施例中,所述会议控制器M200还存储有各个用户身份ID所对应的用户密钥;
所述会议控制器M200在接收到各个所述会议终端M100发送的图像采集设备M110采集的面部图像并识别得到用户身份ID之后,将所述会议终端M100与所对应的用户身份ID进行绑定。
如图4所示,所述会议控制器M200检测到具有控制权的用户发送的语音中有会议加密指令时,开启会议加密模式;
于会议加密模式下,所述会议控制器M200每隔预设时间将传输至每个会议终端M100的数据进行加密,且加密时,针对每个会议终端M100的发送数据,采用所对应的会议终端M100的用户密钥进行加密;
所述会议终端M100接收到加密的数据时,提醒用户当前处于会议加密模式,并提醒用户输入用户密钥,并采用用户输入的用户密钥对数据进行解密;
如果解密成功,则所述会议终端M100播放接收到的数据;
如果解密失败,则所述会议终端M100显示密钥错误提示,并发送解密失败通知至所述会议控制器M200;
所述会议控制器M200接收到所述会议终端M100所对应的解密失败时,查找所述会议终端M100所绑定的用户身份ID,并记录该用户身份ID的离席信息。
因此,本发明的会议系统可以实现会议数据的加密传输,即使传输的数据被其他人恶意拦截,由于会议数据是采用用户密钥进行加密的,恶意拦截到的会议数据也无法被解密,从而全面保障会议数据的安全传输。并且,由于每个用户的身份ID对应有不同的用户密钥,并且用户密钥是可以每隔一段时间进行更新的,恶意拦截的人即使获取到会议数据也十分难以破解。
此外,在会议进行过程中,每隔一段时间就进行密钥验证,一方面可以保障会议安全传输,不被窃取,另一方面也可以对参加会议的人员的在会状态进行监控,避免参加会议的人员离席时,会议终端M100被他人使用而窃取会议机密。
在该实施例中,所述会议控制器M200检测到具有控制权的用户发送的语音中有会议解密指令时,停止所述会议加密模式,并将会议加密模式解除通知发送至各个所述会议终端M100。
在该实施例中,所述会议控制器M200于会议加密模式下接收到所述会议终端M100所对应的解密失败并记录该用户身份ID的离席信息之后,将所对应的会议终端M100设定为暂停会议终端M100,并不再向该会议终端M100继续发送视频会议数据。这样在会议终端M100所对应的人员不在终端前面时,不再向该会议终端M100发送视频会议数据,减少了数据通信量,避免会议终端M100发送不必要的数据。此处视频会议数据包括视频图像数据和视频音频图像。
在该实施例中,所述暂停会议终端M100接收到用户的重新开始会议请求时,判断当前的会议模式是否为会议加密模式;
如果是会议加密模式,则所述暂停会议终端M100提醒用户输入用户密钥,并采集用户的面部图像,所述暂停会议终端M100将重新开始会议请求、用户的面部图像和用户输入的用户密钥发送至所述会议控制器M200;
如果是会议解密模式,则所述暂停会议终端M100采集用户的面部图像,所述暂停会议终端M100将用户的面部图像和重新开始会议请求发送至所述会议控制器M200。
在该实施例中,所述会议控制器M200接收到重新开始会议请求时,判断当前的会议模式是否为会议加密模式;
如果是会议加密模式,则所述会议控制器M200验证用户密钥,并验证用户的面部图像是否识别到所绑定的用户身份ID的人脸,如果用户密钥验证成功且面部图像验证成功,则所述会议控制器M200将暂停会议终端M100重新加入会议,并记录用户的返回信息,否则,所述会议控制器M200仍然将所述会议终端M100设置为暂停会议终端M100;因此,如果在会议加密模式下,只有用户正确输入了用户密钥,且面部图像验证成功,才可以重新将该会议终端M100加入会议,双重验证保障会议加密模式下视频会议数据的安全性,此处重新加入会议指的是继续获取该会议终端M100采集的图像和音频数据,并且将其他会议终端M100的图像数据和音频数据采用用户的用户密钥加密后发送给该会议终端M100;
如果是会议解密模式,则所述会议控制器M200验证用户的面部图像是否识别到所绑定的用户身份ID的人脸,如果面部图像验证成功,则所述会议控制器M200将暂停会议终端M100重新加入会议,并记录用户的返回信息,否则,所述会议控制器M200仍然将所述会议终端M100设置为暂停会议终端M100。
如图5所示,本发明实施例还提供一种会议数据传输方法,采用所述的基于生物识别的会议系统,所述方法包括如下步骤:
一会议终端接收到用户的会议开始请求时,通过所述图像采集设备采集用户的面部图像;
所述会议终端将会议开始请求和用户的面部图像发送至所述会议控制器;
所述会议控制器接收到所述会议终端发出的会议开始请求时,所述会议控制器对所述图像采集设备采集的面部图像进行人脸识别,确认所述面部图像的用户身份ID;
所述会议控制器判断所述用户身份是否具有开始会议权限,如果是,则所述会议控制器推送参会人员选择列表至发送会议开始请求的会议终端,所述参会人员选择列表包括可选的参会人员的用户身份ID列表;
所述会议终端的显示屏显示所述参会人员选择列表,并将用户选择的参会人员的指令发送至所述会议控制器;
所述会议控制器根据开始会议的用户在所述参会人员选择列表中的选择,确定各个参会人员的用户身份ID;
所述会议控制器获取各个所述会议终端的图像采集设备采集的面部图像,分别对所述面部图像进行人脸识别,确认各个所述面部图像的用户身份ID;
所述会议控制器比对从图像中识别到的用户身份ID和参会人员的用户身份ID,判断是否有参会人员未出现在会议终端采集到的面部图像中;
如果存在,则所述会议控制器查找未出现在会议终端采集到的面部图像中的参会人员的联系方式,向该参会人员发送会议参加提醒,并记录该参会人员的缺席信息;
所述会议控制器建立参加会议的各个会议终端之间的连接,开始视频会议,并默认将语音控制权交给发送会议开始请求的用户;
所述会议控制器判断具有语音控制权的用户所对应的会议终端,将该会议终端设定为控制权会议终端;
所述会议控制器接收到控制权会议终端的语音采集设备采集到的语音时,检测所述语音中是否包括具有语音控制权的用户的语音;
如果是,则所述会议控制器判断具有语音控制权的用户的语音是否存在预设的控制指令关键词,如果存在,则执行所述控制指令关键词所对应的控制指令。
在该种会议数据传输方法中,各个步骤的具体实现方式均可以采用上述基于生物识别的会议系统中各个功能模块的功能实现方式,在此不予赘述。
与现有技术相比,采用了该发明中的基于生物识别的会议系统及会议数据传输方法,具有如下有益效果:
本发明通过面部图像的识别绑定会议终端和用户,并且通过对具有控制权的用户的语音检测可以直接执行对应的语音控制指令,默认具有控制权的用户为发起会议请求的用户,并且可以由用户自由选择参加会议的人员,并可以采用图像识别的方式自动实现会议签到,操作更加方便,视频会议效果更好;进一步地,在会议进行过程中,可以方便地进行控制权的转移,保证同一时间段只有一个用户具有控制权的同时,还为更多用户提供了控制的可能,适用于大范围推广应用。
在此说明书中,本发明已参照其特定的实施例作了描述。但是,很显然仍可以作出各种修改和变换而不背离本发明的精神和范围。因此,说明书和附图应被认为是说明性的而非限制性的。
Claims (6)
1.一种基于生物识别的会议系统,其特征在于,所述系统包括会议终端和会议控制器,各个所述会议终端分别设置于各个参会人员处,所述会议终端与所述会议控制器进行通信;
所述会议终端包括:
图像采集设备,用于通过摄像头采集参加会议的用户的面部图像;
语音采集设备,用于通过麦克风采集参加会议的用户的语音;
语音播放设备,用于播放通过所述会议控制器转发的其他会议终端的语音;
显示屏,用于播放所述会议控制器发送的其他会议终端的图像;其中:
所述会议控制器接收到所述会议终端发出的会议开始请求时,所述会议控制器对所述图像采集设备采集的面部图像进行人脸识别,确认所述面部图像的用户身份ID;
所述会议控制器判断所述用户身份是否具有开始会议权限,如果是,则所述会议控制器推送参会人员选择列表至发送会议开始请求的会议终端,所述参会人员选择列表包括可选的参会人员的用户身份ID列表;
所述会议控制器根据开始会议的用户在所述参会人员选择列表中的选择,确定各个参会人员的用户身份ID;
所述会议控制器获取各个所述会议终端的图像采集设备采集的面部图像,分别对所述面部图像进行人脸识别,确认各个所述面部图像的用户身份ID;
所述会议控制器比对从图像中识别到的用户身份ID和参会人员的用户身份ID,判断是否有参会人员未出现在会议终端采集到的面部图像中;
如果存在,则所述会议控制器查找未出现在会议终端采集到的面部图像中的参会人员的联系方式,向该参会人员发送会议参加提醒,并记录该参会人员的缺席信息;
所述会议控制器建立参加会议的各个会议终端之间的连接,开始视频会议,并默认将语音控制权交给发送会议开始请求的用户;
所述会议控制器判断具有语音控制权的用户所对应的会议终端,将该会议终端设定为控制权会议终端;
所述会议控制器接收到控制权会议终端的语音采集设备采集到的语音时,检测所述语音中是否包括具有语音控制权的用户的语音;
如果是,则所述会议控制器判断具有语音控制权的用户的语音是否存在预设的控制指令关键词,如果存在,则执行所述控制指令关键词所对应的控制指令;
所述控制指令包括会议暂停、会议继续、会议终止、会议视频录制、会议加密、会议解密、多媒体展示、会议音量调整和转移控制权中的至少一种;
所述会议控制器检测到具有控制权的用户的语音,且用户的语音中存在转移控制权的控制指令时,所述会议控制器接收控制权会议终端的语音采集设备采集的语音,并识别具有控制权的用户的语音中接收控制权的用户身份ID;
所述会议控制器根据接收控制权的用户身份ID将该用户身份ID设定为具有控制权的用户;
所述会议控制器判断发送具有控制权的用户的图像的会议终端,将该会议终端作为新的控制权会议终端;
所述会议控制器还存储有各个用户身份ID所对应的用户密钥;
所述会议控制器在接收到各个所述会议终端发送的图像采集设备采集的面部图像并识别得到用户身份ID之后,将所述会议终端与所对应的用户身份ID进行绑定;
所述会议控制器检测到具有控制权的用户发送的语音中有会议加密指令时,开启会议加密模式;
于会议加密模式下,所述会议控制器每隔预设时间将传输至每个会议终端的数据进行加密,且加密时,针对每个会议终端的发送数据,采用所对应的会议终端的用户密钥进行加密;
所述会议终端接收到加密的数据时,提醒用户当前处于会议加密模式,并提醒用户输入用户密钥,并采用用户输入的用户密钥对数据进行解密;
如果解密成功,则所述会议终端播放接收到的数据;
如果解密失败,则所述会议终端显示密钥错误提示,并发送解密失败通知至所述会议控制器;
所述会议控制器接收到所述会议终端所对应的解密失败时,查找所述会议终端所绑定的用户身份ID,并记录该用户身份ID的离席信息。
2.根据权利要求1所述的基于生物识别的会议系统,其特征在于,所述会议控制器检测到具有控制权的用户发送的语音中有会议解密指令时,停止所述会议加密模式,并将会议加密模式解除通知发送至各个所述会议终端。
3.根据权利要求2所述的基于生物识别的会议系统,其特征在于,所述会议控制器于会议加密模式下接收到所述会议终端所对应的解密失败并记录该用户身份ID的离席信息之后,将所对应的会议终端设定为暂停会议终端,并不再向该会议终端继续发送视频会议数据。
4.根据权利要求3所述的基于生物识别的会议系统,其特征在于,所述暂停会议终端接收到用户的重新开始会议请求时,判断当前的会议模式是否为会议加密模式;
如果是会议加密模式,则所述暂停会议终端提醒用户输入用户密钥,并采集用户的面部图像,所述暂停会议终端将重新开始会议请求、用户的面部图像和用户输入的用户密钥发送至所述会议控制器;
如果是会议解密模式,则所述暂停会议终端采集用户的面部图像,所述暂停会议终端将用户的面部图像和重新开始会议请求发送至所述会议控制器。
5.根据权利要求4所述的基于生物识别的会议系统,其特征在于,所述会议控制器接收到重新开始会议请求时,判断当前的会议模式是否为会议加密模式;
如果是会议加密模式,则所述会议控制器验证用户密钥,并验证用户的面部图像是否识别到所绑定的用户身份ID的人脸,如果用户密钥验证成功且面部图像验证成功,则所述会议控制器将暂停会议终端重新加入会议,并记录用户的返回信息,否则,所述会议控制器仍然将所述会议终端设置为暂停会议终端;
如果是会议解密模式,则所述会议控制器验证用户的面部图像是否识别到所绑定的用户身份ID的人脸,如果面部图像验证成功,则所述会议控制器将暂停会议终端重新加入会议,并记录用户的返回信息,否则,所述会议控制器仍然将所述会议终端设置为暂停会议终端。
6.一种会议数据传输方法,其特征在于,采用权利要求1至5中任一项所述的基于生物识别的会议系统,所述方法包括如下步骤:
一会议终端接收到用户的会议开始请求时,通过所述图像采集设备采集用户的面部图像;
所述会议终端将会议开始请求和用户的面部图像发送至所述会议控制器;
所述会议控制器接收到所述会议终端发出的会议开始请求时,所述会议控制器对所述图像采集设备采集的面部图像进行人脸识别,确认所述面部图像的用户身份ID;
所述会议控制器判断所述用户身份是否具有开始会议权限,如果是,则所述会议控制器推送参会人员选择列表至发送会议开始请求的会议终端,所述参会人员选择列表包括可选的参会人员的用户身份ID列表;
所述会议终端的显示屏显示所述参会人员选择列表,并将用户选择的参会人员的指令发送至所述会议控制器;
所述会议控制器根据开始会议的用户在所述参会人员选择列表中的选择,确定各个参会人员的用户身份ID;
所述会议控制器获取各个所述会议终端的图像采集设备采集的面部图像,分别对所述面部图像进行人脸识别,确认各个所述面部图像的用户身份ID;
所述会议控制器比对从图像中识别到的用户身份ID和参会人员的用户身份ID,判断是否有参会人员未出现在会议终端采集到的面部图像中;
如果存在,则所述会议控制器查找未出现在会议终端采集到的面部图像中的参会人员的联系方式,向该参会人员发送会议参加提醒,并记录该参会人员的缺席信息;
所述会议控制器建立参加会议的各个会议终端之间的连接,开始视频会议,并默认将语音控制权交给发送会议开始请求的用户;
所述会议控制器判断具有语音控制权的用户所对应的会议终端,将该会议终端设定为控制权会议终端;
所述会议控制器接收到控制权会议终端的语音采集设备采集到的语音时,检测所述语音中是否包括具有语音控制权的用户的语音;
如果是,则所述会议控制器判断具有语音控制权的用户的语音是否存在预设的控制指令关键词,如果存在,则执行所述控制指令关键词所对应的控制指令。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910785475.9A CN110602432B (zh) | 2019-08-23 | 2019-08-23 | 基于生物识别的会议系统及会议数据传输方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910785475.9A CN110602432B (zh) | 2019-08-23 | 2019-08-23 | 基于生物识别的会议系统及会议数据传输方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110602432A CN110602432A (zh) | 2019-12-20 |
CN110602432B true CN110602432B (zh) | 2021-01-26 |
Family
ID=68855362
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910785475.9A Active CN110602432B (zh) | 2019-08-23 | 2019-08-23 | 基于生物识别的会议系统及会议数据传输方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110602432B (zh) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111245629B (zh) * | 2020-01-13 | 2022-05-10 | 北京声智科技有限公司 | 会议控制方法、装置、设备及存储介质 |
CN111432157B (zh) * | 2020-02-18 | 2023-04-07 | 视联动力信息技术股份有限公司 | 基于视联网的会议处理方法、装置、设备及存储介质 |
EP4128618A4 (en) * | 2020-03-31 | 2024-04-10 | Telefonaktiebolaget LM ERICSSON (PUBL) | ELIMINATION OF UNINTELLIGIBLE SPEECH BASED ON ARTIFICIAL INTELLIGENCE (AI) |
CN111554301A (zh) * | 2020-04-29 | 2020-08-18 | 深圳供电局有限公司 | 进行现场会议的方法、系统及装置、外接语音助手设备 |
CN111554000A (zh) * | 2020-04-29 | 2020-08-18 | 深圳供电局有限公司 | 进行会议的方法、装置及系统、计算机设备 |
CN111757042A (zh) * | 2020-06-28 | 2020-10-09 | 深圳市闪联信息技术有限公司 | 一种基于人脸认证的远程协同入会的方法及系统 |
CN111861414B (zh) * | 2020-07-28 | 2023-09-29 | 杭州海康威视数字技术股份有限公司 | 一种会议考勤系统、方法及设备 |
CN112911199B (zh) * | 2021-01-19 | 2023-07-07 | 深圳市皓丽智能科技有限公司 | 一种自组织会议通信方法、系统及其相关组件 |
CN113098699B (zh) * | 2021-03-30 | 2023-03-07 | 四川巧夺天工信息安全智能设备有限公司 | 一种面向智能终端的用户信息分发及配对的方法 |
CN112866298A (zh) * | 2021-04-09 | 2021-05-28 | 武汉吉迅信息技术有限公司 | 一种ims多媒体会议终端数据采集方法 |
CN113301291B (zh) * | 2021-05-13 | 2022-12-02 | 中国联合网络通信集团有限公司 | 网络视频会议中防干扰方法、系统、设备及存储介质 |
CN114040147A (zh) * | 2021-12-09 | 2022-02-11 | 李雪飞 | 终端开机即可参会且参会人自动签到的视频会议系统 |
CN114615461B (zh) * | 2022-05-12 | 2022-09-06 | 广州市保伦电子有限公司 | 一种多场会议并存的视频会议远程交互系统 |
CN115001860B (zh) * | 2022-07-20 | 2022-11-15 | 广州市保伦电子有限公司 | 无纸化数字会议的安全管理系统 |
CN116545774B (zh) * | 2023-07-05 | 2023-09-15 | 四川西盾科技有限公司 | 一种音视频会议安全保密方法及系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106254813A (zh) * | 2016-07-29 | 2016-12-21 | 微云(武汉)科技有限公司 | 一种实现移动视频会议的方法、视频会议服务器以及系统 |
CN108280893A (zh) * | 2018-01-31 | 2018-07-13 | 叶建铜 | 一种远程人脸识别语音点名系统 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101635823B (zh) * | 2009-08-27 | 2011-09-21 | 中兴通讯股份有限公司 | 一种终端对视频会议数据进行加密的方法及系统 |
JP5223824B2 (ja) * | 2009-09-15 | 2013-06-26 | コニカミノルタビジネステクノロジーズ株式会社 | 画像送信装置、画像送信方法および画像送信プログラム |
KR20160035884A (ko) * | 2014-09-24 | 2016-04-01 | 삼성전자주식회사 | 회의 진행 장치 및 회의 진행 방법 |
CN107547925A (zh) * | 2017-09-27 | 2018-01-05 | 刘伟平 | 一种视频学习监督系统 |
CN109039509A (zh) * | 2018-07-16 | 2018-12-18 | 广州辉群智能科技有限公司 | 一种语音控制广播设备的方法及广播设备 |
CN109658533A (zh) * | 2018-11-23 | 2019-04-19 | 深圳市沃特沃德股份有限公司 | 视频会议的签到方法、系统及智能终端 |
CN109413362A (zh) * | 2018-11-27 | 2019-03-01 | 平安科技(深圳)有限公司 | 一种电话语音接入视频会议方法及装置 |
CN109379205B (zh) * | 2018-11-27 | 2022-06-17 | 平安科技(深圳)有限公司 | 一种会议延时的处理方法和装置 |
CN109951519A (zh) * | 2019-01-22 | 2019-06-28 | 视联动力信息技术股份有限公司 | 一种会议业务的控制方法和装置 |
-
2019
- 2019-08-23 CN CN201910785475.9A patent/CN110602432B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106254813A (zh) * | 2016-07-29 | 2016-12-21 | 微云(武汉)科技有限公司 | 一种实现移动视频会议的方法、视频会议服务器以及系统 |
CN108280893A (zh) * | 2018-01-31 | 2018-07-13 | 叶建铜 | 一种远程人脸识别语音点名系统 |
Also Published As
Publication number | Publication date |
---|---|
CN110602432A (zh) | 2019-12-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110602432B (zh) | 基于生物识别的会议系统及会议数据传输方法 | |
US8264520B2 (en) | Communication system, connection controller, terminal, and control method | |
US9300910B2 (en) | Video mail capture, processing and distribution | |
AU2003266591B2 (en) | Remote education system, course attendance check method, and course attendance check program | |
EP3603148B1 (en) | Wearable devices in a controlled environment | |
US20060259755A1 (en) | System and method for using biometrics technology in conferencing | |
WO2018036233A1 (zh) | 一种信息处理方法、装置及计算机存储介质 | |
CN109413362A (zh) | 一种电话语音接入视频会议方法及装置 | |
JP6163610B2 (ja) | 偽造防止検証方法、装置、プログラム、及び記録媒体 | |
US20180352079A1 (en) | Conference functionality between inmates and multiple approved parties in controlled environment | |
US20240314117A1 (en) | Variable-step authentication for communications in controlled environment | |
US20230139813A1 (en) | Authentication of video communications in a virtual environment | |
NO341316B1 (no) | Fremgangsmåte og system for å assosiere en ekstern enhet til en videokonferansesesjon. | |
WO2018179880A1 (ja) | 動画コンテンツ制御システム、方法およびプログラム | |
JP2012054646A (ja) | 端末装置、情報提示方法および情報提示プログラム | |
JP2002251393A (ja) | 記録装置、記録方法、プログラムおよび記録媒体並びに記録再生システム | |
US20220303314A1 (en) | Image Sharing and Conference Participant Identification Method and Image Sharing and Conference Participant Identification System Capable of Performing Bi-directional Communications and Partitioning Images | |
US8635657B2 (en) | Authenticated broadcast transmission utilizing a content retransmitter | |
US11394695B2 (en) | Methods and systems for generating a secure communication channel interface for video streaming of sensitive content | |
CN115769541A (zh) | 认证系统、认证装置、认证方法以及程序 | |
JP2015005125A (ja) | 伝送システム、伝送端末および伝送端末プログラム | |
JP2000137809A (ja) | 携帯型情報処理装置 | |
CN116488926B (zh) | 信息处理方法、互连系统、计算机存储介质及计算机设备 | |
WO2023149510A1 (ja) | 認証装置、認証支援方法、及びプログラム | |
WO2023047800A1 (ja) | 認証装置、認証方法、認証システム、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20230621 Address after: 510080 Side of Guanghua Highway to the west of Tangbei Village Road, Jianggao, Baiyun District, Guangzhou City, Guangdong Province (Warehouse 203) Patentee after: Guangzhou leyun Information Technology Co.,Ltd. Address before: 215000 627 LUSHEN Avenue, Lili Town, Wujiang District, Suzhou City, Jiangsu Province Patentee before: SUZHOU MINIGEE INFORMATION TECHNOLOGY CO.,LTD. |