CN112307800A - 视频会议中电子铭牌的显示方法和装置 - Google Patents

视频会议中电子铭牌的显示方法和装置 Download PDF

Info

Publication number
CN112307800A
CN112307800A CN201910673037.3A CN201910673037A CN112307800A CN 112307800 A CN112307800 A CN 112307800A CN 201910673037 A CN201910673037 A CN 201910673037A CN 112307800 A CN112307800 A CN 112307800A
Authority
CN
China
Prior art keywords
electronic
nameplate
electronic nameplate
face
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910673037.3A
Other languages
English (en)
Inventor
杨婧
郑志伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201910673037.3A priority Critical patent/CN112307800A/zh
Priority to EP20186790.0A priority patent/EP3771203A1/en
Priority to US16/937,065 priority patent/US11662879B2/en
Publication of CN112307800A publication Critical patent/CN112307800A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/53Recognition of crowd images, e.g. recognition of crowd congestion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/164Detection; Localisation; Normalisation using holistic features
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请涉及人工智能领域,揭示了一种视频会议中电子铭牌的显示方法和装置,该方法包括:获取参会人员的人脸在视频画面中的位置和所述参会人员身份信息;根据所述人脸在视频画面中的位置确定电子铭牌在所述视频画面中的显示位置和大小;通过所述电子铭牌显示所述参会人员身份信息。该方法实现了依据人脸位置进行电子铭牌的自适应调整,电子铭牌能以更加直观的方式显示,提高会议效率。

Description

视频会议中电子铭牌的显示方法和装置
技术领域
本申请涉及人工智能、智能终端领域,尤其涉及一种视频会议中电子铭牌的显示方法和装置。
背景技术
随着互联网和通信技术的不断发展,时间、地域已不再是阻碍人类交流的绊脚石。人类的交流方式日益丰富,“面对面”的沟通已成为人们日常必不可少的行为。随着企业业务的扩展和信息时代的飞速发展,越来越多的企业选择远程视频会议来进行实时的沟通,以便能减少出差费用的支出,节约时间,提高会议质量和工作效率。
随着视频会议的应用场景不断扩大,视频会议不再是单一地域的会议,而是多方会议。在多方会议中,多数人可能事先互相并不认识,一时半会儿想不起名字,无法开口叫人,以致产生一种“陌生人”的尴尬气氛,甚至会漏掉领导的重要讲话,导致会议效率低等问题。于是,会务人员事先将与会者的纸质铭牌摆在桌子上,让每个人对号入座。但是,纸质铭牌回收率不高、浪费严重、不环保。随后,出现了LED桌面电子铭牌,虽然减少了纸张的浪费,但是支出费用大,不方便携带。
因此亟需一种视频会议中电子铭牌的显示方法和装置,既能减少资源浪费,又能便捷地了解与会者身份信息。
发明内容
鉴于此,本申请实施例提供了一种视频会议中电子铭牌的显示方法和装置,可以实现在不同的会议场景下参会人员的电子铭牌的自适应调整显示。
第一方面,本申请实施例提供了一种视频会议中电子铭牌的显示方法,包括:
获取参会人员的人脸在视频画面中的位置和所述参会人员的身份信息;
根据所述人脸在视频画面中的位置确定电子铭牌在所述视频画面中的显示位置和大小;
通过所述电子铭牌显示所述身份信息。
结合第一方面的实现方式,在第一方面第一种可能的实现方式中,根据所述人脸在视频画面中的位置确定电子铭牌在所述视频画面中的显示位置和大小包括:
根据所述人脸在视频画面中的位置确定所述人脸的分布情况;
根据所述人脸在视频画面中的位置和所述人脸的分布情况确定所述电子铭牌在所述视频画面中的显示位置和大小。
结合第一方面、或第一方面第一种可能的实现方式,在第一方面第二种可能的实现方式中,所述方法还包括:确定电子铭牌的颜色、电子铭牌的透明度、电子铭牌的轮廓形式、电子铭牌中文字或符号的字体和电子铭牌中文字或符号的颜色。
结合第一方面、或第一方面第一种至第二种可能的实现方式,在第一方面第三种可能的实现方式中,所述方法还包括:获取输入消息,所述输入消息用于指示用户对所述电子铭牌的显示要求,所述输入消息包括通过用户手动输入和/或通过用户语音输入。
结合第一方面、或第一方面第一种至第三种可能的实现方式,在第一方面第四种可能的实现方式中,所述方法还包括:获取参会人员的肤色和/或着装颜色,根据所述参会人员的肤色和/或着装颜色确定所述电子铭牌的颜色和/或所述电子铭牌的透明度。
结合第一方面、或第一方面第一种至第四种可能的实现方式,在第一方面第五种可能的实现方式中,所述将所述身份信息通过所述电子铭牌显示之后,所述方法还包括:
检测到所述电子铭牌与所述参会人员的人脸区域或另一电子铭牌有重叠交叉,
将所述电子铭牌和/或另一电子铭牌在新的位置显示。
结合第一方面、或第一方面第一种至第五种可能的实现方式,在第一方面第六种可能的实现方式中,所述电子铭牌与其对应的参会人员的人脸区域通过直线或箭头进行连接。
结合第一方面、或第一方面第一种至第六种可能的实现方式,在第一方面第七种可能的实现方式中,所述将所述身份信息通过所述电子铭牌显示之后,所述方法还包括:
检测到所述参会人员中有至少一个第一人员的发言时长长于第一预设时长或短于第二预设时长;
将所述至少一个第一人员对应的电子铭牌更换为新的至少一个电子铭牌。
结合第一方面、或第一方面第一种至第七种可能的实现方式,在第一方面第八种可能的实现方式中,所述将所述身份信息通过所述电子铭牌显示之后,所述方法还包括:
检测到所述参会人员中有第二人员在第三预设时长内发言时长短于第四预设时长,所述第三预设时长大于第四预设时长;
将所述第二人员对应的电子铭牌取消显示。
结合第一方面、或第一方面第一种至第八种可能的实现方式,在第一方面第九种可能的实现方式中,所述将所述身份信息通过所述电子铭牌显示之后,所述方法还包括:
启动计时器,当计时器到达预设时间点,根据输入的音频流确定所述输入的音频流对应的所述参会人员中的至少一个第三人员;
确认所述第一人员对应的电子铭牌是否处于显示状态,若所述第一人员对应的电子铭牌不在显示状态,则显示所述第三人员对应的电子铭牌。
结合第一方面、或第一方面第一种至第九种可能的实现方式,在第一方面第十种可能的实现方式中,所述确认所述第三人员对应的电子铭牌是否处于显示状态之后,所述方法还包括:
将其他参会人员对应的电子铭牌取消显示,其中,其他参合人员为不属于第三人员的参会人员。
结合第一方面、或第一方面第一种至第十种可能的实现方式,在第一方面第十一种可能的实现方式中,所述确认所述第三人员对应的电子铭牌是否处于显示状态之后,所述方法还包括:
所述计时器对所述第三人员重新开始计时。
结合第一方面、或第一方面第一种至第十一种可能的实现方式,在第一方面第十二种可能的实现方式中,所述确认所述第三人员对应的电子铭牌是否处于显示状态之后,所述方法还包括:
检测所述其他参会人员中有第四人员发言时,将所述第二人员对应的电子铭牌显示。
结合第一方面、或第一方面第一种至第十二种可能的实现方式,在第一方面第十三种可能的实现方式中,所述身份信息包括如下信息中的一个或多个:名字、年龄、联系方式、籍贯、工作单位、职务、教育背景。
第二方面,本申请实施例还提供了一种视频会议中电子铭牌的显示装置,包括:获取模块、配置模块、显示模块;
所述获取模块用于获取参会人员的人脸在视频画面中的位置和所述参会人员身份信息;
所述配置模块用于根据所述人脸在视频画面中的位置确定电子铭牌在所述视频画面中的显示位置和大小;
所述显示模块用于通过所述电子铭牌显示所述身份信息。
结合第二方面的实现方式,在第二方面第一种可能的实现方式中,所述配置模块根据所述人脸在视频画面中的位置确定电子铭牌在所述视频画面中的显示位置和大小包括:
根据所述人脸在视频画面中的位置确定所述人脸的分布情况;
根据所述人脸在视频画面中的位置和所述人脸的分布情况确定所述电子铭牌在所述视频画面中的显示位置和大小。
结合第二方面、或第二方面第一种可能的实现方式,在第二方面第二种可能的实现方式中,所述配置模块还用于:确定电子铭牌的颜色、电子铭牌的透明度、电子铭牌的轮廓形式、电子铭牌中文字或符号的字体和电子铭牌中文字或符号的颜色。
结合第二方面、或第二方面第一种至第二种可能的实现方式,在第二方面第三种可能的实现方式中,所述获取模块还用于:
获取输入消息,所述输入消息用于指示用户对所述电子铭牌的显示要求,所述输入消息包括通过用户手动输入和/或通过用户语音输入。
结合第二方面、或第二方面第一种至第三种可能的实现方式,在第二方面第四种可能的实现方式中,所述获取模块还用于:获取参会人员的肤色和/或着装颜色,根据所述参会人员的肤色和/或着装颜色确定所述电子铭牌的颜色和/或透明度。
结合第二方面、或第二方面第一种至第四种可能的实现方式,在第二方面第五种可能的实现方式中,所述装置还包括第一检测模块;
所述第一检测模块用于检测所述电子铭牌与所述参会人员的人脸区域或另一电子铭牌是否有重叠交叉:
若所述第一检测模块检测到所述电子铭牌与所述参会人员的人脸区域或另一电子铭牌有重叠交叉;
则所述显示模块将所述电子铭牌或另一电子铭牌在新的位置显示。
结合第二方面、或第二方面第一种至第五种可能的实现方式,在第二方面第六种可能的实现方式中,所述电子铭牌与其对应的参会人员的人脸区域通过直线或箭头进行连接。
结合第二方面、或第二方面第一种至第六种可能的实现方式,在第二方面第七种可能的实现方式中,所述装置还包括第二检测模块;
所述第二检测模块用于检测所述参会人员中是否有至少一个第一人员的发言时长长于第一预设时长或短于第二预设时长:
若所述第二检测模块检测到所述参会人员中有所述至少一个第一人员的发言时长长于第一预设时长或短于第二预设时长;
则所述显示模块将所述至少一个第一人员对应的电子铭牌更换为新的电子铭牌。
结合第二方面、或第二方面第一种至第七种可能的实现方式,在第二方面第八种可能的实现方式中,所述第二检测模块还用于检测所述参会人员中是否有第二人员在第三预设时长内发言时长短于第四预设时长,所述第三预设时长大于第四预设时长:
若所述第二检测模块检测到所述参会人员中有第二人员在第三预设时长内发言时长短于第四预设时长,所述第三预设时长大于第四预设时长;
则所述显示模块将所述第二人员对应的电子铭牌从视频画面中取消显示。
结合第二方面、或第二方面第一种至第八种可能的实现方式,在第二方面第九种可能的实现方式中,所述装置还包括计时模块、音频检测模块:
所述计时模块用于对所述参会人员计时;
所述音频检测模块用于:当计时模块计时到达预设时间点时,检测输入的音频流对应的所述参会人员中的至少一个第三人员;
所述显示模块还用于确认所述第三人员对应的电子铭牌是否处于显示状态,若所述第三人员对应的电子铭牌不在显示状态,则所述显示模块显示所述第三人员对应的电子铭牌。
结合第二方面、或第二方面第一种至第九种可能的实现方式,在第二方面第十种可能的实现方式中,所述显示模块还用于将其他参会人员对应的电子铭牌取消显示,其中,其他参会人员为不属于第三人员的参会人员。
结合第二方面、或第二方面第一种至第十种可能的实现方式,在第二方面第十一种可能的实现方式中,所述计时模块还用于对所述第三人员再次计时。
结合第二方面、或第二方面第一种至第十一种可能的实现方式,在第二方面第十二种可能的实现方式中,所述音频检测模块还用于检测所述其他参会人员中是否有第四人员发言:
若所述音频检测模块检测到所述其他参会人员中有第四人员发言;
则所述显示模块将所述第四人员对应的电子铭牌显示。
第三方面,本申请实施例还提供了一种视频会议中的计时显示方法,包括:
启动计时器,当计时器到达预设时间点,根据输入的音频流确定参会人员中是否有第一人员发言,其中,输入的音频流是从计时器开始计时到预设时间点这段时间内输入的音频流;
将第一人员对应的电子铭牌进行显示,将其他参会人员对应的电子铭牌取消显示,其中,其他参会人员为不属于第一人员的参会人员。
结合第三方面的实现方式,在第三方面第一种可能的实现方式中,对第一人员再次开始计时,此时可以不对其他参会人员进行计时。
结合第三方面、或第三方面第一种可能的实现方式,在第三方面第二种可能的实现方式中,检测到其他参会人员中有第二人员发言,将第二人员对应的电子铭牌显示。一旦检测到其他参会人员中有第二人员发言,则立即将其电子铭牌显示,同时可以对第二人员再次进行计时。
本申请实施例提供的一种视频会议中电子铭牌计时显示方法通过检测参会人员是否发言以及对参会人员的发言时长进行计时来控制参会人员的电子铭牌的显示,通过取消不必要显示的电子铭牌来减少资源的浪费,尤其是在人员复杂的环境下可以避免电子铭牌占用过多视频画面。
第四方面,本申请实施例又提供了一种电子铭牌显示设备,包括:存储器、一个或多个处理器、收发器、显示屏、摄像头;
所述存储器用于存储程序指令;
所述摄像头用于获取参会人员视频画面;
所述收发器用于获取所述参会人员的身份信息;
所述处理器用于执行所述程序指令以执行:根据获取所述参会人员的人脸在所述视频画面中的位置,并根据人脸在视频画面中的位置确定电子铭牌在所述视频画面中的显示位置和大小;
所述显示屏用于通过所述电子铭牌显示所述身份信息。
结合第四方面可能的实现方式,在第四方面第一种可能的实现方式中,所述处理器根据所述人脸在视频画面中的位置确定电子铭牌在所述视频画面中的显示位置和大小包括:
所述处理器根据所述人脸在视频画面中的位置确定所述人脸的分布情况;
所述处理器根据所述人脸在视频画面中的位置和所述人脸的分布情况确定所述电子铭牌在所述视频画面中的显示位置和大小。
结合第四方面、或第四方面第一种可能的实现方式,在第一方面第二种可能的实现方式中,所述处理器还用于:确定电子铭牌的颜色、电子铭牌的透明度、电子铭牌的轮廓形式、电子铭牌中文字或符号的字体和电子铭牌中文字或符号的颜色。
结合第四方面、或第四方面第一种至第二种可能的实现方式,在第一方面第三种可能的实现方式中,所述收发器还用于:
接收输入消息,所述输入消息用于指示用户对所述电子铭牌的显示要求,所述输入消息包括通过用户手动输入和/或通过用户语音输入。
结合第四方面、或第四方面第一种至第三种可能的实现方式,在第四方面第四种可能的实现方式中,所述处理器还用于:获取所述参会人员在所述视频画面中的肤色和/或着装颜色,根据所述参会人员的肤色和/或着装颜色确定所述电子铭牌的颜色和/或透明度。
结合第四方面、或第四方面第一种至第四种可能的实现方式,在第四方面第五种可能的实现方式中,所述处理器还用于判断所述电子铭牌与所述参会人员的人脸区域或另一电子铭牌是否有重叠交叉:
若所述处理器判断所述电子铭牌与所述参会人员的人脸区域或另一电子铭牌有重叠交叉;
则所述处理器确定所述电子铭牌或另一电子铭牌的新的显示位置和新的大小。
结合第四方面、或第四方面第一种至第五种可能的实现方式,在第四方面第六种可能的实现方式中,所述设备还包括计时器和麦克风:
所述计时器用于对所述参会人员计时;
所述麦克风用于采集在预设时间段内输入的音频流;
所述处理器还用于判断所述输入的音频流对应的所述参会人员中的至少一个第一人员;
所述显示屏还用于确认所述第一人员对应的电子铭牌是否处于显示状态,若所述第一人员对应的电子铭牌不在显示状态,则所述显示屏将所述第一人员对应的电子铭牌显示。
结合第四方面、或第四方面第一种至第六种可能的实现方式,在第四方面第七种可能的实现方式中,所述计时器还用于对所述参会人员的发言时长进行计时;
所述处理器判断所述参会人员中是否有发言时长长于第一预设时长或短于第二预设时长:若所述处理器判断所述参会人员中有第二人员的发言时长长于第一预设时长或短于第二预设时长,则所述处理器确定所述第二人员对应的新的电子铭牌,所述显示屏将所述第二人员对应的电子铭牌更换为所述新的电子铭牌进行显示。
结合第四方面、或第四方面第一种至第七种可能的实现方式,在第四方面第八种可能的实现方式中,当所述处理器判断所述第二人员的发言时长短于第二预设时长,所述显示屏将所述第二人员对应的电子铭牌取消显示。
第五方面,本申请提供一种可读存储介质,可读存储介质中存储有执行指令,当报文处理设备的至少一个处理器执行该执行指令时,电子铭牌显示设备执行第四方面及第四方面任一种可能的实现方式中的处理器或收发器所执行的方法。
第六方面,本申请提供一种程序产品,该程序产品包括执行指令,该执行指令存储在可读存储介质中。电子铭牌显示设备的至少一个处理器可以从可读存储介质读取该执行指令,至少一个处理器执行该执行指令使得电子铭牌显示设备实施第四方面及第四方面任一种可能的实现方式中的处理器或收发器所执行的方法。
附图说明
为了更清楚地说明本申请的实施例或现有技术中的技术方案,下面将对描述背景技术和实施例时所使用的附图作简单的介绍。显而易见地,下面附图中描述的仅仅是本申请的一部分实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图和描述得到其他的附图或实施例,而本申请旨在涵盖所有这些衍生的附图或实施例。
图1为本申请实施例提供的一种视频会议中会议装置示意图;
图2为本申请实施例提供的一种视频会议中电子铭牌的显示流程图;
图3为本申请实施例提供的一种视频会议中电子铭牌显示的场景示意图;
图4为本申请实施例提供的一种视频会议中电子铭牌显示的场景示意图;
图5为本申请实施例提供的一种视频会议中电子铭牌显示的场景示意图;
图6为本申请实施例提供的一种确定电子铭牌位置的方法示意图;
图7为本申请实施例提供的一种视频会议中电子铭牌显示方法;
图8为本申请实施例提供的一种视频会议中电子铭牌计时显示方法;
图9为本申请实施例提供的一种视频会议中电子铭牌的显示装置示意图;
图10为本申请实施例提供的一种视频会议中电子铭牌的显示设备示意图。
具体实施方式
本申请实施例描述的设备形态以及业务场景是为了更加清楚地说明本发明实施例的技术方案,并不构成对本发明实施例提供的技术方案的限制。本领域普通技术人员可知,随着设备形态的演变和新业务场景的出现,本申请实施例提供的技术方案对于类似的技术问题同样适用。
本申请实施例提供了一种视频会议中会议装置,如图1所示,该会议装置包括会议终端110和服务器120。该会议装置可应用于异地的多个会议室中,每个会议室均放置一个会议终端,多个会议室可共享服务器或者单独配置一个服务器。该会议装置可实现多个会议室之间的参会人员彼此更加快捷方便的熟悉。
其中,会议终端110包括屏幕111、摄像头112和阵列麦克113。摄像头112用于抓取会议现场的图像和进行人脸识别,屏幕111用于显示,阵列麦克113用于播放语音或采集现场输入的音频。服务器120包括云端和离线端,用于存储参会人员的人脸特征信息和身份信息。在摄像头112采集到的画面中根据人脸特征信息识别到某一个参会人员,在服务器120中找到该参会人员的身份信息,将该参会人员的身份信息通过视频会议的字幕叠加装置叠加到视频会议当前显示的视频图像上,再把视频图像实时解码出来显示在视频会议的屏幕111上。本申请实施例提到的电子铭牌即可以是上述通过字幕叠加装置叠加的显示在屏幕111上的参会人员的铭牌。
可以想到的是,本实施例根据当前显示的视频图像信息获取待识别的参会人员的人脸特征信息还可以包括人脸的虹膜、眼纹。当人脸特征信息包括虹膜或眼纹时,虹膜或眼纹的采集方式可以是利用视频会议的摄像头进行采集,只要将待识别的参会人员虹膜或眼纹与预设的参会人员的虹膜或眼纹进行对比,即可确定待识别的参会人员的身份信息。但是鉴于现有技术的限制,虹膜或眼纹的识别不仅需要专门的识别软件,还需要参会人员的配合,将眼睛靠近摄像头前,这不仅会增加识别的成本,还会给参会人员带来不便。所以本实施例中,比较优选的方式是利用人脸识别技术识别当前显示的视频图像信息参会人员的人脸特征信息。
另外,本申请实施例提到的身份信息包括但不限于参会人员的名字、年龄、联系方式、籍贯、工作单位、职务、教育背景。
需要说明的是,本申请的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以本申请未描述的顺序实施。“和/或”,用于描述关联对象的关联关系,表示可以存在三种关系。例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。方法实施例中的具体操作方法也可以应用于装置实施例中。此外,为了更加明显地体现不同实施例中的组件的关系,本申请采用相同的附图编号来表示不同实施例中功能相同或相似的组件。
还需要说明的是,除非特殊说明,一个实施例中针对一些技术特征的具体描述也可以应用于解释其他实施例提及对应的技术特征。例如,在一个实施例中关于参会人员人脸信息或身份信息的设计举例,可以适用于其他所有实施例中的人脸信息。
图2为本申请实施例提供的一种视频会议中电子铭牌的显示流程图,如图2所示,一种视频会议中电子铭牌的显示流程包括:
S201、视频处理;
摄像头采集图像得到视频流进行视频预处理,视频预处理包括图像采集、降噪、极线矫正、更改分辨率和帧率等操作,然后输出给后续的人脸检测S202。
S202、人脸检测;
人脸检测的输入为视频预处理后的视频画面,视频画面通过人脸检测,可以得到人脸检测信息,人脸检测信息包括人脸在视频画面的位置或坐标、人脸大小等,其中参会人员的人脸大小可以依据参会人员的人脸坐标计算得出。进一步地,人脸检测信息还可以包括人脸的肤色和着装颜色等。
S203、人脸识别;
人脸识别接收到S202步骤得到的人脸图像,将该人脸图像送往服务器,服务器提取人脸图像里的人脸特征信息进行人脸识别。
S204、场景检测;
场景检测的输入为人脸检测信息,通过人脸检测信息中的位置或坐标信息,检测人或人脸的分布情况得到场景信息,例如多数参会人员的人脸中心在同一直线上,可以判断参会人员坐成一排,或者参会人员的人脸呈左右对称分布,可以判断参会人员围着坐等。实际中,可以设置一定的误差范围,在误差范围内近似在一条直线上或者近似呈左右对称分布可以都认为是属于上述情况。
S205、场景决策;
场景决策的输入为场景信息,得到的场景决策信息提供给S206铭牌计算。为了让参会人员的电子铭牌的显示效果更加美观直观,一些特殊场景可以做特殊处理,一般包括如下几种情形:检测到的场景信息是参会人员坐一排,则电子铭牌在人脸下方呈一条直线分布;检测到的场景信息是圆桌会议,则电子铭牌包括但不限于朝两边,以左右对称的排列方式显示在人脸附近;检测的场景信息是某一个参会人员的特写画面,则只显示该特写人的铭牌。如果检测的场景信息没有规律,则电子铭牌一般设置在人脸下方。
S206、铭牌计算;
2061.铭牌位置和大小计算:
依据接收到的人脸检测信息的位置或坐标信息和场景决策信息进行铭牌位置和大小计算。
当场景决策决策出参会人员的电子铭牌按照一般设计原则或者未收到场景决策信息,电子铭牌参照人脸位置设置在每位参会人员人脸下方的距离人脸一定距离内的固定区域,其中电子铭牌的大小依据人脸区域的大小进行调整,如图3a所示,参会人员B的人脸区域更大,所以参会人员B的电子铭牌也会更大。由于电子铭牌设置在人脸下方的距离一定的固定区域,所以在图3a中每位参会人员的电子铭牌也会参差不齐;
当场景决策决策出参会人员的电子铭牌要成一排显示,如图3b所示,此时会综合考虑人脸位置和大小将参会人员的电子铭牌设置在一条直线上,并保证参会人员的电子铭牌高度一致;
当场景决策决策出参会人员的电子铭牌要以左右对称的排列方式显示在人脸附近,如图4a所示,此时电子铭牌会综合考虑人脸位置坐标设置对称,电子铭牌的大小依据人脸区域的大小进行调整;
当场景决策决策出显示特写人的电子铭牌,则将其他参会人员的电子铭牌取消显示。
2062.铭牌遮挡判断:
依据接收到的人脸检测信息中的位置或坐标信息和电子铭牌的位置和大小信息进行计算,判断参会人员的铭牌与其他参会人员的人脸或其他参会人员的电子铭牌有无重叠,若检测出有重叠,例如可能会议中由于人员走动两个人距离过近,此时可以将有重叠的电子铭牌重新计算一个新的位置和大小进行显示。如图4b所示,由于参会人员G的走动,导致参会人员G的人脸区域与参会人员E的电子铭牌有重叠,此时将参会人员E的电子铭牌迁移到新的位置进行显示;由于迁移后的位置可能距离参会人员E有点远,为了直观,还可以利用箭头指引。
2063.铭牌透明度计算:
依据人脸检测信息中的肤色和着装颜色信息进行铭牌透明度选择计算。电子铭牌的颜色可以采用渐变式,渐变式包括但不限于中央深两边浅,铭牌透明度通过着装颜色深浅自动调整。
S207、音频处理;
麦克阵列采集得到音频流进行音频预处理,对输入的多路音频数据进行3A处理,其中声学回声消除(Acoustic Echo Cancelling,AEC)、自动增益控制(Automatic GainControl,AGC)、有源噪声控制(Active Noise Control,ANC,也被称为noisecancellation、noise suppression)的处理方式,俗称3A处理。
S208、声源定位;
根据处理后的音频流,找到发言人的位置信息,用于后续匹配人脸检测信息,即可确定发言的参会人员。
S209、铭牌显示;
根据上述计算得到的电子铭牌位置、大小信息和身份信息,将身份信息添加到电子铭牌上,然后把电子铭牌叠加在图像上生成有铭牌的图片,然后在屏幕上显示。
可选地,对S208确定的正在发言的发言人电子铭牌可以进行凸显,凸显的方式包括加粗字体、改变字体的颜色或改变电子铭牌轮廓的形式,以便将发言人和未发言人区分开来,提高参会人员注意力、不漏掉重要讲话。进一步地,还可以将未发言人的电子铭牌取消显示或者更换电子铭牌的显示样式等,电子铭牌的显示样式包括电子铭牌的亮度、颜色、轮廓形式、透明度、电子铭牌中文字或符号的字体和颜色等。如图5所示,参会人员D和参会人员G正在发言或者频繁发言,则将其电子铭牌凸显,其他人员的电子铭牌取消显示。
可选地,对参会人员进行计时,若某一个参会人员超过预设时长未发言或者发言时长低于另一预设时长,则可以将该参会人员的电子铭牌取消显示或者更换电子铭牌的显示样式等。
参会人员或用户还可以通过语音助手发出指令。语音助手对输入的语音进行语音识别,转换得到用户的意图指令,意图指令包括显示/取消电子铭牌的指令、显示参会人员的身份信息、更换电子铭牌显示样式等。例如用户要求“显示会场2中左边第3个人的姓名和工号”,语音助手会识别出用户的意图是要显示人的姓名和工号,而这个人是来自会场2的左边第三个人脸;用户要求“取消会场2中最大人脸的铭牌”,语音助手会识别出用户的意图是要取消铭牌,而这个铭牌是来自会场2中的最大的人脸对应的铭牌。
本申请实施例提供一种视频会议中的会议终端及电子铭牌显示流程方法,可以在不同的会议场景下实现参会人员的电子铭牌的自适应调整显示,电子铭牌能以更加直观的方式显示,提高会议效率,解决了目前电子铭牌显示单一、区分度、人性化不强的问题。
图6为本申请实施例提供的一种确定电子铭牌位置的方法示意图,如图6所示,该方法在视频画面的左上角建立坐标系XOY,A、B点分别是人脸和电子铭牌的及几何中心,各个参数代表的物理意义见下表1。
参数 物理意义
x<sub>a</sub> A点(人脸几何中心)横坐标
y<sub>a</sub> A点(人脸几何中心)纵坐标
W 人脸宽度
H 人脸高度
x<sub>b</sub> B点(电子铭牌几何中心)横坐标
y<sub>b</sub> B点(电子铭牌几何中心)纵坐标
l 电子铭牌的宽度
h 电子铭牌的高度
w<sub>1</sub> 电子铭牌预留长度
w<sub>2</sub> 身份信息显示宽度
h<sub>2</sub> 身份信息显示高度
表1各个参数及其物理意义
经过人脸检测得到A(xa,ya,W,H),再确定w1、w2和h2,w1、w2和h2,依据需要显示的参会人员的名字等信息以及该参会人员的人脸大小来确定。例如,要显示的参会人员的名字是“张三丰”,经过人脸检测计算得到人脸的大小为100平方厘米,根据预先设定的人脸大小和文字或符号大小、电子铭牌预留长度对照表,即可得到“张三丰”对应的文字大小,那么既可以确定“张三丰”对应的w1、w2和h2。实际中,中英文或者其他语言设定文字或符号大小型号规则可能不同,另外需要注意的是w2和h2对应的是身份信息的显示宽度和高度,不仅仅包括名字,还可以包括其他信息。电子铭牌预留长度w1为预留在身份信息旁的空白半透明的长度,让电子铭牌的显示更美观直观。
之后依据下述计算规则计算电子铭牌的几何中心B(xb,yb,l,h):
l=w2+2w1
h=h2
xb=xa-c1*l
yb=ya+c2*H
其中,c1和c2为常数,可根据实际情况进行调整。优选的,c1=0.5,c2=1。
根据上述方法同样可以得到其他人脸对应的电子铭牌几何中心B1、B2…,依据这些几何中心的坐标即可计算不同电子铭牌之间或者电子铭牌与人脸之间是否有重叠,即是否发生电子铭牌遮挡人脸的现象。
当接收到场景决策信息要将所有电子铭牌成一排显示,此时需要调整B、B1、B2…的坐标,保证各个电子铭牌的几何中心的yb和h的值相等。
本申请实施例提供的一种确定电子铭牌位置的方法采用的是二维直角坐标,除此之外,类似的,可以将二维直角坐标替换为极坐标或柱坐标。
本申请实施例提供的一种确定电子铭牌位置的方法给出了利用人脸位置计算电子铭牌位置大小的可能的方法,在具体实际情况中,可能会采用其他类似的算法或者利用类似的设计参数来实现,例如,神经网络算法等,应理解,这些采用其他类似的算法或者利用类似的设计参数来实现的算法应包含在本申请保护的范围内。
图7为本申请实施例提供的一种视频会议中电子铭牌显示方法,如图7所示,该方法包括:
S701、获取人脸检测信息和身份信息;
其中,获取人脸检测信息是通过对摄像头采集的会议现场的视频画面进行人脸检测,得到的人脸检测信息包括人脸在视频画面中的位置,具体地,可以通过坐标呈现这个位置信息。
具体地,人脸检测还可以检测参会人员的肤色和着装颜色。
具体地,获取身份信息包括:(1)对摄像头采集的会议现场的视频画面进行人脸特征提取,得到参会人员的人脸特征信息;(2)将人脸特征信息发送到服务器进行匹配识别,服务器中存储有参会人员的人脸特征信息和身份信息以及对应关系;(3)接收服务器发送的身份信息。
S702、根据人脸检测信息确定电子铭牌;
根据人脸检测信息确定电子铭牌包括根据人脸检测信息中的位置信息来确定电子铭牌的位置和大小,具体地,可以通过人脸的坐标来确定电子铭牌的坐标。
可选地,根据人脸检测信息中的位置信息来确定电子铭牌的位置和大小包括根据人脸检测信息中的位置信息来确定参会人员的分布情况,并依据参会人员的分布情况来确定电子铭牌的位置和大小。
进一步地,根据人脸检测信息确定电子铭牌还可以包括根据人脸检测信息中的参会人员的肤色或着装颜色信息来确定电子铭牌的显示样式,电子铭牌的显示样式包括电子铭牌的亮度、颜色、轮廓形式、透明度、电子铭牌中文字或符号的字体和颜色等。
在步骤S702之前,还可以获取用户指令,该用户指令可以通过手动或者语音输入,该用户可以是参会人员或者其他人员,该用户指令用于指示用户对电子铭牌的显示要求,例如,某参会人员要求电子铭牌显示透明度降低,那么此时根据人脸检测信息确定电子铭牌还需要依据该用户指令降低电子铭牌的显示透明度。
S703、将身份信息通过电子铭牌显示。
将身份信息添加到电子铭牌上进行显示。
在电子铭牌进行初次显示之后,后续会议现场可能会由于人员走动而出现电子铭牌与人脸或者电子铭牌之间出现重叠遮挡的情况,若检测到某个电子铭牌所在位置与所述参会人员的人脸区域或另一电子铭牌有重叠交叉,则重新计算该电子铭牌的位置进行显示。
具体地,重新计算该电子铭牌的位置进行显示通过在人脸的预设邻域内搜索铭牌最优位置,该预设领域根据人脸的坐标、宽高以及铭牌的宽高来确定的;在预设邻域内,计算新位置铭牌的中心点与原先铭牌的中心点距离s1以及新位置铭牌与其他铭牌或人脸的遮挡重叠面积s2,将s1和s2进行加权平均,s1和s2加权平均值最小的新位置铭牌确定为邻域内最优位置的铭牌。
进一步地,电子铭牌与其对应的参会人员的人脸区域可以通过直线或箭头进行连接。
可选地,在电子铭牌初次显示之后,对参会人员的发言进行检测,若检测到有部分参会人员的发言时长长于第一预设时长或短于第二预设时长,则将该部分参会人员对应的电子铭牌更换为新的电子铭牌,这里新的电子铭牌包括对原有电子铭牌的显示样式进行更换。
可选地,在电子铭牌初次显示之后,对参会人员的发言进行检测,若检测到有另一部分参会人员的发言时长短于第三预设时长,则将该另一部分参会人员对应的电子铭牌从视频画面中取消显示。
本申请实施例提供的一种视频会议中电子铭牌显示方法利用人脸位置计算电子铭牌位置和大小的方法,可以实现在不同的会议场景下依据人脸位置进行参会人员的电子铭牌自适应调整显示,电子铭牌能以更加直观的方式显示,提高会议效率。
图8为本申请实施例提供的一种视频会议中电子铭牌计时显示方法,如图7所示,该方法需要利用声源定位检测技术,该方法包括:
S801、启动计时器,当计时器到达预设时间点,根据输入的音频流确定参会人员中是否有第一人员发言;
其中,输入的音频流是从计时器开始计时到预设时间点这段时间内输入的音频流。
S802、将第一人员对应的电子铭牌进行显示,将其他参会人员对应的电子铭牌取消显示,其中,其他参合人员即为参会人员中不属于第一人员的参会人员;
S803、对第一人员再次开始计时;
此步骤为可选步骤,在上述检测到第一人员有发言并进行显示电子铭牌之后立即对第一人员再次开始计时,此时可以不对其他参会人员进行计时。
S804、检测到其他参会人员中有第二人员发言,将第二人员对应的电子铭牌显示。
此步骤为可选步骤,一旦检测到其他参会人员中有第二人员发言,则立即将其电子铭牌显示,同时可以对第二人员再次进行计时。
本申请实施例提供的一种视频会议中电子铭牌计时显示方法通过检测参会人员是否发言以及对参会人员的发言时长进行计时来控制参会人员的电子铭牌的显示,通过取消不必要显示的电子铭牌来减少资源的浪费,尤其是在人员复杂的环境下可以避免电子铭牌占用过多视频画面。
图9为本申请实施例提供的一种视频会议中电子铭牌的显示装置示意图,如图9所示,该电子铭牌显示装置90包括:获取模块91、配置模块92和显示模块93,
获取模块91用于获取人脸检测信息,人脸检测信息包括参会人员在视频画面中的位置;
配置模块92用于确定电子铭牌配置信息,电子铭牌配置信息包括电子铭牌在视频画面中的显示位置和大小,电子铭牌配置信息与人脸检测信息关联;
显示模块93用于根据电子铭牌配置信息将电子铭牌在视频画面中显示。
具体地,电子铭牌配置信息还可以包括如下信息中的一个或多个:电子铭牌的颜色、电子铭牌的透明度、电子铭牌的轮廓形式、电子铭牌中文字或符号的字体和电子铭牌中文字或符号的颜色。
具体地,配置模块92确定电子铭牌配置信息包括:根据人脸在视频画面中的位置确定电子铭牌在视频画面中的显示位置和大小。进一步地,配置模块92确定电子铭牌配置信息还包括根据人脸在视频画面中的位置坐标来检测判断人脸在视频画面中的分布情况,依据该分布情况确定电子铭牌在视频画面中的显示位置和大小。
可选地,获取模块91还用于获取第一输入消息,该第一输入消息用于指示用户对所述电子铭牌的显示要求,第一输入消息包括通过用户手动输入和/或通过用户语音输入,该第一输入消息包括用户希望的电子铭牌的显示样式。
可选地,人脸检测信息还包括参会人员的肤色和/或着装颜色,根据参会人员的肤色和/或着装颜色确定电子铭牌的颜色和/或透明度。
在一种可能的设计中,电子铭牌显示装置90还包括第一检测模块94,该第一检测模块94用于检测电子铭牌所在位置与参会人员的人脸区域或另一电子铭牌是否有重叠交叉:
若第一检测模块94检测到某电子铭牌所在位置与参会人员的人脸区域或另一电子铭牌有重叠交叉;
则显示模块93将该电子铭牌或另一电子铭牌在视频画面中的新的位置显示。
在一种可能的设计中,电子铭牌显示装置90还包括第二检测模块95,该第二检测模块95用于检测参会人员中是否有发言时长长于第一预设时长或短于第二预设时长:
若所述第二检测模块95检测到参会人员中有第一人员的发言时长长于第一预设时长或短于第二预设时长,则所述显示模块93将该第一人员对应的电子铭牌更换为新的电子铭牌。
可选地,第二检测模块95检测到参会人员中有第二人员的发言时长短于第二预设时长,显示模块93还可以将该第二人员对应的电子铭牌从视频画面中取消显示。
作为一种可选的方案,该电子铭牌显示装置90还包括音频检测模块96、计时模块97:
计时模块97用于对参会人员计时;
音频检测模块96用于:当计时模块97计时到达预设时间点时,检测输入的音频流对应的至少一个第三人员;
显示模块93还用于确认该至少一个第三人员对应的电子铭牌是否处于显示状态,若该至少一个第三人员对应的电子铭牌不在显示状态,则显示模块93显示该至少一个第三人员对应的电子铭牌。
进一步地,显示模块93还用于将其他参会人员对应的电子铭牌取消显示,其中,其他参会人员为不属于第三人员的参会人员。
可选地,计时模块97还用于对该至少一个第三人员再次计时。
进一步地,音频检测模块96还用于检测其他参会人员中是否有第四人员发言:
若音频检测模块96检测到其他参会人员中有第四人员发言;
则显示模块93将该第四人员对应的电子铭牌显示。
计时模块97还用于对该第四人员开始计时。
可选地,获取模块91还用于获取第二输入消息,该第二输入消息用于指示指定的至少一个电子铭牌取消显示或更换为新的至少一个电子铭牌,第二输入消息包括通过用户手动输入和/或通过用户语音输入。
图10为本申请实施例提供的一种视频会议中电子铭牌显示设备100示意图,该电子铭牌显示设备100包括显示屏101、一个或多个处理器102、摄像头103、麦克风104、存储器105和收发器106。其中,处理器102也可以称为处理单元,可以实现一定的控制功能。所述处理器102可以是通用处理器或者专用处理器等。例如可以是基带处理器、或中央处理器。基带处理器可以用于对通信协议以及通信数据进行处理,中央处理器可以用于对通信装置(如基站、基带芯片、DU或CU等)进行控制,执行软件程序,处理软件程序的数据。收发器103可以称为收发单元、收发机、收发电路、或者收发器等,用于实现通信装置的收发功能。
一种视频会议中电子铭牌显示设备100,包括:
存储器105用于存储程序指令109;
摄像头103用于获取参会人员视频画面;
收发器106用于获取参会人员的身份信息;
处理器102用于运行所述程序指令109以执行:用于根据获取参会人员的人脸在视频画面中的位置,并根据人脸在视频画面中的位置确定电子铭牌在视频画面中的显示位置和大小;
显示屏101用于通过电子铭牌显示参会人员的身份信息。
具体地,处理器102根据人脸在视频画面中的位置确定电子铭牌在视频画面中的显示位置和大小,包括:处理器102根据人脸在视频画面中的位置确定人脸的分布情况,处理器102根据人脸在视频画面中的位置和人脸的分布情况确定电子铭牌在视频画面中的显示位置和大小。
处理器102还可以确定电子铭牌的颜色、电子铭牌的透明度、电子铭牌的轮廓形式、电子铭牌中文字或符号的字体和电子铭牌中文字或符号的颜色。
可选地,收发器106还用于接收输入消息,该输入消息用于指示用户对电子铭牌的显示要求,该输入消息包括通过用户手动输入和/或通过用户语音输入。
处理器102还用于获取参会人员在视频画面中的肤色和/或着装颜色,根据参会人员的肤色和/或着装颜色确定电子铭牌的颜色和/或透明度。
处理器102还用于判断电子铭牌与参会人员的人脸区域或另一电子铭牌是否有重叠交叉:若处理器102判断某电子铭牌与参会人员的人脸区域或另一电子铭牌有重叠交叉,则处理器102确定该电子铭牌或另一电子铭牌的新的显示位置和新的大小,显示屏101将该电子铭牌或另一电子铭牌在新的显示位置以新的大小进行显示。
作为一种可选的方案,电子铭牌显示设备100还可以包括计时器107和麦克风104:
计时器107用于对参会人员计时;
麦克风104用于采集在预设时间段内输入的音频流;
处理器102还用于判断输入的音频流对应的参会人员中的至少一个第一人员;
显示屏101还用于确认第一人员对应的电子铭牌是否处于显示状态,若第一人员对应的电子铭牌不在显示状态,则显示屏102将第一人员对应的电子铭牌显示。
可选地,计时器107还用于对参会人员的发言时长进行计时;处理器102判断参会人员中是否有发言时长长于第一预设时长或短于第二预设时长:若处理器102判断参会人员中有第二人员的发言时长长于第一预设时长或短于第二预设时长,则处理器102确定第二人员对应的新的电子铭牌,显示屏101将第二人员对应的电子铭牌更换为新的电子铭牌进行显示。
进一步地,当处理器102判断第二人员的发言时长短于第二预设时长,显示屏101还可以将第二人员对应的电子铭牌取消显示。
在一种可能的设计中,处理器102也可以存有指令108,所述指令108可以被处理器102运行,使得所述电子铭牌的显示设备100执行处理器102所执行的方法。
在又一种可能的设计中,电子铭牌的显示设备100可以包括电路,所述电路可以执行上述处理器102或收发器106或计时器107的方法。
可选地,所述电子铭牌的显示设备100中可以包括一个或多个存储器105,存储器105中还可以存储有其他相关数据或中间数据。可选地,处理器102中也可以存储指令和/或数据。所述处理器102和存储器105可以单独设置,也可以集成在一起。
本申请还提供一种可读存储介质,可读存储介质中存储有执行指令,当电子铭牌的显示设备100的至少一个处理器执行该执行指令时,电子铭牌的显示设备100执行上述图10所对应的设备实施例中处理器102所执行的方法。
本申请还提供一种程序产品,该程序产品包括执行指令,该执行指令存储在可读存储介质中。电子铭牌的显示设备100的至少一个处理器可以从可读存储介质读取该执行指令,至少一个处理器执行该执行指令使得电子铭牌的显示设备100实施上述图10所对应的设备实施例中处理器102所执行的方法。
本说明书中的各个实施例之间相同相似的部分互相参见即可,尤其,对于设备实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
显然,本领域的技术人员应该明白,上述本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储介质(ROM/RAM、磁碟、光盘)中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。所以,本发明不限制于任何特定的硬件和软件结合。
最后应说明的是:以上所述仅为本申请的具体实施方式,本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。

Claims (22)

1.一种视频会议中电子铭牌的显示方法,其特征在于,包括:
获取参会人员的人脸在视频画面中的位置和所述参会人员身份信息;
根据所述人脸在视频画面中的位置确定电子铭牌在所述视频画面中的显示位置和大小;
通过所述电子铭牌显示所述参会人员身份信息。
2.如权利要求1所述的方法,其特征在于,根据所述人脸在视频画面中的位置确定电子铭牌在所述视频画面中的显示位置和大小包括:
根据所述人脸在视频画面中的位置确定所述人脸的分布情况;
根据所述人脸在视频画面中的位置和所述人脸的分布情况确定所述电子铭牌在所述视频画面中的显示位置和大小。
3.如权利要求1-2所述的方法,其特征在于,所述方法还包括:确定电子铭牌的颜色、电子铭牌的透明度、电子铭牌的轮廓形式、电子铭牌中文字或符号的字体和电子铭牌中文字或符号的颜色。
4.如权利要求1-3所述的方法,其特征在于,所述方法还包括:获取输入消息,所述输入消息用于指示用户对所述电子铭牌的显示要求,所述输入消息包括通过用户手动输入和/或通过用户语音输入。
5.如权利要求3所述的方法,其特征在于,所述方法还包括:获取参会人员的肤色和/或着装颜色,根据所述参会人员的肤色和/或着装颜色确定所述电子铭牌的颜色和/或所述电子铭牌的透明度。
6.如权利要求1-5任一所述的方法,其特征在于,所述将所述身份信息通过所述电子铭牌显示之后,所述方法还包括:
检测到所述电子铭牌与所述参会人员的人脸区域或另一电子铭牌有重叠交叉,
将所述电子铭牌和/或另一电子铭牌在新的位置显示。
7.如权利要求1-6任一所述的方法,其特征在于,所述电子铭牌与其对应的参会人员的人脸区域通过直线或箭头进行连接。
8.如权利要求1-7任一所述的方法,其特征在于,所述将所述身份信息通过所述电子铭牌显示之后,所述方法还包括:
检测到所述参会人员中有至少一个第一人员的发言时长长于第一预设时长或短于第二预设时长;
将所述至少一个第一人员对应的电子铭牌更换为新的至少一个电子铭牌。
9.如权利要求1-8任一所述的方法,其特征在于,所述将所述身份信息通过所述电子铭牌显示之后,所述方法还包括:
检测到所述参会人员中有第二人员在第三预设时长内发言时长短于第四预设时长,所述第三预设时长大于第四预设时长;
将所述第二人员对应的电子铭牌取消显示。
10.如权利要求1-8任一所述的方法,其特征在于,所述将所述身份信息通过所述电子铭牌显示之后,所述方法还包括:
启动计时器,当计时器到达预设时间点,根据输入的音频流确定所述输入的音频流对应的所述参会人员中的至少一个第三人员;
确认所述第三人员对应的电子铭牌是否处于显示状态,若所述第三人员对应的电子铭牌不在显示状态,则显示所述第三人员对应的电子铭牌。
11.如权利要求1-10任一所述的方法,其特征在于,所述身份信息包括如下信息中的一个或多个:名字、年龄、联系方式、籍贯、工作单位、职务、教育背景。
12.一种视频会议中电子铭牌的显示设备,其特征在于,包括:存储器、一个或多个处理器、收发器、显示屏、摄像头;
所述存储器用于存储程序指令;
所述摄像头用于获取参会人员视频画面;
所述收发器用于获取所述参会人员的身份信息;
所述处理器用于运行所述程序指令以执行:根据获取所述参会人员的人脸在所述视频画面中的位置,并根据人脸在视频画面中的位置确定电子铭牌在所述视频画面中的显示位置和大小;
所述显示屏用于通过所述电子铭牌显示所述身份信息。
13.如权利要求12所述的设备,其特征在于,所述处理器根据所述人脸在视频画面中的位置确定电子铭牌在所述视频画面中的显示位置和大小包括:
所述处理器根据所述人脸在视频画面中的位置确定所述人脸的分布情况;
所述处理器根据所述人脸在视频画面中的位置和所述人脸的分布情况确定所述电子铭牌在所述视频画面中的显示位置和大小。
14.如权利要求12、13任一所述的设备,其特征在于,所述处理器还用于:确定电子铭牌的颜色、电子铭牌的透明度、电子铭牌的轮廓形式、电子铭牌中文字或符号的字体和电子铭牌中文字或符号的颜色。
15.如权利要求12-14所述的设备,其特征在于,所述收发器还用于:
接收输入消息,所述输入消息用于指示用户对所述电子铭牌的显示要求,所述输入消息包括通过用户手动输入和/或通过用户语音输入。
16.如权利要求14所述的设备,其特征在于,所述处理器还用于:获取所述参会人员在所述视频画面中的肤色和/或着装颜色,根据所述参会人员的肤色和/或着装颜色确定所述电子铭牌的颜色和/或透明度。
17.如权利要求12-16任一所述的设备,其特征在于,所述处理器还用于判断所述电子铭牌与所述参会人员的人脸区域或另一电子铭牌是否有重叠交叉:
若所述处理器判断所述电子铭牌与所述参会人员的人脸区域或另一电子铭牌有重叠交叉;
则所述处理器确定所述电子铭牌或另一电子铭牌的新的显示位置和新的大小。
18.如权利要求12-17任一所述的设备,其特征在于,所述设备还包括计时器和麦克风:
所述计时器用于对所述参会人员计时;
所述麦克风用于采集在预设时间段内输入的音频流;
所述处理器还用于判断所述输入的音频流对应的所述参会人员中的至少一个第一人员;
所述显示屏还用于确认所述第一人员对应的电子铭牌是否处于显示状态,若所述第一人员对应的电子铭牌不在显示状态,则所述显示屏将所述第一人员对应的电子铭牌显示。
19.如权利要求18所述的设备,其特征在于,所述计时器还用于对所述参会人员的发言时长进行计时;
所述处理器判断所述参会人员中是否有发言时长长于第一预设时长或短于第二预设时长:若所述处理器判断所述参会人员中有第二人员的发言时长长于第一预设时长或短于第二预设时长,则所述处理器确定所述第二人员对应的新的电子铭牌,所述显示屏将所述第二人员对应的电子铭牌更换为所述新的电子铭牌进行显示。
20.如权利要求19所述的方法,其特征在于,当所述处理器判断所述第二人员的发言时长短于第二预设时长,所述显示屏将所述第二人员对应的电子铭牌取消显示。
21.一种视频会议中电子铭牌显示装置,其特征在于,所述电子铭牌显示装置包括:获取模块、配置模块、显示模块;
所述获取模块用于获取参会人员的人脸在视频画面中的位置和所述参会人员身份信息;
所述配置模块用于根据所述人脸在视频画面中的位置确定电子铭牌在所述视频画面中的显示位置和大小;
所述显示模块用于通过所述电子铭牌显示所述身份信息。
22.如权利要求21所述的装置,其特征在于,所述配置模块根据所述人脸在视频画面中的位置确定电子铭牌在所述视频画面中的显示位置和大小包括:
根据所述人脸在视频画面中的位置确定所述人脸的分布情况;
根据所述人脸在视频画面中的位置和所述人脸的分布情况确定所述电子铭牌在所述视频画面中的显示位置和大小。
CN201910673037.3A 2019-07-24 2019-07-24 视频会议中电子铭牌的显示方法和装置 Pending CN112307800A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201910673037.3A CN112307800A (zh) 2019-07-24 2019-07-24 视频会议中电子铭牌的显示方法和装置
EP20186790.0A EP3771203A1 (en) 2019-07-24 2020-07-20 Electronic nameplate display method and apparatus in video conference
US16/937,065 US11662879B2 (en) 2019-07-24 2020-07-23 Electronic nameplate display method and apparatus in video conference

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910673037.3A CN112307800A (zh) 2019-07-24 2019-07-24 视频会议中电子铭牌的显示方法和装置

Publications (1)

Publication Number Publication Date
CN112307800A true CN112307800A (zh) 2021-02-02

Family

ID=71728673

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910673037.3A Pending CN112307800A (zh) 2019-07-24 2019-07-24 视频会议中电子铭牌的显示方法和装置

Country Status (3)

Country Link
US (1) US11662879B2 (zh)
EP (1) EP3771203A1 (zh)
CN (1) CN112307800A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114283675A (zh) * 2021-12-30 2022-04-05 上海摩软通讯技术有限公司 电子名牌及电子名牌的信息显示方法
CN116980680A (zh) * 2023-09-22 2023-10-31 浙江华创视讯科技有限公司 电子铭牌显示方法、终端设备及计算机存储介质

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11663750B2 (en) * 2021-06-25 2023-05-30 Hewlett-Packard Development Company, L.P. Image data bars
WO2023191793A1 (en) * 2022-03-31 2023-10-05 Hewlett-Packard Development Company, L.P. Color palettes of background images

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5828838A (en) * 1996-06-20 1998-10-27 Intel Corporation Method and apparatus for conducting multi-point electronic conferences
US8289363B2 (en) * 2006-12-28 2012-10-16 Mark Buckler Video conferencing
US20100085415A1 (en) * 2008-10-02 2010-04-08 Polycom, Inc Displaying dynamic caller identity during point-to-point and multipoint audio/videoconference
US8842161B2 (en) * 2010-05-18 2014-09-23 Polycom, Inc. Videoconferencing system having adjunct camera for auto-framing and tracking
KR101786944B1 (ko) * 2011-05-12 2017-10-18 삼성전자 주식회사 화자 표시 방법 및 이를 구현하는 영상 통화 단말기
JP5807399B2 (ja) * 2011-06-13 2015-11-10 ソニー株式会社 情報処理装置及びプログラム
US20130144619A1 (en) * 2011-12-01 2013-06-06 Richard T. Lord Enhanced voice conferencing
US20130162752A1 (en) * 2011-12-22 2013-06-27 Advanced Micro Devices, Inc. Audio and Video Teleconferencing Using Voiceprints and Face Prints
US20150189233A1 (en) * 2012-04-30 2015-07-02 Goggle Inc. Facilitating user interaction in a video conference
US9282284B2 (en) * 2013-05-20 2016-03-08 Cisco Technology, Inc. Method and system for facial recognition for a videoconference
US11082466B2 (en) * 2013-12-20 2021-08-03 Avaya Inc. Active talker activated conference pointers
US9386270B2 (en) * 2014-01-15 2016-07-05 Cisco Technology, Inc. Displaying information about at least one participant in a video conference session
US10109092B1 (en) * 2015-03-24 2018-10-23 Imagical LLC Automated text layout, color and other stylization on an image or video, and the tracking and application of user color preferences
CN107370981A (zh) 2016-05-13 2017-11-21 中兴通讯股份有限公司 一种视频会议中参会人员的信息提示方法和装置
CN207082317U (zh) 2017-08-31 2018-03-09 湖北安心智能科技有限公司 一种无线智能办公会议终端设备
US10491979B1 (en) * 2018-05-23 2019-11-26 Suzanne Stradley Electronic talking stick
US11356488B2 (en) * 2019-04-24 2022-06-07 Cisco Technology, Inc. Frame synchronous rendering of remote participant identities

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114283675A (zh) * 2021-12-30 2022-04-05 上海摩软通讯技术有限公司 电子名牌及电子名牌的信息显示方法
CN116980680A (zh) * 2023-09-22 2023-10-31 浙江华创视讯科技有限公司 电子铭牌显示方法、终端设备及计算机存储介质

Also Published As

Publication number Publication date
US20210026517A1 (en) 2021-01-28
US11662879B2 (en) 2023-05-30
EP3771203A1 (en) 2021-01-27

Similar Documents

Publication Publication Date Title
CN112307800A (zh) 视频会议中电子铭牌的显示方法和装置
WO2017193987A1 (zh) 一种视频会议中参会人员的信息提示方法和装置
US10165201B2 (en) Image processing method and apparatus and terminal device to obtain a group photo including photographer
GB2544885A (en) Communication system and method
US20200058302A1 (en) Lip-language identification method and apparatus, and augmented reality device and storage medium
CN112532911A (zh) 图像数据处理方法、装置、设备及存储介质
CN110399810B (zh) 一种辅助点名方法及装置
US20220327732A1 (en) Information processing apparatus, information processing method, and program
CN113221767A (zh) 训练活体人脸识别模型、识别活体人脸的方法及相关装置
CN110491384B (zh) 一种语音数据处理方法及装置
CN111107283B (zh) 一种信息显示方法、电子设备及存储介质
US10460159B1 (en) Video endpoint, communication system, and related method for automatic framing a signing area of a sign language user
EP4187898A2 (en) Securing image data from unintended disclosure at a videoconferencing endpoint
CN114697603A (zh) 一种视频会议的会场画面检测方法及系统
CN112118414B (zh) 视频会话方法、电子设备以及计算机存储介质
CN108769525B (zh) 一种图像调整方法、装置、设备及存储介质
CN109648573B (zh) 一种机器人会话切换方法、装置及计算设备
US10580410B2 (en) Transcription of communications
WO2019205566A1 (zh) 一种显示图片的方法和设备
CN114040145B (zh) 一种视频会议人像显示方法、系统、终端及存储介质
EP4136579A1 (en) Systems and methods for detection and display of whiteboard text and/or an active speaker
CN113766167A (zh) 全景视频会议增强方法、系统和网络设备
CN112073668A (zh) 一种远程教室互动方法、系统、装置和存储介质
CN104219482B (zh) 视频终端设备及其判断眼神意图的方法
CN116033110A (zh) 视频会议发言人显示方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination