CN114827517A - 一种投影视频会议系统及视频投影方法 - Google Patents
一种投影视频会议系统及视频投影方法 Download PDFInfo
- Publication number
- CN114827517A CN114827517A CN202110272521.2A CN202110272521A CN114827517A CN 114827517 A CN114827517 A CN 114827517A CN 202110272521 A CN202110272521 A CN 202110272521A CN 114827517 A CN114827517 A CN 114827517A
- Authority
- CN
- China
- Prior art keywords
- video
- picture
- projection
- scene
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 33
- 238000005286 illumination Methods 0.000 claims abstract description 21
- 238000003384 imaging method Methods 0.000 claims description 13
- 230000005236 sound signal Effects 0.000 claims description 13
- 230000000877 morphologic effect Effects 0.000 claims description 8
- 230000003628 erosive effect Effects 0.000 claims description 7
- 230000009467 reduction Effects 0.000 claims description 5
- 230000005540 biological transmission Effects 0.000 abstract description 6
- 238000010586 diagram Methods 0.000 description 12
- 238000004891 communication Methods 0.000 description 10
- 230000008569 process Effects 0.000 description 10
- 230000008859 change Effects 0.000 description 6
- 230000009471 action Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000001629 suppression Effects 0.000 description 4
- 238000010191 image analysis Methods 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 230000004807 localization Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000003750 conditioning effect Effects 0.000 description 1
- 230000007797 corrosion Effects 0.000 description 1
- 238000005260 corrosion Methods 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
- H04L12/1818—Conference organisation arrangements, e.g. handling schedules, setting up parameters needed by nodes to attend a conference, booking network resources, notifying involved parties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/10—Architectures or entities
- H04L65/1059—End-user terminal functionalities specially adapted for real-time communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1073—Registration or de-registration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1083—In-session procedures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/403—Arrangements for multi-party communication, e.g. for conferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
- H04N21/26208—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints
- H04N21/26241—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints involving the time of distribution, e.g. the best time of the day for inserting an advertisement or airing a children program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
- H04N21/26283—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for associating distribution time parameters to content, e.g. to generate electronic program guide data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
- H04N21/4668—Learning process for intelligent management, e.g. learning user preferences for recommending movies for recommending content, e.g. movies
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L2015/088—Word spotting
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Acoustics & Sound (AREA)
- General Health & Medical Sciences (AREA)
- Marketing (AREA)
- General Physics & Mathematics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Telephonic Communication Services (AREA)
Abstract
本申请公开了一种投影视频会议系统,包括:摄像模组,用于多个采集会议场景的场景视频画面;音频输入模组,用于采集多个会议场景的音频信息;模式选择模组,用于根据用户指令选择视频投影会议模式;信号处理模组,用于根据视频投影会议模式对所述场景视频画面和所述音频信息进行处理;以及投影模组;其中,视频投影会议模式对应的场景视频画面和音频信息经云服务编码合并处理后,输出至所述信号处理模组;投影模组包括调制组件,用于依照场景视频画面对照明光进行调制,以得到待投影场景视频。通过上述方式,本申请能够根据用户需求投射单画面或多画面,且借助云服务进行视频及音频处理及传输,数据传输速度快,用户体验较佳。
Description
技术领域
本申请涉及视频会议技术领域,具体涉及一种投影视频会议系统、视频投影方法及电子设备。
背景技术
疫情肆虐,视频会议这一便捷、无接触、实时性较强的办公模式受到越来越多企业的青睐,视频会议这一沟通模式也到了越来越快的发展。然而,目前的视频会议主要考虑一对一场景,在多画面的应用场景下,无法投射较为清晰的投影图像画面,造成了较差的用户体验。同时,现有的通过对摄像头、电视屏、音响、麦克风和会议控制设备(比如电脑)进行组合,跟对方视频会议系统建立即拨即通的视频会议,也存在设备昂贵,安装和使用灵活度差,体积较大,不方便携带的缺点。
发明内容
本申请提供一种投影视频会议系统,能够实现语音控制,并将语音信息转化为文本信息与会议视频融合显示,且集成度高,可即拨即通,方便携带。
为解决上述技术问题,本申请采用的技术方案是:提供一种视频会议投影装置,其特征在于,包括:摄像模组,用于多个采集会议场景的场景视频画面;音频输入模组,用于采集多个会议场景的音频信息;模式选择模组,所述模式选择模组用于根据用户指令选择视频投影会议模式;信号处理模组,所述信号处理模组用于根据视频投影会议模式对所述场景视频画面和所述音频信息进行处理;以及投影模组,所述投影模组用于投射待投影场景视频;其中,所述视频投影会议模式对应的场景视频画面和所述音频信息经云服务编码合并处理后,输出至所述信号处理模组;所述投影模组包括调制组件,所述调制组件用于依照所述信号处理模组处理后的场景视频画面对照明光进行调制,以得到待投影场景视频。
在一实施方式中,所述模式选择模组包括:单画面模块,所述单画面模块用于选择采集的多个会议场景中的其中一个场景的作为单场景视频画面,并将其输出至信号处理模组;多画面模块,所述多画面模块用于根据实际显示分辨率将选中的多个会议场景视频进行左右或上下拼接以得到同时显示的多场景视频画面,并将所述多场景视频画面输出至信号处理模组。
在一实施方式中,所述多画面模块包括:画面选择组件,用于根据实际显示分辨率以及预设画面数选定多个画面数中的预设数个画面;画面放大组件,用于将被选中画面进行预设倍数的放大;位置调整组件,用于调整被选中画面的位置;画面拼接组件,用于将所述被选中画面和未被选中画面进行拼接,得到多场景视频画面;以及画面锁定组件,用于锁定当前多画面模块的多场景视频画面。
在一实施方式中,所述信号处理模组包括图像信号处理器,所述图像信号处理器包括拆分转化模块,所述用于拆分转化模块将所述场景视频画面拆分为场景图像序列,并将场景图像序列中的图像的存储格式由多通道转化为单通道的灰度图像存储格式,以得到灰度图像序列。
在一实施方式中,所述图像信号处理器还包括图像降噪模块,所述图像降噪模块用于通过差帧处理以及形态学腐蚀对灰度图像的图像噪声进行处理。
在一实施方式中,所述投影模组包括:投影处理器,所述投影处理器用于与所述摄像模组和投影模组基于云服务进行通信,基于一个或多个约束的集合来确定可调整的投影仪参数集和可调整的成像参数集;调制模块,所述调制模块用于根据投影处理器处理的投影仪参数集以及所述灰度图像序列对照明光进行调制,以输出投影光。
在一实施方式中,所述信号处理模组还包括音频信号处理器,用于对采集的所述语音信号进行定位判断,并进行降噪处理。
在一实施方式中,所述的视频会议投影装置还包括音频输出模组,所述音频输出模组用于播放所述信号处理模组发送的经云服务传输后的音频信号。
本申请还提供一种投影视频方法,包括:
拍摄多个会议场景的场景视频画面;
采集多个会议场景的音频信息;
选择视频投影会议模式,并根据视频投影会议模式处理所述场景视频画面和所述音频信息;
根据场景视频画面对照明光进行调制得到投影光,并投射携带有场景视频的投影光;
同步播放会议场景的音频信息;
其中,所述会议场景的场景视频画面和所述会议场景的音频信息被传输至云服务并被编码合并处理。
在一实施方式中,所述选择视频投影会议模式,并根据视频投影会议模式处理所述场景视频画面和所述音频信息的步骤包括:
根据预设用户指令选择视频会议模式,若为单画面,则根据预设单画面指令选择单场景视频画面;
若为多画面,则根据实际显示分辨率以及预设画面数选择多个画面进行左右或上下拼接以得到多场景视频画面。
在一实施方式中,所述根据实际显示分辨率以及预设画面数选择多个画面进行左右或上下拼接以得到多场景视频画面的步骤包括:
根据实际显示分辨率以及预设画面数选定多个画面数中的预设数个画面;
将被选中画面进行预设倍数的放大;
调整被选中画面的位置;
拼接被选中画面和未被选中画面;
锁定当前多场景视频画面。
在一实施方式中,在所述根据场景视频画面对照明光进行调制得到投影光,并投射携带有场景视频的投影光的步骤之前,还包括:
将所述场景视频画面的场景视频画面拆分为场景图像序列;
将场景图像序列中的图像的存储格式由多通道转化为单通道的灰度图像存储格式,以得到灰度图像序列。
在一实施方式中,所述的视频投影方法还包括:
通过差帧处理以及形态学腐蚀对灰度图像的图像噪声进行处理。
在一实施方式中,所述根据场景视频画面对照明光进行调制得到投影光,并投射携带有场景视频的投影光的步骤包括:
基于一个或多个约束的集合来确定可调整的投影仪参数集和可调整的成像参数集;
根据投影处理器处理的投影仪参数集以及所述灰度图像序列对照明光进行调制,以输出投影光。
通过上述方案,本申请的有益效果是:本申请中的投影视频会议系统通过一个系统集成设置了摄像模组、音频输入模组、模式选择模组、信号处理模组以及投影模组,集成度较高,摄像模组采集会议场景,提供高清全景的效果;模式选择模组根据用户指令选择不同的视频投影会议模式,提高了用户的使用体验;信号处理模组根据视频投影会议模式对所述场景视频画面和所述音频信息进行处理,投影模组基于一个或多个约束的集合来确定可调整的投影仪参数集和可调整的成像参数集,能够降低噪声,确保了不同会议模式下呈现的视频画面的高清分辨率,由于视频画面和音频信息均通过云服务进行传输和处理,数据传输速度快,同时,利用投影模组来对单画面或者多画面的高清视频进行投影时,由于采用投影模组来显示会议场景,可直接将视频投影在墙上,无需显示屏即可进行显示,体积较小,方便用户携带;此外,还将语音控制引进了视频会议系统,提供语音识别功能,通过语音识别来实现对视频会议系统的控制,比如,可通过语音控制选择会议视频模式等,实现智能控制,无需用户用手来控制设备,简化用户的操作。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。其中:
图1是本申请提供的视频会议系统一实施例的结构示意图;
图2是本申请提供的模式选择模组一实施例的结构示意图;
图3是本申请提供的多场景视频画面一实施例的结果示意图;
图4是本申请提供的信号处理模组一实施例的结构示意图;
图5是本申请提供的信号处理模组另一实施例的结构示意图;
图6是是本申请提的投影模组一实施例的结构示意图;
图7是本申请提供的一种视频会议方法的示意图;
图8是本申请提供的另一种视频会议方法的示意图;
图9是本申请提供的再另一种视频会议方法的示意图。
图10是本申请提供的又一种视频会议方法的示意图;
图11是本申请提供的再又一种视频会议方法的示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性的劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
目前的视频会议主要考虑不同场景下的视频画面的展示情况,由电视屏、摄像头、麦克风、音箱、遥控器和电脑等各自独立的设备组合而成,摄像头通常安装在电视屏顶部,用来极大化摄入会议场景,但是,这种视频会议在人员较多时会出现重叠现象,通过视频传给远端后会出现部分人员比较清晰,越往后要么被重叠挡住视野,要么因为距离摄像头太远看不清楚;麦克风和音箱通常远离电视屏,布置在会议桌面上,方便采集会议人员的语音信息以及播出会议对方发送过来的语音信息;由于音频设备和视频设备互相独立,在网络情况不佳时会存在同步失真,会议质量会变得较差;电脑用来启动和管理视频会议或分享屏幕等,同时,目前的视频会议系统主要考虑一对一场景,在多画面的应用场景下,无法投射较为清晰的投影图像画面,用户体验较差。同时,现有的通过对摄像头、电视屏、音响、麦克风和会议控制设备(比如电脑)进行组合,跟对方视频会议系统建立即拨即通的视频会议,也存在设备昂贵,安装和使用灵活度差,体积较大,不方便携带的缺点。
本申请旨在解决上述视频会议系统所存在的问题,给用户带来新的视频会议体验,可便携,随时需要随时使用,集高清全景音视频于一体,并采用高清高亮的投影模组来取代传统的电视屏幕或显示器,投影尺寸根据投影距离来调整,既适合群组会议,也适合家庭和个人使用,且成本较低。同时,可通过云服务与对方会议设备以及会议视频的各个组件之间建立点到点的最优视频连接,以达到最佳视频会议效果。
请参阅图1至图6,图1是本申请提供的视频会议系统一实施例的结构示意图,视频会议系统10包括:摄像模组11、音频输入模组12、模式选择模组13、信号处理模组14、投影模组15、音频输出模组16以及存储模组17。
摄像模组11用于获取会议场景的全景视频,可将采集到的会议视频信息传输至信号处理模组13,摄像模组11包括摄像头,摄像头可以为广角镜头,其可为360度全景摄像头或覆盖局部场景的摄像头,可采用两个或三个广角镜头,每个广角镜头支持1080P或者4K等更高的分辨率,对所有广角镜头采集到的视频利用软件进行拼接,可以生成360度场景的高清视频,高清全景视频保持在1080P。可以理解的,摄像模组11可以包括多组摄像头,用于采集多个会议场景的视频信息。在会议过程中可以通过对全景视频进行人工智能(Artificial Intelligence,AI)图像分析来实时跟踪所有参与会议的人员,并对发言者进行定位和标识,同时,也可以利用虚拟现实技术对采集到的视频信息进行进一步优化,提升参与者的体验感。
在一种实施方式中,摄像模组11可以包括壳体、摄像头、电机以及升降平台,电机与升降平台设置于壳体内,且升降平台设置于电机的上方,用于承载摄像头,摄像头设置于升降平台的上方;电机用于在接收到信号指令后驱动升降平台上下移动,以带动摄像头上下移动,实现将摄像头伸出或隐藏于壳体内,通过这种实施方式,能够对摄像头的位置进行精确的控制,提高了了会议视频的使用精度,同时,由于摄像头未使用时能够隐藏于壳体之中,有效避免了灰尘损害。
在另一种实施方式中,摄像模组11可包括壳体,摄像头,无线控制装置,四轴飞行器,无线控制装置设置于壳体内,四轴飞行器设置在无线控制装置可操控范围内,且摄像头设置在所述四轴飞行器上方,用于在接收到无线控制装置发出的指令后,带动摄像头飞出壳体,并对360度全景的视频信息进行采集,通过这种实施方式,本申请的摄像头能够脱离投影仪进行更多方位的信息捕捉,并能针对不同需求灵活调整摄像头的方位和位置,切换不同视场下的会议视频信息,能够适应更多的应用场景。
音频输入模组12用于采集语音信号,音频输入模组12可以为麦克风,可支持水平方向360度环绕的麦克风阵列,可采用8个水平平面均匀环绕的具有脉冲密度调制(PulseDensity Modulation,PDM)功能的数字微机电系统(MEMS,Micro Electro MechanicalSystem)麦克风阵列来进行远近场交互,或者采用8+1麦克风阵列,一个麦克风位于中间,来捕获远场音频,可以理解的,音频输入模组12可以包括多组麦克风,用于采集多个会议场景的音频信息。。
模式选择模组13用于根据用户指令选择视频投影会议模式,具体的,所述模式选择模组在选择视频投影会议模式时是根据用户发出的指令对应的模式选择处理器进行模式切换的,可以理解的,用户指令可以为音频输入模组12采集到的音频信息中携带的语音指令,在一些实施例中,如图2所示,所述模式选择模组包括单画面模块131和多画面模块132,当用户发出的指令为单画面时,模式选择处理器(图未示)选中单画面模块,单画面处理器(图未示)则根据预设指令选中采集的多个会议场景中的其中一个场景的作为单场景视频画面,例如,多个视频画面共包括8个会议场景,用户发出单画面指令,并指定画面5作为单场景视频画面,则单画面处理器(图未示)打开画面5的场景视频画面,并关闭其余7个场景视频画面;当用户指令为多画面,并指定画面2、画面4、画面5和画面7作为选中会议场景,且画面4作为主画面时,模式选择处理器(图未示)选中多画面模块132,多画面处理器(图未示)则根据用户指令打开画面2、画面4、画面5和画面7,并设置画面4为主画面,同时关闭其余4个画面。
在一些实施例中,请继续参阅图2,多画面模块132包括画面选择组件1321,画面放大组件1322,位置调整组件1323,画面拼接组件1324以及锁定组件1325。
其中,画面选择组件1321用于根据实际显示分辨率以及预设画面数选定多个画面数中的预设数个画面,例如,实际显示分辨率为2560×2160,用户可分辨最小会议视频分辨率大小为320×270,则多个画面数为8个,用户选定的预设画面数为5个,指定的画面为画面1、画面2、画面4、画面5和画面7,主画面为画面4,则画面选择组件会选择8个画面中的画面1、画面2、画面4、画面5、画面7作为选定画面,关闭其余3个画面,并将画面4作为被选中画面(也即主画面),可以理解的,用户也可以根据需要更换选定画面和被选中画面。
画面放大组件1321用于将被选中画面进行预设倍数的放大,预设放大倍数α的范围为1≤α<8,在本实施例中,预设放大倍数为2。
位置调整组件用于调整被选中画面的位置,如,将被选中画面移动至待显示画面的左上角,将其余选定画面移动至待显示画面的中心,或者,将被选中画面移动至待显示画面的中心位置,将未被选中画面移动至边缘位置;
画面拼接组件,用于将所述被选中画面和未被选中画面(也即其余选定画面)进行拼接,得到多场景视频画面,例如,如图3所示,将位于中心位置的主画面放大2倍后,将第1个选定画面置于主画面的左上角,将第2个选定画面置于主画面的左下角,将第5个选定画面置于主画面的右上角,将第7个画面置于主画面的右下角,且主画面分别和第1、2、5、7的边缘拼接,以此得到多视频画面拼接,从而实现了多视频画面协同沟通。
画面锁定组件1325用于将当前多画面模块的多场景视频画面进行锁定,以避免用户误触,当用户想要根据实际情况更换多场景视频画面的种类和排布方式时,可以更改锁定组件的开关状态,如,当锁定组件的开关状态为“开”时,则用户不能对多视频画面的种类和排布方式进行改变,当锁定组件的开关状态为“关”时,用户可以根据需要对多视频画面的种类和排布方式进行改变,通过此方式,可以有效避免用户的误操作。
信号处理模组14用于根据视频投影会议模式对所述场景视频画面和所述音频信息进行处理,如选中单画面时,则对单画面对应的场景视频画面和音频信息进行处理,如选中多画面,则对多场景视频画面的场景视频画面和音频信息处理。
具体地,请参见图4,信号处理模组14包括图像信号处理器141和音频信号处理器142。
图像信号处理器141包括拆分转化模块1411和图像降噪模块1412,其中,拆分转化模块1411场景视频画面拆分为场景图像序列,并将场景图像序列中的图像的存储格式由多通道转化为单通道的灰度图像存储格式,以得到灰度图像序列,可以理解的,由于摄像模组采集的画面并不能直接被用于调制,因此,通过拆分转化模块的拆分转换,能够得到用于灰度调制的灰度图像序列;图像降噪模块1422主要用于通过差帧处理以及形态学腐蚀对灰度图像序列的图像噪声进行处理,具体的,图像降噪模块1422,首先对灰度图像序列依次做前后帧的差帧处理,得到差值图像序列,从而去除背景噪声,并将差值图像序列进行形态学中腐蚀去噪处理,以此去除非条纹噪声影响并突显条纹特征,最后将去噪图像序列和差值图像序列进行Sobel算子锐化处理,从而去除灰度图像序列中各帧图像的条纹噪声,得到不含图像噪声的灰度图像序列,提升了视频会议场景的图像质量。
音频信号处理器142用于对音频输入模组14输入的音频信号进行处理,所述音频信号包含可识别的语音指令,具体地,音频输入模组12的数字麦克风阵列可通过波束形成技术,抑制非目标方向的拾音,实现抑制噪音的目的,也可以增强声源角度内的人声,将处理后的语音信号传输至信号处理模组14的音频信号处理器142中的数字信号处理模块1421。
可利用数字信号处理模块1421对数字麦克风阵列输出的PDM数字信号进行数字滤波、抽取以及调节,以将1位PDM高频数字信号转换为具有合适音频频率的16位脉冲编码调制(Pulse Code Modulation,PCM)数据流;回声消除模块1422与数字信号处理模块1421连接,可对PCM数据流进行回声消除处理;波束形成模块1423与回声消除模块1422连接,可对回声消除模块1422输出的信号进行过滤;声源定位模块1424与回声消除模块1422以及波束形成模块1423连接,其基于回声消除模块1422输出的信号与波束形成模块1423的信号,检测出声源的方向,形成拾音波束区域;具体地,其可采用基于到达时间差(Time DifferenceOf Arrival,TDOA)的方法,通过计算信号到达各个麦克风之间的时间差,计算出声源的位置目标,检测出声源的方向,形成拾音波束区域;噪声抑制模块1425与声源定位模块1424连接,可对声源定位模块1424输出的信号进行噪声抑制处理;混响消除模块1426与噪声抑制模块1425连接,可对噪声抑制模块1425输出的信号进行混响消除处理。识别模块1427与混响消除模块1426连接,可对经过前端处理后的语音信号进行关键词/词组识别,并可将识别结果发送至动作执行模块1428,以使得动作执行模块1428执行与识别结果相应的动作,通过这样的设置,能够有效识别不同方位发出的语音信号,降低非定位位置的噪音信号,提升用户体验。在另一种实施方式中,识别模块1427对所述语音指令进行识别,得到关键词信息,动作执行模块1428执行与所述关键词信息操作。
在一具体的实施例中,可基于本地内置词库进行语音控制,即预先在本地存储一些命令关键词/词组,形成一个词库,该命令关键词/词组包括“打开单画面”、“关闭单画面”、“打开多画面”、“关闭多画面”“打开投影模组”、“关闭投影模组”、“打开/关闭摄像模组”、“请关机”、“调高音量”或“调低音量”等;在实际使用时,检测识别出的用户输入的语音与该词库中的关键词是否相同,如果相同,则执行相应的操作;例如,如果音频信号处理器142可识别出用户下发的语音指令是“打开多画面”,则控制信号模组131的多画面模块132打开。
投影模组15用于投射待投影场景视频,具体来说,可以显示电脑或外接终端设备输入信号的视频,也可以显示摄像模组拍摄到的全景视频或对方会议设备发送的对方会议场景视频,可通过在电脑及外接电子终端的会议系统上进行选择所要显示的会议画面信息。
具体地,请参阅图6,投影模组15包括投影处理器151和调制模块152,其中,投影处理器151用于与摄像模组11和投影模组15基于云服务进行通信,并基于一个或多个约束的集合来确定可调整的投影仪参数集和可调整的成像参数集,具体的,摄像模组11的每个摄像头对应的每个图像传感器被布置成捕获场景的图像集,每个图像传感器包括可调整的成像参数集,包括帧时间,帧时间是指将图像传感器设置为传递帧序列时从一帧到下一帧的间隔(也即在图像集中每个图像的持续时间),投影仪参数集,包括每帧灰度图像的切换速度,在其他实施例中,投影模组可以包括各种参数和/或约束,如马达速度、所需的灰度图像的偏移量等;可以理解的,确定可调整的投影仪参数集和可调整的成像参数集包括确定最小化帧时间的切换速度,投影处理器151根据读出的多个图像传感器的视场所需的最小时间来调整帧时间或根据投影模组的调制组件152处于最大曝光的曝光时间来调整帧时间,从而实现根据调制组件的实际调制情况,控制摄像模组采集的视频画面质量,实现了基于结果(投影模组调制端)控制输入(摄像模组采集端)的参数反馈与控制,可以理解的,基于一个或多个约束的集合为包括但不限于上述帧时间、马达速度、所需的灰度图像的偏移量、投影模组承载的照明光的照明功率等的集合,同时,为保证高速的传输速度,反馈数据(也即一个或多个约束的集合)基于云服务实现传输。
调制模块152用来根据投影处理器处理的投影仪参数集以及上述信号处理模块13处理后的灰度图像序列等对照明光进行调制,并输出投影光,也即待投影场景视频。通过这样的方式,由于针对多个摄像头的图像传感器的成像参数集和投影组件的投影仪参数集进行了约束,能够降低噪声,并有效提升多画面模块下的投影图像的清晰度,解决了多画面投影时摄像头的图像传感器参数与投影组件参数不符合预期的技术问题,提升了用户体验。
可以理解的,投影处理器151还可支持通过图像分析和处理算法对参与会议的人员进行局部标识和勾画,然后将标识和勾画后的图像平列/竖列投影在投影区的上侧、下侧、左侧或右侧;还可支持通过图像分析和处理算法辅助麦克风阵列对视频会议发言者进行定位、聚焦或者放大。
优选地,由于激光具有高亮度、色域广、色彩真实、方向性强以及使用寿命长等优点,投影模组15采用基于激光光源的投影技术,输出亮度可以达到500流明以上,视频会议系统10输出视频达到1080P以上的分辨率,可用来投射会议对方的视频或实现电脑/手机等电子终端设备的屏幕共享。可以理解的是,投影模组15并不局限于采用基于激光光源的投影技术,也可以采用LED光源的投影技术。
音频输出模组16用于播放信号处理模组13发送的音频信号,其可以为扬声器或音响,可采用360度环绕音响或采用局部方向的音响。
在一些实施方式中,投影视频会议系统10还包括缓存模组17,用于存储待投影场景视频,同时,用于预先存储上述内置词库。
在一些实施方式中,电子设备可与视频会议系统10进行网络通信,也即,网络连接方式可以是电子设备和视频会议系统加入同一个WIFI网络,通过网关设备进行通信。视频会议系统10与电子设备工作时都配置在STA模式,通过网关设备来加入WIFI无线网络,电子设备通过网关设备来发现视频会议系统10、管理视频会议系统10以及与视频会议系统10通信,视频会议系统10无论是从云端获取数据还是进行视频分享均需通过网关设备,占用同一频段和接口资源。
在又一具体的实施方式中,电子设备可直接加入视频会议系统10的无线网络以进行通信,视频会议系统10中的无线通信模组(图未示)可以同时工作在STA模式和AP模式,属于单频分时通信,相比双频混合模式,数据速率将减半。
在另一具体的实施方式中,电子设备也可以通过无线蓝牙与视频会议系统10进行通信,即电子设备与视频会议系统10之间建立蓝牙通道,电子设备与视频会议系统10中的无线通信模组均工作在STA模式,可通过WIFI处理高速数据,比如播放视频流。
在其他具体的实施方式中,电子设备通过云服务与视频会议系统10远程通信;在远程通信时,电子设备与视频会议系统10不需要在同一个网络,电子设备将控制命令发送给云服务,通过视频会议系统10和云服务建立的安全信令通道将命令传递给视频会议系统10,从而达到与视频会议系统10通信的目的,需要说明的是,此种模式还可以实现不同视频会议系统之间的通信交互。
请参考图7,本申请提供一种视频会议方法,所述视频会议方法包括步骤S11~S16。
步骤S11:拍摄多个会议场景的场景视频画面;
具体来说,通过视频会议系统10的摄像模组11来获取多个会议现场的图像信息。
步骤S12:采集多个会议场景的音频信息。
具体来说,通过视频会议系统10的音频输入模组12来采集语音信号,音频输入模组12可以为麦克风,可支持水平方向360度环绕的麦克风阵列。
进一步,所述语音信号包括可信息识别处理器131进行识别的语音指令,所述语音指令为与视频会议系统10相关的操作,在一具体的实施例中,“打开单画面”、“关闭单画面”、“打开多画面”、“关闭多画面”“打开投影模组”、“关闭投影模组”、“打开/关闭摄像模组”、“请关机”、“调高音量”或“调低音量”等。
在实际使用时,检测识别出的用户输入的语音与该词库中的关键词是否相同,如果相同,则执行相应的操作;例如,如果音频信号处理器142可识别出用户下发的语音指令是“打开多画面”,则控制信号模组131的多画面模块132打开。
步骤S13:会议场景的场景视频画面和所述会议场景的音频信息被传输至云服务并被编码合并处理,以转换成可播放的视频文件。
步骤S14:根据用户指令选择视频投影会议模式,并根据视频投影会议模式处理所述场景视频画面和所述音频信息。可以理解的,用户指令可以为音频输入模组12采集到的音频信息中携带的语音指令。
在一些实施例中,如图8所示,步骤S14具体包括:
S141:根据预设用户指令选择视频会议模式,若为单画面,则根据预设单画面指令选择单场景视频画面。
当用户发出的指令为单画面时,模式选择处理器选中单画面模块,单画面处理器则根据预设指令选中采集的多个会议场景中的其中一个场景的作为单场景视频画面,例如,多个视频画面共包括8个会议场景,用户发出单画面指令,并指定画面5作为单场景视频画面,则单画面处理器(图未示)打开画面5的场景视频画面,并关闭其余7个场景视频画面。
S142:若为多画面,则根据实际显示分辨率以及预设画面数选择多个画面进行左右或上下拼接以得到多场景视频画面。
当用户指令为多画面,并指定某些画面作为选中会议场景,且选中主画面时,则根据实际显示分辨率以及预设画面数选择多个画面进行左右或上下拼接以得到多场景视频画面。例如,用户指令为多画面,并指定画面2、画面4、画面5和画面7作为选中会议场景,且画面4作为主画面时,模式选择处理器选中多画面模块132,多画面处理器(图未示)则根据用户指令打开画面2、画面4、画面5和画面7,并设置画面4为主画面,同时关闭其余4个画面。
更进一步的,当用户指令为多画面时,如图9所示,步骤142具体包括:
S142a:根据实际显示分辨率以及预设画面数选定多个画面数中的预设数个画面。
可选的,根据实际显示分辨率以及预设画面数选定多个画面数中的预设数个画面,例如,实际显示分辨率为2560×2160,用户可分辨最小会议视频分辨率大小为320×270,则多个画面数为8个,用户选定的预设画面数为5个,指定的画面为画面1、画面2、画面4、画面5和画面7,主画面为画面4,则画面选择组件会选择8个画面中的画面1、画面2、画面4、画面5、画面7作为选定画面,关闭其余3个画面,并将画面4作为被选中画面(也即主画面)。
S142b:将被选中画面进行预设倍数的放大。
将被选中画面(也即主画面)进行预设倍数的放大,预设放大倍数α的范围为1≤α<8,在本实施例中,预设放大倍数为2
S142c:调整被选中画面的位置。
在一些实施例中,用户可以调整被选中画面的位置,如,将被选中画面移动至待显示画面的左上角,将其余选定画面移动至待显示画面的中心,或者,将被选中画面移动至待显示画面的中心位置,将未被选中画面移动至边缘位置。
S142d:拼接被选中画面和未被选中画面。
在一些实施例中,将所述被选中画面和未被选中画面(也即其余选定画面)进行拼接,得到多场景视频画面,例如,如图3所示,将位于中心位置的主画面放大2倍后,将第1个选定画面置于主画面的左上角,将第2个选定画面置于主画面的左下角,将第5个选定画面置于主画面的右上角,将第7个画面置于主画面的右下角,且主画面分别和第1、2、5、7的边缘拼接。
S142e:锁定当前多场景视频画面。
在一些实施例中,可以将当前多画面模块的多场景视频画面进行锁定,以避免用户误触,当用户想要根据实际情况更换多场景视频画面的种类和排布方式时,可以更改锁定组件的开关状态,如,当锁定组件的开关状态为“开”时,则用户不能对多视频画面的种类和排布方式进行改变,当锁定组件的开关状态为“关”时,用户可以根据需要对多视频画面的种类和排布方式进行改变,通过此方式,可以有效避免用户的误操作。
步骤S15:根据场景视频画面对照明光进行调制得到投影光,并投射携带有场景视频的投影光。
具体来说,通过视频会议系统10的投影模组15投射会议视频,进一步,投影模组15用于显示摄像模组11采集到的全景视频或对方会议设备发送的对方会议场景视频,可通过在电脑及外接电子终端的会议系统上进行选择所要显示的会议视频画面信息。
在一些实施例中,如图10所示,步骤S15之前还包括:
S14’:将所述场景视频画面的场景视频画面拆分为场景图像序列。
S14”:将场景图像序列中的图像的存储格式由多通道转化为单通道的灰度图像存储格式,以得到灰度图像序列。
可以理解的,由于摄像模组采集的画面并不能直接被用于调制,因此,通过拆分转化模块的拆分转换,能够得到用于灰度调制的灰度图像序列。
S14”’:通过差帧处理以及形态学腐蚀对灰度图像的图像噪声进行处理。
具体的,对灰度图像序列依次做前后帧的差帧处理,得到差值图像序列,从而去除背景噪声,并将差值图像序列进行形态学中腐蚀去噪处理,以此去除非条纹噪声影响并突显条纹特征,最后将去噪图像序列和差值图像序列进行Sobel算子锐化处理,从而去除灰度图像序列中各帧图像的条纹噪声,得到不含图像噪声的灰度图像序列,提升了视频会议场景的图像质量。
在一些实施例中,如图11所示,步骤S15还包括:
步骤S151:基于一个或多个约束的集合来确定可调整的投影仪参数集和可调整的成像参数集。
摄像模组11的每个摄像头对应的每个图像传感器被布置成捕获场景的图像集,每个图像传感器包括可调整的成像参数集,包括帧时间,帧时间是指将图像传感器设置为传递帧序列时从一帧到下一帧的间隔(也即在图像集中每个图像的持续时间),投影仪参数集,包括每帧灰度图像的切换速度,在其他实施例中,投影模组可以包括各种参数和/或约束,如马达速度、所需的灰度图像的偏移量等;可以理解的,确定可调整的投影仪参数集和可调整的成像参数集包括确定最小化帧时间的切换速度,投影处理器151根据读出的多个图像传感器的视场所需的最小时间来调整帧时间或根据投影模组的调制组件152处于最大曝光的曝光时间来调整帧时间,从而实现根据调制组件的实际调制情况,控制摄像模组采集的视频画面质量,实现了基于结果(投影模组调制端)控制输入(摄像模组采集端)的正向反馈与控制,可以理解的,基于一个或多个约束的集合为包括但不限于上述帧时间、马达速度、所需的灰度图像的偏移量、投影模组承载的照明光的照明功率等的集合,同时,为保证高速的传输速度,反馈数据基于云服务实现传输。
通过上述方式,由于针对多个摄像头的图像传感器的成像参数集和投影组件的投影仪参数集进行了约束,能够有效降低噪声,并提升多画面模块下的投影图像的清晰度,解决了多画面投影时摄像头的图像传感器参数与投影组件参数不符合预期的技术问题,提升了用户体验。
步骤S15:根据场景视频画面对照明光进行调制得到投影光,并投射携带有场景视频的投影光。
上述携带有场景视频的投影光即为待投影场景视频。
步骤S16:同步播放会议场景的音频信息。
可以理解的,在播放步骤S15中的待投影场景视频时,音频输出模组同步播放信号处理模组发送的音频信号,其中,音频输出模组其可以为扬声器或音响,可采用360度环绕音响或采用局部方向的音响。
综上所述,本申请提供一种投影视频会议系统,包括:摄像模组,用于多个采集会议场景的场景视频画面;音频输入模组,用于采集多个会议场景的音频信息;模式选择模组,用于根据用户指令选择视频投影会议模式;信号处理模组,用于根据视频投影会议模式对所述场景视频画面和所述音频信息进行处理;以及投影模组;其中,视频投影会议模式对应的场景视频画面和音频信息经云服务编码合并处理后,输出至所述信号处理模组;投影模组包括调制组件,用于依照场景视频画面对照明光进行调制,以得到待投影场景视频。模式选择模组根据用户指令选择不同的视频投影会议模式,提高了用户的使用体验;信号处理模组根据视频投影会议模式对所述场景视频画面和所述音频信息进行处理,确保了不同会议模式下呈现的视频画面的高清分辨率,由于视频画面和音频信息均通过云服务进行传输和处理,数据传输速度快,同时,利用投影模组来对单画面或者多画面的高清视频进行投影时,由于采用投影模组来显示会议场景,可直接将视频投影在墙上,无需显示屏即可进行显示,体积较小,方便用户携带;此外,还将语音控制引进了视频会议系统,提供语音识别和语音控制功能,通过语音识别和控制来实现对视频会议系统的控制,比如,可通过语音控制开启字幕开关等,实现智能控制,无需用户用手来控制设备,简化用户的操作。
以上所述仅为本申请的实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。
Claims (14)
1.一种视频会议投影装置,其特征在于,包括:
摄像模组,用于多个采集会议场景的场景视频画面;
音频输入模组,用于采集多个会议场景的音频信息;
模式选择模组,所述模式选择模组用于根据用户指令选择视频投影会议模式;
信号处理模组,所述信号处理模组用于根据视频投影会议模式对所述场景视频画面和所述音频信息进行处理;
以及投影模组,所述投影模组用于投射待投影场景视频;
其中,所述视频投影会议模式对应的场景视频画面和所述音频信息经云服务编码合并处理后,输出至所述信号处理模组;所述投影模组包括调制组件,所述调制组件用于依照所述信号处理模组处理后的场景视频画面对照明光进行调制,以得到待投影场景视频。
2.一种如权利要求1所述的视频会议投影装置,其特征在于,所述模式选择模组包括:
单画面模块,所述单画面模块基于单画面处理器选择采集的多个会议场景中的其中一个场景的作为单场景视频画面,并将其输出至信号处理模组;
多画面模块,所述多画面模块基于多画面处理器并根据实际显示分辨率将选中的多个会议场景视频进行左右或上下拼接以得到同时显示的多场景视频画面,并将所述多场景视频画面输出至信号处理模组。
3.一种如权利要求2所述的视频会议投影装置,其特征在于,所述多画面模块包括:
画面选择组件,用于根据实际显示分辨率以及预设画面数选定多个画面数中的预设数个画面;
画面放大组件,用于将被选中画面进行预设倍数的放大;
位置调整组件,用于调整被选中画面的位置;
画面拼接组件,用于将所述被选中画面和未被选中画面进行拼接,得到多场景视频画面;
以及画面锁定组件,所述画面锁定组件用于锁定当前多画面模块的多场景视频画面。
4.一种如权利要求1所述的视频会议投影装置,其特征在于,所述信号处理模组包括图像信号处理器,所述图像信号处理器包括拆分转化模块,所述拆分转化模块用于将所述场景视频画面拆分为场景图像序列,并将场景图像序列中的图像的存储格式由多通道转化为单通道的灰度图像存储格式,以得到灰度图像序列。
5.一种如权利要求4所述的视频会议投影装置,其特征在于,所述图像信号处理器还包括图像降噪模块,所述图像降噪模块用于通过差帧处理以及形态学腐蚀对灰度图像的图像噪声进行处理。
6.一种如权利要求5所述的视频会议投影装置,其特征在于,所述投影模组包括:
投影处理器,所述投影处理器用于与所述摄像模组和投影模组基于云服务进行通信,基于一个或多个约束的集合来确定可调整的投影仪参数集和可调整的成像参数集;
调制模块,所述调制模块用于根据投影处理器处理的投影仪参数集以及所述灰度图像序列对照明光进行调制,以输出投影光。
7.一种如权利要求1所述的视频会议投影装置,其特征在于,所述信号处理模组还包括音频信号处理器,用于对采集的所述语音信号进行定位判断,并进行降噪处理。
8.一种如权利要求1所述的视频会议投影装置,其特征在于,还包括,音频输出模组,所述音频输出模组用于播放所述信号处理模组发送的经云服务传输后的音频信号。
9.一种视频投影方法,其特征在于,包括:
拍摄多个会议场景的场景视频画面;
采集多个会议场景的音频信息;
根据用户指令选择视频投影会议模式,并根据视频投影会议模式处理所述场景视频画面和所述音频信息;
根据场景视频画面对照明光进行调制得到投影光,并投射携带有场景视频的投影光;
同步播放会议场景的音频信息;
其中,所述会议场景的场景视频画面和所述会议场景的音频信息被传输至云服务并被编码合并处理。
10.一种如权利要求9所述的视频投影方法,其特征在于,所述选择视频投影会议模式,并根据视频投影会议模式处理所述场景视频画面和所述音频信息的步骤包括:
根据预设用户指令选择视频会议模式,若为单画面,则根据预设单画面指令选择单场景视频画面;
若为多画面,则根据实际显示分辨率以及预设画面数选择多个画面进行左右或上下拼接以得到多场景视频画面。
11.一种如权利要求10的视频投影方法,其特征在于,所述根据实际显示分辨率以及预设画面数选择多个画面进行左右或上下拼接以得到多场景视频画面的步骤包括:
根据实际显示分辨率以及预设画面数选定多个画面数中的预设数个画面;
将被选中画面进行预设倍数的放大;
调整被选中画面的位置;
拼接被选中画面和未被选中画面;
锁定当前多场景视频画面。
12.一种如权利要求9所述的视频投影方法,其特征在于,在所述根据场景视频画面对照明光进行调制得到投影光,并投射携带有场景视频的投影光的步骤之前,还包括:
将所述场景视频画面的场景视频画面拆分为场景图像序列;
将场景图像序列中的图像的存储格式由多通道转化为单通道的灰度图像存储格式,以得到灰度图像序列。
13.一种如权利要求12所述的视频投影方法,其特征在于,还包括:
通过差帧处理以及形态学腐蚀对灰度图像的图像噪声进行处理。
14.一种如权利要求13所述的视频投影方法,其特征在于,所述根据场景视频画面对照明光进行调制得到投影光,并投射携带有场景视频的投影光的步骤包括:
基于一个或多个约束的集合来确定可调整的投影仪参数集和可调整的成像参数集;
根据投影处理器处理的投影仪参数集以及所述灰度图像序列对照明光进行调制,以输出投影光。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US17/159174 | 2021-01-27 | ||
US17/159,174 US11206372B1 (en) | 2021-01-27 | 2021-01-27 | Projection-type video conference system |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114827517A true CN114827517A (zh) | 2022-07-29 |
Family
ID=78918428
Family Applications (6)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110272522.7A Pending CN114900637A (zh) | 2021-01-27 | 2021-03-12 | 一种视频会议方法、系统及其投影终端 |
CN202110272521.2A Pending CN114827517A (zh) | 2021-01-27 | 2021-03-12 | 一种投影视频会议系统及视频投影方法 |
CN202110269781.4A Pending CN114900635A (zh) | 2021-01-27 | 2021-03-12 | 一种投影视频会议系统 |
CN202110269782.9A Pending CN114900636A (zh) | 2021-01-27 | 2021-03-12 | 一种视频会议装置的消息推送处理方法及系统 |
CN202110272530.1A Pending CN114900638A (zh) | 2021-01-27 | 2021-03-12 | 一种投影视频会议系统 |
CN202110287542.1A Pending CN114827518A (zh) | 2021-01-27 | 2021-03-17 | 一种投影视频会议系统 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110272522.7A Pending CN114900637A (zh) | 2021-01-27 | 2021-03-12 | 一种视频会议方法、系统及其投影终端 |
Family Applications After (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110269781.4A Pending CN114900635A (zh) | 2021-01-27 | 2021-03-12 | 一种投影视频会议系统 |
CN202110269782.9A Pending CN114900636A (zh) | 2021-01-27 | 2021-03-12 | 一种视频会议装置的消息推送处理方法及系统 |
CN202110272530.1A Pending CN114900638A (zh) | 2021-01-27 | 2021-03-12 | 一种投影视频会议系统 |
CN202110287542.1A Pending CN114827518A (zh) | 2021-01-27 | 2021-03-17 | 一种投影视频会议系统 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11206372B1 (zh) |
CN (6) | CN114900637A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117061717A (zh) * | 2023-10-12 | 2023-11-14 | 杭州罗莱迪思科技股份有限公司 | 投影拼接视频有效控制方法、系统及其应用 |
CN117877444A (zh) * | 2024-03-12 | 2024-04-12 | 广东嘀嗒酷显柔性显示技术股份有限公司 | 一种会议场景下的显示设备色调自适应调节方法及系统 |
CN117877444B (zh) * | 2024-03-12 | 2024-06-07 | 广东嘀嗒酷显柔性显示技术股份有限公司 | 一种会议场景下的显示设备色调自适应调节方法及系统 |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114827362A (zh) * | 2021-01-29 | 2022-07-29 | Zoom视频通讯公司 | 用于设备管理的方法和装置 |
CN114915553A (zh) * | 2021-01-29 | 2022-08-16 | Zoom视频通讯公司 | 设备管理工具 |
CN114757155B (zh) * | 2022-06-14 | 2022-09-27 | 深圳乐播科技有限公司 | 一种会议文档的生成方法及装置 |
CN116347134B (zh) * | 2023-03-29 | 2024-01-30 | 深圳市联合信息技术有限公司 | 基于人工智能教学课堂的机顶盒音频处理系统及其方法 |
CN116795316B (zh) * | 2023-08-24 | 2023-11-03 | 南京维赛客网络科技有限公司 | 投屏时小窗口播放场景内画面的方法、系统及存储介质 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7260538B2 (en) * | 2002-01-08 | 2007-08-21 | Promptu Systems Corporation | Method and apparatus for voice control of a television control device |
US20080180519A1 (en) * | 2007-01-31 | 2008-07-31 | Cok Ronald S | Presentation control system |
WO2014073092A1 (ja) * | 2012-11-09 | 2014-05-15 | 日立コンシューマエレクトロニクス株式会社 | 映像情報端末装置及び映像表示システム |
US9215406B2 (en) * | 2013-03-14 | 2015-12-15 | Polycom, Inc. | Immersive telepresence anywhere |
US9374554B1 (en) * | 2014-03-25 | 2016-06-21 | Amazon Technologies, Inc. | Display selection for video conferencing |
US11043303B2 (en) * | 2019-03-18 | 2021-06-22 | My Virtual Exam, Inc. | Remote communication portal and method of use |
-
2021
- 2021-01-27 US US17/159,174 patent/US11206372B1/en active Active
- 2021-03-12 CN CN202110272522.7A patent/CN114900637A/zh active Pending
- 2021-03-12 CN CN202110272521.2A patent/CN114827517A/zh active Pending
- 2021-03-12 CN CN202110269781.4A patent/CN114900635A/zh active Pending
- 2021-03-12 CN CN202110269782.9A patent/CN114900636A/zh active Pending
- 2021-03-12 CN CN202110272530.1A patent/CN114900638A/zh active Pending
- 2021-03-17 CN CN202110287542.1A patent/CN114827518A/zh active Pending
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117061717A (zh) * | 2023-10-12 | 2023-11-14 | 杭州罗莱迪思科技股份有限公司 | 投影拼接视频有效控制方法、系统及其应用 |
CN117061717B (zh) * | 2023-10-12 | 2024-01-09 | 杭州罗莱迪思科技股份有限公司 | 投影拼接视频有效控制方法、系统及其应用 |
CN117877444A (zh) * | 2024-03-12 | 2024-04-12 | 广东嘀嗒酷显柔性显示技术股份有限公司 | 一种会议场景下的显示设备色调自适应调节方法及系统 |
CN117877444B (zh) * | 2024-03-12 | 2024-06-07 | 广东嘀嗒酷显柔性显示技术股份有限公司 | 一种会议场景下的显示设备色调自适应调节方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN114900635A (zh) | 2022-08-12 |
CN114827518A (zh) | 2022-07-29 |
CN114900636A (zh) | 2022-08-12 |
CN114900638A (zh) | 2022-08-12 |
US11206372B1 (en) | 2021-12-21 |
CN114900637A (zh) | 2022-08-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114827517A (zh) | 一种投影视频会议系统及视频投影方法 | |
US20230116044A1 (en) | Audio processing method and device | |
US20230115929A1 (en) | Audio Processing Method and Device | |
JP4770178B2 (ja) | カメラ制御装置、カメラシステム、電子会議システムおよびカメラ制御方法 | |
JP4153146B2 (ja) | カメラアレイの画像制御方法、及びカメラアレイ | |
CN101150669A (zh) | 拍摄全景图像的设备和方法 | |
WO2012072008A1 (zh) | 视频信号的辅助信息叠加方法及装置 | |
JP2019220848A (ja) | データ処理装置、データ処理方法及びプログラム | |
JP4451892B2 (ja) | 映像再生装置、映像再生方法、及び映像再生プログラム | |
CN114531564B (zh) | 处理方法及电子设备 | |
CN113573120B (zh) | 音频的处理方法及电子设备、芯片系统及存储介质 | |
WO2011108377A1 (ja) | 連携動作機器、連携動作方法、連携動作制御プログラム及び機器連携システム | |
JP6835205B2 (ja) | 撮影収音装置、収音制御システム、撮影収音装置の制御方法、及び収音制御システムの制御方法 | |
US11665391B2 (en) | Signal processing device and signal processing system | |
EP4106326A1 (en) | Multi-camera automatic framing | |
US20220303320A1 (en) | Projection-type video conference system and video projecting method | |
CN113676693B (zh) | 画面呈现方法、视频会议系统及可读存储介质 | |
JP2017103641A (ja) | 情報処理装置、会議システム、情報処理方法およびプログラム | |
US11310465B1 (en) | Video conference teminal and system there of | |
JP2010004480A (ja) | 撮像装置、その制御方法及びプログラム | |
JP2009065490A (ja) | テレビ会議装置 | |
JP7111202B2 (ja) | 収音制御システム及び収音制御システムの制御方法 | |
JP4223922B2 (ja) | テレビカメラ通信装置 | |
CN217546174U (zh) | 智能会议系统 | |
JP2013251617A (ja) | カメラ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |