CN114125360A - 异平台的信息融合方法及装置 - Google Patents
异平台的信息融合方法及装置 Download PDFInfo
- Publication number
- CN114125360A CN114125360A CN202111396689.0A CN202111396689A CN114125360A CN 114125360 A CN114125360 A CN 114125360A CN 202111396689 A CN202111396689 A CN 202111396689A CN 114125360 A CN114125360 A CN 114125360A
- Authority
- CN
- China
- Prior art keywords
- video
- conference
- fusion
- application
- audio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000007500 overflow downdraw method Methods 0.000 title claims abstract description 36
- 238000004891 communication Methods 0.000 claims abstract description 111
- 230000004927 fusion Effects 0.000 claims abstract description 100
- 230000005236 sound signal Effects 0.000 claims abstract description 30
- 238000007499 fusion processing Methods 0.000 claims abstract description 29
- 238000000034 method Methods 0.000 claims description 35
- 238000012545 processing Methods 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 10
- 238000005538 encapsulation Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 7
- 230000003993 interaction Effects 0.000 description 4
- 238000000605 extraction Methods 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000003032 molecular docking Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/155—Conference systems involving storage of or access to video conference sessions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/08—Protocols for interworking; Protocol conversion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/18—Multiprotocol handlers, e.g. single devices capable of handling multiple protocols
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Computer Networks & Wireless Communication (AREA)
- Multimedia (AREA)
- Telephonic Communication Services (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明实施例涉及会议系统技术领域,公开了一种异平台的信息融合方法,包括接收各个分会场端发送的相应的会议请求;根据会议请求确定相应的会议应用类型,根据会议应用类型调用相应的会议应用以进行会议连接;将各个分会场端的视频信号发送至视频融合器,视频融合器对各个分会场端的视频信号进行融合处理;将各个分会场端的音频信号发送至音频融合器,音频融合器对各个分会场端的音频信号进行融合处理以在融合办公通信终端的声音模块进行播放。本发明实施例中的信息融合方法能够将多种不同平台的通信应用统一到一起进行使用,使得处于不同地点的且使用不同通信应用的用户可以进行会议连接,大大提升了团队之间的协作性。
Description
技术领域
本发明涉及智慧办公技术领域,具体涉及一种异平台的信息融合方法及装置。
背景技术
当今办公场景下的信息通信已经是普遍的需求。尤其是受新冠疫情影响,越来越多公司或单位安排在家办公、混合办公,对远程协作、通信的解决方案提出了新的要求。并且在日常办公中经常遇到多方开远程会议,但是由于各方使用不同会议平台,且不同会议平台之间不能直接接通;特别是对于不同公司间进行协作的时候,更容易产生由于平台的不同而使得会议难度增加的问题。基于此,设计一种能够将多种平台信息进行融合的方式成为本领域技术人员亟待解决的技术问题。
发明内容
针对所述缺陷,本发明实施例公开了一种异平台的信息融合方法,其能够解决多种通信应用平台不能兼容使用的技术问题。
本发明实施例第一方面公开了异平台的信息融合方法,包括:
接收各个分会场端发送的相应的会议请求;
根据所述会议请求确定相应的会议应用类型,根据所述会议应用类型调用相应的会议应用以进行会议连接;
将各个分会场端的视频信号发送至视频融合器,所述视频融合器对各个分会场端的视频信号进行融合处理以在融合办公通信终端的显示模块处进行显示;
将各个分会场端的音频信号发送至音频融合器,所述音频融合器对各个分会场端的音频信号进行融合处理以在融合办公通信终端的声音模块进行播放。
作为一种可选的实施方式,在本发明实施例第一方面中,所述信息融合方法还包括:
对融合处理后的视频信号以及音频信号进行信号封装之后发送至相应的分会场端以进行音视频播放。
作为一种可选的实施方式,在本发明实施例第一方面中,所述信息融合方法还包括:
获取当前运行的所有会议应用的软件提取接口;
根据所述软件提取接口判断当前的应用为封闭型通信应用还是开放型通信应用;
若相应的会议应用为开放型通信应用,则将与开放型通信应用相对应的分会场端的视频信号发送至相应的视频融合器;
若相应会议应用为封闭型通信应用,则开启视频录制进程以对融合终端处的显示画面进行录制,并将录制完成后的视频信号转换为虚拟摄像头信号以发送至分会场端。
作为一种可选的实施方式,在本发明实施例第一方面中,所述开启视频录制进程以对融合终端处的显示画面进行录制,并将录制完成后的视频信号转换为虚拟摄像头信号,包括:
开启视频录制进程以对融合终端处的显示画面进行录制,以将分会场端的视频信号转换为屏幕图像信号;
将所述屏幕图像信号进行转换处理以得到相应的虚拟摄像头信号。
作为一种可选的实施方式,在本发明实施例第一方面中,所述视频融合器对各个分会场端的视频信号进行融合处理以在融合办公通信终端的显示模块处进行显示,包括:
所述视频融合器获取各个分会场端的视频信号,所述视频信号包括第一分辨率信号;
所述视频融合器获取融合办公通信终端的第二分辨率信号;
根据所述第一分辨率信号以及第二分辨率信号对所有的分会场端的视频信号进行显示处理融合处理以在融合办公通信终端的显示模块处进行显示;所述融合处理包括缩放、拼接和叠加中的任意一种或者多种。
作为一种可选的实施方式,在本发明实施例第一方面中,所述信息融合方法还包括:
响应于用户输入的第一开关信号,融合办公通信终端控制与相应分会场端的视频连接的通断状态;
响应于用户输入的第二开关信号,融合办公通信终端控制与相应分会场端的音频连接的通断状态。
作为一种可选的实施方式,在本发明实施例第一方面中,在所述接收各个分会场端发送的相应的会议请求之前,还包括:
通过一远程会议应用与一分会场端建立会议会话;
和/或,所述会议应用包括IP电话应用、远程会议应用、PSTN电话应用中的一种或者多种;
和/或,所述信息融合方法,还包括:
接收主会场端的电脑屏幕信号,将所述电脑屏幕信号传输至各个分会场端。
本发明实施例第二方面公开一种异平台的信息融合装置,包括:
接收模块:用于接收各个分会场端发送的相应的会议请求;
调用模块:用于根据所述会议请求确定相应的会议应用类型,根据所述会议应用类型调用相应的会议应用以进行会议连接;
视频显示模块:用于将各个分会场端的视频信号发送至视频融合器,所述视频融合器对各个分会场端的视频信号进行融合处理以在融合办公通信终端的显示模块处进行显示;
音频播放模块:用于将各个分会场端的音频信号发送至音频融合器,所述音频融合器对各个分会场端的音频信号进行融合处理以在融合办公通信终端的声音模块进行播放。
本发明实施例第三方面公开一种电子设备,包括:存储有可执行程序代码的存储器;与所述存储器耦合的处理器;所述处理器调用所述存储器中存储的所述可执行程序代码,用于执行本发明实施例第一方面公开的异平台的信息融合方法。
本发明实施例第四方面公开一种计算机可读存储介质,其存储计算机程序,其中,所述计算机程序使得计算机执行本发明实施例第一方面公开的异平台的信息融合方法。
与现有技术相比,本发明实施例具有以下有益效果:
本发明实施例中的信息融合方法能够将多种不同平台的通信应用统一到一起进行使用,使得处于不同地点的且使用不同通信应用的用户可以进行会议连接,大大提升了团队之间的协作性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的异平台的信息融合方法的流程示意图;
图2是本发明实施例公开的会议应用类型判断的流程示意图;
图3是本发明实施例公开的融合办公通信终端的音视频通路示意图;
图4是本发明实施例公开的进行显示融合处理的流程示意图;
图5是本发明实施例公开的视频融合器实现视频拼接的流程示意图;
图6是本发明实施例公开的视频融合器实现视频叠加的流程示意图;
图7是本发明实施例提供的一种异平台的信息融合装置的结构示意图;
图8是本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书中的术语“第一”、“第二”、“第三”、“第四”等是用于区别不同的对象,而不是用于描述特定顺序。本发明实施例的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,示例性地,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
在日常办公中经常遇到多方开远程会议,但是由于各方使用不同会议平台,且不同会议平台之间不能直接接通;特别是对于不同公司间进行协作的时候,更容易产生由于平台的不同而使得会议难度增加的问题。基于此,本发明实施例公开了异平台的信息融合方法能够将多种不同平台的通信应用统一到一起进行使用,使得处于不同地点的且使用不同通信应用的用户可以进行会议连接,大大提升了团队之间的协作性。
实施例一
请参阅图1,图1是本发明实施例公开的异平台的信息融合方法的流程示意图。其中,本发明实施例所描述的方法的执行主体为由软件或/和硬件组成的执行主体,该执行主体可以通过有线或/和无线方式接收相关信息,并可以发送一定的指令。当然,其还可以具有一定的处理功能和存储功能。该执行主体可以控制多个设备,例如远程的物理服务器或云服务器以及相关软件,也可以是对某处安置的设备进行相关操作的本地主机或服务器以及相关软件等。在一些场景中,还可以控制多个存储设备,存储设备可以与设备放置于同一地方或不同地方。如图1所示,该基于异平台的信息融合方法包括以下步骤:
S101:接收各个分会场端发送的相应的会议请求;
在进行远程会议的时候,一般都是多端进行参与的,这个可以是几个人处于同一空间,或者是所有的人均不处于同一空间内,当所有人均处于不同空间的时候,则需要通过不同的设备来进行会议连接。在具体实施的时候会将发起端作为主会场端,将其余参与端作为分会场端;由主会场端与分会场端建立连接关系。具体的,主会场端采用融合办公通信终端来进行多端连接,融合办公通信终端主要包含触控显示屏幕、内置摄像头、主机、扬声器、话筒和内置麦克风。其中主机包含操作系统,可安装定专用软件及通用应用软件。其中触控显示屏幕、内置摄像头、扬声器、内置麦克风既可以作为融合办公通信终端的内部装置使用,也可以作为办公电脑的外设使用。融合办公通信终端包含电源输入口、视频信号输入口、视频信号输出口、网络接口1、网络接口2、usb通信接口1、usb通信接口2、电话线接口;通过上述各个模块实现更广泛的信息扩展。
本发明实施例提供的融合办公通信终端的主机内置完整计算机硬件平台(CPU、DDR、Flash等),其可以运行操作系统(Android、Linux等);可运行视频会议、视频电话或其他应用软件;触控显示屏幕是主要内容显示装置和交互操作装置;内置摄像头用于视频会议或视频电话等应用中录入影像。扬声器用于视频会议或视频电话等应用中播放声音;内置麦克风用于视频会议或视频电话等应用中拾音,也用于语音操作交互;配有话筒(有线或无线),以便于打电话时使用;内置wifi,可通过wifi连接网络;内置BT,可通过蓝牙连接无线耳麦、话筒等;配有usb1和usb2接口,可用于连接办公电脑或usb外设;配有网络接口1和网络接口2;其中一个网络接口用于连接网络(交换机),另外一个用于给其它设备提供网络。配有视频输入接口,可接入外部视频信号(如办公电脑等视频输出);配有视频输出接口,可外接显示器或投影仪等显示设备,以进一步扩展应用场景;会议功能。与会议一体机类似,系统集成了远程会议功能,用户可预约会议、发起即时会议或加入会议。电话功能。与固话类似,系统中集成了IP电话和PSTN电话功能。用户可以拨打、接听语音电话、视频电话。现有的语音通信方式只能够在同一个平台上使用,而不能够对不同平台进行融合处理;通过本发明实施例的融合终端能够打破多种不同的会议平台的限制,使得用户会议选择的自由,而不必要求所有参会者均下载同一个会议应用并注册相应的号码。在融合办公通信终端配置了多种会议应用,比如腾讯会议应用、华为会议应用等等,还配置了skype应用、IP电话应用以及PSTN电话应用等,通过将上述应用打包集成于融合办公通信终端,使得在使用的时候,能够更加的方便对所有的应用进行调用,当监听到有相应的应用调用的时候,则通过上述会议应用包进行集成应用。
更为优选的,在所述接收各个分会场端发送的相应的会议请求之前,还包括:
通过一远程会议应用与一分会场端建立会议会话;
在进行具体实施的时候,需要用户在融合办公通信终端先登录腾讯会议应用然后与第一分会场建立会议连接,当建立上述连接之后,其余分会场可以通过其相应的应用与融合通信终端建立联系,比如在第二分会场端配置了IP电话应用,由于第二分会场端没有腾讯会议应用,则此时第二分会场端可以拨通融合办公通信终端建立上述连接。
S102:根据所述会议请求确定相应的会议应用类型,根据所述会议应用类型调用相应的会议应用以进行会议连接;
由于融合通信终端已经在步骤S101中收到各个分会场端的会议请求,也可以是连接请求,由于各个分会场端很有可能采用同一会议应用,也可能采用的是不同的会议应用,故而在融合通信终端需要对其进行会议应用类型的确认,比如当检测一分会场端采用的腾讯会议应用时,则控制在融合通信终端启动相应的腾讯会议应用来与相应的分会场进行会议连接;当检测到的多种不同会议应用类型的时候,则启动多种不同的会议应用来实现最终的通信连接。
作为一种可选的实施方式,在本发明实施例第一方面中,图2是本发明实施例公开的会议应用类型判断的流程示意图,如图2所示,所述信息融合方法还包括:
S1021:获取当前运行的所有会议应用的软件提取接口;
S1022:根据所述软件提取接口判断当前的应用为封闭型通信应用还是开放型通信应用;
S1023:若相应的会议应用为开放型通信应用,则将与开放型通信应用相对应的分会场端的视频信号发送至相应的视频融合器;
S1024:若相应会议应用为封闭型通信应用,则开启视频录制进程以对融合终端处的显示画面进行录制,并将录制完成后的视频信号转换为虚拟摄像头信号以发送至分会场端。
具体的,获取软件提取接口的含义是确定当前运行的会议应用是否具有软件提取接口,如果其具有软件提取接口,则可以确定其为开放型通信应用,如果其没有软件提取接口,则可以确定其为封闭型通信应用;封闭型通信应用的含义是其视频画面不能够被提取出来进行分享。而开放型通信应用中的音视频信号则可以被提取出来。
作为一种可选的实施方式,在本发明实施例第一方面中,所述开启视频录制进程以对融合终端处的显示画面进行录制,并将录制完成后的视频信号转换为虚拟摄像头信号,包括:
开启视频录制进程以对融合终端处的显示画面进行录制,以将分会场端的视频信号转换为屏幕图像信号;
将所述屏幕图像信号进行转换处理以得到相应的虚拟摄像头信号。
为了打通多个应用平台之间的障碍,设置上述屏幕录制环节来实现多种会议应用平台之间的信息交互;在融合通信终端启动屏幕录制进程来对需要录制的画面进行视频录制,这里最为优选的是对全屏幕进行视频录制,这样能够实现更好的信息获取效率;然后将获取到的信号封装为虚拟摄像头信号,因为不同的会议应用平台是可以接收摄像头信号的,故而在融合通信终端调用相应的虚拟摄像头组件来对录制到的画面进行封装,然后发送至其余各个应用平台,在各个会议应用平台处识别到的其为摄像头信号,故而能够对其进行数据的获取,也即是相当于在封闭型通信应用处也设置为了软件提取接口,实现了视频画面的信息提取功能。
具体的,图3是本发明实施例公开的融合办公通信终端的音视频通路示意图,如图3所示,远程会议-应用(A…N)是第三方的音视频远程会议软件,通常此类应用的入门版或免费版都不提供视频的信号通路接口(也就是软件提取接口),这也使得不同方案商的软件之间不能连通,下称“封闭型音视频通信应用”。IP电话应用代表的是提供了视频信号通路接口的通信软件,主控系统可以其直接读进行视频信号的交互,下称“开放型音视频通信应用”。封闭型音视频通信应用虽然不提供获取视频信号的软件接口,但是其输出视频可以显示在融合通信终端的显示器上,也即是分会场端的用户可以通过其智能终端将拍摄到的画面传输至融合通信终端,但是其不能够接收融合通信终端传输的音视频信号;在进行具体实施时,用户可以通过主控系统截取显示器显示的画面信号。从而实现提取封闭型音视频通信应用的输出视频内容,该内容可输入到视频融合器中做进一步处理。这是实现不同通信软件融合的关键步骤。开放型音视频通信应用,其开放输出视频提取接口,主控系统可直接提取并输入到视频融合器做进一步处理。封闭型音视频通信应用、开放型音视频通信应用、PSTN电话输出的音频信号在主控系统中是可以被提取的,可进入音频融合器里处理。本地摄像头、外部视频输入都是主控系统自带的功能,其视频信号可以由主控系统控制输入到视频融合器。图中符号“K”的模块是信号开关,可控制信号是否输入至融合器。
公用电话交换网(PSTN——Public Switched Telephone Network),即我们日常生活中常用的电话网。众所周知,PSTN是一种以模拟技术为基础的电路交换网络。在众多的广域网互连技术中,通过PSTN进行互连所要求的通信费用最低,但其数据传输质量及传输速度也最差,同时PSTN的网络资源利用率也比较低。公共交换电话网是基于标准电话线路的电路交换服务,用来做为连接远程端点的连接方法。典型的应用有远程端点和本地LAN之间的连接和远程用户拨号上网。PSTN提供的是一个模拟的专有通道,通道之间经由若干个电话交换机连接而成。当两个主机或路由器设备需要通过PSTN连接时,在两端的网络接入侧(即用户回路侧)必须使用调制解调器(Modem)实现信号的模/数、数/模转换。从OSI七层模型的角度来看,PSTN可以看成是物理层的一个简单的延伸,没有向用户提供流量控制、差错控制等服务。而且,由于PSTN是一种电路交换的方式,所以一条通路自建立直至释放,其全部带宽仅能被通路两端的设备使用,即使他们之间并没有任何数据需要传送。因此,这种电路交换的方式不能实现对网络带宽的充分利用。通过PSTN进行网络互联具体是通过PSTN连接两个局域网的网络互连。在这两个局域网中,各有一个路由器,每个路由器均有一个串行端口与Modem相连,Modem再与PSTN相连,从而实现了这两个局域网的互连。PSTN的电话会议应用由PSTN网络渠道,借助多方互联的信息手段,把分散在各地的与会者组织起来,通过电话进行业务会议的沟通形式。电话会议具备方便快捷、实用高效的特点,节约了大量的交通、场地、和时间成本。利用电话线作为载体来开会的新型会议模式。其现在作为一个重要的会议方式也在企业中有一定的普及,通过本发明实施例的方案,也能够将其进行更深入的应用,也即是将其与腾讯会议等更加商业化的应用进行深度融合。
具体的,经过视频融合器合成的视频,接入到远程会议、IP电话等应用,也可以输出到本地显示器。对于封闭型音视频通信应用,一般不具备视频信号输入的软件接口,主控系统把合成的视频信号虚拟成一路摄像头,在音视频通信应用中选择该路摄像头输入,就实现了把合成视频信号传播到各参会方到效果。对于开放型音视频通信应用,一般配备视频信号输入的软件接口,主控系统通过该接口把视频信号接入,实现了把合成视频信号传播到各参会方到效果。合成的视频信号,通过开关“K”接入到各应用或本地显示器,通过开关控制视频信号是否通过。在进行具体实施时,上述步骤也可以在进行音视频融合之后再进行录制分享。
S103:将各个分会场端的视频信号发送至视频融合器,所述视频融合器对各个分会场端的视频信号进行融合处理以在融合办公通信终端的显示模块处进行显示。
作为一种可选的实施方式,在本发明实施例第一方面中,图4是本发明实施例公开的进行显示融合处理的流程示意图,如图4所示,所述视频融合器对各个分会场端的视频信号进行融合处理以在融合办公通信终端的显示模块处进行显示,包括:
S1031:所述视频融合器获取各个分会场端的视频信号,所述视频信号包括第一分辨率信号;
S1032:所述视频融合器获取融合办公通信终端的第二分辨率信号;
S1033:根据所述第一分辨率信号以及第二分辨率信号对所有的分会场端的视频信号进行显示处理融合处理以在融合办公通信终端的显示模块处进行显示;所述融合处理包括缩放、拼接和叠加中的任意一种或者多种。
视频融合器可对输入对视频信号缩放、拼接、叠加,重新组合成一路视频信号输出。如图5和图6所示,图5是本发明实施例公开的视频融合器实现视频拼接的流程示意图;图6是本发明实施例公开的视频融合器实现视频叠加的流程示意图;各路分辨率不完全相同的视频信号输入至融合器,根据拼接或者叠加的分辨率要求,各路视频缩放至适合的分辨率,再拼接或叠加在一起,作为一路合成视频输出。其中图五是六路视频源输入,选取其中四路视频,分辨率都缩放(变换)成960*540,在拼接成一路分辨率为1920*1080的信号输出。图六是六路视频源输入,选取两路视频,其中一路分辨率缩放成1280*720,作为主画面。另外一路视频分辨率缩放为640*360,叠加在主画面之上,最后合成叠加的视频信号输出。上述具体缩放方式以及叠加方式也可以提供相应的端口为用户自行选择。
S104:将各个分会场端的音频信号发送至音频融合器,所述音频融合器对各个分会场端的音频信号进行融合处理以在融合办公通信终端的声音模块进行播放。
音频融合器输出到合成音频信号,通过开关“K”接入到各应用,通过开关控制音频信号是通过。如上描述,通过视频融合器、音频融合器,不同平台的音视频通信应用的音频、视频信号可以相互连通,实现了不同平台的融合通信。
作为一种可选的实施方式,在本发明实施例第一方面中,所述信息融合方法还包括:
S105:对融合处理后的视频信号以及音频信号进行信号封装之后发送至相应的分会场端以进行音视频播放。
上述步骤S101至S104均是在融合通信终端进行数据处理的流程,也即是如何在融合通信终端对多个不同的会议平台进行融合显示,在融合通信终端获取到上述数据内容之后,可以对其进行信号封装然后发送至相应的分会场端进行播放显示来实现完整的信息交互。
作为一种可选的实施方式,在本发明实施例第一方面中,所述信息融合方法还包括:
响应于用户输入的第一开关信号,融合办公通信终端控制与相应分会场端的视频连接的通断状态;
响应于用户输入的第二开关信号,融合办公通信终端控制与相应分会场端的音频连接的通断状态。
通过提供上述接口,使得用户具备更高的自主选择权,用户可以通过融合通信终端来进行会议管理,比如打开或者关闭某路通道来实现会议的管理。
作为一种可选的实施方式,在本发明实施例第一方面中,所述会议应用包括IP电话应用、远程会议应用、PSTN电话应用中的一种或者多种;也即是可以知晓,本发明实施例的方案能够支持多种不同的应用平台,不仅仅支持腾讯会议平台、华为会议平台等类型的会议平台,还支持将IP电话应用以及PSTN电话应用与腾讯会议平台进行打通,使得整体方案的应用范围更加广泛,自由度更高,更加方便不同企业间进行交流,因为一般情况下同一企业应用同一平台的概率高,而不同企业应用同一平台的概率相对较小,通过上述方案的设置,能够进一步提升不同企业间的信息交流效率,降低不同企业间会话的难度。
所述信息融合方法,还包括:
接收主会场端的电脑屏幕信号,将所述电脑屏幕信号传输至各个分会场端。
除了进行会议,本发明实施例的终端还可以对接收到的主会场端的电脑屏幕信号进行分享,办公电脑的显示内容与远程会议融合。远程会议经常需要把本地办公电脑显示的内容分享到各参会方。较多的会议系统(特别是免费版的云会议系统)只能分享本机的内容,不能分享外部输入的内容。本方案中办公电脑可以通过有线或无线连接把办公电脑输出的音视频信号传送至融合办公通信终端,终端内部与本地信号拼接,然后在触控显示屏幕中展示该内容。会议系统分享终端的桌面,则可实现把办公电脑的显示内容分享至参考各方。也即是当用户需要内容分享的时候,能够使得不同会场端的用户更加方便观看。具体的,可以采用触控显示屏幕作为办公电脑外置显示器使用。办公电脑可以通过有线或无线连接把办公电脑输出的音视频信号传送至融合办公通信终端,终端内部对输入的画面与本机画面融合后在显示屏上显示。可只显示办公电脑画面,或只显示终端的画面,或两种画面叠加显示,或两种画面拼接显示。通过该功能,触控显示屏可以作为办公电脑的第二屏幕,提高终端的使用率和实用价值。
具体的,本发明实施例的方案针对于异地网络音视频会议场景,主会场使用融合办公通信终端上的远程会议应用A建立会议,分会场1也使用远程会议应用A接入会议。而分会场2配备了IP电话应用,没有远程会议应用1,故通过IP电话接入会议。分会场2拨通融合办公通信终端,建立连接。
主会场的本地摄像头信号、主会场的外部视频(电脑屏幕信号)、来自分会场1的视频信号和来自分会场2的视频信号都输入到视频融合器,拼接成一路合成视频信号分别输出至主会场的本地显示器、远程会议应用A的视频输入(虚拟摄像头)以及IP电话的视频输入(软件接口)。则本地显示器、分会场1和分会场2均能显示合成后的视频信号。
主会场的本地麦克风音频信号、来自分会场1的音频信号和来自分会场2的音频信号都输入到音频融合器,合成一路输出音频,输出至本地扬声器、远程会议应用A的音频输入通道、IP电话应用的音频输入通道。则本地扬声器、分会场1扬声器和分会场2扬声器均可播放合成后的音频。所以,虽然远程会议应用A和IP电话是两个独立平台不能直接加入同一个会议,但通过融合办公通信终端实现了一起开会。
本发明实施例的异平台会议融合主要应用场景是:日常办公中经常遇到多方开远程会议,而各方使用不同会议平台而不能方便接通等问题。本方案中融合办公通信终端可搭载多个不同的会议平台。一场异平台远程会议中,来自各方的音视频信号在融合办公通信终端中通过缩放、拼接、叠加等处理,融合成一路音视频信号,再对接分发至各会议平台,实现异平台会议融合。该方案不依赖各会议平台对异平台会议对对接支持。
本发明实施例中的信息融合方法能够将多种不同平台的通信应用统一到一起进行使用,使得处于不同地点的且使用不同通信应用的用户可以进行会议连接,大大提升了团队之间的协作性。
实施例二
请参阅图7,图7是本发明实施例公开的异平台的信息融合装置的结构示意图。如图7所示,该异平台的信息融合装置可以包括:
接收模块21:用于接收各个分会场端发送的相应的会议请求;
调用模块22:用于根据所述会议请求确定相应的会议应用类型,根据所述会议应用类型调用相应的会议应用以进行会议连接;
视频显示模块23:用于将各个分会场端的视频信号发送至视频融合器,所述视频融合器对各个分会场端的视频信号进行融合处理以在融合办公通信终端的显示模块处进行显示;
音频播放模块24:用于将各个分会场端的音频信号发送至音频融合器,所述音频融合器对各个分会场端的音频信号进行融合处理以在融合办公通信终端的声音模块进行播放。
本发明实施例中的信息融合方法能够将多种不同平台的通信应用统一到一起进行使用,使得处于不同地点的且使用不同通信应用的用户可以进行会议连接,大大提升了团队之间的协作性。
实施例三
请参阅图8,图8是本发明实施例公开的一种电子设备的结构示意图。电子设备可以是计算机以及服务器等,当然,在一定情况下,还可以是手机、平板电脑以及监控终端等智能设备,以及具有处理功能的图像采集装置。如图8所示,该电子设备可以包括:
存储有可执行程序代码的存储器510;
与存储器510耦合的处理器520;
其中,处理器520调用存储器510中存储的可执行程序代码,执行实施例一中的异平台的信息融合方法中的部分或全部步骤。
本发明实施例公开一种计算机可读存储介质,其存储计算机程序,其中,该计算机程序使得计算机执行实施例一中的异平台的信息融合方法中的部分或全部步骤。
本发明实施例还公开一种计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行实施例一中的异平台的信息融合方法中的部分或全部步骤。
本发明实施例还公开一种应用发布平台,其中,应用发布平台用于发布计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行实施例一中的异平台的信息融合方法中的部分或全部步骤。
在本发明的各种实施例中,应理解,所述各过程的序号的大小并不意味着执行顺序的必然先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物单元,即可位于一个地方,或者也可以分布到多个网络单元上。可根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。所述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可获取的存储器中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分,可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等,具体可以是计算机设备中的处理器)执行本发明的各个实施例所述方法的部分或全部步骤。
在本发明所提供的实施例中,应理解,“与A对应的B”表示B与A相关联,根据A可以确定B。但还应理解,根据A确定B并不意味着仅仅根据A确定B,还可以根据A和/或其他信息确定B。
本领域普通技术人员可以理解所述实施例的各种方法中的部分或全部步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read-Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的异平台的信息融合方法、装置、电子设备及存储介质进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种异平台的信息融合方法,其特征在于,包括:
接收各个分会场端发送的相应的会议请求;
根据所述会议请求确定相应的会议应用类型,根据所述会议应用类型调用相应的会议应用以进行会议连接;
将各个分会场端的视频信号发送至视频融合器,所述视频融合器对各个分会场端的视频信号进行融合处理以在融合办公通信终端的显示模块处进行显示;
将各个分会场端的音频信号发送至音频融合器,所述音频融合器对各个分会场端的音频信号进行融合处理以在融合办公通信终端的声音模块进行播放。
2.如权利要求1所述的异平台的信息融合方法,其特征在于,所述信息融合方法还包括:
对融合处理后的视频信号以及音频信号进行信号封装之后发送至相应的分会场端以进行音视频播放。
3.如权利要求1所述的异平台的信息融合方法,其特征在于,所述信息融合方法还包括:
获取当前运行的所有会议应用的软件提取接口;
根据所述软件提取接口判断当前的应用为封闭型通信应用还是开放型通信应用;
若相应的会议应用为开放型通信应用,则将与开放型通信应用相对应的分会场端的视频信号发送至相应的视频融合器;
若相应会议应用为封闭型通信应用,则开启视频录制进程以对融合终端处的显示画面进行录制,并将录制完成后的视频信号转换为虚拟摄像头信号以发送至分会场端。
4.如权利要求3所述的异平台的信息融合方法,其特征在于,所述开启视频录制进程以对融合终端处的显示画面进行录制,并将录制完成后的视频信号转换为虚拟摄像头信号,包括:
开启视频录制进程以对融合终端处的显示画面进行录制,以将分会场端的视频信号转换为屏幕图像信号;
将所述屏幕图像信号进行转换处理以得到相应的虚拟摄像头信号。
5.如权利要求1所述的异平台的信息融合方法,其特征在于,所述视频融合器对各个分会场端的视频信号进行融合处理以在融合办公通信终端的显示模块处进行显示,包括:
所述视频融合器获取各个分会场端的视频信号,所述视频信号包括第一分辨率信号;
所述视频融合器获取融合办公通信终端的第二分辨率信号;
根据所述第一分辨率信号以及第二分辨率信号对所有的分会场端的视频信号进行显示处理融合处理以在融合办公通信终端的显示模块处进行显示;所述融合处理包括缩放、拼接和叠加中的任意一种或者多种。
6.如权利要求1所述的异平台的信息融合方法,其特征在于,所述信息融合方法还包括:
响应于用户输入的第一开关信号,融合办公通信终端控制与相应分会场端的视频连接的通断状态;
响应于用户输入的第二开关信号,融合办公通信终端控制与相应分会场端的音频连接的通断状态。
7.如权利要求1所述的异平台的信息融合方法,其特征在于,在所述接收各个分会场端发送的相应的会议请求之前,还包括:
通过一远程会议应用与一分会场端建立会议会话;
和/或,所述会议应用包括IP电话应用、远程会议应用、PSTN电话应用中的一种或者多种;
和/或,所述信息融合方法,还包括:
接收主会场端的电脑屏幕信号,将所述电脑屏幕信号传输至各个分会场端。
8.一种异平台的信息融合装置,其特征在于,包括:
接收模块:用于接收各个分会场端发送的相应的会议请求;
调用模块:用于根据所述会议请求确定相应的会议应用类型,根据所述会议应用类型调用相应的会议应用以进行会议连接;
视频显示模块:用于将各个分会场端的视频信号发送至视频融合器,所述视频融合器对各个分会场端的视频信号进行融合处理以在融合办公通信终端的显示模块处进行显示;
音频播放模块:用于将各个分会场端的音频信号发送至音频融合器,所述音频融合器对各个分会场端的音频信号进行融合处理以在融合办公通信终端的声音模块进行播放。
9.一种电子设备,其特征在于,包括:存储有可执行程序代码的存储器;与所述存储器耦合的处理器;所述处理器调用所述存储器中存储的所述可执行程序代码,用于执行权利要求1至7任一项所述的异平台的信息融合方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储计算机程序,其中,所述计算机程序使得计算机执行权利要求1至7任一项所述的异平台的信息融合方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111396689.0A CN114125360B (zh) | 2021-11-23 | 异平台的信息融合方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111396689.0A CN114125360B (zh) | 2021-11-23 | 异平台的信息融合方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114125360A true CN114125360A (zh) | 2022-03-01 |
CN114125360B CN114125360B (zh) | 2024-09-27 |
Family
ID=
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114630073A (zh) * | 2022-05-16 | 2022-06-14 | 广州市保伦电子有限公司 | 支持异构终端通过云平台接入的会议系统及接入方法 |
CN114979555A (zh) * | 2022-08-01 | 2022-08-30 | 太平金融科技服务(上海)有限公司 | 线上会议实现方法、装置、计算机设备和存储介质 |
CN115914539A (zh) * | 2022-09-30 | 2023-04-04 | 广州云视通科技有限公司 | 音视频设备资源调度的方法及系统 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114630073A (zh) * | 2022-05-16 | 2022-06-14 | 广州市保伦电子有限公司 | 支持异构终端通过云平台接入的会议系统及接入方法 |
CN114630073B (zh) * | 2022-05-16 | 2022-08-12 | 广州市保伦电子有限公司 | 支持异构终端通过云平台接入的会议系统及接入方法 |
CN114979555A (zh) * | 2022-08-01 | 2022-08-30 | 太平金融科技服务(上海)有限公司 | 线上会议实现方法、装置、计算机设备和存储介质 |
CN115914539A (zh) * | 2022-09-30 | 2023-04-04 | 广州云视通科技有限公司 | 音视频设备资源调度的方法及系统 |
CN115914539B (zh) * | 2022-09-30 | 2023-11-03 | 广州云视通科技有限公司 | 音视频设备资源调度的方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CA2329017C (en) | Communication system architecture for voice first collaboration | |
KR100923483B1 (ko) | 오디오 전송 시스템 및 방법 | |
US7532713B2 (en) | System and method for voice over internet protocol audio conferencing | |
JP6051782B2 (ja) | 通信システムおよびプログラム | |
US20040114581A1 (en) | Voice-over-IP communicator | |
JP2016517642A (ja) | ビデオ通信方法、ホーム端末及びホームサーバ | |
KR20140020733A (ko) | 영상 획득 방법 및 로컬 엔드포인트 호스트 장치 | |
EP2850826B1 (en) | Transmission management system, transmission system, and program for transmission management system | |
US20110131276A1 (en) | Method and System for Automatically Storing a Communication Session | |
CN109728994B (zh) | 通话方法、装置及计算机可读存储介质 | |
US8200792B2 (en) | Desktop secure video teleconferencing | |
CA2871719A1 (en) | Transmission management system, transmission system, and transmission management system program | |
US7432951B1 (en) | Video-telephony integration | |
CN111901841B (zh) | 将cs域和ps域融合连通的方法、服务器及存储介质 | |
CA2873356C (en) | Relay device selection device, transmission system, and program for relay device selection device | |
CN114285945B (zh) | 一种视频交互方法、装置和存储介质 | |
CN114125164B (zh) | 融合办公通信终端、方法及装置 | |
CN114125360A (zh) | 异平台的信息融合方法及装置 | |
CN113572749A (zh) | 一种基于VoLTE的视频呼叫方法和系统 | |
CN114125164A (zh) | 融合办公通信终端、方法及装置 | |
TW200843470A (en) | Communication Framework and Method and System for Providing a Real-Time Audio and/or Video Signal | |
CN106657533B (zh) | 通话处理方法及装置 | |
US8730944B2 (en) | Method and entities for providing call enrichment of voice calls and semantic combination of several service sessions to a virtual combined service session | |
US12003672B1 (en) | Methods of duplex transfer of voice streams between mobile subscribers and clients of IM/VOIP with the corresponding implementation of PBX and of the VOIP-cell gateway based on smartphones | |
CN105723693B (zh) | 选择系统、通信管理系统、通信系统和选择方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: No. 286 Science Avenue, Huangpu District, Guangzhou City, Guangdong Province, 510000, 201-13 Applicant after: Guangzhou Miting Technology Co.,Ltd. Address before: 510000 room 201-2, No. 286, Kexue Avenue, Huangpu District, Guangzhou City, Guangdong Province Applicant before: Guangzhou Miting Technology Co.,Ltd. |
|
CB02 | Change of applicant information |