CN116244236A - 一种会议设备、数据处理方法和会议系统 - Google Patents

一种会议设备、数据处理方法和会议系统 Download PDF

Info

Publication number
CN116244236A
CN116244236A CN202210176911.4A CN202210176911A CN116244236A CN 116244236 A CN116244236 A CN 116244236A CN 202210176911 A CN202210176911 A CN 202210176911A CN 116244236 A CN116244236 A CN 116244236A
Authority
CN
China
Prior art keywords
multimedia data
communication interface
conference
signal format
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210176911.4A
Other languages
English (en)
Inventor
徐明义
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to PCT/CN2022/130152 priority Critical patent/WO2023103671A1/zh
Publication of CN116244236A publication Critical patent/CN116244236A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38Information transfer, e.g. on bus
    • G06F13/382Information transfer, e.g. on bus using universal interface adapter
    • G06F13/385Information transfer, e.g. on bus using universal interface adapter for adaptation of a particular data processing system to different peripheral devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38Information transfer, e.g. on bus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38Information transfer, e.g. on bus
    • G06F13/40Bus structure
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38Information transfer, e.g. on bus
    • G06F13/40Bus structure
    • G06F13/4063Device-to-bus coupling
    • G06F13/4068Electrical coupling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38Information transfer, e.g. on bus
    • G06F13/42Bus transfer protocol, e.g. handshake; Synchronisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38Information transfer, e.g. on bus
    • G06F13/42Bus transfer protocol, e.g. handshake; Synchronisation
    • G06F13/4282Bus transfer protocol, e.g. handshake; Synchronisation on a serial bus, e.g. I2C bus, SPI bus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • H04N7/155Conference systems involving storage of or access to video conference sessions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2213/00Indexing scheme relating to interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F2213/0042Universal serial bus [USB]

Abstract

本申请实施例公开了一种会议设备、数据处理方法和会议系统,该会议设备具体包括第一通信接口、第二通信接口和信号转换模块,其中,信号转换模块用于通过第一通信接口接收计算机设备发送的第一多媒体数据,并将第一多媒体数据的第一信号格式转换为第二信号格式后,通过第二通信接口发送至投屏设备,由此会议设备和计算机设备只需要一根数据线连接,会议设备和投屏设备只需要一根数据线连接,降低了会议部署的连线复杂程度。

Description

一种会议设备、数据处理方法和会议系统
本申请要求于2021年12月08日提交中国专利局、申请号为202111491789.1、申请名称为“一种USB线”的中国专利申请的优先权,其全部内容通过引用结合在本申请中。
技术领域
本申请实施例涉及数据传输领域,尤其涉及一种会议设备、数据处理方法和会议系统。
背景技术
在会议系统中,一体化的音视频会议设备受到广泛使用。
会议设备通常集成内置的摄像头、麦克风和扬声器,并支持高清多媒体接口(highdefinition multimedia interface,HDMI)视频和HDMI音频输出到外部投屏设备,例如电视机,会议设备还支持通用串行总线(universal serial bus,USB)接口。会议设备通过USB线、HDMI线或者显示接口(display port,DP)线和计算机设备、投屏设备连接,从而实现音视频的采集输入和投屏输出。示例性的,电脑通过USB线连接到会议设备,通过HDMI线连接到电视机,会议设备内置的摄像头和麦克风采集的数据通过USB线传输给电脑,电脑的画面通过HDMI线直接投屏到电视机显示。
但是上述这种传统做法中计算机设备和投屏设备的连接都较为复杂,使用时还需用户手动拔插连线,增加了会议部署连线复杂程度,降低了会议操作体验。
发明内容
本申请实施例提供一种会议设备、数据处理方法和会议系统,用于降低会议部署的连线复杂程度。
本申请第一方面提供一种会议设备,该会议设备包括:第一通信接口,用于基于第一信号格式与计算机设备通信;第二通信接口,用于基于第二信号格式与投屏设备通信;信号转换模块,用于通过第一通信接口接收计算机设备发送的第一多媒体数据,并将第一多媒体数据的第一信号格式转换为第二信号格式后,通过第二通信接口发送至投屏设备。
本申请中,第一通信接口支持第一信号格式,第二通信接口支持第二信号格式。第一通信接口通过USB Type-C线和计算机设备连接,第二通信接口通过HDMI线和投屏设备连接。
本申请中的第一多媒体数据为计算机设备中的视频数据和/或音频数据,计算机设备为电脑,投屏设备为电视机。
该第一方面,会议设备包括第一通信接口、第二通信接口和信号转换模块,其中,信号转换模块用于通过第一通信接口接收计算机设备发送的第一多媒体数据,并将第一多媒体数据的第一信号格式转换为第二信号格式后,通过第二通信接口发送至投屏设备,由此会议设备和计算机设备只需要一根数据线连接,会议设备和投屏设备只需要一根数据线连接,计算机设备和投屏设备不需要数据线连接,从而降低了会议部署的连线复杂程度。
在第一方面的一种可能的实现方式中,该会议设备还包括:数据采集模块,用于采集第二多媒体数据,并将第二多媒体数据通过第一通信接口发送给计算机设备,其中,第一多媒体数据为计算机设备将第二多媒体数据和/或第三多媒体数据进行转换得到的,第三多媒体数据为计算机设备获取到的多媒体数据。
该种可能的实现方式中,计算机设备可以使用会议设备的功能,获取到会议设备采集的第二多媒体数据,提升了方案的可实现性。
在第一方面的一种可能的实现方式中,第一通信接口与计算机设备通过USB线连接,该会议设备还包括:管脚转换模块,管脚转换模块连接在第一通信接口和信号转换模块之间,管脚转换模块用于在USB线反插时将USB线的管脚的输入进行转换。
该种可能的实现方式中,管脚转换模块可以将USB线反插时将USB线的管脚的输入进行转换,提升了用户体验。
在第一方面的一种可能的实现方式中,该会议设备还包括:数据处理模块,用于接收数据采集模块发送的第二多媒体数据,并通过第一通信接口接收计算机设备发送的第一多媒体数据,以第一多媒体数据为参考对第二多媒体数据进行回声消除处理。
该种可能的实现方式中,第一多媒体数据可由会议设备中的音响来播放,由于音响播放的第一多媒体数据会再次被数据采集模块采集到,数据处理模块可以根据接收到的所述第一多媒体数据对第二多媒体数据的回声进行消除,进一步提升用户体验。
在第一方面的一种可能的实现方式中,该会议设备还包括:输出切换模块,用于在第一通信接口与计算机设备断开时,控制第二通信接口输出第二多媒体数据,在第一通信接口与计算机设备连接时,控制第二通信接口输出第一多媒体数据。
该种可能的实现方式中,输出切换模块可以自动切换会议设备的输入源,进一步提升了用户体验。
在第一方面的一种可能的实现方式中,第一信号格式为DP信号格式,第二信号格式为HDMI信号格式。
该种可能的实现方式中,第一信号格式为DP信号格式,第二信号格式为HDMI信号格式,提升了方案的可实现性。
本申请第二方面提供一种数据处理方法,该数据处理方法可以应用于本申请第一方面提供的会议设备,会议设备基于第一信号格式与计算机设备通信,基于第二信号格式与投屏设备通信,该方法包括:会议设备获取计算机设备发送的第一多媒体数据;会议设备将第一多媒体数据的第一信号格式转换为第二信号格式;会议设备将第二信号格式的第一多媒体数据发送至投屏设备。
在第二方面的一种可能的实现方式中,该方法还包括:会议设备采集第二多媒体数据;会议设备将第二多媒体数据发送给计算机设备,其中,第一多媒体数据为计算机设备将第二多媒体数据和/或第三多媒体数据进行转换得到的,第三多媒体数据为计算机设备获取到的多媒体数据。
在第二方面的一种可能的实现方式中,该方法还包括:会议设备在USB线反插时将USB线的管脚的输入进行转换。
在第二方面的一种可能的实现方式中,该方法还包括:会议设备以计算机设备发送的第一多媒体数据为参考对第二多媒体数据进行回声消除处理。
在第二方面的一种可能的实现方式中,该方法还包括:会议设备在第一通信接口与计算机设备断开时,控制第二通信接口输出第二多媒体数据,在第一通信接口与计算机设备连接时,控制第二通信接口输出第一多媒体数据。
在第二方面的一种可能的实现方式中,第一信号格式为DP信号格式,第二信号格式为HDMI信号格式。
本申请第三方面提供一种会议系统,该会议系统包括计算机设备、投屏设备以及本申请第一方面提供的会议设备,其中,该会议设备包括:第一通信接口,用于与计算机设备通信,第一通信接口支持第一信号格式;第二通信接口,用于与投屏设备连接通信,第二通信接口支持第二信号格式;信号转换模块,用于通过第一通信接口接收计算机设备发送的第一多媒体数据,并将第一多媒体数据的第一信号格式转换为第二信号格式后,通过第二通信接口发送至投屏设备。
在第三方面的一种可能的实现方式中,该会议设备还包括:数据采集模块,用于采集第二多媒体数据,并将第二多媒体数据通过第一通信接口发送给计算机设备,其中,第一多媒体数据为计算机设备将第二多媒体数据和/或第三多媒体数据进行转换得到的,第三多媒体数据为计算机设备获取到的多媒体数据。
在第三方面的一种可能的实现方式中,第一通信接口与计算机设备通过USB线连接,该会议设备还包括:管脚转换模块,管脚转换模块连接在第一通信接口和信号转换模块之间,管脚转换模块用于在USB线反插时将USB线的管脚的输入进行转换。
在第三方面的一种可能的实现方式中,该会议设备还包括:数据处理模块,用于接收数据采集模块发送的第二多媒体数据,并通过第一通信接口接收计算机设备发送的第一多媒体数据,以第一多媒体数据为参考对第二多媒体数据进行回声消除处理。
在第三方面的一种可能的实现方式中,该会议设备还包括:输出切换模块,用于在第一通信接口与计算机设备断开时,控制第二通信接口输出第二多媒体数据,在第一通信接口与计算机设备连接时,控制第二通信接口输出第一多媒体数据。
在第三方面的一种可能的实现方式中,第一信号格式为DP信号格式,第二信号格式为HDMI信号格式。
从以上技术方案可以看出,本申请实施例具有以下优点:
本申请实施例中,会议设备包括第一通信接口、第二通信接口和信号转换模块,其中,信号转换模块用于通过第一通信接口接收计算机设备发送的第一多媒体数据,并将第一多媒体数据的第一信号格式转换为第二信号格式后,通过第二通信接口发送至投屏设备,由此会议设备和计算机设备只需要一根数据线连接,会议设备和投屏设备只需要一根数据线连接,计算机设备和投屏设备不需要数据线连接,从而降低了会议部署的连线复杂程度。
附图说明
图1为本申请实施例提供的一种会议系统的框架示意图;
图2为本申请实施例提供的会议设备的一实施例示意图;
图3为本申请实施例提供的会议设备的另一实施例示意图;
图4为本申请实施例提供的音频处理模块的一实施例示意图;
图5为本申请实施例提供的视频处理模块的一实施例示意图;
图6为本申请实施例提供的会议设备的另一实施例示意图;
图7A为本申请实施例提供的USB线接口的示意图;
图7B为本申请实施例提供的管脚转换模块的工作示意图;
图8为本申请实施例提供的数据处理方法的一实施例示意图;
图9为本申请实施例提供的数据处理方法的另一实施例示意图;
图10为本申请实施例提供的数据处理方法的另一实施例示意图;
图11为本申请实施例提供的数据处理方法的另一实施例示意图;
图12为本申请实施例提供的数据处理方法的另一实施例示意图;
图13为本申请实施例提供的会议系统的一实施例示意图;
图14为本申请实施例提供的会议系统的另一实施例示意图。
具体实施方式
下面结合附图,对本申请的实施例进行描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。本领域普通技术人员可知,随着技术发展和新场景的出现,本申请实施例提供的技术方案对于类似的技术问题,同样适用。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
在这里专用的词“示例性”意为“用作例子、实施例或说明性”。这里作为“示例性”所说明的任何实施例不必解释为优于或好于其它实施例。
另外,为了更好的说明本申请,在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解,没有某些具体细节,本申请同样可以实施。在一些实例中,对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述,以便于凸显本申请的主旨。
本申请实施例提供一种会议设备、数据处理方法和会议系统,用于降低会议部署的连线复杂程度。以下分别进行详细说明。
如图1所示,在用户需要进行会议时,使用计算机设备110、会议设备120和投屏设备130,用户自行携带计算机设备110,计算机设备110中安装有会议软件(app),会议设备120可以采集多媒体数据,多媒体数据在会议设备120和计算机设备110之间可以相互传输,投屏设备130可以展示计算机设备110上的多媒体数据或会议设备120采集的多媒体数据,会议设备120通过通用串行总线(universal serial bus,USB)线和计算机设备110连接,会议设备120还通过高清多媒体接口(high definition multimedia interface,HDMI)线和投屏设备130连接,而计算机设备110和投屏设备130之间不需要数据线连接。
如图2所示,本申请实施例提供的会议设备220的一实施例中,该会议设备220包括第一通信接口221、第二通信接口223和信号转换模块222。
具体的,第一通信接口221用于基于第一信号格式与计算机设备210通信;第二通信接口223用于基于第二信号格式与投屏设备230通信;信号转换模块222用于通过第一通信接口221接收计算机设备210发送的第一多媒体数据,并将第一多媒体数据的第一信号格式转换为第二信号格式后,通过第二通信接口223发送至投屏设备230。
本申请实施例中,第一通信接口221支持第一信号格式,第二通信接口223第二信号格式,可选的,第一信号格式为显示接口(display port,DP)信号,第二信号格式为HDMI信号,会议设备220通过USB Type-C线和计算机设备210连接,会议设备220还通过HDMI线和投屏设备230连接。
进一步的,在进行会议时,计算机设备210将第一多媒体数据,例如计算机设备210产生的声音(音频数据)和画面(视频数据),作为DP信号通过USB Type-C线发送给会议设备220的第一通信接口221,会议设备220的第一通信接口221接收到第一多媒体数据后,会议设备220将第一多媒体数据的第一信号格式转换为第二信号格式,得到HDMI信号的第一多媒体数据,并通过第二通信接口223将HDMI信号的第一多媒体数据发送给投屏设备230,这样投屏设备230就可以展示上述第一多媒体数据。而计算机设备210和投屏设备230之间不需要单独连接数据线。
其中,计算机设备210发送给会议设备220的第一多媒体数据可以是计算机设备210的桌面数据。那么投屏设备230上展示的就是计算机设备210产生的声音和画面,例如展示计算机设备210的界面,并播放计算机设备210的声音。当计算机设备210通过会议软件加入到会议中时,这里的第一多媒体数据可以是会议中的其他与会方发送的多媒体数据,或者其他与会方的多媒体数据以及所述计算机设备210的桌面数据的组合。相应的,投屏设备230展示的其他与会方发送的多媒体数据,或者其他与会方的多媒体数据以及所述计算机设备210的桌面数据的组合。
本申请实施例中,会议设备包括第一通信接口、第二通信接口和信号转换模块,其中,信号转换模块用于通过第一通信接口接收计算机设备发送的第一多媒体数据,并将第一多媒体数据的第一信号格式转换为第二信号格式后,通过第二通信接口发送至投屏设备,由此会议设备和计算机设备只需要一根数据线连接,会议设备和投屏设备只需要一根数据线连接,计算机设备和投屏设备不需要数据线连接,从而降低了会议部署的连线复杂程度。
如图3所示,本申请实施例提供的会议设备320的一实施例中,该会议设备320包括第一通信接口321、第二通信接口322、信号转换模块323、数据采集模块328、管脚转换模块324、数据处理模块329和输出切换模块325。
具体的,第一通信接口321与计算机设备310可以通过USB线连接。第一通信接口321用于基于第一信号格式与计算机设备310通信;第二通信接口322用于基于第二信号格式与投屏设备330通信;信号转换模块323用于通过第一通信接口321接收计算机设备310发送的第一多媒体数据,并将第一多媒体数据的第一信号格式转换为第二信号格式后,通过第二通信接口322发送至投屏设备330。数据采集模块328用于采集第二多媒体数据,并将第二多媒体数据通过第一通信接口321发送给计算机设备310。在本实施例中,计算机设备310发送给会议设备320的第一多媒体数据可以为计算机设备310将第二多媒体数据进行转换得到的,或者,也可以为第二多媒体数据和第三多媒体数据进行转换得到的。其中,第三多媒体数据可以为计算机设备310加入会议后接收到的所述会议的其他参与方的多媒体数据,也可以为计算机设备310采集到的数据或者计算机设备310的桌面数据,以及上述多媒体数据的任意多项的组合。
可选的,会议设备320还包括连接在第一通信接口321和信号转换模块323之间的管脚转换模块324。管脚转换模块324用于在USB线反插时将USB线的管脚的输入进行转换。这样避免了USB线反插导致的连接失败。
若会议设备320播放所述第一多媒体数据中的音频时,会议设备320又会采集到该音频,从而产生回声。为了消除这类回声,会议设备320还可以包括数据处理模块329。
该数据处理模块329用于接收数据采集模块328发送的第二多媒体数据,并通过第一通信接口321接收计算机设备310发送的第一多媒体数据,利用第一媒体数据,比如音频数据,对第二多媒体数据进行回声消除处理。
可选的,会议设备320还包括输出切换模块325,该输出切换模块325用于在第一通信接口321与计算机设备310断开时,控制第二通信接口322输出第二多媒体数据,在第一通信接口321与计算机设备310连接时,控制第二通信接口322输出第一多媒体数据。
为了更详细的说明本申请实施例提供的会议设备320的应用场景,下面结合3个实例对本申请实施例提供的会议设备320进行举例说明。
实例1
可选的,该会议设备320还包括音响326和存储模块327,音响326和数据处理模块329连接,存储模块327用于存储第一多媒体数据或第二多媒体数据,以便用户后续复查。数据处理模块329包括视频处理模块3292(video sub-system)、音频处理模块3291(audio)和USB模块3293(USB device/host),数据采集模块328包括摄像头3282和麦克风3281,摄像头3282通过移动产业处理器接口(mobile industry processor interface,MIPI)线与视频处理模块3292连接,USB模块3293也通过MIPI线与视频处理模块3292连接,麦克风3281通过集成电路内置音频总线(Inter-IC Sound,I2S)和音频处理模块3291连接,音频处理模块3291通过I2S总线和音响326连接。
具体的,请一并参考图4和图5,数据处理模块329为中央处理器(centralprocessing unit,CPU),音响326用于播放第一多媒体数据或第二多媒体数据中的音频数据。音频处理模块3291包括音频输入模块401(audio in,AI)、音频输出模块404(audiooutput,AO)、前处理模块402和后处理模块403,音频数据通过音频输入模块401输入后,可以直接通过音频输出模块404输出,也可以输入至前处理模块402和后处理模块403进行混音和后处理等操作,然后通过音频输出模块404输出。视频处理模块3292包括视频输入模块501(video in,VI)、视频输出模块506(video output,VO)、图像信号处理模块502(imagesignal processing,ISP)、视频处理子系统模块503(video process sub-system,VPSS)、编码器504(encoder)和全景拼接模块505(any view stitching,AVS),其中第一多媒体数据或第二多媒体数据中的视频数据通过视频输入模块501输入,视频输入模块501还可以对视频数据中的图像进行降噪处理,并输出多路不同分辨率的视频数据,图像信号处理模块502用于对输入的视频数据进行信号处理,可以匹配不同厂商的图像传感器。视频处理子系统模块503可以对视频数据中的图像进行增强和锐化等处理,并实现同源输出多路不同分辨率的视频数据,用于编码、预览或抓拍等,编码器504可以对视频数据进行编码,全景拼接模块505可以对视频数据中的图像进行多画面的拼接,视频输出模块506可以进行播放控制等处理,并按照用户配置的输出协议输出给外部,视频数据通过视频输入模块501输入后,可以通过视频输出模块506直接输出,也可以经过上述任意模块处理后,通过视频输出模块506输出。摄像头3282用于采集第二多媒体数据中的视频数据,麦克风3281用于采集第二多媒体数据中的音频数据。USB Type-C线和第一通信接口321还支持第三信号格式,第三信号格式为USB视频类(USB video class,UVC)信号格式和USB音频类(USB audio class,UAC)信号格式,USB模块3293用于给计算机设备310提供分配器(device)的功能。USB Type-C线采用USB3.0协议或USB3.1协议。
示例性的,数据采集模块328采集到第二多媒体数据后,将第二多媒体数据通过USB设备和第一通信接口321发送给计算机设备310,其中第二多媒体数据的信号格式为UAC和/或UVC,这样计算机设备310就使用到了会议设备320的功能。计算机设备310收到第二多媒体数据后,将第二多媒体数据作为会议软件的输入,供其他与会方观看。
计算机设备310通过网络或其他方式获取到其他与会方的多媒体数据。在这种场景下,计算机设备310可以展示其他与会方的多媒体数据,或者,除了展示其他与会方的多媒体数据之外,还展示上述的第二多媒体数据。
可以理解,计算机设备310自身也可以生成多媒体数据,例如计算机设备310的桌面数据,或计算机设备310自带的摄像头采集的多媒体数据。为便于描述,本实施例中,将其他与会方的多媒体数据,或者,其他与会方的多媒体数据和计算机设备310生成的多媒体数据称为第三多媒体数据。
通过前面描述可知,计算机设备310可以获取第二多媒体数据和第三多媒体数据。计算机设备310将第二多媒体数据和第三多媒体数据进行转换和编码,得到第一多媒体数据,此时第一多媒体数据中包括第二多媒体数据、其他与会方的多媒体数据和/或计算机设备310自身产生的多媒体数据。计算机设备310将第一多媒体数据发送给会议设备320,信号转换模块323接收到第一多媒体数据信号转换模块323将DP信号格式的第一多媒体数据转换为HDMI信号格式后,将HDMI信号格式的第一多媒体数据发送给投屏设备330展示,示例性的,此时投屏设备330展示了计算机设备310的桌面,桌面中包括会议软件,会议软件中包括其他与会方的多媒体数据和第二多媒体数据。
示例性的,数据采集模块328采集到第二多媒体数据后,可以不将第二多媒体数据发送给计算机设备310,而直接将第二多媒体数据发送给投屏设备330进行展示,用户可以基于此进行会议设备的测试。
可选的,如图6所示,计算机设备310自带计算机摄像头312和计算机麦克风311,此时计算机设备310可以采集自身所在的会议现场的多媒体数据。计算机设备310可以将采集到的多媒体数据通过会议设备320发送给投屏设备330进行投屏。具体实现中,该多媒体数据作为DP信号通过USB Type-C线发送给会议设备320的第一通信接口321,经过管脚转换模块325后,会议设备320的信号转换模块323将该多媒体数据的第一信号格式转换为第二信号格式,得到HDMI信号的多媒体数据,输出切换模块325将HDMI信号的多媒体数据通过第二通信接口322发送给投屏设备330进行展示,即展示计算机设备310采集到的会议现场的多媒体数据。
或者,计算机设备310将计算机摄像头312和计算机麦克风311采集到的多媒体数据和会议设备320采集到的第二多媒体数据处理得到第一多媒体数据,并将第一多媒体数据通过会议设备320发送给投屏设备330进行展示。示例性的,计算机摄像头312和数据采集模块328的摄像头3282分别采集会议现场内不同角度的视频,计算机麦克风311和数据采集模块328的麦克风3281分别采集会议现场内不同位置的音频,计算机设备310将计算机摄像头312采集的视频和第二多媒体数据中摄像头3282采集的视频进行拼接,得到第一多媒体数据中的视频数据,计算机设备310还将计算机麦克风311采集的音频和第二多媒体数据中麦克风3281采集的音频分别作为不同声道进行融合,得到第一多媒体数据中的音频数据,此时投屏设备330展示的第一多媒体数据包括了更完整的会议现场视频和多声道的会议现场的音频,提升了用户体验。
需要说明的是,由于计算设备310或者会议设备320可能使能的只有麦克风,或者只有摄像头,又或者同时使能了麦克风和摄像头,第一多媒体数据和第二多媒体数据中可以只为音频数据,也可以只为视频数据,还可以包括音频数据和视频数据。
实例2
在实例1的基础上,可知计算机设备310和会议设备320在USB Type-C线的传输中可能存在同时传输DP信号格式的数据和UAC和/或UVC信号格式的数据,UAC和/或UVC信号格式的数据支持USB Type-C线的正反插,但DP信号格式的数据不支持,因此管脚转换模块324用于在USB Type-C线反插时将USB Type-C线的管脚的输入进行转换。
具体的,如图7A和图7B所示,对于作为母头来说的第一通信接口321中,UAC和/或UVC信号格式走TX1+、TX1-、RX1+和RX1-的管脚,DP信号格式走DP0+、DP0-、DP1+和DP1-的管脚,即TX2+、TX2-、RX2+和RX2-的管脚,管脚转换模块324(sw)可以实现数据选择器(multiplexer,MUX)功能,实现管脚的复用和交换,在USB Type-C线反插时将USB Type-C线的管脚的输入进行交换。
实例3
在实例1的基础上,由于会议设备320的音响326和麦克风3281都位于会议会场内,当计算机设备310通过网络或其他方式获取到其他与会方的多媒体数据后,将其作为第三多媒体数据与接收到的会议设备320中的数据采集模块328采集的会议现场的第二多媒体数据一起进行转换,得到第一多媒体数据。并将所述第一多媒体数据发送给会议设备320的音响326播放。此时,数据收集模块328的麦克风3281会重新采集到第一多媒体数据的音频数据。此时的第二多媒体数据经过转换后被重复播放后会产生回声问题。
当数据处理模块329中的音频处理模块3291接收数据采集模块328发送的第二多媒体数据后,音频处理模块3291利用从第一通信接口321接收的计算机设备310发送的第一媒体数据对所述第二多媒体数据进行回声抵消。具体可以是将其中的音频数据作为参考音,把第二多媒体数据中麦克风3281重新采集到第一多媒体数据中重复的音频数据抵消掉,完成回声消除处理,避免了回声问题。
其中,第一多媒体数据可以作为UAC信号格式通过第一通信接口321、USB模块3293发送给音频处理模块3291,也可以作为DP信号格式通过第一通信接口321、管脚转换模块324发送给音频处理模块3291,音频处理模块3291可以将这两种信号格式的第一多媒体数据都作为参考音,提升回声处理效果。在进行回声消除处理时,音频处理模块3291具体使第二多媒体数据中的音频数据与参考音的时钟尽可能同步对齐,并保证及其他如波束和声源定位时音频数据的相位一致,在软件上采用时钟同源算法,同时结合AI残留回声处理,提升回声抵消效果。
还需要说明的是,若存在其他场景中不存在回声问题,例如麦克风3281不采集音频数据,则不进行回声消除处理,即不需要将第一多媒体数据发送给数据处理模块329中的音频处理模块3291。
实例4
在实例1的基础上,计算机设备310默认不开启会议软件功能,会议设备320和投屏设备330默认连接,当第一通信接口321与计算机设备310断开时,即计算机设备310没有通过USB线和会议设备320的第一通信接口321连接,或者计算机设备310没有开启会议软件功能时,输出切换模块325控制第二通信接口322输出第二多媒体数据,即投屏设备330上展示会议设备320采集的第二多媒体数据,其中输出切换模块325相当于一个切换开关,此时输出切换模块325使投屏设备330与数据处理模块329导通,与信号转换模块323断开。
当第一通信接口321与计算机设备310连接时,或第一通信接口321与计算机设备310连接且计算机设备310开启会议软件功能时,输出切换模块325控制第二通信接口322输出第一多媒体数据,此时输出切换模块325使投屏设备330与数据处理模块329断开,与信号转换模块323导通。
总结上述各个实施例可见,本申请实施例带来的有益效果包括而不限于下述(1)至(4)。
(1)降低了会议部署的连线复杂程度。
(2)支持USB线的正反插。
(3)对音频数据进行回声消除。
(4)自动切换投屏设备的输入源。
如图8所示,本申请实施例提供的数据处理方法的一实施例中,该数据处理方法,应用于会议设备,会议设备基于第一信号格式与计算机设备通信,基于第二信号格式与投屏设备通信,该方法包括:
801、会议设备获取计算机设备发送的第一多媒体数据;
802、会议设备将第一多媒体数据的第一信号格式转换为第二信号格式;
803、会议设备将第二信号格式的第一多媒体数据发送至投屏设备。
其中,第一信号格式为DP信号格式,第二信号格式为HDMI信号格式。
本申请实施例中的数据处理方法的具体实施方式可以参考前述如图2所示的会议设备的实施例,本申请实施例中的数据处理方法具有和图2所示的会议设备相同的有益效果,本申请实施例在此不再赘述。
如图9所示,当会议设备为实例1的场景下,该方法还包括:
901、会议设备采集第二多媒体数据;
902、会议设备将第二多媒体数据发送给计算机设备。
其中,第一多媒体数据为计算机设备将第二多媒体数据和/或第三多媒体数据进行转换得到的,第三多媒体数据为计算机设备获取到的多媒体数据。
如图10所示,当会议设备为实例2的场景下,该方法还包括:
1001、会议设备在USB线反插时将USB线的管脚的输入进行转换。
如图11所示,当会议设备为实例3的场景下,该方法还包括:
1101、会议设备以计算机设备发送的第一多媒体数据为参考对第二多媒体数据进行回声消除处理。
如图12所示,当会议设备为实例4的场景下,该方法还包括:
1201、会议设备在第一通信接口与计算机设备断开时,控制第二通信接口输出第二多媒体数据,在第一通信接口与计算机设备连接时,控制第二通信接口输出第一多媒体数据。
本申请实施例中的数据处理方法的具体实施方式可以参考前述如图3所示的会议设备的实施例,且方法的步骤可以任意组合和替换,本申请实施例对此不作限制,本申请实施例中的数据处理方法具有和图2所示的会议设备相同的有益效果,本申请实施例在此不再赘述。
如图13所示,本申请实施例提供的会议系统1300的一实施例中,该会议系统1300包括计算机设备1301、投屏设备1303以及会议设备1302。该会议设备1302包括第一通信接口、第二通信接口和信号转换模块。
具体的,第一通信接口用于与计算机设备1301通信,第一通信接口支持第一信号格式;第二通信接口用于与投屏设备1303连接通信,第二通信接口支持第二信号格式;信号转换模块用于通过第一通信接口接收计算机设备1301发送的第一多媒体数据,并将第一多媒体数据的第一信号格式转换为第二信号格式后,通过第二通信接口发送至投屏设备1303。
本申请实施例中的会议设备的具体实施方式可以参考前述如图2所示的会议设备的实施例,本申请实施例中的会议系统具有和图2所示的会议设备相同的有益效果,本申请实施例在此不再赘述。
如图14所示,本申请实施例提供的会议系统1400的一实施例中,该会议系统1400包括计算机设备1401、投屏设备1403以及会议设备1402。该会议设备1402包括第一通信接口、第二通信接口、信号转换模块、数据采集模块、管脚转换模块、数据处理模块和输出切换模块。
具体的,第一通信接口用于基于第一信号格式与计算机设备1401通信;第二通信接口用于基于第二信号格式与投屏设备1403通信;信号转换模块用于通过第一通信接口接收计算机设备1401发送的第一多媒体数据,并将第一多媒体数据的第一信号格式转换为第二信号格式后,通过第二通信接口发送至投屏设备1403。数据采集模块用于采集第二多媒体数据,并将第二多媒体数据通过第一通信接口发送给计算机设备1401,其中,第一多媒体数据为计算机设备1401将第二多媒体数据和/或第三多媒体数据进行转换得到的,第三多媒体数据为计算机设备1401获取到的多媒体数据。第一通信接口与计算机设备1401通过USB线连接,管脚转换模块连接在第一通信接口和信号转换模块之间,管脚转换模块用于在USB线反插时将USB线的管脚的输入进行转换。数据处理模块用于接收数据采集模块发送的第二多媒体数据,并通过第一通信接口接收计算机设备1401发送的第一多媒体数据,以第一多媒体数据为参考对第二多媒体数据进行回声消除处理。输出切换模块用于在第一通信接口与计算机设备1401断开时,控制第二通信接口输出第二多媒体数据,在第一通信接口与计算机设备1401连接时,控制第二通信接口输出第一多媒体数据。第一信号格式为DP信号格式,第二信号格式为HDMI信号格式。
本申请实施例中的会议设备的具体实施方式可以参考前述如图3所示的会议设备的实施例,本申请实施例中的会议系统具有和图3所示的会议设备相同的有益效果,本申请实施例在此不再赘述。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,read-onlymemory)、随机存取存储器(RAM,random access memory)、磁碟或者光盘等各种可以存储程序代码的介质。

Claims (18)

1.一种会议设备,其特征在于,所述会议设备包括:
第一通信接口,用于基于第一信号格式与计算机设备通信;
第二通信接口,用于基于第二信号格式与投屏设备通信;
信号转换模块,用于通过所述第一通信接口接收所述计算机设备发送的第一多媒体数据,并将所述第一多媒体数据的第一信号格式转换为所述第二信号格式后,通过所述第二通信接口发送至所述投屏设备。
2.根据权利要求1所述的设备,其特征在于,所述会议设备还包括:
数据采集模块,用于采集第二多媒体数据,并将所述第二多媒体数据通过所述第一通信接口发送给所述计算机设备,其中,所述第一多媒体数据为所述计算机设备将所述第二多媒体数据和/或第三多媒体数据进行转换得到的,所述第三多媒体数据为所述计算机设备获取到的多媒体数据。
3.根据权利要求2所述的设备,其特征在于,所述第一通信接口与所述计算机设备通过通用串行总线USB线连接,所述会议设备还包括:
管脚转换模块,所述管脚转换模块连接在所述第一通信接口和所述信号转换模块之间,所述管脚转换模块用于在所述USB线反插时将所述USB线的管脚的输入进行转换。
4.根据权利要求2或3所述的设备,其特征在于,所述会议设备还包括:
数据处理模块,用于接收所述数据采集模块发送的所述第二多媒体数据,并通过所述第一通信接口接收所述计算机设备发送的第一多媒体数据,以所述第一多媒体数据为参考对所述第二多媒体数据进行回声消除处理。
5.根据权利要求2-4中任一项所述的设备,其特征在于,所述会议设备还包括:
输出切换模块,用于在所述第一通信接口与所述计算机设备断开时,控制所述第二通信接口输出所述第二多媒体数据,在所述第一通信接口与所述计算机设备连接时,控制所述第二通信接口输出所述第一多媒体数据。
6.根据权利要求1-5中任一项所述的设备,其特征在于,所述第一信号格式为显示接口DP信号格式,所述第二信号格式为高清多媒体接口HDMI信号格式。
7.一种数据处理方法,其特征在于,应用于会议设备,所述会议设备基于第一信号格式与计算机设备通信,基于第二信号格式与投屏设备通信,所述方法包括:
所述会议设备获取计算机设备发送的第一多媒体数据;
所述会议设备将所述第一多媒体数据的所述第一信号格式转换为所述第二信号格式;
所述会议设备将所述第二信号格式的第一多媒体数据发送至所述投屏设备。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
所述会议设备采集第二多媒体数据;
所述会议设备将所述第二多媒体数据发送给所述计算机设备,其中,所述第一多媒体数据为所述计算机设备将所述第二多媒体数据和/或第三多媒体数据进行转换得到的,所述第三多媒体数据为所述计算机设备获取到的多媒体数据。
9.根据权利要求8所述的方法,其特征在于,所述方法还包括:
所述会议设备在所述USB线反插时将所述USB线的管脚的输入进行转换。
10.根据权利要求8或9所述的方法,其特征在于,所述方法还包括:
所述会议设备以所述计算机设备发送的第一多媒体数据为参考对所述第二多媒体数据进行回声消除处理。
11.根据权利要求8-10中任一项所述的方法,其特征在于,所述方法还包括:
所述会议设备在所述第一通信接口与所述计算机设备断开时,控制所述第二通信接口输出所述第二多媒体数据,在所述第一通信接口与所述计算机设备连接时,控制所述第二通信接口输出所述第一多媒体数据。
12.根据权利要求7-11中任一项所述的方法,其特征在于,所述第一信号格式为DP信号格式,所述第二信号格式为HDMI信号格式。
13.一种会议系统,包括计算机设备、投屏设备以及会议设备,其中,所述会议设备包括:
第一通信接口,用于与所述计算机设备通信,所述第一通信接口支持第一信号格式;
第二通信接口,用于与所述投屏设备连接通信,所述第二通信接口支持第二信号格式;
信号转换模块,用于通过所述第一通信接口接收所述计算机设备发送的第一多媒体数据,并将所述第一多媒体数据的第一信号格式转换为所述第二信号格式后,通过所述第二通信接口发送至所述投屏设备。
14.根据权利要求13所述的系统,其特征在于,所述会议设备还包括:
数据采集模块,用于采集第二多媒体数据,并将所述第二多媒体数据通过所述第一通信接口发送给所述计算机设备,其中,所述第一多媒体数据为所述计算机设备将所述第二多媒体数据和/或第三多媒体数据进行转换得到的,所述第三多媒体数据为所述计算机设备获取到的多媒体数据。
15.根据权利要求14所述的系统,其特征在于,所述第一通信接口与所述计算机设备通过USB线连接,所述会议设备还包括:
管脚转换模块,所述管脚转换模块连接在所述第一通信接口和所述信号转换模块之间,所述管脚转换模块用于在所述USB线反插时将所述USB线的管脚的输入进行转换。
16.根据权利要求14或15所述的系统,其特征在于,所述会议设备还包括:
数据处理模块,用于接收所述数据采集模块发送的所述第二多媒体数据,并通过所述第一通信接口接收所述计算机设备发送的第一多媒体数据,以所述第一多媒体数据为参考对所述第二多媒体数据进行回声消除处理。
17.根据权利要求14-16中任一项所述的系统,其特征在于,所述会议设备还包括:
输出切换模块,用于在所述第一通信接口与所述计算机设备断开时,控制所述第二通信接口输出所述第二多媒体数据,在所述第一通信接口与所述计算机设备连接时,控制所述第二通信接口输出所述第一多媒体数据。
18.根据权利要求13-17中任一项所述的系统,其特征在于,所述第一信号格式为DP信号格式,所述第二信号格式为HDMI信号格式。
CN202210176911.4A 2021-12-08 2022-02-24 一种会议设备、数据处理方法和会议系统 Pending CN116244236A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/CN2022/130152 WO2023103671A1 (zh) 2021-12-08 2022-11-05 一种会议设备、数据处理方法和会议系统

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202111491789 2021-12-08
CN2021114917891 2021-12-08

Publications (1)

Publication Number Publication Date
CN116244236A true CN116244236A (zh) 2023-06-09

Family

ID=86630137

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210176911.4A Pending CN116244236A (zh) 2021-12-08 2022-02-24 一种会议设备、数据处理方法和会议系统

Country Status (2)

Country Link
CN (1) CN116244236A (zh)
WO (1) WO2023103671A1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11205397B2 (en) * 2018-03-19 2021-12-21 Guangzhou Shiyuan Electronics Co., Ltd. Data transmission device and data transmission method
CN208298174U (zh) * 2018-03-19 2018-12-28 广州视源电子科技股份有限公司 一种无线传屏器
CN110798644A (zh) * 2019-10-30 2020-02-14 深圳市亿联智能有限公司 一种基于hdmi信号转换的无线投屏会议系统
WO2021168649A1 (zh) * 2020-02-25 2021-09-02 深圳市乐橙互联有限公司 多功能接收设备和会议系统

Also Published As

Publication number Publication date
WO2023103671A1 (zh) 2023-06-15

Similar Documents

Publication Publication Date Title
CN106992959B (zh) 一种3d全景音视频直播系统及音视频采集方法
CN102098443B (zh) 一种摄像设备、通信系统和相应的图像处理方法
CN102209232A (zh) 一种远程音视频监控系统及其方法
CN108243318B (zh) 一种单接口实现多影像采集装置直播的方法及装置
CN111651632A (zh) 视频会议中发言人音视频输出方法及装置
CN113132670A (zh) 视讯会议系统
CN111339015A (zh) 一种控制指令传输方法、系统及设备
JP2012253599A (ja) 立体映像撮像システム及び同期制御方法
US20180376181A1 (en) Networked video communication applicable to gigabit ethernet
CN113438442A (zh) 一种会议资料的共享方法及装置
JP2014179813A (ja) 通信システム、通信端末、および端末プログラム
CN111107301A (zh) 一种视频会议平台及基于视频会议平台的通讯方法
CN201805504U (zh) 一种远程音视频监控系统
US5982415A (en) Video communication system with synchronous video output from a plurality of terminals
US10468029B2 (en) Communication terminal, communication method, and computer program product
CN112040195B (zh) 一种数字化集中控制设备及方法
CN112468763B (zh) 会议电视的视频传输和显示方法、装置、设备及存储介质
CN116244236A (zh) 一种会议设备、数据处理方法和会议系统
CN115514989B (zh) 一种数据传输方法、系统及存储介质
CN113132671A (zh) 视讯会议系统
US20160142633A1 (en) Capture apparatuses of video images
CN110798699A (zh) 视频直播方法及装置
WO2004059975A1 (fr) Procede et systeme de sortie d'image multiple
KR101887380B1 (ko) 복수 개의 카메라를 이용한 촬영 이미지의 전송 및 처리를 위한 장치 및 방법
CN113691815B (zh) 一种视频数据处理方法、设备和计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication