CN106162038A - 一种音频发送方法及装置 - Google Patents
一种音频发送方法及装置 Download PDFInfo
- Publication number
- CN106162038A CN106162038A CN201510133037.6A CN201510133037A CN106162038A CN 106162038 A CN106162038 A CN 106162038A CN 201510133037 A CN201510133037 A CN 201510133037A CN 106162038 A CN106162038 A CN 106162038A
- Authority
- CN
- China
- Prior art keywords
- audio frequency
- road
- video
- sends
- road video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明公开了一种音频发送方法及装置，方法包括：获取每路音频的发送状态信号和每路视频的发送状态信号；建立每路视频和与其同时发送的音频之间的映射关系；视频发送时，根据所述映射关系，控制音频的发送状态，发送与该路视频对应的一路或多路音频。本发明通过建立视频发送与音频发送之间的映射关系；视频发送时，根据该映射关系，至发送与该路视频对应的一路或多路音频，这样，就能实现按照远端需求进行音频数据发送，提高了会议效果，进而大大提高了用户体验。
Description
技术领域
本发明涉及视频会议技术领域，特别是涉及一种音频发送方法及装置。
背景技术
会议电视是利用视讯技术和设备通过现代通讯网络，在远程异地以电视方式召开实时、双向、交互式的可视会议，是一种多媒体通信方式。
会议电视往往存在多路音视频输入输出和多路音视频编解码，多路音频往往是通过混音以后和视频一起发送和播放，有时会议中视频通道不需要所有的声音播放，只需要其中一路声音或者希望选择某几路声音，才能达到更好的会议效果。现有技术存在如下场景：
例1：某终端有两路音频输入，两路视频输出。呼叫上会后，两路声音混音后都会到达远端，一路视频到达远端，若两路音频输入都有发声，那么远端会听见两种声音；而此时远端只希望听见其中一路的声音，在发送第二路视频后再听见第二路的声音。
例2：扩展音频为N路，视频为两路的情景。呼叫上会后，多路声音混音后都会到达远端，一路视频到达远端，若N路音频输入都有发声那么远端会听见N种声音；而此时远端只希望听见其中n路(n<N)的声音，发送第二路视频后再听见其余N-n路的声音。
例3：扩展音频为N路，视频为M路的情景。呼叫上会后，N路声音混音后都会到达远端，一路视频到达远端，若N路音频输入都有发声那么远端会听见N种声音；而此时远端只希望听见其中n路(n<N)的声音，发送第m路视频后再听见其中m路的声音。
发明内容
本发明要解决的技术问题是提供一种音频发送方法及装置，用以解决现有技术音频发送不能按照远端需求进行发送的问题。
为解决上述技术问题，一方面，本发明提供一种音频发送方法，包括：
获取每路音频的发送状态信号和每路视频的发送状态信号；
建立每路视频和与其同时发送的音频之间的映射关系；
视频发送时，根据所述映射关系，控制音频的发送状态，发送与该路视频对应的一路或多路音频。
进一步，所述音频发送状态信号包括：音频处于发送状态或未发送状态；所述视频发送状态信号包括：视频处于发送状态或未发送状态。
进一步，根据所述映射关系，控制音频的发送状态，具体包括：
当与该路视频对应的音频是发送状态时，则保持该路音频数据继续发送；
当与该路视频对应的音频是未发送状态时，则开始发送该路音频数据；
当该路视频停止发送时，则停止发送与该路视频对应的音频数据。
进一步，建立每路视频和与其同时发送的音频之间的映射关系，具体如下：
N路视频发送对应M路音频发送，其中，N＝1、2、3、……，M＝1、2、3、……。
进一步，发送与该路视频对应一路或多路的音频，具体包括：
对与该路视频对应一路或多路的音频直接进行发送；或者，
对与该路视频对应一路或多路的音频加入混音和/或编码后，进行发送。
另一方面，本发明还提供一种音频发送装置，包括：
视频单元，用于获取每路视频的发送状态信号；
映射单元，用于建立每路视频和与其同时发送的音频之间的映射关系；
音频单元，用于获取每路音频的发送状态信号，以及在视频发送时，根据所述映射关系，控制音频的发送状态，发送与该路视频对应的一路或多路音频。
进一步，所述音频发送状态信号包括：音频处于发送状态或未发送状态；所述视频发送状态信号包括：视频处于发送状态或未发送状态。
进一步，所述音频单元还用于：
当与该路视频对应的音频是发送状态时，保持该路音频数据继续发送；
当与该路视频对应的音频是未发送状态时，开始发送该路音频数据；
当该路视频停止发送时，则停止发送与该路视频对应的音频数据。
进一步，所述映射单元还用于：
建立每路视频和与其同时发送的音频之间的映射关系，具体如下：
N路视频发送对应M路音频发送，其中，N＝1、2、3、……，M＝1、2、3、……。
进一步，所述音频单元还用于：
对与该路视频对应一路或多路的音频直接进行发送；或者，
对与该路视频对应一路或多路的音频加入混音和/或编码后，进行发送
本发明有益效果如下：
本发明通过建立视频发送与音频发送之间的映射关系；视频发送时，根据该映射关系，至发送与该路视频对应的一路或多路音频，这样，就能实现按照远端需求进行音频数据发送，提高了会议效果，进而大大提高了用户体验。
附图说明
图1是本发明实施例中一种音频发送方法的流程图；
图2a是本发明实施例中视频发送与音频发送一对一配置映射关系的示意图；
图2b是本发明实施例中视频发送与音频发送混合置映射关系的示意图；
图3是本发明实施例中一种音频发送装置的结构示意图；
图4是本发明实施例中音频发送装置应用与视频会议的结构示意图。
具体实施方式
以下结合附图以及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不限定本发明。
如图1所示，本发明实施例涉及一种音频发送方法，包括：
步骤S101，获取每路音频的发送状态信号和每路视频的发送状态信号；
本步骤中，音频发送状态信号包括：音频处于发送状态或未发送状态。
音频发送状态信号可以直接获取，或者通过音频检测器获取音频发送状态信号；如果有多路音频，需要分别获取每一路音频的发送状态信号。
视频发送状态信号包括：视频处于发送状态或未发送状态。
视频发送状态信号可以直接获取，或者通过视频检测器获取视频发送状态信号；如果包括多路视频，应分别获取每一路视频的发送状态信号。
步骤S102，建立每路视频和与其同时发送的音频之间的映射关系；
本步骤中，可以通过可视界面配置音频发送和视频发送的映射关系；或，通过不可见配置音频发送和视频发送的固定映射关系和可变映射关系。当一路视频与一路或多路音频之间建立有映射关系，即视频与音频之间建立了一种对应关系，当该路视频发送时，与该路视频对应的音频也需要一同发送。
其中，视频发送与音频发送之间的映射关系可以按照如下方式配置，即N路视频发送对应M路音频发送，其中，N＝1、2、3、……，M＝1、2、3、……。
当N＝1，M＝1，即视频发送与音频发送之间是一对一关系，图2a所示的，第1路视频映射第1路音频，第2路视频映射第2路音频，第X路视频映射第X路音频。
当然，也可以根据实际情况的需要，进行灵活设置。例如，N＝1，M>1，即视频发送与音频发送之间是一对多关系；N>1，M＝1，即视频发送与音频发送之间是多对一关系；也可以是以上几种情况的组合。如图2b所示第1路视频映射第1路音频，第2路视频映射第2路、第3路、第4路音频，第3路至第Y路视频映射第Y路音频。需要说明的是，建立音频发送和视频发送的映射关系并不仅仅限于上述映射关系。
步骤S103，视频发送时，根据所述映射关系，控制音频的发送状态，发送与该路视频对应的一路或多路音频。
本步骤中，根据获取的音频发送状态信号和视频发送状态信号，以及建立的映射关系，得到音频发送控制命令。
首先，根据视频发送状态信号，确定哪路视频需要发送，即视频发送状态信号为发送状态的视频是需要进行发送的。
其次，根据之前建立的映射关系，确定该路视频对应的音频为哪一路，或哪几路。然后，查看这几路音频的音频发送状态信号，如果是发送状态，则音频发送控制命令中指示保持该路音频数据继续发送；如果是未发送状态，则音频发送控制命令中指示开始发送该路音频数据；另外，该路视频停止放松时，则停止发送与该路视频对应的一路或多路的音频数据。当一路音频在映射关系中，与一路正在发送的视频对应，同时与一路停止发送的视频对应，则该路音频应该为发送状态，即保持发送该路音频数据。以图2b为例，第1、2路视频发送时，根据映射关系，音频发送控制命令为：第1路至第4路音频发送，其余Y-4路空闲(禁止发送)。
具体发送音频数据时，可以采用以下方式中的一种，或其合理的组合：
1、对音频发送控制命令中指示发送的每一路音频数据进行发送，不需要发送(没指示发送或指示禁止发送)的音频不发送出去。
2、对音频发送控制命令中指示发送的每一路音频数据加入混音，将混音后的音频发送出去。
3、对音频发送控制命令中指示发送的每一路音频数据加入编码，将编码后的音频发送出去。
如图3所示，本发明实施例还涉及一种实现上述方法的音频发送装置，包括：
视频单元，用于获取每路视频的发送状态信号；
映射单元，用于建立每路视频和与其同时发送的音频之间的映射关系；
音频单元，用于获取每路音频的发送状态信号，以及在视频发送时，根据所述映射关系，控制音频的发送状态，发送与该路视频对应的一路或多路音频。
其中，音频发送状态信号包括：音频处于发送状态或未发送状态；所述视频发送状态信号包括：视频处于发送状态或未发送状态。
音频单元还用于：
当与该路视频对应的音频是发送状态时，保持该路音频数据继续发送；
当与该路视频对应的音频是未发送状态时，开始发送该路音频数据；
当该路视频停止发送时，则停止发送与该路视频对应的音频数据。
映射单元还用于：
建立每路视频和与其同时发送的音频之间的映射关系，具体如下：
N路视频发送对应M路音频发送，其中，N＝1、2、3、……，M＝1、2、3、……。
音频单元还用于：
对与该路视频对应一路或多路的音频直接进行发送；或者，
对与该路视频对应一路或多路的音频加入混音和/或编码后，进行发送。
图4为所述装置应用与视频会议的结构示意图，可以利用本装置在视频会议中进行音频发送控制，进而提高会议质量。
由上述实施例可以看出，本发明实施例通过建立视频发送与音频发送之间的映射关系；视频发送时，根据该映射关系，至发送与该路视频对应的一路或多路音频，这样，就能实现按照远端需求进行音频数据发送，提高了会议效果，进而大大提高了用户体验。
尽管为示例目的，已经公开了本发明的优选实施例，本领域的技术人员将意识到各种改进、增加和取代也是可能的，因此，本发明的范围应当不限于上述实施例。
Claims (10)
1.一种音频发送方法，其特征在于，包括：
获取每路音频的发送状态信号和每路视频的发送状态信号；
建立每路视频和与其同时发送的音频之间的映射关系；
视频发送时，根据所述映射关系，控制音频的发送状态，发送与该路视频对应的一路或多路音频。
2.如权利要求1所述的音频发送方法，其特征在于，所述音频发送状态信号包括：音频处于发送状态或未发送状态；所述视频发送状态信号包括：视频处于发送状态或未发送状态。
3.如权利要求2所述的音频发送方法，其特征在于，根据所述映射关系，控制音频的发送状态，具体包括：
当与该路视频对应的音频是发送状态时，则保持该路音频数据继续发送；
当与该路视频对应的音频是未发送状态时，则开始发送该路音频数据；
当该路视频停止发送时，则停止发送与该路视频对应的音频数据。
4.如权利要求1～3任一项所述的音频发送方法，其特征在于，建立每路视频和与其同时发送的音频之间的映射关系，具体如下：
N路视频发送对应M路音频发送，其中，N＝1、2、3、……，M＝1、2、3、……。
5.如权利要求1～3任一项所述的音频发送方法，其特征在于，发送与该路视频对应一路或多路的音频，具体包括：
对与该路视频对应一路或多路的音频直接进行发送；或者，
对与该路视频对应一路或多路的音频加入混音和/或编码后，进行发送。
6.一种音频发送装置，其特征在于，包括：
视频单元，用于获取每路视频的发送状态信号；
映射单元，用于建立每路视频和与其同时发送的音频之间的映射关系；
音频单元，用于获取每路音频的发送状态信号，以及在视频发送时，根据所述映射关系，控制音频的发送状态，发送与该路视频对应的一路或多路音频。
7.如权利要求6所述的音频发送装置，其特征在于，所述音频发送状态信号包括：音频处于发送状态或未发送状态；所述视频发送状态信号包括：视频处于发送状态或未发送状态。
8.如权利要求7所述的音频发送装置，其特征在于，所述音频单元还用于：
当与该路视频对应的音频是发送状态时，保持该路音频数据继续发送；
当与该路视频对应的音频是未发送状态时，开始发送该路音频数据；
当该路视频停止发送时，则停止发送与该路视频对应的音频数据。
9.如权利要求6～8任一项所述的音频发送装置，其特征在于，所述映射单元还用于：
建立每路视频和与其同时发送的音频之间的映射关系，具体如下：
N路视频发送对应M路音频发送，其中，N＝1、2、3、……，M＝1、2、3、……。
10.如权利要求6～8任一项所述的音频发送装置，其特征在于，所述音频单元还用于：
对与该路视频对应一路或多路的音频直接进行发送；或者，
对与该路视频对应一路或多路的音频加入混音和/或编码后，进行发送。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510133037.6A CN106162038A (zh) | 2015-03-25 | 2015-03-25 | 一种音频发送方法及装置 |
| PCT/CN2016/076423 WO2016150320A1 (zh) | 2015-03-25 | 2016-03-15 | 一种音频发送方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510133037.6A CN106162038A (zh) | 2015-03-25 | 2015-03-25 | 一种音频发送方法及装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN106162038A true CN106162038A (zh) | 2016-11-23 |
Family
ID=56977783
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510133037.6A Withdrawn CN106162038A (zh) | 2015-03-25 | 2015-03-25 | 一种音频发送方法及装置 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN106162038A (zh) |
| WO (1) | WO2016150320A1 (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109729278A (zh) * | 2018-11-19 | 2019-05-07 | 魔门塔(苏州)科技有限公司 | 可设定各通道传输速率的远程多传感器同步接收装置 |
| CN109729277A (zh) * | 2018-11-19 | 2019-05-07 | 魔门塔(苏州)科技有限公司 | 多传感器采集时间戳同步装置 |
| CN110139041A (zh) * | 2018-11-19 | 2019-08-16 | 魔门塔(苏州)科技有限公司 | 远程多传感信号同步采集方法 |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112929731B (zh) * | 2021-05-11 | 2021-07-30 | 浙江蓝鸽科技有限公司 | 一种多媒体交换机系统 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1695137A (zh) * | 2002-10-11 | 2005-11-09 | 松下电器产业株式会社 | 用于传送与节目相关联的数据来为音频内容生成相应视觉显示的方法和装置 |
| US20080034104A1 (en) * | 2006-08-07 | 2008-02-07 | Eran Kariti | Video conferencing over IP networks |
| CN101489090A (zh) * | 2009-02-20 | 2009-07-22 | 深圳华为通信技术有限公司 | 多路媒体流传输和接收的方法、装置及系统 |
| CN102655584A (zh) * | 2011-03-04 | 2012-09-05 | 中兴通讯股份有限公司 | 一种远程呈现技术中媒体数据发送和播放的方法及系统 |
| CN104079870A (zh) * | 2013-03-29 | 2014-10-01 | 杭州海康威视数字技术股份有限公司 | 单路视频多路音频的视频监控方法及系统 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1298157C (zh) * | 2004-11-30 | 2007-01-31 | 北京中星微电子有限公司 | Ip网络会议视音频同步的方法 |
| CN102281460A (zh) * | 2011-08-18 | 2011-12-14 | 宋健 | 一种基于视频会议实现的网络电视台直播的方法和系统 |
| CN102833520A (zh) * | 2012-08-16 | 2012-12-19 | 华为技术有限公司 | 一种视频会议信号处理的方法、视频会议服务器及系统 |
-
2015
- 2015-03-25 CN CN201510133037.6A patent/CN106162038A/zh not_active Withdrawn
-
2016
- 2016-03-15 WO PCT/CN2016/076423 patent/WO2016150320A1/zh active Application Filing
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1695137A (zh) * | 2002-10-11 | 2005-11-09 | 松下电器产业株式会社 | 用于传送与节目相关联的数据来为音频内容生成相应视觉显示的方法和装置 |
| US20080034104A1 (en) * | 2006-08-07 | 2008-02-07 | Eran Kariti | Video conferencing over IP networks |
| CN101489090A (zh) * | 2009-02-20 | 2009-07-22 | 深圳华为通信技术有限公司 | 多路媒体流传输和接收的方法、装置及系统 |
| CN102655584A (zh) * | 2011-03-04 | 2012-09-05 | 中兴通讯股份有限公司 | 一种远程呈现技术中媒体数据发送和播放的方法及系统 |
| CN104079870A (zh) * | 2013-03-29 | 2014-10-01 | 杭州海康威视数字技术股份有限公司 | 单路视频多路音频的视频监控方法及系统 |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109729278A (zh) * | 2018-11-19 | 2019-05-07 | 魔门塔(苏州)科技有限公司 | 可设定各通道传输速率的远程多传感器同步接收装置 |
| CN109729277A (zh) * | 2018-11-19 | 2019-05-07 | 魔门塔(苏州)科技有限公司 | 多传感器采集时间戳同步装置 |
| CN110139041A (zh) * | 2018-11-19 | 2019-08-16 | 魔门塔(苏州)科技有限公司 | 远程多传感信号同步采集方法 |
| CN109729278B (zh) * | 2018-11-19 | 2020-12-25 | 魔门塔(苏州)科技有限公司 | 可设定各通道传输速率的远程多传感器同步接收装置 |
| CN110139041B (zh) * | 2018-11-19 | 2021-09-28 | 魔门塔(苏州)科技有限公司 | 远程多传感信号同步采集方法 |
| CN109729277B (zh) * | 2018-11-19 | 2021-10-01 | 魔门塔(苏州)科技有限公司 | 多传感器采集时间戳同步装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2016150320A1 (zh) | 2016-09-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106162038A (zh) | 一种音频发送方法及装置 | |
| US9930401B2 (en) | WiFi video bridge circuit in QOS | |
| EP2693802A3 (en) | Methods and Systems for Controlling Network Service Quality | |
| WO2012047643A3 (en) | Determining a communication channel from a plurality of possible channel bandwidths | |
| CN113225599B (zh) | 多通道数据传输的调整方法和调整装置 | |
| US9652197B2 (en) | Information processing method, electronic apparatus and system | |
| CN103841360A (zh) | 分布式视频会议的实现方法及系统、终端、音视频一体化设备 | |
| WO2018201402A8 (zh) | 确定上行信号的传输参数的方法、终端和网络设备 | |
| PH12019501568A1 (en) | Method for transmitting data, terminal device and network device | |
| CN106470354A (zh) | 一种截屏方法、终端及机顶盒 | |
| CN104380688A (zh) | 一种设备控制的方法和设备 | |
| CN106303651A (zh) | 显示系统及显示系统的显示方法 | |
| CN105306424A (zh) | 一种流媒体传输方法、流媒体发送装置及流媒体传输系统 | |
| CN103621015B (zh) | 用于识别劣化视频通话链路的系统、方法和设备 | |
| WO2020214467A3 (en) | Dynamic configuration of stream parameters based on modulation scheme | |
| CN106937009A (zh) | 一种级联回声抵消系统及其控制方法及装置 | |
| CN109167954A (zh) | 一种无线多hdmi投屏显示设备 | |
| KR101592755B1 (ko) | 사운드 데이터 양방향 미러링 시스템 | |
| US20070237165A1 (en) | Displaying system with distributor function | |
| EP2583454B1 (en) | Bandwidth extension in a multipoint conference unit | |
| CN106254810A (zh) | 一种视频通话方法和装置 | |
| CN113766267B (zh) | 基于无人机的多路视频直播方法、系统、设备及存储介质 | |
| EP2472406A4 (en) | CONTENT DISTRIBUTION SYSTEM | |
| EP2157514A1 (en) | Multi-media equipment controlling system, device and method of controlling data transmission and processing | |
| CN109672914B (zh) | 一种数据传输方法及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WW01 | Invention patent application withdrawn after publication |
Application publication date: 20161123 |
|
| WW01 | Invention patent application withdrawn after publication |