CN114157894B - 支持全景声的音频转播方法和音频转播系统 - Google Patents

支持全景声的音频转播方法和音频转播系统 Download PDF

Info

Publication number
CN114157894B
CN114157894B CN202111443440.0A CN202111443440A CN114157894B CN 114157894 B CN114157894 B CN 114157894B CN 202111443440 A CN202111443440 A CN 202111443440A CN 114157894 B CN114157894 B CN 114157894B
Authority
CN
China
Prior art keywords
audio
processing device
original
manufacturing
sound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111443440.0A
Other languages
English (en)
Other versions
CN114157894A (zh
Inventor
张宏
鲁泳
董昭德
王立光
雷翔
王付生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zhonghe Ultra Hd Collaborative Technology Center Co ltd
Original Assignee
Beijing Zhonghe Ultra Hd Collaborative Technology Center Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zhonghe Ultra Hd Collaborative Technology Center Co ltd filed Critical Beijing Zhonghe Ultra Hd Collaborative Technology Center Co ltd
Priority to CN202111443440.0A priority Critical patent/CN114157894B/zh
Publication of CN114157894A publication Critical patent/CN114157894A/zh
Application granted granted Critical
Publication of CN114157894B publication Critical patent/CN114157894B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334Recording operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4398Processing of audio elementary streams involving reformatting operations of audio signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8106Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/10537Audio or video recording
    • G11B2020/10546Audio or video recording specifically adapted for audio data
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/10537Audio or video recording
    • G11B2020/10592Audio or video recording specifically adapted for recording or reproducing multichannel signals
    • G11B2020/10601Audio or video recording specifically adapted for recording or reproducing multichannel signals surround sound signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Stereophonic System (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

本发明提供了一种支持全景声的音频转播方法和音频转播系统,该音频转播系统包括:互相通讯连接的调音装置、声音播放装置和音频处理装置;调音装置对接收到的音频进行制作处理,并将接收到的音频、制作后的音频和制作参数发送给音频处理装置,和/或,将制作后的音频发送给声音播放装置;音频处理装置处理接收到的数据,并将处理后的音频发送给调音装置和/或声音播放装置;声音播放装置播放接收到的音频。该方式中的音频转播系统可实现调音装置和音频处理装置联合制作音频,从而可结合每个设备的特点得到质量更高、音效更多、更加满足人们所需的全景声。

Description

支持全景声的音频转播方法和音频转播系统
技术领域
本发明涉及音频处理技术领域,尤其是涉及一种支持全景声的音频转播方法和音频转播系统。
背景技术
现有技术中并没有配合8K全景声的音频转播系统,并且传统音频转播系统缺少现场声音的记录和制作,此外由于全景声还没有普及,所以需要考虑建设支持多种制式的监听环境。
发明内容
本发明的目的在于提供一种支持全景声的音频转播方法和音频转播系统,以在音频转播系统上实现现场音频的制作和录制。
第一方面,本发明提供了一种支持全景声的音频处理方法,该方法应用于音频转播系统;该音频转播系统上包含有互相通信连接的调音装置、声音播放装置和音频处理装置;该方法包括:通过调音装置接收原始音频,并对原始音频进行初步制作,将初步制作后的原始音频发送给声音播放装置,或者,将调音装置中的音频数据发送给音频处理装置;其中,音频数据包括原始音频、制作参数和初步制作后的原始音频中的一种或多种;若调音装置将初步制作后的原始音频发送给声音播放装置,通过声音播放装置对初步制作后的音频进行监听;若调音装置将音频数据发送给音频处理装置,则通过音频处理装置针对音频数据进行二次制作,并将二次制作后的音频返回给调音装置,或者,将二次制作后的音频发送给声音播放装置,以通过声音播放装置对二次制作后的音频进行监听;若音频处理装置将二次制作后的音频返回给调音装置,通过调音装置对二次制作后的音频进行三次制作,并将三次制作后的音频发送给声音播放装置,以通过声音播放装置对三次制作后的音频进行监听。
在可选的实施方式中,音频数据包括原始音频和/或初步制作后的原始音频,通过音频处理装置针对音频数据进行二次制作的步骤,包括:通过音频处理装置,对原始音频和/或初步制作后的原始音频进行剪辑。
在可选的实施方式中,上述音频数据包括原始音频,通过音频处理装置针对音频数据进行二次制作的步骤,包括:通过音频处理装置根据预设参数,对原始音频进行混音制作。
在可选的实施方式中,上述音频数据包括原始音频和制作参数,通过所述音频处理装置针对音频数据进行二次制作的步骤,包括:通过音频处理装置调整制作参数,并通过调整后的制作参数对原始音频进行混音制作。
在可选的实施方式中,上述音频数据包括初步制作后的原始音频和制作参数,通过音频处理装置针对音频数据进行二次制作的步骤,包括:通过音频处理装置调整制作参数,并通过调整后的制作参数对初步制作后的原始音频进行混音制作。
在可选的实施方式中,上述音频数据包括初步制作后的原始音频,通过音频处理装置针对音频数据进行二次制作的步骤,包括:通过音频处理装置根据新增参数,对初步制作后的原始音频进行混音制作。
在可选的实施方式中,上述音频数据包括原始音频、制作参数和初步制作后的原始音频,通过音频处理装置针对音频数据进行二次制作的步骤,包括:通过音频处理装置调整制作参数,并通过调整后的制作参数对初步制作后的原始音频进行混音制作,得到第一音频;通过音频处理装置根据新增参数,对初步制作后的原始音频进行混音制作,得到第二音频;对第一音频和第二音频进行剪辑。
在可选的实施方式中,上述方法还包括:通过调音装置将接收的原始音频,以及对原始音频进行初步制作的制作参数发送给音频处理装置;通过音频处理装置将原始音频和对原始音频进行初步制作的制作参数合成文件,并保存文件。
在可选的实施方式中,上述方法还包括:通过音频处理装置调整制作参数,并将调整后的制作参数返回给调音装置,以使调音装置根据调整后的制作参数对音频进行制作。
第二方面,本发明提供了一种支持全景声的音频转播系统,该音频转播系统包括:互相通信连接的调音装置、声音播放装置和音频处理装置;调音装置用于对接收到的音频进行制作处理,并将接收到的音频、制作后的音频和制作参数发送给音频处理装置,或者将制作后的音频发送给声音播放装置,或将接收到的音频、制作后的音频和制作参数发送给音频处理装置的同时将制作后的音频发送给声音播放装置;音频处理装置用于对接收到的音频进行录制和混音制作,并将混音制作后的音频输出到调音装置或声音播放装置,或同时将混音制作后的音频输出到调音装置和声音播放装置;声音播放装置用于播放接收到的音频。
声音播放装置声音播放装置本发明实施例带来了以下有益效果:
本发明提供的一种支持全景声的音频转播方法和音频转播系统,该音频转播系统上包含有互相通信连接的调音装置、声音播放装置和音频处理装置;首先通过调音装置接收原始音频,并对原始音频进行初步制作,将初步制作后的原始音频发送给声音播放装置,或者,将调音装置中的音频数据发送给音频处理装置;其中,音频数据包括原始音频、制作参数和初步制作后的原始音频中的一种或多种;若调音装置将初步制作后的原始音频发送给声音播放装置,通过声音播放装置对初步制作后的音频进行监听;若调音装置将音频数据发送给音频处理装置,则通过音频处理装置针对音频数据进行二次制作,并将二次制作后的音频返回给调音装置,或者,将二次制作后的音频发送给声音播放装置,以通过声音播放装置对二次制作后的音频进行监听;若音频处理装置将二次制作后的音频返回给调音装置,通过调音装置对二次制作后的音频进行三次制作,并将三次制作后的音频发送给声音播放装置,以通过声音播放装置对三次制作后的音频进行监听。该方式中的音频转播系统可实现调音装置和音频处理装置联合制作音频,从而可结合每个设备的特点得到质量更高、音效更多、多制式,且更加满足人们所需的全景声。
本发明的其他特征和优点将在随后的说明书中阐述,或者,部分特征和优点可以从说明书推知或毫无疑义地确定,或者通过实施本发明的上述技术即可得知。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施方式,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种支持全景声的音频转播方法的流程图;
图2为本发明实施例提供的一种支持全景声的音频转播系统的结构示意图;
图3为本发明实施例提供的22.2的音箱或扬声器的布置结构图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
现有技术中并没有配合8K全景声的音频转播系统,并且传统音频转播系统的接线方式复杂,需要考虑新的技术来进行连接,并且传统音频转播系统没有8K的参考视频,制作的音频与视频配合较为困难,并且传统音频转播系统缺少现场声音的记录和制作,此外由于全景声还没有普及,所以需要考虑建设支持多种制式的监听环境。
基于上述问题,本发明实施例提供了一种支持全景声的音频转播方法和音频转播系统,为了便于对本发明实施例进行理解,首先对本发明提供的一种支持全景声的音频转播方法进行详细介绍,该方法应用于音频转播系统;该音频转播系统上包含有互相通信连接的调音装置、声音播放装置和音频处理装置;如图1所示,该方法包括如下具体步骤:
步骤S102,通过调音装置接收原始音频,并对原始音频进行初步制作,将初步制作后的原始音频发送给声音播放装置,或者,将调音装置中的音频数据发送给音频处理装置;其中,音频数据包括原始音频、制作参数和初步制作后的原始音频中的一种或多种。
在具体实现时,上述调音装置对原始音频的初步制作一般指混音。
步骤S104,若调音装置将初步制作后的原始音频发送给声音播放装置,通过声音播放装置对初步制作后的音频进行监听。
步骤S106,若调音装置将音频数据发送给音频处理装置,则通过音频处理装置针对音频数据进行二次制作,并将二次制作后的音频返回给调音装置,或者,将二次制作后的音频发送给声音播放装置,以通过声音播放装置对二次制作后的音频进行监听。
在具体实现时,上述音频处理装置对音频数据的二次制作包括对音频数据的剪辑和混音制作,具体地包括以下几种:
(1)当音频数据包括原始音频和/或初步制作后的原始音频时,音频处理装置可以对原始音频和/或初步制作后的原始音频进行剪辑。也即是,音频处理装置可以对原始音频进行剪辑,也可以对初步制作后的原始音频进行剪辑,还可以即对原始音频剪辑又对初步制作后的原始音频进行剪辑。其中也可根据需要进行进一步混音制作。
(2)当音频数据包括原始音频时,音频处理装置可以根据预设参数,对原始音频进行混音制作,其中也可根据需要进行剪辑。该预设参数通常是预先设置好的制作参数。
(3)当音频数据包括原始音频和制作参数时,音频处理装置可以调整该制作参数,并通过调整后的制作参数对原始音频进行混音制作。其中,调整制作参数的方式包括:对制作参数进行修改或是使用新的制作参数替换部分制作参数。
(4)当音频数据包括初步制作后的原始音频和制作参数时,音频处理装置可以调整制作参数,并通过调整后的制作参数对初步制作后的原始音频进行混音制作。
(5)当音频数据包括初步制作后的原始音频时,音频处理装置可以根据新增参数,对初步制作后的原始音频进行混音制作。该新增参数也即是在音频处理装置增加的新的制作参数。
(6)当音频数据包括原始音频、制作参数和初步制作后的原始音频时,音频处理装置可调整制作参数,并通过调整后的制作参数对初步制作后的原始音频进行混音制作,得到第一音频;通过音频处理装置根据新增参数,对初步制作后的原始音频进行混音制作,得到第二音频;对第一音频和第二音频进行剪辑。
在一些实施例中,调音装置发送的音频数据包括原始音频和制作参数,音频处理装置对音频数据进行二次制作包括:通过调整制作参数或替换部分制作参数对原始音频进行混音制作,其中也可根据需要进行剪辑。
在一些实施例中,调音装置发送的音频数据包括原始音频、制作参数和所述初步制作后的原始音频。音频处理装置对音频数据进行二次制作包括:通过调整制作参数或替换部分制作参数对原始音频进行混音制作、对初步制作后的原始音频进行混音制作、以及进行适当的剪辑。
步骤S108,若音频处理装置将二次制作后的音频返回给调音装置,通过调音装置对二次制作后的音频进行三次制作,并将三次制作后的音频发送给声音播放装置,以通过声音播放装置对三次制作后的音频进行监听。
在一些实施例中,还可以通过调音装置将接收的原始音频,以及对原始音频进行初步制作的制作参数发送给音频处理装置;通过音频处理装置将原始音频和对原始音频进行初步制作的制作参数合成文件,并保存文件。
进一步地,还可以通过音频处理装置调整制作参数,并将调整后的制作参数返回给调音装置,以使调音装置根据调整后的制作参数对音频进行制作。
本发明提供的一种支持全景声的音频转播方法,可实现调音装置和音频处理装置联合制作音频,从而可结合每个设备的特点得到质量更高、音效更多、更加满足人们所需的全景声。
本发明实施例还提供了一种支持全景声的音频转播系统,如图2所示,该转播系统包括:互相通讯连接的调音装置10、声音播放装置11和音频处理装置12。
上述调音装置10用于对接收到的音频进行制作处理,并将接收到的音频、制作后的音频和制作参数发送给音频处理装置12,或者将制作后的音频发送给声音播放装置11,或将接收到的音频、制作后的音频和制作参数发送给音频处理装置12的同时将制作后的音频发送给声音播放装置11;音频处理装置12用于对接收到的音频进行录制和混音制作,并将混音制作后的音频输出到调音装置10或声音播放装置11,或同时将混音制作后的音频输出到调音装置10和声音播放装置11;该声音播放装置11用于播放接收到的音频。
在具体实现时,上述调音装置10输出的制作后的音频的格式包括22.2格式、5.1.4格式、5.1格式或者2.0格式等多种格式。具体地,调音装置10可以发送出的音频一般要保证先出最高格式是22.2,其中22.2格式的音频占据输出的头24路,之后可以下边换成5.1.4,该5.1.4格式的音频占据输出的25-34路,输出的35路和36路给出立体声(或输出的35-40路给出5.1格式的音频)。其中,声音制式的要求,第一位代表参考层面的个数,即5.1.4中5代表人耳高度层有5个监听音箱,分别为左声道、右声道、中间、左环绕和右环绕,“.1”代表低音扩展音箱,“.4”代表顶层位置有4个监听音箱,分别为左前,右前,左后跟右后。
在一些实施例中,上述调音装置10还可以不对接收到的音频做任何处理,直接将接收到音频发送给音频处理装置12或者声音播放装置11。
上述音频处理装置12用于对接收到的音频进行录制、混音制作、合成输出或者存储处理;具体地,音频处理装置12可以对接收的音频进行录制和混音制作,并将混音制作后的音频输出到调音装置10或者声音播放装置11,或者同时将混音制作后的音频输出到调音装置和声音播放装置。
该音频处理装置12接收到的音频包括音频采集装置发送的原始音频,或者调音装置10发送的制作后的音频。一般来说,音频处理装置12的存储模块可以直接对接收的话筒(也即是音频采集装置)收到的原始音频进行存储,也可与调音装置10连接,并将接收的原始音频和调音装置10对原始音频的制作参数合成文件,并保存文件。
在一些实施例中,上述音频处理装置12可以直接将未处理的音频发送给声音播放装置11进行播放监听;可以将混音制作后的音频输出到声音播放装置11进行播放监听;也可以将混音制作后的音频通过调音装置10发送给声音播放装置11进行播放监听;还可以将混音制作后的音频返回给调音装置10,以由调音装置10对混音制作后的音频进行进一步制作,之后音频处理装置12还可以存储调音装置10进一步制作的制作参数,从而实现音频处理装置12和调音装置10的联合使用。其中,制作参数为调音装置对音频进行制作时所采用的参数。
在具体实现时,上述音频处理装置12还用于调整调音装置10的制作参数,并将调整后的制作参数发给调音装置10,以使调音装置10根据调整后的制作参数对音频进行制作(也可以对音频分段重新制作)。此过程可以用在直播中,即在直播前提前设计好操作参数,等到直播使用时直接由音频处理装置控制调音装置进行调音。
上述音频处理装置12可以同调音装置10一样输出多种格式的音频(例如,22.2格式、5.1.4格式、5.1格式、2.0格式等多种格式),具体描述参见对调音装置10的描述,在此不再赘述。
在实际应用中,上述声音播放装置11用于播放接收到的音频或采集到的音频,以使制作人员对播放的音频进行监听。
在实际应用中,上述调音装置10可用在直播场景中,也可以用于后期制作。同时,上述音频处理装置12一般在后期制作时使用,由于音频处理装置12调音功能较多,且操作比调音装置10要复杂一些,因而不太适合应用于直播场景中。
进一步地,上述音频转播系统还包括视频参考装置21;该视频参考装置包括视频接收设备120、视频存储设备121和视频播放设备122;该视频接收设备120用于接收参考视频,并将接收的参考视频发送给视频存储设备121和/或视频播放设备122;视频存储设备用于存储接收的参考视频;视频播放设备用于播放所述接收的参考视频。该视频为8K视频或者4K视频,以给制作人更清晰的参考视频,便于制作人做出与视频同步的,并更贴合视频内容的音频。音频可以预先设置于调音装置的操作面板对应的制作参数,并保存,并在直播时应用到调音装置,完成复杂的制作。其中,参考视频是指与音频同步的视频,可以在制作音频或播放音频时播放与音频同步的视频,便于制作更贴合视频的音频。
调音装置10支持和视频参考装置21的联动,即调音装置10和视频参考装置21有端口连接,统一时钟,通过调音装置10的调音完成现场制作,得到之后的音频供视频参考装置21使用。在实际应用中,上述视频参考装置21与音频处理装置12连接,调音装置10不直接控制视频参考装置21的播放,音频处理装置12可以直接控制视频参考装置21。
在具体实现时,调音装置10可以通过音频电缆与音频处理装置12和声音播放装置11连接。
在一些实施例中,上述调音装置10还可以通过IP(Internet Protocol,网际互连协议)协议与音频处理装置12和声音播放装置11连接;上述音频处理装置12与声音播放装置11也可通过IP协议连接。因此,转播系统可以实现车内设备通过IP架构进行互通,即调音装置10、音频处理装置12、声音播放装置11和视频参考装置21之间通过网络IP协议连接,从而可以减少连线,简化连接。
在一些实施例中,上述调音装置10和声音播放装置11之间还通过AOIP(AudioOver Internet Protocol,音频网际互连协议)连接,支持dante协议和Ravenna协议。
关于视频参考装置21,由于转播系统内的系统之间通过网络IP协议进行互联。在直播时,视频参考装置21同步播放正在播放的视频,调音装置10对与该视频对应的音频进行制作。在进行后期制作时,音频处理装置12内存储有录制的参考视频,音频处理装置12制作时,通过视频参考装置21播放存储的参考视频。
在实际应用中,上述转播系统上设置有接口箱,该接口箱与调音装置10和音频采集装置的舞台接口装置连接,该音频采集装置可以是舞台上的话筒。通过舞台接口装置可以将音频采集装置采集到的原始音频发送至调音装置10,以使调音装置对原始音频进行处理和制作,并将制作后的音频发送给声音播放装置11进行监听,或者发送给音频处理装置12。
在上述声音播放装置中,转播系统的车厢上设置有双侧拉结构以增大车厢的容积,并在其中增加多个监听音箱和低音扩展音箱形成三维还音空间(参见图3),以播放调音装置10或音频处理装置12发送的音频。上述声音播放装置还包括多个监听音箱和监听校准套件,图3中示出的22.2的监听音箱或扬声器的布置结构。22.2代表包括22个监听音箱和两个低音扩展音箱,其中顶层设置有9个监听音箱,前、中和后分别并列设置3个监听音箱,中层设置10个监听音箱,前、中和后分别并列设5个、2个和3个监听音箱,中间的两个分别设置在左右两侧,中间位置是用户监听音频的位置,底层设置有3个,均设置在前方。其中,低音扩展音箱(图中未示出)因为其声音指向性不强,理论上可以设置于任意位置,在实际操作时可以设置于前方。
本实施例中,音频转播系统的调音装置的输出端是与声音播放装置固定连接的。在本发明中,调音装置设备内部具备音频路由装置,可将原始音频中的任一一路音频路由到任何一个监听音箱播放,同时,音频处理装置的输出音频,也会以AOIP的形式,通过IP数据包输入到调音装置,调音装置将IP数据包中的音频还原后,可将任意一路音频输出到任何一个监听音箱播放。
但是实际上,无论输入的原始音频,还是音频处理装置输出的音频,都会按照其在特定声音场景中,应该出现的位置,路由到相应的监听音箱播放。再进一步的,这些被播放的音频,既可以单独某声道被播放,也可以某几路声道一同组合播放。前文中提到的22.2声音格式,或者5.1.4声音格式,就是特定的某些路音频播放到特定的监听音箱上的组合方式的典型例子。
在实际应用中,本发明的转播系统,调音装置原始接收的音频、调音装置输出的音频(可能有制作完成的,也可能有正在制作中的)、音频处理装置输出的音频(可能有制作完成的,也可能有正在制作中的),在任意时刻都可以根据实际使用需求被选定到监听音箱上去播放。需要说明的是,同一时间,对于一个指定的监听音箱,只能有一个音源被播放。再进一步的,通常情况下,本发明的实施例中,同一时刻在监听音箱中播放的声音,要么都是来源于原始接收的音频,要么都是来源于调音装置输出的音频,或者都是来源于音频处理装置输出的音频。
在一些实施例中,上述调音装置可以为调音台。
在一些实施例中,上音频处理装置为可以音频工作站。
上述支持全景声的音频转播系统上设置视频参考装置,在制作人制作音频的时候同步播放参考画面,以使制作人能够根据画面调整音频效果。同时本申请的调音装置和音频处理装置可以单独制作音频,也可以联合制作音频,以便于结合每个调音设备的特点,得到更高质量的全景声。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。

Claims (10)

1.一种支持全景声的音频转播方法,其特征在于,所述方法应用于音频转播系统;所述音频转播系统上包含有互相通信连接的调音装置、声音播放装置和音频处理装置;所述方法包括:
通过所述调音装置接收原始音频,并对所述原始音频进行初步制作,将初步制作后的原始音频发送给所述声音播放装置,或者,将所述调音装置中的音频数据发送给所述音频处理装置;其中,所述音频数据包括所述原始音频、制作参数和所述初步制作后的原始音频中的一种或多种;
若所述调音装置将初步制作后的原始音频发送给所述声音播放装置,通过所述声音播放装置对所述初步制作后的音频进行监听;
若所述调音装置将所述音频数据发送给所述音频处理装置,则通过所述音频处理装置针对所述音频数据进行二次制作,并将二次制作后的音频返回给所述调音装置,或者,将所述二次制作后的音频发送给所述声音播放装置,以通过所述声音播放装置对所述二次制作后的音频进行监听;
若所述音频处理装置将所述二次制作后的音频返回给所述调音装置,则通过所述调音装置对所述二次制作后的音频进行三次制作,并将三次制作后的音频发送给所述声音播放装置,以通过所述声音播放装置对所述三次制作后的音频进行监听;其中,所述调音装置输出的制作后的音频的格式包括:22.2格式、5.1.4格式、5.1格式、2.0格式。
2.根据权利要求1所述的支持全景声的音频转播方法,其特征在于,
所述音频数据包括所述原始音频和/或所述初步制作后的原始音频,所述通过所述音频处理装置针对所述音频数据进行二次制作的步骤,包括:
通过所述音频处理装置,对所述原始音频和/或所述初步制作后的原始音频进行剪辑。
3.根据权利要求1所述的支持全景声的音频转播方法,其特征在于,
所述音频数据包括原始音频,所述通过所述音频处理装置针对所述音频数据进行二次制作的步骤,包括:
通过所述音频处理装置根据预设参数,对所述原始音频进行混音制作。
4.根据权利要求1所述的支持全景声的音频转播方法,其特征在于,
所述音频数据包括原始音频和所述制作参数,所述通过所述音频处理装置针对所述音频数据进行二次制作的步骤,包括:
通过所述音频处理装置调整所述制作参数,并通过调整后的制作参数对所述原始音频进行混音制作。
5.根据权利要求1所述的支持全景声的音频转播方法,其特征在于,
所述音频数据包括初步制作后的原始音频和所述制作参数,所述通过所述音频处理装置针对所述音频数据进行二次制作的步骤,包括:
通过所述音频处理装置调整所述制作参数,并通过调整后的制作参数对所述初步制作后的原始音频进行混音制作。
6.根据权利要求1所述的支持全景声的音频转播方法,其特征在于,
所述音频数据包括初步制作后的原始音频,所述通过所述音频处理装置针对所述音频数据进行二次制作的步骤,包括:
通过所述音频处理装置根据新增参数,对所述初步制作后的原始音频进行混音制作。
7.根据权利要求1所述的支持全景声的音频转播方法,其特征在于,若所述音频数据包括所述原始音频、制作参数和所述初步制作后的原始音频,所述通过所述音频处理装置针对所述音频数据进行二次制作的步骤,包括:
通过所述音频处理装置调整所述制作参数,并通过调整后的制作参数对所述初步制作后的原始音频进行混音制作,得到第一音频;
通过所述音频处理装置根据新增参数,对所述初步制作后的原始音频进行混音制作,得到第二音频;
对所述第一音频和所述第二音频进行剪辑。
8.根据权利要求1-7任一项所述的支持全景声的音频转播方法,其特征在于,所述方法还包括:
通过所述调音装置将接收的原始音频,以及对所述原始音频进行初步制作的制作参数发送给所述音频处理装置;
通过所述音频处理装置将所述原始音频和对所述原始音频进行初步制作的制作参数合成文件,并保存所述文件。
9.根据权利要求8所述的支持全景声的音频转播方法,其特征在于,所述方法还包括:
通过所述音频处理装置调整所述制作参数,并将调整后的制作参数返回给所述调音装置,以使所述调音装置根据调整后的制作参数对音频进行制作。
10.一种支持全景声的音频转播系统,其特征在于,所述音频转播系统包括:互相通信连接的调音装置、声音播放装置和音频处理装置;
所述调音装置用于对接收到的音频进行制作处理,并将接收到的音频、制作后的音频和制作参数发送给所述音频处理装置,和/或者所述调音装置将制作后的音频发送给所述声音播放装置;
所述音频处理装置用于对接收到的音频进行录制和混音制作,并将混音制作后的音频输出到所述调音装置和/或所述声音播放装置;
所述调音装置还用于对接收到的混音制作后的音频后的音频进行三次制作,并将三次制作后的音频发送给所述声音播放装置,其中,所述调音装置输出的制作后的音频的格式包括:22.2格式、5.1.4格式、5.1格式、2.0格式;
所述声音播放装置用于播放接收到的音频。
CN202111443440.0A 2021-11-30 2021-11-30 支持全景声的音频转播方法和音频转播系统 Active CN114157894B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111443440.0A CN114157894B (zh) 2021-11-30 2021-11-30 支持全景声的音频转播方法和音频转播系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111443440.0A CN114157894B (zh) 2021-11-30 2021-11-30 支持全景声的音频转播方法和音频转播系统

Publications (2)

Publication Number Publication Date
CN114157894A CN114157894A (zh) 2022-03-08
CN114157894B true CN114157894B (zh) 2024-01-30

Family

ID=80784447

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111443440.0A Active CN114157894B (zh) 2021-11-30 2021-11-30 支持全景声的音频转播方法和音频转播系统

Country Status (1)

Country Link
CN (1) CN114157894B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106653067A (zh) * 2015-10-28 2017-05-10 腾讯科技(深圳)有限公司 一种信息处理方法及终端
CN107948797A (zh) * 2017-12-15 2018-04-20 歌尔科技有限公司 一种音频播放设备
CN109147747A (zh) * 2018-09-27 2019-01-04 歌尔股份有限公司 一种加载调音参数的方法、播放设备、服务器及系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6888999B2 (en) * 2001-03-16 2005-05-03 Magix Ag Method of remixing digital information
US10496250B2 (en) * 2011-12-19 2019-12-03 Bellevue Investments Gmbh & Co, Kgaa System and method for implementing an intelligent automatic music jam session

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106653067A (zh) * 2015-10-28 2017-05-10 腾讯科技(深圳)有限公司 一种信息处理方法及终端
CN107948797A (zh) * 2017-12-15 2018-04-20 歌尔科技有限公司 一种音频播放设备
CN109147747A (zh) * 2018-09-27 2019-01-04 歌尔股份有限公司 一种加载调音参数的方法、播放设备、服务器及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
广播电视工程中数字音频技术的优势及其应用分析;吴金红;;卫星电视与宽带多媒体(第13期);全文 *
浙江卫视"领跑2019‘爱你依旧’演唱会"音频系统设计及全景声制播实践;郑红哲;吴晓东;;现代电视技术(第03期);正文第133-136页 *

Also Published As

Publication number Publication date
CN114157894A (zh) 2022-03-08

Similar Documents

Publication Publication Date Title
CN103650539B (zh) 用于自适应音频信号产生、编码和呈现的系统和方法
JP5174527B2 (ja) 音像定位音響メタ情報を付加した音響信号多重伝送システム、制作装置及び再生装置
CN101473645B (zh) 使用预设音频场景的基于对象的三维音频服务系统
US20050281421A1 (en) First person acoustic environment system and method
CN1177433A (zh) 家庭影院环绕声扬声器系统
KR20060079128A (ko) 통합형 오디오 처리 시스템, 오디오 신호 조절 방법 및제어 방법
CN1277532A (zh) 多声道音频重放装置和方法
JP2009537876A (ja) プリセットオーディオシーンを用いたオブジェクトベースの3次元オーディオサービスシステム及びその方法
KR101682323B1 (ko) 음향 신호 기술 방법, 음향 신호 생성 장치 및 음향 신호 재생 장치
US20210247953A1 (en) System and Method for Manipulating and Transmitting Live Media
Prior et al. Designing a system for Online Orchestra: Peripheral equipment
CN114157894B (zh) 支持全景声的音频转播方法和音频转播系统
Krebs The failure of binaural stereo: German sound engineers and the introduction of artificial head microphones
KR20140090469A (ko) 영상표시장치의 동작 방법
CN105810221A (zh) 一种无线同步音频播放系统
JP7447808B2 (ja) 音声出力装置、音声出力方法
CN112073890B (zh) 音频数据处理方法、装置和终端设备
CA3033282A1 (en) A method and a system for presenting media
JP2002176700A (ja) 信号処理装置および記録媒体
CN114040316A (zh) 支持三维声的转播车
WO2019188091A1 (ja) 映像挿入装置、映像表示端末装置
Pike 3D audio in broadcasting
US11924622B2 (en) Centralized processing of an incoming audio stream
Thomas et al. State‐of‐the‐Art and Challenges in Media Production, Broadcast and Delivery
Mróz et al. A commonly-accessible toolchain for live streaming music events with higher-order ambisonic audio and 4k 360 vision

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant