CN107820099A - 一种多媒体流的生成方法及装置 - Google Patents

Abstract

本发明实施例提供了一种多媒体流的生成方法及装置，该方法包括：采集至少一路音频信号；将每路所述音频信号分别进行模数转换；将模数转换后的所述音频信号通过无线网络发送给至少一个智能终端，以生成多媒体流。本发明实施例得到的多媒体流不夹杂环境杂音，音质清晰，并且得到该多媒体流的方法简单便利。

Description

一种多媒体流的生成方法及装置

技术领域

本发明涉及通信技术领域，特别是涉及一种多媒体流的生成方法及装置。

背景技术

现代人们的生活与手机、平板电脑等移动终端有着密不可分的联系，例如移动终端经常被用于录音或录制音视频。使用移动终端录取音频或音视频时，通常使用移动终端自带的麦克风采集音频信号，所以导致录制的音频或音视频通常会夹杂很多环境噪音，而且音质不清晰。

在专业录音，例如歌曲录制、MV录制中，通常需要将接收到的音频信号通过有线传输方式传输到电脑或者专业录音设备中，进行后期编辑，虽然能够得到清晰的声音，但是设备复杂，需要较高的专业既能，一般消费者无法完成录制，同时录制过程由于线缆的束缚，操作非常不便。

发明内容

本发明实施例所要解决的技术问题是提供一种多媒体流的生成方法，以解决利用现有音频或音视频录制方法得到的多媒体流会夹杂环境噪音，而且音质不清晰的问题。

相应的，本发明实施例还提供了一种多媒体流的生成装置，用以保证上述方法的实现及应用。

为了解决上述问题，本发明公开了一种多媒体流的生成方法，所述方法包括：

采集至少一路音频信号；

将每路所述音频信号分别进行模数转换；

将模数转换后的所述音频信号通过无线网络发送给至少一个智能终端，以生成多媒体流。

进一步地，所述采集至少一路音频信号的步骤之前，包括：

连接到WiFi网络中，并获取WiFi网络的IP地址；

通过WiFi网络接收所述智能终端发送的广播信号；

基于所述广播信号，将所述IP地址发送给所述智能终端；

接收所述智能终端发送的连接请求信号；

基于所述连接请求信号，通过所述WiFi网络与所述智能终端进行无线通信连接。

进一步地，所述智能终端包括移动终端、车载智能终端、智能电视、可穿戴设备中的一种或多种。

本发明实施例还提供了一种多媒体流的生成方法，包括：

通过无线网络同步接收至少一个音频信号转发装置发送的音频信号；

根据所述音频信号生成多媒体流。

进一步地，所述通过无线网络同步接收至少一个音频信号转发装置发送的音频信号的步骤之前，包括：

接入WiFi网络中；

向所述WiFi网络发送广播信号；

接受所述音频信号转发装置发送的所述WiFi网络的IP地址；

根据所述IP地址，向所述音频信号转发装置发送连接请求信号；

接收所述音频信号转发装置发送的连接应答信号；

基于所述连接应答信号，通过所述WiFi网络与所述音频信号转发装置进行无线通信连接。

进一步地，根据所述音频信号生成多媒体流的步骤，包括：

若接收到至少两路所述音频信号，则对所述至少两路所述音频信号进行多轨混音，获得混合音频信号；

根据所述混合音频信号生成多媒体流。

进一步地，所述方法还包括：

采集视频信号；

相应地，根据所述混合音频信号生成多媒体流的步骤，还包括：

将所述视频信号与所述混合音频信号封装成音视频流。

进一步地，根据所述音频信号生成多媒体流的步骤之后，还包括：

将所述多媒体流通过互联网发送给终端或服务器。

本发明实施例还提供了一种多媒体流的生成装置，所述装置包括：

第一采集模块，用于采集至少一路音频信号；

模数转换模块，用于将每路所述音频信号分别进行模数转换；

发送模块，用于将模数转换后的所述音频信号通过无线网络发送给至少一个智能终端，以生成多媒体流。

本发明实施例还提供了一种多媒体流的生成装置，所述装置包括：

接收模块，用于通过无线网络同步接收至少一个音频信号转发装置发送的音频信号；

多媒体流生成模块，用于根据所述音频信号生成多媒体流。

与现有技术相比，本发明实施例包括以下优点：

本发明实施例提供了一种多媒体流的生成方法，包括采集至少一路音频信号，将每路所述音频信号分别进行模数转换，最后将模数转换后的所述音频信号通过无线网络发送给至少一个智能终端，以生成多媒体流，本发明实施例得到的多媒体流不夹杂环境杂音，音质清晰，并且得到该多媒体流的方法简单便利。

附图说明

图1是本发明实施例提供的一种多媒体流的生成方法的流程图；

图2是本发明实施例提供一种音频信号转发装置与智能终端的连接方式；

图3是本发明实施例提供的另一种多媒体流的生成方法的流程图；

图4是本发明实施例提供另一种音频信号转发装置与智能终端的连接方式；

图5是本发明实施例提供的再一种多媒体流的生成方法的流程图；

图6是本发明实施例提供的音频信号转发装置的结构框图；

图7是本发明实施例提供的智能终端的结构框图。

具体实施方式

为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。

参照图1，示出了本发明实施例提供的一种多媒体流的生成方法的流程图，本发明实施例从音频信号转发装置一侧进行说明，该方法具体可以包括如下步骤：

步骤101，与至少一个智能终端建立无线通信连接。

在本发明实施例的一种优选示例中，步骤101具体可以包括：

步骤11，连接到WiFi网络中，并获取WiFi网络的IP地址(Internet ProtocolAddress)。

步骤12，智能终端向所述WiFi网络发送广播信号。

步骤13，通过WiFi网络接收所述智能终端发送的广播信号。

步骤14，基于所述广播信号，将所述IP地址发送给所述智能终端。

步骤15，所述智能终端根据所述IP地址，向音频信号转发装置发送连接请求信号。

步骤16，接收所述智能终端发送的连接请求信号；

步骤17，基于所述连接请求信号，通过所述WiFi网络与所述智能终端进行无线通信连接。

在本发明实施例中可以在WiFi网络中建立TCP/IP(Transmission ControlProtocol/Internet Protocol，传输控制协议/网际协议，)或者UDP(User DatagramProtocol，用户数据包协议)无线通信连接。

待该无线通信连接成功后，智能终端界面可以显示连接成功。

通过上述建立无线通信连接的方法，可以实现一个音频信号转发装置与一个智能终端建立无线通信连接，多个音频信号转发装置与一个智能终端建立无线通信连接，一个音频信号转发装置与多个智能终端建立无线通信连接，多个音频信号转发装置与多个智能终端建立无线通信连接。

其中，多个音频信号转发装置与一个智能终端建立无线通信连接的方式如图2所示。

步骤102，采集至少一路音频信号。

在本发明实施例中，可以通过麦克风等音频信号采集装置采集该音频信号，然后可以根据信号处理需要进行信号放大。

在具体应用中，同一场景下可以包括多处声源，每处声源可以对应一个音频信号采集装置，用于准确地、同步地接收每处的声源发出的音频信号，用以保证录制的音频的清晰度以及全面性。

步骤103，将每路所述音频信号分别进行模数转换。

在具体实现中，音频信号采集装置采集到的音频信号通常为模拟音频信号，所以可以通过A/D转换器将模拟音频信号转换为数字音频信号。

步骤104，将模数转换后的所述音频信号通过无线网络发送给至少一个智能终端，以生成多媒体流。

在具体实现中，对模数转换后的所述音频信号进行传输之前，需要设置音频信号转发装置和智能终端之间的通信协议，以保证音频信号通过WiFi网络顺利发送给智能终端。

在具体实现中，可以通过MCU(Micro Control Unit，微控制单元)实现对通信协议的设置。在设置通信协议时，可以在音频信号的基础上增加命令位、发送端标识、时间戳、效验位等数据，以便保证通过无线传输后，数据的时序性及有效性，同时可以增加一些命令数据，用于建立音频信号转发装置和智能终端更可靠的无线通信指令。

在设置通信协议时，可以根据具体情况对音频信号进行压缩，例如可以将其压缩成MP3、AAC等不同的格式，以提高传输速度。

最后基于该通信协议，通过WiFi网络将模数转换后的所述音频信号以数据包的形式发送给至少一个智能终端。

本发明实施例通过WiFi网络传输音频信号，提高了音频信号的传输速率，从而实现将采集的音频信号与采集的视频信号进行同步封装，避免音视频中的音频出现延迟。

本发明实施例得到的多媒体流不夹杂环境杂音，音质清晰，并且得到该多媒体流的方法简单便利。

参照图3，示出了本发明实施例提供的另一种多媒体流的生成方法的流程图，本发明实施例从智能终端一侧进行说明，该方法具体可以包括：

步骤301，与至少一个音频信号转发装置建立无线通信连接。

在本发明实施例的一种优选示例中，步骤301具体可以包括：

步骤21，接入WiFi网络中。

步骤22，向所述WiFi网络发送广播信号。

步骤23，音频信号转发装置通过WiFi网络接收所述广播信号。

步骤24，音频信号转发装置基于所述广播信号，将所述IP地址发送给智能终端。

步骤25，根据所述IP地址，向所述音频信号转发装置发送连接请求信号。

步骤26，接收所述音频信号转发装置发送的连接应答信号。

步骤27，基于所述连接应答信号，通过所述WiFi网络与所述音频信号转发装置进行无线通信连接。

步骤302，通过无线网络同步接收至少一个音频信号转发装置发送的音频信号。

在本发明实施例的一种优选示例中，可以通过WiFi网络接收至少一路音频信号。该音频信号由音频信号转发装置发出，每一路音频信号可以对应一个音频信号转发装置。音频信号转发装置与智能终端采用相同的网络协议，例如TCP/IP或UDP协议，从而将音频信号转发装置与智能终端建立无线通信连接。智能终端按照TCP/IP或UDP协议获取到数据包后，需要解析判断数据包中命令位、发送端标识、时间戳、效验位，从而执行相应的数据效验及指令操作。如果判断出接收到的数据是音频信号，则去除音频信号中的命令位、发送端标识、时间戳、效验位等，从而得到真正的带发送端标识的音频信号。

步骤303，根据所述音频信号生成多媒体流。

在本发明实施例中，步骤203具体可以包括：

步骤31，若接收到至少两路所述音频信号，则对所述至少两路所述音频信号进行多轨混音，获得混合音频信号；

步骤32，根据所述混合音频信号生成多媒体流。

该多媒体流包括音频流和音视频流。

本发明实施例可以根据接收的一路音频信号生成音频流，也可以根据该混合音频信号生成音频流。

在具体实现中，可以对接收到的音频信号或经过多轨混音得到的混合音频信号，进行不同格式的转码，例如转换为mp3、AAC等格式的音频流，进而可以保存为音频文件。

多轨混音可以应用在多个音频信号转发装置与一个智能终端建立无线通信连接，或多个音频信号转发装置与多个智能终端建立无线通信连接的场景下。在每个智能终端中，可以通过多轨混音录制将多个音频信号转发装置发送的音频信号混合成一路音频信号，例如可以同步采集不同的乐器发出的声音得到多路音频信号，将该多路信号通过音频信号转发装置发送给智能终端，智能终端再将接受到的多路音频信号进行多轨混音，最后可以生成音乐文件。

在具体应用中，如图4所示，也可以先将从不同声源处采集得到的音频信号通过混音装置进行多轨混音，混合成一路音频信号，再通过音频信号转发装置将经过多轨混音成的音频信号发送给一个或多个智能终端。此种情况可以应用于一个音频信号转发装置与一个智能终端建立无线通信连接，或一个音频信号转发装置与多个智能终端建立无线通信连接的场景中。

本发明实施例提供的方法还包括：采集视频信号。

相应地，步骤303还可以包括：

将所述视频信号与接收的一路音频信号封装成音视频流；或者，

将所述视频信号与所述混合音频信号封装成音视频流。

所以本发明实施例既可以根据单独的音频信号得到音频流，还可以将音频信号与视频信号进行封装，得到音视频流，最后进行保存为音频文件或音视频文件。

该智能终端包括移动终端、车载智能终端、智能电视、可穿戴设备中的一种或多种。

智能终端可以通过安装APP(Application，第三方应用程序)的方法接受音频信号转发装置发送的音频信号，进而得到音频文件，或结合智能终端上的摄像装置得到音视频文件。

例如，在进行家庭KTV时，可以通过手机或正在播放MV(Music Video，音乐视频)的智能电视，来实现对演唱歌曲的人声进行录制得到音频流，或同时对演唱歌曲的画面进行录制，得到音视频流。通过本发明实施例得到的多媒体流，不仅不夹杂环境噪音，音质清晰，而且实现方法简单。

通过本发明实施例可以实现对音乐会或演唱会进行音频录制或音视频录制，以及对MV的录制，得到的多媒体流音质清晰，并且操作简单便利，成本低。

步骤304，将所述多媒体流通过互联网发送给终端或服务器。

终端接收到多媒体流后可以进行实时播放或录制；服务器接收到多媒体流后可以进行云端传输及大数据信号处理。

该终端包括智能终端和计算机。通过智能终端将多媒体流发送给终端，终端能够实时播放或录制智能终端发送的音频或音视频。本发明实施例可以通过智能终端，例如手机实现网络直播或新闻播放等现场直播场景，而且音质清晰，能够满足专业级的音质需求，实现方法简单便利。

参照图5，示出了一种多媒体流的生成方法的流程图，本发明实施例从智能终端一侧进行说明，该方法具体可以包括：

步骤501，采集视频信号，并通过WiFi网络同步接收至少一路音频信号。

在具体实现中，采集视频信号与接收音频信号可以同步进行。

步骤502，判断接收到的音频信号的数目i，若接收到一路音频信号，则执行下一步，若接收到至少两路音频信号，则执行步骤504；

步骤503，将视频信号与音频信号封装成音视频流。

步骤504，对接收到的全部音频信号进行多轨混音，获得混合音频信号。

步骤505，将该视频信号与混合音频信号封装成音视频流。

本发明实施例通过WiFi网络传输音频信号，提高了音频信号的传输速率，从而实现将采集的音频信号与采集的视频信号进行同步封装，避免音视频中的音频出现延迟。

本发明实施例得到的多媒体流音质清晰，能够实现专业级的音频或音视频录制效果，并且实现方法简单便利，成本低。

本发明实施例还提供一种多媒体流的生成装置，该装置具体可以包括至少一个音频信号转发装置和至少一个智能终端。

如图6所示，该音频信号转发装置具体可以包括：

第一连接模块601，与至少一个智能终端建立无线通信连接。

在本发明实施例的一种优选示例中，第一连接模块601具体可以包括：

获取IP地址单元，用于连接到WiFi网络中，并获取WiFi网络的IP地址。

发送广播信号单元，用于通过WiFi网络接收所述智能终端发送的广播信号。

IP地址发送单元，用于基于所述广播信号，将所述IP地址发送给所述智能终端。

请求信号接收单元，用于接收所述智能终端发送的连接请求信号。

第一连接单元，用于基于所述连接请求信号，通过所述WiFi网络与所述智能终端进行无线通信连接。

音频信号采集模块602，用于采集至少一路音频信号。

模数转换模块603，用于将每路所述音频信号分别进行模数转换。

发送模块604，用于将模数转换后的所述音频信号通过无线网络发送给至少一个智能终端，以生成多媒体流。

如图7所示，该智能终端具体可以包括：

第二连接模块701，用于与至少一个音频信号转发装置建立无线通信连接。

在本发明实施例的一种优选示例中，第二连接模块701具体可以包括：

接入网络单元，用于接入WiFi网络中。

广播信号发送单元，向所述WiFi网络发送广播信号。

请求信号发送单元，用于根据所述IP地址，向所述音频信号转发装置发送连接请求信号。

应答信号接收单元，用于接收所述音频信号转发装置发送的连接应答信号。

第二连接单元，用于基于所述连接应答信号，通过所述WiFi网络与所述音频信号转发装置进行无线通信连接。

接收模块702，用于通过无线网络同步接收至少一个音频信号转发装置发送的音频信号。

视频信号采集模块703，用于采集视频信号。

多媒体流生成模块704，用于根据所述音频信号生成多媒体流。

在本发明实施例中，多媒体流生成模块704可以包括：

第一多媒体流生成单元，用于：

根据接收的一路音频信号生成音频流；或者，

将所述视频信号与接收的一路音频信号封装成音视频流。

多轨混音单元，用于若接收到至少两路所述音频信号，则对所述至少两路所述音频信号进行多轨混音，获得混合音频信号。

第二多媒体流生成单元，用于根据所述混合音频信号生成多媒体流。

该多媒体流生成单元具体用于：

根据所述混合音频信号生成音频流；或者，

将所述视频信号与所述混合音频信号封装成音视频流。

本发明实施例得到的多媒体流不夹杂环境杂音，音质清晰，并且得到该多媒体流的方法简单便利。

需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。

本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。

本领域内的技术人员应明白，本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此，本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以生成一个机器，使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令生成用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令生成包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上，使得在计算机或其他可编程终端设备上执行一系列操作步骤以生成计算机实现的处理，从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。

最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。

以上对本发明所提供的一种多媒体流的生成方法及装置，进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种多媒体流的生成方法，其特征在于，所述方法包括：

采集至少一路音频信号；

将每路所述音频信号分别进行模数转换；

将模数转换后的所述音频信号通过无线网络发送给至少一个智能终端，以生成多媒体流。

2.根据权利要求1所述的方法，其特征在于，所述采集至少一路音频信号的步骤之前，包括：

连接到WiFi网络中，并获取所述WiFi网络的IP地址；

通过所述WiFi网络接收所述智能终端发送的广播信号；

基于所述广播信号，将所述IP地址发送给所述智能终端；

接收所述智能终端发送的连接请求信号；

基于所述连接请求信号，通过所述WiFi网络与所述智能终端进行无线通信连接。

3.根据权利要求1或2所述的方法，其特征在于，所述智能终端包括移动终端、车载智能终端、智能电视、可穿戴设备中的一种或多种。

4.一种多媒体流的生成方法，其特征在于，包括：

通过无线网络同步接收至少一个音频信号转发装置发送的音频信号；

根据所述音频信号生成多媒体流。

5.根据权利要求4所述的方法，其特征在于，所述通过无线网络同步接收至少一个音频信号转发装置发送的音频信号的步骤之前，包括：

接入WiFi网络中；

向所述WiFi网络发送广播信号；

接受所述音频信号转发装置发送的所述WiFi网络的IP地址；

根据所述IP地址，向所述音频信号转发装置发送连接请求信号；

接收所述音频信号转发装置发送的连接应答信号；

基于所述连接应答信号，通过所述WiFi网络与所述音频信号转发装置进行无线通信连接。

6.根据权利要求4所述的方法，其特征在于，根据所述音频信号生成多媒体流的步骤，包括：

若接收到至少两路所述音频信号，则对所述至少两路所述音频信号进行多轨混音，获得混合音频信号；

根据所述混合音频信号生成多媒体流。

7.根据权利要求6所述的方法，其特征在于：

所述方法还包括：

采集视频信号；

根据所述混合音频信号生成多媒体流的步骤，还包括：

将所述视频信号与所述混合音频信号封装成音视频流。

8.根据权利要求4所述的方法，其特征在于，根据所述音频信号生成多媒体流的步骤之后，还包括：

将所述多媒体流通过互联网发送给终端或服务器。

9.一种多媒体流的生成装置，其特征在于，所述装置包括：

第一采集模块，用于采集至少一路音频信号；

模数转换模块，用于将每路所述音频信号分别进行模数转换；

发送模块，用于将模数转换后的所述音频信号通过无线网络发送给至少一个智能终端，以生成多媒体流。

10.一种多媒体流的生成装置，其特征在于，所述装置包括：

接收模块，用于通过无线网络同步接收至少一个音频信号转发装置发送的音频信号；

多媒体流生成模块，用于根据所述音频信号生成多媒体流。