CN110022510B - 一种声音振动文件的生成方法、解析方法以及相关装置 - Google Patents

Abstract

本申请实施例涉及信号处理技术领域，公开了一种声音振动文件的生成方法、解析方法以及相关装置，该声音振动文件的生成方法，包括：获取声音数据，并将所述声音数据分为第一声道数据和第二声道数据；根据第一声道数据确定出第一振动数据，根据第二声道数据确定出第二振动数据；根据所述第一声道数据、第一振动数据、第二声道数据和第二振动数据生成所述声音振动文件。本申请中，使得电子设备进行声音加振动的提示时，声音的音质不会被损坏，且振动与声音更匹配。

Description

一种声音振动文件的生成方法、解析方法以及相关装置

技术领域

本申请实施例涉及信号处理技术领域，特别涉及一种声音振动文件的生成方法、解析方法以及相关装置。

背景技术

目前，扬声器等音频器件是消费类电子设备的必备单元，线性马达在手机、游戏机、VR等消费类电子设备中的使用越来越多，归功于线性马达可定制化的振动形式，线性马达可以根据不同的电子设备、用户场景提供不一样的触觉反馈。用户在使用手机等电子设备中，提示信息包括声音加振动，在听觉和触觉上创造不同；画面加振动，在视觉和触觉上提升体验，甚至可以声音+画面+震动，在听觉、视觉和触觉上全方位的带来惊奇的体验。

发明人发现现有技术中，对于声音和振动的匹配，有不少研究人员做了努力和尝试，基本上有两种解决方案，第一、对声音进行分类，对每一类设计对应的振动。第二、将声音信号通过某种变换，得到振动信号，形式不固定的振动。对第一种方式，研究人员可以自主设计每一类信号，突出每一类声音和振动结合时的效果，但在调用过程中会出现声音和振动不同步问题。对于第二种方式，但是发出振动会占据原有的声音通道，使得原有的声音通道受到破坏，导致声音质量不好，因此，需要改进同时发出声音和振动的匹配方式。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本申请实施方式的目的在于提供一种声音振动文件的生成方法、解析方法以及相关装置，使得电子设备进行声音加振动的提示时，声音的音质不会被损坏，且振动与声音更匹配。

为解决上述技术问题，本申请的实施方式提供了一种声音振动文件的生成方法，包括：

获取声音数据，并将声音数据分为第一声道数据和第二声道数据；

根据第一声道数据确定出第一振动数据，根据第二声道数据确定出第二振动数据；

根据第一声道数据、第一振动数据、第二声道数据和第二振动数据生成声音振动文件。

本申请的实施方式还提供了一种声音振动文件的解码方法，包括：

将声音振动文件中的数据分离为声音数据和振动数据；

对声音数据进行解析，获取声音数据中的第一声道数据和第二声道数据；

对振动数据进行解析，获取振动数据中的第一振动数据和第二振动数据；

同时将第一声道数据和第二声道数据传输至扬声器，将第一振动数据和第二振动数据传输至振动器。

本申请的实施方式还提供了一种电子设备，包括：

至少一个处理器；以及，

与至少一个处理器通信连接的存储器；

其中，存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行上述的声音振动文件的生成方法。

本申请的实施方式还提供了一种声音振动文件的解码器，包括：分离模块、第一解析模块、第二解析模块和传输模块；

分离模块用于，将声音振动文件中的数据分离为声音数据和振动数据；

第一解析装置用于，对声音数据进行解析，获取声音数据中的第一声道数据和第二声道数据；

第二解析装置用于，对振动数据进行解析，获取振动数据中的第一振动信号和第二振动信号；

传输装置用于，同时将第一声道数据和第二声道数据传输至扬声器，将第一振动信号和第二振动信息传输至振动器。

本申请实施方式还提供了一种电子设备，包括：至少一个处理器；以及，

与至少一个处理器通信连接的存储器；

其中，存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行上述的声音振动文件的解码方法。

本申请实施方式还提供了一种计算机可读存储介质，存储有计算机程序，计算机程序被处理器执行时实现上述的声音振动文件的解码方法。

本申请实施方式相对于现有技术而言，在生成声音振动文件的过程中，将声音转换为两个声道的数据，保证声音文件被损坏，且振动文件是根据声音文件确定的，使得声音和振动更匹配，在对声音振动文件进行解析的过程中，获取声音振动文件中的第一声道数据、二声道数据、第一振动数据和第二振动数据，同时将声道数据传输至扬声器，将振动数据传输至振动器，保证声音和振动同时进行，使得用户在获得听觉效果的同时获取到触觉感受，提高用户体验。

另外，若声音数据为立体声，第一声道数据为左声道数据，第二声道数据为右声道数据；若声音数据不是立体声，第一声道数据与第二声道数据相同。

另外，根据第一声音数据确定出第一振动数据，具体包括：根据预设的采样频率将第一声道数据转换为对应的第一采样数据；根据第一采样数据转换得到第一振动数据。

该实施方式中，每个声道的声音分别转换得到振动数据，使得振动数据和声音数据的匹配更好，进一步提高用户体验。

另外，根据第一采样数据转换得到第一振动数据之后，声音振动文件的生成方法还包括：获取用户对第一振动数据的第一调整信息，根据第一调整信息更新第一振动数据；和/或，获取用户对第二振动数据的第二调整信息，根据第二调整信息更新第二振动数据。

另外，对声音数据进行解析，具体包括：按照声音采样频率对声音数据进行解析；对振动数据进行解析，具体包括：按照振动采样频率对振动数据进行解析；其中，声音采样频率与振动采样频率相同。

附图说明

图1是本申请第一实施方式中声音振动文件的生成方法的流程图；

图2是本申请第二实施方式中声音振动文件的解码方法的流程图；

图3是本申请第三实施方式中声音振动文件的生成装置的结构图；

图4是本申请第四实施方式中声音振动文件的解码器的结构图；

图5是本申请第五实施方式中电子设备的结构图；

图6是本申请第六实施方式中电子设备的结构图。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合附图对本申请的各实施方式进行详细的阐述。然而，本领域的普通技术人员可以理解，在本申请各实施方式中，为了使读者更好地理解本申请而提出了许多技术细节。但是，即使没有这些技术细节和基于以下各实施方式的种种变化和修改，也可以实现本申请所要求保护的技术方案。

需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。

本申请的第一实施方式涉及一种声音振动文件的生成方法，其方法流程如图1所示，包括如下的实施步骤：

步骤101：获取声音数据，并将声音数据分为第一声道数据和第二声道数据。

需要说明的是，本申请实施方式中以双声道的声音文件为例，因此，在对声音数据进行处理时，将声音数据分为两个声道的数据。

具体实施中，若声音数据为立体声，第一声道数据为左声道数据，第二声道数据为右声道数据；若声音数据不是立体声，第一声道数据与第二声道数据相同。

其中，声音数据为立体声则确定出声音数据中的左声道数据和右声道数据，保证声音原有的音质不会被破坏。若声音只有一个声道，则第一声道数据与第二声道数据相同，能够保证声音效果更好。

值得一提的是，此处对声道数据的进一步说明仅是示例，为了得到更好的声音效果，还可以对声道信息进一步划分，例如，对左声道数据划分为第一左声道数据和第二左声道数据。因此，对声道数据进一步的划分能够提高声音振动文件中声音信号的效果。

步骤102：根据第一声道数据确定出第一振动数据，根据第二声道数据确定出第二振动数据。

具体实施中，根据第一声道数据确定出第一振动数据，根据第二声道数据确定出第二振动数据，能够避免直接将声音转换振动信息导致声音音质受损。

一个具体实现中，在确定第一振动数据时根据预设的采样频率将第一声道数据转换为对应的第一采样数据，根据第一采样数据转换得到第一振动数据。确定第二振动数据的方法与确定第一振动数据的方法相同，此处不再赘述。需要说明的是，由于第一振动数据是经第一声道数据采样转换得到，第一振动信号与第一声道信号的匹配度更好。

其中，用户也可以根据个人习惯对已经生成的振动信号进行编辑或调整，例如，将已经确定的振动信号中某一振动点的振动幅度进行扩大或减小。具体实现中为：获取用户对第一振动数据的第一调整信息，根据第一调整信息更新第一振动数据；和/或，获取用户对第二振动数据的第二调整信息，根据第二调整信息更新第二振动数据。

步骤103：根据第一声道数据、第一振动数据、第二声道数据和第二振动数据生成声音振动文件。

具体实施中，生成声音振动文件中包括声音数据和振动数据，对该文件进行命名，例如，该文件格式设定为AAV(Advanced Audio Vibration File Format，高级声音振动文件格式)。其中，该文件头部带有AAV字样，且AAV文件遵循RIFF(Resource InterchangeFile Format，资源交换档案标准)规则，其文件内容以区块(chunk)为最小单位进行存储。AAV文件由三个区块组成：RIFF chunk，Format chunk(格式区块)和Data chunk(数据区块)。标准AAV文件格式如表1所示：

表1

其中，表1中的字段内容列中声音、振动数据采样率表示，声音数据和振动数据的采样率一样，例如，采样率可以为16kHz，32kHz，48kHz等。

每秒数据字节数的表示为：采样频率(SampleRate)*声道数(NumChannels)*采样分辨率(BitsPerSample)/8。

每个采样所需字节数表示为：NumChannels*BitsPerSample/8。

每个数据存的bit数，其中bit数可以是8位(bit)或16位(bit)。

数据区块大小表示声音数据和振动数据的长度，例如，比特率(ByteRate)*2；比特率为每秒所需的字节数。

本申请的第一实施方式涉及一种声音振动文件的生成方法，主要的改进点在于步骤101至步骤103的具体内容，通过对数据信号分为两个声道数据信号，并根据每个声道的数据信号确定出对应的振动数据，确保生成的声音振动文件的匹配度较高，需要说明的是，本实施方式各步骤中的具体实现均是为了方便理解实施步骤而提出，并非是必须的实施方式，仅为举例说明，并不对本申请的技术方案构成限定。

相对于现有技术而言，在生成声音振动文件的过程中，将声音转换为两个声道的数据，保证声音文件被损坏，且振动文件是根据声音文件确定的，使得声音和振动更匹配，

本申请的第二实施方式涉及一种声音振动文件的解码方法，其方法流程如图2所示，包括如下的实施步骤：

需要说明的是，本实施方式是与第一实施方式对应的方法实施方式，是对第一实施方式中生成的声音振动文件进行解码的方法，可以与第一实施方式配合实施，因此，第一实施方式中提到的相关技术细节在本实施方式中依然有效，为了减少重复，这里不再赘述。

步骤201：将声音振动文件中的数据分离为声音数据和振动数据。

具体实施中，以第一实施方式中声音振动文件的格式为AAV格式为例，先打开文件，并读取文件的RIFF块，读取到文件的名称中“AAV”字符，确定该文件为AAV格式，接着按照AAV文件格式解析，读取到文件的头信息，声音数据格式、振动数据格式、声音通道数、振动通道数、采样率、单个数据位数，根据读取到的文件头信息。

需要说明的是，此处以分离出声音振动文件中的声音数据和振动数据，并非是说明声音振动文件中仅包括声音数据和振动数据。

步骤202：对声音数据进行解析，获取声音数据中的第一声道数据和第二声道数据。

步骤203：对振动数据进行解析，获取振动数据中的第一振动数据和第二振动数据。

具体实施中，对声音数据进行解析，具体包括：按照声音采样频率对声音数据进行解析；对振动数据进行解析，具体包括：按照振动采样频率对振动数据进行解析；其中，声音采样频率与振动采样频率相同。

一个具体实现中，以第一实施方式中声音振动文件的格式为AAV格式为例，在对文件进行解析时，按照预设的格式，例如，8位的声音振动双通道的格式，对AAV文件中的声音数据和振动数据进行解码。设定每帧数据时长4ms，采样率为48000Hz，则每帧包含的数据字节数为2*2*0.004*48000＝768。解析完一帧后，声音数据和振动数据分离。

步骤204：同时将第一声道数据和第二声道数据传输至扬声器，将第一振动数据和第二振动数据传输至振动器。

本实施方式中以双声道和双振动信号的声音振动文件为例，实际中并不局限于此处的声音振动文件。

具体实施中，若对应的设备有两个扬声器，则将第一声道数据传输至第一扬声器，第二声道数据传输至第二扬声器；该设备包括两个马达，则将第一振动数据传输至第一马达，将第二振动数据传输至第二马达。

一个具体实现中，8位的声音振动文本单声道格式如表2所示：

表2

8位声音振动文本双声道格式如表3所示：

表3

16位声音振动文本单声道格式如表4所示：

表4

16位声音振动文本双声道格式如表5所示：

表5

本申请的第二实施方式中涉及一种声音振动文件的生成方法，主要的改进点是基于步骤201至步骤204的具体内容，在同时将解析得到的声音数据和振动数据传输至对应的响应设备，使得声音和振动同时产生，提高了声音和振动的实时性。需要说明的是，本实施方式各步骤中的具体实现均是为了方便理解实施步骤而提出，并非是必须的实施方式，仅为举例说明，并不对本申请的技术方案构成限定。

相对于现有技术而言，在对声音振动文件进行解析的过程中，获取声音振动文件中的第一声道数据、二声道数据、第一振动数据和第二振动数据，同时将声道数据传输至扬声器，将振动数据传输至振动器，保证声音和振动同时进行，使得用户在获得听觉效果的同时获取到触觉感受，提高用户体验。

本申请第三实施方式涉及一种声音振动文件的生成装置，其结构如图3所示，包括：获取模块301、确定模块302和生成模块303。

获取模块301用于，获取声音数据，并将声音数据分为第一声道数据和第二声道数据；

确定模块302用于，根据第一声道数据确定出第一振动数据，根据第二声道数据确定出第二振动数据；

生成模块303用于，根据第一声道数据、第一振动数据、第二声道数据和第二振动数据生成声音振动文件。

值得一提的是，为了突出本申请的创新部分，本实施方式中并没有将与解决本申请所提出的技术问题关系不太密切的单元引入，但这并不表明本实施方式中不存在其它的单元。

不难发现，本实施方式为与第一实施方式相对应的系统实施例，本实施方式可与第一实施方式互相配合实施。第一实施方式中提到的相关技术细节在本实施方式中依然有效，为了减少重复，这里不再赘述。相应地，本实施方式中提到的相关技术细节也可应用在第一实施方式中。

本申请第四实施方式涉及一种声音振动文件的解码器，其结构如图4示，包括：分离模块401、第一解析模块402、第二解析模块403和传输模块404。

分离模块401用于，将声音振动文件中的数据分离为声音数据和振动数据；

第一解析模块402用于，对声音数据进行解析，获取声音数据中的第一声道数据和第二声道数据；

第二解析模块403用于，对振动数据进行解析，获取振动数据中的第一振动数据和第二振动数据；

传输模块404用于，同时将第一声道数据和第二声道数据传输至扬声器，将第一振动数据和第二振动数据传输至振动器。

值得一提的是，本实施方式中所涉及到的各模块均为逻辑模块，在实际应用中，一个逻辑单元可以是一个物理单元，也可以是一个物理单元的一部分，还可以以多个物理单元的组合实现。此外，为了突出本申请的创新部分，本实施方式中并没有将与解决本申请所提出的技术问题关系不太密切的单元引入，但这并不表明本实施方式中不存在其它的单元。

不难发现，本实施方式为与第二实施方式相对应的系统实施例，本实施方式可与第二实施方式互相配合实施。第二实施方式中提到的相关技术细节在本实施方式中依然有效，为了减少重复，这里不再赘述。相应地，本实施方式中提到的相关技术细节也可应用在第二实施方式中。

本申请第五实施方式涉及一种电子设备，包括至少一个处理器501；以及，与至少一个处理器501通信连接的存储器502，其中，存储器502存储有可被至少一个处理器501执行的指令，指令被至少一个处理器501执行，以使至少一个处理器501能够执行声音振动文件的生成方法。

本实施方式中，处理器501以中央处理器(Central Processing Unit，CPU)为例，存储器502以可读写存储器(Random Access Memory，RAM)为例。处理器501、存储器502可以通过总线或者其他方式连接，图5中以通过总线连接为例。存储器502作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块，如本申请实施方式中实现声音振动文件的生成方法的程序就存储于存储器502中。处理器501通过运行存储在存储器502中的非易失性软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述声音振动文件的生成方法。

存储器502可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储选项列表等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施方式中，存储器502可选包括相对于处理器501远程设置的存储器，这些远程存储器可以通过网络连接至外接设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

一个或者多个程序模块存储在存储器502中，当被一个或者多个处理器501执行时，执行上述第一或第二方法实施方式中的声音振动文件的生成方法。

上述产品可执行本申请实施方式所提供的声音振动文件的生成方法，具备执行方法相应的功能模块和有益效果，未在本实施方式中详尽描述的技术细节，可参见本申请实施方式所提供的声音振动文件的生成方法。

本申请的第六实施方式提供了一种电子设备，包括至少一个处理器601；以及，与至少一个处理器601通信连接的存储器602，其中，存储器602存储有可被至少一个处理器601执行的指令，指令被至少一个处理器601执行，以使至少一个处理器601能够执行声音振动文件的解码方法。

本申请的第七实施方式涉及一种计算机可读存储介质，存储有计算机程序。计算机程序被处理器执行时实现上述第一实施方式中的声音振动文件的生成方法。

本申请的第八实施方式涉及一种计算机可读存储介质，存储有计算机程序。计算机程序被处理器执行时实现上述第一实施方式中的声音振动文件的解码方法。

即，本领域技术人员可以理解，实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序存储在一个存储介质中，包括若干指令用以使得一个设备(可以是单片机，芯片等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

本领域的普通技术人员可以理解，上述各实施方式是实现本申请的具体实施例，而在实际应用中，可以在形式上和细节上对其作各种改变，而不偏离本申请的精神和范围。

Claims (8)

1.一种声音振动文件的生成方法，其特征在于，包括：

获取声音数据，并将所述声音数据分为第一声道数据和第二声道数据；

根据第一声道数据确定出第一振动数据，根据第二声道数据确定出第二振动数据；

根据所述第一声道数据、第一振动数据、第二声道数据和第二振动数据生成所述声音振动文件；

所述根据第一声音数据确定出第一振动数据，具体包括：

根据预设的采样频率将所述第一声道数据转换为对应的第一采样数据；

根据所述第一采样数据转换得到第一振动数据；

所述根据所述第一采样数据转换得到第一振动数据之后，所述声音振动文件的生成方法还包括：

获取用户对所述第一振动数据的第一调整信息，根据所述第一调整信息更新所述第一振动数据；和/或，获取用户对所述第二振动数据的第二调整信息，根据所述第二调整信息更新所述第二振动数据。

2.根据权利要求1所述的声音振动文件的生成方法，其特征在于，若所述声音数据为立体声，所述第一声道数据为左声道数据，所述第二声道数据为右声道数据；

若所述声音数据不是立体声，所述第一声道数据与所述第二声道数据相同。

3.一种基于权利要求1生成的声音振动文件的解码方法，其特征在于，包括：

将所述声音振动文件中的数据分离为声音数据和振动数据；

对所述声音数据进行解析，获取所述声音数据中的第一声道数据和第二声道数据；

对所述振动数据进行解析，获取所述振动数据中的第一振动数据和第二振动数据；

同时将所述第一声道数据和所述第二声道数据传输至扬声器，将所述第一振动数据和所述第二振动数据传输至振动器；

还包括：

获取用户对所述第一振动数据的第一调整信息，根据所述第一调整信息更新所述第一振动数据；和/或，获取用户对所述第二振动数据的第二调整信息，根据所述第二调整信息更新所述第二振动数据。

4.根据权利要求3所述的声音振动文件的解码方法，其特征在于，

所述对所述声音数据进行解析，具体包括：

按照声音采样频率对所述声音数据进行解析；

所述对所述振动数据进行解析，具体包括：

按照振动采样频率对所述振动数据进行解析；

其中，所述声音采样频率与所述振动采样频率相同。

5.一种电子设备，其特征在于，包括：至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；

其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如权利要求1至2任一所述的声音振动文件的生成方法。

6.一种声音振动文件的解码器，其特征在于，所述声音振动文件基于权利要求1所述的生成方法生成，所述解码器包括：分离模块、第一解析模块、第二解析模块和传输模块；

所述分离模块用于，将所述声音振动文件中的数据分离为声音数据和振动数据；

所述第一解析装置用于，对所述声音数据进行解析，获取所述声音数据中的第一声道数据和第二声道数据；

所述第二解析装置用于，对所述振动数据进行解析，获取所述振动数据中的第一振动信号和第二振动信号；

所述传输装置用于，同时将所述第一声道数据和所述第二声道数据传输至扬声器，将所述第一振动信号和所述第二振动信息传输至振动器；

还包括调整装置，用于获取用户对所述第一振动数据的第一调整信息，根据所述第一调整信息更新所述第一振动数据；和/或，获取用户对所述第二振动数据的第二调整信息，根据所述第二调整信息更新所述第二振动数据。

7.一种电子设备，其特征在于，包括：至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；

其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如权利要求3至4任一所述的声音振动文件的解码方法。

8.一种计算机可读存储介质，存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求3至4中任一项所述的声音振动文件的解码方法。

Images