CN113010120B - 一种通过轮循方式实现语音数据分布式存储的方法 - Google Patents

一种通过轮循方式实现语音数据分布式存储的方法 Download PDF

Info

Publication number
CN113010120B
CN113010120B CN202110461263.2A CN202110461263A CN113010120B CN 113010120 B CN113010120 B CN 113010120B CN 202110461263 A CN202110461263 A CN 202110461263A CN 113010120 B CN113010120 B CN 113010120B
Authority
CN
China
Prior art keywords
voice data
data segment
identification
storage node
storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110461263.2A
Other languages
English (en)
Other versions
CN113010120A (zh
Inventor
施甘图
陈旭
庭治宏
赵乾旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lahuobao Network Technology Co ltd
Hongtu Intelligent Logistics Co ltd
Original Assignee
Lahuobao Network Technology Co ltd
Hongtu Intelligent Logistics Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lahuobao Network Technology Co ltd, Hongtu Intelligent Logistics Co ltd filed Critical Lahuobao Network Technology Co ltd
Priority to CN202110461263.2A priority Critical patent/CN113010120B/zh
Publication of CN113010120A publication Critical patent/CN113010120A/zh
Application granted granted Critical
Publication of CN113010120B publication Critical patent/CN113010120B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614Improving the reliability of storage systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629Configuration or reconfiguration of storage systems
    • G06F3/0631Configuration or reconfiguration of storage systems by allocating resources to storage systems
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/10537Audio or video recording
    • G11B2020/10546Audio or video recording specifically adapted for audio data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种通过轮循方式实现语音数据分布式存储的方法,该方法通过为三个存储节点分配唯一的识别ID,并将三个存储节点的识别ID两两进行组合得到三个组合ID,将原始语音数据分割成语音数据段,将所有语音数据段分为三部分,三部分的语音数据段分别加入三个组合ID,最后将所有语音数据段复制为三份,分别发送到三个存储节点,每个存储节点只存储包含自身识别ID的语音数据段,无论哪一个存储节点发生异常,都能在其他存储节点找到丢失的语音数据段,从而能够防止存储节点发生异常影响语音数据完整性。本发明能够防止存储节点发生异常影响语音数据完整性。

Description

一种通过轮循方式实现语音数据分布式存储的方法
技术领域
本发明涉及物流网络技术领域,特别是涉及一种通过轮循方式实现语音数据分布式存储的方法。
背景技术
随着物流行业的蓬勃发展,物流语音请求及沟通频繁的产生,语音数据备份成为必须考虑的问题。有效的存储语音数据能够对生产力保驾护航,对于产业稳定发展起到很大的作用。然而,现有的物流网络基本不具有语音数据存储能力或者只能对语音数据进行传统存储,难以完整存储语音数据。
发明内容
本发明的目的在于提供一种通过轮循方式实现语音数据分布式存储的方法,能够防止存储节点发生异常影响语音数据完整性。
为解决上述技术问题,本发明采用的一个技术方案是:提供一种通过轮循方式实现语音数据分布式存储的方法,包括以下步骤:
S1:选择三个具有可用存储空间的存储节点,为每一个存储节点分配唯一的识别ID;
S2:将第一存储节点的识别ID和第二存储节点的识别ID进行组合得到第一组合ID,将第二存储节点的识别ID和第三存储节点的识别ID进行组合得到第二组合ID,将第三存储节点的识别ID和第一存储节点的识别ID进行组合得到第三组合ID:
S3:在产生待存储的原始语音数据时,将原始语音数据按序分割成语音数据段;
S4:将所有语音数据段分为三部分,在第一部分的语音数据段中加入第一组合ID,在第二部分的语音数据段中加入第二组合ID,在第三部分的语音数据段中加入第三组合ID;
S5:将每一语音数据段复制为三份,分别发送到三个存储节点;
S6:每一存储节点选择包含自身识别ID的语音数据段进行存储。
优选的,每一存储节点的识别ID是随机生成的。
优选的,所述将原始语音数据按序分割成适合存储的语音数据段的步骤具体包括:
对所述原始语音数据进行升频处理得到原始语音分割点,利用原始语音分割点将原始语音数据按序分割成语音数据段。
优选的,所述步骤S3还包括:
在每一语音数据段中加入分割的序号;
所述将所有语音数据段分为三部分的步骤具体包括:
将每一语音数据段的序号除以3取余数,根据三种计算结果将所有语音数据段分为三部分。
优选的,所述根据三种计算结果将所有语音数据段分为三部分的步骤具体包括:
将余数最小的语音数据段作为第一部分的语音数据段,将余数较大的语音数据段作为第二部分的语音数据段,将余数最大的语音数据段作为第三部分的语音数据段。
优选的,所述根据三种计算结果将所有语音数据段分为三部分的步骤具体包括:
将每个语音数据段的余数加1,将计算结果为1的语音数据段作为第一部分的语音数据段,将计算结果为2的语音数据段作为第二部分的语音数据段,将计算结果为3的语音数据段作为第三部分的语音数据段。
优选的,所述步骤S6还包括:
每一存储节点丢弃不包含识别ID的语音数据段。
优选的,所述步骤S3还包括:
为所述原始语音数据设置唯一的识别标签,在每一语音数据段中加入识别标签。
优选的,所述识别标签由时间戳和序列号组成,所述时间戳为原始语音数据的产生时间,所述序列号为原始语音数据的产生顺序编号。
区别于现有技术的情况,本发明的有益效果是:
1、三个存储节点的处理压力基本一致,避免了某一存储节点出现高处理压力情况;
2、本发明的三个存储节点中,无论哪一个存储节点发生异常都不会影响语音数据完整性;
3、本发明将三个存储节点的识别ID两两组合,按照组合ID进行轮循存储,可以合理进行数据分配,三个存储节点的可用存储空间基本保持一致。
附图说明
图1是本发明实施例提供的通过轮循方式实现语音数据分布式存储的方法的流程示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参阅图1,本发明实施例的通过轮循方式实现语音数据分布式存储的方法包括以下步骤:
S1:选择三个具有可用存储空间的存储节点,为每一个存储节点分配唯一的识别ID。
其中,三个存储节点的可用存储空间的类型都是相同的,相同语音数据可以存储在任意一个存储节点的可用存储空间。每一存储节点的识别ID可以是随机生成的。
S2:将第一存储节点的识别ID和第二存储节点的识别ID进行组合得到第一组合ID,将第二存储节点的识别ID和第三存储节点的识别ID进行组合得到第二组合ID,将第三存储节点的识别ID和第一存储节点的识别ID进行组合得到第三组合ID。
其中,假设第一存储节点的识别ID为UID1,第二存储节点的识别ID为UID2,第三存储节点的识别ID为UID3,则第一组合ID为UID1+UID2,第二组合ID为UID2+UID3,第三组合ID为UID3+UID1。
S3:在产生待存储的原始语音数据时,将原始语音数据按序分割成语音数据段。
其中,将原始语音数据按序分割成适合存储的语音数据段的步骤具体包括:
对原始语音数据进行升频处理得到原始语音分割点,利用原始语音分割点将原始语音数据按序分割成语音数据段。
S4:将所有语音数据段分为三部分,在第一部分的语音数据段中加入第一组合ID,在第二部分的语音数据段中加入第二组合ID,在第三部分的语音数据段中加入第三组合ID。
其中,第一组合ID、第二组合ID、第三组合ID可以加在语音数据段的头部。
S5:将每一语音数据段复制为三份,分别发送到三个存储节点。
S6:每一存储节点选择包含自身识别ID的语音数据段进行存储。
其中,第一存储节点存储的语音数据段为包含第一组合ID和第三组合ID的语音数据段,第二存储节点存储的语音数据段为包含第一组合ID和第二组合ID的语音数据段,第三存储节点存储的语音数据段为包含第二组合ID和第三组合ID的语音数据段,这样每个存储节点存储的语音数据段在其他存储节点都有备份,无论哪一个存储节点发生异常都不会影响语音数据完整性。
在本实施例中,步骤S3还包括:在每一语音数据段中加入分割的序号;
将所有语音数据段分为三部分的步骤具体包括:
将每一语音数据段的序号除以3取余数,根据三种计算结果将所有语音数据段分为三部分。
其中,序号除以3取余数,得到的结果只有0、1、2,比如序号为9,9除以3余数为0。那么按照三种计算结果就可以将所有语音数据段分为三部分。语音数据段的划分方式可以有多种,例如根据三种计算结果将所有语音数据段分为三部分的步骤具体包括:将余数最小的语音数据段作为第一部分的语音数据段,将余数较大的语音数据段作为第二部分的语音数据段,将余数最大的语音数据段作为第三部分的语音数据段。具体的,将余数为0的语音数据段作为第一部分的语音数据段,将余数为1的语音数据段作为第二部分的语音数据段,将余数为2的语音数据段作为第三部分的语音数据段。
为了方便读数习惯,可以将余数从1起算,在本实施例中,根据三种计算结果将所有语音数据段分为三部分的步骤具体包括:
将每个语音数据段的余数加1,将计算结果为1的语音数据段作为第一部分的语音数据段,将计算结果为2的语音数据段作为第二部分的语音数据段,将计算结果为3的语音数据段作为第三部分的语音数据段。这样,余数1就对应第一组合ID,余数2就对应第二组合ID,余数3就对应第三组合ID。
在本实施例中,步骤S6还包括:
每一存储节点丢弃不包含识别ID的语音数据段。
其中,第一存储节点丢弃包含第二组合ID的语音数据段,第二存储节点丢弃包含第三组合ID的语音数据段,第三存储节点丢弃包含第一组合ID的语音数据段。
在本实施例中,步骤S3还包括:
为原始语音数据设置唯一的识别标签,在每一语音数据段中加入识别标签。
其中,识别标签可以唯一识别原始语音数据。识别标签也可以同分割的序号一起加在语音数据段的头部。
进一步的,在本实施例中,识别标签由时间戳和序列号组成,时间戳为原始语音数据的产生时间,序列号为原始语音数据的产生顺序编号,例如序列号为00012、00025等。
通过上述方式,本发明的通过轮循方式实现语音数据分布式存储的方法通过为三个存储节点分配唯一的识别ID,并将三个存储节点的识别ID两两进行组合得到三个组合ID,将原始语音数据分割成语音数据段,将所有语音数据段分为三部分,三部分的语音数据段分别加入三个组合ID,最后将所有语音数据段复制为三份,分别发送到三个存储节点,每个存储节点只存储包含自身识别ID的语音数据段,无论哪一个存储节点发生异常,都能在其他存储节点找到丢失的语音数据段,从而能够防止存储节点发生异常影响语音数据完整性。
以上所述仅为本发明的实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (9)

1.一种通过轮循方式实现语音数据分布式存储的方法,其特征在于,包括以下步骤:
S1:选择三个具有可用存储空间的存储节点,为每一个存储节点分配唯一的识别ID;
S2:将第一存储节点的识别ID和第二存储节点的识别ID进行组合得到第一组合ID,将第二存储节点的识别ID和第三存储节点的识别ID进行组合得到第二组合ID,将第三存储节点的识别ID和第一存储节点的识别ID进行组合得到第三组合ID:
S3:在产生待存储的原始语音数据时,将原始语音数据按序分割成语音数据段;
S4:将所有语音数据段分为三部分,在第一部分的语音数据段中加入第一组合ID,在第二部分的语音数据段中加入第二组合ID,在第三部分的语音数据段中加入第三组合ID;
S5:将每一语音数据段复制为三份,分别发送到三个存储节点;
S6:每一存储节点选择包含自身识别ID的语音数据段进行存储。
2.根据权利要求1所述的方法,其特征在于,每一存储节点的识别ID是随机生成的。
3.根据权利要求1所述的方法,其特征在于,所述将原始语音数据按序分割成适合存储的语音数据段的步骤具体包括:
对所述原始语音数据进行升频处理得到原始语音分割点,利用原始语音分割点将原始语音数据按序分割成语音数据段。
4.根据权利要求1所述的方法,其特征在于,所述步骤S3还包括:
在每一语音数据段中加入分割的序号;
所述将所有语音数据段分为三部分的步骤具体包括:
将每一语音数据段的序号除以3取余数,根据三种计算结果将所有语音数据段分为三部分。
5.根据权利要求4所述的方法,其特征在于,所述根据三种计算结果将所有语音数据段分为三部分的步骤具体包括:
将余数最小的语音数据段作为第一部分的语音数据段,将余数较大的语音数据段作为第二部分的语音数据段,将余数最大的语音数据段作为第三部分的语音数据段。
6.根据权利要求4所述的方法,其特征在于,所述根据三种计算结果将所有语音数据段分为三部分的步骤具体包括:
将每个语音数据段的余数加1,将计算结果为1的语音数据段作为第一部分的语音数据段,将计算结果为2的语音数据段作为第二部分的语音数据段,将计算结果为3的语音数据段作为第三部分的语音数据段。
7.根据权利要求1所述的方法,其特征在于,所述步骤S6还包括:
每一存储节点丢弃不包含识别ID的语音数据段。
8.根据权利要求1所述的方法,其特征在于,所述步骤S3还包括:
为所述原始语音数据设置唯一的识别标签,在每一语音数据段中加入识别标签。
9.根据权利要求8所述的方法,其特征在于,所述识别标签由时间戳和序列号组成,所述时间戳为原始语音数据的产生时间,所述序列号为原始语音数据的产生顺序编号。
CN202110461263.2A 2021-04-27 2021-04-27 一种通过轮循方式实现语音数据分布式存储的方法 Active CN113010120B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110461263.2A CN113010120B (zh) 2021-04-27 2021-04-27 一种通过轮循方式实现语音数据分布式存储的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110461263.2A CN113010120B (zh) 2021-04-27 2021-04-27 一种通过轮循方式实现语音数据分布式存储的方法

Publications (2)

Publication Number Publication Date
CN113010120A CN113010120A (zh) 2021-06-22
CN113010120B true CN113010120B (zh) 2022-07-29

Family

ID=76380570

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110461263.2A Active CN113010120B (zh) 2021-04-27 2021-04-27 一种通过轮循方式实现语音数据分布式存储的方法

Country Status (1)

Country Link
CN (1) CN113010120B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7089320B1 (en) * 2001-06-01 2006-08-08 Cisco Technology, Inc. Apparatus and methods for combining data
JP2009289161A (ja) * 2008-05-30 2009-12-10 Nippon Telegr & Teleph Corp <Ntt> クラスタ型ストレージシステム、そのノード装置、データの読み出しおよび書き込み制御方法およびそのプログラム
WO2018076842A1 (zh) * 2016-10-25 2018-05-03 广东欧珀移动通信有限公司 一种数据备份方法、装置、系统、存储介质及电子设备

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070083367A1 (en) * 2005-10-11 2007-04-12 Motorola, Inc. Method and system for bandwidth efficient and enhanced concatenative synthesis based communication
US20130212584A1 (en) * 2012-02-09 2013-08-15 Robert Bosch Gmbh Method for distributed caching and scheduling for shared nothing computer frameworks
CN107844268B (zh) * 2015-06-04 2021-09-14 华为技术有限公司 一种数据分发方法、数据存储方法、相关装置以及系统
US10977124B2 (en) * 2016-01-07 2021-04-13 Hitachi, Ltd. Distributed storage system, data storage method, and software program
US11061579B2 (en) * 2019-09-11 2021-07-13 International Business Machines Corporation Access ordering for tape cycle optimization

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7089320B1 (en) * 2001-06-01 2006-08-08 Cisco Technology, Inc. Apparatus and methods for combining data
JP2009289161A (ja) * 2008-05-30 2009-12-10 Nippon Telegr & Teleph Corp <Ntt> クラスタ型ストレージシステム、そのノード装置、データの読み出しおよび書き込み制御方法およびそのプログラム
WO2018076842A1 (zh) * 2016-10-25 2018-05-03 广东欧珀移动通信有限公司 一种数据备份方法、装置、系统、存储介质及电子设备

Also Published As

Publication number Publication date
CN113010120A (zh) 2021-06-22

Similar Documents

Publication Publication Date Title
US11087329B2 (en) Method and apparatus of identifying a transaction risk
US11095451B2 (en) Optimal data storage configuration in a blockchain
CN109634932B (zh) 一种智能合约存储方法及存储系统
CN109002259B (zh) 一种归置组所属硬盘分配方法、系统、装置及存储介质
EP2487610A2 (en) A method for generating a randomized data structure for representing sets, based on bloom filters
EP3726388A1 (en) Method for enabling access to past transaction in blockchain network, and node
CN111526216B (zh) 联盟链中的共识方法和系统
CN106844055B (zh) 一种任务的执行方法和装置
CN110634052A (zh) 分布式架构生成订单号的方法及装置
CN110825698A (zh) 元数据管理方法及相关装置
US10700934B2 (en) Communication control device, communication control method, and computer program product
CN115756955A (zh) 一种数据备份、数据恢复的方法、装置及计算机设备
CN114138468B (zh) 一种封装任务量自适应分配方法、装置及存储介质
CN114969803B (zh) 一种数据存储方法、装置及存储介质
CN113010120B (zh) 一种通过轮循方式实现语音数据分布式存储的方法
CN112436962B (zh) 区块链共识网络动态扩展方法、电子设备、系统及介质
CN111522873B (zh) 区块生成方法、装置、计算机设备和存储介质
CN109815047B (zh) 一种数据处理的方法和相关装置
CN107368569A (zh) 数据差异对比方法和装置、存储介质以及处理器
CN109032804B (zh) 数据处理方法和装置、服务器
CN108984780B (zh) 基于支持重复键值树数据结构管理磁盘数据的方法和装置
CN111510484A (zh) 区块链处理方法、系统、装置、计算机设备和存储介质
CN113010119A (zh) 一种通过主备方式实现语音数据分布式存储的方法
CN107085571B (zh) 一种校验规则的执行方法和装置
CN114116708B (zh) 一种基于自适应哈希算法的业务id生成方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant