CN110874388A - 数据存储及读取方法、数据处理装置及电子设备 - Google Patents

数据存储及读取方法、数据处理装置及电子设备 Download PDF

Info

Publication number
CN110874388A
CN110874388A CN201811015648.0A CN201811015648A CN110874388A CN 110874388 A CN110874388 A CN 110874388A CN 201811015648 A CN201811015648 A CN 201811015648A CN 110874388 A CN110874388 A CN 110874388A
Authority
CN
China
Prior art keywords
data
file
length
original
index
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811015648.0A
Other languages
English (en)
Inventor
张清伟
潘岳
郑博文
王联辉
张浩然
曾杰南
张包峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Cloud Computing Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201811015648.0A priority Critical patent/CN110874388A/zh
Publication of CN110874388A publication Critical patent/CN110874388A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例提供一种数据存储及读取方法、数据处理装置及电子设备,其中,数据存储方法包括:获取待存储的数据;判断数据的长度是否大于预设的长度阈值;如果数据的长度大于长度阈值,则将数据存储至原存储文件以外的指定文件中,并在原存储文件中数据对应的原始记录中写入该数据对应的指定文件索引;数据读取方法包括:获取待读取的数据在原存储文件中的原始记录;判断原始记录的内容是否为指定文件索引;如果原始记录的内容为指定文件索引,则读取指定文件索引指向的数据作为最终读取的数据内容;其中,指定文件中允许写入的数据最大长度大于长度阈值。本发明实施例的方案,能够灵活实现对超长数据进行存储和读取。

Description

数据存储及读取方法、数据处理装置及电子设备
技术领域
本申请涉及计算机技术领域,尤其涉及一种数据存储及读取方法、数据处理装置及电子设备。
背景技术
VARCHAR数据类型是关系型数据库中最为常见的数据类型之一。但在使用过程中用户常遇到以下问题:1.不知道如何选择合适的数据类型长度;2.在实际数据超出设置的长度时无法存储,只能修改数据类型长度或重新建表;3.常见的数据库产品对VARCHAR数据类型都有长度的限制。
发明内容
本发明提供了一种数据存储及读取方法、数据处理装置及电子设备,能够灵活实现对超长数据进行存储和读取。
为达到上述目的,本发明的实施例采用如下技术方案:
第一方面,提供了一种数据存储方法,包括:
获取待存储的数据;
判断所述数据的长度是否大于预设的长度阈值;
如果所述数据的长度大于所述长度阈值,则将所述数据存储至原存储文件以外的指定文件中,并在所述原存储文件中所述数据对应的原始记录位置写入该数据对应的指定文件索引;
其中,所述指定文件中允许写入的数据最大长度大于所述长度阈值。
第二方面,提供了一种数据读取方法,包括:
获取待读取的数据在原存储文件中的原始记录;
判断所述原始记录的内容是否为指定文件索引;
如果所述原始记录的内容为所述指定文件索引,则读取所述指定文件索引指向的数据作为最终读取的数据内容;
其中,所述指定文件中允许写入的数据最大长度大于预设的长度阈值。
第三方面,提供了一种数据处理装置,包括:
数据获取模块,用于获取待存储的数据;
数据判断模块,用于判断所述数据的长度是否大于预设的长度阈值;
数据存储模块,用于如果所述数据的长度大于所述长度阈值,则将所述数据存储至原存储文件以外的指定文件中,并在所述原存储文件中所述数据对应的原始记录中写入该数据对应的指定文件索引;
其中,所述指定文件中允许写入的数据最大长度大于所述长度阈值。
第四方面,提供了一种电子设备,包括:
存储器,用于存储程序;
处理器,耦合至所述存储器,用于执行所述程序,以用于:
获取待存储的数据;
判断所述数据的长度是否大于预设的长度阈值;
如果所述数据的长度大于所述长度阈值,则将所述数据存储至原存储文件以外的指定文件中,并在所述原存储文件中所述数据对应的原始记录位置写入该数据对应的指定文件索引;
其中,所述指定文件中允许写入的数据最大长度大于所述长度阈值。
本发明提供了一种数据存储及读取方法、数据处理装置及电子设备,在存储数据时,先判断待存储的数据的数据长度,如果数据长度大于预设的长度阈值,则将该数据存储到原存储文件以外的指定文件中,并在原存储文件中该数据对应的原始记录中写入该数据对应的指定文件索引;相应的,在读取数据时,先获取待读取的数据在原存储文件中对应的原始记录,判断原始记录的内容是否为指定文件索引,如果是,则读取指定文件索引所指向的数据作为最终读取的数据内容;其中,指定文件中允许写入的数据最大长度大于上述长度阈值。这样,针对超长的(本方案中指大于长度阈值或者大于原存储文件的最大允许长度)数据可以通过额外的指定文件进行存储,从而避免了原存储文件由于对数据长度有限制而无法存储超长数据,或者需要从新建立存储文件实现对超长数据的存储而导致的数据存储的不灵活性。
上述说明仅是本申请技术方案的概述,为了能够更清楚了解本申请的技术手段,而可依照说明书的内容予以实施,并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂,以下特举本申请的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本申请的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1为本发明实施例的数据存储逻辑示意图;
图2为本发明实施例的数据读取逻辑示意图;
图3为本发明实施例的数据存储及读取系统结构图;
图4为本发明实施例的数据存储方法流程图一;
图5为本发明实施例的数据存储方法流程图二;
图6为本发明实施例的数据存储方法流程图三;
图7为本发明实施例的数据读取方法流程图一;
图8为本发明实施例的数据读取方法流程图二;
图9为本发明实施例的数据读取方法流程图三;
图10为本发明实施例的数据存储装置结构图一;
图11为本发明实施例的数据存储装置结构图二;
图12为本发明实施例的数据读取装置结构图;
图13为本发明实施例的电子设备的结构示意一;
图14为本发明实施例的电子设备的结构示意二。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
本发明实施例改善了现有技术中数据库中针对超长数据(特别是VARCHAR类型的数据)不能方便、灵活存储及读取的缺陷,其核心思想在于,将超长数据存储至原存储文件以外的指定文件中,该指定文件中不受数据长度限制,或者预先设置所允许写入的数据长度远远大于待存储的数据的数据长度;同时在原存储文件对应的原始记录中存储该数据对应的指定文件索引,以方便用户在后续读取数据时,根据指定文件索引索确定待读取的数据的真实位置,从而读取到真正的数据。
图1为本发明实施例的数据存储逻辑示意图。如图1所示,该数据存储逻辑主要包括:
首先,在获取到待存储数据后,先判断该数据的数据长度是否大于预设的长度阈值;
如果判断结果为是,则将数据写入指定文件中,然后将原存储文件中该数据对应的原始记录的内容改为存储该数据的指定文件索引。为了方便辨识原始记录中存储的内容是真正存储的数据,还是用于存储数据的指定文件索引,可以对存储指定文件索引的原始记录进行标识。标识记录完成后,可继续进行后续操作,比如继续写入后续待存储的数据。
如果判断结果为否,则将数据直接写入原存储文件中,即原存储文件中的原始记录中存储的就是待存储的数据内容。数据写入后,可继续进行后续操作,比如继续写入后续待存储的数据。
相应的,图2为本发明实施例的数据读取逻辑示意图。如图2所示,该数据读取逻辑主要包括:
首先,在获取到待读取的数据在原存储文件中对应存储原始记录后,先判断该原始记录内容是否为指定文件索引;
如果判断结果为是,则将原始记录内容解析成指定文件索引,并根据该索引指向的位置从指定文件中读取真实数据,使用真实数据替代原始记录中的原始数据作为待读取的数据。本次数据查询结束后,可继续进行后续操作,比如继续读取后续待读取的数据。
如果判断结果为否,则将原存储文件中原始记录中的数据作为待读取的数据。本次数据查询结束后,可继续进行后续操作,比如继续读取后续待读取的数据。
基于上述数据存储及读取的方案思想,图3为本发明实施例提供的数据存储及读取系统结构图。如图3所示,该系统包括原存储文件310、指定文件320、数据存储装置330和数据读取装置340,其中:
原存储文件310可以为现有数据库(如关系型数据库)中指定存储某一数据类型,如VARCHAR数据类型数据的文件,通常,数据库中会预先设置存储VARCHAR数据类型数据的最大数据长度。
指定文件320为非数据库指定用于存储数据的文件,需在额外条件触发后,可对数据库中待存储的超长数据进行存储。指定文件320中的数据长度不做额外限制,可以为正常文件存储系统中文件的最大数据长度(通常该最大数据长度在t级以上)。
数据存储装置330,用于对数据库中待写入的数据进行存储,具体包括:
数据获取模块,用于获取待存储的数据;
数据判断模块,用于判断数据的长度是否大于预设的长度阈值;
数据存储模块,用于如果数据的长度大于长度阈值,则将数据存储至原存储文件310以外的指定文件320中,并在原存储文件310中数据对应的原始记录中写入该数据对应的指定文件索引。
数据读取装置340,用于从数据库中读取已写入的数据,具体包括:
记录获取模块,用于获取待读取的数据在原存储文件310中的原始记录;
记录判断模块,用于判断原始记录的内容是否为指定文件索引;
数据读取模块,用于如果原始记录的内容为指定文件索引,则读取指定文件索引指向的数据作为最终读取的数据内容。
其中,上述指定文件320中允许写入的数据最大长度大于预设的长度阈值。
下面通过多个实施例来进一步说明本申请的技术方案。
实施例一
基于上述数据存储及读取的方案思想,如图4所示,其为本发明实施例示出的数据存储方法流程图一,该方法的执行主体可为图3中所示的数据存储装置330。如图4所示,该数据存储方法包括如下步骤:
S410,获取待存储的数据。
其中,待存储的数据可以为待写入数据库的VARCHAR数据类型的数据。该数据库对应的指定用于写入数据的文件记为原存储文件。该数据库可以预先指定待写入数据如VARCHAR数据类型的数据的最大数据长度。
S420,判断数据的长度是否大于预设的长度阈值。
在获取待存储的数据后,先判断该数据的长度是否大于预设的长度阈值。该长度阈值可以为数据库预先指定的待写入数据如VARCHAR数据类型的数据的最大数据长度。
S430,如果数据的长度大于长度阈值,则将数据存储至原存储文件以外的指定文件中,并在原存储文件中数据对应的原始记录中写入该数据对应的指定文件索引;
其中,指定文件中允许写入的数据最大长度大于长度阈值。
在实际应用场景中,如果待写入的数据的长度超过数据库指定的该数据类型下最大数据长度,则数据库将无法对该数据进行存储,或者需要从新建立另一个原存储文件,在重置该原存储文件所允许写入的数据的最大长度后,将数据写入至该原存储文件完成数据存储。
为了灵活实现对超长数据的存储,本方案在原存储文件之外,创建可用于存储超长数据的指定文件,该指定文件中允许写入的数据最大长度大于上述长度阈值。当判断待存储的数据的数据长度大于上述长度阈值后,可将该数据存储至指定文件中,并在原存储文件中本应存储该数据的原始记录中写入该数据对应的指定文件索引。如此,在进行数据读取时,可以根据该指定文件索引找到数据被存储的真正位置,从而读取到该数据。上述的指定文件索引包括但不限于:数据在指定文件中的偏移量和数据长度值。
由于指定文件中存储的都是超长数据,文件较大,所以可以对指定文件进行压缩处理后再行存储。
本发明提供的数据存储方法,在存储数据时,先判断待存储的数据的数据长度,如果数据长度大于预设的长度阈值,则将该数据存储到原存储文件以外的指定文件中,并在原存储文件中该数据对应的原始记录中写入该数据对应的指定文件索引。这样,针对超长的(本方案中指大于长度阈值或者大于原存储文件的最大允许长度)数据可以通过额外的指定文件进行存储,从而避免了原存储文件由于对数据长度有限制而无法存储超长数据,或者需要从新建立存储文件实现对超长数据的存储而导致的数据存储的不灵活性。
实施例二
本实施例在上一实施例的基础上,增加了如下拓展内容。
首先,如图5所示,为本发明实施例的数据存储方法流程图二。在上一实施例中所示方法的基础上,增加了对指定文件存储的数据进行标识的处理过程。如图5所示,在步骤S430之后,还可执行如下步骤:
S510,在原存储文件中设置用于标识原始记录的内容为指定文件索引的标志。
为了方便辨识原始记录中存储的内容是真正存储的数据,还是用于存储数据的指定文件索引,可以对存储指定文件索引的原始记录进行标识,比如在原存储文件中设置用于标识原始记录的内容为指定文件索引的标志。在实际应用场景中,为了减少该标志占用的存储空间,可以将该标志设置为位图((bitmap)标记。
其次,如图6所示,为本发明实施例的数据存储方法流程图三。在图4所示方法的基础上,增加了待存储数据的长度不大于长度阈值的数据的存储过程。如图6所示,在步骤S420之后,如果判定待存储的数据的长度大于预设的长度阈值,则可执行步骤S430,将数据存储至原存储文件以外的指定文件中,并在原存储文件中数据对应的原始记录中写入该数据对应的指定文件索引;如果判定待存储的数据的长度不大于预设的长度阈值,则可执行如下步骤:
S610,将数据存储至原存储文件。
对于数据长度不大于预设的长度阈值的待存储数据,可直接将其存储至原存储文件的原始记录中,方便数据管理。
本发明提供的数据存储方法,在实施例一的基础上进行了方法拓展:
首先,在原存储文件中设置用于标识原始记录的内容为指定文件索引的标志,以方便辨识原始记录中存储的内容是真正存储的数据,还是用于存储数据的指定文件索引,从而方便对存储的数据进行查询和管理。
其次,对于数据长度不大于预设的长度阈值的待存储数据,仍将其存储至原存储文件中,不仅方便数据管理,同时减少对现有数据存储方案的改进成本。
实施例三
基于上述数据存储及读取的方案思想,如图7所示,其为本发明实施例示出的数据读取方法流程图一,该方法的执行主体可为图3中所示的数据读取装置340。如图7所示,该数据读取方法包括如下步骤:
S710,获取待读取的数据在原存储文件中的原始记录。
其中,待获取的数据可以为待从数据库中读取的VARCHAR数据类型的数据。该数据库对应的指定用于存储数据的文件记为原存储文件。该数据库可以预先指定已存储数据如VARCHAR数据类型的数据的最大数据长度。
根据外部输入的查询条件,锁定待读取的数据在原存储文件中的原始记录。
S720,判断原始记录的内容是否为指定文件索引。
在实际应用场景中,如果待写入数据库的数据的长度超过数据库指定的该数据类型下最大数据长度,则数据库将无法对该数据进行存储,或者需要从新建立另一个原存储文件,在重置该原存储文件所允许写入的数据的最大长度后,将数据写入至该原存储文件完成数据存储。
为了灵活实现对超长数据的存储,本方案在原存储文件之外,创建可用于存储超长数据的指定文件,该指定文件中允许写入的数据最大长度大于源存储文件中所允许存储的数据的最大长度。在存储数据时,可采用如实施例一、实施例二所示数据存储方法,把大于长度阈值的数据存储至指定文件中,并在原存储文件中本应存储该数据的原始记录中写入该数据对应的指定文件索引。
相应的,在进行数据读取时,可在获取到待读取数据对应在原存储文件中的原始记录后,判断原始记录的内容是否为指定文件索引,从而确定待读取的数据所被存储的文件位置。
S730,如果原始记录的内容为指定文件索引,则读取指定文件索引指向的数据作为最终读取的数据内容;
其中,指定文件中允许写入的数据最大长度大于预设的长度阈值。
如果原始记录的内容为指定文件索引,则表明待读取的数据为超长数据,并被存储在指定文件中。根据该指定文件索引可找到数据被存储的真正位置,从而读取到该数据。所述的指定文件索引包括但不限于:数据在指定文件中的偏移量和数据长度值。
本发明提供的数据读取方法,在读取数据时,先获取待读取的数据在原存储文件中对应的原始记录,判断原始记录的内容是否为指定文件索引,如果是,则读取指定文件索引所指向的数据作为最终读取的数据内容;其中,指定文件中允许写入的数据最大长度大于上述长度阈值。这样,针对超长的(本方案中指大于长度阈值或者大于原存储文件的最大允许长度)数据可以通过额外的指定文件进行存储后读取,从而避免了原存储文件由于对数据长度有限制而无法存储超长数据,或者需要从新建立存储文件实现对超长数据的存储而导致的数据存储的不灵活性。
实施例四
本实施例在上一实施例的基础上,增加了如下拓展内容。
首先,如图8所示,为本发明实施例的数据读取方法流程图二。在上一实施例中所示方法的基础上,增加了利用预先设置的标识对指定文件中存储的数据进行读取的处理过程。在原存储文件中设置有用于标识原始记录内容为指定文件索引的标志;如图8所示,步骤S720可细化为如下步骤:
S810,判断原存储文件中是否设置有标识原始记录内容为指定文件索引的标志。
为了方便辨识原始记录中存储的内容是真正存储的数据,还是用于存储数据的指定文件索引,可以在原存储文件中针对存储指定文件索引的原始记录进行标识,比如在原存储文件中设置用于标识原始记录的内容为指定文件索引的标志。在实际应用场景中,为了减少该标志占用的存储空间,可以将该标志设置为位图((bitmap)标记。
这样,在获取到待读取的数据对应的原始记录后,可以在原存储文件中查找是否存储有标识原始记录内容为指定文件索引的标志。如果有,则表明该原始记录中的数据内容为指定文件索引;否则,为非指定文件索引,即待读取的数据。
其次,如图9所示,为本发明实施例的数据读取方法流程图三。在图7所示方法的基础上,增加了原始记录的内容为非指定文件索引的数据的存储过程。如图9所示,在步骤S720之后,如果判定原始记录的内容为指定文件索引,则可执行步骤S730,读取指定文件索引指向的数据作为最终读取的数据内容;如果判定原始记录的内容为非指定文件索引,则可执行如下步骤:
S910,读取原始记录中的内容作为最终读取的数据内容。
对于原始记录的内容为非指定文件索引,根据上述数据存储方法对应的实施例可知,原存储文件中的原始记录的数据内容就是原先写入的真正数据。因此,可直接将原始记录中的数据内容作为最终待读取的数据进行读取操作。
本发明提供的数据读取方法,在实施例三的基础上进行了方法拓展:
首先,利用在原存储文件中预先设置的用于标识原始记录的内容为指定文件索引的标志,方便辨识原始记录中存储的内容是真正存储的数据,还是用于存储数据的指定文件索引,从而方便对已存储的数据进行查询。
其次,对于原始记录的内容为非指定文件索引的情况,仍将该原始记录中的数据内容作为最终的待读取的数据进行读取操作,不仅方便数据管理,同时减少对现有数据读取方案的改进成本。
实施例五
如图10所示,为本发明实施例的数据存储装置结构图一,该数据存储装置可设置在图3所示的数据存储及读取系统中,用于执行如图4所示的方法步骤,其包括:
数据获取模块101,用于获取待存储的数据;
数据判断模块102,用于判断数据的长度是否大于预设的长度阈值;
数据存储模块103,用于如果数据的长度大于长度阈值,则将数据存储至原存储文件以外的指定文件中,并在原存储文件中数据对应的原始记录中写入该数据对应的指定文件索引;
其中,指定文件中允许写入的数据最大长度大于长度阈值。
进一步地,如图11所示,上述数据存储装置中还可包括:
标志设置模块111,用于在原存储文件中设置用于标识原始记录的内容为指定文件索引的标志。
进一步地,上述标志可包括:位图标志。
进一步地,上述数据存储模块103,还可用于如果数据的长度不大于长度阈值,则将数据存储至原存储文件。
图11及拓展后的数据存储装置可用于执行如图5、图6所示的方法步骤。
本发明提供的数据存储装置,在存储数据时,先判断待存储的数据的数据长度,如果数据长度大于预设的长度阈值,则将该数据存储到原存储文件以外的指定文件中,并在原存储文件中该数据对应的原始记录中写入该数据对应的指定文件索引。这样,针对超长的(本方案中指大于长度阈值或者大于原存储文件的最大允许长度)数据可以通过额外的指定文件进行存储,从而避免了原存储文件由于对数据长度有限制而无法存储超长数据,或者需要从新建立存储文件实现对超长数据的存储而导致的数据存储的不灵活性。
进一步地,在原存储文件中设置用于标识原始记录的内容为指定文件索引的标志,以方便辨识原始记录中存储的内容是真正存储的数据,还是用于存储数据的指定文件索引,从而方便对存储的数据进行查询和管理。
进一步地,对于数据长度不大于预设的长度阈值的待存储数据,仍将其存储至原存储文件中,不仅方便数据管理,同时减少对现有数据存储方案的改进成本。
实施例六
如图12所示,为本发明实施例的数据读取装置结构图一,该数据读取装置可设置在图3所示的数据存储及读取系统中,用于执行如图6所示的方法步骤,其包括:
记录获取模块121,用于获取待读取的数据在原存储文件中的原始记录;
记录判断模块122,用于判断原始记录的内容是否为指定文件索引;
数据读取模块123,用于如果原始记录的内容为指定文件索引,则读取指定文件索引指向的数据作为最终读取的数据内容;
其中,指定文件中允许写入的数据最大长度大于预设的长度阈值。
进一步地,在原存储文件中可设置有用于标识原始记录内容为指定文件索引的标志;
相应的,记录判断模块122,可具体用于判断原存储文件中是否设置有标识原始记录的内容为指定文件索引的标志。
进一步地,上述标志包括:位图标志。
进一步地,上述数据读取模块123,还可用于如果原始记录的内容为非指定文件索引,则读取原始记录中的内容作为最终读取的数据内容。
功能拓展后的数据读取装置可用于执行图7、图8所示的方法步骤。
本发明提供的数据读取装置,在读取数据时,先获取待读取的数据在原存储文件中对应的原始记录,判断原始记录的内容是否为指定文件索引,如果是,则读取指定文件索引所指向的数据作为最终读取的数据内容;其中,指定文件中允许写入的数据最大长度大于上述长度阈值。这样,针对超长的(本方案中指大于长度阈值或者大于原存储文件的最大允许长度)数据可以通过额外的指定文件进行存储后读取,从而避免了原存储文件由于对数据长度有限制而无法存储超长数据,或者需要从新建立存储文件实现对超长数据的存储而导致的数据存储的不灵活性。
进一步地,利用在原存储文件中预先设置的用于标识原始记录的内容为指定文件索引的标志,方便辨识原始记录中存储的内容是真正存储的数据,还是用于存储数据的指定文件索引,从而方便对已存储的数据进行查询。
进一步地,对于原始记录的内容为非指定文件索引的情况,仍将该原始记录中的数据内容作为最终的待读取的数据进行读取操作,不仅方便数据管理,同时减少对现有数据读取方案的改进成本。
在实际应用场景中,上述数据存储装置以及数据读取装置可以分别设置在不同的数据处理装置中,也可以合并设置在同一个数据处理装置中。
实施例七
前面实施例描述了数据存储装置的整体架构,该装置的功能可借助一种电子设备实现完成,如图13所示,其为本发明实施例的电子设备的结构示意图,具体包括:存储器131和处理器132。
存储器131,用于存储程序。
除上述程序之外,存储器131还可被配置为存储其它各种数据以支持在电子设备上的操作。这些数据的示例包括用于在电子设备上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。
存储器131可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
处理器132,耦合至存储器131,用于执行存储器131中的程序,以用于:
获取待存储的数据;
判断数据的长度是否大于预设的长度阈值;
如果数据的长度大于长度阈值,则将数据存储至原存储文件以外的指定文件中,并在原存储文件中所述数据对应的原始记录中写入该数据对应的指定文件索引;
其中,指定文件中允许写入的数据最大长度大于长度阈值。
上述的具体处理操作已经在前面实施例中进行了详细说明,在此不再赘述。
进一步,如图13所示,电子设备还可以包括:通信组件133、电源组件134、音频组件135、显示器136等其它组件。图13中仅示意性给出部分组件,并不意味着电子设备只包括图13所示组件。
通信组件133被配置为便于电子设备和其他设备之间有线或无线方式的通信。电子设备可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件133经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,通信组件133还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
电源组件134,为电子设备的各种组件提供电力。电源组件134可以包括电源管理系统,一个或多个电源,及其他与为电子设备生成、管理和分配电力相关联的组件。
音频组件135被配置为输出和/或输入音频信号。例如,音频组件135包括一个麦克风(MIC),当电子设备处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器131或经由通信组件133发送。在一些实施例中,音频组件135还包括一个扬声器,用于输出音频信号。
显示器136包括屏幕,其屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与触摸或滑动操作相关的持续时间和压力。
实施例八
前面实施例描述了数据读取装置的整体架构,该装置的功能可借助一种电子设备实现完成,如图14所示,其为本发明实施例的电子设备的结构示意图,具体包括:存储器141和处理器142。
存储器141,用于存储程序。
除上述程序之外,存储器141还可被配置为存储其它各种数据以支持在电子设备上的操作。这些数据的示例包括用于在电子设备上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。
存储器141可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
处理器142,耦合至存储器141,用于执行存储器141中的程序,以用于:
获取待读取的数据在原存储文件中的原始记录;
判断原始记录的内容是否为指定文件索引;
如果原始记录的内容为所述指定文件索引,则读取指定文件索引指向的数据作为最终读取的数据内容;
其中,指定文件中允许写入的数据最大长度大于预设的长度阈值。
上述的具体处理操作已经在前面实施例中进行了详细说明,在此不再赘述。
进一步,如图14所示,电子设备还可以包括:通信组件143、电源组件144、音频组件145、显示器146等其它组件。图14中仅示意性给出部分组件,并不意味着电子设备只包括图14所示组件。
通信组件143被配置为便于电子设备和其他设备之间有线或无线方式的通信。电子设备可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件143经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,通信组件143还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
电源组件144,为电子设备的各种组件提供电力。电源组件144可以包括电源管理系统,一个或多个电源,及其他与为电子设备生成、管理和分配电力相关联的组件。
音频组件145被配置为输出和/或输入音频信号。例如,音频组件145包括一个麦克风(MIC),当电子设备处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器141或经由通信组件143发送。在一些实施例中,音频组件145还包括一个扬声器,用于输出音频信号。
显示器146包括屏幕,其屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与触摸或滑动操作相关的持续时间和压力。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (12)

1.一种数据存储方法,包括:
获取待存储的数据;
判断所述数据的长度是否大于预设的长度阈值;
如果所述数据的长度大于所述长度阈值,则将所述数据存储至原存储文件以外的指定文件中,并在所述原存储文件中所述数据对应的原始记录中写入该数据对应的指定文件索引;
其中,所述指定文件中允许写入的数据最大长度大于所述长度阈值。
2.根据权利要求1所述的方法,其中,所述方法还包括:
在所述原存储文件中设置用于标识原始记录的内容为指定文件索引的标志。
3.根据权利要求2所述的方法,其中,所述标志包括:位图标志。
4.根据权利要求1所述的方法,其中,所述方法还包括:
如果所述数据的长度不大于所述长度阈值,则将所述数据存储至原存储文件。
5.一种数据读取方法,包括:
获取待读取的数据在原存储文件中的原始记录;
判断所述原始记录的内容是否为指定文件索引;
如果所述原始记录的内容为所述指定文件索引,则读取所述指定文件索引指向的数据作为最终读取的数据内容;
其中,所述指定文件中允许写入的数据最大长度大于预设的长度阈值。
6.根据权利要求5所述的方法,其中,在所述原存储文件中设置有用于标识原始记录内容为指定文件索引的标志;
所述判断所述原始记录的内容是否为指定文件索引包括:
判断所述原存储文件中是否设置有标识所述原始记录的内容为所述指定文件索引的标志。
7.根据权利要求6所述的方法,其中,所述标志包括:位图标志。
8.根据权利要求5所述的方法,其中,所述方法还包括:
如果所述原始记录的内容为非所述指定文件索引,则读取所述原始记录中的内容作为最终读取的数据内容。
9.根据权利要求1所述的方法,其中,所述方法还包括:
将所述指定文件压缩后存储。
10.一种数据处理装置,包括:
数据获取模块,用于获取待存储的数据;
数据判断模块,用于判断所述数据的长度是否大于预设的长度阈值;
数据存储模块,用于如果所述数据的长度大于所述长度阈值,则将所述数据存储至原存储文件以外的指定文件中,并在所述原存储文件中所述数据对应的原始记录中写入该数据对应的指定文件索引;
其中,所述指定文件中允许写入的数据最大长度大于所述长度阈值。
11.根据权利要求10所述的装置,其中,所述装置还包括:
记录获取模块,用于获取待读取的数据在原存储文件中的原始记录;
记录判断模块,用于判断所述原始记录的内容是否为指定文件索引;
数据读取模块,用于如果所述原始记录的内容为所述指定文件索引,则读取所述指定文件索引指向的数据作为最终读取的数据内容。
12.一种电子设备,包括:
存储器,用于存储程序;
处理器,耦合至所述存储器,用于执行所述程序,以用于:
获取待存储的数据;
判断所述数据的长度是否大于预设的长度阈值;
如果所述数据的长度大于所述长度阈值,则将所述数据存储至原存储文件以外的指定文件中,并在所述原存储文件中所述数据对应的原始记录位置写入该数据对应的指定文件索引;
其中,所述指定文件中允许写入的数据最大长度大于所述长度阈值。
CN201811015648.0A 2018-08-31 2018-08-31 数据存储及读取方法、数据处理装置及电子设备 Pending CN110874388A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811015648.0A CN110874388A (zh) 2018-08-31 2018-08-31 数据存储及读取方法、数据处理装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811015648.0A CN110874388A (zh) 2018-08-31 2018-08-31 数据存储及读取方法、数据处理装置及电子设备

Publications (1)

Publication Number Publication Date
CN110874388A true CN110874388A (zh) 2020-03-10

Family

ID=69716001

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811015648.0A Pending CN110874388A (zh) 2018-08-31 2018-08-31 数据存储及读取方法、数据处理装置及电子设备

Country Status (1)

Country Link
CN (1) CN110874388A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103838830A (zh) * 2014-02-18 2014-06-04 广东亿迅科技有限公司 一种HBase数据库的数据管理方法及系统
CN104424224A (zh) * 2013-08-26 2015-03-18 深圳市腾讯计算机系统有限公司 一种文件索引存储方法及装置
CN105320669A (zh) * 2014-06-19 2016-02-10 腾讯科技(深圳)有限公司 数据存储、读取方法及数据存储、读取装置
CN105426123A (zh) * 2015-11-06 2016-03-23 安徽容知日新信息技术有限公司 数据管理方法、采集站及设备监测系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104424224A (zh) * 2013-08-26 2015-03-18 深圳市腾讯计算机系统有限公司 一种文件索引存储方法及装置
CN103838830A (zh) * 2014-02-18 2014-06-04 广东亿迅科技有限公司 一种HBase数据库的数据管理方法及系统
CN105320669A (zh) * 2014-06-19 2016-02-10 腾讯科技(深圳)有限公司 数据存储、读取方法及数据存储、读取装置
CN105426123A (zh) * 2015-11-06 2016-03-23 安徽容知日新信息技术有限公司 数据管理方法、采集站及设备监测系统

Similar Documents

Publication Publication Date Title
CN107888978B (zh) Key码烧录方法、装置及计算机可读存储介质
US20090325630A1 (en) Method, apparatus, and computer program product for personalizing a device
CN108572789B (zh) 磁盘存储方法和装置、消息推送方法和装置及电子设备
CN105302445A (zh) 图形用户界面绘制方法及装置
CN105094760A (zh) 一种图片标记方法及装置
CN105426386A (zh) 文件同步方法、装置和终端设备
CN111626895B (zh) 电力设备监造信息记录方法、系统、装置和计算机设备
CN110874358A (zh) 多属性列的存储、检索方法和装置以及电子设备
WO2022134547A1 (zh) 一种动画视频平台视频素材记录方法与装置
JP5534380B2 (ja) 汎用集積回路カードの情報のための管理方法およびその装置
US11049257B2 (en) Data structure, information processing apparatus, and control method thereof
CN110874388A (zh) 数据存储及读取方法、数据处理装置及电子设备
CN112613745A (zh) 记录仪管理方法、系统、存储介质以及电子设备
CN115103392B (zh) eSIM终端测试方法、仪表、门户服务器、装置及系统
CN110647421B (zh) 数据库处理方法、装置、系统以及电子设备
CN110929097A (zh) 录像记录显示方法、装置及存储介质
CN111291112A (zh) 分布式数据库的读写控制方法和装置以及电子设备
CN102662995B (zh) 一种快速定位手机应用数据更新的方法
CN105446835A (zh) 对系统文件进行修复的方法及装置
CN110795318B (zh) 数据处理方法和装置以及电子设备
CN108449625B (zh) 视频截图方法、装置及终端
CN111061855B (zh) 答复内容的生成方法和装置、在线聊天的处理方法以及电子设备
CN105488119A (zh) 进程查找方法和装置
CN110633389A (zh) 区块链数据的处理方法、装置、系统以及电子设备
CN112015310A (zh) 获取电子图标的封面及封面设置方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20211027

Address after: 310056 room 508, floor 5, building 4, No. 699, Wangshang Road, Changhe street, Binjiang District, Hangzhou, Zhejiang

Applicant after: Alibaba (China) Co.,Ltd.

Address before: A four-storey 847 mailbox in Grand Cayman Capital Building, British Cayman Islands

Applicant before: ALIBABA GROUP HOLDING Ltd.

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20211231

Address after: 310000 No. 12, Zhuantang science and technology economic block, Xihu District, Hangzhou City, Zhejiang Province

Applicant after: Aliyun Computing Co.,Ltd.

Address before: 310056 room 508, floor 5, building 4, No. 699, Wangshang Road, Changhe street, Binjiang District, Hangzhou, Zhejiang

Applicant before: Alibaba (China) Co.,Ltd.

TA01 Transfer of patent application right