CN115174597A - 一种文件数据防丢失的方法、系统、电子设备和存储介质 - Google Patents

一种文件数据防丢失的方法、系统、电子设备和存储介质 Download PDF

Info

Publication number
CN115174597A
CN115174597A CN202210912549.2A CN202210912549A CN115174597A CN 115174597 A CN115174597 A CN 115174597A CN 202210912549 A CN202210912549 A CN 202210912549A CN 115174597 A CN115174597 A CN 115174597A
Authority
CN
China
Prior art keywords
data
file
log
server
network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210912549.2A
Other languages
English (en)
Other versions
CN115174597B (zh
Inventor
王登强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Changan Automobile Co Ltd
Original Assignee
Chongqing Changan Automobile Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing Changan Automobile Co Ltd filed Critical Chongqing Changan Automobile Co Ltd
Priority to CN202210912549.2A priority Critical patent/CN115174597B/zh
Publication of CN115174597A publication Critical patent/CN115174597A/zh
Application granted granted Critical
Publication of CN115174597B publication Critical patent/CN115174597B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1448—Management of the data involved in backup or backup restore
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Quality & Reliability (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种文件数据防丢失的方法、系统、电子设备和存储介质，涉及汽车控制操作技术领域，本发明中首先获取文件上传服务器所需要的基础设备，其中基础设备包括网络云平台和数据存储服务器，随后文件写操作中添加数据和日志上传网络服务器的逻辑编码，最后根据数据和日志上传到网络服务器的逻辑编码的启动，启动守护进程守护数据和日志上传到数据存储服务器中。这样，本申请通过利用网络云平台和数据存储服务器的搭建能够为实现将数据上传到网络服务器中实现备份存储提供基础，同时本申请在逻辑编码的作用下能够将数据进行上传，同时利用守护进程能够实现数据向网络服务器进行同步，且不会影响效率。

Description

一种文件数据防丢失的方法、系统、电子设备和存储介质
技术领域
本申请涉及汽车控制操作技术领域，具体涉及一种文件数据防丢失的方法、系统、电子设备和存储介质。
背景技术
汽车操作系统的功能随着时代的发展逐渐增多，所以汽车操作系统的稳定可靠性的要求也越来越高。随着基于Linux的操作系统应用与座舱的控制，众多数据保存的需求也越来越大：座舱中有音视频文件的存储、各种APP的日志文件、控制逻辑中的数据、基于AI的模型所需的数据存储需求、汽车摄像头采集的图像和视频数据等等。
涉及如此多的数据，如何保证这些数据的正常存储和丢失数据恢复对汽车操作系统的正常工作、关键应用的正确执行、控制算法的精准计算有着至关重要的影响，所以目前常见的文件系统如EXT3、EXT4和NTFS等都具备日志事务处理等机制用于恢复写错的数据，一定程度上避免了数据写失败时的恢复能力。硬件存储芯片也具备一定的纠错能力，但是仍不可避免地出现硬件层面和软件层面的问题不能完全杜绝数据写失败导致文件丢失的情况发生。
发明内容
鉴于以上所述现有技术的缺点，本发明提供一种文件数据防丢失的方法、系统、电子设备和存储介质，以解决硬件层面和软件层面写失败导致的文件丢失的问题。
在第一方面，本发明提供的一种文件数据防丢失的方法，包括获取文件上传服务器所需要的基础设备，所述基础设备包括网络云平台和数据存储服务器，其中，搭建网络云平台和是数据存储服务器提供文件备份存储的方法和存储位置；
文件写操作中添加数据和日志上传网络服务器的逻辑编码，其中，逻辑编码控制数据和日志上传到数据存储服务器中存储；
根据数据和日志上传到网络服务器的逻辑编码的启动，启动守护进程守护数据和日志上传到数据存储服务器中。
于本发明的一实施例中，所述获取文件上传服务器所需要的基础设备，包括：
搭建网络云平台和数据存储服务器，其中，根据对文件的备份功能搭建网络云平台和数据存储服务器；
设计运行用户态Client端守护进程，维护并调度用户态与网络服务器交互，其中，用户态Client端守护进程处理守护用户态向网络服务器写入应用数据的完成；
设计实现内核态Client端守护进程，维护并调度内核态与网络服务器交互，其中，内核态Client端守护进程处理守护内核态向网络服务器写入数据的完成。
于本发明的一实施例中，所述文件写操作中添加数据和日志上传网络服务器的逻辑编码，包括：
将文件写操作中数据和日志文件生成写请求作为触发条件，其中数据和日志文件生成写请求由所述逻辑编码获取；
若数据和日志文件生成写请求触发，则逻辑编码控制用户态Client端守护进程和内核态Client端守护进程启动，所述数据和日志文件通过用户态Client端守护进程和内核态Client端守护进程向网络服务器写入数据和日志文件，形成备份。
于本发明的一实施例中，所述将文件写操作中数据和日志文件生成写请求作为触发条件，包括：
获取文件写操作中的数据，对数据进行封装成写队列，其中，所述写队列使用radix树的方式管理；
以封装成写队列的数据和日志文件写请求作为触发条件，将封装成写队列的数据以日志的方式上传网络服务器和将日志文件上传至网络服务器，形成对封装成写队列的数据和日志文件的备份。
于本发明的一实施例中，所述方法还包括：设置本体存储介质与网络服务器数据一致性检查的触发机制；
获取定时器，通过定时器设置检查周期，设置检查逻辑编码，其中，检查逻辑编码设置在内核态中；
通过定时器设置的周期，检查逻辑编码将内核态文件系统进行写操作，且将所述写操作输入的数据以日志的方式上传网络服务器，其中，所述写操作输入的数据上传至网络服务器是通过逻辑编码控制；
调取网络服务器上输入的数据，通过检查逻辑编码将数据和写操作输入的数据比较，检查数据是一致还是不一致，若数据不一致，则发出警醒信号。
于本发明的一实施例中，所述逻辑编码控制数据和日志上传到数据存储服务器中存储，包括：
设置网络资源检查和调度程序，检测当前所拥有的网络的信息传输速率和稳定程度，其中，检测当前拥有的网络的信息传输速率和稳定程度是在文件写操作数据上传网络服务器之前检测；
根据资源检查和调度程序检测出的当前拥有的网络的信息传输速率，选择速度最快且稳定的网络通道作为最佳网络通道，通过所述最佳网络通道实现文件写操作中数据上传到网络服务器。
于本发明的一实施例中，所述启动守护进程守护数据和日志上传到数据存储服务器中，包括：
设置内核态读写池守护进程，所述内核态读写池守护进程在守护进程启动后启动，其中，所述内核态读写池守护进程守护存储介质和网络服务器之间数据的同步。
在第二方面，本申请提供了一种文件数据防丢失的系统，包括：
搭建模块，用于获取文件上传服务器所需要的基础设备，所述基础设备包括网络云平台和数据存储服务器，其中，搭建网络云平台和是数据存储服务器提供文件备份存储的方法和存储位置；
编码控制模块，用于在文件写操作中添加数据和日志上传网络服务器的逻辑编码，其中，逻辑编码控制数据和日志上传到数据存储服务器中存储；
文件上传模块，用于根据数据和日志上传到网络服务器的逻辑编码的启动，启动守护进程守护数据和日志上传到数据存储服务器中。
在第三方面，本申请提供了一种电子设备，包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述电子设备实现上述的文件数据防丢失的方法。
在第四方面，本申请提供了一种计算机可读存储介质，其上存储有计算机程序，当所述计算机程序被计算机的处理器执行时，使计算机执行上述的文件数据防丢失的方法。
本发明的有益效果：本发明中首先获取文件上传服务器所需要的基础设备，其中基础设备包括网络云平台和数据存储服务器，随后文件写操作中添加数据和日志上传网络服务器的逻辑编码，最后根据数据和日志上传到网络服务器的逻辑编码的启动，启动守护进程守护数据和日志上传到数据存储服务器中。这样，本申请通过利用网络云平台和数据存储服务器的搭建能够为实现将数据上传到网络服务器中实现备份存储提供基础，同时本申请在逻辑编码的作用下能够将数据进行上传，同时利用守护进程能够实现数据向网络服务器进行同步，且不会影响效率。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术者来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
图1是本申请的一示例性实施例常用文件系统的文件数据防丢失的示意图；
图2是本申请的一示例性实施例示出的通过网络和文件系统的组合实现文件备份的示意图；
图3是本申请的一示例性实施例示出的文件数据防丢失的方法流程图；
图4是本申请的一示例性实施例示出的文件数据防丢失的系统框图；
图5示出了适于用来实现本申请实施例的电子设备的计算机系统的结构示意图。
具体实施方式
以下将参照附图和优选实施例来说明本发明的实施方式，本领域技术人员可由本说明书中所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本发明的精神下进行各种修饰或改变。应当理解，优选实施例仅为了说明本发明，而不是为了限制本发明的保护范围。
需要说明的是，以下实施例中所提供的图示仅以示意方式说明本发明的基本构想，遂图式中仅显示与本发明中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制，其实际实施时各组件的型态、数量及比例可为一种随意的改变，且其组件布局型态也可能更为复杂。
在下文描述中，探讨了大量细节，以提供对本发明实施例的更透彻的解释，然而，对本领域技术人员来说，可以在没有这些具体细节的情况下实施本发明的实施例是显而易见的，在其他实施例中，以方框图的形式而不是以细节的形式来示出公知的结构和设备，以避免使本发明的实施例难以理解。
首先需要说明的是，用户态和内核态实际上代表的是当前CPU正在执行指令的级别，其中用户态是运行ring3级别的，而内核态是执行ring0级别的，具体的工作流程如下：当用户态的程序需要向操作系统申请更高权限的服务时，就通过系统调用向内核发起请求；内核自然也会提供很多的接口来供调用，例如申请动态内存空间。但是申请了内存是不是还得考虑释放内存？如果把这块内存管理交给应用程序的话，复杂的管理工作会给开发带来很多负担；所以库函数就是用于屏蔽掉内部复杂的细节的，我们的应用程序可以通过库函数来调用内核的提供的接口，而库函数就会发起系统调用，发起了系统调用之后，用户态就会切换成内核态去执行对应的内核方法。
汽车操作系统基于Linux的操作系统应用与座舱和控制，众多数据保存的需求也越来越大：座舱中有音视频文件存储，各种APP的日志文件，控制逻辑中的数据，基于AI的模型所需的数据存储需求，汽车摄像头采集的图像和视频数据等等，需要对上述数据进行稳定性的存储，同时丢失数据的恢复对汽车操作系统的正常工作、关键应用的正确执行和控制算法的精准计算有着至关重要的影响。
图1是一种常用文件系统的文件数据防丢失的示意图，该示意图中显示，常见的文件数据基于EXT3、EXT4和NTFS等都具备日志事务处理等机制用于恢复写错的数据，但是由于恢复写错的数据通常是以硬件存储器作为备份，使得写错的数据全部依靠于硬件存储器，即利用日志处理机制104对存储器103中的备份数据进行调取，从而实现数据的防丢失，其中汽车101上设置有计算机系统102，利用计算机系统102实现文件系统的生成，当数据写入失败时，硬件存储器还不足以接收文件，从而导致文件丢失的情况发生，从而使得文件不能够被恢复。
图2是本申请的一示例性实施例示出的通过网络和文件系统的组合实现文件备份的示意图，其中当前5G技术逐渐普及，物联网发展和网络基础设施完善，车云系统等应用逐渐走入大众视野，所以如图2所以，可以利用基于网络实现文件系统数据的防丢失，即借助网络的支持，使得文件系统和网络组合形成新的解决方案，避免数据的丢失，即包括汽车201，汽车201上设置有计算机系统202，其中计算机系统202和云平台203之间通过网络204实现信息的备份。
结合图3所示，本申请公开了一种文件数据防丢失的方法，包括：
步骤S301，获取文件上传服务器所需要的基础设备，所述基础设备包括网络云平台和数据存储服务器，其中，搭建网络云平台和是数据存储服务器提供文件备份存储的方法和存储位置；
步骤S302，文件写操作中添加数据和日志上传网络服务器的逻辑编码，其中，逻辑编码控制数据和日志上传到数据存储服务器中存储；
步骤S303，根据数据和日志上传到网络服务器的逻辑编码的启动，启动守护进程守护数据和日志上传到数据存储服务器中。
采用本实施例提供的文件数据防丢失的方法，首先能够获取文件上传服务器所需要的基础设备，所述基础设备包括网络云平台和数据存储服务器，随后在文件写操作中添加数据和日志上传网络服务器的逻辑编码，根据数据和日志上传到网络服务器的逻辑编码的启动，启动守护进程守护数据和日志上传到数据存储服务器中，这样，本申请通过利用网络云平台和数据存储服务器的搭建能够为实现将数据上传到网络服务器中实现备份存储提供基础，同时本申请在逻辑编码的作用下能够将数据进行上传，同时利用守护进程能够实现数据向网络服务器进行同步，且不会影响效率，本申请基于带有日志的Linux文件系统ext3、无线网路技术以及云服务设施，在文件向存储介质进行写操作的同时向着网络服务器进行传输备份。
可选地，获取文件上传服务器所需要的基础设备，包括：搭建网络云平台和数据存储服务器，其中，根据对文件的备份功能搭建网络云平台和数据存储服务器；设计运行用户态Client端守护进程，维护并调度用户态与网络服务器交互，其中，用户态Client端守护进程处理守护用户态向网络服务器写入应用数据的完成；设计实现内核态Client端守护进程，维护并调度内核态与网络服务器交互，其中，内核态Client端守护进程处理守护内核态向网络服务器写入数据的完成。
在本实施例中，本申请利用基础设备的搭建，使得能够在文件系统向着存储介质进行写操作的同时能够向着网络服务器进行传输，在本申请中，利用用户态Client端守护进程用于处理向服务器写应用数据，而内核态Client端守护进程用于内核态向着服务器写数据，其中用户态Client端守护进程和内核态Client端守护进程用于完成数据向着网络服务器的同步，从而时间对数据的备份作用。
可选地，文件写操作中添加数据和日志上传网络服务器的逻辑编码，包括：将文件写操作中数据和日志文件生成写请求作为触发条件，其中数据和日志文件生成写请求由逻辑编码获取；若数据和日志文件生成写请求触发，则逻辑编码控制用户态Client端守护进程和内核态Client端守护进程启动，数据和日志文件通过用户态Client端守护进程和内核态Client端守护进程向网络服务器写入数据和日志文件，形成备份。
在一些实施例中，触发条件使得逻辑编码直接启动，从而能够直接启动将数据上传到网络服务器中，实现数据的备份，例如当用户端对于启动数据写请求，守护进程直接启动，在写请求的每一个操作中，都会在守护进程的作用下将数据直接上传到网络服务器中，同时在守护进程作用下能够避免数据上传失败，从而能够维持网络备份的准确程度，从而保证备份的安全和可靠程度。
可选地，将文件写操作中数据和日志文件生成写请求作为触发条件，包括：获取文件写操作中的数据，对数据进行封装成写队列，其中，写队列使用radix树的方式管理，在本实施例中，为提高性能，所以将向网络服务器写入的数据封装成写队列，利用radix树的方式进行管理，提高遍历请求速度，其中radix树是软件中对数据进行高效管理的一种方式，所以能够提高遍历请求；以封装成写队列的数据和日志文件写请求作为触发条件，将封装成写队列的数据以日志的方式上传网络服务器和将日志文件上传至网络服务器，形成对封装成写队列的数据和日志文件的备份。
在一些实施例中，将数据封装成写队列，随后通过radix树对写队列中的数据进行处理，随后可以将写队列中的数据以日志的方式上传，但是对于一些固有的日志，所以本申请可以直接进行上传，不必再将其封装成队列，提高了数据上传的速率。
可选地，方法还包括：设置本体存储介质与网络服务器数据一致性检查的触发机制，用于负责定时触发文件系统和网络服务器的同步，其中此过程利用内核实现数据的同步；获取定时器，通过定时器设置检查周期，设置检查逻辑编码，其中，检查逻辑编码设置在内核态中；通过定时器设置的周期，检查逻辑编码将内核态文件系统进行写操作，且将写操作输入的数据以日志的方式上传网络服务器，其中，写操作输入的数据上传至网络服务器是通过逻辑编码控制；调取网络服务器上输入的数据，通过检查逻辑编码将数据和写操作输入的数据比较，检查数据是一致还是不一致，若数据不一致，则发出警醒信号。
在一些实施例中，其中检查周期的起始端是写数据操作的起始时间，随后在固定检查周期内对数据进行检查，在写操作结束时，不论周期是否到达，均通过检查逻辑编码设置对数据一致性的检查，能够有效的保证，数据在写入存储介质中的同时向着网络服务器传输的数据保持一致；
其中在检查数据不一致时，需要利用警醒信号进行处理，其中警醒信号包括通过控制外显模块进行警醒，例如在汽车上设置有相应的警示灯，提示需要重新进行数据的写入，替换当前已经写入在存储介质中的数据，将原有写入不一致的数据进行覆盖，有效的节省存储介质的存储空间。
可选地，逻辑编码控制数据和日志上传到数据存储服务器中存储，包括：设置网络资源检查和调度程序，检测当前所拥有的网络的信息传输速率和稳定程度，其中，检测当前拥有的网络的信息传输速率和稳定程度是在文件写操作数据上传网络服务器之前检测；根据资源检查和调度程序检测出的当前拥有的网络的信息传输速率，选择速度最快且稳定的网络通道作为最佳网络通道，通过最佳网络通道实现文件写操作中数据上传到网络服务器。
在一些实施例中，由于常见的网络包括以太网，5G，WIFI等，汽车在处于不同的状态时候，可以相应的进行挑选一些最优的网络进行使用，保证数据备份的稳定性和完整性，所以在本实施例中，对网络进行选择，其中首先检测网络的传输速率和稳定程度，通过对比当前可以选择的网络的属性，从而能够挑选出，最优的网络供使用，保证数据写操作的安全可靠的正常使用。
可选地，启动守护进程守护数据和日志上传到数据存储服务器中，包括：设置内核态读写池守护进程，内核态读写池守护进程在守护进程启动后启动，其中，内核态读写池守护进程守护存储介质和网络服务器之间数据的同步。
在一些实施例中，利用本地存储介质和网络服务器的数据通过内核态读写池守护进程的守护，能够维护本地存储介质和网络服务器之间的数据的同步。
在本申请的实施例中，首先需要利用获取文件上传服务器所需要的基础设备，基础设备包括网络云平台和数据存储服务器，其中，搭建网络云平台和是数据存储服务器提供文件备份存储的方法和存储位置，随后将文件写操作中数据和日志文件生成写请求作为触发条件，一旦触发则会检测网络的传输速率和稳定程度，通过对比当前可以选择的网络的属性，从而能够挑选出，最优的网络供使用，其中数据和日志文件生成写请求由逻辑编码获取；若数据和日志文件生成写请求触发，则逻辑编码控制用户态Client端守护进程和内核态Client端守护进程启动，数据和日志文件通过用户态Client端守护进程和内核态Client端守护进程向网络服务器写入数据和日志文件，形成备份，即在APP写存储介质时，便可通过恰当的网络通道将数据和日志上传到网络服务器。由于实现了读写的守护进程和读写池，当文件系统写存储介质同时后台执行向服务器传输数据从而不会影响效率。在本申请中，网络支持的文件系统后，将有用户态client端守护进程和内核态client端守护进程完成向网络服务器同步数据的过程，而内核态读写池守护进程负责存储介质和服务器间数据的同步。
本发明中首先获取文件上传服务器所需要的基础设备，其中基础设备包括网络云平台和数据存储服务器，随后文件写操作中添加数据和日志上传网络服务器的逻辑编码，最后根据数据和日志上传到网络服务器的逻辑编码的启动，启动守护进程守护数据和日志上传到数据存储服务器中。这样，本申请通过利用网络云平台和数据存储服务器的搭建能够为实现将数据上传到网络服务器中实现备份存储提供基础，同时本申请在逻辑编码的作用下能够将数据进行上传，同时利用守护进程能够实现数据向网络服务器进行同步，且不会影响效率
结合图4所示，本申请实施例提供了一种文件数据防丢失的系统，包括搭建模块401、编码控制模块402和文件上传模块403，其中搭建模块401，用于获取文件上传服务器所需要的基础设备，基础设备包括网络云平台和数据存储服务器，其中，搭建网络云平台和是数据存储服务器提供文件备份存储的方法和存储位置；编码控制模块402，用于在文件写操作中添加数据和日志上传网络服务器的逻辑编码，其中，逻辑编码控制数据和日志上传到数据存储服务器中存储；文件上传模块403，用于根据数据和日志上传到网络服务器的逻辑代码的启动，启动守护进程守护数据和日志上传到数据存储服务器中。
本发明中首先通过搭建模块401获取文件上传服务器所需要的基础设备，其中基础设备包括网络云平台和数据存储服务器，随后通过编码控制模块402实现文件写操作中添加数据和日志上传网络服务器的逻辑编码，最后根据文件上传模块403实现通过数据和日志上传到网络服务器的逻辑编码的启动，启动守护进程守护数据和日志上传到数据存储服务器中。这样，本申请通过利用网络云平台和数据存储服务器的搭建能够为实现将数据上传到网络服务器中实现备份存储提供基础，同时本申请在逻辑编码的作用下能够将数据进行上传，同时利用守护进程能够实现数据向网络服务器进行同步，且不会影响效率。
本申请的实施例还提供了一种电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述电子设备实现上述各个实施例中提供的文件数据防丢失的方法。
图5示出了适于用来实现本申请实施例的电子设备的计算机系统的结构示意图。需要说明的是，图5示出的电子设备的计算机系统500仅是一个示例，不应对本申请实施例的功能和使用范围带来任何限制。
如图5所示，计算机系统500包括中央处理单元(Central Processing Unit，CPU)501，其可以根据存储在只读存储器(Read-Only Memory，ROM)502中的程序或者从储存部分508加载到随机访问存储器(Random Access Memory，RAM)503中的程序而执行各种适当的动作和处理，例如执行上述实施例中所述的方法。在RAM 503中，还存储有系统操作所需的各种程序和数据。CPU501、ROM502以及RAM 503通过总线504彼此相连。输入/输出(Input/Output，I/O)接口505也连接至总线504。
以下部件连接至I/O接口505：包括键盘、鼠标等的输入部分506；包括诸如阴极射线管(Cathode Ray Tube，CRT)、液晶显示器(Liquid Crystal Display，LCD)等以及扬声器等的输出部分507；包括硬盘等的储存部分508；以及包括诸如LAN(Local Area Network，局域网)卡、调制解调器等的网络接口卡的通信部分509。通信部分509经由诸如因特网的网络执行通信处理。驱动器510也根据需要连接至I/O接口505。可拆卸介质511，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器510上，以便于从其上读出的计算机程序根据需要被安装入储存部分508。
特别地，根据本申请的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本申请的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的计算机程序。在这样的实施例中，该计算机程序可以通过通信部分509从网络上被下载和安装，和/或从可拆卸介质511被安装。在该计算机程序被中央处理单元(CPU)501执行时，执行本申请的系统中限定的各种功能。
需要说明的是，本申请实施例所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、闪存、光纤、便携式紧凑磁盘只读存储器(Compact Disc Read-Only Memory，CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的计算机程序。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的计算机程序可以用任何适当的介质传输，包括但不限于：无线、有线等等，或者上述的任意合适的组合。
附图中的流程图和框图，图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。其中，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现，所描述的单元也可以设置在处理器中。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定。
本申请的另一方面还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被计算机的处理器执行时，使计算机执行如前所述的文件数据防丢失方法。该计算机可读存储介质可以是上述实施例中描述的电子设备中所包含的，也可以是单独存在，而未装配入该电子设备中。
本申请的另一方面还提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述各个实施例中提供的文件数据防丢失方法。
上述实施例仅示例性说明本发明的原理及其功效，而非用于限制本发明。任何熟悉此技术的人士皆可在不违背本发明的精神及范畴下，对上述实施例进行修饰或改变。因此，但凡所属技术领域中具有通常知识者在未脱离本发明所揭示的精神与技术思想下所完成的一切等效修饰或改变，仍应由本发明的权利要求所涵盖。

Claims (10)

1.一种文件数据防丢失的方法，其特征在于，所述方法包括：
获取文件上传服务器所需要的基础设备，所述基础设备包括网络云平台和数据存储服务器，其中，搭建网络云平台和是数据存储服务器提供文件备份存储的方法和存储位置；
文件写操作中添加数据和日志上传网络服务器的逻辑编码，其中，逻辑编码控制数据和日志上传到数据存储服务器中存储；
根据数据和日志上传到网络服务器的逻辑编码的启动，启动守护进程守护数据和日志上传到数据存储服务器中。
2.根据权利要求1所述的文件数据防丢失的方法，其特征在于，所述获取文件上传服务器所需要的基础设备，包括：
搭建网络云平台和数据存储服务器，其中，根据对文件的备份功能搭建网络云平台和数据存储服务器；
设计运行用户态Client端守护进程，维护并调度用户态与网络服务器交互，其中，用户态Client端守护进程处理守护用户态向网络服务器写入应用数据的完成；
设计实现内核态Client端守护进程，维护并调度内核态与网络服务器交互，其中，内核态Client端守护进程处理守护内核态向网络服务器写入数据的完成。
3.根据权利要求2所述的文件数据防丢失的方法，其特征在于，所述文件写操作中添加数据和日志上传网络服务器的逻辑编码，包括：
将文件写操作中数据和日志文件生成写请求作为触发条件，其中数据和日志文件生成写请求由所述逻辑编码获取；
若数据和日志文件生成写请求触发，则逻辑编码控制用户态Client端守护进程和内核态Client端守护进程启动，所述数据和日志文件通过用户态Client端守护进程和内核态Client端守护进程向网络服务器写入数据和日志文件，形成备份。
4.根据权利要求3所述的文件数据防丢失的方法，其特征在于，所述将文件写操作中数据和日志文件生成写请求作为触发条件，包括：
获取文件写操作中的数据，对数据进行封装成写队列，其中，所述写队列使用radix树的方式管理；
以封装成写队列的数据和日志文件写请求作为触发条件，将封装成写队列的数据以日志的方式上传网络服务器和将日志文件上传至网络服务器，形成对封装成写队列的数据和日志文件的备份。
5.根据权利要求1所述的文件数据防丢失的方法，其特征在于，所述方法还包括：设置本体存储介质与网络服务器数据一致性检查的触发机制；
获取定时器，通过定时器设置检查周期，设置检查逻辑编码，其中，检查逻辑编码设置在内核态中；
通过定时器设置的周期，检查逻辑编码将内核态文件系统进行写操作，且将所述写操作输入的数据以日志的方式上传网络服务器，其中，所述写操作输入的数据上传至网络服务器是通过逻辑编码控制；
调取网络服务器上输入的数据，通过检查逻辑编码将数据和写操作输入的数据比较，检查数据是一致还是不一致，若数据不一致，则发出警醒信号。
6.根据权利要求5所述的文件数据防丢失的方法，其特征在于，所述逻辑编码控制数据和日志上传到数据存储服务器中存储，包括：
设置网络资源检查和调度程序，检测当前所拥有的网络的信息传输速率和稳定程度，其中，检测当前拥有的网络的信息传输速率和稳定程度是在文件写操作数据上传网络服务器之前检测；
根据资源检查和调度程序检测出的当前拥有的网络的信息传输速率，选择速度最快且稳定的网络通道作为最佳网络通道，通过所述最佳网络通道实现文件写操作中数据上传到网络服务器。
7.根据权利要求1所述的文件数据防丢失的方法，其特征在于，所述启动守护进程守护数据和日志上传到数据存储服务器中，包括：
设置内核态读写池守护进程，所述内核态读写池守护进程在守护进程启动后启动，其中，所述内核态读写池守护进程守护存储介质和网络服务器之间数据的同步。
8.一种文件数据防丢失的系统，其特征在于，所述系统包括：
搭建模块，用于获取文件上传服务器所需要的基础设备，所述基础设备包括网络云平台和数据存储服务器，其中，搭建网络云平台和是数据存储服务器提供文件备份存储的方法和存储位置；
编码控制模块，用于在文件写操作中添加数据和日志上传网络服务器的逻辑编码，其中，逻辑编码控制数据和日志上传到数据存储服务器中存储；
文件上传模块，用于根据数据和日志上传到网络服务器的逻辑编码的启动，启动守护进程守护数据和日志上传到数据存储服务器中。
9.一种电子设备，其特征在于，所述电子设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述电子设备实现如权利要求1至7中任一项所述的文件数据防丢失的方法。
10.一种计算机可读存储介质，其特征在于，其上存储有计算机程序，当所述计算机程序被计算机的处理器执行时，使计算机执行权利要求1至7中任一项所述的文件数据防丢失的方法。
CN202210912549.2A 2022-07-30 2022-07-30 一种文件数据防丢失的方法、系统、电子设备和存储介质 Active CN115174597B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210912549.2A CN115174597B (zh) 2022-07-30 2022-07-30 一种文件数据防丢失的方法、系统、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210912549.2A CN115174597B (zh) 2022-07-30 2022-07-30 一种文件数据防丢失的方法、系统、电子设备和存储介质

Publications (2)

Publication Number Publication Date
CN115174597A true CN115174597A (zh) 2022-10-11
CN115174597B CN115174597B (zh) 2023-05-26

Family

ID=83478071

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210912549.2A Active CN115174597B (zh) 2022-07-30 2022-07-30 一种文件数据防丢失的方法、系统、电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN115174597B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116467037A (zh) * 2023-06-09 2023-07-21 成都融见软件科技有限公司 一种图形用户界面工作状态的恢复方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5778168A (en) * 1995-09-11 1998-07-07 Sun Microsystems, Inc. Transaction device driver technique for a journaling file system to ensure atomicity of write operations to a computer mass storage device
CN102541984A (zh) * 2011-10-25 2012-07-04 曙光信息产业(北京)有限公司 一种分布式文件系统客户端的文件系统
CN105472030A (zh) * 2015-12-30 2016-04-06 浪潮(北京)电子信息产业有限公司 一种基于iSCSI的远程镜像方法及系统
CN108874590A (zh) * 2018-06-16 2018-11-23 武汉商启网络信息有限公司 一种云主机自动备份与恢复的系统
CN109445685A (zh) * 2018-09-26 2019-03-08 华中科技大学 一种用户态文件系统处理方法
CN110618951A (zh) * 2018-06-20 2019-12-27 中兴通讯股份有限公司 系统高可用存储控制方法、装置、通信设备及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5778168A (en) * 1995-09-11 1998-07-07 Sun Microsystems, Inc. Transaction device driver technique for a journaling file system to ensure atomicity of write operations to a computer mass storage device
CN102541984A (zh) * 2011-10-25 2012-07-04 曙光信息产业(北京)有限公司 一种分布式文件系统客户端的文件系统
CN105472030A (zh) * 2015-12-30 2016-04-06 浪潮(北京)电子信息产业有限公司 一种基于iSCSI的远程镜像方法及系统
CN108874590A (zh) * 2018-06-16 2018-11-23 武汉商启网络信息有限公司 一种云主机自动备份与恢复的系统
CN110618951A (zh) * 2018-06-20 2019-12-27 中兴通讯股份有限公司 系统高可用存储控制方法、装置、通信设备及存储介质
CN109445685A (zh) * 2018-09-26 2019-03-08 华中科技大学 一种用户态文件系统处理方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
吕从东;: "基于透明加解密的iSCSI安全存储系统设计与实现", 保密科学技术 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116467037A (zh) * 2023-06-09 2023-07-21 成都融见软件科技有限公司 一种图形用户界面工作状态的恢复方法
CN116467037B (zh) * 2023-06-09 2023-09-22 成都融见软件科技有限公司 一种图形用户界面工作状态的恢复方法

Also Published As

Publication number Publication date
CN115174597B (zh) 2023-05-26

Similar Documents

Publication Publication Date Title
CN109597677B (zh) 用于处理信息的方法和装置
US11385903B2 (en) Firmware update patch
US10949307B2 (en) Executing computer instruction including asynchronous operation
US11016861B2 (en) Crash recoverability for graphics processing units (GPU) in a computing environment
US20120272236A1 (en) Mechanism for host machine level template caching in virtualization environments
CN112882734B (zh) 升级方法及装置、计算机设备和介质
KR20230004394A (ko) 공유 메모리 액세스 제어 방법, 장치, 전자 기기 및 자율 주행 차량
CN110209525B (zh) 操作系统还原方法及装置
CN115202686A (zh) 虚拟化系统的升级方法、装置、电子设备及存储介质
CN115174597A (zh) 一种文件数据防丢失的方法、系统、电子设备和存储介质
US9058196B2 (en) Host machine level template caching in virtualization environments
US9158550B2 (en) Caching based operating system installation
US10169030B1 (en) Refreshing a software component without interruption
US9223806B2 (en) Restarting a batch process from an execution point
CN115951949A (zh) 一种bios的配置参数的恢复方法、装置及计算设备
CN111158783B (zh) 一种环境变量修改方法、装置、设备及可读存储介质
CN114116655A (zh) 基于虚拟机的并行文件存储方法、装置、设备及存储介质
US20210109817A1 (en) Systems and methods for automatic backup scheduling based on backup history
US12008350B2 (en) System and method for fast application initialization with deferred injection
US11150890B2 (en) File system synchronization-based updating
US20230125207A1 (en) System and Method for Fast Application Initialization with Deferred Injection
US11210182B2 (en) Multiple file system recovery using dynamic web server
CN117919692A (zh) 游戏运行处理方法、装置、存储介质与电子设备
CN117149448A (zh) 资源管理方法、装置、介质及电子设备
US20140281310A1 (en) Transforming a Shared Virtualized Space to an Enclosed Space

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant