WO2020220534A1 - 一种基于中间件的数据处理方法和相关装置 - Google Patents

一种基于中间件的数据处理方法和相关装置 Download PDF

Info

Publication number
WO2020220534A1
WO2020220534A1 PCT/CN2019/102727 CN2019102727W WO2020220534A1 WO 2020220534 A1 WO2020220534 A1 WO 2020220534A1 CN 2019102727 W CN2019102727 W CN 2019102727W WO 2020220534 A1 WO2020220534 A1 WO 2020220534A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
storage device
storage
importance level
preset
Prior art date
Application number
PCT/CN2019/102727
Other languages
English (en)
French (fr)
Inventor
王鹏
Original Assignee
平安科技（深圳）有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 平安科技（深圳）有限公司 filed Critical 平安科技（深圳）有限公司
Publication of WO2020220534A1 publication Critical patent/WO2020220534A1/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G06F3/0607—Improving or facilitating administration, e.g. storage management by facilitating the process of upgrading existing storage systems, e.g. for improving compatibility between host and storage device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G06F3/0631—Configuration or reconfiguration of storage systems by allocating resources to storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0659—Command handling arrangements, e.g. command buffers, queues, command scheduling

Definitions

  • This application relates to the field of computer technology, and in particular to a data processing method and related devices based on middleware.
  • the embodiments of this application provide a data processing method and related devices based on middleware.
  • the implementation of the embodiments of this application is helpful to solve the incompatibility problem of different devices, so as to realize the storage of data beyond the storage space of the storage device to the architecture Different other storage devices.
  • the first aspect of the embodiments of the present application discloses a data processing method based on middleware, including:
  • the first storage device obtains a first data storage instruction from a client through the middleware, where the first data storage instruction carries first data;
  • the first storage device sends a second data storage instruction to the second storage device through the middleware, where the second data storage instruction carries the first data storage instruction.
  • the second data storage instruction is used to instruct the second storage device to store the first data.
  • the second aspect of the embodiments of the present application discloses a data processing device based on middleware, including:
  • An obtaining module configured to obtain a first data storage instruction from a client through the middleware, wherein the first data storage instruction carries first data
  • a determining module configured to determine the size of the storage space occupied by the first data to obtain the first storage space
  • a comparison module configured to compare the first storage space with the remaining storage space of the first storage device
  • a sending module configured to send a second data storage instruction to a second storage device through the middleware if the first storage space exceeds the remaining storage space, wherein the second data storage instruction carries the first Data, the second data storage instruction is used to instruct the second storage device to store the first data.
  • an embodiment of the present application provides a middleware-based data processing device, including a processor, a memory, a communication interface, and one or more programs, wherein the one or more programs are stored in the memory And is configured to be executed by the processor to execute instructions of the steps in any method in the first aspect of the embodiments of the present application.
  • an embodiment of the present application provides a computer-readable storage medium, the computer-readable storage medium is used to store a computer program, and the stored computer program is executed by the processor to implement the first On the one hand instructions for steps in any method.
  • FIG. 1 is a schematic flowchart of a data processing method based on middleware provided by an embodiment of the application
  • FIG. 2 is a schematic flowchart of another data processing method based on middleware provided by an embodiment of the application
  • FIG. 3 is a schematic flowchart of yet another data processing method based on middleware provided by an embodiment of the application
  • FIG. 4 is a schematic diagram of a data processing device based on middleware provided by an embodiment of the application.
  • Fig. 1 is a schematic flowchart of a data processing method based on middleware provided by an embodiment of the application.
  • a data processing method based on middleware provided by an embodiment of the present application may include the following steps:
  • the first storage device obtains a first data storage instruction from a client through the middleware.
  • the first data storage instruction carries first data.
  • middleware is an independent system software or service program.
  • Distributed application software uses this software to share resources between different technologies.
  • the first storage device is a device for storing information.
  • the first storage device determines the size of the storage space occupied by the first data to obtain the first storage space.
  • the first storage device compares the first storage space with the remaining storage space of the first storage device.
  • the first storage device sends a second data storage instruction to the second storage device through the middleware.
  • the second data storage instruction carries the first data, and the second data storage instruction is used to instruct the second storage device to store the first data.
  • the second storage device is a device for storing information.
  • the storage architecture of the first storage device is different from the storage architecture of the second storage device.
  • the first storage device calls the interface of the middleware to obtain the first data storage instruction of the client, and the first storage space exceeds that of the first storage.
  • the first storage device calls the interface of the middleware to send the second data storage instruction to the second storage device, thereby storing the first data in the second storage device.
  • a data processing method based on middleware provided by an embodiment of the present application may include the following steps:
  • a first storage device obtains a first data storage instruction from a client through the middleware.
  • the first data storage instruction carries first data.
  • middleware is an independent system software or service program.
  • Distributed application software uses this software to share resources between different technologies.
  • the first storage device is a device for storing information.
  • the first storage device determines the size of the storage space occupied by the first data to obtain the first storage space.
  • the first data storage instruction carries a first check code and a first data identifier
  • the first storage device determines the first data
  • the method includes: the first storage device calls a check interface on the first data to generate a second check code; The first check code is compared with the second check code; when the first check code is the same as the second check code, the first storage device determines that it is the same as the first data Identify the matching data processing priority; the first storage device compares the data processing priority with a preset data processing priority; when the data processing priority is lower than the preset data processing priority, The first storage device monitors whether the data processing process is in a busy state; if the data processing process is in a busy state, the first storage device puts the first data in a queue.
  • the data processing priority can be set by the user in advance. Or the data processing priority may also be determined by the first storage device according to a preset strategy. For example, if the client includes system software, game software, communication software, etc., then the data generated by the system software has the highest data processing priority, and the game The data generated by the software has the lowest data processing priority, and the data generated by other software has the middle priority.
  • the method for determining the priority of data processing is not limited in the embodiment of the present application.
  • the data processing priority can be recorded in a configuration file, and the data processing priority matching the first data identifier can be determined by querying the configuration file.
  • the first data is determined by comparing the first check code with the second check code to determine whether the first data is complete, so as to determine the data processing priority corresponding to the first data.
  • the data processing priority is lower than
  • the data processing priority is preset, the first storage device monitors whether the data processing process is busy. If it is busy, the first storage device puts the first data into the queue to achieve data verification. When the verification passes , Determine the data processing priority corresponding to the first data, and monitor whether the data processing process is in a busy state, so that the first storage device can quickly process data.
  • the first possible implementation manner based on the first aspect it further includes:
  • the first storage device sends a first data request instruction to the client through the middleware, and the first data request instruction Used to instruct the client to send the first data through the middleware.
  • the first storage device determines the storage space occupied by the first data Size to obtain the first storage space, including: when the data processing priority exceeds the preset data processing priority, the first storage device calculates the number of bytes occupied by the first data to obtain the first One byte; the first storage device determines the first storage space that matches the first byte.
  • the first data includes video data
  • the first storage device calculates the number of bytes occupied by the first data to obtain the first byte, including: S1: prior to the data processing
  • the first storage device parses the video data to obtain K image frames, where K is a positive integer;
  • S4 the first storage device counts the K The length X i and the width Y i of the i-th image frame in the image frames, where X i and Y i are both greater than zero, and the unit of length and width is pixel;
  • K can be equal to 1, 2, 3, 5, 6, 11, 13, 20 or other values, for example.
  • i can be equal to 1, 2, 3, 5, 6, 11, 13, 20 or other values, for example.
  • X i can be equal to 1, 2.1, 3, 5, 6.6, 11, 13, 20 or other values, for example.
  • Y i can be equal to 1, 2.1, 3, 5, 6, 11.5, 13, 20 or other values, for example.
  • the fourth possible implementation manner of the first aspect further includes: if the first aspect The storage space is lower than the remaining storage space, the first storage device determines the access frequency matching the first data identifier; the first storage device compares the access frequency with a preset access frequency; When the access frequency exceeds the preset access frequency, the first storage device selects a high access frequency storage area that matches the access frequency to store the first data.
  • the fifth possible implementation manner of the first aspect further includes: When the access frequency is lower than the preset access frequency, the first storage device sets a storage period, wherein the storage period is the time during which the first data is stored in the first storage device; When the storage period falls within the preset storage period range, the first storage device selects a low-access frequency storage area that matches the access frequency to store the first data.
  • the higher the access frequency the higher the access frequency corresponding to the storage area storing the first data.
  • the first storage device compares the first storage space with the remaining storage space of the first storage device.
  • the first storage device sends a second data storage instruction to the second storage device through the middleware.
  • the second data storage instruction carries the first data, and the second data storage instruction is used to instruct the second storage device to store the first data.
  • the second storage device is a device for storing information.
  • the storage architecture of the first storage device is different from the storage architecture of the second storage device.
  • the first storage device calls the interface of the middleware to obtain the first data storage instruction of the client, and the first storage space exceeds that of the first storage.
  • the first storage device calls the interface of the middleware to send the second data storage instruction to the second storage device, thereby storing the first data in the second storage device.
  • the first storage device sending a second data storage instruction to the second storage device through the middleware includes: the first storage device according to the first data The corresponding data type determines the importance level that matches the first data; the first storage device compares the importance level with a preset importance level to determine whether the importance level is higher than the preset importance level When the importance level is higher than the preset importance level, the first storage device determines the importance level interval in which the importance level falls; the first storage device obtains the importance level from the slicing strategy library The slicing strategy corresponding to the level interval; the first storage device slices the first data according to the slicing strategy to obtain multiple data slices; the first storage device sends the data to the second storage through the middleware The device sends the second data storage instruction, where the second data storage instruction carries the multiple data slices, and the second data storage instruction is used to instruct the second storage device to store the data according to the importance level. Describe multiple data slices.
  • the data type may include, for example, video, audio, text, and pictures.
  • the preset importance level may be set by an administrator, or the first storage device may be configured in a configuration file.
  • the slicing strategy library includes at least one slicing strategy corresponding to at least one important level interval, and each slicing strategy in the at least one slicing strategy is different from each other.
  • the importance level is compared with the preset importance level.
  • the importance of the importance level is determined.
  • Level interval to obtain the slicing strategy from the slicing strategy library according to the importance level interval, so that the first data is sliced according to the slicing strategy, so that the first data whose importance level is higher than the preset importance level is stored according to the importance level
  • the first storage device determines the importance level matching the first data according to the data type corresponding to the first data, including: S1: the first storage The device determines the data type of the video data; S2: the first storage device determines the initial importance level that matches the video data according to the data type of the video data; S3: the first storage device acquires the video The K image frames of the data; S4: the first storage device sets j to an integer with an initial value of 1; S5: the first storage device detects whether j is less than or equal to K, and if so, execute step S6 If not, perform step S12; S6: the first storage device acquires the image data included in the jth image frame among the K image frames; S7: the first storage device determines the jth image frame The data type to which the image data included in the image frame belongs to obtain the j-th data type; S8: the first storage device generates the j-th importance level coefficient according to the j-th data type; S9: the
  • j can be equal to 1, 2, 3, 5, 6, 11, 13, 20 or other values, for example.
  • the importance level model includes at least one importance level function
  • the first storage device constructs a mapping relationship between each importance level function in the at least one importance level function and an importance level coefficient interval, and the mapping relationship is in the first Stored in a storage device.
  • the first storage device inputs the initial importance level, the jth importance level coefficient, and the jth byte into the importance level model to obtain the jth image frame corresponding to the jth image frame.
  • Importance levels including: the first storage device determines the importance level coefficient interval into which the jth importance level coefficient falls; the first storage device determines the importance level coefficient interval according to the mapping relationship and the importance level coefficient interval The importance level function in the importance level model; the first storage device inputs the initial importance level, the jth importance level coefficient, and the jth byte into the importance level function to obtain the jth Important level.
  • FIG. 3 is a schematic flowchart of a data processing method based on middleware according to an embodiment of the application.
  • a data processing method based on middleware provided by an embodiment of the present application may include the following steps:
  • a first storage device obtains a first data storage instruction from a client through the middleware.
  • the first data storage instruction carries first data.
  • middleware is an independent system software or service program.
  • Distributed application software uses this software to share resources between different technologies.
  • the first storage device is a device for storing information.
  • the first storage device determines the size of the storage space occupied by the first data to obtain the first storage space.
  • the first data storage instruction carries a first check code and a first data identifier
  • the first storage device determines the first data
  • the method includes: the first storage device calls a check interface on the first data to generate a second check code; The first check code is compared with the second check code; when the first check code is the same as the second check code, the first storage device determines that it is the same as the first data Identify the matching data processing priority; the first storage device compares the data processing priority with a preset data processing priority; when the data processing priority is lower than the preset data processing priority, The first storage device monitors whether the data processing process is in a busy state; if the data processing process is in a busy state, the first storage device puts the first data in a queue.
  • the data processing priority can be set by the user in advance. Or the data processing priority may also be determined by the first storage device according to a preset strategy. For example, if the client includes system software, game software, communication software, etc., then the data generated by the system software has the highest data processing priority, and the game The data generated by the software has the lowest data processing priority, and the data generated by other software has the middle priority.
  • the method for determining the priority of data processing is not limited in the embodiment of the present application.
  • the data processing priority can be recorded in a configuration file, and the data processing priority matching the first data identifier can be determined by querying the configuration file.
  • the first data is determined by comparing the first check code with the second check code to determine whether the first data is complete, so as to determine the data processing priority corresponding to the first data.
  • the data processing priority is lower than
  • the data processing priority is preset, the first storage device monitors whether the data processing process is busy. If it is busy, the first storage device puts the first data into the queue to achieve data verification. When the verification passes , Determine the data processing priority corresponding to the first data, and monitor whether the data processing process is in a busy state, so that the first storage device can quickly process data.
  • the first possible implementation manner based on the first aspect it further includes:
  • the first storage device sends a first data request instruction to the client through the middleware, and the first data request instruction Used to instruct the client to send the first data through the middleware.
  • the first storage device determines the storage space occupied by the first data Size to obtain the first storage space, including: when the data processing priority exceeds the preset data processing priority, the first storage device calculates the number of bytes occupied by the first data to obtain the first One byte; the first storage device determines the first storage space that matches the first byte; or, if the data processing process is not in a busy state, the first storage device calculates the first data The number of bytes occupied to obtain the first byte; the first storage device determines the first storage space that matches the first byte.
  • the first data includes video data
  • the first storage device calculates the number of bytes occupied by the first data to obtain the first byte, including: S1: prior to the data processing
  • the first storage device parses the video data to obtain K image frames, where K is a positive integer;
  • S4 the first storage device counts the K The length X i and the width Y i of the i-th image frame in the image frames, where X i and Y i are both greater than zero, and the unit of length and width is pixel;
  • K can be equal to 1, 2, 3, 5, 6, 11, 13, 20 or other values, for example.
  • i can be equal to 1, 2, 3, 5, 6, 11, 13, 20 or other values, for example.
  • X i can be equal to 1, 2.1, 3, 5, 6.6, 11, 13, 20 or other values, for example.
  • Y i can be equal to 1, 2.1, 3, 5, 6, 11.5, 13, 20 or other values, for example.
  • the first data includes a log, and in the data
  • the first storage device calculates the number of bytes occupied by the first data to obtain the first byte, including: the first storage device parses the Log to obtain invalid text in the log; the first storage device deletes the invalid text to obtain the valid text in the log; the first storage device determines the number of bytes occupied by the valid text , To obtain the first byte; the first storage device determines a first storage space that matches the first byte.
  • the invalid text in the log may include, for example, spaces, comments, or special identification symbols.
  • the first storage device compares the first storage space with the remaining storage space of the first storage device.
  • the first storage device sends a second data storage instruction to the second storage device through the middleware.
  • the second data storage instruction carries the first data, and the second data storage instruction is used to instruct the second storage device to store the first data.
  • the second storage device is a device for storing information.
  • the storage architecture of the first storage device is different from the storage architecture of the second storage device.
  • the first storage device calls the interface of the middleware to obtain the first data storage instruction of the client, and the first storage space exceeds that of the first storage.
  • the first storage device calls the interface of the middleware to send the second data storage instruction to the second storage device, thereby storing the first data in the second storage device.
  • the first storage device determines an access frequency matching the first data identifier.
  • the first storage device compares the access frequency with a preset access frequency.
  • the first storage device selects a high access frequency storage area that matches the access frequency to store the first data.
  • the higher the access frequency the higher the access frequency corresponding to the storage area storing the first data.
  • the first storage device sets a storage period.
  • the storage period is the time during which the first data is stored in the first storage device.
  • the first storage device selects a low-access frequency storage area that matches the access frequency to store the first data.
  • the first storage device When the storage period exceeds the preset storage period range, the first storage device sends a data deletion request instruction to the client through the middleware, wherein the data deletion request instruction carries the first Data identification, the data deletion request instruction is used to instruct the client to generate a deletion confirmation instruction through the first data identification; when the confirmation deletion instruction sent by the client is acquired through the middleware, the The first storage device deletes the first data.
  • the first storage device by setting the storage period, when the storage period exceeds the preset storage period, the first storage device sends a data deletion request instruction to the client through the middleware, and the first storage device receives the confirmation The delete instruction deletes the first data, thereby realizing the real-time deletion of the data with lower access frequency and saving storage space.
  • FIG. 4 is a schematic diagram of a data processing apparatus based on middleware provided by an embodiment of the application.
  • a data processing apparatus 400 based on middleware provided by an embodiment of the present application may include:
  • the obtaining module 401 is configured to obtain the first data storage instruction from the client through the middleware.
  • the first data storage instruction carries first data.
  • middleware is an independent system software or service program.
  • Distributed application software uses this software to share resources between different technologies.
  • the first storage device is a device for storing information.
  • the determining module 402 is configured to determine the size of the storage space occupied by the first data to obtain the first storage space.
  • the determining module is specifically configured to: when the data processing priority exceeds the preset data processing priority, calculate the number of bytes occupied by the first data to obtain the first byte; The first storage device determines the first storage space that matches the first byte; or, if the data processing process is not in a busy state, calculate the number of bytes occupied by the first data to obtain the first Byte; the first storage device determines a first storage space that matches the first byte.
  • the data processing priority can be set by the user in advance. Or the data processing priority may also be determined by the first storage device according to a preset strategy. For example, if the client includes system software, game software, communication software, etc., then the data generated by the system software has the highest data processing priority, and the game The data generated by the software has the lowest data processing priority, and the data generated by other software has the middle priority.
  • the method for determining the priority of data processing is not limited in the embodiment of the present application.
  • the data processing priority can be recorded in a configuration file, and the data processing priority matching the first data identifier can be determined by querying the configuration file.
  • the first data includes video data
  • the determining module is specifically configured to: S1: when the data processing priority exceeds the preset data processing priority, parse the video data to obtain K image frames, where K is a positive integer; S2: set i to an integer whose initial value is 1; S3: detect whether i is less than or equal to K, if yes, go to step S4, if not, go to step S7; S4: statistics of the length of the i-th image frame K video frame width X i and Y i, wherein, X i and Y i are greater than zero, length and width in pixels; S5: X i * in accordance with Y i *Number of bytes occupied by a unit pixel Calculate the number of bytes occupied by the i-th image frame to obtain the i-th byte in the first byte, where the number of bytes occupied by the unit pixel is calculated by
  • the first storage device is configured according to the preset strategy; S6: As
  • K can be equal to 1, 2, 3, 5, 6, 11, 13, 20 or other values, for example.
  • i can be equal to 1, 2, 3, 5, 6, 11, 13, 20 or other values, for example.
  • X i can be equal to 1, 2.1, 3, 5, 6.6, 11, 13, 20 or other values, for example.
  • Y i can be equal to 1, 2.1, 3, 5, 6, 11.5, 13, 20 or other values, for example.
  • the device further includes a storage module configured to: if the first storage space is lower than the remaining storage space, determine an access frequency matching the first data identifier; The access frequency is compared with the preset access frequency; when the access frequency exceeds the preset access frequency, a high access frequency storage area matching the access frequency is selected to store the first data.
  • a storage module configured to: if the first storage space is lower than the remaining storage space, determine an access frequency matching the first data identifier; The access frequency is compared with the preset access frequency; when the access frequency exceeds the preset access frequency, a high access frequency storage area matching the access frequency is selected to store the first data.
  • the comparison module 403 is configured to compare the first storage space with the remaining storage space of the first storage device.
  • the sending module 404 is configured to send a second data storage instruction to the second storage device through the middleware if the first storage space exceeds the remaining storage space.
  • the second data storage instruction carries the first data, and the second data storage instruction is used to instruct the second storage device to store the first data.
  • the second storage device is a device for storing information.
  • the storage architecture of the first storage device is different from the storage architecture of the second storage device.
  • the first storage device calls the interface of the middleware to obtain the first data storage instruction of the client, and the first storage space exceeds that of the first storage.
  • the first storage device calls the interface of the middleware to send the second data storage instruction to the second storage device, thereby storing the first data in the second storage device.
  • the sending module is specifically configured to: determine the importance level that matches the first data according to the data type corresponding to the first data; compare the importance level with a preset importance level to determine Whether the importance level is higher than the preset importance level; when the importance level is higher than the preset importance level, determine the importance level interval in which the importance level falls; obtain the information from the slicing strategy library The slicing strategy corresponding to the importance level interval; slicing the first data according to the slicing strategy to obtain multiple data slices; sending the second data storage instruction to the second storage device through the middleware, where The second data storage instruction carries the multiple data slices, and the second data storage instruction is used to instruct the second storage device to store the multiple data slices according to the importance level.
  • the data type may include, for example, video, audio, text, and pictures.
  • the preset importance level may be set by an administrator, or the first storage device may be configured in a configuration file.
  • the slicing strategy library includes at least one slicing strategy corresponding to at least one important level interval, and each slicing strategy in the at least one slicing strategy is different from each other.
  • the sending module is further specifically configured to: S1: determine the data type of the video data; S2: determine the initial importance level matching the video data according to the data type of the video data; S3: obtain The K image frames of the video data; S4: set j to an integer with an initial value of 1; S5: detect whether j is less than or equal to K, if yes, execute step S6, if not, execute step S12; S6: Obtain image data included in the j-th image frame among the K image frames; S7: Determine the data type to which the image data included in the j-th image frame belongs to obtain the j-th data type; S8: Generate the j-th importance level coefficient according to the j-th data type; S9: obtain the j-th byte corresponding to the j-th image frame; S10: combine the initial importance level and the j-th importance level The coefficient and the j-th byte are input into the importance level model to obtain the j-th importance level corresponding to the j-
  • j can be equal to 1, 2, 3, 5, 6, 11, 13, 20 or other values, for example.
  • the importance level model includes at least one important level function
  • the sending module is specifically used to construct a mapping relationship between each important level function in the at least one important level function and an important level coefficient interval, and to convert the mapping The relationship is stored.
  • the sending module is specifically further configured to: determine the importance level coefficient interval in which the j-th importance level coefficient falls; and determine the importance level in the importance level model according to the mapping relationship and the importance level coefficient interval.
  • Level function input the initial importance level, the j-th importance level coefficient and the j-th byte into the importance level function to obtain the j-th importance level.
  • the apparatus further includes a processing module configured to: call a check interface on the first data to generate a second check code; and compare the first check code with the second check code. Compare the check codes; when the first check code is the same as the second check code, determine the data processing priority matching the first data identifier; compare the data processing priority with the pre- Set data processing priority for comparison; when the data processing priority is lower than the preset data processing priority, monitor whether the data processing process is in a busy state; if the data processing process is in a busy state, the The first data is put into the queue.
  • a processing module configured to: call a check interface on the first data to generate a second check code; and compare the first check code with the second check code. Compare the check codes; when the first check code is the same as the second check code, determine the data processing priority matching the first data identifier; compare the data processing priority with the pre- Set data processing priority for comparison; when the data processing priority is lower than the preset data processing priority, monitor whether the data processing process is in a busy state;
  • the device further includes a storage module configured to: if the first storage space is lower than the remaining storage space, determine an access frequency matching the first data identifier; The access frequency is compared with the preset access frequency; when the access frequency exceeds the preset access frequency, a high access frequency storage area matching the access frequency is selected to store the first data.
  • a storage module configured to: if the first storage space is lower than the remaining storage space, determine an access frequency matching the first data identifier; The access frequency is compared with the preset access frequency; when the access frequency exceeds the preset access frequency, a high access frequency storage area matching the access frequency is selected to store the first data.
  • the storage module is further configured to: when the access frequency is lower than the preset access frequency, set a storage period, where the storage period is that the first data is stored in the first The time of the storage device; when the storage period falls within the preset storage period range, a low access frequency storage area that matches the access frequency is selected to store the first data.
  • the storage module is further configured to: when the storage period exceeds the preset storage period range, send a data deletion request instruction to the client through the middleware, wherein the data deletion request The instruction carries the first data identifier, and the data delete request instruction is used to instruct the client to generate a delete confirmation instruction through the first data identifier; when the confirmation sent by the client is acquired through the middleware When deleting the instruction, delete the first data.
  • An embodiment of the present application also provides an electronic device for data processing based on middleware, including a processor, a memory, a communication interface, and one or more programs, wherein the one or more programs are stored in the memory, And it is configured to be executed by the processor to execute instructions of the steps in any middleware-based data processing method in the foregoing method embodiments.
  • An embodiment of the present application also provides a computer-readable storage medium, wherein the computer-readable storage medium is used to store a computer program, the stored computer program is executed by the processor, and the program execution includes the implementation of the above method. Part or all of the steps of any middleware-based data processing method described in the example.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

一种基于中间件的数据处理方法和相关装置，包括：第一存储设备通过所述中间件从客户端获取第一数据存储指令（101），其中，所述第一数据存储指令携带第一数据；确定所述第一数据占用的存储空间大小，以得到第一存储空间（102）；将所述第一存储空间与所述第一存储设备的剩余存储空间进行对比（103）；若所述第一存储空间超过所述剩余存储空间，通过所述中间件向第二存储设备发送第二数据存储指令（104），其中，所述第二数据存储指令携带所述第一数据，所述第二数据存储指令用于指示所述第二存储设备存储所述第一数据。该方法有利于解决不同设备存在的无法兼容的问题，从而实现将超出存储设备存储空间的数据存储到架构不同的其他存储设备中。

Description

一种基于中间件的数据处理方法和相关装置
本申请要求于2019年4月28日提交中国专利局、申请号为2019103508174、申请名称为“一种基于中间件的数据处理方法和相关装置”的中国专利申请的优先权，其全部内容通过引用结合在本申请中。
技术领域
本申请涉及计算机技术领域，尤其涉及一种基于中间件的数据处理方法和相关装置。
背景技术
随着计算机技术和网络技术的迅猛发展，网络中的各种资源急剧增大。无论是企业还是个人，对存储空间的需求都呈现几何级数增长。小容量的存储设备或单个磁盘的存储容量与存取速度都无法满足人们和企业的存储需求。因此，针对这个问题，人们提出了存储设备。
然而，在这个信息化、数字化的时代，面对现代化企业海量数据的存储需求，一个存储设备的存储空间无法满足现在的存储需求。然而，不同存储设备之间的架构不同，因此，不同设备存在无法兼容的问题，从而导致超出存储设备存储空间的数据不能存储到架构不同的其他存储设备中。
发明内容
本申请实施例提供了一种基于中间件的数据处理方法和相关装置，实施本申请实施例，有利于解决不同设备存在的无法兼容的问题，从而实现将超出存储设备存储空间的数据存储到架构不同的其他存储设备中。
本申请实施例第一方面公开了一种基于中间件的数据处理方法，包括：
第一存储设备通过所述中间件从客户端获取第一数据存储指令，其中，所述第一数据存储指令携带第一数据；
所述第一存储设备确定所述第一数据占用的存储空间大小，以得到第一存储空间；
所述第一存储设备将所述第一存储空间与所述第一存储设备的剩余存储空间进行对比；
若所述第一存储空间超过所述剩余存储空间，所述第一存储设备通过所述中间件向第二存储设备发送第二数据存储指令，其中，所述第二数据存储指令携带所述第一数据，所述第二数据存储指令用于指示所述第二存储设备存储所述第一数据。
本申请实施例第二方面公开了一种基于中间件的数据处理装置，包括：
获取模块，用于通过所述中间件从客户端获取第一数据存储指令，其中，所述第一数据存储指令携带第一数据；
确定模块，用于确定所述第一数据占用的存储空间大小，以得到第一存储空间；
对比模块，用于将所述第一存储空间与所述第一存储设备的剩余存储空间进行对比；
发送模块，用于若所述第一存储空间超过所述剩余存储空间，通过所述中间件向第二存储设备发送第二数据存储指令，其中，所述第二数据存储指令携带所述第一数据，所述第二数据存储指令用于指示所述第二存储设备存储所述第一数据。
第三方面，本申请实施例提供一种基于中间件的数据处理的设备，包括处理器、存储器、通信接口以及一个或多个程序，其中，所述一个或多个程序被存储在所述存储器中，并且被配置由所述处理器执行，以执行本申请实施例第一方面任一方法中的步骤的指令。
第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质用于存储计算机程序，所述存储计算机程序被所述处理器执行，以实现本申请实施例第一方面任一方法中的步骤的指令。
可以看出，上述技术方案中，通过中间件解决了不同设备存在的无法兼容的问题，实现将超出存储设备存储空间的数据存储到架构不同的其他存储设备中。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
其中：
图1为本申请实施例提供的一种基于中间件的数据处理方法的流程示意图；
图2为本申请实施例提供的又一种基于中间件的数据处理方法的流程示意图；
图3为本申请实施例提供的又一种基于中间件的数据处理方法的流程示意图；
图4为本申请实施例提供的一种基于中间件的数据处理装置的示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
以下分别进行详细说明。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。
首先，参见图1，图1为本申请的一个实施例提供的一种基于中间件的数据处理方法的流程示意图。其中，如图1所示，本申请的一个实施例提供的一种基于中间件的数据处理方法可以包括如下步骤：
101、第一存储设备通过所述中间件从客户端获取第一数据存储指令。
其中，所述第一数据存储指令携带第一数据。
其中，中间件是一种独立的系统软件或服务程序，分布式应用软件借助这种软件在不同的技术之间共享资源。
其中，第一存储设备是用于储存信息的设备。
102、第一存储设备确定所述第一数据占用的存储空间大小，以得到第一存储空间。
103、第一存储设备将所述第一存储空间与所述第一存储设备的剩余存储空间进行对比。
104、若所述第一存储空间超过所述剩余存储空间，第一存储设备通过所述中间件向第二存储设备发送第二数据存储指令。
其中，所述第二数据存储指令携带所述第一数据，所述第二数据存储指令用于指示所述第二存储设备存储所述第一数据。
其中，第二存储设备是用于储存信息的设备。
可选的，第一存储设备的存储架构不同于第二存储设备的存储架构。
举例来说，在第一存储设备的存储架构不同于第二存储设备的存储架构时，第一存储设备调用中间件的接口获取客户端的第一数据存储指令，在第一存储空间超过第一存储设备的剩余存储空间时，第一存储设备调用中间件的接口实现将第二数据存储指令发送至第二存储设备，从而将第一数据存储在第二存储设备。
参见图2，图2为本申请的一个实施例提供的一种基于中间件的数据处理 方法的流程示意图。其中，如图2所示，本申请的一个实施例提供的一种基于中间件的数据处理方法可以包括如下步骤：
201、第一存储设备通过所述中间件从客户端获取第一数据存储指令。
其中，所述第一数据存储指令携带第一数据。
其中，中间件是一种独立的系统软件或服务程序，分布式应用软件借助这种软件在不同的技术之间共享资源。
其中，第一存储设备是用于储存信息的设备。
202、第一存储设备确定所述第一数据占用的存储空间大小，以得到第一存储空间。
可选的，第一方面，在本申请的一种可能的实施方式中，所述第一数据存储指令携带第一校验码和第一数据标识，在所述第一存储设备确定所述第一数据占用的存储空间大小，以得到第一存储空间之前，包括：所述第一存储设备对所述第一数据调用校验接口以生成第二校验码；所述第一存储设备将所述第一校验码与所述第二校验码进行对比；在所述第一校验码与所述第二校验码相同时，所述第一存储设备则确定与所述第一数据标识匹配的数据处理优先级；所述第一存储设备将所述数据处理优先级与预设数据处理优先级进行对比；在所述数据处理优先级低于所述预设数据处理优先级时，所述第一存储设备监测数据处理进程是否处于忙碌状态；若所述数据处理进程处于忙碌状态，所述第一存储设备则将所述第一数据放入排队队列。
其中，数据处理优先级可以由用户事先设定。或者数据处理优先级也可由所述第一存储设备根据预设策略来确定，例如，客户端包括系统软件、游戏软件、通讯软件等，那么系统软件产生的数据对应的数据处理优先级最高，游戏软件产生的数据对应的数据处理优先级最低，其他软件产生的数据对应的数据处理优先级居中。当然，本申请的实施例中不限定数据处理优先级的确定方式。
例如，数据处理优先级可记录在配置文件中，可通过查询配置文件来确定与所述第一数据标识匹配的数据处理优先级。
可以看出，上述技术方案中，通过比较第一校验码与第二校验码，来确定第一数据是否完整，从而判定第一数据对应的数据处理优先级，当数据处理优先级低于预设数据处理优先级时，第一存储设备监测数据处理进程是否处于忙碌状态，若忙碌，第一存储设备则将第一数据放入排队队列，实现了数据的校验，在校验通过时，判定第一数据对应的数据处理优先级，并监测数据处理进程是否处于忙碌状态，从而实现第一存储设备快速的处理数据。
可选的，基于第一方面的第一种可能的实施方式中，还包括：
在所述第一校验码与所述第二校验码不同时，所述第一存储设备则通过所 述中间件向所述客户端发送第一数据请求指令，所述第一数据请求指令用于指示所述客户端通过所述中间件发送所述第一数据。
可选的，基于第一方面或第一方面的第一种可能的实施方式，第一方面的第二种可能的实施方式中，所述第一存储设备确定所述第一数据占用的存储空间大小，以得到第一存储空间，包括：在所述数据处理优先级超过所述预设数据处理优先级时，所述第一存储设备计算所述第一数据占用的字节数，以得到第一字节；所述第一存储设备确定与所述第一字节匹配的第一存储空间。
可选的，基于第一方面或第一方面的第一种或第二种可能的实施方式，第一方面的第三种可能的实施方式中，所述第一数据包括视频数据，在所述数据处理优先级超过所述预设数据处理优先级时，所述第一存储设备计算所述第一数据占用的字节数，以得到第一字节，包括：S1：在所述数据处理优先级超过所述预设数据处理优先级时，所述第一存储设备解析所述视频数据，以得到K个图像帧，其中，K为正整数；S2：所述第一存储设备将i设置为初始值为1的整数；S3：所述第一存储设备检测i是否小于或等于K，若是，则执行步骤S4，若否，则执行步骤S7；S4：所述第一存储设备统计所述K个图像帧中的第i个图像帧的长度X i和宽度Y i，其中，X i和Y i均大于零，长度和宽度的单位为像素；S5：所述第一存储设备按照X i*Y i*单位像素占用的字节数计算第i个图像帧占用的字节数，以得到所述第一字节中的第i个字节，其中，所述单位像素占用的字节数由所述第一存储设备按照预设策略配置得到；S6：所述第一存储设备将(i+1)赋值给i，返回执行步骤S3；S7：所述第一存储设备结束计算图像帧占用的字节数。
其中，K例如可等于1、2、3、5、6、11、13、20或其他值。
其中，i例如可等于1、2、3、5、6、11、13、20或其他值。
其中，X i例如可等于1、2.1、3、5、6.6、11、13、20或其他值。
其中，Y i例如可等于1、2.1、3、5、6、11.5、13、20或其他值。
可选的，基于第一方面或第一方面的第一种或第二种或第三种可能的实施方式，第一方面的第四种可能的实施方式中，还包括：若所述第一存储空间低于所述剩余存储空间，所述第一存储设备确定与所述第一数据标识匹配的访问频率；所述第一存储设备将所述访问频率与预设访问频率进行对比；在所述访问频率超过所述预设访问频率时，所述第一存储设备则选取与所述访问频率匹配的高访问频率存储区域存储所述第一数据。
可选的，基于第一方面或第一方面的第一种或第二种或第三种或第四种可能的实施方式，第一方面的第五种可能的实施方式中，还包括：在所述访问频率低于所述预设访问频率时，所述第一存储设备则设置存储期限，其中，所述 存储期限为所述第一数据存储在所述第一存储设备的时间；在所述存储期限落入预设存储期限范围时，所述第一存储设备选取与所述访问频率匹配的低访问频率存储区域存储所述第一数据。
其中，访问频率越高，存储所述第一数据的存储区域对应的访问频率也越高。
203、第一存储设备将所述第一存储空间与所述第一存储设备的剩余存储空间进行对比。
204、若所述第一存储空间超过所述剩余存储空间，第一存储设备通过所述中间件向第二存储设备发送第二数据存储指令。
其中，所述第二数据存储指令携带所述第一数据，所述第二数据存储指令用于指示所述第二存储设备存储所述第一数据。
其中，第二存储设备是用于储存信息的设备。
可选的，第一存储设备的存储架构不同于第二存储设备的存储架构。
举例来说，在第一存储设备的存储架构不同于第二存储设备的存储架构时，第一存储设备调用中间件的接口获取客户端的第一数据存储指令，在第一存储空间超过第一存储设备的剩余存储空间时，第一存储设备调用中间件的接口实现将第二数据存储指令发送至第二存储设备，从而将第一数据存储在第二存储设备。
可选的，在一种可能的实施方式中，所述第一存储设备通过所述中间件向第二存储设备发送第二数据存储指令，包括：所述第一存储设备根据所述第一数据对应的数据类型确定与所述第一数据匹配的重要等级；所述第一存储设备将所述重要等级与预设重要等级进行对比，以确定所述重要等级是否高于所述预设重要等级；在所述重要等级高于所述预设重要等级时，所述第一存储设备确定所述重要等级落入的重要等级区间；所述第一存储设备从切片策略库中获取与所述重要等级区间对应的切片策略；所述第一存储设备按照所述切片策略对所述第一数据进行切片以得到多个数据切片；所述第一存储设备通过所述中间件向所述第二存储设备发送所述第二数据存储指令，其中，所述第二数据存储指令携带所述多个数据切片，所述第二数据存储指令用于指示所述第二存储设备按照所述重要等级存储所述多个数据切片。
其中，数据类型例如可以包括视频、音频、文本、图片等。
其中，预设重要等级可以由管理员设置，也可以所述第一存储设备配置在配置文件中。
其中，切片策略库包括至少一个重要等级区间一一对应的至少一个切片策略，至少一个切片策略中的每个切片策略互不相同。
可以看出，上述技术方案中，通过确定与第一数据匹配的重要等级，实现将重要等级与预设重要等级进行对比，在重要等级高于预设重要等级时，确定重要等级落入的重要等级区间，以根据重要等级区间从切片策略库中获取切片策略，从而按照切片策略将第一数据进行切片，实现了对重要等级高于预设重要等级的第一数据按照重要等级存储第一数据的多个数据切片，避免了重要数据的泄露。
可选的，在一种可能的实施方式中，所述第一存储设备根据所述第一数据对应的数据类型确定与所述第一数据匹配的重要等级，包括：S1：所述第一存储设备确定所述视频数据的数据类型；S2：所述第一存储设备根据所述视频数据的数据类型确定与所述视频数据匹配的初始重要等级；S3：所述第一存储设备获取所述视频数据的所述K个图像帧；S4：所述第一存储设备将j设置为初始值为1的整数；S5：所述第一存储设备检测j是否小于或等于K，若是，则执行步骤S6，若否，则执行步骤S12；S6：所述第一存储设备获取所述K个图像帧中的第j个图像帧包括的图像数据；S7：所述第一存储设备确定所述第j个图像帧包括的图像数据所属的数据类型，以得到第j个数据类型；S8：所述第一存储设备根据所述第j个数据类型生成第j个重要等级系数；S9：所述第一存储设备获取所述第j个图像帧对应的第j个字节；S10：所述第一存储设备将所述初始重要等级、所述第j个重要等级系数和所述第j个字节输入重要等级模型中以得到所述第j个图像帧对应的第j个重要等级；S11：所述第一存储设备在数据表中存储所述第j个重要等级；S12：所述第一存储设备将(j+1)赋值给j，返回执行步骤S5；S13：所述第一存储设备从所述数据表中获取所有的重要等级，以确定所述视频数据的重要等级；S15：所述第一存储设备结束确定所述视频数据的重要等级。
其中，j例如可等于1、2、3、5、6、11、13、20或其他值。
其中，重要等级模型包括至少一个重要等级函数，所述第一存储设备构建至少一个重要等级函数中的每个重要等级函数与重要等级系数区间之间的映射关系，所述映射关系在所述第一存储设备中存储。
进一步的，所述第一存储设备将所述初始重要等级、所述第j个重要等级系数和所述第j个字节输入重要等级模型中以得到所述第j个图像帧对应的第j个重要等级，包括：所述第一存储设备确定所述第j个重要等级系数落入的重要等级系数区间；所述第一存储设备根据所述映射关系和所述重要等级系数区间确定所述重要等级模型中的重要等级函数；所述第一存储设备将所述初始重要等级、所述第j个重要等级系数和所述第j个字节输入所述重要等级函数以得到所述第j个重要等级。
参见图3，图3为本申请的一个实施例提供的一种基于中间件的数据处理方法的流程示意图。其中，如图3所示，本申请的一个实施例提供的一种基于中间件的数据处理方法可以包括如下步骤：
301、第一存储设备通过所述中间件从客户端获取第一数据存储指令。
其中，所述第一数据存储指令携带第一数据。
其中，中间件是一种独立的系统软件或服务程序，分布式应用软件借助这种软件在不同的技术之间共享资源。
其中，第一存储设备是用于储存信息的设备。
302、第一存储设备确定所述第一数据占用的存储空间大小，以得到第一存储空间。
可选的，第一方面，在本申请的一种可能的实施方式中，所述第一数据存储指令携带第一校验码和第一数据标识，在所述第一存储设备确定所述第一数据占用的存储空间大小，以得到第一存储空间之前，包括：所述第一存储设备对所述第一数据调用校验接口以生成第二校验码；所述第一存储设备将所述第一校验码与所述第二校验码进行对比；在所述第一校验码与所述第二校验码相同时，所述第一存储设备则确定与所述第一数据标识匹配的数据处理优先级；所述第一存储设备将所述数据处理优先级与预设数据处理优先级进行对比；在所述数据处理优先级低于所述预设数据处理优先级时，所述第一存储设备监测数据处理进程是否处于忙碌状态；若所述数据处理进程处于忙碌状态，所述第一存储设备则将所述第一数据放入排队队列。
其中，数据处理优先级可以由用户事先设定。或者数据处理优先级也可由所述第一存储设备根据预设策略来确定，例如，客户端包括系统软件、游戏软件、通讯软件等，那么系统软件产生的数据对应的数据处理优先级最高，游戏软件产生的数据对应的数据处理优先级最低，其他软件产生的数据对应的数据处理优先级居中。当然，本申请的实施例中不限定数据处理优先级的确定方式。
例如，数据处理优先级可记录在配置文件中，可通过查询配置文件来确定与所述第一数据标识匹配的数据处理优先级。
可以看出，上述技术方案中，通过比较第一校验码与第二校验码，来确定第一数据是否完整，从而判定第一数据对应的数据处理优先级，当数据处理优先级低于预设数据处理优先级时，第一存储设备监测数据处理进程是否处于忙碌状态，若忙碌，第一存储设备则将第一数据放入排队队列，实现了数据的校验，在校验通过时，判定第一数据对应的数据处理优先级，并监测数据处理进程是否处于忙碌状态，从而实现第一存储设备快速的处理数据。
可选的，基于第一方面的第一种可能的实施方式中，还包括：
在所述第一校验码与所述第二校验码不同时，所述第一存储设备则通过所述中间件向所述客户端发送第一数据请求指令，所述第一数据请求指令用于指示所述客户端通过所述中间件发送所述第一数据。
可选的，基于第一方面或第一方面的第一种可能的实施方式，第一方面的第二种可能的实施方式中，所述第一存储设备确定所述第一数据占用的存储空间大小，以得到第一存储空间，包括：在所述数据处理优先级超过所述预设数据处理优先级时，所述第一存储设备计算所述第一数据占用的字节数，以得到第一字节；所述第一存储设备确定与所述第一字节匹配的第一存储空间；或者，若所述数据处理进程未处于忙碌状态，所述第一存储设备计算所述第一数据占用的字节数，以得到第一字节；所述第一存储设备确定与所述第一字节匹配的第一存储空间。
可选的，基于第一方面或第一方面的第一种或第二种可能的实施方式，第一方面的第三种可能的实施方式中，所述第一数据包括视频数据，在所述数据处理优先级超过所述预设数据处理优先级时，所述第一存储设备计算所述第一数据占用的字节数，以得到第一字节，包括：S1：在所述数据处理优先级超过所述预设数据处理优先级时，所述第一存储设备解析所述视频数据，以得到K个图像帧，其中，K为正整数；S2：所述第一存储设备将i设置为初始值为1的整数；S3：所述第一存储设备检测i是否小于或等于K，若是，则执行步骤S4，若否，则执行步骤S7；S4：所述第一存储设备统计所述K个图像帧中的第i个图像帧的长度X i和宽度Y i，其中，X i和Y i均大于零，长度和宽度的单位为像素；S5：所述第一存储设备按照X i*Y i*单位像素占用的字节数计算第i个图像帧占用的字节数，以得到所述第一字节中的第i个字节，其中，所述单位像素占用的字节数由所述第一存储设备按照预设策略配置得到；S6：所述第一存储设备将(i+1)赋值给i，返回执行步骤S3；S7：所述第一存储设备结束计算图像帧占用的字节数。
其中，K例如可等于1、2、3、5、6、11、13、20或其他值。
其中，i例如可等于1、2、3、5、6、11、13、20或其他值。
其中，X i例如可等于1、2.1、3、5、6.6、11、13、20或其他值。
其中，Y i例如可等于1、2.1、3、5、6、11.5、13、20或其他值。
可选的，基于第一方面或第一方面的第一种或第二种可能的实施方式，第一方面的第三种可能的实施方式中，所述第一数据包括日志，在所述数据处理优先级超过所述预设数据处理优先级时，所述第一存储设备计算所述第一数据占用的字节数，以得到第一字节，包括：所述第一存储设备解析所述日志，以得到所述日志中的无效文本；所述第一存储设备删除所述无效文本，以得到所 述日志中的有效文本；所述第一存储设备确定所述有效文本占用的字节数，以得到所述第一字节；所述第一存储设备确定与所述第一字节匹配的第一存储空间。
其中，日志中的无效文本例如可以包括空格、注释或者特殊的标识符号。
303、第一存储设备将所述第一存储空间与所述第一存储设备的剩余存储空间进行对比。
304、若所述第一存储空间超过所述剩余存储空间，第一存储设备通过所述中间件向第二存储设备发送第二数据存储指令。
其中，所述第二数据存储指令携带所述第一数据，所述第二数据存储指令用于指示所述第二存储设备存储所述第一数据。
其中，第二存储设备是用于储存信息的设备。
可选的，第一存储设备的存储架构不同于第二存储设备的存储架构。
举例来说，在第一存储设备的存储架构不同于第二存储设备的存储架构时，第一存储设备调用中间件的接口获取客户端的第一数据存储指令，在第一存储空间超过第一存储设备的剩余存储空间时，第一存储设备调用中间件的接口实现将第二数据存储指令发送至第二存储设备，从而将第一数据存储在第二存储设备。
305、若所述第一存储空间低于所述剩余存储空间，第一存储设备确定与所述第一数据标识匹配的访问频率。
306、第一存储设备将所述访问频率与预设访问频率进行对比。
307、在所述访问频率超过所述预设访问频率时，第一存储设备则选取与所述访问频率匹配的高访问频率存储区域存储所述第一数据。
其中，访问频率越高，存储所述第一数据的存储区域对应的访问频率也越高。
308、在所述访问频率低于所述预设访问频率时，所述第一存储设备则设置存储期限。
其中，所述存储期限为所述第一数据存储在所述第一存储设备的时间。
309、在所述存储期限落入预设存储期限范围时，所述第一存储设备选取与所述访问频率匹配的低访问频率存储区域存储所述第一数据。
可选的，在本申请一种可能的实施方式中，还包括：
在所述存储期限超出所述预设存储期限范围时，所述第一存储设备通过所述中间件向所述客户端发送数据删除请求指令，其中，所述数据删除请求指令携带所述第一数据标识，所述数据删除请求指令用于指示所述客户端通过所述第一数据标识生成确认删除指令；在通过所述中间件获取所述客户端发送的所 述确认删除指令时，所述第一存储设备删除所述第一数据。
可以看出，上述技术方案中，通过设置存储期限，在存储期限超出预设存储期限范围时，第一存储设备通过中间件向客户端发送数据删除请求指令，在第一存储设备在接收到确认删除指令，删除第一数据，从而实现对访问频率较低的数据进行实时删除，节省存储空间。
参见图4，图4为本申请的一个实施例提供的一种基于中间件的数据处理装置的示意图。其中，如图4所示，本申请的一个实施例提供的一种基于中间件的数据处理装置400可以包括：
获取模块401，用于通过所述中间件从客户端获取第一数据存储指令。
其中，所述第一数据存储指令携带第一数据。
其中，中间件是一种独立的系统软件或服务程序，分布式应用软件借助这种软件在不同的技术之间共享资源。
其中，第一存储设备是用于储存信息的设备。
确定模块402，用于确定所述第一数据占用的存储空间大小，以得到第一存储空间。
可选的，所述确定模块，具体用于：在所述数据处理优先级超过所述预设数据处理优先级时，计算所述第一数据占用的字节数，以得到第一字节；所述第一存储设备确定与所述第一字节匹配的第一存储空间；或者，若所述数据处理进程未处于忙碌状态，计算所述第一数据占用的字节数，以得到第一字节；所述第一存储设备确定与所述第一字节匹配的第一存储空间。
其中，数据处理优先级可以由用户事先设定。或者数据处理优先级也可由所述第一存储设备根据预设策略来确定，例如，客户端包括系统软件、游戏软件、通讯软件等，那么系统软件产生的数据对应的数据处理优先级最高，游戏软件产生的数据对应的数据处理优先级最低，其他软件产生的数据对应的数据处理优先级居中。当然，本申请的实施例中不限定数据处理优先级的确定方式。
例如，数据处理优先级可记录在配置文件中，可通过查询配置文件来确定与所述第一数据标识匹配的数据处理优先级。
可选的，所述第一数据包括视频数据，所述确定模块，具体用于：S1：在所述数据处理优先级超过所述预设数据处理优先级时，解析所述视频数据，以得到K个图像帧，其中，K为正整数；S2：将i设置为初始值为1的整数；S3：检测i是否小于或等于K，若是，则执行步骤S4，若否，则执行步骤S7；S4：统计所述K个图像帧中的第i个图像帧的长度X i和宽度Y i，其中，X i和Y i均大于零，长度和宽度的单位为像素；S5：按照X i*Y i*单位像素占用的字节数计算第i个图像帧占用的字节数，以得到所述第一字节中的第i个字节，其中， 所述单位像素占用的字节数由所述第一存储设备按照预设策略配置得到；S6：将(i+1)赋值给i，返回执行步骤S3；S7：结束计算图像帧占用的字节数。
其中，K例如可等于1、2、3、5、6、11、13、20或其他值。
其中，i例如可等于1、2、3、5、6、11、13、20或其他值。
其中，X i例如可等于1、2.1、3、5、6.6、11、13、20或其他值。
其中，Y i例如可等于1、2.1、3、5、6、11.5、13、20或其他值。
可选的，所述装置还包括存储模块，所述存储模块用于：若所述第一存储空间低于所述剩余存储空间，确定与所述第一数据标识匹配的访问频率；将所述访问频率与预设访问频率进行对比；在所述访问频率超过所述预设访问频率时，则选取与所述访问频率匹配的高访问频率存储区域存储所述第一数据。
对比模块403，用于将所述第一存储空间与所述第一存储设备的剩余存储空间进行对比。
发送模块404，用于若所述第一存储空间超过所述剩余存储空间，通过所述中间件向第二存储设备发送第二数据存储指令。
其中，所述第二数据存储指令携带所述第一数据，所述第二数据存储指令用于指示所述第二存储设备存储所述第一数据。
其中，第二存储设备是用于储存信息的设备。
可选的，第一存储设备的存储架构不同于第二存储设备的存储架构。
举例来说，在第一存储设备的存储架构不同于第二存储设备的存储架构时，第一存储设备调用中间件的接口获取客户端的第一数据存储指令，在第一存储空间超过第一存储设备的剩余存储空间时，第一存储设备调用中间件的接口实现将第二数据存储指令发送至第二存储设备，从而将第一数据存储在第二存储设备。
可选的，所述发送模块，具体用于：根据所述第一数据对应的数据类型确定与所述第一数据匹配的重要等级；将所述重要等级与预设重要等级进行对比，以确定所述重要等级是否高于所述预设重要等级；在所述重要等级高于所述预设重要等级时，确定所述重要等级落入的重要等级区间；从切片策略库中获取与所述重要等级区间对应的切片策略；按照所述切片策略对所述第一数据进行切片以得到多个数据切片；通过所述中间件向所述第二存储设备发送所述第二数据存储指令，其中，所述第二数据存储指令携带所述多个数据切片，所述第二数据存储指令用于指示所述第二存储设备按照所述重要等级存储所述多个数据切片。
其中，数据类型例如可以包括视频、音频、文本、图片等。
其中，预设重要等级可以由管理员设置，也可以所述第一存储设备配置在 配置文件中。
其中，切片策略库包括至少一个重要等级区间一一对应的至少一个切片策略，至少一个切片策略中的每个切片策略互不相同。
可选的，所述发送模块，具体还用于：S1：确定所述视频数据的数据类型；S2：根据所述视频数据的数据类型确定与所述视频数据匹配的初始重要等级；S3：获取所述视频数据的所述K个图像帧；S4：将j设置为初始值为1的整数；S5：检测j是否小于或等于K，若是，则执行步骤S6，若否，则执行步骤S12；S6：获取所述K个图像帧中的第j个图像帧包括的图像数据；S7：确定所述第j个图像帧包括的图像数据所属的数据类型，以得到第j个数据类型；S8：根据所述第j个数据类型生成第j个重要等级系数；S9：获取所述第j个图像帧对应的第j个字节；S10：将所述初始重要等级、所述第j个重要等级系数和所述第j个字节输入重要等级模型中以得到所述第j个图像帧对应的第j个重要等级；S11：在数据表中存储所述第j个重要等级；S12：将(j+1)赋值给j，返回执行步骤S5；S13：从所述数据表中获取所有的重要等级，以确定所述视频数据的重要等级；S15：结束确定所述视频数据的重要等级。
其中，j例如可等于1、2、3、5、6、11、13、20或其他值。
其中，重要等级模型包括至少一个重要等级函数，所述发送模块，具体还用于构建至少一个重要等级函数中的每个重要等级函数与重要等级系数区间之间的映射关系，以及将所述映射关系进行存储。
进一步的，在所述将所述初始重要等级、所述第j个重要等级系数和所述第j个字节输入重要等级模型中以得到所述第j个图像帧对应的第j个重要等级方面，所述发送模块，具体还用于：确定所述第j个重要等级系数落入的重要等级系数区间；根据所述映射关系和所述重要等级系数区间确定所述重要等级模型中的重要等级函数；将所述初始重要等级、所述第j个重要等级系数和所述第j个字节输入所述重要等级函数以得到所述第j个重要等级。
可选的，所述装置还包括处理模块，所述处理模块用于：对所述第一数据调用校验接口以生成第二校验码；将所述第一校验码与所述第二校验码进行对比；在所述第一校验码与所述第二校验码相同时，则确定与所述第一数据标识匹配的数据处理优先级；将所述数据处理优先级与预设数据处理优先级进行对比；在所述数据处理优先级低于所述预设数据处理优先级时，监测数据处理进程是否处于忙碌状态；若所述数据处理进程处于忙碌状态，则将所述第一数据放入排队队列。
可选的，所述装置还包括存储模块，所述存储模块用于：若所述第一存储空间低于所述剩余存储空间，确定与所述第一数据标识匹配的访问频率；将所 述访问频率与预设访问频率进行对比；在所述访问频率超过所述预设访问频率时，则选取与所述访问频率匹配的高访问频率存储区域存储所述第一数据。
可选的，所述存储模块还用于：在所述访问频率低于所述预设访问频率时，则设置存储期限，其中，所述存储期限为所述第一数据存储在所述第一存储设备的时间；在所述存储期限落入预设存储期限范围时，选取与所述访问频率匹配的低访问频率存储区域存储所述第一数据。
可选的，所述存储模块还用于：在所述存储期限超出所述预设存储期限范围时，通过所述中间件向所述客户端发送数据删除请求指令，其中，所述数据删除请求指令携带所述第一数据标识，所述数据删除请求指令用于指示所述客户端通过所述第一数据标识生成确认删除指令；在通过所述中间件获取所述客户端发送的所述确认删除指令时，删除所述第一数据。
本申请实施例还提供一种基于中间件的数据处理的电子设备，包括处理器、存储器、通信接口以及一个或多个程序，其中，所述一个或多个程序被存储在所述存储器中，并且被配置由所述处理器执行，以执行上述方法实施例中任何一种基于中间件的数据处理方法中的步骤的指令。
本申请实施例还提供一种计算机可读存储介质，其中，所述计算机可读存储介质用于存储计算机程序，所述存储计算机程序被所述处理器执行，所述程序执行时包括上述方法实施例中记载的任何一种基于中间件的数据处理方法的部分或全部步骤。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。

Claims (20)

  1. 一种基于中间件的数据处理方法，其特征在于，包括：
    第一存储设备通过所述中间件从客户端获取第一数据存储指令，其中，所述第一数据存储指令携带第一数据；
    所述第一存储设备确定所述第一数据占用的存储空间大小，以得到第一存储空间；
    所述第一存储设备将所述第一存储空间与所述第一存储设备的剩余存储空间进行对比；
    若所述第一存储空间超过所述剩余存储空间，所述第一存储设备通过所述中间件向第二存储设备发送第二数据存储指令，其中，所述第二数据存储指令携带所述第一数据，所述第二数据存储指令用于指示所述第二存储设备存储所述第一数据。
  2. 根据权利要求1所述的方法，其特征在于，所述第一数据存储指令携带第一校验码和第一数据标识，在所述第一存储设备确定所述第一数据占用的存储空间大小，以得到第一存储空间之前，包括：
    所述第一存储设备对所述第一数据调用校验接口以生成第二校验码；
    所述第一存储设备将所述第一校验码与所述第二校验码进行对比；
    在所述第一校验码与所述第二校验码相同时，所述第一存储设备则确定与所述第一数据标识匹配的数据处理优先级；
    所述第一存储设备将所述数据处理优先级与预设数据处理优先级进行对比；
    在所述数据处理优先级低于所述预设数据处理优先级时，所述第一存储设备监测数据处理进程是否处于忙碌状态；
    若所述数据处理进程处于忙碌状态，所述第一存储设备则将所述第一数据放入排队队列。
  3. 根据权利要求1或2所述的方法，其特征在于，所述第一存储设备确定所述第一数据占用的存储空间大小，以得到第一存储空间，包括：
    在所述数据处理优先级超过所述预设数据处理优先级时，所述第一存储设备计算所述第一数据占用的字节数，以得到第一字节；所述第一存储设备确定与所述第一字节匹配的第一存储空间；
    或者，若所述数据处理进程未处于忙碌状态，所述第一存储设备计算所述第一数据占用的字节数，以得到第一字节；所述第一存储设备确定与所述第一字节匹配的第一存储空间。
  4. 根据权利要求3所述的方法，其特征在于，所述第一数据包括视频数 据，在所述数据处理优先级超过所述预设数据处理优先级时，所述第一存储设备计算所述第一数据占用的字节数，以得到第一字节，包括：
    S1：在所述数据处理优先级超过所述预设数据处理优先级时，所述第一存储设备解析所述视频数据，以得到K个图像帧，其中，K为正整数；
    S2：所述第一存储设备将i设置为初始值为1的整数；
    S3：所述第一存储设备检测i是否小于或等于K，若是，则执行步骤S4，若否，则执行步骤S7；
    S4：所述第一存储设备统计所述K个图像帧中的第i个图像帧的长度X i和宽度Y i，其中，X i和Y i均大于零，长度和宽度的单位为像素；
    S5：所述第一存储设备按照X i*Y i*单位像素占用的字节数计算第i个图像帧占用的字节数，以得到所述第一字节中的第i个字节，其中，所述单位像素占用的字节数由所述第一存储设备按照预设策略配置得到；
    S6：所述第一存储设备将(i+1)赋值给i，返回执行步骤S3；
    S7：所述第一存储设备结束计算图像帧占用的字节数。
  5. 根据权利要求1所述的方法，其特征在于，还包括：
    若所述第一存储空间低于所述剩余存储空间，所述第一存储设备确定与所述第一数据标识匹配的访问频率；
    所述第一存储设备将所述访问频率与预设访问频率进行对比；
    在所述访问频率超过所述预设访问频率时，所述第一存储设备则选取与所述访问频率匹配的高访问频率存储区域存储所述第一数据。
  6. 根据权利要求5所述的方法，其特征在于，还包括：
    在所述访问频率低于所述预设访问频率时，所述第一存储设备则设置存储期限，其中，所述存储期限为所述第一数据存储在所述第一存储设备的时间；
    在所述存储期限落入预设存储期限范围时，所述第一存储设备选取与所述访问频率匹配的低访问频率存储区域存储所述第一数据。
  7. 根据权利要求6所述的方法，其特征在于，还包括：
    在所述存储期限超出所述预设存储期限范围时，所述第一存储设备通过所述中间件向所述客户端发送数据删除请求指令，其中，所述数据删除请求指令携带所述第一数据标识，所述数据删除请求指令用于指示所述客户端通过所述第一数据标识生成确认删除指令；
    在通过所述中间件获取所述客户端发送的所述确认删除指令时，所述第一存储设备删除所述第一数据。
  8. 根据权利要求1所述的方法，其特征在于，所述第一存储设备通过所述中间件向第二存储设备发送第二数据存储指令，包括：
    所述第一存储设备根据所述第一数据对应的数据类型确定与所述第一数据匹配的重要等级；
    所述第一存储设备将所述重要等级与预设重要等级进行对比，以确定所述重要等级是否高于所述预设重要等级；
    在所述重要等级高于所述预设重要等级时，所述第一存储设备确定所述重要等级落入的重要等级区间；
    所述第一存储设备从切片策略库中获取与所述重要等级区间对应的切片策略；
    所述第一存储设备按照所述切片策略对所述第一数据进行切片以得到多个数据切片；
    所述第一存储设备通过所述中间件向所述第二存储设备发送所述第二数据存储指令，其中，所述第二数据存储指令携带所述多个数据切片，所述第二数据存储指令用于指示所述第二存储设备按照所述重要等级存储所述多个数据切片。
  9. 根据权利要求4或8所述的方法，其特征在于，所述第一存储设备根据所述第一数据对应的数据类型确定与所述第一数据匹配的重要等级，包括：
    S1：所述第一存储设备确定所述视频数据的数据类型；
    S2：所述第一存储设备根据所述视频数据的数据类型确定与所述视频数据匹配的初始重要等级；
    S3：所述第一存储设备获取所述视频数据的所述K个图像帧；
    S4：所述第一存储设备将j设置为初始值为1的整数；
    S5：所述第一存储设备检测j是否小于或等于K，若是，则执行步骤S6，若否，则执行步骤S12；
    S6：所述第一存储设备获取所述K个图像帧中的第j个图像帧包括的图像数据；
    S7：所述第一存储设备确定所述第j个图像帧包括的图像数据所属的数据类型，以得到第j个数据类型；
    S8：所述第一存储设备根据所述第j个数据类型生成第j个重要等级系数；
    S9：所述第一存储设备获取所述第j个图像帧对应的第j个字节；
    S10：所述第一存储设备将所述初始重要等级、所述第j个重要等级系数和所述第j个字节输入重要等级模型中以得到所述第j个图像帧对应的第j个重要等级；
    S11：所述第一存储设备在数据表中存储所述第j个重要等级；
    S12：所述第一存储设备将(j+1)赋值给j，返回执行步骤S5；
    S13：所述第一存储设备从所述数据表中获取所有的重要等级，以确定所述视频数据的重要等级；
    S15：所述第一存储设备结束确定所述视频数据的重要等级。
  10. 一种基于中间件的数据处理装置，其特征在于，包括：
    获取模块，用于通过所述中间件从客户端获取第一数据存储指令，其中，所述第一数据存储指令携带第一数据；
    确定模块，用于确定所述第一数据占用的存储空间大小，以得到第一存储空间；
    对比模块，用于将所述第一存储空间与所述第一存储设备的剩余存储空间进行对比；
    发送模块，用于若所述第一存储空间超过所述剩余存储空间，通过所述中间件向第二存储设备发送第二数据存储指令，其中，所述第二数据存储指令携带所述第一数据，所述第二数据存储指令用于指示所述第二存储设备存储所述第一数据。
  11. 根据权利要求10所述的装置，其特征在于，所述装置还包括处理模块，所述处理模块用于：
    对所述第一数据调用校验接口以生成第二校验码；将所述第一校验码与所述第二校验码进行对比；在所述第一校验码与所述第二校验码相同时，则确定与所述第一数据标识匹配的数据处理优先级；将所述数据处理优先级与预设数据处理优先级进行对比；在所述数据处理优先级低于所述预设数据处理优先级时，监测数据处理进程是否处于忙碌状态；若所述数据处理进程处于忙碌状态，则将所述第一数据放入排队队列。
  12. 根据权利要求10或11所述的装置，其特征在于，所述确定模块，具体用于：在所述数据处理优先级超过所述预设数据处理优先级时，计算所述第一数据占用的字节数，以得到第一字节；所述第一存储设备确定与所述第一字节匹配的第一存储空间；
    或者，若所述数据处理进程未处于忙碌状态，计算所述第一数据占用的字节数，以得到第一字节；所述第一存储设备确定与所述第一字节匹配的第一存储空间。
  13. 根据权利要求12所述的装置，其特征在于，所述第一数据包括视频数据，所述确定模块，具体用于：
    S1：在所述数据处理优先级超过所述预设数据处理优先级时，解析所述视频数据，以得到K个图像帧，其中，K为正整数；
    S2：将i设置为初始值为1的整数；
    S3：检测i是否小于或等于K，若是，则执行步骤S4，若否，则执行步骤S7；
    S4：统计所述K个图像帧中的第i个图像帧的长度X i和宽度Y i，其中，X i和Y i均大于零，长度和宽度的单位为像素；
    S5：按照X i*Y i*单位像素占用的字节数计算第i个图像帧占用的字节数，以得到所述第一字节中的第i个字节，其中，所述单位像素占用的字节数由所述第一存储设备按照预设策略配置得到；
    S6：将(i+1)赋值给i，返回执行步骤S3；
    S7：结束计算图像帧占用的字节数。
  14. 根据权利要求10所述的装置，其特征在于，所述装置还包括存储模块，所述存储模块用于：
    若所述第一存储空间低于所述剩余存储空间，确定与所述第一数据标识匹配的访问频率；将所述访问频率与预设访问频率进行对比；在所述访问频率超过所述预设访问频率时，则选取与所述访问频率匹配的高访问频率存储区域存储所述第一数据。
  15. 根据权利要求14所述的装置，其特征在于，所述存储模块还用于：
    在所述访问频率低于所述预设访问频率时，则设置存储期限，其中，所述存储期限为所述第一数据存储在所述第一存储设备的时间；在所述存储期限落入预设存储期限范围时，选取与所述访问频率匹配的低访问频率存储区域存储所述第一数据。
  16. 根据权利要求15所述的装置，其特征在于，所述存储模块还用于：
    在所述存储期限超出所述预设存储期限范围时，通过所述中间件向所述客户端发送数据删除请求指令，其中，所述数据删除请求指令携带所述第一数据标识，所述数据删除请求指令用于指示所述客户端通过所述第一数据标识生成确认删除指令；在通过所述中间件获取所述客户端发送的所述确认删除指令时，删除所述第一数据。
  17. 根据权利要求10所述的装置，其特征在于，所述发送模块，具体用于：
    根据所述第一数据对应的数据类型确定与所述第一数据匹配的重要等级；将所述重要等级与预设重要等级进行对比，以确定所述重要等级是否高于所述预设重要等级；在所述重要等级高于所述预设重要等级时，确定所述重要等级落入的重要等级区间；从切片策略库中获取与所述重要等级区间对应的切片策略；按照所述切片策略对所述第一数据进行切片以得到多个数据切片；通过所述中间件向所述第二存储设备发送所述第二数据存储指令，其中，所述第二数 据存储指令携带所述多个数据切片，所述第二数据存储指令用于指示所述第二存储设备按照所述重要等级存储所述多个数据切片。
  18. 根据权利要求13或17所述的装置，其特征在于，所述发送模块，具体还用于：
    S1：确定所述视频数据的数据类型；
    S2：根据所述视频数据的数据类型确定与所述视频数据匹配的初始重要等级；
    S3：获取所述视频数据的所述K个图像帧；
    S4：将j设置为初始值为1的整数；
    S5：检测j是否小于或等于K，若是，则执行步骤S6，若否，则执行步骤S12；
    S6：获取所述K个图像帧中的第j个图像帧包括的图像数据；
    S7：确定所述第j个图像帧包括的图像数据所属的数据类型，以得到第j个数据类型；
    S8：根据所述第j个数据类型生成第j个重要等级系数；
    S9：获取所述第j个图像帧对应的第j个字节；
    S10：将所述初始重要等级、所述第j个重要等级系数和所述第j个字节输入重要等级模型中以得到所述第j个图像帧对应的第j个重要等级；
    S11：在数据表中存储所述第j个重要等级；
    S12：将(j+1)赋值给j，返回执行步骤S5；
    S13：从所述数据表中获取所有的重要等级，以确定所述视频数据的重要等级；
    S15：结束确定所述视频数据的重要等级。
  19. 一种基于中间件的数据处理的电子设备，其特征在于，包括处理器、存储器、通信接口以及一个或多个程序，其中，所述一个或多个程序被存储在所述存储器中，并且被配置由所述处理器执行，以执行权利要求1-9任一项方法中的步骤的指令。
  20. 一种计算机可读存储介质，其特征在于，所述计算机可读存储介质用于存储计算机程序，所述存储计算机程序被所述处理器执行，以实现权利要求1-9任一项所述的方法。
PCT/CN2019/102727 2019-04-28 2019-08-27 一种基于中间件的数据处理方法和相关装置 WO2020220534A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201910350817.4 2019-04-28
CN201910350817.4A CN110109622A (zh) 2019-04-28 2019-04-28 一种基于中间件的数据处理方法和相关装置

Publications (1)

Publication Number Publication Date
WO2020220534A1 true WO2020220534A1 (zh) 2020-11-05

Family

ID=67487110

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2019/102727 WO2020220534A1 (zh) 2019-04-28 2019-08-27 一种基于中间件的数据处理方法和相关装置

Country Status (2)

Country Link
CN (1) CN110109622A (zh)
WO (1) WO2020220534A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110109622A (zh) * 2019-04-28 2019-08-09 平安科技（深圳）有限公司 一种基于中间件的数据处理方法和相关装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101295268A (zh) * 2007-04-27 2008-10-29 国际商业机器公司 面向软件系统的分区存储器转储方法和装置
CN102508789A (zh) * 2011-10-14 2012-06-20 浪潮电子信息产业股份有限公司 一种系统分级存储的方法
CN103023963A (zh) * 2012-10-31 2013-04-03 浪潮集团有限公司 一种用于云存储资源优化分配的方法
US20140047119A1 (en) * 2007-03-30 2014-02-13 International Business Machines Corporation Method and system for modeling and analyzing computing resource requirements of software applications in a shared and distributed computing environment
CN108885607A (zh) * 2015-12-08 2018-11-23 乌尔特拉塔有限责任公司 使用容错对象的存储器结构操作和一致性
CN110109622A (zh) * 2019-04-28 2019-08-09 平安科技（深圳）有限公司 一种基于中间件的数据处理方法和相关装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10172237A (ja) * 1996-12-06 1998-06-26 Sanyo Electric Co Ltd 情報記憶制御方法、情報記憶制御装置、およびその制御機能を有する情報記憶装置
CN102917005B (zh) * 2012-08-28 2016-10-26 大唐软件技术股份有限公司 一种支持事务的海量存储访问方法及装置
CN103092927B (zh) * 2012-12-29 2016-01-20 华中科技大学 一种分布式环境下的文件快速读写方法
CN104205780B (zh) * 2014-01-23 2017-06-27 华为技术有限公司 一种存储数据的方法和装置
CN105956035A (zh) * 2016-04-25 2016-09-21 乐视控股（北京）有限公司 一种文件存储方法及装置
CN106598495A (zh) * 2016-12-07 2017-04-26 深圳市深信服电子科技有限公司 一种混合存储服务质量的控制方法及控制装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140047119A1 (en) * 2007-03-30 2014-02-13 International Business Machines Corporation Method and system for modeling and analyzing computing resource requirements of software applications in a shared and distributed computing environment
CN101295268A (zh) * 2007-04-27 2008-10-29 国际商业机器公司 面向软件系统的分区存储器转储方法和装置
CN102508789A (zh) * 2011-10-14 2012-06-20 浪潮电子信息产业股份有限公司 一种系统分级存储的方法
CN103023963A (zh) * 2012-10-31 2013-04-03 浪潮集团有限公司 一种用于云存储资源优化分配的方法
CN108885607A (zh) * 2015-12-08 2018-11-23 乌尔特拉塔有限责任公司 使用容错对象的存储器结构操作和一致性
CN110109622A (zh) * 2019-04-28 2019-08-09 平安科技（深圳）有限公司 一种基于中间件的数据处理方法和相关装置

Also Published As

Publication number Publication date
CN110109622A (zh) 2019-08-09

Similar Documents

Publication Publication Date Title
CN111030936B (zh) 网络访问的限流控制方法、装置及计算机可读存储介质
CN110290217B (zh) 数据请求的处理方法及装置、存储介质及电子装置
US10817513B2 (en) Fair scheduling for mixed-query loads
CN109104336B (zh) 服务请求处理方法、装置、计算机设备及存储介质
CN109343801B (zh) 数据存储方法、设备及计算机可读存储介质
WO2016061898A1 (zh) 直播间的频道访问方法和系统
US20130311742A1 (en) Image management method, mobile terminal and computer storage medium
CN110545260A (zh) 一种基于拟态构造的云管理平台构建方法
WO2019041738A1 (zh) 客户资源获取方法、装置、终端设备及存储介质
CN110471749B (zh) 任务处理方法、装置、计算机可读存储介质和计算机设备
US11132229B2 (en) Method, storage medium storing instructions, and apparatus for implementing hardware resource allocation according to user-requested resource quantity
WO2015101101A1 (zh) 频道接入方法和系统
CN112016030B (zh) 消息推送的方法、装置、服务器和计算机存储介质
WO2019237774A1 (zh) 一种云存储系统中的视频数据存储方法及装置
US10681400B2 (en) Method and device for transmitting video
US8922828B2 (en) Determining scan priority of documents
WO2020220534A1 (zh) 一种基于中间件的数据处理方法和相关装置
US20170091206A1 (en) Information Processing Method and Electronic Apparatus
WO2024066938A1 (zh) 直播截图方法、装置、设备及存储介质
CN107992489A (zh) 一种数据处理方法及服务器
CN111159131A (zh) 性能优化方法、装置、设备及计算机可读存储介质
CN113079062A (zh) 一种资源调整方法、装置、计算机设备和存储介质
EP3842931A1 (en) Algorithm download method, device, and related product
WO2022021858A1 (zh) 实现分布式系统中高负载场景下服务高可用的方法、系统
CN107465743B (zh) 一种处理请求的方法和装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19926927

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19926927

Country of ref document: EP

Kind code of ref document: A1