CN112148920A - 数据管理方法 - Google Patents

数据管理方法 Download PDF

Info

Publication number
CN112148920A
CN112148920A CN202010801661.XA CN202010801661A CN112148920A CN 112148920 A CN112148920 A CN 112148920A CN 202010801661 A CN202010801661 A CN 202010801661A CN 112148920 A CN112148920 A CN 112148920A
Authority
CN
China
Prior art keywords
data
information
storage server
identification information
query request
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010801661.XA
Other languages
English (en)
Other versions
CN112148920B (zh
Inventor
兰雨晴
王青鹏
余丹
王丹星
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Standard Intelligent Security Technology Co Ltd
Original Assignee
Zhongbiao Huian Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhongbiao Huian Information Technology Co Ltd filed Critical Zhongbiao Huian Information Technology Co Ltd
Priority to CN202010801661.XA priority Critical patent/CN112148920B/zh
Publication of CN112148920A publication Critical patent/CN112148920A/zh
Application granted granted Critical
Publication of CN112148920B publication Critical patent/CN112148920B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/71Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/7867Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title and artist information, manually generated time, location and usage information, user ratings

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Library & Information Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种数据管理方法,包括:中心管理服务器接收客户端发送的数据记录查询请求,并将所述数据记录查询请求转发至数据存储服务器;所述数据存储服务器接收并解析所述数据记录查询请求,获取所述数据记录查询请求中携带的数据标识信息;根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器;所述中心管理服务器接收所述数据存储服务器发送的所述数据记录,并将所述数据记录转发至对应的客户端;解决了数据存储服务器保存的本地数据与数据库中存储的数据记录可能存在无法同步的问题。

Description

数据管理方法
技术领域
本发明涉及数据处理技术领域,特别涉及一种数据管理方法。
背景技术
目前,针对录像等数据的存储管理,通常是在数据存储服务器上存储录像数据,并将存储的录像数据对应的录像文件的名称等记录信息上传到中心管理服务器,由中心管理服务器将该数据记录转存到数据库中。当客户端向中心管理服务器发起查询请求时,由中心管理服务器直接从数据库中查询对应的数据,并将查询到的数据记录返回给客户端,客户端便可根据该数据记录进行录像的回放。
上述这种处理方式通常会出现如下问题:当数据库出现异常时,比如,基于数据库中存储的录像信息等数据的标识,当客户端发起查询请求时,在网络异常抖动或者数据库出现异常时,可能导致上传数据失败,也就是说,这种情况下的数据并未存储在数据库中,而实际数据是存储在数据存储服务器上的;当数据存储服务器出现异常时,客户端发起的请求,能通过数据库获取到数据记录,但是当用户通过返回的数据记录向数据存储服务器请求回放数据时,则会出现回放失败的问题。因此,当客户端请求录像数据时,数据存储服务器保存的本地数据与数据库中存储的数据记录可能存在无法同步的问题。
发明内容
本发明提供一种数据管理方法,用以利用中心管理服务器管理与转发客户端的查询请求,避免数据存储服务器保存的本地数据与数据库中存储的数据记录可能存在无法同步的问题。
本发明提供了一种数据管理方法,所述数据管理方法包括:
中心管理服务器接收客户端发送的数据记录查询请求,并将所述数据记录查询请求转发至数据存储服务器;
所述数据存储服务器接收并解析所述数据记录查询请求,获取所述数据记录查询请求中携带的数据标识信息;
根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器;
所述中心管理服务器接收所述数据存储服务器发送的所述数据记录,并将所述数据记录转发至对应的客户端。
进一步地,所述数据管理方法还包括:
所述中心管理服务器接收数据管理设备发送的针对所述数据存储服务器和/或客户端的监控信息,并将所述监控信息转发至所述数据存储服务器,以便所述数据存储服务器接收并记录所述监控信息。
进一步地,所述数据管理方法还包括:
所述数据管理设备监控所述数据存储服务器上对应的存储数据,并获取所述存储数据相关的监控信息;以及:
监控对所述数据存储服务器上对应的所述存储数据进行访问、读取和更新的操作事件所对应的监控信息。
进一步地,所述监控信息包括:可能涉及数据安全的报警信息、录像文件对应的数据标识信息以及客户端对应设备的登录信息和历史操作信息。
进一步地,所述数据存储服务器获取的所述数据标识信息,包括:
所述数据记录查询请求中携带的数据流标识、查询开始时间点以及查询结束时间点、客户端对应的设备信息。
进一步地,所述根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器,包括:
根据解析得到的所述数据标识信息中的数据流标识,所述数据存储服务器从本地数据库中查询与所述数据流标识相同的数据;
基于与所述数据流标识相同的数据的查询结果,根据所述查询开始时间点与查询结束时间点,从所述查询结果中选取所述查询开始时间点至查询结束时间点之间的相应数据,并获取所述查询结果中所述相应数据的数据记录;
将获取的所述数据记录发送至所述中心管理服务器。
进一步地,所述数据管理方法还包括:
所述数据存储服务器根据解析得到的所述数据标识信息中的客户端对应的所述设备信息,判断所述设备信息对应的设备是否为合法设备;
若所述设备信息对应的设备为合法设备,则执行相应数据的提取操作;
若所述设备信息对应的设备为不合法设备,则返回不合法设备的提示信息至所述中心管理服务器。
进一步地,所述中心管理服务器接收客户端发送的数据记录查询请求,并将所述数据记录查询请求转发至数据存储服务器,包括:
所述中心管理服务器接收客户端发送的包含客户端的设备信息以及用户名和密码的数据记录查询请求;
验证所述客户端的设备信息是否属于合法设备;若所述客户端对应的设备为合法设备,则验证所述用户名和密码是否通过;
若所述用户名和密码能够通过,则将所述数据记录查询请求转发至所述数据存储服务器;
若所述客户端的设备信息不是合法设备,以及所述客户端的设备信息是合法设备同时所述用户名和密码验证不通过,则所述中心管理服务器拒绝转发所述数据记录查询请求至是数据存储服务器。
进一步地,所述若所述用户名和密码能够通过,则将所述数据记录查询请求转发至所述数据存储服务器,包括:
将所述数据记录查询请求转发至所述数据存储服务器时,携带所述用户名和密码。
进一步地,所述根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器,包括:
根据解析得到的所述数据标识信息,以及携带的所述用户名和密码,所述数据存储服务器判断所述用户名是否具备访问所述数据标识信息对应数据的访问权限;
若所述用户名具备所述访问权限,则执行提取相应数据的操作,并将提取的数据对应的数据记录返回至所述中心管理服务器;
若所述用户名不具备所述访问权限,则返回所述用户名不具备访问权限的提示信息至所述中心管理服务器。
进一步地,所述根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器,包括:
根据解析得到的所述数据标识信息,获取所述数据标识信息对应的数据标识特征值;
根据所述数据标识特征值,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录,按照与所述数据记录查询请求的优先值越高排列越靠前的方式进行排列后,返回至所述中心管理服务器。
进一步地,所述根据解析得到的所述数据标识信息,获取所述数据标识信息对应的数据标识特征值,包括:
利用预设分析模型,分析所述数据标识信息,得到所述数据标识信息对应的数据标识特征值;其中,所述预设分析模型可以表示为数学表达式(1):
Figure BDA0002627607700000051
所述数学表达式(1)中,Te表示通过分析所述数据标识信息得到的第e个数据标识特征值;Se表示所述数据标识信息中的第e个信息的信息值;Si表示所述数据标识信息中的第i个信息的信息值;Sj表示所述数据标识信息中的第j(其中j=i+1)个信息的信息值;
Figure BDA0002627607700000052
该步骤表示将所述数据标识信息中的第e个信息,通过该步骤遍历所述数据标识信息中的所有信息,计算出所述数据标识信息中的所有信息与所述数据标识信息中的第e个信息之间的比较值,并进行放大整合;
Figure BDA0002627607700000053
表示所述数据标识信息中的所有信息两两之间的比较值并进行放大整合;
Figure BDA0002627607700000054
表示所述数据标识信息中的第e个信息的权重值;
将所述权重值与所述数据标识信息中的第e个信息的信息值相乘,得到第e个数据标识特征值;n表示所述数据标识信息中的信息总数。
进一步地,所述根据所述数据标识特征值,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录,按照与所述数据记录查询请求的优先值越高排列越靠前的方式进行排列后,返回至所述中心管理服务器,包括:
通过数据匹配的方式,利用计算得到的所述数据标识特征值,按照预设数据筛选模型,对所述数据存储服务器中的数据进行筛选,得到所述数据存储服务器中所有数据的查询符合值;其中,所述预设数据筛选模型可以表示为数学表达式(2):
Figure BDA0002627607700000061
所述数学表达式(2)中,Ha表示所述数据存储服务器中的第a个数据的查询符合值;Fa表示所述数据存储服务器中的第a个数据的数据信息值;k表示所述数据存储服务器中存储的数据总个数;u()表示阶跃函数,且当括号内的值大于等于0时,u()函数值为1,当括号内的值小于0时,u()函数值为0;
当|Ha|小于预设阈值时,表示所述数据存储服务器中的第a个数据符合所述数据记录查询请求,将符合所述数据记录查询请求的数据所对应的数据信息值组合成数列记做Qb,表示符合所述数据记录查询请求的第b个数据的数据信息值;
利用预设优先值模型,对计算得到的符合所述数据记录查询请求的数据组合成的数列Qb进行计算,得到每一个符合所述数据记录查询请求的数据的优先值Yb;其中,所述预设优先值模型可以表示为数学表达(3):
Figure BDA0002627607700000071
Yb表示符合所述数据记录查询请求的第b个数据的优先值;d表示符合所述数据记录查询请求的数据的总数;δ()表示单位脉冲函数,且当括号内的值为0时,δ()函数值为1,当括号内的值不为0时,δ()函数值为0;
利用所述预设优先值模型计算得到的每一个符合所述数据记录查询请求的数据的优先值,对数据所对应的数据记录按照所述优先值的大小从大到小进行排列,然后按照当前的排列顺序依次返回至所述中心管理服务器。
本发明一种数据管理方法,中心管理服务器接收客户端发送的数据记录查询请求,并将所述数据记录查询请求转发至数据存储服务器;所述数据存储服务器接收并解析所述数据记录查询请求,获取所述数据记录查询请求中携带的数据标识信息;根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器;所述中心管理服务器接收所述数据存储服务器发送的所述数据记录,并将所述数据记录转发至对应的客户端;通过利用中心管理服务器管理与转发客户端的查询请求的方式,解决了数据存储服务器保存的本地数据与数据库中存储的数据记录可能存在无法同步的问题,提高了数据回放的灵活性和可靠性;进一步地,也在一定程度上提高了数据的安全性。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所指出的内容来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1是本发明数据管理方法的一种实施方式的流程示意图;
图2是本发明数据管理方法中图1所述实施例步骤S10的一种实施方式的流程示意图;
图3是本发明数据管理方法中图1所述实施例步骤S30的一种实施方式的流程示意图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
本发明提供了一种数据管理方法,用以利用中心管理服务器管理与转发客户端的查询请求,避免了数据存储服务器保存的本地数据与数据库中存储的数据记录可能存在无法同步的问题,提高了数据回放的灵活性和可靠性。
如图1所示,图1是本发明数据管理方法的一种实施方式的流程示意图;本发明一种数据管理方法可以实施为如下描述的步骤S10-S40:
步骤S10、中心管理服务器接收客户端发送的数据记录查询请求,并将所述数据记录查询请求转发至数据存储服务器。
本发明实施例中,在客户端和数据存储服务器中加入了中心管理服务器,由中心管理服务器作为中间媒介;另外,该中心管理服务器还具备监控功能,并将监控得到的相关监控数据发送至数据存储服务器进行记录和存储。在一个实施例中,所述中心管理服务器接收数据管理设备发送的针对所述数据存储服务器和/或客户端的监控信息,并将所述监控信息转发至所述数据存储服务器,以便所述数据存储服务器接收并记录所述监控信息。
本实施例中所描述的数据管理设备可有可无,针对具体的应用场景,若设置有数据管理设备,则由所述数据管理设备监控所述数据存储服务器上对应的存储数据,并获取所述存储数据相关的监控信息;以及:监控各方(比如各服务器和/或各客户端和/或各设备等)对所述数据存储服务器上对应的所述存储数据进行访问、读写、删除以及更新等各种操作所对应的操作事件,获取监控上述各操作数据所对应的监控信息。其中,所述监控信息包括但不限于:可能涉及数据安全的报警信息,比如非法入侵和非法访问等;录像文件对应的数据标识信息以及客户端对应设备的登录信息,比如登录设备的设备标识信息和用户名以及密码等用户信息;针对数据存储服务器上数据访问、存取、读写、删除以及更新等各种操作所分别对应的历史操作信息等。针对具体的应用场景,若没有设置上述数据管理设备,则上述数据管理设备的所有功能均有中心管理服务器实现。
当客户端发起数据记录查询请求时,该数据记录查询请求先发送至中心管理服务器,由中心管理服务器将客户端发送的该数据记录查询请求转发至数据存储服务器。其中,客户端发起的数据记录查询请求,可以根据具体应用场景的具体需求,携带相关的客户端特征信息,比如客户端标识信息、客户端对应的设备识别码、客户端对应的用户名和密码等;当然,根据需求,也可以仅发送数据记录对应的查询请求。
在一个实施例中,该中心管理服务器针对客户端发送的数据记录查询请求不进行任何处理,直接进行数据的转发操作,即接收到客户端发送的数据记录查询请求后,不进行任何数据处理,直接转发至数据存储服务器。
步骤S20、所述数据存储服务器接收并解析所述数据记录查询请求,获取所述数据记录查询请求中携带的数据标识信息;
当数据存储服务器接收到中心管理服务器转发的数据记录查询请求时,通过对客户端发送的上述数据记录查询请求进行解析,来获取对应的数据标识信息。在一个实施例中,所述数据标识信息包括但不限于:数据流标识、查询开始时间点以及查询结束时间点、客户端对应的设备信息、客户端唯一标识码等;该数据标识信息可以根据本申请数据管理方法所对应的具体的应用场景进行配置,本发明实施例对上述数据标识信息的具体内容不进行限定。
步骤S30、根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器;
根据解析得到的上述数据标识信息,数据存储服务器查找相应的数据,获取与上述数据标识信息相同的数据,进而根据查找到的相应数据,获取该相应数据对应的数据记录,从而将获取的上述数据记录发送至中心管理服务器。
在一个具体的应用场景中,针对所述数据标识信息中包含的:数据流标识、查询开始时间点以及查询结束时间点,在获取对应的数据记录时,其中的一种获取方式是:根据所述数据标识信息中的数据流标识,查找与该数据流标识相同的数据,基于与所述数据流标识相同的数据的查询结果,进而根据所述数据标识信息中的查询开始时间点以及查询结束时间点,从与所述数据标识相同的数据中选取查询开始时间点至查询结束时间点之间对应的数据。根据查找结果,数据存储服务器获取所述查询结果中所述相应数据的数据记录,并将找到的数据所对应的数据记录发送至中心管理服务器。比如,找到的数据对应的数据记录有多个,则将找到的多个数据记录均返回至中心管理服务器。
进一步地,在一个实施例中,客户端发起的数据记录查询请求中可以携带该客户端对应的设备信息。基于所述数据记录查询请求中携带的所述设备信息,所述数据存储服务器判断客户端使用的所述设备信息对应的客户端设备是否为合法设备;若所述设备信息对应的设备为合法设备,则所述数据存储服务器执行相应数据的查找和数据记录的提取操作;若所述设备信息对应的设备为不合法设备,则所述数据存储设备返回不合法设备的提示信息至所述中心管理服务器,进而由所述中心管理服务器将上述不合法设备的提示信息发送至客户端。
步骤S40、所述中心管理服务器接收所述数据存储服务器发送的所述数据记录,并将所述数据记录转发至对应的客户端。
中心管理服务器接收数据存储服务器发送的上述数据记录,并直接转发上述数据记录至对应的客户端。客户端根据接收到的上述数据记录,进行对应的数据操作,比如取流操作,录像回放操作等;或者,根据数据记录,查找并提取相应的数据等操作。
针对图1所述实施例中的步骤S10,即“中心管理服务器接收客户端发送的数据记录查询请求,并将所述数据记录查询请求转发至数据存储服务器”,在另一个实施例中,中心管理服务器对客户端发送的数据记录查询请求进行合法性验证,当合法性验证通过后,再将客户端发送的上述数据记录查询请求转发至所述数据存储服务器;若合法性验证不通过,则中心管理服务器直接返回请求不合法的提示信息至对应的客户端。
如图2所示,图2是本发明数据管理方法中图1所述实施例步骤S10的一种实施方式的流程示意图;图1所述实施例中的步骤S10可以实施为如下描述的步骤S110-S140:
步骤S110、所述中心管理服务器接收客户端发送的包含客户端的设备信息以及用户名和密码的数据记录查询请求;
步骤S120、验证所述客户端的设备信息是否属于合法设备;若所述客户端对应的设备为合法设备,则执行步骤S130;
步骤S130、验证所述用户名和密码是否通过;
若所述客户端的设备信息不是合法设备,则直接执行步骤S140;
步骤S140、所述中心管理服务器拒绝转发所述数据记录查询请求至是数据存储服务器。
在验证所述客户端的设备信息属于合法设备后,执行步骤S130、验证所述用户名和密码是否通过时,若所述用户名和密码能够通过,则执行步骤S150;
步骤S150、将所述数据记录查询请求转发至所述数据存储服务器;
在所述客户端的设备信息属于合法设备,但同时所述用户名和密码验证不通过时,执行所述步骤S140,即所述中心管理服务器拒绝转发所述数据记录查询请求至是数据存储服务器。
通过基于客户端的设备信息判断客户端对应设备的合法性,以及基于用户名和密码对和合法设备的客户端发送的数据记录查询请求的合法性进行验证,提高了数据访问的安全性。
进一步地,基于图2所述实施例的描述,在执行步骤S130的验证所述用户名和密码是否通过后,若所述用户名和密码能够通过,则执行步骤S150,即将所述数据记录查询请求转发至所述数据存储服务器的同时,使得所述数据记录查询请求中携带对应的所述用户名和密码;也就是说,在所述中心管理服务器将所述数据记录查询请求转发至所述数据存储服务器时,将所述用户名和密码一并转发至数据存储服务器。
如图3所示,图3是本发明数据管理方法中图1所述实施例步骤S30的一种实施方式的流程示意图。若中心管理服务器将携带用户名和密码的数据记录查询请求一并转发至数据存储服务器,则图1实施例中的所述步骤S30,即“根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器”,可以实施为如下描述的步骤S310-S330:
步骤S310、根据解析得到的所述数据标识信息,以及携带的所述用户名和密码,所述数据存储服务器判断所述用户名是否具备访问所述数据标识信息对应数据的访问权限;
若所述用户名具备所述访问权限,则执行步骤S320;
步骤S320、执行提取相应数据的操作,并将提取的数据对应的数据记录返回至所述中心管理服务器;
若所述用户名不具备所述访问权限,则执行步骤S330;
步骤S330、返回所述用户名不具备访问权限的提示信息至所述中心管理服务器。
通过基于用户名和密码对客户端发送的数据记录查询请求的合法性进行验证,提高了数据的安全性。
进一步地,在一个实施例中,图1所述实施例中的“步骤S30、根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器”,还可以按照如下技术手段实施:
根据解析得到的所述数据标识信息,获取所述数据标识信息对应的数据标识特征值;根据所述数据标识特征值,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录,按照与所述数据记录查询请求的优先值越高排列越靠前的方式进行排列后,返回至所述中心管理服务器。
进一步地,针对根据解析得到的所述数据标识信息,获取所述数据标识信息对应的数据标识特征值,可以通过预设分析模型实施。
在本发明实施例中,利用预设分析模型,分析所述数据标识信息,得到所述数据标识信息对应的数据标识特征值;其中,所述预设分析模型可以表示为数学表达式(1):
Figure BDA0002627607700000131
所述数学表达式(1)中,Te表示通过分析所述数据标识信息得到的第e个数据标识特征值;Se表示所述数据标识信息中的第e个信息的信息值;Si表示所述数据标识信息中的第i个信息的信息值;Sj表示所述数据标识信息中的第j(其中j=i+1)个信息的信息值。
Figure BDA0002627607700000132
该步骤表示将所述数据标识信息中的第e个信息,通过该步骤遍历所述数据标识信息中的所有信息,计算出所述数据标识信息中的所有信息与所述数据标识信息中的第e个信息之间的比较值,并进行放大整合。
Figure BDA0002627607700000141
表示所述数据标识信息中的所有信息两两之间的比较值并进行放大整合。
Figure BDA0002627607700000142
表示所述数据标识信息中的第e个信息的权重值。
将所述权重值与所述数据标识信息中的第e个信息的信息值相乘,得到第e个数据标识特征值;n表示所述数据标识信息中的信息总数。
根据上述计算得到的所述数据标识特征值,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录,按照与所述数据记录查询请求的优先值越高排列越靠前的方式进行排列后,返回至所述中心管理服务器,可以按照如下技术手段实施:
通过数据匹配的方式,利用计算得到的所述数据标识特征值Te,按照预设数据筛选模型,对所述数据存储服务器中的数据进行筛选,得到所述数据存储服务器中所有数据的查询符合值;其中,所述预设数据筛选模型可以表示为数学表达式(2):
Figure BDA0002627607700000143
所述数学表达式(2)中,Ha表示所述数据存储服务器中的第a个数据的查询符合值;Fa表示所述数据存储服务器中的第a个数据的数据信息值;k表示所述数据存储服务器中存储的数据总个数;u()表示阶跃函数,且当括号内的值大于等于0时,u()函数值为1,当括号内的值小于0时,u()函数值为0。
当|Ha|小于预设阈值时,表示所述数据存储服务器中的第a个数据符合所述数据记录查询请求,将符合所述数据记录查询请求的数据所对应的数据信息值组合成数列记做Qb,表示符合所述数据记录查询请求的第b个数据的数据信息值。比如,在一个具体的应用场景中,根据所述应用场景的具体需求,设置所述预设阈值为0.5,即当满足:|Ha|<0.5时,表示所述数据存储服务器中的第a个数据符合所述数据记录查询请求。
利用预设优先值模型,对计算得到的符合所述数据记录查询请求的数据组合成的数列Qb进行计算,得到每一个符合所述数据记录查询请求的数据的优先值Yb;其中,所述预设优先值模型可以表示为数学表达(3):
Figure BDA0002627607700000151
Yb表示符合所述数据记录查询请求的第b个数据的优先值;d表示符合所述数据记录查询请求的数据的总数;δ()表示单位脉冲函数,且当括号内的值为0时,δ()函数值为1,当括号内的值不为0时,δ()函数值为0。
利用所述预设优先值模型计算得到的每一个符合所述数据记录查询请求的数据的优先值,对数据所对应的数据记录按照所述优先值的大小从大到小进行排列,然后按照当前的排列顺序依次返回至所述中心管理服务器。
本发明实施例中,利用预设分析模型即数学表达式(1)得到数据标识特征值,目的是为了将所述数据标识信息进行完整综合分析,得到对应的数据标识特征值,对数据标识特征信息进行数字化,从而更加准确的反映出所述数据标识信息。利用预设数据筛选模型即数学表达式(2),得到所述数据存储服务器中所有数据的查询符合值,从而使得满足要求的数据利用公式筛选出来,提高了数据筛选的准确度,从而让筛选得到的数据更加符合所述数据记录查询请求;最后利用预设优先值模型即数学表达式(3),对符合所述数据记录查询请求的数据按照优先值大小进行排列后返回至所述中心管理服务器,使得返回的数据记录更加简洁,数据返回的顺序更加的人性化。
本发明数据管理方法,中心管理服务器接收客户端发送的数据记录查询请求,并将所述数据记录查询请求转发至数据存储服务器;所述数据存储服务器接收并解析所述数据记录查询请求,获取所述数据记录查询请求中携带的数据标识信息;根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器;所述中心管理服务器接收所述数据存储服务器发送的所述数据记录,并将所述数据记录转发至对应的客户端;通过利用中心管理服务器管理与转发客户端的查询请求的方式,解决了数据存储服务器保存的本地数据与数据库中存储的数据记录可能存在无法同步的问题,提高了数据回放的灵活性和可靠性;进一步地,也在一定程度上提高了数据的安全性。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种数据管理方法,其特征在于,所述数据管理方法包括:
中心管理服务器接收客户端发送的数据记录查询请求,并将所述数据记录查询请求转发至数据存储服务器;
所述数据存储服务器接收并解析所述数据记录查询请求,获取所述数据记录查询请求中携带的数据标识信息;
根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器;
所述中心管理服务器接收所述数据存储服务器发送的所述数据记录,并将所述数据记录转发至对应的客户端。
2.如权利要求1所述的数据管理方法,其特征在于,所述数据管理方法还包括:
所述中心管理服务器接收数据管理设备发送的针对所述数据存储服务器和/或客户端的监控信息,并将所述监控信息转发至所述数据存储服务器,以便所述数据存储服务器接收并记录所述监控信息;
其中,所述监控信息包括:
可能涉及数据安全的报警信息、录像文件对应的数据标识信息以及客户端对应设备的登录信息和历史操作信息。
3.如权利要求2所述的数据管理方法,其特征在于,所述数据管理方法还包括:
所述数据管理设备监控所述数据存储服务器上对应的存储数据,并获取所述存储数据相关的监控信息;以及:
监控对所述数据存储服务器上对应的所述存储数据进行访问、读取和更新的操作事件所对应的监控信息。
4.如权利要求1或2或3所述的数据管理方法,其特征在于,所述数据标识信息包括:所述数据记录查询请求中携带的数据流标识、查询开始时间点以及查询结束时间点、客户端对应的设备信息;
所述根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器,包括:
根据解析得到的所述数据标识信息中的数据流标识,所述数据存储服务器从本地数据库中查询与所述数据流标识相同的数据;
基于与所述数据流标识相同的数据的查询结果,根据所述查询开始时间点与查询结束时间点,从所述查询结果中选取所述查询开始时间点至查询结束时间点之间的相应数据,并获取所述查询结果中所述相应数据的数据记录;
将获取的所述数据记录发送至所述中心管理服务器。
5.如权利要求4所述的数据管理方法,其特征在于,所述数据管理方法还包括:
所述数据存储服务器根据解析得到的所述数据标识信息中的客户端对应的所述设备信息,判断所述设备信息对应的设备是否为合法设备;
若所述设备信息对应的设备为合法设备,则执行相应数据的提取操作;
若所述设备信息对应的设备为不合法设备,则返回不合法设备的提示信息至所述中心管理服务器。
6.如权利要求1或2或3所述的数据管理方法,其特征在于,所述中心管理服务器接收客户端发送的数据记录查询请求,并将所述数据记录查询请求转发至数据存储服务器,包括:
所述中心管理服务器接收客户端发送的包含客户端的设备信息以及用户名和密码的数据记录查询请求;
验证所述客户端的设备信息是否属于合法设备;
若所述客户端对应的设备为合法设备,则验证所述用户名和密码是否通过;
若所述用户名和密码能够通过,则将所述数据记录查询请求转发至所述数据存储服务器并同时携带所述用户名和密码;
若所述客户端的设备信息不是合法设备,以及所述客户端的设备信息是合法设备同时所述用户名和密码验证不通过,则所述中心管理服务器拒绝转发所述数据记录查询请求至是数据存储服务器。
7.如权利要求6所述的数据管理方法,其特征在于,所述根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器,包括:
根据解析得到的所述数据标识信息,以及携带的所述用户名和密码,所述数据存储服务器判断所述用户名是否具备访问所述数据标识信息对应数据的访问权限;
若所述用户名具备所述访问权限,则执行提取相应数据的操作,并将提取的数据对应的数据记录返回至所述中心管理服务器;
若所述用户名不具备所述访问权限,则返回所述用户名不具备访问权限的提示信息至所述中心管理服务器。
8.如权利要求1或2或3所述的数据管理方法,其特征在于,所述根据解析得到的所述数据标识信息,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录返回至所述中心管理服务器,包括:
根据解析得到的所述数据标识信息,获取所述数据标识信息对应的数据标识特征值;
根据所述数据标识特征值,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录,按照与所述数据记录查询请求的优先值越高排列越靠前的方式进行排列后,返回至所述中心管理服务器。
9.如权利要求8所述的数据管理方法,其特征在于,所述根据解析得到的所述数据标识信息,获取所述数据标识信息对应的数据标识特征值,包括:
利用预设分析模型,分析所述数据标识信息,得到所述数据标识信息对应的数据标识特征值;其中,所述预设分析模型可以表示为数学表达式(1):
Figure FDA0002627607690000041
所述数学表达式(1)中,Te表示通过分析所述数据标识信息得到的第e个数据标识特征值;Se表示所述数据标识信息中的第e个信息的信息值;Si表示所述数据标识信息中的第i个信息的信息值;Sj表示所述数据标识信息中的第j(其中j=i+1)个信息的信息值;
Figure FDA0002627607690000042
该步骤表示将所述数据标识信息中的第e个信息,通过该步骤遍历所述数据标识信息中的所有信息,计算出所述数据标识信息中的所有信息与所述数据标识信息中的第e个信息之间的比较值,并进行放大整合;
Figure FDA0002627607690000043
表示所述数据标识信息中的所有信息两两之间的比较值并进行放大整合;
Figure FDA0002627607690000044
表示所述数据标识信息中的第e个信息的权重值;
将所述权重值与所述数据标识信息中的第e个信息的信息值相乘,得到第e个数据标识特征值;n表示所述数据标识信息中的信息总数。
10.如权利要求9所述的数据管理方法,其特征在于,所述根据所述数据标识特征值,所述数据存储服务器查找相应的数据,并将找到的数据所对应的数据记录,按照与所述数据记录查询请求的优先值越高排列越靠前的方式进行排列后,返回至所述中心管理服务器,包括:
通过数据匹配的方式,利用计算得到的所述数据标识特征值,按照预设数据筛选模型,对所述数据存储服务器中的数据进行筛选,得到所述数据存储服务器中所有数据的查询符合值;其中,所述预设数据筛选模型可以表示为数学表达式(2):
Figure FDA0002627607690000051
所述数学表达式(2)中,Ha表示所述数据存储服务器中的第a个数据的查询符合值;Fa表示所述数据存储服务器中的第a个数据的数据信息值;k表示所述数据存储服务器中存储的数据总个数;u()表示阶跃函数,且当括号内的值大于等于0时,u()函数值为1,当括号内的值小于0时,u()函数值为0;
当|Ha|小于预设阈值时,表示所述数据存储服务器中的第a个数据符合所述数据记录查询请求,将符合所述数据记录查询请求的数据所对应的数据信息值组合成数列记做Qb,表示符合所述数据记录查询请求的第b个数据的数据信息值;
利用预设优先值模型,对计算得到的符合所述数据记录查询请求的数据组合成的数列Qb进行计算,得到每一个符合所述数据记录查询请求的数据的优先值Yb;其中,所述预设优先值模型可以表示为数学表达(3):
Figure FDA0002627607690000061
Yb表示符合所述数据记录查询请求的第b个数据的优先值;d表示符合所述数据记录查询请求的数据的总数;δ()表示单位脉冲函数,且当括号内的值为0时,δ()函数值为1,当括号内的值不为0时,δ()函数值为0;
利用所述预设优先值模型计算得到的每一个符合所述数据记录查询请求的数据的优先值,对数据所对应的数据记录按照所述优先值的大小从大到小进行排列,然后按照当前的排列顺序依次返回至所述中心管理服务器。
CN202010801661.XA 2020-08-11 2020-08-11 数据管理方法 Active CN112148920B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010801661.XA CN112148920B (zh) 2020-08-11 2020-08-11 数据管理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010801661.XA CN112148920B (zh) 2020-08-11 2020-08-11 数据管理方法

Publications (2)

Publication Number Publication Date
CN112148920A true CN112148920A (zh) 2020-12-29
CN112148920B CN112148920B (zh) 2021-08-31

Family

ID=73887933

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010801661.XA Active CN112148920B (zh) 2020-08-11 2020-08-11 数据管理方法

Country Status (1)

Country Link
CN (1) CN112148920B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112749192A (zh) * 2021-01-24 2021-05-04 武汉卓尔信息科技有限公司 一种数据集成服务系统及数据处理方法
CN113742383A (zh) * 2021-09-03 2021-12-03 网银在线(北京)科技有限公司 数据存储方法、装置、设备及介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070055674A1 (en) * 2005-09-02 2007-03-08 Akira Sunada Data server, data management method, and data management system
CN101562526A (zh) * 2009-05-27 2009-10-21 杭州华三通信技术有限公司 数据交互的方法、系统及设备
CN102289478A (zh) * 2011-08-01 2011-12-21 江苏广播电视大学 基于模糊聚类的视频点播推荐系统及方法
CN103475477A (zh) * 2013-09-03 2013-12-25 深圳市共进电子股份有限公司 一种安全授权访问的方法
CN105743854A (zh) * 2014-12-11 2016-07-06 深圳富泰宏精密工业有限公司 安全认证系统及方法
CN105989048A (zh) * 2015-02-05 2016-10-05 浙江大华技术股份有限公司 一种数据记录处理方法、设备及系统
CN109857549A (zh) * 2019-01-04 2019-06-07 平安科技(深圳)有限公司 基于负载均衡的图像数据处理方法、系统、设备及介质
CN111177736A (zh) * 2019-07-30 2020-05-19 腾讯科技(深圳)有限公司 一种数据存储和访问的系统、方法和装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070055674A1 (en) * 2005-09-02 2007-03-08 Akira Sunada Data server, data management method, and data management system
CN101562526A (zh) * 2009-05-27 2009-10-21 杭州华三通信技术有限公司 数据交互的方法、系统及设备
CN102289478A (zh) * 2011-08-01 2011-12-21 江苏广播电视大学 基于模糊聚类的视频点播推荐系统及方法
CN103475477A (zh) * 2013-09-03 2013-12-25 深圳市共进电子股份有限公司 一种安全授权访问的方法
CN105743854A (zh) * 2014-12-11 2016-07-06 深圳富泰宏精密工业有限公司 安全认证系统及方法
CN105989048A (zh) * 2015-02-05 2016-10-05 浙江大华技术股份有限公司 一种数据记录处理方法、设备及系统
CN109857549A (zh) * 2019-01-04 2019-06-07 平安科技(深圳)有限公司 基于负载均衡的图像数据处理方法、系统、设备及介质
CN111177736A (zh) * 2019-07-30 2020-05-19 腾讯科技(深圳)有限公司 一种数据存储和访问的系统、方法和装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112749192A (zh) * 2021-01-24 2021-05-04 武汉卓尔信息科技有限公司 一种数据集成服务系统及数据处理方法
CN113742383A (zh) * 2021-09-03 2021-12-03 网银在线(北京)科技有限公司 数据存储方法、装置、设备及介质

Also Published As

Publication number Publication date
CN112148920B (zh) 2021-08-31

Similar Documents

Publication Publication Date Title
AU2016382908B2 (en) Short link processing method, device and server
CN108769212A (zh) 数据同步方法、装置、计算机设备和存储介质
CN105447046A (zh) 一种分布式系统数据一致性处理方法、装置和系统
CN112148920B (zh) 数据管理方法
CN112052247A (zh) 搜索引擎的索引更新系统、方法、装置、电子设备、存储介质
CN107092686B (zh) 一种基于云存储平台的文件管理方法及装置
CN109740129B (zh) 基于区块链的报表生成方法、装置、设备及可读存储介质
CN113743833B (zh) 基于标识解析的生产控制方法和系统
CN114647698A (zh) 数据同步方法、装置及计算机存储介质
RU2018104435A (ru) Система и способ вынесения решения о компрометации данных
CN110543584A (zh) 一种建立人脸索引的方法、装置、处理服务器及存储介质
CN112579820B (zh) 时间跳变的录像数据处理方法、装置、介质及电子设备
CN116319815B (zh) 引入SaaS特征的云数据放置策略管理系统
CN109753505B (zh) 在大数据存储系统中创建临时存储单元的方法及系统
CN117115718A (zh) 政务视频数据的处理方法、系统及计算机可读存储介质
CN111885088A (zh) 基于区块链的日志监测方法及装置
CN109189813B (zh) 一种数据共享方法及装置
CN114051162B (zh) 一种基于播放记录的缓存方法及装置
CN111339366A (zh) 大数据视频检索方法、装置、计算机设备以及存储介质
US20170124611A1 (en) Methods for Monitoring and Valuating Transactions for Document Processes
CN112132931B (zh) 一种模板化视频合成的处理方法、装置及系统
CN114154010A (zh) 数据处理方法、装置、设备、存储介质
US20150220614A1 (en) Information collection device, system, method and program
CN117150569B (zh) 一种银行业务库的安全交互方法和系统
CN115391293B (zh) 文件获取方法、装置、服务器及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address

Address after: No. 217, 2nd Floor, Building A, No. 51 Kunming Hunan Road, Haidian District, Beijing, 100089

Patentee after: Huizhian Information Technology Co.,Ltd.

Address before: No.208, 2nd floor, block B, No.51, Kunming Hunan Road, Haidian District, Beijing

Patentee before: CHINA STANDARD INTELLIGENT SECURITY INFORMATION TECHNOLOGY Co.,Ltd.

CP03 Change of name, title or address
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: Data management methods

Effective date of registration: 20230524

Granted publication date: 20210831

Pledgee: Beijing first financing Company limited by guarantee

Pledgor: Huizhian Information Technology Co.,Ltd.

Registration number: Y2023980041597

PE01 Entry into force of the registration of the contract for pledge of patent right