CN113177173B - 一种数据访问方法、装置、设备及存储介质 - Google Patents

一种数据访问方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN113177173B
CN113177173B CN202110461058.6A CN202110461058A CN113177173B CN 113177173 B CN113177173 B CN 113177173B CN 202110461058 A CN202110461058 A CN 202110461058A CN 113177173 B CN113177173 B CN 113177173B
Authority
CN
China
Prior art keywords
data
buried point
buried
point
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110461058.6A
Other languages
English (en)
Other versions
CN113177173A (zh
Inventor
王欢欢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Zhenshi Information Technology Co Ltd
Original Assignee
Beijing Jingdong Zhenshi Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Zhenshi Information Technology Co Ltd filed Critical Beijing Jingdong Zhenshi Information Technology Co Ltd
Priority to CN202110461058.6A priority Critical patent/CN113177173B/zh
Publication of CN113177173A publication Critical patent/CN113177173A/zh
Application granted granted Critical
Publication of CN113177173B publication Critical patent/CN113177173B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/957Browsing optimisation, e.g. caching or content distillation
    • G06F16/9574Browsing optimisation, e.g. caching or content distillation of access to content, e.g. by caching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/546Message passing systems or structures, e.g. queues
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/54Indexing scheme relating to G06F9/54
    • G06F2209/548Queue
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明实施例公开了一种数据访问方法、装置、设备及存储介质。该方法包括:获取应用服务器发送的至少一个埋点对象分别对应的埋点数据;基于各所述埋点数据和预设对象维度,分别判断各所述埋点对象是否属于热点数据;如果是,则将所述埋点对象对应的对象数据推送到消息队列中,以使所述应用服务器将所述消息队列中的对象数据下载到本地存储空间中,以及当接收到用户输入的访问指令时,将本地存储空间中与所述访问指令中的目标埋点对象对应的目标对象数据展示给用户。本发明实施例解决了大量数据占用本地存储空间的问题,提高了数据访问的速率。

Description

一种数据访问方法、装置、设备及存储介质
技术领域
本发明实施例涉及数据处理技术领域,尤其涉及一种数据访问方法、装置、设备及存储介质。
背景技术
通常情况下,大量的数据会被保存在数据库中,而应用服务器访问数据库是一件很费时的操作。现有技术通常会将数据库中的数据存储到缓存系统中,当应用服务器访问这些数据时,会直接从缓存系统中读取数据,从而提高数据访问效率。
随着业务系统功能的不断完善,用户的数据访问需求量不断增加,即便是将数据提前存储到缓存系统中,也仍会出现数据读取服务性能下降的情况。
在实现本发明的过程中,发现现有技术中至少存在以下技术问题:
现有技术通常会将缓存系统中的数据保存在应用服务器的本地存储空间中,以进一步提高数据访问速率。但受到本地存储空间的空间限制,不能把所有的数据均保存在本地存储空间中,并且如果将大量数据均保存在本地存储空间中,存储空间的高负荷占用会影响到应用服务器的正常运行。
发明内容
本发明实施例提供了一种数据访问方法、装置、设备及存储介质,以提高本地存储空间的利用率和数据访问速率。
第一方面,本发明实施例提供了一种数据访问方法,该方法包括:
获取应用服务器发送的至少一个埋点对象分别对应的埋点数据;
基于各所述埋点数据和预设对象维度,分别判断各所述埋点对象是否属于热点数据;
如果是,则将所述埋点对象对应的对象数据推送到消息队列中,以使所述应用服务器将所述消息队列中的对象数据下载到本地存储空间中,以及当接收到用户输入的访问指令时,将本地存储空间中与所述访问指令中的目标埋点对象对应的目标对象数据展示给用户。
第二方面,本发明实施例还提供了一种数据访问装置,该装置包括:
埋点数据获取模块,用于获取应用服务器发送的至少一个埋点对象分别对应的埋点数据;
热点数据判断模块,用于基于各所述埋点数据和预设对象维度,分别判断各所述埋点对象是否属于热点数据;
对象数据推送模块,用于如果是,则将所述埋点对象对应的对象数据推送到消息队列中,以使所述应用服务器将所述消息队列中的对象数据下载到本地存储空间中,以及当接收到用户输入的访问指令时,将本地存储空间中与所述访问指令中的目标埋点对象对应的目标对象数据展示给用户。
第三方面,本发明实施例还提供了一种电子设备,该电子设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现上述所涉及的任一所述的数据访问方法。
第四方面,本发明实施例还提供了一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行上述所涉及的任一所述的数据访问方法。
上述发明中的实施例具有如下优点或有益效果:
本发明实施例通过获取应用服务发送的埋点对象对应的埋点数据,基于埋点数据和预设对象维度判断埋点对象是否属于热点数据,将属于热点数据的埋点对象对应的对象数据推送到消息队列中,使得应用服务器将消息队列中的对象数据下载到本地存储空间中,解决了大量数据占用本地存储空间的问题,在合理占用本地存储空间的同时,保证了客户端访问对象数据的访问速率,进一步地,本发明实施例通过基于预设对象维度判断埋点对象是否属于热点数据,保证了本地存储空间中对象数据的多样性,以满足不同对象维度的访问需求。
附图说明
图1是本发明实施例一提供的一种数据访问方法的流程图;
图2是本发明实施例二提供的一种数据访问方法的流程图;
图3是本发明实施例二提供的一种数据访问方法的具体实例的流程图;
图4是本发明实施例三提供的一种数据访问装置的示意图;
图5是本发明实施例四提供的一种电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1是本发明实施例一提供的一种数据访问方法的流程图,本实施例可适用于对缓存服务器中的对象数据进行访问的情况,尤其适用于对商品类对象的对象数据进行访问的情况,该方法可以由数据访问装置来执行,该装置可采用软件和/或硬件的方式实现,该装置可以配置于缓存服务器中。具体包括如下步骤:
S110、获取应用服务器发送的至少一个埋点对象分别对应的埋点数据。
其中,具体的,应用服务器可用于完成与缓存服务器之间的数据传输,示例性的,应用服务器访问缓存服务器中存储的对象数据。
其中,具体的,埋点对象为根据业务需求设置的监控对象,示例性的,埋点对象可以是商品或应用程序。其中,具体的,埋点数据可用于表征用户基于埋点对象执行的操作数据,以埋点对象为商品为例,埋点数据包括但不限于商品的浏览次数、商品的点击次数、商品的浏览时长、商品的检索次数和商品的下单量中至少一项。
S120、基于各埋点数据和预设对象维度,分别判断各埋点对象是否属于热点数据。
其中,具体的,预设对象维度可用于表征埋点对象所属的不同维度。在一个实施例中,可选的,预设对象维度包括对象应用领域维度、对象品牌维度和对象物流业务类型维度中至少一项。其中,具体的,对象应用领域维度可用于表征埋点对象所属的应用领域,对象平台维度可用于表征埋点对象所属的品牌,对象物流业务类型维度可用于表征埋点对象所属的物流业务类型。其中,示例性的,当埋点对象为商品时,对象应用领域维度包括但不限于服饰类、医疗类、美妆类、食品类和耗材类等等,对象品牌维度包括但不限于李宁、安踏、小米和华为等等,对象物流业务类型维度包括但不限于大件业务和京小仓业务等等。其中,京小仓业务是物流为个人和企业提供的中小件商品的存储、取送和管理服务。
需要说明的是,此处仅对对象应用领域维度、对象品牌维度和对象物流业务类型维度进行示例性解释说明,并不对其维度的具体划分标准进行限定。如对象物流业务类型维度还可以是包邮业务和海外配送业务等等。
在一个实施例中,可选的,基于各埋点数据和预设对象维度,分别判断各埋点对象是否属于热点数据,包括:基于预设对象维度,对各埋点对象分别对应的埋点数据进行分类,得到至少一个分类埋点数据集;其中,分类埋点数据集包含至少一个埋点对象和与各埋点对象分别对应的埋点数据;针对每个分类埋点数据集,基于预设单位时间对分类埋点数据集中的各埋点数据进行统计,确定与各埋点数据分别对应的埋点对象是否属于热点数据。
其中,具体的,基于预设对象维度对埋点对象进行分类,得到至少一个分类埋点数据集。示例性的,假设预设对象维度为对象应用领域维度,则得到的分类埋点数据集包括但不限于服饰类埋点数据集、医疗类埋点数据集、美妆类埋点数据集、食品类埋点数据集和耗材类埋点数据集等等。
其中,示例性的,预设单位时间可以是1分钟或者1小时。在一个实施例中,可选的,该方法还包括:获取与分类埋点数据集对应的预设单位时间。具体的,不同分类埋点数据集对应的预设单位时间可以相同也可以不同。示例性的,同一预设对象维度对应的分类埋点数据集的预设单位时间相同,不同预设对象维度对应的分类埋点数据集的预设单位时间不同。如服饰类埋点数据集和医疗类埋点数据集对应的预设单位时间相同,安踏类埋点数据集和李宁类埋点数据集对应的预设单位时间相同。此处对不同分类埋点数据集对应的预设单位时间不作限定,可根据实际需求进行设置。
其中,基于预设单位时间对分类埋点数据集中的各埋点数据进行统计,确定与各埋点数据分别对应的埋点对象是否属于热点数据,具体的,基于预设单位时间对各埋点数据进行统计,得到各埋点数据分别对应的埋点对象的访问频率,基于各埋点对象的访问频率,分别确定各埋点对象是否属于热点数据。在一个实施例中,具体的,基于各访问频率对埋点对象进行排序,将排序位置满足预设排序标准的埋点对象作为热点数据,或者,将访问频率大于预设频率阈值的埋点对象作为热点数据。示例性的,预设排序标准可以是从大到小排序中前100个埋点对象,此处对预设排序标准和预设频率阈值不作限定,可根据实际需求进行设置。
其中,具体的,当埋点数据包括至少两种类型的埋点数据时,如埋点数据包括商品的浏览次数和商品的点击次数,针对每种类型的埋点数据,确定与该埋点数据对应的参考频率,基于各埋点数据分别对应的参考频率确定访问频率。在一个实施例中,访问频率可以是各参考频率的平均值、最大值、最小值或者加权计算值。具体的,基于各埋点数据分别对应的权重,对各参考频率进行计算计算得到访问频率。
S130、将属于热点数据的埋点对象对应的对象数据推送到消息队列中,以使应用服务器将消息队列中的对象数据下载到本地存储空间中,以及当接收到用户输入的访问指令时,将本地存储空间中与访问指令中的目标埋点对象对应的目标对象数据展示给用户。
其中,具体的,对象数据为用户访问时需要展示给用户的数据。消息队列是数据传输过程中保存数据的容器。将对象数据推送到消息队列中,使得应用服务器从消息队列中下载对象数据,可以实现对象数据在应用服务器和缓存服务器异步传输,从而起到系统解耦和限流的作用。
在上述实施例的基础上,可选的,将埋点对象对应的对象数据推送到消息队列中,包括:针对每个分类埋点数据集,获取分类埋点数据集中属于热点数据的埋点对象;将埋点对象对应的对象数据推送到消息队列中。具体的,将每个分类埋点数据集中属于热点数据的埋点对象对应的对象数据推送到消息队列中。以预设对象维度为对象应用领域维度为例,分别将服饰类埋点数据集和医疗类埋点数据集中属于热点数据的埋点对象对应的对象数据推送到消息队列中。
其中,具体的,如果本地存储空间中不存在与访问指令中的目标埋点对象对应的目标对象数据,则应用服务器将访问指令发送给缓存服务器,并接收缓存服务器发送的与访问指令中的目标埋点对象对应的目标对象数据。
本实施例的技术方案,通过获取应用服务发送的埋点对象对应的埋点数据,基于埋点数据和预设对象维度判断埋点对象是否属于热点数据,将属于热点数据的埋点对象对应的对象数据推送到消息队列中,使得应用服务器将消息队列中的对象数据下载到本地存储空间中,解决了大量数据占用本地存储空间的问题,在合理占用本地存储空间的同时,保证了客户端访问对象数据的访问速率,进一步地,本发明实施例通过基于预设对象维度判断埋点对象是否属于热点数据,保证了本地存储空间中对象数据的多样性,以满足不同对象维度的访问需求。
实施例二
图2是本发明实施例二提供的一种数据访问方法的流程图,本实施例的技术方案是上述实施例的基础上的进一步细化。可选的,所述将所述埋点对象对应的对象数据推送到消息队列中,包括:获取用户输入的目标对象分类或者获取预先设置的目标对象分类,并获取与所述目标对象分类对应的分类埋点数据集中属于热点数据的埋点对象;将所述埋点对象对应的对象数据推送到消息队列中。
S210、获取应用服务器发送的至少一个埋点对象分别对应的埋点数据。
S220、基于各埋点数据和预设对象维度,分别判断各埋点对象是否属于热点数据。
S230、获取用户输入的目标对象分类或者获取预先设置的目标对象分类,并获取与目标对象分类对应的分类埋点数据集中属于热点数据的埋点对象。
其中,具体的,目标对象分类与预设对象维度相关。示例性的,如果预设对象维度包括对象应用领域维度,则目标对象分类包括但不限于服饰类、医疗类、美妆类、食品类和耗材类中至少一项,如果预设对象维度包括对象品牌维度,则目标对象分类包括但不限于李宁、安踏、小米和华为中至少一项,如果预设对象维度包括对象物流业务类型维度,则目标对象分类包括但不限于大件业务和/或京小仓业务。
S240、将埋点对象对应的对象数据推送到消息队列中,以使应用服务器将消息队列中的对象数据下载到本地存储空间中,以及当接收到用户输入的访问指令时,将本地存储空间中与访问指令中的目标埋点对象对应的目标对象数据展示给用户。
在上述实施例的基础上,可选的,预设单位时间包括预设分钟级、预设小时级和预设天级中至少一种,相应的,将埋点对象对应的对象数据推送到消息队列中,包括:获取用户输入的目标单位时间或者预先设置的目标单位时间,获取与目标单位时间对应的属于热点数据的埋点对象;将埋点对象对应的对象数据推送到消息队列中。
其中,示例性的,目标单位时间为分钟级、小时级和天级中至少一项。其中,具体的,针对每个分类埋点数据集,基于至少一种预设单位时间对分类埋点数据集中的各埋点数据进行统计,确定与至少一种预设单位时间分别对应的访问频率。基于各预设单位时间,分别判断埋点对象是否属于热点数据。具体的,分别基于分钟级、小时级和天级判断埋点对象是否属于热点数据,基于各预设单位时间分别确定的属于热点数据的埋点对象可能存在不同。示例性的,埋点对象A属于小时级对应的热点数据,但不属于分钟级对应的热点数据。
在上述实施例的基础上,可选的,在将埋点对象对应的对象数据推送到消息队列中之前,方法还包括:针对每个属于热点数据的埋点对象,判断消息队列中是否存在与埋点对象对应的对象数据;如果不存在,则将埋点对象对应的对象数据推送到消息队列中。
其中,具体的,当将与至少两个预设对象维度分别对应的属于热点数据的埋点对象的对象数据推送到消息队列中时,或者,当基于至少一个预设对象维度和目标单位时间对对象数据进行推送时,可能会存在对象数据重复的情况。举例而言,假设目标对象分类包括电子设备类和小米品牌,则属于热点数据的埋点对象可能既属于电子设备类对应的分类埋点数据集又属于小米品牌对应的分类埋点数据集。假设目标对象分类包括电子设备类,目标单位时间为分钟级,如果电子设备类对应的分类埋点数据集是基于分钟级统计的,则属于热点数据的埋点对象可能既属于电子设备类对应的分类埋点数据集又属于与分钟级对应的属于热点数据的埋点对象。
这样设置的好处在于,可以避免当推送的埋点对象所属的预设对象维度和时间维度较多时,消息队列中出现重复的对象数据,使得应用服务器下载重复的对象数据造成本地存储空间浪费的情况,提高本地存储空间的利用率。
图3是本发明实施例二提供的一种数据访问方法的具体实例的流程图,具体的,缓存服务器接收应用服务器发送的采集到的埋点数据,基于预设对象维度和埋点数据统计埋点对象中的热点数据,具体的,预设对象维度包括对象应用领域维度、对象品牌维度和对象物流业务类型维度。在本实施例中,目标单位时间为分钟级,目标对象分类包括服饰类、安踏类和大件类。将与目标单位时间和目标对象分类分别对应的属于热点数据的埋点对象的对象数据推送到消息队列中。应用服务器将消息队列中的对象数据下载到本地存储空间中,当接收到用户输入的访问指令时,通过读服务将本地存储空间中与访问指令中的目标埋点对象对应的目标对象数据展示给用户,如果本地存储空间中没有读取到与访问指令中的目标埋点对象对应的目标对象数据,则读取缓存服务器中的目标对象数据。
本实施例的技术方案,通过基于目标对象分类和/或目标单位时间,对属于热点数据的埋点对象对应的对象数据进行推送,解决了应用服务器下载量较大的问题,使得可根据实际的业务需求选择对应的对象数据进行自定义推送,当业务需求更新时,可及时对本地存储空间中的对象数据进行更新,从而在保证数据访问需求的同时,进一步提高了本地存储空间的利用率。
实施例三
图4是本发明实施例三提供的一种数据访问装置的示意图。本实施例可适用于对缓存服务器中的对象数据进行访问的情况,尤其适用于对商品类对象的对象数据进行访问的情况,该装置可采用软件和/或硬件的方式实现,该装置可以配置于缓存服务器中。该数据访问装置包括:埋点数据获取模块310、热点数据判断模块320和对象数据推送模块330。
其中,埋点数据获取模块310,用于获取应用服务器发送的至少一个埋点对象分别对应的埋点数据;
热点数据判断模块320,用于基于各埋点数据和预设对象维度,分别判断各埋点对象是否属于热点数据;
对象数据推送模块330,用于如果是,则将埋点对象对应的对象数据推送到消息队列中,以使应用服务器将消息队列中的对象数据下载到本地存储空间中,以及当接收到用户输入的访问指令时,将本地存储空间中与访问指令中的目标埋点对象对应的目标对象数据展示给用户。
本实施例的技术方案,通过获取应用服务发送的埋点对象对应的埋点数据,基于埋点数据和预设对象维度判断埋点对象是否属于热点数据,将属于热点数据的埋点对象对应的对象数据推送到消息队列中,使得应用服务器将消息队列中的对象数据下载到本地存储空间中,解决了大量数据占用本地存储空间的问题,在合理占用本地存储空间的同时,保证了客户端访问对象数据的访问速率,进一步地,本发明实施例通过基于预设对象维度判断埋点对象是否属于热点数据,保证了本地存储空间中对象数据的多样性,以满足不同对象维度的访问需求。
在上述技术方案的基础上,可选的,热点数据判断模块320具体用于:
基于预设对象维度,对各埋点对象分别对应的埋点数据进行分类,得到至少一个分类埋点数据集;其中,分类埋点数据集包含至少一个埋点对象和与各埋点对象分别对应的埋点数据;
针对每个分类埋点数据集,基于预设单位时间对分类埋点数据集中的各埋点数据进行统计,确定与各埋点数据分别对应的埋点对象是否属于热点数据。
在上述技术方案的基础上,可选的,预设对象维度包括对象应用领域维度、对象品牌维度和对象物流业务类型维度中至少一项。
在上述技术方案的基础上,可选的,对象数据推送模块330包括:
第一对象数据推送单元,用于针对每个分类埋点数据集,获取分类埋点数据集中属于热点数据的埋点对象;将埋点对象对应的对象数据推送到消息队列中。
在上述技术方案的基础上,可选的,对象数据推送模块330包括:
第二对象数据推送单元,用于获取用户输入的目标对象分类或者获取预先设置的目标对象分类,并获取与目标对象分类对应的分类埋点数据集中属于热点数据的埋点对象;将埋点对象对应的对象数据推送到消息队列中。
在上述技术方案的基础上,可选的,预设单位时间包括预设分钟级、预设小时级和预设天级中至少一种,相应的,对象数据推送模块330包括:
第三对象数据推送单元,用于获取用户输入的目标单位时间或者预先设置的目标单位时间,获取与目标单位时间对应的属于热点数据的埋点对象;将埋点对象对应的对象数据推送到消息队列中。
在上述技术方案的基础上,可选的,该装置还包括:
消息队列判断模块,用于在将埋点对象对应的对象数据推送到消息队列中之前,针对每个属于热点数据的埋点对象,判断消息队列中是否存在与埋点对象对应的对象数据;如果不存在,则将埋点对象对应的对象数据推送到消息队列中。
本发明实施例所提供的数据访问装置可以用于执行本发明实施例所提供的数据访问方法,具备执行方法相应的功能和有益效果。
值得注意的是,上述数据访问装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
实施例四
图5是本发明实施例四提供的一种电子设备的结构示意图,本发明实施例为本发明上述实施例的数据访问方法的实现提供服务,可配置上述实施例中的数据访问装置。图5示出了适于用来实现本发明实施方式的示例性电子设备12的框图。图5显示的电子设备12仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图5所示,电子设备12以通用计算设备的形式表现。电子设备12的组件可以包括但不限于:一个或者多个处理器或者处理单元16,系统存储器28,连接不同系统组件(包括系统存储器28和处理单元16)的总线18。
总线18表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器、外围总线、图形加速端口、处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说,这些体系结构包括但不限于工业标准体系结构(ISA)总线、微通道体系结构(MAC)总线、增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。
电子设备12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被电子设备12访问的可用介质,包括易失性和非易失性介质,可移动的和不可移动的介质。
系统存储器28可以包括易失性存储器形式的计算机系统可读介质,例如随机存取存储器(RAM)30和/或高速缓存存储器32。电子设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例,存储系统34可以用于读写不可移动的、非易失性磁介质(图5未显示,通常称为“硬盘驱动器”)。尽管图5中未示出,可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器,以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下,每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品,该程序产品具有一组(例如至少一个)程序模块,这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块42的程序/实用工具40,可以存储在例如存储器28中,这样的程序模块42包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。
电子设备12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信,还可与一个或者多个使得用户能与该电子设备12交互的设备通信,和/或与使得该电子设备12能与一个或多个其它计算设备进行通信的任何设备(例如网卡,调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且,电子设备12还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图5所示,网络适配器20通过总线18与电子设备12的其它模块通信。应当明白,尽管图中未示出,可以结合电子设备12使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
处理单元16通过运行存储在系统存储器28中的程序,从而执行各种功能应用以及数据处理,例如实现本发明实施例所提供的数据访问方法。
通过上述电子设备,解决了大量数据占用本地存储空间的问题,在合理占用本地存储空间的同时,保证了客户端访问对象数据的访问速率,保证了本地存储空间中对象数据的多样性,以满足不同对象维度的访问需求。
实施例五
本发明实施例五还提供了一种包含计算机可执行指令的存储介质,计算机可执行指令在由计算机处理器执行时用于执行一种数据访问方法,该方法包括:
获取应用服务器发送的至少一个埋点对象分别对应的埋点数据;
基于各埋点数据和预设对象维度,分别判断各埋点对象是否属于热点数据;
如果是,则将埋点对象对应的对象数据推送到消息队列中,以使应用服务器将消息队列中的对象数据下载到本地存储空间中,以及当接收到用户输入的访问指令时,将本地存储空间中与访问指令中的目标埋点对象对应的目标对象数据展示给用户。
本发明实施例的计算机存储介质,可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码,程序设计语言包括面向对象的程序设计语言,诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言,诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络包括局域网(LAN)或广域网(WAN),连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上的方法操作,还可以执行本发明任意实施例所提供的数据访问方法中的相关操作。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (9)

1.一种数据访问方法,其特征在于,包括:
获取应用服务器发送的至少一个埋点对象分别对应的埋点数据;
基于各所述埋点数据和预设对象维度,分别判断各所述埋点对象是否属于热点数据;
如果是,则将所述埋点对象对应的对象数据推送到消息队列中,以使所述应用服务器将所述消息队列中的对象数据下载到本地存储空间中,以及当接收到用户输入的访问指令时,将本地存储空间中与所述访问指令中的目标埋点对象对应的目标对象数据展示给用户;
所述基于各所述埋点数据和预设对象维度,分别判断各所述埋点对象是否属于热点数据,包括:
基于预设对象维度,对各所述埋点对象分别对应的埋点数据进行分类,得到至少一个分类埋点数据集;其中,所述分类埋点数据集包含至少一个埋点对象和与各所述埋点对象分别对应的埋点数据;
针对每个所述分类埋点数据集,基于预设单位时间对所述分类埋点数据集中的各所述埋点数据进行统计,确定与各所述埋点数据分别对应的埋点对象是否属于热点数据。
2.根据权利要求1所述的方法,其特征在于,所述预设对象维度包括对象应用领域维度、对象品牌维度和对象物流业务类型维度中至少一项。
3.根据权利要求1所述的方法,其特征在于,所述将所述埋点对象对应的对象数据推送到消息队列中,包括:
针对每个所述分类埋点数据集,获取所述分类埋点数据集中属于热点数据的埋点对象;
将所述埋点对象对应的对象数据推送到消息队列中。
4.根据权利要求1所述的方法,其特征在于,所述将所述埋点对象对应的对象数据推送到消息队列中,包括:
获取用户输入的目标对象分类或者获取预先设置的目标对象分类,并获取与所述目标对象分类对应的分类埋点数据集中属于热点数据的埋点对象;
将所述埋点对象对应的对象数据推送到消息队列中。
5.根据权利要求1所述的方法,其特征在于,所述预设单位时间包括预设分钟级、预设小时级和预设天级中至少一种,相应的,所述将所述埋点对象对应的对象数据推送到消息队列中,包括:
获取用户输入的目标单位时间或者预先设置的目标单位时间,获取与所述目标单位时间对应的属于热点数据的埋点对象;
将所述埋点对象对应的对象数据推送到消息队列中。
6.根据权利要求3-5任一项所述的方法,其特征在于,在将所述埋点对象对应的对象数据推送到消息队列中之前,所述方法还包括:
针对每个属于热点数据的埋点对象,判断消息队列中是否存在与所述埋点对象对应的对象数据;
如果不存在,则将所述埋点对象对应的对象数据推送到消息队列中。
7.一种数据访问装置,其特征在于,包括:
埋点数据获取模块,用于获取应用服务器发送的至少一个埋点对象分别对应的埋点数据;
热点数据判断模块,用于基于各所述埋点数据和预设对象维度,分别判断各所述埋点对象是否属于热点数据;
对象数据推送模块,用于如果是,则将所述埋点对象对应的对象数据推送到消息队列中,以使所述应用服务器将所述消息队列中的对象数据下载到本地存储空间中,以及当接收到用户输入的访问指令时,将本地存储空间中与所述访问指令中的目标埋点对象对应的目标对象数据展示给用户;
所述热点数据判断模块,具体用于:
基于预设对象维度,对各所述埋点对象分别对应的埋点数据进行分类,得到至少一个分类埋点数据集;其中,所述分类埋点数据集包含至少一个埋点对象和与各所述埋点对象分别对应的埋点数据;
针对每个所述分类埋点数据集,基于预设单位时间对所述分类埋点数据集中的各所述埋点数据进行统计,确定与各所述埋点数据分别对应的埋点对象是否属于热点数据。
8.一种电子设备,其特征在于,所述电子设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-6中任一所述的数据访问方法。
9.一种包含计算机可执行指令的存储介质,其特征在于,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-6中任一所述的数据访问方法。
CN202110461058.6A 2021-04-27 2021-04-27 一种数据访问方法、装置、设备及存储介质 Active CN113177173B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110461058.6A CN113177173B (zh) 2021-04-27 2021-04-27 一种数据访问方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110461058.6A CN113177173B (zh) 2021-04-27 2021-04-27 一种数据访问方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN113177173A CN113177173A (zh) 2021-07-27
CN113177173B true CN113177173B (zh) 2023-09-05

Family

ID=76927016

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110461058.6A Active CN113177173B (zh) 2021-04-27 2021-04-27 一种数据访问方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN113177173B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102821113A (zh) * 2011-06-07 2012-12-12 阿里巴巴集团控股有限公司 缓存方法及系统
CN110908881A (zh) * 2019-11-06 2020-03-24 北京奇艺世纪科技有限公司 埋点数据的发送方法、装置、电子设备及计算机可读存储介质
CN111190899A (zh) * 2019-11-26 2020-05-22 泰康保险集团股份有限公司 一种埋点数据处理方法、装置、服务器及存储介质
US10664315B1 (en) * 2016-02-12 2020-05-26 Open Invention Network Llc Methods, systems, and devices for adaptive data resource assignment and placement in distributed data storage systems
CN112069384A (zh) * 2020-09-04 2020-12-11 中国平安人寿保险股份有限公司 一种埋点数据处理方法、服务器及可读存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102821113A (zh) * 2011-06-07 2012-12-12 阿里巴巴集团控股有限公司 缓存方法及系统
US10664315B1 (en) * 2016-02-12 2020-05-26 Open Invention Network Llc Methods, systems, and devices for adaptive data resource assignment and placement in distributed data storage systems
CN110908881A (zh) * 2019-11-06 2020-03-24 北京奇艺世纪科技有限公司 埋点数据的发送方法、装置、电子设备及计算机可读存储介质
CN111190899A (zh) * 2019-11-26 2020-05-22 泰康保险集团股份有限公司 一种埋点数据处理方法、装置、服务器及存储介质
CN112069384A (zh) * 2020-09-04 2020-12-11 中国平安人寿保险股份有限公司 一种埋点数据处理方法、服务器及可读存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张怡陵 ; 王庆余 ; 杨悦 ; .基于用户行为分析的VIP政务服务设计与实现.电脑编程技巧与维护.2020,(第05期),全文. *

Also Published As

Publication number Publication date
CN113177173A (zh) 2021-07-27

Similar Documents

Publication Publication Date Title
CN109299348B (zh) 一种数据查询方法、装置、电子设备及存储介质
CN106649482B (zh) 一种信息推送方法及装置
CN108984553B (zh) 缓存方法和装置
CN112162965B (zh) 一种日志数据处理的方法、装置、计算机设备及存储介质
CN111198859B (zh) 数据处理方法、装置、电子设备及计算机可读存储介质
CN111127051B (zh) 多渠道动态归因方法、装置、服务器及存储介质
CN108769157B (zh) 消息弹窗的展示方法、装置、计算设备及计算机存储介质
CN114547097A (zh) 数据处理方法、装置、设备和存储介质
CN109409947A (zh) 一种基于客户端的居民出行调查方法
CN111010453B (zh) 服务请求处理方法、系统、电子设备及计算机可读介质
CN113760977A (zh) 一种信息查询方法、装置、设备及存储介质
CN113177173B (zh) 一种数据访问方法、装置、设备及存储介质
CN111274104B (zh) 数据处理方法、装置、电子设备及计算机可读存储介质
CN107480269B (zh) 对象展示方法及系统、介质和计算设备
CN112887426B (zh) 信息流的推送方法、装置、电子设备以及存储介质
CN115905322A (zh) 业务处理方法、装置、电子设备及存储介质
CN113076175B (zh) 用于虚拟机的内存共享方法及装置
CN113656731A (zh) 广告页面的处理方法、装置、电子设备和存储介质
CN113961797A (zh) 资源推荐方法、装置、电子设备和可读存储介质
CN109600415B (zh) 从多个源服务器获取目标数据的方法、装置和计算机设备
CN113282455A (zh) 一种监控处理方法和装置
GB2587039A (en) System and method for supporting optimization of usage efficiency of resources
CN117972096B (zh) 一种社交平台互动消息的处理方法及系统
CN110648208B (zh) 群组识别方法、装置和电子设备
CN117492648A (zh) 数据处理方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant