CN110990348A - 消息通知方法、装置及系统 - Google Patents

消息通知方法、装置及系统 Download PDF

Info

Publication number
CN110990348A
CN110990348A CN201811163420.6A CN201811163420A CN110990348A CN 110990348 A CN110990348 A CN 110990348A CN 201811163420 A CN201811163420 A CN 201811163420A CN 110990348 A CN110990348 A CN 110990348A
Authority
CN
China
Prior art keywords
message
notification message
notification
file system
hadoop distributed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811163420.6A
Other languages
English (en)
Other versions
CN110990348B (zh
Inventor
黄耀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Gridsum Technology Co Ltd
Original Assignee
Beijing Gridsum Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Gridsum Technology Co Ltd filed Critical Beijing Gridsum Technology Co Ltd
Priority to CN201811163420.6A priority Critical patent/CN110990348B/zh
Publication of CN110990348A publication Critical patent/CN110990348A/zh
Application granted granted Critical
Publication of CN110990348B publication Critical patent/CN110990348B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04Real-time or near real-time messaging, e.g. instant messaging [IM]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种消息通知方法、装置及系统。其中,该方法包括:检测是否需要向消息接收方发送通知消息;在检测到需要向消息接收方发送通知消息的情况下,将通知消息写入Hadoop分布式文件系统的目标文件中,其中,在消息接收方检测到Hadoop分布式文件系统的目标文件中存在新写入的通知消息的情况下,基于通知消息执行处理操作。本发明解决了相关技术中相关技术中对于采用消息中间件软件和硬件集群进行消息通知,硬件成本和运维成本较高的技术问题。

Description

消息通知方法、装置及系统
技术领域
本发明涉及信息处理技术领域,具体而言,涉及一种消息通知方法、装置及系统。
背景技术
现有技术中,存在多种实现的消息通知机制的方法,但大多数方法都需要新建一个集群,开发、部署消息队列软件,并运维此集群和消息队列软件,防止单点故障。由此可知,实现消息通知机制,需要新建集群、开发、部署和维护消息队列软件,并对软件和硬件集群进行运维,使用的硬件成本、软件开发、部署、运维等成本都比较高。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种消息通知方法、装置及系统,以至少解决相关技术中相关技术中对于采用消息中间件软件和硬件集群进行消息通知,硬件成本和运维成本较高的技术问题。
为了实现上述目的,根据本申请的一个方面,提供了一种消息通知方法。该方法包括:检测是否需要向消息接收方发送通知消息;在检测到需要向消息接收方发送通知消息的情况下,将通知消息写入Hadoop分布式文件系统的目标文件中,其中,在消息接收方检测到Hadoop分布式文件系统的目标文件中存在新写入的通知消息的情况下,基于通知消息执行处理操作。
进一步地,在将通知消息写入Hadoop分布式文件系统的目标文件中之后,该方法还包括:检测是否接收到Hadoop分布式文件系统返回的写入成功消息;若未接收到Hadoop分布式文件系统返回的写入成功消息,继续将通知消息写入Hadoop分布式文件系统的目标文件中,直到接收到Hadoop分布式文件系统返回的写入成功消息。
进一步地,在将通知消息写入Hadoop分布式文件系统的目标文件中之后,该方法还包括:检测写入Hadoop分布式文件系统中的目标文件中的通知消息是否被删除,或者,检测Hadoop分布式文件系统中是否存在消息确收文件,其中,消息确收文件为消息接收方接收到通知消息后,写入Hadoop分布式文件系统中的文件;若检测到写入Hadoop分布式文件系统中的目标文件中的通知消息被删除,或者,检测到Hadoop分布式文件系统中存在消息确收文件,确定消息接收方已接收到通知消息。
进一步地,在将通知消息写入Hadoop分布式文件系统的目标文件中之后,该方法还包括:在Hadoop分布式文件系统中对通知消息进行备份处理。
为了实现上述目的,根据本申请的另一个方面,提供了一种消息通知方法。该方法包括:按照预设时间间隔检测Hadoop分布式文件系统中是否存在新写入的通知消息;在检测到Hadoop分布式文件系统中存在新写入的通知消息的情况下,获取新写入的通知消息,执行与新写入的通知消息对应的处理操作。
进一步地,在获取新写入的通知消息之后,该方法还包括:删除Hadoop分布式文件系统中的目标文件中的通知消息,或,向Hadoop分布式文件系统中写入消息确收文件。
进一步地,在检测到Hadoop分布式文件系统中不存在新写入的通知消息的情况下,在预设时间间隔后,再次检测Hadoop分布式文件系统中是否存在新写入的通知消息。
为了实现上述目的,根据本申请的另一方面,提供了一种消息通知装置。该装置包括:第一检测单元,用于检测是否需要向消息接收方发送通知消息;第一写入单元,用于在检测到需要向消息接收方发送通知消息的情况下,将通知消息写入Hadoop分布式文件系统的目标文件中,其中,在消息接收方检测到Hadoop分布式文件系统的目标文件中存在新写入的通知消息的情况下,基于通知消息执行处理操作。
为了实现上述目的,根据本申请的另一方面,提供了另一种消息通知装置。该装置包括:第四检测单元,用于按照预设时间间隔检测Hadoop分布式文件系统中是否存在新写入的通知消息;获取单元,用于在检测到Hadoop分布式文件系统中存在新写入的通知消息的情况下,获取新写入的通知消息,执行与新写入的通知消息对应的处理操作。
为了实现上述目的,根据本申请的另一方面,提供了一种消息通知系统。该系统包括:消息通知方;Hadoop分布式文件系统;消息接收方;其中,在检测到消息通知方需要向消息接收方发送通知消息的情况下,将通知消息写入的Hadoop分布式文件系统的目标文件中,在消息接收方检测到Hadoop分布式文件系统的目标文件中存在新写入的通知消息的情况下,基于通知消息执行处理操作。
为了实现上述目的,根据本申请的另一方面,提供了一种存储介质,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备上述任意一项所述的消息通知方法。
为了实现上述目的,根据本申请的另一方面,提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时用于执行上述任意一项所述的消息通知方法。通过本申请,采用以下步骤:检测是否需要向消息接收方发送通知消息;在检测到需要向消息接收方发送通知消息的情况下,将通知消息写入Hadoop分布式文件系统的目标文件中,其中,在消息接收方检测到Hadoop分布式文件系统的目标文件中存在新写入的通知消息的情况下,基于通知消息执行处理操作。解决了相关技术中需要采用运维软件和硬件集群进行消息通知,运维成本较高的技术问题,通过基于Hadoop分布式文件系统实现了高可用的消息通知,避开了现有技术中为了可以进行消息通知,新建集群、开发、部署和维护消息队列软件,并且需要对硬件、软件、部署、运维的进行成本投入,进而达到了节省成本、可用性高、实现方式简单的技术效果。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本申请实施例提供的一种消息通知方法的流程图;
图2是根据本申请实施例提供的另一种消息通知方法的流程图;
图3是根据本申请实施例提供的另一种消息通知方法的示意图;
图4是根据本申请实施例提供的一种消息通知装置的示意图;
图5是根据本申请实施例提供的另一种消息通知装置的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本发明实施例,提供了一种消息通知方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种消息通知方法的流程图,如图1所示,该方法包括如下步骤:
步骤S102,检测是否需要向消息接收方发送通知消息。
例如,在网站中存在文件生成或文件更新时,会触发向消息接收方发送通知消息,即会检测到向消息接收方发送通知消息。
步骤S104,在检测到需要向消息接收方发送消息通知的情况下,将通知消息写入Hadoop分布式文件系统的目标文件中,其中,在消息接收方检测到Hadoop分布式文件系统的目标文件中存在新写入的通知消息的情况下,基于通知消息执行处理操作。
具体地,Hadoop分布式文件系统:是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。
Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集(largedata set)的应用程序。HDFS放宽了(relax)POSIX的要求,可以以流的形式访问(streamingaccess)文件系统中的数据。HDFS为海量的数据提供了存储。
具体地,HDFS分布式文件系统是现存的文件系统,为访问应用程序的海量数据提供了存储空间,在通知方检测到需要向接收方发送消息的情况下,通知方将需要发送的目标消息写到HDFS中的目标文件中,在通知方将目标消息写入目标文件中时会触发写入新消息的通知至接收方,接收方基于接收到的消息通知执行处理操作。
需要说明的是,需要发送给接收方的目标消息可以以消息数据的方式写入HDFS中,也可以以消息文件的形式写入HDFS中的目标文件。
可选地,在将通知消息写入Hadoop分布式文件系统的目标文件中之后,该方法还包括:检测是否接收到Hadoop分布式文件系统返回的写入成功消息;若未接收到Hadoop分布式文件系统返回的写入成功消息,继续将通知消息写入Hadoop分布式文件系统的目标文件中,直到接收到Hadoop分布式文件系统返回的写入成功消息。
具体地,通知方将目标消息写入到目标文件中成功后,HDFS会基于成功写入的目标通知消息数据触发写入成功的消息返回至通知方,通知方在接收到写入成功消息后停止将目标通知消息数据的写入目标文件的操作。相反的,在通知方将目标通知消息数据写入至目标文件中后的预设时间后,通知方并没有收到HDFS返回的写入成功消息的情况下,通知方会继续向目标文件中写入目标通知消息数据目标通知消息数据,直到收到HDFS返回的写入成功消息后,才停止写入操作。需要说明的是,预设时间是通知方事先预设的,可以是几秒钟,也可以是较长的几分钟等任意时间,根据实际需要设置预设时间。
可选地,在将通知消息写入Hadoop分布式文件系统的目标文件中之后,该方法还包括:检测写入Hadoop分布式文件系统中的目标文件中的通知消息是否被删除,或者,检测Hadoop分布式文件系统中是否存在消息确收文件,其中,消息确收文件为消息接收方接收到通知消息后,写入Hadoop分布式文件系统中的文件;若检测到写入Hadoop分布式文件系统中的目标文件中的通知消息被删除,或者,检测到Hadoop分布式文件系统中存在消息确收文件,确定消息接收方已接收到通知消息。
具体地,在目标消息成功写入目标文件后,接收方会即时对写入消息数据做出响应,,待HDFS检测到目标通知消息数据被响应后即会及时删除目标通知消息数据。同时通知方在目标通知消息数据成功放入至目标文件后的预设时间内,也会检测目标文件中的目标通知消息数据是否还存在,如果通知方检测到目标文件中的目标通知消息数据已经不存在,通知方即确定目标消息已经被成功发送,即单次发送目标信息过程结束。
可选地,在通知方成功写入目标通知消息数据后,通知方在预设时间内检测到目标文件中存在与目标消息相对应的确收文件时,也可以确定目标消息发送成功,即单次发送目标信息过程结束。
需要说明的是,在通知方检测到目标文件内存在目标消息所对应的确收文件,确认目标消息发送成功后,目标文件执行删除操作,同时将目标通知消息数据与确收文件同时删除,以来保证目标文件中始终只存在需要发送的新的目标通知消息数据。
可选地,在将通知消息写入Hadoop分布式文件系统的目标文件中之后,该方法还包括:在Hadoop分布式文件系统中对通知消息进行备份处理。
具体地,通知方每次将需要发送的目标通知消息数据成功写入目标文件中后,HDFS中的目标文件首先会对目标通知消息数据进行备份,备份的方法具有多种方式,例如,复制目标通知消息数据至另外的不会执行删除操作的存储文件夹中等方式,做了备份的目标通知消息数据中都带有写入时间标记,在发送消息过程发生异常时,可以根据时间标记找到发送失败的目标通知消息数据进而执行重新发送操作,保证了发送消息的成功率。
综上所述,本申请实施例中提供的消息通知方法,通过检测是否需要向消息接收方发送通知消息;在检测到需要向消息接收方发送通知消息的情况下,将通知消息写入Hadoop分布式文件系统的目标文件中,其中,在消息接收方检测到Hadoop分布式文件系统的目标文件中存在新写入的通知消息的情况下,基于通知消息执行处理操作。解决了相关技术中需要采用运维软件和硬件集群进行消息通知,运维成本较高的技术问题,通过基于Hadoop分布式文件系统实现了高可用的消息通知,避开了现有技术中为了可以进行消息通知,新建集群、开发、部署和维护消息队列软件,并且需要对硬件、软件、部署、运维的进行成本投入,进而达到了节省成本、可用性高、实现方式简单的技术效果。
图2是根据本发明实施例的另一种消息通知方法的流程图,如图2所示,该方法包括如下步骤:
步骤S202,按照预设时间间隔检测Hadoop分布式文件系统中是否存在新写入的通知消息。
具体地,在不论通知方有无目标通知消息数据需要写入至目标文件的情况下,消息接收方都会到HDFS中的目标文件检测是否有新的目标通知消息数据,接收方执行检测操作是按照每隔一定的预设时间执行操作的,也就是说,接收方按照一定的频率对目标文件中的目标通知消息数据进行检测。
步骤S204,在检测到Hadoop分布式文件系统中存在新写入的通知消息的情况下,获取新写入的通知消息,执行与新写入的通知消息对应的处理操作。
具体地,一旦通知方将目标通知消息数据成功写入目标文件中,在接收方保持一定频率的检测下,接收方即可在很短的时间内获取目标通知消息数据,并且接收方在获取目标通知消息数据后对目标通知消息数据进行识别,并执行对应的处理操作,这里对应的处理操作可以是推送通知、发信息通知等。
综上所述,本申请实施例中提供的消息通知方法,通过按照预设时间间隔检测Hadoop分布式文件系统中是否存在新写入的通知消息,在检测到Hadoop分布式文件系统中存在新写入的通知消息的情况下,获取新写入的通知消息,执行与新写入的通知消息对应的处理操作。解决了相关技术中需要采用运维软件和硬件集群进行消息通知,运维成本较高的技术问题,通过基于Hadoop分布式文件系统实现了高可用的消息通知,避开了现有技术中为了可以进行消息通知,新建集群、开发、部署和维护消息队列软件,并且需要对硬件、软件、部署、运维的进行成本投入,进而达到了节省成本、可用性高、实现方式简单的技术效果。
可选地,在获取新写入的通知消息之后,该方法还包括:删除Hadoop分布式文件系统中的目标文件中的通知消息,或,向Hadoop分布式文件系统中写入消息确收文件。
具体地,消息接收方在目标文件中获取到目标通知消息数据后,通知方可以执行删除目标通知消息数据的操作也可以是目标文件在感应到目标通知消息数据被获取后执行数据删除操作。
可选地,接收方在获取到目标通知消息数据后,作为反馈会向目标文件中写入一个与目标通知消息数据对应的确收文件,在写入确收文件后,接收方或者目标文件执行删除操作,将目标通知消息数据与与之对应的目标文件删除。
可选地,在检测到Hadoop分布式文件系统中不存在新写入的通知消息的情况下,在预设时间间隔后,再次检测Hadoop分布式文件系统中是否存在新写入的通知消息。
具体地,接收方以固定频率检测目标文件夹中的目标通知消息数据,在一次检测操作中,没有发现任何目标通知消息数据,接收方还会继续按照固定频率在预设时间间隔后再次检测系统中是否存在目标通知消息数据,若检测到已有目标通知消息数据,则执行上述获取等一系列操作,因为上述方法已经在前面详细叙述,这里不再赘述。若仍然没有检测到有目标通知消息数据的存在,则继续按照固有频率在预设时间间隔后再次进行检测。
根据本申请提供的实施例,这里提供一个应用场景,在现代生活中,大家都离不开移动终端,移动终端包括,手机、IPAD、智能手表等,在移动终端中都会下载很多APP应用程序,例如,新闻应用程序,当新闻应用程序的消息推送打开时,新闻应用程序就会作为通知方将每天或者每时刻需要推送给目标移动终端的消息写入现有的HDFS的目标文件中,在消息推送打开的情况下,目标移动终端就会按照预定频率从HDFS的目标文件中检测是否有新的消息,如果在检测到目标文件中有新消息时,目标移动终端就会自动获取新消息并执行发送操作,使目标新闻应用程序的新消息在移动终端中以显示条或者其他方式显示并可以伴有通知消息声音来通知用户查看目标新闻应用程序推送的新消息。以上应用场景仅是本申请提供的一方面,还有其他应用场景,例如银行转账成功的推送消息,微信转账消息等等,再次不再做具体限定。
本申请实施例还提供了另一种消息通知方法的示意图,如图3所示,步骤一,通知方写入目标通知消息数据到HDFS文件系统;步骤二,检测HDFS文件系统中是否有新的文件通知;步骤三,在HDFS系统文件中有新的通知内容,接收方对新的通知内容进行处理;步骤四,接收方定时检测HDFS中的消息数据;步骤五,在接收方没有检测到HDFS文件系统中存在新的消息数据,等待下一次检测,流程结束。
通过上述步骤,可以解决了相关技术中需要采用运维软件和硬件集群进行消息通知,运维成本较高的技术问题,通过基于Hadoop分布式文件系统实现了高可用的消息通知,避开了现有技术中为了可以实现高可用的消息通知机制,新建集群、开发、部署和维护消息队列软件,并且需要对硬件、软件、部署、运维的进行成本投入,进而达到了节省成本的技术效果。
本申请实施例还提供了一种消息通知装置,需要说明的是,本申请实施例的一种消息通知装置可以用于执行本申请实施例所提供的用于一种消息通知方法。以下对本申请实施例提供的一种消息通知装置进行介绍。
图4是根据本申请实施例的一种消息通知装置的示意图。如图4所示,该装置包括:第一检测单元401,用于检测是否需要向消息接收方发送通知消息;第一写入单元402,用于在检测到需要向消息接收方发送通知消息的情况下,将通知消息写入Hadoop分布式文件系统的目标文件中,其中,在消息接收方检测到Hadoop分布式文件系统的目标文件中存在新写入的通知消息的情况下,基于通知消息执行处理操作。
通过本申请实施例的一种消息通知装置,解决了相关技术中需要采用运维软件和硬件集群进行消息通知,运维成本较高的技术问题,通过基于Hadoop分布式文件系统实现了高可用的消息通知,避开了现有技术中为了可以实现高可用的消息通知机制,新建集群、开发、部署和维护消息队列软件,并且需要对硬件、软件、部署、运维的进行成本投入,进而达到了节省成本的技术效果。
可选地,在本申请实施例提供的一种消息通知装置中,该装置还包括:第二检测单元,用于在将通知消息写入Hadoop分布式文件系统的目标文件中之后,检测是否接收到Hadoop分布式文件系统返回的写入成功消息;第二写入单元,用于在未接收到Hadoop分布式文件系统返回的写入成功消息的情况下,继续将通知消息写入Hadoop分布式文件系统的目标文件中,直到接收到Hadoop分布式文件系统返回的写入成功消息。
可选地,在本申请实施例提供的一种消息通知装置中,该装置还包括:第三检测单元,在将通知消息写入Hadoop分布式文件系统的目标文件中之后,检测写入Hadoop分布式文件系统中的目标文件中的通知消息是否被删除,或者,检测Hadoop分布式文件系统中是否存在消息确收文件,其中,消息确收文件为消息接收方接收到通知消息后,写入Hadoop分布式文件系统中的文件;确定单元,用于在检测到写入Hadoop分布式文件系统中的目标文件中的通知消息被删除的情况下,或者,在检测到Hadoop分布式文件系统中存在消息确收文件的情况,确定消息接收方已接收到通知消息。
可选地,在本申请实施例提供的一种消息通知装置中,该装置还包括:备份单元,用于在将通知消息写入Hadoop分布式文件系统的目标文件中之后,在Hadoop分布式文件系统中对通知消息进行备份处理。
图5是根据本申请实施例的另一种消息通知装置的示意图。如图5所示,该装置包括:第四检测单元501,用于按照预设时间间隔检测Hadoop分布式文件系统中是否存在新写入的通知消息;获取单元502,用于在检测到Hadoop分布式文件系统中存在新写入的通知消息的情况下,获取新写入的通知消息,执行与新写入的通知消息对应的处理操作。
通过本申请实施例的另一种消息通知装置,解决了相关技术中需要采用运维软件和硬件集群进行消息通知,运维成本较高的技术问题,通过基于Hadoop分布式文件系统实现了高可用的消息通知,避开了现有技术中为了可以实现高可用的消息通知机制,新建集群、开发、部署和维护消息队列软件,并且需要对硬件、软件、部署、运维的进行成本投入,进而达到了节省成本的技术效果。
可选地,在本申请实施例提供的一种消息通知装置中,该装置包括,删除单元,用于在获取新写入的通知消息之后,删除Hadoop分布式文件系统中的目标文件中的通知消息,或,写入单元,用于向Hadoop分布式文件系统中写入消息确收文件。
可选地,在本申请实施例提供的一种消息通知装置中,该装置还包括:第五检测单元,用于在检测到Hadoop分布式文件系统中不存在新写入的通知消息的情况下,在预设时间间隔后,再次检测Hadoop分布式文件系统中是否存在新写入的通知消息。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
本申请实施例还提供了一种消息通知系统,该系统包括:消息通知方;Hadoop分布式文件系统;消息接收方;其中,在检测到消息通知方需要向消息接收方发送通知消息的情况下,将通知消息写入的Hadoop分布式文件系统的目标文件中,在消息接收方检测到Hadoop分布式文件系统的目标文件中存在新写入的通知消息的情况下,基于通知消息执行处理操作。解决了相关技术中需要采用运维软件和硬件集群进行消息通知,运维成本较高的技术问题,通过基于Hadoop分布式文件系统实现了高可用的消息通知,避开了现有技术中为了可以进行消息通知,新建集群、开发、部署和维护消息队列软件,并且需要对硬件、软件、部署、运维的进行成本投入,进而达到了节省成本、可用性高、实现方式简单的技术效果。
本申请的另外一个实施例,提供了一种存储介质,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备上述任意一项所述的消息通知方法。
本申请的另外一个实施例,提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时用于执行上述任意一项所述的消息通知方法。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (12)

1.一种消息通知方法,其特征在于,包括:
检测是否需要向消息接收方发送通知消息;
在检测到需要向所述消息接收方发送通知消息的情况下,将所述通知消息写入Hadoop分布式文件系统的目标文件中,其中,在所述消息接收方检测到所述Hadoop分布式文件系统的目标文件中存在新写入的通知消息的情况下,基于所述通知消息执行处理操作。
2.根据权利要求1所述的方法,其特征在于,在将所述通知消息写入Hadoop分布式文件系统的目标文件中之后,所述方法还包括:
检测是否接收到所述Hadoop分布式文件系统返回的写入成功消息;
若未接收到所述Hadoop分布式文件系统返回的写入成功消息,继续将所述通知消息写入Hadoop分布式文件系统的目标文件中,直到接收到所述Hadoop分布式文件系统返回的写入成功消息。
3.根据权利要求1所述的方法,其特征在于,包括:在将所述通知消息写入Hadoop分布式文件系统的目标文件中之后,所述方法还包括:
检测写入所述Hadoop分布式文件系统中的目标文件中的所述通知消息是否被删除,或者,检测所述Hadoop分布式文件系统中是否存在消息确收文件,其中,所述消息确收文件为所述消息接收方接收到所述通知消息后,写入所述Hadoop分布式文件系统中的文件;
若检测到写入所述Hadoop分布式文件系统中的目标文件中的所述通知消息被删除,或者,检测到所述Hadoop分布式文件系统中存在所述消息确收文件,确定所述消息接收方已接收到所述通知消息。
4.根据权利要求1所述的方法,其特征在于,包括:在将所述通知消息写入Hadoop分布式文件系统的目标文件中之后,所述方法还包括:在所述Hadoop分布式文件系统中对所述通知消息进行备份处理。
5.一种消息通知方法,其特征在于,包括:
按照预设时间间隔检测Hadoop分布式文件系统中是否存在新写入的通知消息;
在检测到Hadoop分布式文件系统中存在新写入的通知消息的情况下,获取新写入的通知消息,执行与所述新写入的通知消息对应的处理操作。
6.根据权利要求5所述的方法,其特征在于,在获取新写入的通知消息之后,所述方法还包括:删除所述Hadoop分布式文件系统中的目标文件中的所述通知消息,或,向所述Hadoop分布式文件系统中写入消息确收文件。
7.根据权利要求5所述的方法,其特征在于,所述方法还包括:
在检测到Hadoop分布式文件系统中不存在新写入的通知消息的情况下,在预设时间间隔后,再次检测所述Hadoop分布式文件系统中是否存在新写入的通知消息。
8.一种消息通知装置,其特征在于,包括:
第一检测单元,用于检测是否需要向消息接收方发送通知消息;
第一写入单元,用于在检测到需要向所述消息接收方发送通知消息的情况下,将所述通知消息写入Hadoop分布式文件系统的目标文件中,其中,在所述消息接收方检测到所述Hadoop分布式文件系统的目标文件中存在新写入的通知消息的情况下,基于所述通知消息执行处理操作。
9.一种消息通知装置,其特征在于,包括:
第四检测单元,用于按照预设时间间隔检测Hadoop分布式文件系统中是否存在新写入的通知消息;
获取单元,用于在检测到Hadoop分布式文件系统中存在新写入的通知消息的情况下,获取新写入的通知消息,执行与所述新写入的通知消息对应的处理操作。
10.一种消息通知系统,其特征在于,包括:
消息通知方;
Hadoop分布式文件系统;
消息接收方;
其中,在检测到所述消息通知方需要向所述消息接收方发送通知消息的情况下,将所述通知消息写入的Hadoop分布式文件系统的目标文件中,在所述消息接收方检测到所述Hadoop分布式文件系统的目标文件中存在新写入的通知消息的情况下,基于所述通知消息执行处理操作。
11.一种存储介质,其特征在于,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行权利要求1至权利要求4,或权利要求5至权利要求7中任意一项所述的消息通知方法。
12.一种处理器,其特征在于,所述处理器用于运行程序,其中,所述程序运行时用于执行权利要求1至权利要求4,或权利要求5至权利要求7中任意一项所述的消息通知方法。
CN201811163420.6A 2018-09-30 2018-09-30 消息通知方法、装置及系统 Active CN110990348B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811163420.6A CN110990348B (zh) 2018-09-30 2018-09-30 消息通知方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811163420.6A CN110990348B (zh) 2018-09-30 2018-09-30 消息通知方法、装置及系统

Publications (2)

Publication Number Publication Date
CN110990348A true CN110990348A (zh) 2020-04-10
CN110990348B CN110990348B (zh) 2023-04-18

Family

ID=70059872

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811163420.6A Active CN110990348B (zh) 2018-09-30 2018-09-30 消息通知方法、装置及系统

Country Status (1)

Country Link
CN (1) CN110990348B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11368539B1 (en) * 2021-05-27 2022-06-21 International Business Machines Corporation Application deployment in a multi-cluster environment

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140006541A1 (en) * 2012-06-28 2014-01-02 International Business Machines Corporation Persistent messaging
CN103853612A (zh) * 2012-12-04 2014-06-11 中山大学深圳研究院 一种基于分布式存储下的数字家庭内容读数据的方法
CN107220388A (zh) * 2017-06-30 2017-09-29 郑州云海信息技术有限公司 一种上传文件的方法与装置
CN107453845A (zh) * 2016-03-31 2017-12-08 阿里巴巴集团控股有限公司 应答确认方法及设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140006541A1 (en) * 2012-06-28 2014-01-02 International Business Machines Corporation Persistent messaging
CN103853612A (zh) * 2012-12-04 2014-06-11 中山大学深圳研究院 一种基于分布式存储下的数字家庭内容读数据的方法
CN107453845A (zh) * 2016-03-31 2017-12-08 阿里巴巴集团控股有限公司 应答确认方法及设备
CN107220388A (zh) * 2017-06-30 2017-09-29 郑州云海信息技术有限公司 一种上传文件的方法与装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11368539B1 (en) * 2021-05-27 2022-06-21 International Business Machines Corporation Application deployment in a multi-cluster environment

Also Published As

Publication number Publication date
CN110990348B (zh) 2023-04-18

Similar Documents

Publication Publication Date Title
CN106713487B (zh) 数据的同步方法和装置
EP3474516B1 (en) Data processing method and device
US9164748B2 (en) Information backup method and apparatus
CN108833479B (zh) 一种数据同步方法和装置
CN111090699A (zh) 业务数据的同步方法和装置、存储介质、电子装置
CN108712501B (zh) 信息的发送方法、装置、计算设备以及存储介质
CN101808127B (zh) 数据备份方法、系统和服务器
CN107315825B (zh) 一种索引更新系统、方法及装置
CN107147748B (zh) 文件上传方法和装置
WO2014059804A1 (zh) 数据同步方法及系统
WO2013078689A1 (zh) 一种云消息服务中实现消息传递的方法和装置
CN111104069B (zh) 分布式存储系统的多区域数据处理方法、装置及电子设备
CN105159795A (zh) 数据同步方法、装置和系统
CN112367149B (zh) 消息获取方法、装置、设备及存储介质
EP2520107A2 (en) Message based mobile object with native pim integration
US20150149528A1 (en) Methods, Systems and Apparatus to Determine a Distributed Content Share Storage Scheme
CN106817387B (zh) 一种数据同步方法、装置和系统
CN108647118B (zh) 基于存储集群的副本异常恢复方法、装置及计算机设备
CN101216794A (zh) 改进的Server-Less备份方法、存储设备及备份服务器
EP3506599B1 (en) Method for synchronizing contact information, apparatus and medium
CN110990348B (zh) 消息通知方法、装置及系统
CN110650164B (zh) 文件的上传方法、装置、终端以及计算机存储介质
CN102946407B (zh) 在重新连接时传递非预期协作服务器响应
CN104092754A (zh) 文件存储系统和文件存储方法
CN112865927B (zh) 消息送达验证方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant