CN113342859B - 一种信息处理方法、装置及电子设备 - Google Patents

一种信息处理方法、装置及电子设备 Download PDF

Info

Publication number
CN113342859B
CN113342859B CN202110725457.9A CN202110725457A CN113342859B CN 113342859 B CN113342859 B CN 113342859B CN 202110725457 A CN202110725457 A CN 202110725457A CN 113342859 B CN113342859 B CN 113342859B
Authority
CN
China
Prior art keywords
message
processed
type
target
identification information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110725457.9A
Other languages
English (en)
Other versions
CN113342859A (zh
Inventor
刘凯
尚岩
王睿宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN202110725457.9A priority Critical patent/CN113342859B/zh
Publication of CN113342859A publication Critical patent/CN113342859A/zh
Application granted granted Critical
Publication of CN113342859B publication Critical patent/CN113342859B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24553Query execution of query operations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/252Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提供一种信息处理方法、装置及电子设备,所述方法包括:利用待处理消息携带的第一标识信息,对所述待处理消息进行第一类型验证,所述第一类型验证用于过滤不是目标实体类型的消息;所述第一标识信息用于指示所述待处理消息对应的实体;当所述待处理消息通过所述第一类型验证时,通过查询接口,对所述待处理消息进行第二类型验证;所述查询接口用于查询实体类型;当所述待处理消息通过所述第二类型验证时,处理所述待处理消息。本发明实施例可以节约网络资源的消耗。

Description

一种信息处理方法、装置及电子设备
技术领域
本发明涉及计算机技术领域,特别是涉及一种信息处理方法、装置及电子设备。
背景技术
随着计算机及互联网技术的发展,许多业务可以通过互联网进行,例如商品购物和知识付费等营销业务。通常对于营销业务而言,需要在平台主页展示最新推出的产品,以便于用户获知。例如,在知识付费业务中,售卖方在将特定类型相关的视频或者专辑上传至平台后,需要经过生产节点参与审核、转码和上线发布这一系列的流程,在每完成一道流程后,需要将特定类型相关视频或者专辑最新生产状态显示于业务主页上。
现有技术中,服务端的生产节点会在视频或者专辑的生产状态更新后,发送一条指示生产状态更新的消息。为了使用户可以实时获知最新上线的视频或者专辑,通常需要对生产节点进行监听,以获知哪些视频或者专辑的生产状态发生了变化。然而,由于经生产节点生产的视频或者专辑包括不同类型,例如教育类、影视类和体育类等,单纯通过生产节点发送的消息并不能够获知消息对应的视频或者专辑的类型,因此需要通过调用第三方接口服务对消息对应的实体类型进行查询,获取到需要更新至主页的视频或者专辑。而生产节点发送的消息数量过多,若仅需要对某个类型的视频或专辑进行状态更新,则需要服务端对每条消息都通过调用第三方接口服务对消息对应的实体类型进行查询,查找到所需类型的视频或专辑对应的消息,并根据消息进行状态更新,频繁调用第三方接口,查询效率较慢,且会导致网络资源的消耗较大。
发明内容
本发明实施例的目的在于提供一种信息处理方法、装置及电子设备,以解决现有方式网络资源消耗较大的问题。具体技术方案如下:
在本发明实施的第一方面,首先提供了一种信息处理方法,所述方法包括:
利用待处理消息携带的第一标识信息,对所述待处理消息进行第一类型验证,所述第一类型验证用于过滤不是目标实体类型的消息;所述第一标识信息用于指示所述待处理消息对应的实体;
当所述待处理消息通过所述第一类型验证时,通过查询接口,对所述待处理消息进行第二类型验证;所述查询接口用于查询实体类型;
当所述待处理消息通过所述第二类型验证时,处理所述待处理消息。
在本发明实施的第二方面,还提供了一种信息处理装置,应用于服务端,包括:
第一验证模块,用于利用待处理消息携带的第一标识信息,对所述待处理消息进行第一类型验证,所述第一类型验证用于过滤不是目标实体类型的消息;所述第一标识信息用于指示所述待处理消息对应的实体;
第二验证模块,用于当所述待处理消息通过所述第一类型验证时,通过查询接口,对所述待处理消息进行第二类型验证;所述查询接口用于查询实体类型;
第一处理模块,用于当所述待处理消息通过所述第二类型验证时,处理所述待处理消息。
在本发明实施的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述任一所述的信息处理方法。
在本发明实施的又一方面,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一所述的信息处理方法。
本发明实施例提供一种信息处理方法、装置及电子设备,可以首先对待处理消息进行第一类型验证,过滤必然不属于目标实体类型的消息,当待处理消息通过第一类型验证时,通过查询接口,对待处理消息进行第二类型验证,并当待处理消息通过第二类型验证时,处理待处理消息。
这样,可以通过上述第一类型验证,滤除必然不是目标实体类型的待处理消息,而后再对通过第一类型验证的待处理消息通过查询接口进行第二类型验证,当待处理消息通过第二类型验证时,处理待处理消息,减少了调用查询接口进行第二类型验证的频次的同时,避免了对不是目标实体类型的待处理消息的处理,从而提升了查询效率,并减少了网络资源的消耗。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1是本发明实施例中的服务端中服务器节点的部署示意图;
图2是本发明实施例中的信息处理方法的流程图之一;
图3是本发明实施例中的信息处理方法的流程图之二;
图4是本发明实施例中的二进制向量示意图;
图5是本发明实施例中的信息处理装置的结构示意图;
图6是本发明实施例中的电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行描述。
对于业务系统的服务端而言,通常可以存在多个业务流程,并由不同的服务器节点来处理执行。服务端通过多个服务器节点的配合完成后端业务。
在知识付费业务中,售卖方在将特定类型相关的视频或者专辑上传至平台后,需要在后端经过生产节点参与审核、转码和上线发布这一系列的流程。上述生产节点,可以由至少一个负责生产功能的服务器(下称生产节点)组成。在每完成一道流程后,生产节点会发送一条指示相关视频或者专辑生产状态更新的消息给监听的服务器节点,由监听的服务器节点对相关视频或者专辑生产状态进行更新,并将相关视频或者专辑最新生产状态显示于前端的业务主页。
由于经生产节点生产的视频或者专辑包括不同类型,例如教育类、影视类和体育类等,单纯通过生产节点发送的消息并不能够获知消息对应的视频或者专辑的类型,因此需要通过调用第三方接口服务对消息对应的实体类型进行查询,获取到需要更新至主页的视频或者专辑,网络资源的消耗较大。
基于上述技术问题,本发明实施例提供了一种信息处理方法的流程图,该方法应用于服务端,具体为应用于服务端中的服务器节点。参照图1,图1为服务端一种可能的部署示意图。同时,上述服务端包括至少一个生产节点,生产节点可以为参与视频或专辑审核、转码和上线发布处理的服务器节点,在一个业务流程的处理完成后,生产节点还用于发送消息以指示业务状态的更新。在本发明实施例中,信息处理方法可以应用于处理节点,处理节点可以对生产节点发送的消息执行本发明实施例所提供的信息处理方法,以下详述。
参见图2,图1是本发明实施例提供的一种信息处理方法的流程图,如图2所示,包括以下步骤:
步骤101、利用待处理消息携带的第一标识信息,对所述待处理消息进行第一类型验证,所述第一类型验证用于过滤不是目标实体类型的消息;所述第一标识信息用于指示所述待处理消息对应的实体。
步骤102、当所述待处理消息通过所述第一类型验证时,通过查询接口,对所述待处理消息进行第二类型验证;所述查询接口用于查询实体类型。
步骤103、当所述待处理消息通过所述第二类型验证时,处理所述待处理消息。
在上述步骤101中,上述待处理消息可以携带有数据信息,处理节点可以通过接收上述待处理消息,并根据待处理消息携带的数据信息执行相应的处理,在处理完成后,即视为消息被成功消费。
示例性地,在业务系统中,通常可以存在多个业务流程,并由不同的服务器节点来处理执行。例如对于用户支付业务而言,用户进行支付后,需要由订单子系统更新订单状态,用户会员子系统更新用户的支付积分,消息子系统通知商家等等,因此,需要在用户进行支付后,生产节点向各个子系统的服务器节点发送消息,以通知各个子系统的服务器节点用户已执行支付处理,由各个子系统的服务器节点执行相应的操作。对于上述的知识付费业务而言,用户上传多媒体文件后,需要在后端由生产节点执行上传处理,并将多媒体文件的处理状态更新至上传完成,进入审核阶段;由生产节点执行完审核处理后,将多媒体文件的处理状态更新至审核完成,进行转码阶段,类似地,每当多媒体文件完成一个业务流程阶段的处理后,生产节点均会向服务器节点发送消息,以指示服务器节点对多媒体文件的业务处理状态进行更新。
可选地,上述接收待处理消息的服务器节点,可以为对上述生产节点进行监听的服务器节点,上述服务器节点可以利用发布-订阅模式,对至少一个生产节点进行监听,从而在生产节点完成一个业务处理阶段的处理后,接收到指示业务处理状态更新的消息。
对于Java消息服务(Java Message Service,JMS)而言,通常可以采用点对点的方式或者发布订阅的方式,实现对上述至少一个生产节点发出的待处理消息的消费。本发明实施例中,消息的消费实质上代表了消息已经被处理设备处理,而消息的消费者即为消息的处理设备,例如服务端中部署的处理节点。
在点对点模式中,消息一旦被一个消费者消费,就不会再被其他消费者消费。而采用发布-订阅模式,若消息发布者发布在一个话题下的一条消息,该话题下的订阅者均可以接收到上述消息。对于同一个消息而言,其可以被多个消费者消费。
由于组成上述生产节点的至少一个生产节点的消息发送量较大,且消息对应的实体的种类较多,需要同时调用多个处理节点进行消息的处理,因此,通常为了满足消息处理的需求,可以利用发布-订阅模式,对上述至少一个生产节点进行监听。
具体地,为了提升消息处理的效率,上述待处理消息可以统一存放于消息队列中,并通过消息队列将消息发送至各处理节点。
在本发明实施例中,上述信息处理方法的执行主体可以为处理上述待处理消息的处理节点,处理节点可以根据待处理消息中携带的数据信息执行后续的处理操作。
具体地,上述待处理消息中可以携带有第一标识信息,服务器节点可以根据上述第一标识信息,对待处理消息进行第一类型验证,以过滤不是目标实体类型的待处理消息。
可以理解的是,上述第一标识信息指示的实体,可以为业务流程中,需要进行类型判断的对象,通过过滤掉不是目标实体类型的消息,可以提升消息处理的效率。上述实体可以为待处理消息所处的业务流程中涉及的具体的数据对象,也即上述实体与待处理消息所处的业务关联,上述实体类型可以表征实体在业务流程中的所属的业务类型。
在一些实施例中,上述实体可以为当前订单中的某一个商品,上述实体的类型可以为例如电子产品、日用品或者服装等。在一些实施例中,上述实体可以为用户上传的视频,上述实体的类型可以为教育类、影视类或者游戏类等。在一些实施例中,上述实体也可以为用户填写的运营商,上述实体的类型可以为运营商的类型。可以理解的是,上述实体可以根据具体的业务进行设置,在此不作进一步的限定。
可选地,所述待处理消息对应的实体为多媒体文件,所述待处理消息用于指示更新所述多媒体文件的业务处理状态,所述业务处理状态用于表征所述多媒体文件在当前业务下所处的处理阶段。
在本发明实施例中,上述信息处理方法可以具体应用于多媒体文件的上传业务中,上述多媒体文件可以包括但不限于视频、音频或者专辑等,而每一个多媒体文件都可以对应一个字符串id,即上述第一标识信息。
相应地,由上述内容可知,以上述知识付费类型为例,存量数据可以为存储于服务端的多媒体文件,由于存储时通常根据多媒体文件的类型进行存储,因此可以确定属于目标实体类型的存量数据,此时实体即为多媒体文件。上述存量数据可以包括存放在服务端,属于知识付费类型的视频或者专辑数据,而视频数据对应的实体即为视频,而专辑为由一个或者多个视频组成的集合。上述待处理消息,即可以为生产节点在执行业务阶段的业务处理后,例如执行上传、审核、转码等处理后,指示多媒体文件的业务处理状态进行更新的消息。
上述第一标识信息,即可以为指示上述实体的标识,服务器节点可以根据上述第一标识信息,确定唯一对应的实体。例如,在实体为视频时,上述第一标识信息可以为视频的奇谱唯一标识,可记为:qipuid,qipuid通常由字符串组成,可以根据qipuid获取到唯一确定的视频。也即上述第一标识信息与上述实体存在一一对应的关系,且服务端可以通过调用服务接口查询qipuid,获取到qipuid对应的实体的实体类型,在关于上述视频的业务流程所传输的消息中可以始终携带有上述第一标识信息。
然而,处理节点仅能够通过第一标识信息确定唯一的实体,而并不能够确定实体类型,为了进一步确定实体类型,上述第一类型验证所针对的对象为上述待处理消息中携带的第一标识信息,验证结果则为待处理消息是否一定不属于目标实体类型,其验证方式包括但不限于如下至少一种:大数据处理或者机器学习或过滤器等方式,在此不再一一列举。
在上述步骤102中,服务端节点可以先对待处理消息执行第一类型验证,通过上述第一标识信息,先过滤掉一定不属于目标实体类型的消息,而后将通过第一类型验证的待处理消息,再通过查询接口等方式,执行第二类型验证,验证待处理消息的实体类型,从而可以通过第一类型验证减少调用查询接口的次数。
在上述步骤103中,在待处理消息通过上述第二类型验证后,即表明待处理消息属于目标实体类型,则可以对待处理消息进行处理,例如更新视频的业务处理状态,更新订单处理状态,通知用户等,具体可以根据实际业务确定。
需要说明的是,参照图3,在上述待处理消息通过上述第一类型验证和第二类型验证时,处理节点可以对上述待处理消息进行处理,此时消息被成功消费。而在上述待处理消息未通过上述第一类型验证或第二类型验证时,处理节点可以不对待处理消息进行处理,此时消息同样可以被视为成功消费,以避免消息始终存在于消息队列中。
本发明实施例提供的信息处理方法,可以首先对待处理消息进行第一类型验证,当待处理消息通过第一类型验证时,通过查询接口,对待处理消息进行第二类型验证,并当待处理消息通过第二类型验证时,处理待处理消息。
这样,可以通过上述第一类型验证,滤除必然不是目标实体类型的待处理消息,而后再对通过第一类型验证的待处理消息通过查询接口进行第二类型验证,当待处理消息通过第二类型验证时,处理待处理消息,减少了调用查询接口进行第二类型验证的频次的同时,避免了对不是目标实体类型的待处理消息的处理,从而提升了查询效率,并减少了网络资源的消耗。
可选地,上述步骤103,包括:
当所述待处理消息通过所述第二类型验证时,更新所述待处理消息对应的多媒体文件的业务处理状态。
在本发明实施例中,由于通过第一类型验证的待处理消息存在不属于目标实体类型的概率,因此在调用接口查询上述待处理消息对应的实体类型之后,在上述待处理消息对应的实体类型为上述目标实体类型的情况下,可以对上述待处理消息对应的实体的业务处理状态进行更新。例如,在数据库中,对存放实体生产状态记录的进行更新,以便于在用户端发送访问业务主页的网络请求时,调用实体的业务处理状态记录,指示用户端显示包括最新生产状态对应的实体的业务主页。
进一步地,在本发明实施例中,上述待处理消息中可以携带有标识实体生产状态的状态标识,上述状态标识用于描述当前待处理消息对应的实体的生产状态,若上述视频和专辑为上述待处理消息对应的实体,则上述状态标识可以描述上述视频和专辑处于审核状态,或者转码状态,或者上线发布状态等等。
上述状态标识还可以描述上述视频和专辑是否审核通过,或者是否转码成功等信息,具体可以以字符串编码的形式存在于上述待处理消息中。因此在接收到上述待处理消息后,可以对上述待处理消息进行解析,得到状态标识,并基于该标识,对待处理消息对应的实体的业务处理进行更新。这样,本发明实施例通过在消息中携带状态标识,可以进一步地获知上述待处理消息对应的实体所处的具体业务处理状态,以便于在上述待处理消息对应的实体属于目标类型时,根据上述状态标识确定实体当前的业务处理状态,对实体对应的业务处理状态进行更新,进而可以基于更新后的生产记录更新业务主页,满足用户端的可视化需求。
需要说明的是,本发明提供的信息处理方法中,基于待处理消息进行的处理操作,可以与待处理消息相关联,包括但不限于对实体的业务处理状态进行更新。除此之外,在其他可选的实施例中,处理节点对待处理消息进行处理的方式,还可以包括但不限于如下至少一种:在上述待处理消息通过第一类型验证和第二类型验证后,处理节点可以基于待处理消息,向其他服务器节点和/或用户端发送提醒消息、处理节点也可以将待处理消息进行转发、处理节点可以根据待处理消息变更相关的数据信息等,在此不作进一步的限定,亦不一一穷举。
由于第一标识信息通常为实体对应的id,由字符串组成,因此字符串可以经哈希函数的处理得到特定的哈希值,哈希值可以映射于二进制向量中。
在本发明实施例中,服务器节点可以通过存量数据创建二进制向量,根据第一标识信息对应的哈希值是否映射于二进制向量的特定位上,来过滤一定不是目标实体类型的消息,也即,通过二进制向量与第一标识信息,来判断待处理消息是否通过第一类型验证。
具体地,上述步骤102,可以包括:
对所述第一标识信息进行哈希处理,得到第一哈希值;
获取所述第一哈希值在预设的二进制向量上的映射位;所述二进制向量包括多个目标位,所述目标位的数值为目标值,所述目标位基于目标实体类型对应的第二标识信息确定;
当存在任意一个映射位的数值不为所述目标值时,确定所述待处理消息未通过所述第一类型验证;
当任意一个映射位的数值均为所述目标值时,确定所述待处理消息通过所述第一类型验证。
在本发明实施例中,可以基于二进制向量来判断实体是否一定不属于目标实体类型。以图4为例,假设存在3个实体,则可以存在3个实体一一对应的三个第二标识信息{x,y,z},假定哈希函数的个数为3。首先将二进制向量进行初始化,将里面每个位都设置为0。对于每一个第二标识信息,将第二标识信息依次通过3个哈希函数进行映射,每次映射都会产生一个哈希值,哈希值对应二进制向量上面的一位,然后将二进制向量对应的位的值设置为1。在查询第一标识信息W是否存在集合中的时候,同样的方法将第一标识信息W通过哈希函数映射到二进制向量上的三位。如果三位的其中有一位的值不为1,则可以判断第一标识信息一定不属于目标实体类型。
在本发明实施例中,上述预设的二进制向量,可以根据存量数据中,属于目标实体类型的第二标识信息生成。通常地,服务端可以存储有与实体相关的存量数据,上述存量数据可以为实体对应的数据,例如视频数据、音频数据或者图片、文本数据等,这些数据一般会按照业务类型分别存储至不同的存储目录,因此处理节点可以通过读取存储路径查找到目标实体类型对应的存量数据。当然,上述存量数据也可以为服务端的历史日志数据,其中携带有指示业务类型的字段,处理节点也可以通过查询历史日志数据中指示业务类型的字段,查找到目标实体类型对应的存量数据。
存量数据中可以在包括指示目标实体类型的数据信息外,同时包括指示实体的第二标识信息,属于目标实体类型的多个第二标识信息可以通过哈希处理生成多个第二哈希值,再将多个哈希值映射于二进制向量上,并将映射位设置为目标值,得到上述预设的二进制向量。
在其他可选的实施例中,上述预设的二进制向量也可以根据上述哈希处理生成多个哈希值直接生成。
在预设的二进制向量中,对任意一种实体类型而言,可以有多个哈希值,多个哈希值对应的多个映射位均为目标值。任意两种实体类型对应的目标值不同。
可以理解的是,上述预设的二进制向量的位数可以由上述存量数据的数据量确定,通常地,若存量数据的数据量越大,预设的二进制向量包含的位数就越多,则通过预设的二进制向量进行判断的第一类型验证也越准确。
与之类似地,上述第一标识信息也可以通过哈希函数的处理,得到第一哈希值,并将第一哈希值映射于上述预设的二进制向量上,通过判断第一哈希值映射的位上的值是否均为目标值,若第一哈希值映射的位上的值存在任一个不为目标值时,则表明第一标识信息对应的待处理消息必然不属于目标实体类型,上述待处理消息未通过第一类型验证,可以不进行后续处理。
若第一哈希值映射的位上的值均为目标值时,则表明第一标识信息对应的待处理消息可能属于目标实体类型,上述待处理消息通过第一类型验证,可以进行第二类型验证。
需要说明的是,采用本方法进行判断,存在一定的误判率,可以从图4中得知:假设第一标识信息通过映射对应为4,5,6这三个映射位。虽然这三个映射位都为1,但是很明显这三个映射位是不同的第二标识信息经过哈希处理得到的映射位,因此这种情况说明第一标识信息虽然不属于目标实体类型,其经哈希处理后的映射位也可能都为1,这是误判率存在的原因,即通过上述第一类型验证的待处理消息,存在不属于目标实体类型的概率,因此需要进行第二类型验证,才能够更加准确的确定待处理消息所属的实体类型。
本发明实施例中,可以通过哈希处理,将第一标识信息映射于预设的二进制向量,来判断待处理消息是否必然不属于目标实体类型,从而可以减少调用接口执行第二类型验证的次数,由于调用接口执行第二类型验证需要消耗网络资源和时间,因此本发明实施例避免了对未通过第一类型验证的待处理消息执行第二类型验证,节约了网络资源的同时减少了验证时间。进一步地,由于二进制向量的位上的值仅可以为0或1两个值(即:目标值与非目标值),因此判断的逻辑较简单,通过二进制向量实现第一类型验证,可以在进行第一类型验证时,简化判断的逻辑,提升验证的效率。
在其他可选的实施例中,上述第一类型验证也可以通过获取属于目标实体类型的历史数据,通过历史数据中携带的标识信息,利用大数据训练等方式创建目标实体类型对应的标识信息集合,从而可以通过判断上述待处理消息的第一标识信息是否属于标识信息集合,来判断待处理消息是否一定不是目标实体类型,具体可以根据实际情况进行设置。
可选地,在所述获取所述第一哈希值在预设的二进制向量上的映射位的步骤之前,所述方法还包括:
在J条存量数据中获取J个第二标识信息,所述第二标识信息用于指示所述存量数据对应的实体,任意一条所述存量数据对应的实体类型为所述目标实体类型;J为正整数;
利用K个预设哈希函数,对所述J个所述第二标识信息进行处理,得到M个第二哈希值;M等于J*K;
根据所述M个第二哈希值,确定所述二进制向量。
在本发明实施例中,由上述内容可知,预设的二进制向量可以由存量数据中,属于目标实体类型的第二标识信息生成。上述存量数据可以为目标实体类型对应的存量数据,具体参照上述实施例的解释说明,在此不再赘述。在上述存量数据中,可以对应包含目标实体类型的多条数据,而存量数据对应的每一个实体都存在一一对应的第二标识信息,具体可以以字符串id的形式存在。因此可以对上述J条存量数据进行解析,得到J个与实体一一对应的第二标识信息。
以具体的实施方式为例,对于上述知识付费业务而言,上述存量数据,可以为存储于服务端的多媒体文件,由于存储时通常根据多媒体文件的类型进行存储,因此可以确定属于目标实体类型的存量数据,此时实体即为多媒体文件。
上述哈希处理可以为通过哈希函数,将第二标识信息代入哈希函数,得到第二哈希值。上述哈希函数的数量可以为1个,也可以为多个,通过K个哈希函数,也可以得到一一对应的J*K=M个第二哈希值,并将M个第二哈希值对应的位均设置为目标值,从而可以通过较少的存量数据中的第二哈希值,获得位数较多的二进制向量,减少了资源的占用。
上述根据所述M个第二哈希值,确定所述二进制向量,包括:
生成所述二进制向量,所述二进制向量上的M个目标位与所述M个第二哈希值一一对应,所述M个目标位的数值均为所述目标值,且所述二进制向量上除所述M个目标位外的映射位的数值不为所述目标值。
需要说明的是,由于二进制向量的位上的值仅可以为0或1,因此上述预设的二进制向量的目标值可以为1,而其他位上的值为非目标值,即为0。
与上述实施例对应地,上述第一标识信息的哈希处理也可以通过上述K个哈希函数进行处理,上述对待处理消息携带的第一标识信息进行哈希处理,得到第一哈希值,包括:
利用K个预设的哈希函数,对所述第一标识信息进行哈希处理,得到K个第一哈希值,所述K个第一哈希值与所述K个预设的哈希函数一一对应,K为正整数;
所述获取所述第一哈希值在预设的二进制向量上的映射位,包括:
获取所述K个第一哈希值在所述二进制向量上的K个映射位;
所述利用所述映射位与所述多个目标位,对所述待处理消息进行第一类型验证,包括:
在所述K个映射位的数值均为所述目标值的情况下,确定所述待处理消息通过所述第一类型验证。
在本发明实施例中,上述哈希处理可以为将第一标识信息代入哈希函数,得到上述第一哈希值。应理解,上述K个预设的哈希函数,与处理上述第二标识信息的K个哈希函数相同,通过K个哈希函数,也可以得到一一对应的K个第一哈希值,进而可以判断K个第一哈希值是否均为目标值,来判断上述待处理消息是否通过第一类型验证,由于一个第一标识信息可以生成K个第一哈希值,因此可以通过K个第一哈希值的K个映射位进行判断,在K个映射位的数值均为目标值的情况下,确定待处理消息通过所述第一类型验证,从而通过多位验证进一步提升第一类型验证的准确性。
需要说明的是,本发明实施例中介绍的多种可选的实施方式,彼此可以相互结合实现,也可以单独实现,对此本发明实施例不作限定。
参见图5,图5是本发明实施例提供的信息处理装置的结构图,如图5所示,上述信息处理装置500包括:
第一验证模块501,用于利用待处理消息携带的第一标识信息,对所述待处理消息进行第一类型验证,所述第一类型验证用于过滤不是目标实体类型的消息;所述第一标识信息用于指示所述待处理消息对应的实体;
第二验证模块502,用于当所述待处理消息通过所述第一类型验证时,通过查询接口,对所述待处理消息进行第二类型验证;所述查询接口用于查询实体类型;
第一处理模块503,用于当所述待处理消息通过所述第二类型验证时,处理所述待处理消息。
本发明实施例提供的信息处理方法,可以首先通过第一验证模块501对待处理消息进行第一类型验证,过滤目标实体类型的消息,当待处理消息通过第一类型验证时,通过第二验证模块502查询接口,对待处理消息进行第二类型验证,并当待处理消息通过第二类型验证时,通过第一处理模块503处理待处理消息。
这样,可以通过上述第一类型验证,滤除必然不是目标实体类型的待处理消息,而后再对通过第一类型验证的待处理消息通过查询接口进行第二类型验证,当待处理消息通过第二类型验证时,处理待处理消息,减少了调用查询接口进行第二类型验证的频次的同时,避免了对不是目标实体类型的待处理消息的处理,从而提升了查询效率,并减少了网络资源的消耗。
可选地,所述第一验证模块501,包括:
第一处理单元,用于对所述第一标识信息进行哈希处理,得到第一哈希值;
第一获取单元,用于获取所述第一哈希值在预设的二进制向量上的映射位;所述二进制向量包括多个目标位,所述目标位的数值为目标值,所述目标位基于目标实体类型对应的第二标识信息确定;
第一确定单元,用于当存在任意一个映射位的数值不为所述目标值时,确定所述待处理消息未通过所述第一类型验证;
第二确定单元,用于当任意一个映射位的数值均为所述目标值时,确定所述待处理消息通过所述第一类型验证。
可选地,所述第一处理单元,具体用于:
利用K个预设的哈希函数,对所述第一标识信息进行哈希处理,得到K个第一哈希值,所述K个第一哈希值与所述K个预设的哈希函数一一对应,K为正整数;
所述获取所述第一哈希值在预设的二进制向量上的映射位,包括:
获取所述K个第一哈希值在所述二进制向量上的K个映射位;
所述利用所述映射位与所述多个目标位,对所述待处理消息进行第一类型验证,包括:
在所述K个映射位的数值均为所述目标值的情况下,确定所述待处理消息通过所述第一类型验证。
可选地,所述装置还包括:
获取模块,用于在J条存量数据中获取J个第二标识信息,所述第二标识信息用于指示所述存量数据对应的实体,任意一条所述存量数据对应的实体类型为所述目标实体类型;J为正整数;
第二处理模块,用于利用K个预设哈希函数,对所述J个所述第二标识信息进行处理,得到M个第二哈希值;M等于J*K;
确定模块,用于根据所述M个第二哈希值,确定所述二进制向量。
可选地,所述确定模块,包括:
生成单元,用于生成所述二进制向量,所述二进制向量上的M个目标位与所述M个第二哈希值一一对应,所述M个目标位的数值均为所述目标值,且所述二进制向量上除所述M个目标位外的映射位的数值不为所述目标值。
可选地,所述待处理消息对应的实体为多媒体文件,所述待处理消息用于指示更新所述多媒体文件的业务处理状态,所述业务处理状态用于表征所述多媒体文件在当前业务下所处的处理阶段。
可选地,所述第一处理模块503,包括:
更新单元,用于当所述待处理消息通过所述第二类型验证时,更新所述待处理消息对应的多媒体文件的业务处理状态记录。
本发明实施例提供的信息处理装置能够实现图1-3的方法实施例中信息处理方法实现的各个过程,为避免重复,这里不再赘述。
本发明实施例还提供了一种电子设备,如图6所示,包括处理器601、通信接口602、存储器603和通信总线604,其中,处理器601,通信接口602,存储器603通过通信总线604完成相互间的通信,
存储器603,用于存放计算机程序;
处理器601,用于执行存储器603上所存放的程序时,实现如下步骤:
利用待处理消息携带的第一标识信息,对所述待处理消息进行第一类型验证,所述第一类型验证用于过滤不是目标实体类型的消息;所述第一标识信息用于指示所述待处理消息对应的实体;
当所述待处理消息通过所述第一类型验证时,通过查询接口,对所述待处理消息进行第二类型验证;所述查询接口用于查询实体类型;
当所述待处理消息通过所述第二类型验证时,处理所述待处理消息。
上述终端提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述终端与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,简称RAM),也可以包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Application SpecificIntegrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的信息处理方法。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的信息处理方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个数据或者操作与另一个数据或操作区分开来,而不一定要求或者暗示这些数据或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (10)

1.一种信息处理方法,其特征在于,应用于服务端,所述方法包括:
利用待处理消息携带的第一标识信息,对所述待处理消息进行第一类型验证,所述第一类型验证用于过滤不是目标实体类型的消息;所述第一标识信息用于指示所述待处理消息对应的实体;
当所述待处理消息通过所述第一类型验证时,通过查询接口,对所述待处理消息进行第二类型验证;所述查询接口用于查询实体类型;
当所述待处理消息通过所述第二类型验证时,处理所述待处理消息。
2.根据权利要求1所述的方法,其特征在于,所述利用待处理消息携带的第一标识信息,对所述待处理消息进行第一类型验证,包括:
对所述第一标识信息进行哈希处理,得到第一哈希值;
获取所述第一哈希值在预设的二进制向量上的映射位;所述二进制向量包括多个目标位,所述目标位的数值为目标值,所述目标位基于目标实体类型对应的第二标识信息确定;
当存在任意一个映射位的数值不为所述目标值时,确定所述待处理消息未通过所述第一类型验证;
当任意一个映射位的数值均为所述目标值时,确定所述待处理消息通过所述第一类型验证。
3.根据权利要求2所述的方法,其特征在于,所述对待处理消息携带的第一标识信息进行哈希处理,得到第一哈希值,包括:
利用K个预设的哈希函数,对所述第一标识信息进行哈希处理,得到K个第一哈希值,所述K个第一哈希值与所述K个预设的哈希函数一一对应,K为正整数;
所述获取所述第一哈希值在预设的二进制向量上的映射位,包括:
获取所述K个第一哈希值在所述二进制向量上的K个映射位;
利用所述映射位与所述多个目标位,对所述待处理消息进行第一类型验证,包括:
在所述K个映射位的数值均为所述目标值的情况下,确定所述待处理消息通过所述第一类型验证。
4.根据权利要求2所述的方法,其特征在于,在所述获取所述第一哈希值在预设的二进制向量上的映射位的步骤之前,所述方法还包括:
在J条存量数据中获取J个第二标识信息,所述第二标识信息用于指示所述存量数据对应的实体,任意一条所述存量数据对应的实体类型为所述目标实体类型;J为正整数;
利用K个预设哈希函数,对所述J个所述第二标识信息进行处理,得到M个第二哈希值;M等于J*K;
根据所述M个第二哈希值,确定所述二进制向量。
5.根据权利要求4所述的方法,其特征在于,所述根据所述M个第二哈希值,确定所述二进制向量,包括:
生成所述二进制向量,所述二进制向量上的M个目标位与所述M个第二哈希值一一对应,所述M个目标位的数值均为所述目标值,且所述二进制向量上除所述M个目标位外的映射位的数值不为所述目标值。
6.根据权利要求1至5中任一项所述的方法,其特征在于,所述待处理消息对应的实体为多媒体文件,所述待处理消息用于指示更新所述多媒体文件的业务处理状态,所述业务处理状态用于表征所述多媒体文件在当前业务下所处的处理阶段。
7.根据权利要求6所述的方法,其特征在于,所述当所述待处理消息通过所述第二类型验证时,处理所述待处理消息,包括:
当所述待处理消息通过所述第二类型验证时,更新所述待处理消息对应的多媒体文件的业务处理状态。
8.一种信息处理装置,其特征在于,应用于服务端,包括:
第一验证模块,用于利用待处理消息携带的第一标识信息,对所述待处理消息进行第一类型验证,所述第一类型验证用于过滤不是目标实体类型的消息;所述第一标识信息用于指示所述待处理消息对应的实体;
第二验证模块,用于当所述待处理消息通过所述第一类型验证时,通过查询接口,对所述待处理消息进行第二类型验证;所述查询接口用于查询实体类型;
第一处理模块,用于当所述待处理消息通过所述第二类型验证时,处理所述待处理消息。
9.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-7任一所述的方法步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一所述的方法。
CN202110725457.9A 2021-06-29 2021-06-29 一种信息处理方法、装置及电子设备 Active CN113342859B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110725457.9A CN113342859B (zh) 2021-06-29 2021-06-29 一种信息处理方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110725457.9A CN113342859B (zh) 2021-06-29 2021-06-29 一种信息处理方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN113342859A CN113342859A (zh) 2021-09-03
CN113342859B true CN113342859B (zh) 2023-08-15

Family

ID=77481237

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110725457.9A Active CN113342859B (zh) 2021-06-29 2021-06-29 一种信息处理方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN113342859B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1682211A (zh) * 2002-09-20 2005-10-12 国际商业机器公司 用于公布和监测分布式数据处理系统中提供服务的实体的方法及装置
CN103460674A (zh) * 2011-02-11 2013-12-18 良好科技公司 用于供应推送通知会话的方法、装置与系统
US9002725B1 (en) * 2005-04-20 2015-04-07 Google Inc. System and method for targeting information based on message content
CN105897782A (zh) * 2016-06-30 2016-08-24 北京奇艺世纪科技有限公司 一种针对接口的调用请求的处理方法及装置
CN111327696A (zh) * 2020-02-17 2020-06-23 北京奇艺世纪科技有限公司 一种数据处理方法及系统
CN111338814A (zh) * 2020-02-13 2020-06-26 北京奇艺世纪科技有限公司 消息处理方法和装置、存储介质和电子装置
CN112330398A (zh) * 2020-10-30 2021-02-05 京东数字科技控股股份有限公司 一种对象处理方法、装置、电子设备及存储介质
KR20210020575A (ko) * 2019-08-16 2021-02-24 숭실대학교산학협력단 오픈스택 서비스 인증 방법 및 장치
CN112559217A (zh) * 2020-12-22 2021-03-26 鲁班(北京)电子商务科技有限公司 一种消息可靠性消费幂等处理方法及处理装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9715681B2 (en) * 2009-04-28 2017-07-25 Visa International Service Association Verification of portable consumer devices
US20140006072A1 (en) * 2012-06-28 2014-01-02 Sap Ag Consistent Interface for Customer - Message Set 2
US10033668B2 (en) * 2014-01-16 2018-07-24 Dropbox, Inc. Enhancing performance of message search and retrieval

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1682211A (zh) * 2002-09-20 2005-10-12 国际商业机器公司 用于公布和监测分布式数据处理系统中提供服务的实体的方法及装置
US9002725B1 (en) * 2005-04-20 2015-04-07 Google Inc. System and method for targeting information based on message content
CN103460674A (zh) * 2011-02-11 2013-12-18 良好科技公司 用于供应推送通知会话的方法、装置与系统
CN105897782A (zh) * 2016-06-30 2016-08-24 北京奇艺世纪科技有限公司 一种针对接口的调用请求的处理方法及装置
KR20210020575A (ko) * 2019-08-16 2021-02-24 숭실대학교산학협력단 오픈스택 서비스 인증 방법 및 장치
CN111338814A (zh) * 2020-02-13 2020-06-26 北京奇艺世纪科技有限公司 消息处理方法和装置、存储介质和电子装置
CN111327696A (zh) * 2020-02-17 2020-06-23 北京奇艺世纪科技有限公司 一种数据处理方法及系统
CN112330398A (zh) * 2020-10-30 2021-02-05 京东数字科技控股股份有限公司 一种对象处理方法、装置、电子设备及存储介质
CN112559217A (zh) * 2020-12-22 2021-03-26 鲁班(北京)电子商务科技有限公司 一种消息可靠性消费幂等处理方法及处理装置

Also Published As

Publication number Publication date
CN113342859A (zh) 2021-09-03

Similar Documents

Publication Publication Date Title
CN111708825B (zh) 基于区块链的数据处理方法、装置、设备及可读存储介质
CN108153670B (zh) 一种接口测试方法、装置及电子设备
CN109522330B (zh) 基于区块链的云平台数据处理方法、装置、设备及介质
US9058333B2 (en) Publishable metadata for content management and component testing
CN112868004A (zh) 资源推荐方法、装置、电子设备及存储介质
CN109522462B (zh) 一种基于区块链的云查询方法、装置、设备及存储介质
CN111083179B (zh) 物联网云平台、基于物联网云平台的设备交互方法及装置
WO2022083436A1 (zh) 数据处理方法、装置、设备及可读存储介质
CN110598118A (zh) 资源对象的推荐方法、装置及计算机可读介质
CN112035542B (zh) 信息查询方法、装置、电子设备及可读存储介质
CN112115169B (zh) 用户画像生成、对象分发、内容推荐方法、装置及介质
JP2010533921A5 (zh)
CN113342859B (zh) 一种信息处理方法、装置及电子设备
CN116644250B (zh) 页面检测方法、装置、计算机设备和存储介质
CN106953880B (zh) 一种数据处理方法及系统、子服务器和主服务器
CN112947844B (zh) 一种数据存储方法、装置、电子设备及介质
CN115118583B (zh) 日志查询方法、装置、电子设备及计算机可读存储设备
US20230353648A1 (en) Data tracking for data owners
CN103942239A (zh) 信息处理装置和信息处理方法
CN110827078A (zh) 一种信息推荐方法、装置、设备及存储介质
CN112507216B (zh) 一种数据对象推荐方法、装置、设备和存储介质
CN107493308B (zh) 一种发送消息的方法和装置及分布式设备集群系统
US11507786B2 (en) Dynamic generation of client-specific feature maps
CN105141465B (zh) 物联网设备资源注册方法及装置
CN104662523A (zh) 用于基于计算机的社交网络的设备之间的路由的方法和服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant