CN110765386A - 网页图像的监控方法、装置、电子设备及可读存储介质 - Google Patents

网页图像的监控方法、装置、电子设备及可读存储介质 Download PDF

Info

Publication number
CN110765386A
CN110765386A CN201911033302.8A CN201911033302A CN110765386A CN 110765386 A CN110765386 A CN 110765386A CN 201911033302 A CN201911033302 A CN 201911033302A CN 110765386 A CN110765386 A CN 110765386A
Authority
CN
China
Prior art keywords
query
request
image
webpage
query requests
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911033302.8A
Other languages
English (en)
Inventor
银国徽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN201911033302.8A priority Critical patent/CN110765386A/zh
Publication of CN110765386A publication Critical patent/CN110765386A/zh
Priority to US17/772,700 priority patent/US20230033164A1/en
Priority to PCT/CN2020/107722 priority patent/WO2021082600A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/957Browsing optimisation, e.g. caching or content distillation
    • G06F16/9574Browsing optimisation, e.g. caching or content distillation of access to content, e.g. by caching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/958Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking

Abstract

本公开实施例提供了一种网页图像的监控方法、装置、电子设备及可读存储介质。该方法包括:当检测到网页页面的所有页面资源加载结束时,对于网页页面中各图像分别生成查询请求,并将各查询请求缓存到请求队列中;依次从请求队列中读取不大于设定数量的查询请求并发送,获取所发送的各查询请求的查询结果;基于各查询结果,确定各查询结果所对应的图像是否加载成功。基于该方案,能够实现对图像是否加载成功的监控,为基于图像是否加载成功实现对网页服务质量的分析、提升网页服务质量提供了数据支持,并且能够避免占用过多的数据请求线程,避免在用户发起请求时,因数据请求线程被过多的占用导致用户等待时间变长,提高了用户的使用体验。

Description

网页图像的监控方法、装置、电子设备及可读存储介质
技术领域
本公开涉及图像处理技术领域,具体而言,本公开涉及一种网页图像的监控方法、装置、电子设备及可读存储介质。
背景技术
随着互联网技术的高速发展,人们能够获取的信息也越来越多,单纯的文本形式信息已不能满足人们对信息的获取需求。由于图像形式的信息具有直观、表现力强等诸多优点,越来越受到人们的青睐。目前网页中包含的图像的比重越来越高,这也对浏览器的图像服务质量提出了更高要求。现有技术中无法有效监控网页页面中图像是否加载成功,也就无法实现基于图像是否加载成功实现对网页服务质量的分析。
发明内容
提供该发明内容部分以便以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。该发明内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
第一方面,本公开实施例提供了一种网页图像的监控方法,该方法包括:
当检测到网页页面的所有页面资源加载结束时,对于网页页面中各图像分别生成查询请求,并将各查询请求缓存到请求队列中;
依次从请求队列中读取不大于设定数量的查询请求并发送,获取所发送的各查询请求的查询结果;
基于各查询结果,确定各查询结果所对应的图像是否加载成功。
第二方面,本公开实施例提供了一种网页图像的监控装置,该装置包括:
查询请求模块,用于当检测到网页页面的所有页面资源加载结束时,对于网页页面中各图像分别生成查询请求,并将各查询请求缓存到请求队列中;
查询结果获取模块,用于依次从请求队列中读取不大于设定数量的查询请求并发送,获取所发送的各查询请求的查询结果;
监控模块,用于基于各查询结果,确定各查询结果所对应的图像是否加载成功。
第三方面,本公开实施例提供了一种电子设备,该电子设备包括:处理器和存储器;
存储器,用于存储计算机程序;
处理器,用于通过调用计算机程序,执行如本公开的第一方面所示的网页图像的监控方法。
第四方面,本公开实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现本公开的第一方面的所示的网页图像的监控方法。
本公开实施例提供的技术方案带来的有益效果是:
本公开实施例的方案,通过在网页页面的所有页面资源加载完成时,生成送网页页面中的图像的查询请求,并将查询请求缓存在请求队列,依次从请求队列中读取不大于设定数量的查询请求并发送,获取各查询请求的查询结果,基于查询结果确定查询结果所对应的图像是否加载成功。基于该方案,能够采用发起图像查询请求的方式获取到图像是否加载成功的信息,从而实现了对图像是否加载成功的监控,为基于图像是否加载成功实现对网页服务质量的分析、提升网页服务质量提供了数据支持,并且由于是依次从请求队列中读取不大于预设数量的查询请求并发送,避免占用过多的数据请求线程,避免在用户发起请求时,因数据请求线程已被过多的占用导致用户等待时间变长,提高了用户的使用体验。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,原件和元素不一定按照比例绘制。
为了更清楚地说明本公开实施例中的技术方案,下面将对本公开实施例描述中所需要使用的附图作简单地介绍。
图1为本公开实施例提供的一种网页图像的监控方法的流程示意图;
图2为本公开实施例提供的一种网页图像的监控装置的结构示意图;
图3为本公开实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
应当理解,本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意,本公开中提及的“第一”、“第二”等概念仅用于对装置、模块或单元进行区分,并非用于限定这些装置、模块或单元一定为不同的装置、模块或单元,也并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
现有技术中一般采用软件开发工具包(Software Development Kit,SDK)来监控网页页面中图像是否加载成功。在实际使用中,业务方可能会为了保持业务原本的运行机制,将用于监控图像是否加载成功的SDK对应的代码放在网页的超文本标记语言(HyperText Markup Language,HTML)文件的主体(body)部分,由于图像的加载可能会较快,这便有可能会导致图像加载已经完成时,用于监控图像是否加载成功的SDK仍未运行,这时则无法获取到在上述SDK运行前已经加载完成图像的图像是否加载成功,造成信息监控的遗漏,无法实现对网页页面中图像是否加载成功的有效监控。
本公开实施例提供的网页图像的监控方法、装置、电子设备和计算机可读存储介质,旨在解决现有技术的如上技术问题中的至少一个。
下面以具体地实施例对本公开的技术方案以及本公开的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本公开的实施例进行描述。
图1示出了本公开实施例提供的一种网页图像的监控方法的流程示意图,如图1所示,该方法主要可以包括:
步骤S110:当检测到网页页面的所有页面资源加载结束时,对于网页页面中各图像分别生成查询请求,并将各查询请求缓存到请求队列中;
步骤S120:依次从请求队列中读取不大于设定数量的查询请求并发送,获取所发送的各查询请求的查询结果;
步骤S130:基于各查询结果,确定各查询结果所对应的图像是否加载成功。
本公开实施例中以浏览器加载网页页面为例,页面资源可以包括但是不限于网页页面内的字符、图像资源、视频资源等。
本公开实施例中,可以采用生成查询请求的方式来查询网页页面中的各图像对应的图像资源,查询请求中可以携带有图像的标识,便于对网页页面内的各图像进行区分。
浏览器内核是多线程的,在内核控制下各线程相互配合工作,其中,数据请求线程是与查询请求所对应的线程。在实际使用中,可能会同时生成网页内多张图像的查询请求,如果将这些查询请求同时发送,则可能会占用过多的数据请求线程,甚至会导致浏览器所能够同步开启的数据请求的线程被占满,这时如果用户再次发出请求,浏览器可能会无法对用户的请求进行及时处理,可能会造成浏览器处理任务的阻塞,导致用户等待时间变长。
例如,同时发送了10个查询请求,浏览器能够同步开启的数据请求线程为6个,这时浏览器的数据请求线程被占满,如果用户在这时发出请求,则需要等待数据请求线程将已发送的查询请求处理完成后,才能对用户的请求进行处理,导致用户等待时间变长。
本公开实施中,将生成的多个查询请求缓存至到请求队列中,依次从请求队列中不大于设定数量的查询请求并发送,使得每次发送的查询请求的数量可控,避免了占用浏览器中过多的数据请求线程,使得浏览器能够在发送查询请求的同时对用户的其他请求进行处理,防止用户等待时间过长。
本公开实施例中,可以将设定数量设定为小于加载网页的浏览器所能够同步开启的数据请求线程总数,数据请求线程包括查询请求所对应的线程,可以保证每次发送的查询请求不占满数据请求线程,例如,设定数量可以为1个。
本公开实施例中,若网页页面的图像资源加载成功,网页页面的图像资源缓存在浏览器缓存中,查询结果是基于浏览器缓存中的缓存内容确定的。
浏览器在加载时,遇到需要获取的页面资源(以图片资源为例),浏览器或发出图片资源的获取请求来获取图片资源,当图片资源请求成功时,获取到的图片资源会被缓存至浏览器缓存中;而当图片资源请求失败时,浏览器缓存中则不会存储该图片资源。因此,可以通过发送查询请求,并在浏览器缓存内查询图像资源的方式,来确定图像是否加载成功。当在浏览器缓存中查找到了该图像对应的图像资源,则可以确定该图像加载成功;如果未在浏览器缓存中查找到该图像对应的图像资源,则可以确定该图像加载失败。
基于浏览器缓存机制,由于是在本地缓存内进行查询,可以快速的获得查询结果,无需通过网络向服务器进行数据请求,能够避免流量浪费。
本公开实施例中,是在检测到网页页面内所有图像加载完成时发送图像的查询请求,由于此时所有图像资源已经加载完成,因此,能够保证获取到所有查询请求的查询结果,从而监控页面内所有的图像是否加载成功,避免造成监控遗漏。另外,浏览器会对各页面资源分别进行加载,浏览器在对页面资源的加载过程中,页面资源以图像为例,可能会出现一些图像已经加载结束时,另一些图像还未加载结束的情况,未加载结束的图像对应的图像资源不会被存储于本地缓存,这时如果在本地缓存内查询相应图像,则会造成查询结果的不准确,无法有效确定图像是否加载成功,因此,通过在网页页面的所有页面资源均加载完成后,发送网页页面中的图像的查询请求,能够保证获取的查询结果的准确性,以便能够准确确定出网页页面内的图像是否加载成功。
本公开实施例中,如果多次检测到网页中某些图像加载失败,则可以针对这些图像进行分析,确定导致加载失败的原因,并进行相应处理,以保证用户的使用体验。
本公开实施例提供的方法,通过在网页页面的所有页面资源加载完成时,生成送网页页面中的图像的查询请求,并将查询请求缓存在请求队列,依次从请求队列中读取不大于设定数量的查询请求并发送,获取各查询请求的查询结果,基于查询结果确定查询结果所对应的图像是否加载成功。基于该方案,能够采用发起图像查询请求的方式获取到图像是否加载成功的信息,从而实现了对图像是否加载成功的监控,为基于图像是否加载成功实现对网页服务质量的分析、提升网页服务质量提供了数据支持,并且由于是依次从请求队列中读取不大于预设数量的查询请求并发送,避免占用过多的数据请求线程,避免在用户发起请求时,因数据请求线程已被过多的占用导致用户等待时间变长,提高了用户的使用体验。
本公开实施例的一种可选方式中,依次从请求队列中读取不大于设定数量的查询请求并发送,获取所发送的各查询请求的查询结果,包括:
若请求队列中的查询请求总数大于设定数量,则重复执行从请求队列中读取不大于设定数量的查询请求并发送,获取已发送的查询请求的查询结果的操作,直至获取到请求队列中的所有查询请求的查询结果。
本公开实施例中,如果请求队列中的查询请求不大于设定数量,那么可以将请求队列中的查询请求同时发送,并获取请求队列中的所有查询请求的查询结果。
例如。请求队列中查询请求的数量为4个,设定数量为5,这时可以将请求队列的4个查询请求同时发送,获取请求队列中所有查询请求的查询结果。
如果请求队列中的查询请求大于设定数量,可以从请求队列中读取不大于设定数量的查询请求并发送,待获取到已发送的查询请求对应的查询结果后,重复执行请求队列中读取不大于设定数量的查询请求并发送,获取已发送的查询请求对应的查询结果的步骤,直至获取到队列内所有查询请求的查询结果。
例如,请求队列中查询请求的数量为10个,设定数量为5,可以从先从请求队列中读取5个查询请求并发送,在接收到所发送的5个查询请求的查询结果后,再从请求队列中读取剩余的5个查询请求并发送,获取第二次发送的查询请求的查询结果。
本公开实施例中,由于生成并获取查询结果也会占用浏览器的数据请求线程,如果在生成并获取前一次发送的查询请求的查询结果的过程中,启用新的线程再次发送查询请求,这时有可能会占用过多的数据请求线程,甚至将浏览器的线程占满,因此,可以在接收到前一次发送的查询请求的查询结果之后,再进行查询请求的发送,以避免占用过多的线程,避免将浏览器的线程占满导致的浏览器阻塞。
本公开实施例的一种可选方式中,查询请求为可扩展标记语言超文本传输协议请求(XML HTTP Request)。
本公开实施例在实际使用中,查询请求中还可以携带有图像的属性信息所对应的请求参数,属性信息可以包括图像类型和/或图像大小。
本公开实施例中,当查询请求为XML HTTP Request时,如果图像加载成功,那么上述方法还可以包括:基于查询结果,提取图像的属性信息。
具体而言,查询请求为XML HTTP Request时,查询结果为查询指令的响应信息。响应信息的响应头中包含了图像的属性信息,实际使用中,可以通过正则表达式在响应信息中的响应头中提取图像的图像属性信息。
本公开实施例中,对图像属性信息进行监控,能够通过监控到的图像属性信息,更好的对网页的服务质量进行分析,为提升网页的服务质量提供更好的数据支持。
本公开实施例的一种可选方式中,查询请求中还携带有与查询请求对应的图像的文件位置指示信息,文件位置指示信息用于指示图像在浏览器缓存中的存储位置。本公开实施例中,还可以在查询请求中增加请求参数,来指定用于指示图像在浏览器缓存中的存储位置,实际使用中,在对由层叠样式表(Cascading Style Sheets,CSS)文件引入的图像进行查询时,可以指定在浏览器缓存中存储的样式表(Style Sheets)中进行查询。在对由图像(image)标签直接引入的图像进行查询时,可以指定在浏览器缓存中的相应存储位置进行查询。
本公开实施例的一种可选方式中,上述方法还包括:
当检测到网页页面的HTML文件对应的特定事件时,确定当网页页面的所有页面资源加载完成。
本公开实施例中,当网页页面的所有页面资源加载完成后,会执行网页页面的HTML文件对应的特定事件,具体而言,特定事件可以为加载完成(onload)事件,可以通过对网页页面的HTML文件对应的onload事件的检测,来确定网页页面的所有页面资源是否加载完成。
本公开实施例中,在确定出网页内各图像是否加载成功后,可以将图像是否加载成功的信息发送给服务器,以便于服务器及时对图像是否加载成功进行监控,在实际使用中,也可以选择仅将图像加载失败的信息发送给服务器。
基于与图1中所示的方法相同的原理,图2示出了本公开实施例提供的一种网页图像的监控装置的结构示意图,如图2所示,该网页图像的监控装置20可以包括:
查询请求模块210,用于当检测到网页页面的所有页面资源加载结束时,对于网页页面中各图像分别生成查询请求,并将各查询请求缓存到请求队列中;
查询结果获取模块220,用于依次从请求队列中读取不大于设定数量的查询请求并发送,获取所发送的各查询请求的查询结果;
监控模块230,用于基于各查询结果,确定各查询结果所对应的图像是否加载成功。
本公开实施例提供的装置,通过在网页页面的所有页面资源加载完成时,生成送网页页面中的图像的查询请求,并将查询请求缓存在请求队列,依次从请求队列中读取不大于设定数量的查询请求并发送,获取各查询请求的查询结果,基于查询结果确定查询结果所对应的图像是否加载成功。基于该方案,能够采用发起图像查询请求的方式获取到图像是否加载成功的信息,从而实现了对图像是否加载成功的监控,为基于图像是否加载成功实现对网页服务质量的分析、提升网页服务质量提供了数据支持,并且由于是依次从请求队列中读取不大于预设数量的查询请求并发送,避免占用过多的数据请求线程,避免在用户发起请求时,因数据请求线程已被过多的占用导致用户等待时间变长,提高了用户的使用体验。
可选地,设定数量小于加载网页的浏览器所能够同步开启的数据请求线程总数,数据请求线程包括查询请求所对应的线程。
可选地,查询结果获取模块,具体用于:
若请求队列中的查询请求总数大于设定数量,则重复执行从请求队列中读取不大于设定数量的查询请求并发送,获取已发送的查询请求的查询结果的操作,直至获取到请求队列中的所有查询请求的查询结果。
可选地,查询请求为XML HTTP Request。
可选地,查询请求中还携带有与查询请求对应的图像的属性信息的请求参数;
若基于查询结果,确定查询结果所对应的图像加载成功,上述装置还包括:
属性信息提取模块,用于基于查询结果,提取查询结果所对应的图像的属性信息。
可选地,若网页页面的图像资源加载成功,网页页面的图像资源缓存在浏览器缓存中,查询结果是基于浏览器缓存中的缓存内容确定的。
可选地,查询请求中还携带有与查询请求对应的图像的文件位置指示信息,文件位置指示信息用于指示图像在浏览器缓存中的存储位置。
可选地,上述装置还包括:
页面加载情况确定模块,用于当检测到网页页面的HTML文件对应的特定事件时,确定网页页面的所有页面资源加载完成。
下面参考图3,其示出了适于用来实现本公开实施例的电子设备(例如执行图1中所示方法的终端设备)600的结构示意图。本公开实施例中的终端设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图3示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
电子设备包括:存储器以及处理器,其中,这里的处理器可以称为下文所述的处理装置601,存储器可以包括下文中的只读存储器(ROM)602、随机访问存储器(RAM)603以及存储装置608中的至少一项,具体如下所示:
如图3所示,电子设备600可以包括处理装置(例如中央处理器、图形处理器等)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储装置608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有电子设备600操作所需的各种程序和数据。处理装置601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
通常,以下装置可以连接至I/O接口605:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置606;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置607;包括例如磁带、硬盘等的存储装置608;以及通信装置609。通信装置609可以允许电子设备600与其他设备进行无线或有线通信以交换数据。虽然图3示出了具有各种装置的电子设备600,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在非暂态计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置609从网络上被下载和安装,或者从存储装置608被安装,或者从ROM 602被安装。在该计算机程序被处理装置601执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol,超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:当检测到网页页面的所有页面资源加载结束时,对于所述网页页面中各图像分别生成查询请求,并将各所述查询请求缓存到请求队列中;依次从所述请求队列中读取不大于设定数量的所述查询请求并发送,获取所发送的各所述查询请求的查询结果;基于各所述查询结果,确定各所述查询结果所对应的图像是否加载成功。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括但不限于面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的模块或单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,模块或单元的名称在某种情况下并不构成对该单元本身的限定,例如,监控模块还可以被描述为“用于确定各查询结果对应的图像是否加载成功的模块”。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
根据本公开的一个或多个实施例,本公开提供了一种网页图像的监控方法,包括:
当检测到网页页面的所有页面资源加载结束时,对于网页页面中各图像分别生成查询请求,并将各查询请求缓存到请求队列中;
依次从请求队列中读取不大于设定数量的查询请求并发送,获取所发送的各查询请求的查询结果;
基于各查询结果,确定各查询结果所对应的图像是否加载成功。
根据本公开提供的上述网页图像的监控方法,设定数量小于加载网页的浏览器所能够同步开启的数据请求线程总数,数据请求线程包括查询请求所对应的线程。
根据本公开提供的上述网页图像的监控方法,依次从请求队列中读取不大于设定数量的查询请求并发送,获取所发送的各查询请求的查询结果,包括:
若请求队列中的查询请求总数大于设定数量,则重复执行从请求队列中读取不大于设定数量的查询请求并发送,获取已发送的查询请求的查询结果的操作,直至获取到请求队列中的所有查询请求的查询结果;
若请求队列中的查询请求总数不大于设定数量,则从请求队列中读取不大于设定数量的查询请求并发送,获取请求队列中的所有查询请求的查询结果。
根据本公开提供的上述网页图像的监控方法,查询请求为XML HTTP Request。
根据本公开提供的上述网页图像的监控方法,查询请求中还携带有与查询请求对应的图像的属性信息的请求参数;
若基于查询结果,确定查询结果所对应的图像加载成功,方法还包括:
基于查询结果,提取查询结果所对应的图像的属性信息。
根据本公开提供的上述网页图像的监控方法,若网页页面的图像资源加载成功,网页页面的图像资源缓存在浏览器缓存中,查询结果是基于浏览器缓存中的缓存内容确定的。
根据本公开提供的上述网页图像的监控方法,查询请求中还携带有与查询请求对应的图像的文件位置指示信息,文件位置指示信息用于指示图像在浏览器缓存中的存储位置。
根据本公开提供的上述网页图像的监控方法,还包括:
当检测到网页页面的HTML文件对应的onload事件时,确定网页页面的所有页面资源加载完成。
根据本公开提供的上述网页图像的监控方法,还包括:
将各查询结果所对应的图像是否加载成功的信息发送给服务器。
根据本公开的一个或多个实施例,本公开提供了一种网页图像的监控装置,包括:
查询请求模块,用于当检测到网页页面的所有页面资源加载结束时,对于网页页面中各图像分别生成查询请求,并将各查询请求缓存到请求队列中;
查询结果获取记过获取模块,用于依次从请求队列中读取不大于设定数量的查询请求并发送,获取所发送的各查询请求的查询结果;
监控模块,用于基于各查询结果,确定各查询结果所对应的图像是否加载成功。
根据本公开提供的上述网页图像的监控装置,设定数量小于加载网页的浏览器所能够同步开启的数据请求线程总数,数据请求线程包括查询请求所对应的线程。
根据本公开提供的上述网页图像的监控装置,查询结果获取模块,具体用于:
若请求队列中的查询请求总数大于设定数量,则重复执行从请求队列中读取不大于设定数量的查询请求并发送,获取已发送的查询请求的查询结果的操作,直至获取到请求队列中的所有查询请求的查询结果。
根据本公开提供的上述网页图像的监控装置,查询请求为XML HTTP Request。
根据本公开提供的上述网页图像的监控装置,查询请求中还携带有与查询请求对应的图像的属性信息的请求参数;
若基于查询结果,确定查询结果所对应的图像加载成功,上述装置还包括:
属性信息提取模块,用于基于查询结果,提取查询结果所对应的图像的属性信息。
根据本公开提供的上述网页图像的监控装置,若网页页面的图像资源加载成功,网页页面的图像资源缓存在浏览器缓存中,查询结果是基于浏览器缓存中的缓存内容确定的。
根据本公开提供的上述网页图像的监控装置,查询请求中还携带有与查询请求对应的图像的文件位置指示信息,文件位置指示信息用于指示图像在浏览器缓存中的存储位置。
根据本公开提供的上述网页图像的监控装置,上述装置还包括:
页面加载情况确定模块,用于当检测到网页页面的HTML文件对应的特定事件时,确定网页页面的所有页面资源加载完成。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外,虽然采用特定次序描绘了各操作,但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下,多任务和并行处理可能是有利的。同样地,虽然在上面论述中包含了若干具体实现细节,但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地,在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题,但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反,上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。

Claims (11)

1.一种网页图像的监控方法,其特征在于,包括:
当检测到网页页面的所有页面资源加载结束时,对于所述网页页面中各图像分别生成查询请求,并将各所述查询请求缓存到请求队列中;
依次从所述请求队列中读取不大于设定数量的所述查询请求并发送,获取所发送的各所述查询请求的查询结果;
基于各所述查询结果,确定各所述查询结果所对应的图像是否加载成功。
2.根据权利要求1所述的方法,其特征在于,所述设定数量小于加载所述网页的浏览器所能够同步开启的数据请求线程总数,所述数据请求线程包括所述查询请求所对应的线程。
3.根据权利要求1所述的方法,其特征在于,所述依次从所述请求队列中读取不大于设定数量的所述查询请求并发送,获取所发送的各所述查询请求的查询结果,包括:
若所述请求队列中的查询请求总数大于设定数量,则重复执行从所述请求队列中读取不大于设定数量的查询请求并发送,获取已发送的查询请求的查询结果的操作,直至获取到所述请求队列中的所有查询请求的查询结果。
4.根据权利要求1所述的方法,其特征在于,所述查询请求为可扩展标记语言超文本传输协议请求XML HTTP Request。
5.根据权利要求4所述的方法,其特征在于,所述查询请求中还携带有与所述查询请求对应的图像的属性信息的请求参数;
若基于所述查询结果,确定所述查询结果所对应的图像加载成功,所述方法还包括:
基于所述查询结果,提取所述查询结果所对应的图像的属性信息。
6.根据权利要求4所述的方法,其特征在于,若所述网页页面的图像资源加载成功,所述网页页面的图像资源缓存在浏览器缓存中,所述查询结果是基于所述浏览器缓存中的缓存内容确定的。
7.根据权利要求6所述的方法,其特征在于,所述查询请求中还携带有与所述查询请求对应的图像的文件位置指示信息,所述文件位置指示信息用于指示图像在浏览器缓存中的存储位置。
8.根据权利要求1至7中任一项所述的方法,其特征在于,还包括:
当检测到所述网页页面的超文本标记语言HTML文件对应的特定事件时,确定所述网页页面的所有页面资源加载完成。
9.一种网页图像的监控装置,其特征在于,包括:
查询请求模块,用于当检测到网页页面的所有页面资源加载结束时,对于所述网页页面中各图像分别生成查询请求,并将各所述查询请求缓存到请求队列中;
查询结果获取模块,用于依次从所述请求队列中读取不大于设定数量的所述查询请求并发送,获取所发送的各所述查询请求的查询结果;
监控模块,用于基于各所述查询结果,确定各所述查询结果所对应的图像是否加载成功。
10.一种电子设备,其特征在于,包括处理器和存储器;
所述存储器,用于存储计算机程序;
所述处理器,用于通过调用所述计算机程序,执行权利要求1-8中任一项所述的方法。
11.一种计算机可读存储介质,其特征在于,所述存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-8中任一项所述的方法。
CN201911033302.8A 2019-10-28 2019-10-28 网页图像的监控方法、装置、电子设备及可读存储介质 Pending CN110765386A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201911033302.8A CN110765386A (zh) 2019-10-28 2019-10-28 网页图像的监控方法、装置、电子设备及可读存储介质
US17/772,700 US20230033164A1 (en) 2019-10-28 2020-08-07 Webpage image monitoring method and apparatus, electronic device, and computer-readable storage medium
PCT/CN2020/107722 WO2021082600A1 (zh) 2019-10-28 2020-08-07 网页图像的监控方法、装置、电子设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911033302.8A CN110765386A (zh) 2019-10-28 2019-10-28 网页图像的监控方法、装置、电子设备及可读存储介质

Publications (1)

Publication Number Publication Date
CN110765386A true CN110765386A (zh) 2020-02-07

Family

ID=69332967

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911033302.8A Pending CN110765386A (zh) 2019-10-28 2019-10-28 网页图像的监控方法、装置、电子设备及可读存储介质

Country Status (3)

Country Link
US (1) US20230033164A1 (zh)
CN (1) CN110765386A (zh)
WO (1) WO2021082600A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112069437A (zh) * 2020-08-13 2020-12-11 北京达佳互联信息技术有限公司 网页请求的处理方法、装置、电子设备和存储介质
CN112434235A (zh) * 2020-11-06 2021-03-02 金蝶云科技有限公司 网页图片加载方法、装置、计算机设备和存储介质
WO2021082600A1 (zh) * 2019-10-28 2021-05-06 北京字节跳动网络技术有限公司 网页图像的监控方法、装置、电子设备及计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103902608A (zh) * 2012-12-28 2014-07-02 腾讯科技(上海)有限公司 一种监控网页图片并进行压缩的方法和装置
CN103902664A (zh) * 2014-03-10 2014-07-02 百度在线网络技术(北京)有限公司 页面中图片的渲染方法及信息的提供方法、装置
CN103914302A (zh) * 2014-04-02 2014-07-09 北京京东尚科信息技术有限公司 一种网页加载进度监控方法和装置
CN106095506A (zh) * 2016-06-14 2016-11-09 乐视控股(北京)有限公司 一种页面加载方法及装置
CN106294365A (zh) * 2015-05-15 2017-01-04 阿里巴巴集团控股有限公司 一种单页web应用的页面数据处理方法及设备

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102081624B (zh) * 2009-11-30 2013-07-17 中国移动通信集团北京有限公司 一种数据查询的方法及装置
US20140047413A1 (en) * 2012-08-09 2014-02-13 Modit, Inc. Developing, Modifying, and Using Applications
EP2760183A1 (en) * 2013-01-28 2014-07-30 British Telecommunications public limited company System for detecting hyperlink faults
US9098477B2 (en) * 2013-05-15 2015-08-04 Cloudflare, Inc. Method and apparatus for automatically optimizing the loading of images in a cloud-based proxy service
CN105095280B (zh) * 2014-05-13 2020-02-14 腾讯科技(深圳)有限公司 一种浏览器缓存方法和装置
CN106326223A (zh) * 2015-06-16 2017-01-11 广州市动景计算机科技有限公司 一种网页资源获取方法和装置
CN106649301B (zh) * 2015-10-28 2020-09-11 北京国双科技有限公司 数据查询的方法、装置及系统
CN107644018A (zh) * 2016-07-20 2018-01-30 平安科技(深圳)有限公司 图片加载方法和装置
CN108108089B (zh) * 2016-11-24 2021-08-10 中国移动通信有限公司研究院 一种图片加载方法及装置
CN110765386A (zh) * 2019-10-28 2020-02-07 北京字节跳动网络技术有限公司 网页图像的监控方法、装置、电子设备及可读存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103902608A (zh) * 2012-12-28 2014-07-02 腾讯科技(上海)有限公司 一种监控网页图片并进行压缩的方法和装置
CN103902664A (zh) * 2014-03-10 2014-07-02 百度在线网络技术(北京)有限公司 页面中图片的渲染方法及信息的提供方法、装置
CN103914302A (zh) * 2014-04-02 2014-07-09 北京京东尚科信息技术有限公司 一种网页加载进度监控方法和装置
CN106294365A (zh) * 2015-05-15 2017-01-04 阿里巴巴集团控股有限公司 一种单页web应用的页面数据处理方法及设备
CN106095506A (zh) * 2016-06-14 2016-11-09 乐视控股(北京)有限公司 一种页面加载方法及装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
胡爱娜 等: "《Dreamweaver CS5网页设计与制作实例教程》", 31 December 2017 *
鲁班快跑: "判断图片是否加载完成的六种方式", 《博客园HTTPS://WWW.CNBLOGS.COM/ZHUSF/P/10607957.HTML》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021082600A1 (zh) * 2019-10-28 2021-05-06 北京字节跳动网络技术有限公司 网页图像的监控方法、装置、电子设备及计算机可读存储介质
CN112069437A (zh) * 2020-08-13 2020-12-11 北京达佳互联信息技术有限公司 网页请求的处理方法、装置、电子设备和存储介质
CN112069437B (zh) * 2020-08-13 2024-02-06 北京达佳互联信息技术有限公司 网页请求的处理方法、装置、电子设备和存储介质
CN112434235A (zh) * 2020-11-06 2021-03-02 金蝶云科技有限公司 网页图片加载方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
US20230033164A1 (en) 2023-02-02
WO2021082600A1 (zh) 2021-05-06

Similar Documents

Publication Publication Date Title
US20230033164A1 (en) Webpage image monitoring method and apparatus, electronic device, and computer-readable storage medium
CN111488185B (zh) 页面数据处理方法、装置、电子设备和可读介质
US11886798B2 (en) Method and apparatus for obtaining loading time length of image in webpage, and electronic device
CN110471709B (zh) 一种加速网页打开速度的方法、装置、介质和电子设备
CN110633434B (zh) 一种页面缓存方法、装置、电子设备及存储介质
CN111258736B (zh) 信息处理方法、装置和电子设备
CN111459364B (zh) 图标更新方法、装置和电子设备
CN113590974B (zh) 推荐页面配置方法、装置、电子设备和计算机可读介质
CN110633433B (zh) 一种页面缓存方法、装置、电子设备及存储介质
CN112099982A (zh) 一种崩溃信息定位方法、装置、介质和电子设备
CN111258800A (zh) 一种页面处理方法、装置和电子设备
CN111596992B (zh) 导航栏展示方法、装置和电子设备
CN110647702B (zh) 一种图片预加载的方法、装置、电子设备及可读介质
CN111783010B (zh) 网页空白页面监测方法、装置、终端及存储介质
CN110795670A (zh) 网页图像的监控方法、装置、电子设备及可读存储介质
CN112084441A (zh) 信息检索方法、装置和电子设备
CN111581556B (zh) 页面数据处理方法、装置、电子设备和可读介质
CN112732457B (zh) 图像传输方法、装置、电子设备和计算机可读介质
CN114647411A (zh) 编程界面加载方法、装置、电子设备及存储介质
US9223758B1 (en) Determining a language encoding data setting for a web page, and applications thereof
CN111258670B (zh) 组件数据的管理方法、装置、电子设备和存储介质
CN110300163B (zh) 一种网络数据的获取方法、装置、设备及存储介质
CN114428805A (zh) 页面展示方法、装置、设备和计算机可读介质
CN115422266A (zh) 数据分页方法、装置、设备和程序产品
CN116932910A (zh) 内容推送方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Applicant after: Douyin Vision Co.,Ltd.

Address before: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Applicant before: Tiktok vision (Beijing) Co.,Ltd.

Address after: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Applicant after: Tiktok vision (Beijing) Co.,Ltd.

Address before: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Applicant before: BEIJING BYTEDANCE NETWORK TECHNOLOGY Co.,Ltd.

CB02 Change of applicant information