CN106971386B - 判断图像完整度及页面加载度的方法、装置和客户端设备 - Google Patents
判断图像完整度及页面加载度的方法、装置和客户端设备 Download PDFInfo
- Publication number
- CN106971386B CN106971386B CN201610029464.4A CN201610029464A CN106971386B CN 106971386 B CN106971386 B CN 106971386B CN 201610029464 A CN201610029464 A CN 201610029464A CN 106971386 B CN106971386 B CN 106971386B
- Authority
- CN
- China
- Prior art keywords
- sub
- image
- page
- ratio
- color
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Quality & Reliability (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- Color Image Communication Systems (AREA)
- Facsimile Image Signal Circuits (AREA)
Abstract
本申请公开了用于判断和计算图像完整度的方法、装置和客户端设备。所述方法包括将图像划分为多个部分并选取所述多个部分中的多个或全部作为待处理的子部;根据每个子部在颜色空间内的取值,计算该子部的颜色特征值;以及根据每个子部与其相邻子部的颜色是否相近,计算图像完整度,其中,在所述子部与其相邻子部的颜色特征值之差小于第一阈值的情况下,判定所述子部与其相邻子部的颜色相近。图像完整度的计算还可引入坏块系数,并且算出的图像完整度可以用于判断页面加载状况。由此,能够通过计算图片各区域的颜色差异得到一个跟内容无关的值并且能够使用该值监视过程(例如,监视页面加载速度),监控问题(如白屏问题)。
Description
技术领域
本发明涉及页面图像处理,尤其涉及判断图像完整度及页面加载度的方法、装置和客户端设备。
背景技术
实际应用中,经常需要出于各种原因判断数字图像是否完整或是需要量化数字图像的完整程度。例如,在网速测试中对页面是否加载完成的判断就需要基于对页面图像是否完整的判断。现有技术中通常通过比较前后两张图片的相似度来进行判断。这种方法需要同时对一张以上的图像进行处理,因此会消耗相当大的处理资源。另外,对于变化的页面(例如,图片轮换,地址栏隐藏,滚动新闻等),这种相似度比较方法通常无法进行准确判断。
随着动态页面的普及以及浏览器显示功能的优化,需要一种面对变化的图像,仍然能够高效计算图像完整度,或是判断页面加载程度的方法、装置和客户端设备。
发明内容
为了解决上述的至少一个问题,本发明提供了相应的方法、装置和客户端设备,其能够通过计算图片各区域的颜色差异得到一个跟内容无关的值并且可以使用该值监视过程(例如,监视页面加载速度),监控问题(如白屏问题)。
根据本发明的一个方面,提供了一种客户端设备,所述客户端设备包括:接收装置,用于接收图像;存储器,连接至所述接收装置,用于存储接收到的图像;处理器,连接至所述存储器和所述接收装置,用于:将图像划分为多个部分并选取所述多个部分中的多个或全部作为待处理的子部;根据每个子部在颜色空间内的取值,计算该子部的颜色特征值;以及根据每个子部与其相邻子部的颜色是否相近,计算图像完整度,其中,在所述子部与其相邻子部的颜色特征值之差小于第一阈值的情况下,判定所述子部与其相邻子部的颜色相近。
这样,就能够通过简单判断单张图像内各区域的颜色差异来计算图像完整度。由于完整度的计算只涉及该幅图像至少一部分小块的颜色分布,因此相比于比较前后图像相似度的现有技术,能够大大减少计算量,并且能够适用于图像前后变化的情况。
根据本发明的另一个方面,提供了一种客户端设备,所述客户端设备包括:接收装置,用于接收页面信息;存储器,连接至所述接收装置,用于存储接收到的页面信息;处理器,连接至所述存储器和所述接收装置,用于:在页面加载的过程中按时间顺序获取页面图像;将页面图像划分为多个部分并选取所述多个部分中的多个或全部作为待处理的子部;根据每个子部在颜色空间内的取值,计算该子部的颜色特征值;根据每个子部与其相邻子部的颜色是否相近,计算图像完整度,其中,在所述子部与其相邻子部的颜色特征值之差小于第一阈值的情况下,判定所述子部与其相邻子部的颜色相近;选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载;以及选取图像完整度大于第二比值的第一幅页面图像,相应地判定页面加载完毕,其中所述第二比值大于所述第一比值。
这样,就能够简单地通过图像完整度大于第一阈值判断页面加载开始,大于第二阈值来判断页面加载结束。
根据本发明的又一个方面,提供了一种客户端设备,所述客户端设备包括:接收装置,用于接收页面信息;存储器,连接至所述接收装置,用于存储接收到的页面信息;处理器,连接至所述存储器和所述接收装置,用于:在页面加载的过程中按时间顺序获取页面图像;将页面图像划分为多个部分并选取所述多个部分中的多个或全部作为待处理的子部;根据每个子部在颜色空间内的取值,计算该子部的颜色特征值;根据每个子部与其相邻子部的颜色是否相近,计算图像完整度,其中,在所述子部与其相邻子部的颜色特征值之差小于第一阈值的情况下,判定所述子部与其相邻子部的颜色相近;选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载,将所述页面加载的过程中的最后一张页面图像的图像完整度与第三比值相比较,所述最后一张页面图像的图像完整度大于第三比值的情况下,选取图像完整度大于第二比值的第一幅页面图像和与所述最后一张页面图像的图像完整度之比大于第四比值的第一幅页面图像中更早的一幅页面图像,并判定页面加载完毕,其中所述第一比值小于所述第三比值,所述第三比值小于所述第二比值,所述第四比值大于第三比值,以及在所述最后一张页面图像的图像完整度小于第三比值的情况下,判断页面加载失败。
由此,对于完整页面也包括大片同色的情况,则通过首先将最后一幅图像的图像完整度引入比较来进行判断。
根据本发明的又一个方面,提供了一种图像完整度计算装置,包括:子部选取单元,用于将图像划分为多个部分并选取所述多个部分中的多个或全部作为待处理的子部;颜色特征值计算单元,用于根据每个子部在颜色空间内的取值,计算该子部的颜色特征值;以及图像完整度计算单元,用于根据每个子部与其相邻子部的颜色是否相近,计算图像完整度,其中,在所述子部与其相邻子部的颜色特征值之差小于第一阈值的情况下,判定所述子部与其相邻子部的颜色相近。
优选地,所述图像完整度计算单元还根据每个子部的颜色特征值的取值以及每个子部内是否存在主色中的至少一项来计算所述图像完整度,其中,对于每个子部,在颜色空间内的取值相同或相近的像素的数量占该子部总像素数的比值达预定比值的情况下,将与所述相同或相近的取值的平均值相对应的颜色判定为所述子部的主色,并且其中,像素在颜色空间内的取值的差值小于第二阈值,判定像素在颜色空间内的取值相同或相近。
这样,就能够通过进一步引入子部本身的颜色和子部内的颜色丰富程度来进一步优化图像完整度的计算。由于完整度的计算只涉及该幅图像至少一部分小块或其内的颜色分布,因此同样能够减少计算量,适用于图像前后变化的情况,并提高计算精度。
优选地,所述的装置还包括:坏块系数取值单元,用于为每个子部定义一个坏部系数,在子部内不存在主色的情况下,将所述坏块系数设为固定值,在子部内存在主色的情况下,将所述坏部系数的初始值设为与所述子部的颜色特征值的取值相关联,并且根据与子部颜色相近的相邻子部个数,增大该子部的坏部系数的取值;以及所述图像完整度计算单元根据下式计算图像的完整度:1-(各子部坏部系数之和/子部总数)。
由此,通过引入坏块系数,在不大幅增加计算量的基础上进一步优化图像完整度的计算。
优选地,所述颜色特征值计算单元还用于:求取子部中每个像素在颜色空间内的取值的平均值作为该子部的颜色特征值;或者在子部内存在主色的情况下,使用所述主色在颜色空间内的取值作为颜色特征值。
由此,通过引入颜色特征值的优选计算方法,进一步优化了图像完整度的计算。
根据本发明的再一个方面,提供了一种页面加载判断装置,包括:页面图像获取单元,用于在页面加载的过程中按时间顺序获取页面图像;如前述任一项的图像完整度计算装置,用于计算按所述时间顺序获取的所述页面图像的图像完整度;页面加载状况判定单元,用于选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载,以及选取图像完整度大于第二比值的第一幅页面图像,相应地判定页面加载完毕,其中所述第二比值大于所述第一比值。
据本发明的另一个方面,提供了一种页面加载判断装置,包括:页面图像获取单元,用于在页面加载的过程中按时间顺序获取页面图像;如前述任一项的图像完整度计算装置,用于计算按所述时间顺序获取的所述页面图像的图像完整度;页面加载状况判定单元,用于选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载,将所述页面加载的过程中的最后一张页面图像的图像完整度与第三比值相比较,在所述最后一张页面图像的图像完整度大于第三比值的情况下,选取图像完整度大于第二比值的第一幅页面图像和与所述最后一张页面图像的图像完整度之比大于第四比值的第一幅页面图像中更早的一幅页面图像,并判定页面加载完毕,其中所述第一比值小于所述第三比值,所述第三比值小于所述第二比值,所述第四比值大于第三比值,以及在所述最后一张页面图像的图像完整度小于第三比值的情况下,判断页面加载失败。
根据本发明的又一个方面,提供了一种图像完整度计算方法,包括:将图像划分为多个部分并选取所述多个部分中的多个或全部作为待处理的子部;根据每个子部在颜色空间内的取值,计算该子部的颜色特征值;以及根据每个子部与其相邻子部的颜色是否相近,计算图像完整度,其中,在所述子部与其相邻子部的颜色特征值之差小于第一阈值的情况下,判定所述子部与其相邻子部的颜色相近。
优选地,所述图像完整度还根据每个子部内是否存在主色以及每个子部的颜色特征值的取值中的至少一项进行计算,其中,对于每个子部,在颜色空间内的取值相同或相近的像素的数量占该子部总像素数的比值达预定比值的情况下,将与所述相同或相近的取值的平均值相对应的颜色判定为所述子部的主色,并且其中,像素在颜色空间内的取值的差值小于第二阈值,判定像素在颜色空间内的取值相同或相近。
优选地,计算图像完整度包括:为每个子部定义一个坏部系数,在子部内不存在主色的情况下,将所述坏块系数设为固定值,在子部内存在主色的情况下,将所述坏部系数的初始值设为与所述子部的颜色特征值的取值相关联,并且根据与子部颜色相近的相邻子部个数,增大该子部的坏部系数的取值;以及根据下式计算图像的完整度:1-(各子部坏部系数之和/子部总数)。
优选地,计算子部的颜色特征值包括:求取子部中每个像素在颜色空间内的取值的平均值作为该子部的颜色特征值;或者在子部内存在主色的情况下,使用所述主色在颜色空间内的取值作为颜色特征值。
根据本发明的再一个方面,提供了一种页面加载判断方法,包括:在页面加载的过程中按时间顺序获取页面图像;根据前述图像完整度计算方法中任一项所述计算按所述时间顺序获取的所述页面图像的图像完整度;选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载;以及选取图像完整度大于第二比值的第一幅页面图像,相应地判定页面加载完毕,其中所述第二比值大于所述第一比值。
根据本发明的又一个方面,提供了一种页面加载判断方法,包括:在页面加载的过程中按时间顺序获取页面图像;根据前述图像完整度计算方法中任一项所述计算按所述时间顺序获取的所述页面图像的图像完整度;选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载,将所述页面加载的过程中的最后一张页面图像的图像完整度与第三比值相比较,在所述最后一张页面图像的图像完整度大于第三比值的情况下,选取图像完整度大于第二比值的第一幅页面图像和与所述最后一张页面图像的图像完整度之比大于第四比值的第一幅页面图像中更早的一幅页面图像,并判定页面加载完毕,其中所述第一比值小于所述第三比值,所述第三比值小于所述第二比值,所述第四比值大于第三比值,以及在所述最后一张页面图像的图像完整度小于第三比值的情况下,判断页面加载失败。
利用本发明的图像完整度计算方法、装置和客户端设备,能够通过仅根据单张图像特定小块的颜色计算图像完整度。进一步地,通过对加载过程中的不同页面图像进行该简单计算,能够方便的判定页面加载状况,并且对于变化的页面亦是如此。
附图说明
通过结合附图对本公开示例性实施方式进行更详细的描述,本公开的上述以及其它目的、特征和优势将变得更加明显,其中,在本公开示例性实施方式中,相同的参考标号通常代表相同部件。
图1是根据本发明的一个实施例的客户端设备的框图。
图2示出了根据本发明一个实施例的图像完整度计算方法的流程图。
图3示出了根据本发明一实施例的子部选取的示意图。
图4示出了根据本发明一个实施例的页面加载判断方法的流程图。
图5是根据本发明一个实施例的图像完整度计算装置的示意图。
图6是根据本发明一个实施例的页面加载判断装置的示意图。
具体实施方式
下面将参照附图更详细地描述本公开的优选实施方式。虽然附图中显示了本公开的优选实施方式,但应理解,可以以各种形式实现本公开而不为本文的实施方式所限制。相反,提供这些实施方式是为了使本公开更加透彻和完整,并且能够将本公开的范围完整地传达给本领域的技术人员。
考虑到对图像完整度的判定和计算所需要适应的新要求(例如,对动态页面加载状况进行准确判断),本发明提供的方法、装置和客户端设备通过计算图片各区域的颜色差异得到一个跟内容无关的值来实现计算简化和判断结果的准确性。
图1是根据本发明的一个实施例的客户端设备10的框图。该客户端设备的组件包括但不限于一个或多个处理器110、存储器120及接收装置130,上述组件彼此相连,例如通过总线。该客户端设备10可以采用通用计算设备的形式实现,例如个人计算机、平板计算机、智能移动电话等,并且还可以包括用于实现上述通用计算设备功能的其他组件,例如输出装置等。应当理解,图1所述的结构框图仅仅是为了示例的目的,而不是对本发明范围的限制。在某些情况下,可以根据具体情况增加或减少某些设备。
在一个实施例中,接收装置130可以用于接收图像,存储器120可以存储接收到的图像,处理器110可以对上述图像进行处理,以判断或是计算图像的完整度。例如,处理器110可以执行一种图像完整度计算方法。图2示出了根据本发明一个实施例的图像完整度计算方法的流程图。
在步骤S210,将图像划分为多个部分并选取所述多个部分中的多个或全部作为待处理的子部。图3示出了根据本发明一实施例的选取子部的示意图。在实际操作中,为了减少计算量,还可以将原图缩小,例如将1080*1920像素的原图缩小成缩小成300*400的小图。随后可以如图3所示,在小图里面均匀划分15*20尺寸的小块,并取其中的灰色块作为待处理的子部。以上虽然结合图3给出了选取子部的例子,但是本领域技术人员应该明了,可以根据实际情况决定是否需要将原图缩小,或是缩小多少,可以选择均匀划分或是非均匀划分的子部,选择任意形状的子部,间隔选取子部,或是选取全部的子部等。
在步骤S220,根据每个子部在颜色空间内的取值,计算该子部的颜色特征值。在这里,颜色空间可以是本领域内周知的RGB、CMY或是HSV空间,并且在颜色空间内的取值是可以在一维直线、二维平面或是三维空间内取值。因此在一个实施例中,可以根据每个子部的灰度值(即,颜色空间内一条特定直线上的取值)来计算每个子部的颜色特征值,可以根据每个子部在颜色空间内特定平面内的二维取值来计算每个子部的二维或一维颜色特征值,也可以根据每个子部在颜色空间内的三维取值来计算每个子部的三维、二维或一维颜色特征值。例如,为了简化计算,可以将RGB格式的图片灰阶化,即转换成灰度图。在一个实施例中,可以使用python Image库的newimage=Image.convert("L")命令使用如下公式进行转换,并将由此获取的值作为颜色特征值。
L=R*299/1000+G*587/1000+B*114/1000
在步骤S230,可以根据每个子部与其相邻子部的颜色是否相近,计算图像完整度。颜色相近的子部越多,说明页面颜色越单一,这通常是图像不完整的表现(例如,大片的白色/黑色色块)。在这里,可以在子部与其相邻子部的颜色特征值之差小于第一阈值的情况下,判定所述子部与其相邻子部的颜色相近。在一个实施例中,子部与其相邻子部的颜色特征值的比较结果小于所述第一阈值可以是子部与其相邻子部的一维颜色特征值之差小于阈值,子部与其相邻子部的二维颜色特征值的平面距离小于阈值,或是子部与其相邻子部的三维颜色特征值的空间距离小于阈值。例如,在使用颜色特征值作为灰度值的情况下,可以将第一阈值设为10,并且在相邻子部灰度值小于10的情况下将其判断为颜色相近。在这里,相邻子部可以是在原图中就彼此相邻的子部。而对于从图中间隔选取子部的情况,上述相邻子部则可以是在选取的子部中相邻的子部。再次参见图3,原本不相邻的子部A和C在选取灰色块作为子部的情况下可以视为相邻子部。
在一个优选实施例中,计算图像完整度除了可以根据每个子部与其相邻子部的颜色是否相近,还可以根据每个子部内是否存在主色以及每个子部的颜色特征值的取值中的至少一项来进行计算。对于每个子部,在颜色空间内的取值相同或相近的像素的数量占该子部总像素数的比值达预定比值的情况下,将与所述相同或相近的取值的平均值相对应的颜色判定为所述子部的主色,并且像素在颜色空间内的取值的差值小于第二阈值,判定像素在颜色空间内的取值相同或相近。例如,可以在灰度值彼此相差不超过10的像素达到总像素的80%时,判定该子部存在主色。若一子部不存在主色,表示该子部内颜色丰富,说明该子部应该是完整显示的子部。另外,每个子部自身的颜色特征值也可以用来优化图像完整度的计算。例如,该子部越白(即,灰度值>250),图像不完整(白屏)的可能性就越大。
在一个实施例中,可以求取子部中每个像素在颜色空间内的取值的平均值作为该子部的颜色特征值。
在一个实施例中,在子部内存在主色的情况下,可以使用主色在颜色空间内的取值作为颜色特征值。
在一个实施例中,引入坏部系数来进一步优化图像完整度的计算。坏部系数用来表征一个子部是坏部(即,处于图像不完整部分内的子部)的可能性。一个子部的坏部系数越大,该子部是坏部的可能性就越大。坏部系数可以与子部内是否存在主色相关,一个子部内部颜色越丰富,该子部是坏块的可能性就越小。坏块系数还可以与子部的颜色特征值的取值有关。例如,在图像不完整通常表现为白屏/黑屏的情况下,可以将越白/越黑的子部的坏块系数设置的更大。坏块系数还可以与颜色相近的相邻子部个数相关,单色成片的面积越大,该图像不完整的可能性也就越大。
优选地,可以为每个子部定义一个坏部系数,在子部内不存在主色的情况下,将所述坏块系数设为固定值。在子部内存在主色的情况下,将所述坏部系数的初始值设为与所述子部的颜色特征值的取值相关联,并且根据与子部颜色相近的相邻子部个数,增大该子部的坏部系数的取值。最后,可以根据下式计算图像的完整度:
1-(各子部坏部系数之和/子部总数)。
为了方便说明,使用灰度值作为颜色特征值的例子。若一子部内不存在主色,即子部内颜色丰富,则可以认为该子部为坏部的概率很小,因此将该子部的坏块系数固定为0.3。在图像不完整通常表现为白屏的情况下,可以将灰度值大于250的子部的坏块系数的初始值设为1.2,其他值设为0.3。对于颜色相近的相邻子部,则可以根据连成片的子部个数,相应的增加坏块系数。例如,每增加一个颜色相近的相邻子部,该子部的坏块系数加0.1。如果有4个颜色相近的子部彼此相邻,则可以分别将这些子部各自的坏块系数加0.4(即,0.1*4)。
在一个实施例中,可以使用颜色特征值来表征子部内不存在主色的情况。仍旧以使用灰度值作为颜色特征值为例。在判断子部内不存在分布超过80%的主色之后,可以直接将该子部的颜色特征值设为>255(即,正常灰度值范围之外)。由此在使用坏块系数计算图像完整度时,可以一并将颜色特征值>255的子部的坏块系数设为一个较小的固定值,例如0.3。在一个优选实施例中,可以使用公式Sum(abs(各像素颜色值-各像素平均值))来计算不存在主色的子部的颜色特征值,从而得到一个大于255的值。
以上结合图1-3描述了用于计算图像完整度的客户端设备、对应方法及其优选实施例。下文将进一步描述根据计算出的图像完整度,判断页面加载程度否客户端设备及其对应方法。
在一个实施例中,图1中客户端设备10的接收装置130可以用于接收页面信息,存储器120可以存储接收到的页面信息,处理器110可以对上述页面信息进行处理,以判断页面的加载状况。例如,处理器110可以执行一种页面加载判断方法。图4示出了根据本发明一个实施例的页面加载判断方法的流程图。
在步骤S410,在页面加载的过程中按时间顺序获取页面图像。在一个实施例中,可以去除相同的重复图像以避免不必要的计算。
在步骤S420,计算页面图像的图像完整度。可以根据以上结合图2描述的步骤S210-S230及其优选实施例来计算页面图像的完整,在此不再赘述。
在步骤S430,根据所述图像完整度,判断所述页面的加载状况。
在一个实施例中,根据所述图像完整度判定页面的加载状况可以是选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载,以及选取图像完整度大于第二比值的第一幅页面图像,相应地判定页面加载完毕,其中所述第二比值大于所述第一比值。例如,可以将第一比值设为20%,第二比值设为80%,一旦图像完整度大于20%,则判定加载开始,大于80%,则判定加载结束。
在一个优选实施例中,还可以考虑到加载完成的页面上也有大片白色色块的特定情况(例如谷歌和百度的主页),对页面加载的判定加以优化。
首先,选取图像完整度大于第一比值(例如,20%)的第一幅页面图像,相应地判定页面开始加载。随后,将加载过程中获得的最后一张图像与第三比值(例如,30%)相比较。若最终图像的图像完成度过低(小于30%),则判定加载失败。若大于该第三比值,则能够选取图像完整度大于第二比值的第一幅页面图像和与所述最后一张页面图像的图像完整度之比大于第四比值的第一幅页面图像中更早的一幅页面图像,并判定页面加载完毕。例如,可以设第二比值等于第四比值,为80%。然后选取图像完整度大于80%的第一幅图像以及与最终图像的完整度之比大于80%的第一幅图像中的较早图像,来作为页面加载完毕时的图像。本领域技术人员应该理解,也可以按照实际应用选取不同的值,只要第一比值小于第三比值,第三比值小于第二比值,并且第四比值大于第三比值即可。
以上结合图1-4描述了对图像完整度和页面加载度的判定和计算的对应方法和硬件设备。如下将参考图5-6描述其对应装置的功能和构造。
图5是根据本发明一个实施例的图像完整度计算装置50的示意图。图像完整度计算装置50可以包括子部选取单元510、颜色特征值计算单元520和图像完整度计算单元530。
这三个单元可以分别执行对应于图2步骤S210、S220和S230的功能。具体地,子部选取单元510可将图像划分为多个部分并选取所述多个部分中的多个或全部作为待处理的子部。颜色特征值计算单元520可以根据每个子部在颜色空间内的取值,计算该子部的颜色特征值。图像完整度计算单元530则可根据每个子部与其相邻子部的颜色是否相近,计算图像完整度。在所述子部与其相邻子部的颜色特征值之差小于第一阈值的情况下,判定所述子部与其相邻子部的颜色相近。
同样地,图像完整度计算单元530还可以根据每个子部的颜色特征值的取值以及每个子部内是否存在主色中的至少一项来计算所述图像完整度。对于是否存在主色的判定如上所述,在此不再赘述。
另外,图像完整度计算装置50可以优选地包括坏块系数计算单元540,该单元540同样可以相应地根据1-(各子部坏部系数之和/子部总数)来优化对图像完整度的计算,在此也不再赘述。
图6是根据本发明一个实施例的页面加载判断装置60的示意图。该页面加载判断装置60可以包括页面图像获取单元610、图像完整度计算装置620和页面加载状况判定单元630。图像完整度计算装置620可以是如上结合图5描述的图像完整度计算装置50或其优选实施例。
这三个单元可以分别执行对应于图4步骤S410、S420和S430的功能。具体地,页面图像获取单元610可以在页面加载的过程中按时间顺序获取页面图像。图像完整度计算装置620可以计算按所述时间顺序获取的所述页面图像的图像完整度。页面加载状况判定单元630则可以根据计算出的图像完整度,判定页面的加载程度。
另外,页面加载状况判定单元630可以通过引入第一比值和第二比值,或是优选地引入第一至第四比值,来与图像完整度相比较,由此判断页面的加载状况。
在一个实施例中,页面加载状况判定单元630可以首先选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载,随后可以选取图像完整度大于第二比值的第一幅页面图像,相应地判定页面加载完毕,其中所述第二比值大于所述第一比值。
在一个实施例中,页面加载状况判定单元630可以首先选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载。随后,页面加载状况判定单元630可以将所述页面加载的过程中的最后一张页面图像的图像完整度与第三比值相比较,在所述最后一张页面图像的图像完整度大于第三比值的情况下,选取图像完整度大于第二比值的第一幅页面图像和与所述最后一张页面图像的图像完整度之比大于第四比值的第一幅页面图像中更早的一幅页面图像,并判定页面加载完毕。所述第一比值小于所述第三比值,所述第三比值小于所述第二比值,所述第四比值大于第三比值。页面加载状况判定单元630还可以在所述最后一张页面图像的图像完整度小于第三比值的情况下,判断页面加载失败。
上文中已经参考附图详细描述了根据本发明的图像完整度和页面加载度的判定和计算方法、装置和客户端设备。
此外,根据本发明的方法还可以实现为一种计算机程序,该计算机程序包括用于执行本发明的上述方法中限定的上述各步骤的计算机程序代码指令。或者,根据本发明的方法还可以实现为一种计算机程序产品,该计算机程序产品包括计算机可读介质,在该计算机可读介质上存储有用于执行本发明的上述方法中限定的上述功能的计算机程序。本领域技术人员还将明白的是,结合这里的公开所描述的各种示例性逻辑块、模块、电路和算法步骤可以被实现为电子硬件、计算机软件或两者的组合。
附图中的流程图和框图显示了根据本发明的多个实施例的系统和方法的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标记的功能也可以以不同于附图中所标记的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本发明的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术的改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。
Claims (15)
1.一种客户端设备,包括:
接收装置,用于接收图像;
存储器,连接至所述接收装置,用于存储接收到的图像;
处理器,连接至所述存储器和所述接收装置,用于:
将图像划分为相互不重叠的多个部分并选取所述多个部分中的多个或全部作为待处理的子部;
根据每个子部在颜色空间内的取值,计算该子部的颜色特征值;以及
根据每个子部与其相邻子部的颜色是否相近,计算图像完整度,其中,在所述子部与其相邻子部的颜色特征值之差小于第一阈值的情况下,判定所述子部与其相邻子部的颜色相近,并且颜色相近的子部越多,表示图像完整度越差。
2.一种客户端设备,包括:
接收装置,用于接收页面信息;
存储器,连接至所述接收装置,用于存储接收到的页面信息;
处理器,连接至所述存储器和所述接收装置,用于:
在页面加载的过程中按时间顺序获取页面图像;
将页面图像划分为相互不重叠的多个部分并选取所述多个部分中的多个或全部作为待处理的子部;
根据每个子部在颜色空间内的取值,计算该子部的颜色特征值;
根据每个子部与其相邻子部的颜色是否相近,计算图像完整度,其中,在所述子部与其相邻子部的颜色特征值之差小于第一阈值的情况下,判定所述子部与其相邻子部的颜色相近,并且颜色相近的子部越多,表示图像完整度越差;
选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载;以及
选取图像完整度大于第二比值的第一幅页面图像,相应地判定页面加载完毕,其中所述第二比值大于所述第一比值。
3.一种客户端设备,包括:
接收装置,用于接收页面信息;
存储器,连接至所述接收装置,用于存储接收到的页面信息;
处理器,连接至所述存储器和所述接收装置,用于:
在页面加载的过程中按时间顺序获取页面图像;
将页面图像划分为相互不重叠的多个部分并选取所述多个部分中的多个或全部作为待处理的子部;
根据每个子部在颜色空间内的取值,计算该子部的颜色特征值;
根据每个子部与其相邻子部的颜色是否相近,计算图像完整度,其中,在所述子部与其相邻子部的颜色特征值之差小于第一阈值的情况下,判定所述子部与其相邻子部的颜色相近,并且颜色相近的子部越多,表示图像完整度越差;
选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载;
将所述页面加载的过程中的最后一张页面图像的图像完整度与第三比值相比较,在所述最后一张页面图像的图像完整度大于第三比值的情况下,选取图像完整度大于第二比值的第一幅页面图像和与所述最后一张页面图像的图像完整度之比大于第四比值的第一幅页面图像中更早的一幅页面图像,并判定页面加载完毕,其中所述第一比值小于所述第三比值,所述第三比值小于所述第二比值,所述第四比值大于第三比值;以及
在所述最后一张页面图像的图像完整度小于第三比值的情况下,判断页面加载失败。
4.一种图像完整度计算装置,包括:
子部选取单元,用于将图像划分为相互不重叠的多个部分并选取所述多个部分中的多个或全部作为待处理的子部;
颜色特征值计算单元,用于根据每个子部在颜色空间内的取值,计算该子部的颜色特征值;以及
图像完整度计算单元,用于根据每个子部与其相邻子部的颜色是否相近,计算图像完整度,其中,在所述子部与其相邻子部的颜色特征值之差小于第一阈值的情况下,判定所述子部与其相邻子部的颜色相近,并且颜色相近的子部越多,表示图像完整度越差。
5.如权利要求4所述的装置,其中,所述图像完整度计算单元还根据每个子部的颜色特征值的取值以及每个子部内是否存在主色中的至少一项来计算所述图像完整度,
其中,对于每个子部,在颜色空间内的取值相同或相近的像素的数量占该子部总像素数的比值达预定比值的情况下,将与所述相同或相近的取值的平均值相对应的颜色判定为所述子部的主色,并且
其中,像素在颜色空间内的取值的差值小于第二阈值,判定像素在颜色空间内的取值相同或相近。
6.如权利要求5所述的装置,还包括:
坏块系数取值单元,用于为每个子部定义一个坏部系数,在子部内不存在主色的情况下,将所述坏块系数设为固定值,在子部内存在主色的情况下,将所述坏部系数的初始值设为与所述子部的颜色特征值的取值相关联,并且根据与子部颜色相近的相邻子部个数,增大该子部的坏部系数的取值;以及
所述图像完整度计算单元根据下式计算图像的完整度:
1-(各子部坏部系数之和/子部总数)。
7.如权利要求5所述的装置,其中,所述颜色特征值计算单元还用于:
求取子部中每个像素在颜色空间内的取值的平均值作为该子部的颜色特征值;或者
在子部内存在主色的情况下,使用所述主色在颜色空间内的取值作为颜色特征值。
8.一种页面加载判断装置,包括:
页面图像获取单元,用于在页面加载的过程中按时间顺序获取页面图像;
如权利要求4-7中任一项所述的图像完整度计算装置,用于计算按所述时间顺序获取的所述页面图像的图像完整度;
页面加载状况判定单元,用于选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载;以及
选取图像完整度大于第二比值的第一幅页面图像,相应地判定页面加载完毕,其中所述第二比值大于所述第一比值。
9.一种页面加载判断装置,包括:
页面图像获取单元,用于在页面加载的过程中按时间顺序获取页面图像;
如权利要求4-7中任一项所述的图像完整度计算装置,用于计算按所述时间顺序获取的所述页面图像的图像完整度;
页面加载状况判定单元,用于选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载;
将所述页面加载的过程中的最后一张页面图像的图像完整度与第三比值相比较,在所述最后一张页面图像的图像完整度大于第三比值的情况下,选取图像完整度大于第二比值的第一幅页面图像和与所述最后一张页面图像的图像完整度之比大于第四比值的第一幅页面图像中更早的一幅页面图像,并判定页面加载完毕,其中所述第一比值小于所述第三比值,所述第三比值小于所述第二比值,所述第四比值大于第三比值;以及
在所述最后一张页面图像的图像完整度小于第三比值的情况下,判断页面加载失败。
10.一种图像完整度计算方法,包括:
将图像划分为相互不重叠的多个部分并选取所述多个部分中的多个或全部作为待处理的子部;
根据每个子部在颜色空间内的取值,计算该子部的颜色特征值;以及
根据每个子部与其相邻子部的颜色是否相近,计算图像完整度,其中,在所述子部与其相邻子部的颜色特征值之差小于第一阈值的情况下,判定所述子部与其相邻子部的颜色相近,并且颜色相近的子部越多,表示图像完整度越差。
11.如权利要求10所述的方法,其中,所述图像完整度还根据每个子部内是否存在主色以及每个子部的颜色特征值的取值中的至少一项进行计算,
其中,对于每个子部,在颜色空间内的取值相同或相近的像素的数量占该子部总像素数的比值达预定比值的情况下,将与所述相同或相近的取值的平均值相对应的颜色判定为所述子部的主色,并且
其中,像素在颜色空间内的取值的差值小于第二阈值,判定像素在颜色空间内的取值相同或相近。
12.如权利要求11所述的方法,其中,计算图像完整度包括:
为每个子部定义一个坏部系数,在子部内不存在主色的情况下,将该子部的坏块系数设为固定值,在子部内存在主色的情况下,将该子部的坏部系数的初始值设为与该子部的颜色特征值的取值相关联,并且根据与子部颜色相近的相邻子部个数,增大该子部的坏部系数的取值;以及
根据下式计算图像的完整度:
1-(各子部坏部系数之和/子部总数)。
13.如权利要求11所述的方法,其中,计算子部的颜色特征值包括:
求取子部中每个像素在颜色空间内的取值的平均值作为该子部的颜色特征值;或者
在子部内存在主色的情况下,使用所述主色在颜色空间内的取值作为颜色特征值。
14.一种页面加载判断方法,包括:
在页面加载的过程中按时间顺序获取页面图像;
根据如权利要求10-13中任一项所述的方法计算按所述时间顺序获取的所述页面图像的图像完整度;
选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载;以及
选取图像完整度大于第二比值的第一幅页面图像,相应地判定页面加载完毕,其中所述第二比值大于所述第一比值;根据所述图像完整度,判断所述页面的加载状况。
15.一种页面加载判断方法,包括:
在页面加载的过程中按时间顺序获取页面图像;
根据如权利要求10-13中任一项所述的方法计算按所述时间顺序获取的所述页面图像的图像完整度;
选取图像完整度大于第一比值的第一幅页面图像,相应地判定页面开始加载;
将所述页面加载的过程中的最后一张页面图像的图像完整度与第三比值相比较,在所述最后一张页面图像的图像完整度大于第三比值的情况下,选取图像完整度大于第二比值的第一幅页面图像和与所述最后一张页面图像的图像完整度之比大于第四比值的第一幅页面图像中更早的一幅页面图像,并判定页面加载完毕,其中所述第一比值小于所述第三比值,所述第三比值小于所述第二比值,所述第四比值大于第三比值;以及
在所述最后一张页面图像的图像完整度小于第三比值的情况下,判断页面加载失败。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610029464.4A CN106971386B (zh) | 2016-01-14 | 2016-01-14 | 判断图像完整度及页面加载度的方法、装置和客户端设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610029464.4A CN106971386B (zh) | 2016-01-14 | 2016-01-14 | 判断图像完整度及页面加载度的方法、装置和客户端设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106971386A CN106971386A (zh) | 2017-07-21 |
CN106971386B true CN106971386B (zh) | 2020-03-20 |
Family
ID=59334200
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610029464.4A Active CN106971386B (zh) | 2016-01-14 | 2016-01-14 | 判断图像完整度及页面加载度的方法、装置和客户端设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106971386B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111221588A (zh) * | 2019-11-15 | 2020-06-02 | 北京金和网络股份有限公司 | 地图多分类异步加载及去重方法与装置 |
CN112363919B (zh) * | 2020-11-02 | 2024-02-13 | 北京云测信息技术有限公司 | 用户界面ai自动化测试方法、装置、设备和存储介质 |
CN112597893A (zh) * | 2020-12-23 | 2021-04-02 | 上海布鲁可积木科技有限公司 | 判断完整图标的方法及系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102760293A (zh) * | 2012-06-14 | 2012-10-31 | 南京信息工程大学 | 基于距离矩阵的图像质量评价方法 |
CN104361574A (zh) * | 2014-10-14 | 2015-02-18 | 南京信息工程大学 | 一种基于稀疏表示的无参考彩色图像质量评价方法 |
CN104850823A (zh) * | 2015-03-26 | 2015-08-19 | 浪潮软件集团有限公司 | 一种虹膜图像的质量评价方法及装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010521272A (ja) * | 2007-03-16 | 2010-06-24 | エスティーアイ・メディカル・システムズ・エルエルシー | 標準化された撮像データを実現するために撮像デバイスに自動品質フィードバックを与える方法 |
-
2016
- 2016-01-14 CN CN201610029464.4A patent/CN106971386B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102760293A (zh) * | 2012-06-14 | 2012-10-31 | 南京信息工程大学 | 基于距离矩阵的图像质量评价方法 |
CN104361574A (zh) * | 2014-10-14 | 2015-02-18 | 南京信息工程大学 | 一种基于稀疏表示的无参考彩色图像质量评价方法 |
CN104850823A (zh) * | 2015-03-26 | 2015-08-19 | 浪潮软件集团有限公司 | 一种虹膜图像的质量评价方法及装置 |
Non-Patent Citations (1)
Title |
---|
数字图像被动取证与反取证技术研究;曹雁军;《中国博士学位论文全文数据库 信息科技辑》;20140615(第06期);第24-30页 * |
Also Published As
Publication number | Publication date |
---|---|
CN106971386A (zh) | 2017-07-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9390475B2 (en) | Backlight detection method and device | |
CN109791695B (zh) | 基于图像块的运动向量确定所述块的方差 | |
CN110399842B (zh) | 视频处理方法、装置、电子设备及计算机可读存储介质 | |
CN110083740B (zh) | 视频指纹提取及视频检索方法、装置、终端及存储介质 | |
CN108961183B (zh) | 图像处理方法、终端设备及计算机可读存储介质 | |
CN106971386B (zh) | 判断图像完整度及页面加载度的方法、装置和客户端设备 | |
CN112055244B (zh) | 图像获取方法、装置、服务器和电子设备 | |
CN113538271A (zh) | 图像显示方法、装置、电子设备和计算机可读存储介质 | |
CN112073718B (zh) | 一种电视机花屏检测方法、装置、计算机设备及储存介质 | |
CN111428740A (zh) | 网络翻拍照片的检测方法、装置、计算机设备及存储介质 | |
CN115330657B (zh) | 一种海洋探测图像的处理方法、装置和服务器 | |
CN116883336A (zh) | 图像处理方法、装置、计算机设备及介质 | |
CN115278104B (zh) | 一种图像亮度调整方法、装置、电子设备及存储介质 | |
CN113391779B (zh) | 类纸屏幕的参数调节方法、装置及设备 | |
CN115797267A (zh) | 图像质量评估方法、系统、电子设备和存储介质 | |
CN110874814A (zh) | 一种图像处理方法、图像处理装置及终端设备 | |
CN114998172A (zh) | 图像处理方法及相关系统 | |
US10679336B2 (en) | Detecting method, detecting apparatus, and computer readable storage medium | |
CN109996017B (zh) | 一种图像的调整方法及其终端 | |
US20220075583A1 (en) | Information processing method, server, terminal, and computer storage medium | |
CN112580638B (zh) | 文本检测方法、装置、存储介质及电子设备 | |
CN116600137B (zh) | 视频图像压缩存储或解压方法、装置、设备及介质 | |
CN114119609B (zh) | 图像污点浓度的检测方法、装置、设备及存储介质 | |
CN115601606B (zh) | 一种门店状态检测方法、装置、设备及存储介质 | |
CN114125344B (zh) | 视频处理装置及方法、监视器设备、计算机设备、介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20200709 Address after: 310052 room 508, floor 5, building 4, No. 699, Wangshang Road, Changhe street, Binjiang District, Hangzhou City, Zhejiang Province Patentee after: Alibaba (China) Co.,Ltd. Address before: 510627 Guangdong city of Guangzhou province Whampoa Tianhe District Road No. 163 Xiping Yun Lu Yun Ping B radio square 14 storey tower Patentee before: GUANGZHOU UCWEB COMPUTER TECHNOLOGY Co.,Ltd. |