CN112416707B - 一种链接检测方法及装置 - Google Patents

一种链接检测方法及装置 Download PDF

Info

Publication number
CN112416707B
CN112416707B CN202011280258.3A CN202011280258A CN112416707B CN 112416707 B CN112416707 B CN 112416707B CN 202011280258 A CN202011280258 A CN 202011280258A CN 112416707 B CN112416707 B CN 112416707B
Authority
CN
China
Prior art keywords
link
classification
data acquisition
data server
target link
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011280258.3A
Other languages
English (en)
Other versions
CN112416707A (zh
Inventor
巩卫卫
孙萌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing 58 Information Technology Co Ltd
Original Assignee
Beijing 58 Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing 58 Information Technology Co Ltd filed Critical Beijing 58 Information Technology Co Ltd
Priority to CN202011280258.3A priority Critical patent/CN112416707B/zh
Publication of CN112416707A publication Critical patent/CN112416707A/zh
Application granted granted Critical
Publication of CN112416707B publication Critical patent/CN112416707B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3003Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3006Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/955Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • G06F16/9566URL specific, e.g. using aliases, detecting broken or misspelled links

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Mathematical Physics (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请示出了一种链接检测方法及装置。通过本申请,可以根据多个分类标签自动生成目标链接,且可以生成多个不同的目标链接,然后自动化检测各个目标链接是否为无效链接,不需要技术人员的全程参与,降低了技术人员的工作量,进而降低了人工成本。在本申请中,由于全程自动化检测,规避了人的生理特性以及人对检测工作的熟练度的影响,从而可以减少整体检测流程需要耗费的时间,进而可以提高检测效率。其次,在本申请中,至少根据多个分类标签生成目标链接可以为多个,可以尽可能地使得数据服务端中的各个页面的链接都能被检测,提高检测的覆盖度,尽可能地保证无效链接均能被检测出来。

Description

一种链接检测方法及装置
技术领域
本申请涉及计算机技术领域,特别是涉及一种链接检测方法及装置。
背景技术
随着互联网的快速发展,对外提供web数据服务的数据服务端越来越多,当数据服务端的数据逻辑或者数据库的路径变更时,通过数据服务端之前的链接可能无法连接到数据服务端,之前的链接就成为了无效链接。此时,如果用户在浏览器中输入的链接是无效链接,则就无法访问到数据服务端中的页面,这样会降低用户的体验。
因此,需要对数据服务端中的所有页面的链接进行检测,以确保不存在无效链接,之后再将数据服务端中的页面正式上线。
发明内容
本申请示出了一种链接检测方法及装置。
第一方面,本申请示出了一种链接检测方法,所述方法包括:
基于JAVA代理对象从分类标签数据库获取多个分类标签;
至少根据所述多个分类标签生成目标链接;
基于所述目标链接向数据服务端发送数据获取请求;
接收所述数据服务端根据所述数据获取请求返回的数据获取响应;
根据所述数据获取响应确定所述目标链接是否为无效链接。
在一个可能的实现方式中,所述基于JAVA代理对象从分类标签数据库获取多个分类标签,包括:
创建JAVA代理对象;
基于所述JAVA代理对象从分类标签数据库获取所述多个分类标签;
获取所述JAVA代理对象得到的所述多个分类标签。
在一个可能的实现方式中,所述至少根据所述多个分类标签生成目标链接,包括:
从所述多个分类标签中选择一个分类标签,将预设链接与选择的分类标签拼接,得到所述目标链接;
或者,
从所述多个分类标签中选择至少两个分类标签,所述至少两个分类标签分别属于不同的分类级别,将预设链接与至少两个分类标签拼接,得到所述目标链接。
在一个可能的实现方式中,所述根据所述数据获取响应确定所述目标链接是否为无效链接,包括:
获取所述数据获取响应中的状态码;
在状态码为第一预设状态码的情况下,确定所述目标链接为无效链接;
在状态码为第二预设状态码的情况下,确定所述目标链接为有效链接。
在一个可能的实现方式中,所述方法还包括:
在根据所述数据获取响应确定出所述目标链接为无效链接的情况下,再次向所述数据服务端发送所述数据获取请求;
接收所述服务端根据再次发送的数据获取请求返回的数据获取响应;
根据所述再次发送的数据获取请求返回的数据获取响应,确定所述目标链接为是否为无效链接。
在一个可能的实现方式中,所述方法还包括:
在根据所述数据获取响应确定出所述目标链接为无效链接的情况下,确定向所述数据服务端发送所述数据获取请求的已发送次数是否达到预设次数;
在所述已发送次数未达到预设次数的情况下,再次向所述数据服务端发送所述数据获取请求;
在所述已发送次数已达到预设次数的情况下,确定所述目标链接为无效链接。
在一个可能的实现方式中,所述方法还包括:
在确定出所述目标链接为无效链接的情况下,在预设文件中记录所述目标链接,和/或,输出用于指示所述目标链接为无效链接的检测报告。
在一个可能的实现方式中,所述方法还包括:
确定所述数据服务端的版本是否发生变化;
在所述数据服务端的版本发生变化的情况下,执行所述基于JAVA代理对象从分类标签数据库获取多个分类标签的步骤。
在一个可能的实现方式中,所述确定所述数据服务端的版本是否发生变化,包括:
获取电子设备中存储的所述数据服务端的已存储版本号;
从所述数据服务端中获取所述数据服务端的当前版本号;
在所述已存储版本号与所述当前版本号不同的情况下,确定所述数据服务端的版本发生变化;
在所述已存储版本号与所述当前版本号相同的情况下,确定所述数据服务端的版本未发生变化。
在一个可能的实现方式中,所述方法还包括:
在所述已存储版本号与所述当前版本号不同的情况下,使用所述当前版本号替换所述电子设备中存储的所述已存储版本号。
第二方面,本申请示出了一种链接检测装置,所述装置包括:
获取模块,用于基于JAVA代理对象从分类标签数据库获取多个分类标签;
生成模块,用于至少根据所述多个分类标签生成目标链接;
发送模块,用于基于所述目标链接向数据服务端发送数据获取请求;
接收模块,用于接收所述数据服务端根据所述数据获取请求返回的数据获取响应;
第一确定模块,用于根据所述数据获取响应确定所述目标链接是否为无效链接。
在一个可能的实现方式中,所述获取模块包括:
创建单元,用于创建JAVA代理对象;
第一获取单元,用于基于所述JAVA代理对象从分类标签数据库获取所述多个分类标签;
第二获取单元,用于获取所述JAVA代理对象得到的所述多个分类标签。
在一个可能的实现方式中,所述生成模块包括:
第一选择单元,用于从所述多个分类标签中选择一个分类标签,第一拼接单元,用于将预设链接与选择的分类标签拼接,得到所述目标链接;
或者,
第二选择单元,用于从所述多个分类标签中选择至少两个分类标签,所述至少两个分类标签分别属于不同的分类级别,第二拼接单元,用于将预设链接与至少两个分类标签拼接,得到所述目标链接。
在一个可能的实现方式中,所述第一确定模块包括:
第三获取单元,用于获取所述数据获取响应中的状态码;
第一确定单元,用于在状态码为第一预设状态码的情况下,确定所述目标链接为无效链接;
第二确定单元,用于在状态码为第二预设状态码的情况下,确定所述目标链接为有效链接。
在一个可能的实现方式中,所述发送模块还用于:在根据所述数据获取响应确定出所述目标链接为无效链接的情况下,再次向所述数据服务端发送所述数据获取请求;
所述接收模块还用于:接收所述服务端根据再次发送的数据获取请求返回的数据获取响应;
所述第一确定模块还用于:根据所述再次发送的数据获取请求返回的数据获取响应,确定所述目标链接为是否为无效链接。
在一个可能的实现方式中,所述装置还包括:
第二确定模块,用于在根据所述数据获取响应确定出所述目标链接为无效链接的情况下,确定向所述数据服务端发送所述数据获取请求的已发送次数是否达到预设次数;
所述发送模块还用于:在所述已发送次数未达到预设次数的情况下,再次向所述数据服务端发送所述数据获取请求;
第三确定模块,用于在所述已发送次数已达到预设次数的情况下,确定所述目标链接为无效链接。
在一个可能的实现方式中,所述装置还包括:
记录模块,用于在确定出所述目标链接为无效链接的情况下,在预设文件中记录所述目标链接,和/或,输出模块,用于输出用于指示所述目标链接为无效链接的检测报告。
在一个可能的实现方式中,所述装置还包括:
第四确定模块,用于确定所述数据服务端的版本是否发生变化;
所述获取模块还用于:在所述数据服务端的版本发生变化的情况下,基于JAVA代理对象从分类标签数据库获取多个分类标签。
在一个可能的实现方式中,所述第四确定模块包括:
第四获取单元,用于获取电子设备中存储的所述数据服务端的已存储版本号;
第五获取单元,用于从所述数据服务端中获取所述数据服务端的当前版本号;
第三确定单元,用于在所述已存储版本号与所述当前版本号不同的情况下,确定所述数据服务端的版本发生变化;
第四确定单元,用于在所述已存储版本号与所述当前版本号相同的情况下,确定所述数据服务端的版本未发生变化。
在一个可能的实现方式中,所述第四确定模块还包括:
替换单元,用于在所述已存储版本号与所述当前版本号不同的情况下,使用所述当前版本号替换所述电子设备中存储的所述已存储版本号。
第三方面,本申请示出了一种电子设备,所述电子设备包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为执行如第一方面所述的链接检测方法。
第四方面,本申请示出了一种非临时性计算机可读存储介质,当所述存储介质中的指令由电子设备的处理器执行时,使得电子设备能够执行如第一方面所述的链接检测方法。
第五方面,本申请示出了一种计算机程序产品,当所述计算机程序产品中的指令由电子设备的处理器执行时,使得电子设备能够执行如第一方面所述的链接检测方法。
本申请提供的技术方案可以包括以下有益效果:
在本申请中,基于JAVA代理对象从分类标签数据库获取多个分类标签。至少根据多个分类标签生成目标链接。基于目标链接向数据服务端发送数据获取请求。接收数据服务端根据数据获取请求返回的数据获取响应。根据数据获取响应确定目标链接是否为无效链接。
通过本申请,可以根据多个分类标签自动生成目标链接,且可以生成多个不同的目标链接,然后自动化检测各个目标链接是否为无效链接,不需要技术人员的全程参与,降低了技术人员的工作量,进而降低了人工成本。
另外,在技术人员人工检测时由于受到人的生理特性以及人对检测工作的熟练度的影响,会使得整体检测流程需要耗费较长时间,导致检测效率较低。而在本申请中,由于全程自动化检测,规避了人的生理特性以及人对检测工作的熟练度的影响,从而可以减少整体检测流程需要耗费的时间,进而可以提高检测效率。
其次,在本申请中,至少根据多个分类标签生成目标链接可以为多个,可以尽可能地使得数据服务端中的各个页面的链接都能被检测,也即,可以尽可能地覆盖数据服务端中的各个页面的链接,提高检测的覆盖度,以尽可能地避免漏检,也即,尽可能地保证无效链接均能被检测出来。
附图说明
图1是本申请的一种标签的分类示意图。
图2是本申请的一种标签的分类示意图。
图3是本申请的一种链接检测方法的步骤流程图.
图4是本申请的一种链接检测方法的步骤流程图。
图5是本申请的一种链接检测装置的结构框图。
图6是本申请示出的一种电子设备的框图。
图7是本申请示出的一种电子设备的框图。
具体实施方式
为使本申请的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本申请作进一步详细的说明。
在本申请中,数据服务端中的内容会被分类,且可以按照树形的级联形式分类。
例如,数据服务端中的内容可以按照一级分类划分为多个不同的一级分类标签。每一个一级分类标签分别可以按照二级分类又可以划分为多个不同的二级分类标签。每一个二级分类标签分别可以按照三级分类又划分为多个不同的三级分类标签,等等,以此类推,具体分类层级可以根据实际情况而定,在此不做详述。
在一个例子中,假设数据服务端是汽车服务类的数据服务端,数据服务端中包括很多关于汽车服务的内容,这些内容可以划分为二手车、新车以及租车等多个一级分类标签。
以一级分类标签“二手车类”为例进行举例说明,其他一级分类标签与“二手车类”类似,不再一一举例。
一级分类标签“二手车类”又可以通过“车型”-“品牌”-“车系”等层级进行划分。
其中,“车型”为二级分类标签,“品牌”为三级分类标签以及“车系”为四级分类标签等。
例如,一级分类标签“二手车类”下的二级分类标签“车型”包括“SUV(sportutility vehicle,运动型多用途汽车)”、“轿车”以及“MPV(multi-Purpose Vehicles,多用途汽车)”等二级分类标签。
各个二级分类标签下的“品牌”可以包括多个,例如,二级分类标签“轿车”下的“品牌”可以包括“奥迪”、“大众”以及“本田”等三级分类标签。
各个三级分类标签下的“车系”可以包括多个,例如,二级分类标签“轿车”下的三级分类标签“奥迪”下的“车系”可以包括A3、A4以及A6等,二级分类标签“轿车”下的三级分类标签“本田”下的“车系”可以包括飞度和思域等。
如此,上述例子中的树形的级联形式的分类可以如图1所示,该级联形式的分类可以存储在分类标签数据库中,例如CMCS数据管理系统等。
其中,用户可以通过数据服务端的链接访问数据服务端中的内容。数据服务端中包括多个页面,每一个页面都有各自的链接,因此,用户可以通过数据服务端中的页面的链接访问其需要访问的页面。其中,链接即为对数据服务端中的内容进行分类后的分类标签的拼接。
链接可以包括URL(Uniform Resource Locator,统一资源定位系统)等。
例如,假设需要访问列表页,该列表页中包括帖子列表,帖子列表中包括至少一个帖子,帖子可以为车型为“轿车”中的品牌为“奥迪”的A3车系的二手车的帖子,则该列表页的URL可以为:“http://www.AA.com/ershouche/jiaoche/audi/A3”。
其中,在上述URL中,“AA”为数据服务端的主机名称。
“ershouche”代表一级分类标签“二手车”。
“jiaoche”代表二级分类标签中的车型“轿车”。
“audi”代表三级分类标签中的品牌“奥迪”。
“A3”代表四级分类标签中的车系“A3”。
“ershouche/jiaoche/audi/A3”代表分类标签对应的listname,其可以作为用于搜索列表页中的帖子的索引。
其中,假设用户控制浏览器显示了数据服务端中的一个页面,该页面中包括一个按钮,该按钮中包括有该列表页的URL,点击该按钮可以控制浏览器获取并显示该列表页,在用户需要浏览该列表页的情况下,用户可以点击该按钮,浏览器可以获取该按钮中的该列表页的URL,然后,浏览器生成包括该URL的数据获取请求,并将数据获取请求发送至数据服务端。
数据服务端接收该数据获取请求,解析该数据获取请求中的URL,得到代表分类标签的listname“ershouche/jiaoche/audi/A3”,然后解析出listname“ershouche/jiaoche/audi/A3”中的各个级别的分类标签:“ershouche”、“jiaoche”、“audi”以及“A3”。并在分类标签数据库中的树形的级联形式的分类中查找各个级别的分类标签“ershouche”、“jiaoche”、“audi”以及“A3”,并在查找到各个级别的分类标签“ershouche”、“jiaoche”、“audi”以及“A3”之后,就可以从帖子数据库中查找车型为“轿车”中的品牌为“奥迪”的A3车系的二手车的帖子,并根据车型为“轿车”中的品牌为“奥迪”的A3车系的二手车的帖子生成列表页,向浏览器返回该列表页。
浏览器接收该列表页,并显示该列表页,如此,用户就可以在浏览器上查看列表页,并在列表列上可以查看到车型为“轿车”中的品牌为“奥迪”的A3车系的二手车的各个帖子。
然而,有时候根据实际业务需求,数据服务端中的页面数据可能会更新,另外,随着数据服务端中的页面数据的更新,可以在分类标签数据库中的树形的级联形式的分类中更新分类,例如,在某些级分类下增加一些分类,或者删减某些级分类下的一些分类等。
在一个例子中,帖子数据库中增加了一些新的帖子,这些帖子为:车型为“皮卡”中的品牌为“奥迪”的O1车系的二手车的帖子。
为了使得用户之后能够查询包括新的帖子的列表页,技术人员需要在分类标签数据库中的树形的级联形式的分类中添加分类。
例如,添加流程包括:添加二级分类标签“皮卡”,并将二级分类标签“皮卡”与三级分类标签“奥迪”关联,以及将二级分类标签“皮卡”与一级分类标签“二手车”关联,以及,还可以添加四级分类标签“O1”,并将四级分类标签“O1”与三级分类标签“奥迪”关联,从而得到如图2所示的树形的级联形式的分类。
其中,包括新的帖子的列表页的URL可以为:“http://www.AA.com/ershouche/pickup/audi/O1”。
其中,在上述URL中,“AA”为数据服务端的主机名称。
“ershouche”代表一级分类标签“二手车”。
“pickup”代表二级分类标签中的车型“皮卡”。
“audi”代表三级分类标签中的品牌“奥迪”。
“O1”代表四级分类标签中的车系“O1”。
“ershouche/pickup/audi/O1”代表分类标签对应的listname,其可以作为用于搜索列表页中的帖子的索引。
其中,假设用户控制浏览器显示了数据服务端中的一个页面,该页面中包括一个按钮,该按钮中包括有新的帖子的列表页的URL,点击该按钮可以控制浏览器获取并显示包括新的帖子的列表页,在用户需要浏览包括新的帖子的列表页的情况下,用户可以点击该按钮,浏览器可以获取该按钮中的包括新的帖子的列表页的URL,然后,浏览器生成包括该URL的数据获取请求,并将数据获取请求发送至数据服务端。
数据服务端接收该数据获取请求,解析该数据获取请求中的URL,得到代表分类标签的listname“ershouche/pickup/audi/O1”,然后解析出listname“ershouche/pickup/audi/O1”中的各个级别的分类标签:“ershouche”、“pickup”、“audi”以及“O1”。并在分类标签数据库中的树形的级联形式的分类中查找各个级别的分类标签“ershouche”、“pickup”、“audi”以及“O1”,并在查找到各个级别的分类标签“ershouche”、“pickup”、“audi”以及“O1”之后,就可以从帖子数据库中查找车型为“皮卡”中的品牌为“奥迪”的O1车系的二手车的帖子,并根据车型为“皮卡”中的品牌为“奥迪”的O1车系的二手车的帖子生成列表页,向浏览器返回该列表页。
浏览器接收该列表页,并显示该列表页,如此,用户就可以在浏览器上查看列表页,并在列表列上可以查看到车型为“皮卡”中的品牌为“奥迪”的O1车系的二手车的各个帖子。
然而,有时候技术人员在分类标签数据库中执行上述添加流程的过程中可能会出错,例如,未成功添加二级分类标签“皮卡”,或者,未将二级分类标签“皮卡”与三级分类标签“奥迪”关联,或者,未将二级分类标签“皮卡”与一级分类标签“二手车”关联,或者,未添加四级分类标签“O1”等等。
这样,数据服务端在接收到该数据获取请求,解析出listname“ershouche/pickup/audi/O1”中的各个级别的分类标签:“ershouche”、“pickup”、“audi”以及“O1”之后,在分类标签数据库中的树形的级联形式的分类中就查找不到路径““ershouche”-“pickup”-“audi”-“O1””,从而就不会从帖子数据中查找车型为“皮卡”中的品牌为“奥迪”的O1车系的二手车的帖子,进而无法向浏览器返回车型为“皮卡”中的品牌为“奥迪”的O1车系的二手车的帖子,导致用户无法查看到车型为“皮卡”中的品牌为“奥迪”的O1车系的二手车的帖子,这样就会降低用户体验。
其中,上述情况中,URL“http://www.AA.com/ershouche/pickup/audi/O1”即为无效链接,或者称为死链。
为了避免降低用户体验,需要检测数据服务端中的各个页面的链接中是否存在无效链接,在存在无效链接的情况下,需要技术人员及时介入,以消除无效链接,进而避免出现用户在浏览器显示的页面中显示一个按钮,且按钮包括一个链接,但是浏览器根据该链接无法获取页面的情况,进而避免降低用户体验。
为了检测数据服务端中的各个页面的链接中是否存在无效链接,例如,检测人员可以串行人工检测数据服务端中的各个页面的链接中是否存在无效链接,然而,由于数据服务端中的各个页面的链接的数量庞大,因此,上述检测方式会导致检测工作量大,耗时较长,且人工成本较高。
因此,为了降低人工检测的工作量和耗时,进而进而降低人工成本,本申请示出了一种链接检测方法的步骤流程图,该方法应用于电子设备,参见图3,该方法具体可以包括如下步骤:
在步骤S101中,基于JAVA代理对象从分类标签数据库获取多个分类标签。
在本申请中,分类标签位于分类标签数据库中,分类标签数据库包括CMCS数据管理系统等。
在本申请一个实施例中,在需要从分类标签数据库获取多个分类标签时,在一种方式中,可以建立与分类标签数据库之间的连接,即,打通分类标签数据库,然后再从分类标签数据库中获取多个分类标签。
具体地,可以创建JAVA代理对象,例如使用proxy factory创建JAVA代理对象等,通过JAVA代理对象调用分类标签数据库,以实现建立JAVA代理对象与分类标签数据库之间的连接,然后基于JAVA代理对象调用获取函数从分类标签数据库获取多个分类标签,然后电子设备再获取JAVA代理对象得到的多个分类标签。其中,获取函数可以包括:getAllListName函数等。
在步骤S102中,至少根据多个分类标签生成目标链接。
在本申请一个实施例中,可以从多个分类标签中选择一个分类标签,将预设链接与选择的分类标签拼接,得到目标链接。
或者,在本申请另一个实施例中,可以从多个分类标签中选择至少两个分类标签,至少两个分类标签分别属于不同的分类级别,将预设链接与至少两个分类标签拼接,得到目标链接。
其中,预设链接包括协议头以及数据服务端的主机地址等,例如预设链接包括“http://www.AA.com/”,其中,“http://”为http协议的协议头,“www.AA.com”为数据服务端的主机地址。
在本申请一个实施例中,可以封装GetListNameState函数,然后使用getlistnamestate函数来至少根据多个分类标签生成目标链接。
在步骤S103中,基于目标链接向数据服务端发送数据获取请求。
在本申请中,电子设备可以生成携带目标链接的数据获取请求,数据获取请求包括http请求等,然后向数据服务端发送数据获取请求。
之后数据服务端可以接收该数据获取请求,然后可以根据该目标链接尝试获取页面数据。
如果根据该目标链接获取到页面数据,则可以生成携带该页面数据的数据获取响应,并向电子设备返回该数据获取响应。
如果根据该目标链接未获取到页面数据,则可以生成数据获取响应(不携带页面数据),并向电子设备返回该数据获取响应。
在步骤S104中,接收数据服务端根据数据获取请求返回的数据获取响应。
在步骤S105中,根据数据获取响应确定目标链接是否为无效链接。
在本申请一个实施例中,数据服务端向电子设备返回的数据获取响应中可以包括状态码,用于指示数据获取响应的状态。
例如,电子设备向数据服务端发送的数据获取请求可以包括http(HyperTextTransfer Protocol,超文本传输协议)请求等,数据服务端向电子设备返回的数据获取响应可以包括http响应等,http响应中可以包括状态码,用于指示http响应的状态等。
如果数据服务端根据数据获取请求中的目标链接成功获取到了页面数据,并将页面数据加载至数据获取响应中,以及可以正常地向电子设备返回数据获取响应,则数据服务端在向电子设备返回数据获取响应之前,会在数据获取响应中的用于存储状态码的字段中存储第二预设状态码,用于指示已成功根据目标链接获取到页面数据。
第二预设状态码可以包括“200”等,状态码“200”表示:“请求已成功,请求所希望的响应头或数据体将随此该数据获取响应返回,出现此状态码是表示正常状态”。
如果数据服务端根据数据获取请求中的目标链接无法成功获取到页面数据,也就无法向电子设备正常地返回页面数据,虽然无法向电子设备正常地返回页面数据,但是仍旧需要向电子设备返回数据获取响应。
但是由于无法向电子设备正常地返回页面数据,则数据服务端在向电子设备返回数据获取响应之前,可以在数据获取响应中的用于存储状态码的字段中存储第一预设状态码,用于指示未成功根据目标链接返回页面数据。
第二预设状态码可以包括“404”等,状态码“404”表示:“请求失败,请求所希望得到的页面数据未被在数据服务器上发现”。
因此,在根据数据获取响应确定目标链接是否为无效链接时,可以获取数据获取响应中的状态码。在状态码为第一预设状态码的情况下,确定目标链接为无效链接。在状态码为第二预设状态码的情况下,将目标链接确定为有效链接。
在本申请中,基于JAVA代理对象从分类标签数据库获取多个分类标签。至少根据多个分类标签生成目标链接。基于目标链接向数据服务端发送数据获取请求。接收数据服务端根据数据获取请求返回的数据获取响应。根据数据获取响应确定目标链接是否为无效链接。
通过本申请,可以根据多个分类标签自动生成目标链接,且可以生成多个不同的目标链接,然后自动化检测各个目标链接是否为无效链接,不需要技术人员的全程参与,降低了技术人员的工作量,进而降低了人工成本。
另外,在技术人员人工检测时由于受到人的生理特性以及人对检测工作的熟练度的影响,会使得整体检测流程需要耗费较长时间,导致检测效率较低。而在本申请中,由于全程自动化检测,规避了人的生理特性以及人对检测工作的熟练度的影响,从而可以减少整体检测流程需要耗费的时间,进而可以提高检测效率。
其次,在本申请中,至少根据多个分类标签生成目标链接可以为多个,可以尽可能地使得数据服务端中的各个页面的链接都能被检测,也即,可以尽可能地覆盖数据服务端中的各个页面的链接,提高检测的覆盖度,以尽可能地避免漏检,也即,尽可能地保证无效链接均能被检测出来。
其中,在步骤S101中得到多个分类标签之后,在一种方式中,每次在执行步骤S102时,可以至少根据多个分类标签生成一个目标链接,然后针对生成的目标链接再执行步骤S103~步骤S105的流程,之后再执行步骤S102,以生成一个不同的目标链接,在对新生成的目标链接执行步骤S103~步骤S105的流程。也即,针对不同的目标链接是串行检测的流程。针对一个目标链接执行步骤S102~步骤S105的流程需要耗费一段时长,针对各个目标链接分别串行执行步骤S102~步骤S105的流程的耗时会基于该一段时长成倍增长,导致检测数据服务端中的各个页面的链接中是否存在无效链接的效率较低。
而在本申请另一实施例中,在步骤S101中得到多个分类标签之后,电子设备可以创建多个线程,然后控制每一个线程分别并行执行步骤S102~步骤S105的流程,且不同的线程生成的目标链接可以不同,以实现对不同的目标链接并行检测,也即,并行地检测数据服务端中的各个页面的链接是否为无效链接,从而可以节省时间,进而可以提高检测数据服务端中的各个页面的链接中是否存在无效链接的效率。
其中,在图3所示的实施例中,在需要触发电子设备启动检测数据服务端中的各个页面的链接中是否存在无效链接的流程时,在一个方式中,技术人员可以人工触发电子设备启动检测数据服务端中的各个页面的链接中是否存在无效链接的流程,但是由于需要技术人员参与,所以这样会提高人工成本。
因此,为了降低人工成本,在本申请另一个实施例中,可以通过自动的方式触发电子设备启动检测数据服务端中的各个页面的链接中是否存在无效链接的流程。
具体地,在一个实施例中,可以在电子设备中设置定时器,以使电子设备定期地执行图3所示的实施例。
具体地,在图3所示的实施例的基础之上,该方法还包括:
确定电子设备的当前时刻是否到达预设检测时刻。
在电子设备的的当前时刻到达预设检测时刻的情况下,确定需要检测数据服务端中的各个页面的链接中是否存在无效链接,然后可以开始执行步骤S101:基于JAVA代理对象从分类标签数据库获取多个分类标签。
在电子设备的当前时刻未到达预设检测时刻的情况下,返回继续确定电子设备的当前时刻是否到达预设检测时刻。
其中,事先可以在定时器中设置预设检测时刻,例如,设置每一天中哪些时刻为预设检测时刻等,技术人员可以根据实际情况而定,在此不做详述。
在前述实施例中,是定期的检测数据服务端中的各个页面的链接中是否存在无效链接。
然而,一段时间内可能并不存在数据服务端中的页面的链接中出现无效链接的条件,则数据服务端中的页面的链接在一段时间内实际可能并不会成为无效链接,在这种情况下,对数据服务端中的各个页面的链接进行一次检测就可以得到数据服务端中的各个页面的链接中不存在无效链接的检测结果,对数据服务端中的各个页面的链接多次重复进行检测的检测结果往往是相同的,因此,在这种情况下对数据服务端中的各个页面的链接多次重复进行检测是没有实际意义的,而且还会浪费电子设备更多的系统资源。
因此,为了节省电子设备的系统资源,在本申请另一实施例中,在数据服务端中的各个页面的链接可能存在无效链接的情况下,再对数据服务端中的各个页面的链接进行检测。
例如,在一种情况下,数据服务端升级,例如,数据服务端中增加了一些页面,但是未在分类标签数据库及时更新且这些页面涉及的分类标签以及涉及的分类标签之间的层级关系,这时候可能存在增加的页面的链接为无效链接的可能性。
因此,在数据服务端升级的情况下,可以检测数据服务端中的各个页面的链接中是否存在无效链接,以尽早发现无效链接,并尽快消除无效链接。
具体地,参见图4,在图3所示的实施例的基础之上,该方法还包括:
在步骤S201中,确定数据服务端的版本是否发生变化。
本步骤可以通过如下流程实现,包括:
2011、获取电子设备中存储的数据服务端的已存储版本号。
随着业务的发展,有时候可能需要对数据服务端升级,升级后的数据服务端的版本号往往大于升级前的数据服务端的版本号,或者,有时候可能需要对数据服务端回溯,回溯后的数据服务端的版本号往往小于回溯前的数据服务端的版本号。
在电子设备第一次检测数据服务端中的各个页面的链接中是否存在无效链接时,电子设备除了从数据服务端中请求页面的页面数据以外,还可以从数据服务端中获取数据服务端的当前版本号,并在电子设备中存储数据服务端的当前版本号,以供电子设备之后确定数据服务端的版本是否变化。
2012、从数据服务端中获取数据服务端的当前版本号。
其中,每当数据服务端升级之后,数据服务端就会对数据服务端中的用于存储版本号的特定的字段中存储的版本号进行更新,例如,使用升级后的版本号替换升级前的版本号,以使地数据服务端中的该特定的字段中存储的版本号是数据服务端当前实际的版本的版本号。
然而,数据服务端在升级之后,并不会向外部广播自己升级后的版本号,而是在外部需要的时候主动从数据服务端中获取数据服务端的升级后的版本号。
如此,电子设备可以周期性地与数据服务端交互,以从数据服务端中获取到数据服务端的当前版本号。
具体地,电子设备可以向数据服务端发送版本号获取请求,该获取请求用于获取数据服务端的当前版本号。数据服务端接收该获取请求,然后根据该获取请求获取在数据服务端中的特定的字段中存储的版本号,即为数据服务端的当前版本号,然后可以向电子设备发送数据服务端的当前版本号。电子设备接收数据服务端返回的当前版本号。
2013、在已存储版本号与当前版本号不同的情况下,确定数据服务端的版本发生变化。
在已存储版本号与当前版本号不同的情况下,说明数据服务端已升级或者已回溯,进而说明数据服务端的版本发生变化。
进一步地,在已存储版本号与当前版本号不同的情况下,电子设备还可以使用当前版本号替换电子设备中存储的已存储版本号,以使电子设备存储的版本号与数据服务端的实际的当前版本号相同。
2014、在已存储版本号与当前版本号相同的情况下,确定数据服务端的版本未发生变化。
在已存储版本号与当前版本号相同的情况下,说明数据服务端未升级且未回溯,进而说明数据服务端的版本未发生变化。
在数据服务端的版本发生变化的情况下,执行步骤S101:基于JAVA代理对象从分类标签数据库获取多个分类标签。
在数据服务端的版本未发生变化的情况下,返回执行步骤S201。
在本申请另一实施例中,在根据数据获取响应确定出目标链接为无效链接的情况下,可以在预设文件中记录目标链接,和/或,输出用于指示目标链接为无效链接的检测报告,以向技术人员提供该检测报告。
其中,技术人员可以根据预设文件中的目标链接确定出目标链接为无效链接,进而可以对数据服务端中分类标签数据库中的分类标签进行修改更新,以使分类标签数据库中的分类标签与数据服务端中的页面对应,进而消除无效链接。
在本申请中,在输出用于指示目标链接为无效链接的检测报告时,可以在电子设备的屏幕上显示用于指示目标链接为无效链接的检测报告,以供技术人员查看用于指示目标链接为无效链接的检测报告,或者,通过电子设备的音箱播放用于指示目标链接为无效链接的检测报告,以供技术人员感知用于指示目标链接为无效链接的检测报告,或者,向技术人员使用的终端设备发送用于指示目标链接为无效链接的检测报告,以使技术人员可以在其使用的终端设备上查看用于指示目标链接为无效链接的检测报告。具体可以通过邮件、互联网即时通讯工具、短信或PUSH等方式发送,本申请对具体的发送方式不做限定。
有时候,在图3所示的实施例中,在接收到数据服务端根据数据获取请求返回的数据获取响应之后,一个可能的结果是根据数据获取响应确定目标链接为无效链接,在这种情况下,电子设备会生成用于指示目标链接为无效链接的检测报告并输出该检测报告,以将该检测报告提供给技术人员。
但是,在图3所示的实施例的过程中,电子设备可能需要基于网络与数据服务端进行数据交互,例如,向数据服务端发送数据获取请求以及接收数据服务端返回的数据获取响应等,然而,如果电子设备的网络状态异常,则会导致电子设备与数据服务端之间的网络连接异常,这就可能会导致电子设备无法与数据服务端之间进行正常的数据交互,这就会影响对目标链接的检测。
例如,在一种可能的情况下,电子设备向数据服务端发送数据获取请求之后长时间得不到数据服务端的反馈,则就会默认根据目标链接无法从数据服务端中获取页面数据,进而默认目标链接为无效链接。
但是,在一种可能的情况下,向数据服务端发送数据获取请求之后,数据服务端返回的数据获取响应在传输过程中丢包或被篡改,导致电子设备接收到的数据获取响应不完整,例如,数据获取响应中的状态码丢失,而导致电子设备接收到的数据获取响应中不存在状态码或者或状态不为第二预设状态码,这样电子设备就会确定目标链接为无效链接。
但是,上述情况中确定目标链接为无效链接是由于电子设备与数据服务端之间的网络连接异常而导致的,并不是由于目标链接本身是无效链接而导致的,也即,这会出现检测结果不准确的情况。
因此,为了提高检测结果的准确性,在本申请另一实施例中,在图3所示的实施例的基础之上,在根据数据获取响应确定出目标链接为无效链接的情况下,可以再次向数据服务端发送该数据获取请求。然后接收服务端根据再次发送的该数据获取请求返回的数据获取响应。根据再次发送的数据获取请求返回的数据获取响应,确定目标链接为是否为无效链接。
本申请通过“再次向数据服务端发送该数据获取请求。然后接收服务端根据再次发送的该数据获取请求返回的数据获取响应。根据再次发送的数据获取请求返回的数据获取响应,确定目标链接为是否为无效链接”的方式,以尽可能地使得电子设备对目标链接进行多次检测,以尽可能地避免由于电子设备与数据服务端之间的网络连接异常对目标链接检测结果带来影响,进而提高检测结果的准确率。
具体地,在根据数据获取响应确定出目标链接为无效链接的情况下,电子设备可以借助unittest组件执行“再次向数据服务端发送该数据获取请求。然后接收服务端根据再次发送的该数据获取请求返回的数据获取响应。根据再次发送的数据获取请求返回的数据获取响应,确定目标链接为是否为无效链接”的流程。
另外,在根据数据获取响应确定出目标链接为有效链接的情况下,则说明广大用户通过目标链接从数据服务端中可以获取到页面数据,如此,电子设备可以结束对目标链接的检测流程,进一步地,也可以生成用于指示目标链接为有效链接的检测报告并输出该测试报告,以将该测试报告提供给技术人员。
然而,有时候实际上是目标链接本身是无效链接而使得根据数据获取响应确定出目标链接为无效链接的检测结果,并不是由于检测时临时出现的电子设备与数据服务端之间的网络连接异常而导致根据数据获取响应确定出目标链接为无效链接的检测结果,这样,无论电子设备重复执行多少次“再次向数据服务端发送该数据获取请求。然后接收服务端根据再次发送的该数据获取请求返回的数据获取响应。根据再次发送的数据获取请求返回的数据获取响应,确定目标链接为是否为无效链接”的流程,都会得到目标链接是无效链接的检测结果,在这种情况下,不需要无限制地重复执行“再次向数据服务端发送该数据获取请求。然后接收服务端根据再次发送的该数据获取请求返回的数据获取响应。根据再次发送的数据获取请求返回的数据获取响应,确定目标链接为是否为无效链接”的流程,否则会白白耗费电子设备的系统资源以及网络资源。
因此,为了节省电子设备的系统资源以及网络资源,在本申请另一实施例中,在图3所示的实施例的基础之上,该方法还包括:
在根据数据获取响应确定出目标链接为无效链接的情况下,可以确定向数据服务端发送数据获取请求的已发送次数是否达到预设次数。在已发送次数未达到预设次数的情况下,可以执行“再次向数据服务端发送该数据获取请求。然后接收服务端根据再次发送的该数据获取请求返回的数据获取响应。根据再次发送的数据获取请求返回的数据获取响应,确定目标链接为是否为无效链接”的流程。在已发送次数已达到预设次数的情况下,确定目标链接为无效链接。
在本申请中,在电子设备第一次向数据服务器发送该数据获取请求之后,电子设备可以设置发送次数初值,例如为1等,然后将数据获取请求的标识以及发送次数初值组成对应表项,并存储在数据获取请求的标识与发送次数之间的对应关系中。在第二次向数据服务器发送该数据获取请求之后,电子设备可以在数据获取请求的标识与发送次数之间的对应关系中,增加与该数据获取请求的标识相对应的发送次数,例如,在1的基础上增加1,得到2等。
在第三次、第四次.....以及第N次等向数据服务器发送该数据获取请求之后,可以参考上述在针对第二次向数据服务器发送该数据获取请求之后的操作流程,在此不做详述。
因此,在确定向数据服务端发送该数据获取请求的已发送次数是否达到预设次数时,电子设备可以在数据获取请求的标识与发送次数之间的对应关系中,查找与该数据获取请求的标识相对应的发送次数,并作为向数据服务端发送该数据获取请求的已发送次数,然后比较已发送次数与预设次数之间的大小。
预设次数可以包括3、5或8等,具体数值可以根据实际情况确定,在此不做详述。例如,可以根据最近一段时间的电子设备的网络状态来设置预设次数,在一个例子中,在电子设备的网络状态越稳定的情况下,则可以将预设次数设置地越低,在电子设备的网络状态越不稳定的情况下,则可以将预设次数设置地越高。
另外,在已发送次数已达到预设次数的情况下,则往往说明向数据服务端发送该数据获取请求的已发送次数已经较多,也即,执行“再次向数据服务端发送该数据获取请求。然后接收服务端根据再次发送的该数据获取请求返回的数据获取响应。根据再次发送的数据获取请求返回的数据获取响应,确定目标链接为是否为无效链接”的流程的次数已经较多,在这种情况下,通常是目标链接本身是无效链接,且是由于目标链接本身是无效链接而使得根据数据获取响应确定出目标链接为无效链接的检测结果,因此,可以不再向数据服务端发送该数据获取请求,可以结束流程,以节省电子设备的系统资源以及网络资源等。
需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于可选实施例,所涉及的动作并不一定是本申请所必须的。
参照图5,示出了本申请的一种链接检测装置的结构框图,该装置具体可以包括如下模块:
获取模块11,用于基于JAVA代理对象从分类标签数据库获取多个分类标签;
生成模块12,用于至少根据所述多个分类标签生成目标链接;
发送模块13,用于基于所述目标链接向数据服务端发送数据获取请求;
接收模块14,用于接收所述数据服务端根据所述数据获取请求返回的数据获取响应;
第一确定模块15,用于根据所述数据获取响应确定所述目标链接是否为无效链接。
在一个可能的实现方式中,所述获取模块包括:
创建单元,用于创建JAVA代理对象;
第一获取单元,用于基于所述JAVA代理对象从分类标签数据库获取所述多个分类标签;
第二获取单元,用于获取所述JAVA代理对象得到的所述多个分类标签。
在一个可能的实现方式中,所述生成模块包括:
第一选择单元,用于从所述多个分类标签中选择一个分类标签,第一拼接单元,用于将预设链接与选择的分类标签拼接,得到所述目标链接;
或者,
第二选择单元,用于从所述多个分类标签中选择至少两个分类标签,所述至少两个分类标签分别属于不同的分类级别,第二拼接单元,用于将预设链接与至少两个分类标签拼接,得到所述目标链接。
在一个可能的实现方式中,所述第一确定模块包括:
第三获取单元,用于获取所述数据获取响应中的状态码;
第一确定单元,用于在状态码为第一预设状态码的情况下,确定所述目标链接为无效链接;
第二确定单元,用于在状态码为第二预设状态码的情况下,确定所述目标链接为有效链接。
在一个可能的实现方式中,所述发送模块还用于:在根据所述数据获取响应确定出所述目标链接为无效链接的情况下,再次向所述数据服务端发送所述数据获取请求;
所述接收模块还用于:接收所述服务端根据再次发送的数据获取请求返回的数据获取响应;
所述第一确定模块还用于:根据所述再次发送的数据获取请求返回的数据获取响应,确定所述目标链接为是否为无效链接。
在一个可能的实现方式中,所述装置还包括:
第二确定模块,用于在根据所述数据获取响应确定出所述目标链接为无效链接的情况下,确定向所述数据服务端发送所述数据获取请求的已发送次数是否达到预设次数;
所述发送模块还用于:在所述已发送次数未达到预设次数的情况下,再次向所述数据服务端发送所述数据获取请求;
第三确定模块,用于在所述已发送次数已达到预设次数的情况下,确定所述目标链接为无效链接。
在一个可能的实现方式中,所述装置还包括:
记录模块,用于在确定出所述目标链接为无效链接的情况下,在预设文件中记录所述目标链接,和/或,输出模块,用于输出用于指示所述目标链接为无效链接的检测报告。
在一个可能的实现方式中,所述装置还包括:
第四确定模块,用于确定所述数据服务端的版本是否发生变化;
所述获取模块还用于:在所述数据服务端的版本发生变化的情况下,基于JAVA代理对象从分类标签数据库获取多个分类标签。
在一个可能的实现方式中,所述第四确定模块包括:
第四获取单元,用于获取电子设备中存储的所述数据服务端的已存储版本号;
第五获取单元,用于从所述数据服务端中获取所述数据服务端的当前版本号;
第三确定单元,用于在所述已存储版本号与所述当前版本号不同的情况下,确定所述数据服务端的版本发生变化;
第四确定单元,用于在所述已存储版本号与所述当前版本号相同的情况下,确定所述数据服务端的版本未发生变化。
在一个可能的实现方式中,所述第四确定模块还包括:
替换单元,用于在所述已存储版本号与所述当前版本号不同的情况下,使用所述当前版本号替换所述电子设备中存储的所述已存储版本号。
在本申请中,基于JAVA代理对象从分类标签数据库获取多个分类标签。至少根据多个分类标签生成目标链接。基于目标链接向数据服务端发送数据获取请求。接收数据服务端根据数据获取请求返回的数据获取响应。根据数据获取响应确定目标链接是否为无效链接。
通过本申请,可以根据多个分类标签自动生成目标链接,且可以生成多个不同的目标链接,然后自动化检测各个目标链接是否为无效链接,不需要技术人员的全程参与,降低了技术人员的工作量,进而降低了人工成本。
另外,在技术人员人工检测时由于受到人的生理特性以及人对检测工作的熟练度的影响,会使得整体检测流程需要耗费较长时间,导致检测效率较低。而在本申请中,由于全程自动化检测,规避了人的生理特性以及人对检测工作的熟练度的影响,从而可以减少整体检测流程需要耗费的时间,进而可以提高检测效率。
其次,在本申请中,至少根据多个分类标签生成目标链接可以为多个,可以尽可能地使得数据服务端中的各个页面的链接都能被检测,也即,可以尽可能地覆盖数据服务端中的各个页面的链接,提高检测的覆盖度,以尽可能地避免漏检,也即,尽可能地保证无效链接均能被检测出来。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
图6是本申请示出的一种电子设备800的框图。例如,电子设备800可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图6,电子设备800可以包括以下一个或多个组件:处理组件802,存储器804,电力组件806,多媒体组件808,音频组件810,输入/输出(I/O)的接口812,传感器组件814,以及通信组件816。
处理组件802通常控制电子设备800的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令,以完成上述方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。
存储器804被配置为存储各种类型的数据以支持在设备800的操作。这些数据的示例包括用于在电子设备800上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图像,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件806为电子设备800的各种组件提供电力。电源组件806可以包括电源管理系统,一个或多个电源,及其他与为电子设备800生成、管理和分配电力相关联的组件。
多媒体组件808包括在所述电子设备800和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当设备800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当电子设备800处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。
I/O接口812为处理组件802和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件814包括一个或多个传感器,用于为电子设备800提供各个方面的状态评估。例如,传感器组件814可以检测到设备800的打开/关闭状态,组件的相对定位,例如所述组件为电子设备800的显示器和小键盘,传感器组件814还可以检测电子设备800或电子设备800一个组件的位置改变,用户与电子设备800接触的存在或不存在,电子设备800方位或加速/减速和电子设备800的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件816被配置为便于电子设备800和其他设备之间有线或无线方式的通信。电子设备800可以接入基于通信标准的无线网络,如WiFi,运营商网络(如2G、3G、4G或5G),或它们的组合。在一个示例性实施例中,通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播操作信息。在一个示例性实施例中,所述通信组件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,电子设备800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器804,上述指令可由电子设备800的处理器820执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
图7是本申请示出的一种电子设备1900的框图。例如,电子设备1900可以被提供为一服务器。
参照图7,电子设备1900包括处理组件1922,其进一步包括一个或多个处理器,以及由存储器1932所代表的存储器资源,用于存储可由处理组件1922的执行的指令,例如应用程序。存储器1932中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理组件1922被配置为执行指令,以执行上述方法。
电子设备1900还可以包括一个电源组件1926被配置为执行电子设备1900的电源管理,一个有线或无线网络接口1950被配置为将电子设备1900连接到网络,和一个输入输出(I/O)接口1958。电子设备1900可以操作基于存储在存储器1932的操作系统,例如Windows ServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM或类似。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本申请的实施例可提供为方法、装置、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本申请的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本申请所提供的一种链接检测方法及装置,进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (18)

1.一种链接检测方法,其特征在于,所述方法包括:
基于JAVA代理对象从分类标签数据库获取多个分类标签;所述分类标签以树形级联的形式存储在所述分类标签数据库中;
至少根据所述多个分类标签生成目标链接;
基于所述目标链接向数据服务端发送数据获取请求;
接收所述数据服务端根据所述数据获取请求返回的数据获取响应;
根据所述数据获取响应确定所述目标链接是否为无效链接;
在根据所述数据获取响应确定出所述目标链接为无效链接的情况下,确定向所述数据服务端发送所述数据获取请求的已发送次数是否达到预设次数;
在所述已发送次数未达到预设次数的情况下,再次向所述数据服务端发送所述数据获取请求;接收所述服务端根据再次发送的数据获取请求返回的数据获取响应;根据所述再次发送的数据获取请求返回的数据获取响应,确定所述目标链接是否为无效链接;
在所述已发送次数已达到预设次数的情况下,确定所述目标链接为无效链接。
2.根据权利要求1所述的方法,其特征在于,所述基于JAVA代理对象从分类标签数据库获取多个分类标签,包括:
创建JAVA代理对象;
基于所述JAVA代理对象从分类标签数据库获取所述多个分类标签;
获取所述JAVA代理对象得到的所述多个分类标签。
3.根据权利要求1所述的方法,其特征在于,所述至少根据所述多个分类标签生成目标链接,包括:
从所述多个分类标签中选择一个分类标签,将预设链接与选择的分类标签拼接,得到所述目标链接;
或者,
从所述多个分类标签中选择至少两个分类标签,所述至少两个分类标签分别属于不同的分类级别,将预设链接与至少两个分类标签拼接,得到所述目标链接。
4.根据权利要求1所述的方法,其特征在于,所述根据所述数据获取响应确定所述目标链接是否为无效链接,包括:
获取所述数据获取响应中的状态码;
在状态码为第一预设状态码的情况下,确定所述目标链接为无效链接;
在状态码为第二预设状态码的情况下,确定所述目标链接为有效链接。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在确定出所述目标链接为无效链接的情况下,在预设文件中记录所述目标链接,和/或,输出用于指示所述目标链接为无效链接的检测报告。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
确定所述数据服务端的版本是否发生变化;
在所述数据服务端的版本发生变化的情况下,执行所述基于JAVA代理对象从分类标签数据库获取多个分类标签的步骤。
7.根据权利要求6所述的方法,其特征在于,所述确定所述数据服务端的版本是否发生变化,包括:
获取电子设备中存储的所述数据服务端的已存储版本号;
从所述数据服务端中获取所述数据服务端的当前版本号;
在所述已存储版本号与所述当前版本号不同的情况下,确定所述数据服务端的版本发生变化;
在所述已存储版本号与所述当前版本号相同的情况下,确定所述数据服务端的版本未发生变化。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
在所述已存储版本号与所述当前版本号不同的情况下,使用所述当前版本号替换所述电子设备中存储的所述已存储版本号。
9.一种链接检测装置,其特征在于,所述装置包括:
获取模块,用于基于JAVA代理对象从分类标签数据库获取多个分类标签;所述分类标签以树形级联的形式存储在所述分类标签数据库中;
生成模块,用于至少根据所述多个分类标签生成目标链接;
发送模块,用于基于所述目标链接向数据服务端发送数据获取请求;
接收模块,用于接收所述数据服务端根据所述数据获取请求返回的数据获取响应;
第一确定模块,用于根据所述数据获取响应确定所述目标链接是否为无效链接;
第二确定模块,用于在根据所述数据获取响应确定出所述目标链接为无效链接的情况下,确定向所述数据服务端发送所述数据获取请求的已发送次数是否达到预设次数;
所述发送模块还用于:在所述已发送次数未达到预设次数的情况下,再次向所述数据服务端发送所述数据获取请求;
所述接收模块还用于:接收所述服务端根据再次发送的数据获取请求返回的数据获取响应;
所述第一确定模块还用于:根据所述再次发送的数据获取请求返回的数据获取响应,确定所述目标链接是否为无效链接;
第三确定模块,用于在所述已发送次数已达到预设次数的情况下,确定所述目标链接为无效链接。
10.根据权利要求9所述的装置,其特征在于,所述获取模块包括:
创建单元,用于创建JAVA代理对象;
第一获取单元,用于基于所述JAVA代理对象从分类标签数据库获取所述多个分类标签;
第二获取单元,用于获取所述JAVA代理对象得到的所述多个分类标签。
11.根据权利要求9所述的装置,其特征在于,所述生成模块包括:
第一选择单元,用于从所述多个分类标签中选择一个分类标签,第一拼接单元,用于将预设链接与选择的分类标签拼接,得到所述目标链接;
或者,
第二选择单元,用于从所述多个分类标签中选择至少两个分类标签,所述至少两个分类标签分别属于不同的分类级别,第二拼接单元,用于将预设链接与至少两个分类标签拼接,得到所述目标链接。
12.根据权利要求9所述的装置,其特征在于,所述第一确定模块包括:
第三获取单元,用于获取所述数据获取响应中的状态码;
第一确定单元,用于在状态码为第一预设状态码的情况下,确定所述目标链接为无效链接;
第二确定单元,用于在状态码为第二预设状态码的情况下,确定所述目标链接为有效链接。
13.根据权利要求9所述的装置,其特征在于,所述装置还包括:
记录模块,用于在确定出所述目标链接为无效链接的情况下,在预设文件中记录所述目标链接,和/或,输出模块,用于输出用于指示所述目标链接为无效链接的检测报告。
14.根据权利要求9所述的装置,其特征在于,所述装置还包括:
第四确定模块,用于确定所述数据服务端的版本是否发生变化;
所述获取模块还用于:在所述数据服务端的版本发生变化的情况下,基于JAVA代理对象从分类标签数据库获取多个分类标签。
15.根据权利要求14所述的装置,其特征在于,所述第四确定模块包括:
第四获取单元,用于获取电子设备中存储的所述数据服务端的已存储版本号;
第五获取单元,用于从所述数据服务端中获取所述数据服务端的当前版本号;
第三确定单元,用于在所述已存储版本号与所述当前版本号不同的情况下,确定所述数据服务端的版本发生变化;
第四确定单元,用于在所述已存储版本号与所述当前版本号相同的情况下,确定所述数据服务端的版本未发生变化。
16.根据权利要求15所述的装置,其特征在于,所述第四确定模块还包括:
替换单元,用于在所述已存储版本号与所述当前版本号不同的情况下,使用所述当前版本号替换所述电子设备中存储的所述已存储版本号。
17.一种电子设备,其特征在于,所述电子设备包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为执行如权利要求1-8任一项所述的链接检测方法。
18.一种非临时性计算机可读存储介质,当所述存储介质中的指令由电子设备的处理器执行时,使得电子设备能够执行如权利要求1-8任一项所述的链接检测方法。
CN202011280258.3A 2020-11-16 2020-11-16 一种链接检测方法及装置 Active CN112416707B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011280258.3A CN112416707B (zh) 2020-11-16 2020-11-16 一种链接检测方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011280258.3A CN112416707B (zh) 2020-11-16 2020-11-16 一种链接检测方法及装置

Publications (2)

Publication Number Publication Date
CN112416707A CN112416707A (zh) 2021-02-26
CN112416707B true CN112416707B (zh) 2022-02-11

Family

ID=74831395

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011280258.3A Active CN112416707B (zh) 2020-11-16 2020-11-16 一种链接检测方法及装置

Country Status (1)

Country Link
CN (1) CN112416707B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113590987A (zh) * 2021-09-29 2021-11-02 飞狐信息技术(天津)有限公司 一种链接检测方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0529220A1 (en) * 1991-08-27 1993-03-03 International Business Machines Corporation Method for acquiring the identifier of a node in an input/output system
CN102663062A (zh) * 2012-03-30 2012-09-12 奇智软件(北京)有限公司 一种处理搜索结果中无效链接的方法及装置
US8458227B1 (en) * 2010-06-24 2013-06-04 Amazon Technologies, Inc. URL rescue by identifying information related to an item referenced in an invalid URL
CN106326485A (zh) * 2016-09-05 2017-01-11 郑州悉知信息科技股份有限公司 检测网站链接的方法和装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100469019C (zh) * 2007-01-08 2009-03-11 丁佑年 一种请求链接信号过滤统计系统及其应用
US8898137B1 (en) * 2010-06-24 2014-11-25 Amazon Technologies, Inc. URL rescue by execution of search using information extracted from invalid URL
CN104363252B (zh) * 2014-12-12 2016-09-28 北京奇虎科技有限公司 网站安全检测方法与装置
WO2019079950A1 (zh) * 2017-10-23 2019-05-02 深圳市云中飞网络科技有限公司 网络连接检测方法、装置、终端及计算机存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0529220A1 (en) * 1991-08-27 1993-03-03 International Business Machines Corporation Method for acquiring the identifier of a node in an input/output system
US8458227B1 (en) * 2010-06-24 2013-06-04 Amazon Technologies, Inc. URL rescue by identifying information related to an item referenced in an invalid URL
CN102663062A (zh) * 2012-03-30 2012-09-12 奇智软件(北京)有限公司 一种处理搜索结果中无效链接的方法及装置
CN106326485A (zh) * 2016-09-05 2017-01-11 郑州悉知信息科技股份有限公司 检测网站链接的方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
社会化标签与分类集成的信息导航结构及其应用研究;傅丽君;《中国优秀硕士学位论文全文数据库》;20131215;I143-34 *

Also Published As

Publication number Publication date
CN112416707A (zh) 2021-02-26

Similar Documents

Publication Publication Date Title
CN106605224B (zh) 信息搜索方法、装置、电子设备及服务器
CN107992604B (zh) 一种任务条目的分发方法及相关装置
CN112131410A (zh) 多媒体资源展示方法、装置、系统和存储介质
CN112270410A (zh) 在线推理服务系统、提供在线推理服务的方法及装置
CN112131466A (zh) 群组展示方法、装置、系统和存储介质
CN112416707B (zh) 一种链接检测方法及装置
CN113238881B (zh) 一种页面通信的方法及装置
CN111695064B (zh) 一种埋点加载方法及装置
CN104063424A (zh) 网页图片的展现方法和展现装置
CN106331076A (zh) 广告推送方法及装置
CN111246255B (zh) 视频推荐方法、装置、存储介质、终端及服务器
CN112000840B (zh) 一种业务对象的展示方法和装置
CN113343028A (zh) 意图确定模型的训练方法和装置
CN111079040B (zh) 资源嗅探方法、装置、终端、服务器及存储介质
CN112784151A (zh) 一种确定推荐信息的方法及相关装置
CN108012258B (zh) 虚拟sim卡的数据流量管理方法、装置、终端及服务器
CN112929751B (zh) 用于确定动作执行的系统、方法及终端
CN110457084B (zh) 一种加载方法及装置
CN110989987B (zh) 一种门户网页的生成方法、装置、客户端、服务器及存储介质
CN114239531A (zh) 模板推荐方法、装置、电子设备及存储介质
CN113128181A (zh) 一种信息处理方法及装置
CN107168693B (zh) 锁屏界面的显示方法及装置
CN111736890A (zh) 数据更新方法、装置、电子设备及存储介质
CN110689377A (zh) 一种数据检测方法、装置及电子设备
CN111526084A (zh) 信息处理方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant