WO2017071189A1 - 网页的访问方法、装置、设备及非易失性计算机存储介质 - Google Patents

网页的访问方法、装置、设备及非易失性计算机存储介质 Download PDF

Info

Publication number
WO2017071189A1
WO2017071189A1 PCT/CN2016/082981 CN2016082981W WO2017071189A1 WO 2017071189 A1 WO2017071189 A1 WO 2017071189A1 CN 2016082981 W CN2016082981 W CN 2016082981W WO 2017071189 A1 WO2017071189 A1 WO 2017071189A1
Authority
WO
WIPO (PCT)
Prior art keywords
proxy server
webpage
access
information
restricted
Prior art date
Application number
PCT/CN2016/082981
Other languages
English (en)
French (fr)
Inventor
庞凯
Original Assignee
百度在线网络技术（北京）有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 百度在线网络技术（北京）有限公司 filed Critical 百度在线网络技术（北京）有限公司
Priority to EP16858633.7A priority Critical patent/EP3273362A4/en
Priority to US15/745,987 priority patent/US20180225387A1/en
Priority to JP2017548061A priority patent/JP6488508B2/ja
Publication of WO2017071189A1 publication Critical patent/WO2017071189A1/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/957—Browsing optimisation, e.g. caching or content distillation
    • G06F16/9574—Browsing optimisation, e.g. caching or content distillation of access to content, e.g. by caching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/955—Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • G06F16/9566—URL specific, e.g. using aliases, detecting broken or misspelled links
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/563—Data redirection of data network streams

Definitions

  • the present disclosure relates to Internet technologies, and in particular, to a method, an apparatus, a device, and a non-volatile computer storage medium for accessing a webpage.
  • the user needs to use a related keyword, for example, a proxy server to publish a website, etc., to perform a search operation to obtain a website portal of the publishing proxy server.
  • the user accesses the obtained website of the publishing proxy server, and uses the published proxy server to separately perform the access proxy setting to enable access to the webpages by using the available proxy servers.
  • the operation is complicated, the operation time is long, and the success rate is not high, thereby reducing the efficiency and reliability of webpage access.
  • aspects of the present disclosure provide a method, an apparatus, a device, and a non-volatile computer storage medium for accessing a webpage to improve efficiency and reliability of webpage access.
  • An aspect of the present disclosure provides a method for accessing a webpage, including:
  • the web page is accessed using information of the proxy server.
  • the acquiring information of the proxy server includes:
  • the method further includes:
  • the proxy server set includes information of each of the at least one proxy server available for use according to the generation A collection of servers that obtain information about the proxy server.
  • the method further includes:
  • Another aspect of the present disclosure provides an access device for a webpage, including:
  • An obtaining unit configured to obtain information of a proxy server
  • the access unit is further configured to access the webpage by using information of the proxy server.
  • any possible implementation manner further provide an implementation manner, where the acquiring unit is specifically configured to
  • the device further comprising an acquisition unit
  • a set of proxy servers is obtained, the proxy server set including information of each of the at least one proxy server available for obtaining information of the proxy server according to the set of proxy servers.
  • an apparatus comprising:
  • One or more processors are One or more processors;
  • One or more programs the one or more programs being stored in the memory, when executed by the one or more processors:
  • the web page is accessed using information of the proxy server.
  • a non-volatile computer storage medium storing one or more programs when the one or more programs are executed by one device causes The device:
  • the web page is accessed using information of the proxy server.
  • the embodiment of the present disclosure determines that the access of the webpage is restricted, and further acquires the information of the proxy server, so that the information of the proxy server can be used to access the webpage, and since the information of the proxy server can be automatically acquired, Therefore, the user is not required to manually search the website of the publishing proxy server, the operation is simple, and the success rate is high, thereby improving the efficiency and reliability of the webpage access.
  • the user does not need to manually search the website of the publishing proxy server, and is completely transparent to the user, and can effectively improve the user's access experience.
  • FIG. 1 is a schematic flowchart of a method for accessing a webpage according to an embodiment of the present disclosure
  • FIG. 2 is a schematic structural diagram of an apparatus for accessing a webpage according to another embodiment of the present disclosure
  • FIG. 3 is a schematic structural diagram of an apparatus for accessing a webpage according to another embodiment of the present disclosure.
  • webpage involved in the present disclosure may also be referred to as a webpage or a webpage, and may be a webpage (Webpage) written by HyperText Markup Language (HTML), that is, an HTML webpage, or may also be It is a web page written in the HTML and Java language, that is, a Java Server Page (JSP), or a web page that can also be written in other languages.
  • HTML HyperText Markup Language
  • JSP Java Server Page
  • a web page may include a display block defined by one or more web page tags, such as HyperText Markup Language (HTML) tags, JSP tags, etc., called web page elements, such as text, images, hyperlinks. , buttons, input boxes, drop-down boxes, etc.
  • the terminals involved in the embodiments of the present disclosure may include, but are not limited to, a mobile phone, a personal digital assistant (PDA), a wireless handheld device, a tablet computer, and a personal computer (Personal Computer, PC). ), MP3 players, MP4 players, wearable devices (for example, smart glasses, smart watches, Smart bracelets, etc.).
  • PDA personal digital assistant
  • PC Personal Computer
  • MP3 players for example, MP3 players, MP4 players, wearable devices (for example, smart glasses, smart watches, Smart bracelets, etc.).
  • FIG. 1 is a schematic flowchart of a method for accessing a webpage according to an embodiment of the present disclosure, as shown in FIG. 1.
  • the execution body of 101 to 103 may be an application located in a local terminal, or may be a plug-in or a software development kit (SDK) functional unit located in an application of the local terminal, or may also be
  • SDK software development kit
  • the search engine in the server on the network side, or the distributed system on the network side, is not limited in this embodiment, and is not particularly limited in this embodiment.
  • the application may be a local application installed on the terminal, such as a browser application, a mobile phone Baidu application, or the like, or may be a web application (webApp) of the browser on the terminal.
  • the embodiment is not particularly limited thereto.
  • the server's website is simple to operate and has a high success rate, which improves the efficiency and reliability of web page access.
  • the webpage involved in the embodiment may be a webpage of the PC website, or may be a webpage of the mobile website, which is not specifically limited in this embodiment.
  • an access request of the webpage may be specifically acquired, and according to the access request of the webpage, determining that the webpage is inaccessible, and according to the access
  • the limit list determines that the website to which the webpage belongs is a restricted access website, and further, it can be determined that the access of the webpage is restricted.
  • the access request is sent to the server of the website to which the web page belongs. If the site is a restricted access site, the access request will be blocked and cannot be sent to the server of the site. Next, a prompt message for indicating that the webpage is inaccessible is received. At this point, you can be sure that the page is inaccessible.
  • the webpage that the user is going to visit cannot be accessed, and the webpage to which the webpage belongs is a restricted access website, it can be determined that the access of the webpage is restricted.
  • the acquired information of the proxy server may include but is not limited to The Uniform Resource Locator (URL) or the Uniform Resource Name (URN), the IP address, or other access identifiers of the proxy server are not specifically limited in this embodiment.
  • URL Uniform Resource Locator
  • UPN Uniform Resource Name
  • information of one proxy server may be specifically acquired, or information of multiple proxy servers may also be acquired.
  • the information of a proxy server is obtained, then the information of the proxy server is used to perform the subsequent 103.
  • a pre-set selection policy may be adopted, first selecting information of a proxy server, and then, using the information of the proxy server, performing subsequent 103. If the access to the web page is still restricted, continue to select the information of the next proxy server, and continue the previous operation until the access to the web page is no longer restricted.
  • the information of the proxy server may be acquired according to the webpage identifier of the webpage.
  • a mapping relationship between a web page and information of an available proxy server may be pre-stored to associate the web page with an available proxy server.
  • the information of the proxy server corresponding to the webpage identifier can be obtained according to the webpage identifier of the webpage, and the mapping relationship can be utilized, and the availability of the obtained proxy server information can be ensured.
  • the identifier of the webpage and the information of the proxy server may be correspondingly stored in a database or a file system.
  • the identifier of the webpage and the information of the proxy server corresponding to the identifier of the webpage may be correspondingly stored in a database or a file system.
  • the identifier of the webpage may include, but is not limited to, a parameter name and a network of the identifier of the webpage.
  • the parameter value of the identifier of the page is not specifically limited in this embodiment;
  • the information of the proxy server may include, but is not limited to, a parameter name of the information of the proxy server and a parameter value of the information of the proxy server, which is not performed in this embodiment. Specially limited.
  • the database may use a relational database, for example, an Oracle database, a DB2 database, a Structured Query Language (SQL) server (Server) database, a MySQL database, etc., or may also adopt a key value (Key-Value).
  • a relational database for example, an Oracle database, a DB2 database, a Structured Query Language (SQL) server (Server) database, a MySQL database, etc.
  • SQL Structured Query Language
  • MySQL MySQL database
  • Key-Value Key-Value
  • the type database for example, a non-SQL (Not Only SQL) NoSQL database, a Redis database, etc., is not particularly limited in this embodiment.
  • the parameter name and the parameter value of the identifier of each webpage and the parameter value of the information of the proxy server corresponding to the identifier of the webpage may be correspondingly stored in a database or a file system.
  • the parameter value of the information of the proxy server corresponding to the identifier of each webpage may be used as a key; the parameter name and the parameter value of the identifier of the webpage may be used as a Value, and the two are correspondingly stored in the Key-Value type database.
  • the parameter name and the parameter value of the identifier of each webpage and the parameter name and parameter value of the information of the proxy server corresponding to the identifier of the webpage may be correspondingly stored in the database or in the file system.
  • the parameter name and the parameter value of the information of the proxy server corresponding to the identifier of each webpage may be used as the Key; the parameter name and the parameter value of the identifier of the webpage may be used as the Value, and the two are correspondingly stored in the Key-Value database. in.
  • the time of the first storage (Init_time) and the time of the subsequent update storage (update_time) are further required. At least one of the records is recorded to meet the general needs of subsequent management operations.
  • the database or the file system may be specifically configured to be stored in a terminal. On the device.
  • the storage device of the terminal may be a slow storage device, specifically a hard disk of the computer system, or may be a non-operating memory of the mobile phone, that is, physical memory, such as a read-only memory (ROM) and a memory.
  • ROM read-only memory
  • the card or the like is not particularly limited in this embodiment.
  • the storage device of the terminal may also be a fast storage device, which may be a memory of the computer system, or may be a running memory of the mobile phone, that is, a system memory, such as a random access memory (RAM).
  • a fast storage device which may be a memory of the computer system, or may be a running memory of the mobile phone, that is, a system memory, such as a random access memory (RAM).
  • RAM random access memory
  • the network crawler may further be utilized to obtain a proxy server set, where the proxy server set includes each of the at least one proxy server available. Information for obtaining information of the proxy server according to the set of proxy servers.
  • the at least one proxy server may be further subjected to quality verification, and further, the information of the proxy server that has not passed the quality verification may be filtered. In this way, by performing quality verification on each of the at least one proxy servers included in the acquired proxy server set, and filtering the information of the proxy server that has not passed the quality verification, the obtained information can be effectively ensured.
  • the quality of the proxy server by performing quality verification on each of the at least one proxy servers included in the acquired proxy server set, and filtering the information of the proxy server that has not passed the quality verification, the obtained information can be effectively ensured. The quality of the proxy server.
  • the so-called quality verification refers to the stability, timeliness and other verification of the proxy server to ensure that the proxy server is available. It can be understood that the quality verification can be performed periodically, for example, once a day, once a week, so that the quality of the obtained proxy server can be further ensured.
  • the information of the proxy server is obtained, so that the webpage can be accessed by using the information of the proxy server, and the information of the proxy server can be automatically acquired, thereby eliminating the need for the user to manually Searching the website that publishes the proxy server is simple and has a high success rate, which improves the efficiency and reliability of web page access.
  • the user does not need to manually search the website of the publishing proxy server, and is completely transparent to the user, and can effectively improve the user's access experience.
  • FIG. 2 is a schematic structural diagram of an apparatus for accessing a webpage according to another embodiment of the present disclosure, as shown in FIG. 2 .
  • the access device of the web page of this embodiment may include an access unit 21 and an obtaining unit 22.
  • the access unit 21 is configured to determine that the access of the webpage is restricted; the obtaining unit 22 is configured to acquire information of the proxy server; and the accessing unit 21 is further configured to use the generation Manage the information of the server and access the web page.
  • the access device of the webpage provided in this embodiment may be an application located in a local terminal, or may be a plug-in or a software development kit (SDK) functional unit located in an application of the local terminal.
  • SDK software development kit
  • the search engine in the server on the network side, or the distributed system on the network side may not be specifically limited in this embodiment, and is not particularly limited in this embodiment.
  • the application may be a local application (nativeApp) installed on the terminal, or may be a web application (webApp) of the browser on the terminal, which is not specifically limited in this embodiment.
  • the accessing unit 21 may be further configured to obtain an access request of the webpage; and determining, according to the access request of the webpage, that the webpage is inaccessible; Determining, according to the access restricted list, that the website to which the web page belongs is a restricted access website; and determining that access to the web page is restricted.
  • the acquiring unit 22 may be configured to acquire information about the proxy server according to the webpage identifier of the webpage.
  • the access device of the webpage provided by the embodiment may further include an acquisition unit 31, which may be used to obtain a proxy server by using a web crawler.
  • a set of the proxy server includes information of each of the at least one proxy server available for obtaining information of the proxy server according to the set of proxy servers.
  • the collecting unit 31 may be further configured to perform quality verification on the at least one proxy server, and perform filtering processing on information of the proxy server that does not pass the quality verification.
  • the access unit determines that the access of the webpage is restricted, and the information of the proxy server is obtained by the obtaining unit, so that the accessing unit can access the webpage by using the information of the proxy server, because the proxy server can be automatically acquired.
  • the information therefore, makes it unnecessary to manually search the website of the publishing proxy server, and the operation is simple and the success rate is high, thereby improving the efficiency and reliability of webpage access.
  • each of the at least one proxy servers included in the acquired proxy server set is subjected to quality verification by the collecting unit, and further, to the proxy server that does not pass the quality verification.
  • the information is filtered and processed to ensure the quality of the obtained proxy server.
  • the user does not need to manually search the website of the publishing proxy server, and is completely transparent to the user, and can effectively improve the user's access experience.
  • the disclosed system, apparatus, and method may be implemented in other manners.
  • the device embodiments described above are merely illustrative.
  • the division of the unit is only a logical function division.
  • there may be another division manner for example, multiple units or components may be combined or Can be integrated into another system, or some features can be ignored or not executed.
  • the mutual coupling or direct coupling or communication connection shown or discussed may be through some connections.
  • the indirect coupling or communication connection of the port, device or unit may be in electrical, mechanical or other form.
  • the units described as separate components may or may not be physically separated, and the components displayed as units may or may not be physical units, that is, may be located in one place, or may be distributed to multiple network units. Some or all of the units may be selected according to actual needs to achieve the purpose of the solution of the embodiment.
  • each functional unit in various embodiments of the present disclosure may be integrated into one processing unit, or each unit may exist physically separately, or two or more units may be integrated into one unit.
  • the above integrated unit can be implemented in the form of hardware or in the form of hardware plus software functional units.
  • the above-described integrated unit implemented in the form of a software functional unit can be stored in a computer readable storage medium.
  • the above software functional unit is stored in a storage medium and includes instructions for causing a computer device (which may be a personal computer, a server, or a network device, etc.) or a processor to perform the methods of the various embodiments of the present disclosure. Part of the steps.
  • the foregoing storage medium includes: a U disk, a mobile hard disk, a read-only memory (ROM), a random access memory (RAM), a magnetic disk, or an optical disk, and the like, which can store program codes. .

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本公开提供一种网页的访问方法、装置、设备及非易失性计算机存储介质。本公开实施例通过确定网页的访问受到限制，进而获取代理服务器的信息，使得能够利用所述代理服务器的信息，访问所述网页，由于能够自动获取代理服务器的信息，因此，使得无需用户手动搜索发布代理服务器的网站，操作简单，并且成功率高，从而提高了网页访问的效率和可靠性。

Description

网页的访问方法、装置、设备及非易失性计算机存储介质
本申请要求了申请日为2015年10月30日，申请号为201510725908.3发明名称为“网页的访问方法及装置”的中国专利申请的优先权。
技术领域
本公开涉及互联网技术，尤其涉及一种网页的访问方法、装置、设备及非易失性计算机存储介质。
背景技术
随着互联网行业的发展，网页内容所提供的信息日渐丰富，网页上所展示的数据内容也随之越来越丰富。在访问网页的过程中，由于一些网页所属的网站为访问受限网站，例如，外国网站或学校网站等，使得这些网页无法正常访问。
在这种情况之下，用户需要利用相关的关键词例如，代理服务器发布网站等，进行搜索操作，以获得发布代理服务器的网站入口。用户访问所获得的发布代理服务器的网站，利用其所发布的代理服务器，分别进行访问代理设置，以使得能够利用可用的代理服务器，访问这些网页。这样，会导致操作复杂，操作时间长，并且成功率不高，从而降低了网页访问的效率和可靠性。
发明内容
本公开的多个方面提供一种网页的访问方法、装置、设备及非易失性计算机存储介质，用以提高网页访问的效率和可靠性。
本公开的一方面，提供一种网页的访问方法，包括：
确定网页的访问受到限制；
获取代理服务器的信息；
利用所述代理服务器的信息，访问所述网页。
如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述确定网页的访问受到限制，包括：
获取所述网页的访问请求；
根据所述网页的访问请求，确定所述网页无法访问；
根据访问受限列表，确定所述网页所属网站为访问受限网站；
确定所述网页的访问受到限制。
如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述获取代理服务器的信息，包括：
根据所述网页的网页标识，获取所述代理服务器的信息。
如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述获取代理服务器的信息之前，还包括：
利用网络爬虫，获取代理服务器集合，所述代理服务器集合中包括可用的至少一个代理服务器中每个代理服务器的信息，以供根据所述代 理服务器集合，获取所述代理服务器的信息。
如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述利用网络爬虫，获取代理服务器集合之后，还包括：
对所述至少一个代理服务器进行质量验证；
对没有通过质量验证的代理服务器的信息，进行过滤处理。
本公开的另一方面，提供一种网页的访问装置，包括：
访问单元，用于确定网页的访问受到限制；
获取单元，用于获取代理服务器的信息；
所述访问单元，还用于利用所述代理服务器的信息，访问所述网页。
如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述访问单元，还用于
获取所述网页的访问请求；
根据所述网页的访问请求，确定所述网页无法访问；
根据访问受限列表，确定所述网页所属网站为访问受限网站；以及
确定所述网页的访问受到限制。
如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述获取单元，具体用于
根据所述网页的网页标识，获取所述代理服务器的信息。
如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述装置还包括采集单元，用于
利用网络爬虫，获取代理服务器集合，所述代理服务器集合中包括可用的至少一个代理服务器中每个代理服务器的信息，以供根据所述代理服务器集合，获取所述代理服务器的信息。
如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述采集单元，还用于
对所述至少一个代理服务器进行质量验证；以及
对没有通过质量验证的代理服务器的信息，进行过滤处理。
本公开的另一方面，提供一种设备，包括：
一个或者多个处理器；
存储器；
一个或者多个程序，所述一个或者多个程序存储在所述存储器中，当被所述一个或者多个处理器执行时：
确定网页的访问受到限制；
获取代理服务器的信息；
利用所述代理服务器的信息，访问所述网页。
本公开的另一方面，提供一种非易失性计算机存储介质，所述非易失性计算机存储介质存储有一个或者多个程序，当所述一个或者多个程序被一个设备执行时，使得所述设备：
确定网页的访问受到限制；
获取代理服务器的信息；
利用所述代理服务器的信息，访问所述网页。
由上述技术方案可知，本公开实施例通过确定网页的访问受到限制，进而获取代理服务器的信息，使得能够利用所述代理服务器的信息，访问所述网页，由于能够自动获取代理服务器的信息，因此，使得无需用户手动搜索发布代理服务器的网站，操作简单，并且成功率高，从而提高了网页访问的效率和可靠性。
另外，采用本公开所提供的技术方案，通过对所获取的代理服务器集合中所包括的可用的至少一个代理服务器中每个代理服务器进行质量验证，进而对没有通过质量验证的代理服务器的信息，进行过滤处理，能够有效保证所获取的代理服务器的质量。
另外，采用本公开所提供的技术方案，无需用户手动搜索发布代理服务器的网站，对用户完全透明，能够有效提高用户的访问体验。
附图说明
为了更清楚地说明本公开实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本公开一实施例提供的网页的访问方法的流程示意图；
图2为本公开另一实施例提供的网页的访问装置的结构示意图；
图3为本公开另一实施例提供的网页的访问装置的结构示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中的附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本公开一部分实施例，而不是全部的实施例。基于本公开中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的全部其他实施例，都属于本公开保护的范围。
可以理解的是，本公开所涉及的网页，也可以称为网页或Web网页，可以是基于超文本标记语言(HyperText Markup Language，HTML)编写的网页(Web Page)，即HTML网页，或者还可以是基于HTML和Java语言编写的网页，即Java服务器网页(Java Server Page，JSP)，或者还可以为其他语言编写的网页，本实施例对此不进行特别限定。Web网页可以包括由一个或者多个网页标签例如，超文本标记语言(HyperText Markup Language，HTML)标签、JSP标签等，定义的一个显示区块，称为网页元素，例如，文字、图片、超链接、按钮、输入框、下拉框等。
需要说明的是，本公开实施例中所涉及的终端可以包括但不限于手机、个人数字助理(Personal Digital Assistant，PDA)、无线手持设备、平板电脑(Tablet Computer)、个人电脑(Personal Computer，PC)、MP3播放器、MP4播放器、可穿戴设备(例如，智能眼镜、智能手表、 智能手环等)等。
另外，本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。
图1为本公开一实施例提供的网页的访问方法的流程示意图，如图1所示。
101、确定网页的访问受到限制。
102、获取代理服务器的信息。
103、利用所述代理服务器的信息，访问所述网页。
需要说明的是，101～103的执行主体可以为位于本地终端的应用，或者还可以为位于本地终端的应用中的插件或软件开发工具包(Software Development Kit，SDK)等功能单元，或者还可以为位于网络侧的服务器中的搜索引擎，或者还可以为位于网络侧的分布式系统，本实施例对此不进行特别限定，本实施例对此不进行特别限定。
可以理解的是，所述应用可以是安装在终端上的本地程序(nativeApp)，例如，浏览器应用、手机百度应用等，或者还可以是终端上的浏览器的一个网页程序(webApp)，本实施例对此不进行特别限定。
这样，通过确定网页的访问受到限制，进而获取代理服务器的信息，使得能够利用所述代理服务器的信息，访问所述网页，由于能够自动获取代理服务器的信息，因此，使得无需用户手动搜索发布代理服务器的网站，操作简单，并且成功率高，从而提高了网页访问的效率和可靠性。
需要说明的是，本实施例中所涉及的网页，可以为PC网站的网页，或者还可以为移动网站的网页，本实施例对此不进行特别限定。
目前，一个应用例如，浏览器或百度APP访问网页时，需要先下载网页主资源，进而解析并渲染网页主资源。当解析到网页主资源中所引用的网页子资源的统一资源定位符(Uniform Resource Locator，URL)时，开始下载网页子资源，并根据网页子资源，进一步渲染网页主资源。如果网页所属网站为访问受限网站，则无法下载网页的主资源，那么，则直接输出用于指示网页无法访问的提示信息。
可选地，在本实施例的一个可能的实现方式中，在101中，具体可以获取所述网页的访问请求，并根据所述网页的访问请求，确定所述网页无法访问，以及根据访问受限列表，确定所述网页所属网站为访问受限网站，进而，则可以确定所述网页的访问受到限制。
在获取到用户所触发的一个网页的访问请求之后，将该访问请求发送给网页所属网站的服务器。如果该网站为访问受限网站，该访问请求则会被拦截，无法发送到网站的服务器。接着，接收到用于指示网页无法访问的提示信息。此时，则可以确定该网页无法访问。
由于网页无法访问的原因有很多，因此，在确定网页无法访问之后，还需要进一步在访问受限列表中进行查询，以确定该网页所属网站是否为访问受限网站。如果该网页所属网站在访问受限列表中，则可以确定该网页所属网站为访问受限网站。
综上，由于用户将要访问的网页无法访问，并且该网页所属网站为访问受限网站，因此，可以确定该网页的访问受到限制。
本公开中，在102中，所获取的代理服务器的信息可以包括但不限 于代理服务器的统一资源定位符(Uniform Resource Locator，URL)或统一资源名称(Uniform Resource Name，URN)、IP地址或其他访问标识，本实施例对此不进行特别限定。
可选地，在本实施例的一个可能的实现方式中，在102中，具体可以获取一个代理服务器的信息，或者还可以获取多个代理服务器的信息。
如果获取一个代理服务器的信息，那么，则利用这个代理服务器的信息，执行后续的103。
如果获取多个代理服务器的信息，那么，则可以采用预先设置的选择策略，先选择一个代理服务器的信息，然后，则可以利用这个代理服务器的信息，执行后续的103。如果所述网页的访问仍然受到限制，再继续选择下一个代理服务器的信息，继续前面的操作，直到所述网页的访问不再受到限制为止。
可选地，在本实施例的一个可能的实现方式中，在102中，具体可以根据所述网页的网页标识，获取所述代理服务器的信息。具体地，可以预先存储一个网页与可用的代理服务器的信息的映射关系，用以将网页与其可用的代理服务器进行关联。这样，则可以根据所述网页的网页标识，并利用所述映射关系，获得与所述网页标识所对应的代理服务器的信息，能够保证所获取的代理服务器的信息的可用性。
在一个具体的实现过程中，具体可以将所述网页的标识与所述代理服务器的信息，对应存储在数据库或文件系统中。
具体地，具体可以将所述网页的标识，以及该网页的标识所对应的代理服务器的信息，对应存储在数据库中或文件系统中。
其中，所述网页的标识可以包括但不限于网页的标识的参数名和网 页的标识的参数值，本实施例对此不进行特别限定；所述代理服务器的信息可以包括但不限于代理服务器的信息的参数名和代理服务器的信息的参数值，本实施例对此不进行特别限定。
其中，所述数据库可以采用关系型数据库，例如，Oracle数据库、DB2数据库、结构化查询语言(Structured Query Language，SQL)服务器(Server)数据库、MySQL数据库等，或者还可以采用键值(Key-Value)型数据库，例如，非SQL(Not Only SQL)NoSQL数据库、Redis数据库等，本实施例对此不进行特别限定。
例如，具体可以将所述每个网页的标识的参数名和参数值，以及该网页的标识所对应的代理服务器的信息的参数值，对应存储在数据库中或文件系统中。如可以以每个网页的标识所对应的代理服务器的信息的参数值，作为Key；可以以该网页的标识的参数名和参数值，作为Value，将二者对应存储在Key-Value型数据库中。
或者，再例如，具体可以将所述每个网页的标识的参数名和参数值，以及该网页的标识所对应的代理服务器的信息的参数名和参数值，对应存储在数据库中或文件系统中。如可以以每个网页的标识所对应的代理服务器的信息的参数名和参数值，作为Key；可以以该网页的标识的参数名和参数值，作为Value，将二者对应存储在Key-Value型数据库中。
需要说明的是，在对所述网页的标识和所述代理服务器的信息，进行存储处理的同时，还需要进一步对第一次存储的时间(Init_time)，以及后续更新存储的时间(update_time)中的至少一项，进行记录，以供满足后续管理操作的一般需求。
具体地，所述数据库或所述文件系统，具体可以部署在终端的存储 设备上。
例如，所述终端的存储设备可以慢速存储设备，具体可以为计算机系统的硬盘，或者还可以为手机的非运行内存即物理内存，例如，只读存储器(Read-Only Memory，ROM)和内存卡等，本实施例对此不进行特别限定。
或者，再例如，所述终端的存储设备还可以为快速存储设备，具体可以为计算机系统的内存，或者还可以为手机的运行内存即系统内存，例如，随机存储器(Random Access Memory，RAM)等，本实施例对此不进行特别限定。
可选地，在本实施例的一个可能的实现方式中，在102之前，还可以进一步利用网络爬虫，获取代理服务器集合，所述代理服务器集合中包括可用的至少一个代理服务器中每个代理服务器的信息，以供根据所述代理服务器集合，获取所述代理服务器的信息。
在利用网络爬虫，获取代理服务器集合之后，还可以进一步对所述至少一个代理服务器进行质量验证，进而，则可以对没有通过质量验证的代理服务器的信息，进行过滤处理。这样，通过对所获取的代理服务器集合中所包括的可用的至少一个代理服务器中每个代理服务器进行质量验证，进而对没有通过质量验证的代理服务器的信息，进行过滤处理，能够有效保证所获取的代理服务器的质量。
所谓的质量验证，是指对代理服务器进行稳定性、时效性等验证，以确保代理服务器能够可用。可以理解的是，所述质量验证可以定时进行，例如，每天一次、每周一次，这样，能够进一步保证所获取的代理服务器的质量。
本实施例中，通过确定网页的访问受到限制，进而获取代理服务器的信息，使得能够利用所述代理服务器的信息，访问所述网页，由于能够自动获取代理服务器的信息，因此，使得无需用户手动搜索发布代理服务器的网站，操作简单，并且成功率高，从而提高了网页访问的效率和可靠性。
另外，采用本公开所提供的技术方案，通过对所获取的代理服务器集合中所包括的可用的至少一个代理服务器中每个代理服务器进行质量验证，进而对没有通过质量验证的代理服务器的信息，进行过滤处理，能够有效保证所获取的代理服务器的质量。
另外，采用本公开所提供的技术方案，无需用户手动搜索发布代理服务器的网站，对用户完全透明，能够有效提高用户的访问体验。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本公开并不受所描述的动作顺序的限制，因为依据本公开，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本公开所必须的。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
图2为本公开另一实施例提供的网页的访问装置的结构示意图，如图2所示。本实施例的网页的访问装置可以包括访问单元21和获取单元22。其中，访问单元21，用于确定网页的访问受到限制；获取单元22，用于获取代理服务器的信息；所述访问单元21，还用于利用所述代 理服务器的信息，访问所述网页。
需要说明的是，本实施例所提供的网页的访问装置可以为位于本地终端的应用，或者还可以为位于本地终端的应用中的插件或软件开发工具包(Software Development Kit，SDK)等功能单元，或者还可以为位于网络侧的服务器中的搜索引擎，或者还可以为位于网络侧的分布式系统，本实施例对此不进行特别限定，本实施例对此不进行特别限定。
可以理解的是，所述应用可以是安装在终端上的本地程序(nativeApp)，或者还可以是终端上的浏览器的一个网页程序(webApp)，本实施例对此不进行特别限定。
可选地，在本实施例的一个可能的实现方式中，所述访问单元21，还可以进一步用于获取所述网页的访问请求；根据所述网页的访问请求，确定所述网页无法访问；根据访问受限列表，确定所述网页所属网站为访问受限网站；以及确定所述网页的访问受到限制。
可选地，在本实施例的一个可能的实现方式中，所述获取单元22，具体可以用于根据所述网页的网页标识，获取所述代理服务器的信息。
可选地，在本实施例的一个可能的实现方式中，如图3所示，本实施例所提供的网页的访问装置还可以进一步包括采集单元31，可以用于利用网络爬虫，获取代理服务器集合，所述代理服务器集合中包括可用的至少一个代理服务器中每个代理服务器的信息，以供根据所述代理服务器集合，获取所述代理服务器的信息。
进一步地，所述采集单元31，还可以进一步用于对所述至少一个代理服务器进行质量验证；以及对没有通过质量验证的代理服务器的信息，进行过滤处理。
需要说明的是，图1对应的实施例中方法，可以由本实施例提供的网页的访问装置实现。详细描述可以参见图1对应的实施例中的相关内容，此处不再赘述。
本实施例中，通过访问单元确定网页的访问受到限制，进而由获取单元获取代理服务器的信息，使得所述访问单元能够利用所述代理服务器的信息，访问所述网页，由于能够自动获取代理服务器的信息，因此，使得无需用户手动搜索发布代理服务器的网站，操作简单，并且成功率高，从而提高了网页访问的效率和可靠性。
另外，采用本公开所提供的技术方案，通过采集单元对所获取的代理服务器集合中所包括的可用的至少一个代理服务器中每个代理服务器进行质量验证，进而对没有通过质量验证的代理服务器的信息，进行过滤处理，能够有效保证所获取的代理服务器的质量。
另外，采用本公开所提供的技术方案，无需用户手动搜索发布代理服务器的网站，对用户完全透明，能够有效提高用户的访问体验。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本公开所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接 口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本公开各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本公开各个实施例所述方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上实施例仅用以说明本公开的技术方案，而非对其限制；尽管参照前述实施例对本公开进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本公开各实施例技术方案的精神和范围。

Claims (12)

  1. 一种网页的访问方法，其特征在于，包括：
    确定网页的访问受到限制；
    获取代理服务器的信息；
    利用所述代理服务器的信息，访问所述网页。
  2. 根据权利要求1所述的方法，其特征在于，所述确定网页的访问受到限制，包括：
    获取所述网页的访问请求；
    根据所述网页的访问请求，确定所述网页无法访问；
    根据访问受限列表，确定所述网页所属网站为访问受限网站；
    确定所述网页的访问受到限制。
  3. 根据权利要求1或2所述的方法，其特征在于，所述获取代理服务器的信息，包括：
    根据所述网页的网页标识，获取所述代理服务器的信息。
  4. 根据权利要求1～3任一权利要求所述的方法，其特征在于，所述获取代理服务器的信息之前，还包括：
    利用网络爬虫，获取代理服务器集合，所述代理服务器集合中包括可用的至少一个代理服务器中每个代理服务器的信息，以供根据所述代理服务器集合，获取所述代理服务器的信息。
  5. 根据权利要求4所述的方法，其特征在于，所述利用网络爬虫，获取代理服务器集合之后，还包括：
    对所述至少一个代理服务器进行质量验证；
    对没有通过质量验证的代理服务器的信息，进行过滤处理。
  6. 一种网页的访问装置，其特征在于，包括：
    访问单元，用于确定网页的访问受到限制；
    获取单元，用于获取代理服务器的信息；
    所述访问单元，还用于利用所述代理服务器的信息，访问所述网页。
  7. 根据权利要求6所述的装置，其特征在于，所述访问单元，还用于
    获取所述网页的访问请求；
    根据所述网页的访问请求，确定所述网页无法访问；
    根据访问受限列表，确定所述网页所属网站为访问受限网站；以及
    确定所述网页的访问受到限制。
  8. 根据权利要求6或7所述的装置，其特征在于，所述获取单元，具体用于
    根据所述网页的网页标识，获取所述代理服务器的信息。
  9. 根据权利要求6～8任一权利要求所述的装置，其特征在于，所述装置还包括采集单元，用于
    利用网络爬虫，获取代理服务器集合，所述代理服务器集合中包括可用的至少一个代理服务器中每个代理服务器的信息，以供根据所述代理服务器集合，获取所述代理服务器的信息。
  10. 根据权利要求9所述的装置，其特征在于，所述采集单元，还用于
    对所述至少一个代理服务器进行质量验证；以及
    对没有通过质量验证的代理服务器的信息，进行过滤处理。
  11. 一种设备，包括：
    一个或者多个处理器；
    存储器；
    一个或者多个程序，所述一个或者多个程序存储在所述存储器中，当被所述一个或者多个处理器执行时：
    确定网页的访问受到限制；
    获取代理服务器的信息；
    利用所述代理服务器的信息，访问所述网页。
  12. 一种非易失性计算机存储介质，所述非易失性计算机存储介质存储有一个或者多个程序，当所述一个或者多个程序被一个设备执行时，使得所述设备：
    确定网页的访问受到限制；
    获取代理服务器的信息；
    利用所述代理服务器的信息，访问所述网页。
PCT/CN2016/082981 2015-10-30 2016-05-23 网页的访问方法、装置、设备及非易失性计算机存储介质 WO2017071189A1 (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP16858633.7A EP3273362A4 (en) 2015-10-30 2016-05-23 Webpage access method, apparatus, device and non-volatile computer storage medium
US15/745,987 US20180225387A1 (en) 2015-10-30 2016-05-23 Method and apparatus for accessing webpage, apparatus and non-volatile computer storage medium
JP2017548061A JP6488508B2 (ja) 2015-10-30 2016-05-23 ウェブページのアクセス方法、装置、デバイス及びプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201510725908.3 2015-10-30
CN201510725908.3A CN105335511A (zh) 2015-10-30 2015-10-30 网页的访问方法及装置

Publications (1)

Publication Number Publication Date
WO2017071189A1 true WO2017071189A1 (zh) 2017-05-04

Family

ID=55286038

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2016/082981 WO2017071189A1 (zh) 2015-10-30 2016-05-23 网页的访问方法、装置、设备及非易失性计算机存储介质

Country Status (5)

Country Link
US (1) US20180225387A1 (zh)
EP (1) EP3273362A4 (zh)
JP (1) JP6488508B2 (zh)
CN (1) CN105335511A (zh)
WO (1) WO2017071189A1 (zh)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8560604B2 (en) 2009-10-08 2013-10-15 Hola Networks Ltd. System and method for providing faster and more efficient data communication
US9241044B2 (en) 2013-08-28 2016-01-19 Hola Networks, Ltd. System and method for improving internet communication by using intermediate nodes
US11057446B2 (en) 2015-05-14 2021-07-06 Bright Data Ltd. System and method for streaming content from multiple servers
CN105335511A (zh) * 2015-10-30 2016-02-17 百度在线网络技术（北京）有限公司 网页的访问方法及装置
EP3767495B1 (en) 2017-08-28 2023-04-19 Bright Data Ltd. Method for improving content fetching by selecting tunnel devices
US11190374B2 (en) 2017-08-28 2021-11-30 Bright Data Ltd. System and method for improving content fetching by selecting tunnel devices
CN108769278B (zh) * 2018-04-11 2021-08-10 北京中科闻歌科技股份有限公司 一种社交媒体账号管理方法及系统
EP4177771A1 (en) 2019-02-25 2023-05-10 Bright Data Ltd. System and method for url fetching retry mechanism
CN111641664B (zh) * 2019-03-01 2023-12-05 北京京东尚科信息技术有限公司 一种爬虫设备业务请求方法、装置、系统和存储介质
WO2020202135A2 (en) 2019-04-02 2020-10-08 Luminati Networks Ltd. System and method for managing non-direct url fetching service
CN110147271B (zh) * 2019-05-15 2020-04-28 重庆八戒传媒有限公司 提升爬虫代理质量的方法、装置及计算机可读存储介质
CN112583780B (zh) * 2019-09-30 2023-04-07 北京国双科技有限公司 使用代理ip访问网站数据的方法、装置、系统和设备
US10637956B1 (en) * 2019-10-01 2020-04-28 Metacluster It, Uab Smart proxy rotator
CN111428179B (zh) * 2020-03-19 2023-09-19 新方正控股发展有限责任公司 图片监测方法、装置及电子设备
CN111488392B (zh) * 2020-04-16 2023-07-07 北京思特奇信息技术股份有限公司 一种查询方法、系统及电子设备
CN111767450A (zh) * 2020-07-27 2020-10-13 深圳快学教育科技有限公司 浏览器数据采集系统及方法
CN114595253A (zh) * 2022-02-22 2022-06-07 深圳海域信息技术有限公司 品牌监测方法、装置、电子设备及介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101102313A (zh) * 2007-06-21 2008-01-09 潘晓梅 自动更换代理服务器的网络下载系统及方法
CN101800758A (zh) * 2009-02-09 2010-08-11 华为终端有限公司 一种移动终端访问网络的方法、系统及网关
CN103973682A (zh) * 2014-04-30 2014-08-06 北京奇虎科技有限公司 进行网页访问的方法及装置
CN105335511A (zh) * 2015-10-30 2016-02-17 百度在线网络技术（北京）有限公司 网页的访问方法及装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6829638B1 (en) * 2000-08-03 2004-12-07 International Business Machines Corporation System and method for managing multiple proxy servers
US7483910B2 (en) * 2002-01-11 2009-01-27 International Business Machines Corporation Automated access to web content based on log analysis
US20030145046A1 (en) * 2002-01-31 2003-07-31 Keller S. Brandon Generating a list of addresses on a proxy server
GB2446421B (en) * 2007-02-09 2011-06-22 Proctor & Stevenson Ltd Tracking web server
US20100205215A1 (en) * 2009-02-11 2010-08-12 Cook Robert W Systems and methods for enforcing policies to block search engine queries for web-based proxy sites
CN101931635B (zh) * 2009-06-18 2014-05-28 北京搜狗科技发展有限公司 网络资源访问方法及代理装置
US9369437B2 (en) * 2010-04-01 2016-06-14 Cloudflare, Inc. Internet-based proxy service to modify internet responses
CN102694772B (zh) * 2011-03-23 2014-12-10 腾讯科技（深圳）有限公司 一种访问互联网网页的装置、系统及方法
US9049244B2 (en) * 2011-04-19 2015-06-02 Cloudflare, Inc. Registering for internet-based proxy services
CN103024933B (zh) * 2011-09-28 2016-01-20 腾讯科技（深圳）有限公司 一种移动互联网访问系统及访问移动互联网的方法
CN103678311B (zh) * 2012-08-31 2018-11-13 腾讯科技（深圳）有限公司 基于中转模式的网页访问方法及系统、抓取路径服务器
US9241044B2 (en) * 2013-08-28 2016-01-19 Hola Networks, Ltd. System and method for improving internet communication by using intermediate nodes
CN104767837B (zh) * 2014-01-08 2018-08-24 阿里巴巴集团控股有限公司 一种识别代理ip地址的方法及装置
CN104462570B (zh) * 2014-12-26 2019-03-15 小米科技有限责任公司 网页内容获取方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101102313A (zh) * 2007-06-21 2008-01-09 潘晓梅 自动更换代理服务器的网络下载系统及方法
CN101800758A (zh) * 2009-02-09 2010-08-11 华为终端有限公司 一种移动终端访问网络的方法、系统及网关
CN103973682A (zh) * 2014-04-30 2014-08-06 北京奇虎科技有限公司 进行网页访问的方法及装置
CN105335511A (zh) * 2015-10-30 2016-02-17 百度在线网络技术（北京）有限公司 网页的访问方法及装置

Also Published As

Publication number Publication date
JP2018514846A (ja) 2018-06-07
CN105335511A (zh) 2016-02-17
EP3273362A1 (en) 2018-01-24
US20180225387A1 (en) 2018-08-09
JP6488508B2 (ja) 2019-03-27
EP3273362A4 (en) 2018-04-25

Similar Documents

Publication Publication Date Title
WO2017071189A1 (zh) 网页的访问方法、装置、设备及非易失性计算机存储介质
JP6761112B2 (ja) 提示するためのネイティブコンテンツをサーバ側でレンダリングするための方法およびシステム
US8452925B2 (en) System, method and computer program product for automatically updating content in a cache
US7979791B2 (en) Cross-domain communication
US8468145B2 (en) Indexing of URLs with fragments
US20180032491A1 (en) Web page display systems and methods
US20200351175A1 (en) Declarative and reactive data layer for component-based user interfaces
CN109033406B (zh) 用于搜索区块链数据的方法、装置及存储介质
CN105550206B (zh) 结构化查询语句的版本控制方法及装置
US9967370B2 (en) OData enabled mobile software applications
US8930807B2 (en) Web content management based on timeliness metadata
US9058392B1 (en) Client state result de-duping
US11030384B2 (en) Identification of sequential browsing operations
US11361149B2 (en) Techniques for web framework detection
US20150193832A1 (en) Method, apparatus, and system for communicating and presenting product information
US20130332445A1 (en) Methods and systems for providing custom crawl-time metadata
WO2014056145A1 (zh) 使Web应用获取数据库变化的方法和系统
CN115017182A (zh) 一种可视化的数据分析方法及设备
US10051079B1 (en) Session service aspect-oriented cache
WO2021189766A1 (zh) 数据可视化方法及相关设备
US20230090108A1 (en) Systematic identification and masking of private data for replaying user sessions
US20150193393A1 (en) Dynamic Display of Web Content
CN107784054B (zh) 一种页面发布方法和装置
US11403315B2 (en) Reporting and knowledge discovery for databases
CN113760568A (zh) 数据处理的方法和装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16858633

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017548061

Country of ref document: JP

Kind code of ref document: A

REEP Request for entry into the european phase

Ref document number: 2016858633

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 15745987

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE