CN111741109A - 基于代理的访问方法、装置、设备及存储介质 - Google Patents

基于代理的访问方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN111741109A
CN111741109A CN202010571469.6A CN202010571469A CN111741109A CN 111741109 A CN111741109 A CN 111741109A CN 202010571469 A CN202010571469 A CN 202010571469A CN 111741109 A CN111741109 A CN 111741109A
Authority
CN
China
Prior art keywords
proxy
target
interval
agent
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010571469.6A
Other languages
English (en)
Other versions
CN111741109B (zh
Inventor
陈晓丹
殷凇
李忠波
邬秋元
杨永帮
张卓韬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
WeBank Co Ltd
Original Assignee
WeBank Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by WeBank Co Ltd filed Critical WeBank Co Ltd
Priority to CN202010571469.6A priority Critical patent/CN111741109B/zh
Publication of CN111741109A publication Critical patent/CN111741109A/zh
Application granted granted Critical
Publication of CN111741109B publication Critical patent/CN111741109B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/50Address allocation
    • H04L61/5007Internet protocol [IP] addresses
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/10Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明涉及金融科技技术领域,公开了一种基于代理的访问方法、装置、设备及存储介质,获取源主机发送的访问请求,基于所述访问请求获取所述源主机的域名;从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP;通过所述目标代理IP向所述目标主机发送所述访问请求。由此通过目标代理IP发送访问请求,不会暴露真实IP,提高了源主机的隐私性和安全性,并且从基于当前时间更新的IP列表中选择目标代理IP,既实现了IP的动态更新又保证了邻近时间不会反复使用相同的代理IP访问同一个域名对应的目标主机,避免了代理IP被禁止的风险,保证应用分配到的IP在使用过程中有效且不变,增强了访问网站的便捷性和稳定性。

Description

基于代理的访问方法、装置、设备及存储介质
技术领域
本发明涉及金融科技(Fintech)技术领域,尤其涉及一种基于代理的访问方法、装置、设备及存储介质。
背景技术
随着计算机技术的发展,越来越多的技术应用在金融领域,传统金融业正在逐步向金融科技(Fintech)转变,但由于金融行业的安全性、实时性要求,也对技术提出了更高的要求。
当前,源主机访问目标主机时,经常直接基于源主机的真实IP向目标主机发送访问请求,因此存在真实IP(Internet Protocol,网际互连协议)暴露的风险。若访问频率过高,则容易被目标主机认定为存在攻击行为,因此目标主机会将该源主机对应的IP标记为禁止访问IP,并不再响应该IP的访问请求,由此会导致源主机对该目标主机的访问失败。在IP被禁的情况下,可以手动更改主机IP,然后基于更改后IP再次访问该目标主机,但是这种方式操作繁琐且不稳定。
发明内容
本发明提供一种基于代理的访问方法、装置、设备及存储介质,旨在提高源主机的隐私性和安全性,并增强访问网站的便捷性和稳定性。
为实现上述目的,本发明提供一种基于代理的访问方法,所述方法包括:
获取源主机发送的访问请求,基于所述访问请求获取目标主机的域名;
从基于当前时间更新的代理网际互连协议IP列表中选择与所述域名对应的目标代理IP;
通过所述目标代理IP向所述目标主机发送所述访问请求。
优选地,所述从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP的步骤之前还包括:
获取当前时间所在的区间起点,基于所述区间起点和预设临界值确定预设更新时间范围;
判断所述当前时间是否在所述预设更新时间范围内;
若所述当前时间在预设更新时间范围内,则从代理池中获取实际有效时长满足有效时长判定条件的多个代理IP,基于所述多个代理IP为每个域名分配一个代理IP,生成所述代理IP列表。
优选地,所述获取当前时间所在的区间起点,基于所述区间起点和预设临界值确定预设更新时间范围的步骤包括:
根据所述当前时间、源主机起始运行时间以及预设区间时长计算所述当前时间所在的目标区间,并确定所述目标区间的时间范围;
根据所述目标区间的时间范围确定所述目标区间的区间起点,将所述区间起点与所述预设临界值的差值确定为更新起点;
将所述预设更新时间范围确定为所述更新起点与所述开始时间之间。
优选地,所述从代理池中获取实际有效时长满足有效时长判定条件的多个代理IP的步骤之前还包括:
基于更新起点和预设区间时长设置所述有效时长判定条件;
所述从代理池中获取有效时长满足有效时长判定条件的多个代理IP的步骤包括:
获取所述代理池中各个代理IP的实际有效时长,筛选出所述实际有效时长满足所述有效时长判定条件的待选择代理IP;
从所述待选择代理IP中选择与所述域名数量一致的多个代理IP。
优选地,所若所述当前时间在预设更新时间范围内,则从代理池中获取有效时长满足有效时长判定条件的多个代理IP,基于所述多个代理IP为每个域名分配一个代理IP,生成所述代理IP列表的步骤之后还包括:
等待预设时长后,再次基于实际时间和所述代理IP的有效时长生成新的代理IP列表,其中,相同域名在所述新的代理IP列表和所述代理IP列表中对应的IP不相同。
优选地,所述从代理池中获取实际有效时长满足有效时长判定条件的多个代理IP的步骤之前还包括:
划分时间区间并设置各个代理IP的有效时长,所述时间区间包括所述源主机起始运行时间以及所述预设区间时长。
优选地,所述从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP的步骤包括:
基于所述当前时间计算目标区间,并确定与所述目标区间对应的代理IP列表,从所述代理IP列表中选择与所述域名对应的目标代理IP。
此外,为实现上述目的,本发明还提供一种基于代理的访问装置,所述基于代理的访问装置包括:
获取模块,用于获取源主机发送的访问请求,基于所述访问请求获取目标主机的域名;
选择模块,用于从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP;
发送模块,用于通过所述目标代理IP向所述目标主机发送所述访问请求。
此外,为实现上述目的,本发明还提供一种基于代理的访问设备所述基于代理的访问设备包括处理器,存储器以及存储在所述存储器中的基于代理的访问程序,所述基于代理的访问程序被所述处理器运行时,实现如上所述的基于代理的访问方法的步骤。
此外,为实现上述目的,本发明还提供一种计算机存储介质,所述计算机存储介质上存储有基于代理的访问程序,所述基于代理的访问程序被处理器运行时实现如上所述基于代理的访问方法的步骤。
相比现有技术,本发明提供一种基于代理的访问方法、装置、设备及存储介质,获取源主机发送的访问请求,基于所述访问请求获取目标主机的域名;从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP;通过所述目标代理IP向所述目标主机发送所述访问请求。由此通过目标代理IP发送访问请求,不会暴露真实IP,提高了源主机的隐私性和安全性,并且从基于当前时间更新的IP列表中选择目标代理IP,既实现了IP的动态更新又保证了邻近时间不会反复使用相同的代理IP访问同一个域名对应的目标主机,避免了代理IP被禁止的风险,保证应用分配到的IP在使用过程中有效且不变,增强了访问网站的便捷性和稳定性。
附图说明
图1是本发明各实施例涉及的基于代理的访问设备的硬件结构示意图;
图2是本发明基于代理的访问方法第一实施例的流程示意图;
图3是本发明基于代理的访问方法第一实施例涉及的代理服务器、源主机以及目标主机的部署示意图;
图4是本发明基于代理的访问方法第一实施例涉及的一场景示意图;
图5是本发明基于代理的访问方法第一实施例的更新代理IP列表步骤的细化流程示意图;
图6是本发明基于代理的访问装置第一实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明实施例主要涉及的基于代理的访问设备是指能够实现网络连接的网络连接设备,所述基于代理的访问设备可以是服务器、云平台等。
参照图1,图1是本发明各实施例涉及的基于代理的访问设备的硬件结构示意图。本发明实施例中,基于代理的访问设备可以包括处理器1001(例如中央处理器CentralProcessing Unit、CPU),通信总线1002,输入端口1003,输出端口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信;输入端口1003用于数据输入;输出端口1004用于数据输出,存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器,存储器1005可选的还可以是独立于前述处理器1001的存储装置。本领域技术人员可以理解,图1中示出的硬件结构并不构成对本发明的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
继续参照图1,图1中作为一种可读存储介质的存储器1005可以包括操作系统、网络通信模块、应用程序模块以及基于代理的访问程序。在图1中,网络通信模块主要用于连接服务器,与服务器进行数据通信;而处理器1001可以调用存储器1005中存储的基于代理的访问程序,并执行本发明实施例提供的基于代理的访问方法。
基于上述架构,本发明实施例提供了一种基于代理的访问方法。
参照图2,图2是本发明基于代理的访问方法第一实施例的流程示意图。
本实施例中,所述基于代理的访问方法应用于基于代理的访问设备,所述方法包括:
步骤S101,获取源主机发送的访问请求,基于所述访问请求获取待访问网站的域名;
步骤S102,从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP;
步骤S103,通过所述目标代理IP向所述目标主机发送所述访问请求。
本实施例中,所述源主机可以是手机、电脑、平板等与用户进行交互的电子网络设备,所述目标主机可以是信息数据提供商的服务器、云平台。本实施例中,新增代理服务器,代理服务器(Proxy Server,PS)的功能是代理源主机去取得网络信息。形象地说,代理服务器是网络信息的中转站,是个人网络和网络信息服务商之间的中间代理机构,负责转发合法的网络信息,对转发进行控制和登记。一般地,代理服务器都设置有代理池,所述代理池管理大量代理IP。换句话说,代理池是一个控制代理质量的系统。如果没有使用代理服务器,源主机直接基于自身真实IP将访问请求发送至目标主机,所述目标主机解析所述访问请求获得所述访问请求中携带的真实IP地址、请求内容等信息,并获取所述访问请求将对应的响应数据,根据所述真实IP地址将所述响应数据返回至所述源主机。如果使用了代理服务器,源主机通过代理IP将访问请求发送至所述代理服务器,也即将真实IP隐藏,仅仅将包括代理IP的访问请求发送至目标主机,所述目标主机响应所述访问请求并将对应的响应数据返回至所述源主机,提高安全性。
具体地,所述步骤S101包括:接收源主机发送的访问请求,获取所述访问请求中待访问网站的域名。域名是通往待访问网站的路,是由一串用点分隔的名字组成的Internet(互联网)上某一台计算机或计算机组的名称,用于在数据传输时标识计算机的电子方位(有时也指地理位置),通常由一串字符和后缀组成,常见的后缀有com、net、cn等,相对于IP或者其它地址来说,域名更容易记忆、更具有标识性。域名是沟通机器世界和人类世界的重要桥梁,机器世界根据IP地址来定位主机,访问网站资源等。
当前,大部分代理池中的代理IP长时间不更新,因此同一个域名被同一个代理IP访问的概率会随着代理池的使用时间逐渐增大,进而可能会导致代理IP被禁止的风险。
为了增强网站访问的便捷性和稳定性,本实施例引入区间管理的概念。具体地,在代理服务器中增加区间管理单元,所述区间管理单元用于更新代理池中代理IP与域名的映射关系,以保证同一个域名不会被相同代理IP频繁访问。具体地,参照图3,图3是本发明基于代理的访问方法第一实施例涉及的代理服务器、源主机以及目标主机的部署示意图。如图3所示,所述基于代理的访问方法涉及源主机、目标主机、代理服务器,其中所述代理服务器包括所述区间管理单元和所述代理池。
所述代理池中存储了大量代理IP,通过所述区间管理单元为各个代理IP设置有效时长。并且由所述区间管理单元预先获取源主机的总工作时长,并将所述总工作时长划分为若干个区间,具体地,将所述总工作时间表示为[源主机起始运行时间,源主机结束运行时间],以SBeginTime表示源主机起始运行时间,以SEndTime表示源主机结束运行时间,则所述总工作时间为:[SBeginTime,SEndTimeTime],对应的总工作时长为SEndTimeTime-SBeginTime。进一步地,将所述总工作时长划分为i个区间,将各个区间的预设区间时长标记为Tseg(Tseg等于[SiBeginTime,SiEndTimeTime]),由此,可将各个区间的时间范围标记为[SiBeginTime+(i-1)×Tseg,SiBeginTime+i×Tseg]。进一步地,将代理IP的有效时长标记为IPtime,将源主机与目标主机进行通信的时长标记为会话时长Tmes,将当前时间标记为t,可以理解地,所述当前时间可以在总工作时间内,如t1,也可以在总工作时间外,如t2。
具体地,参照图4,图4是本发明基于代理的访问方法第一实施例涉及的一场景示意图。如图4a所示,图4a通过在时间轴示出了各个时间点或时间段。图4b是具体示例。如图4b所示,所述区间的开始时间SiBeginTime为8:00,结束时间SiEndTime为18:00,总工作时间为[8:00,18:00],对应的总工作时长为10个小时。将所述预设区间时长Tseg设置为2小时,也即每个区间的区间时长为2小时,如此则将总工作时间平均分为5个区间,也即i=5,包括区间1、区间2、区间3、区间4、和区间5。
为了所述源主机保证不会使用同一个代理IP频繁地访问某个域名,需要提前设置目标代理IP。具体地,如图5所示,图5是本发明基于代理的访问方法第一实施例的更新代理IP列表步骤的细化流程示意图,所述从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP的步骤之前还包括:
步骤S201:获取当前时间所在的区间起点,基于所述区间起点和预设临界值确定预设更新时间范围;
步骤S202:判断所述当前时间是否在所述预设更新时间范围内;
步骤S203:若所述当前时间在预设更新时间范围内,则从代理池中获取实际有效时长满足有效时长判定条件的多个代理IP,基于所述多个代理IP为每个域名分配一个代理IP,生成所述代理IP列表。
具体地,所述步骤S201:获取当前时间所在的区间起点,基于所述区间起点和预设临界值确定预设更新时间范围的步骤包括:
根据所述当前时间、源主机起始运行时间以及预设区间时长计算所述当前时间所在的目标区间,并确定所述目标区间的时间范围;
根据所述目标区间的时间范围确定所述目标区间的区间起点,将所述区间起点与所述预设临界值的差值确定为更新起点;
将所述预设更新时间范围确定为所述更新起点与所述开始时间之间。
可以理解地,为了保证IP列表中的代理IP在任何一个区间的任何时间点(包括最末尾区间的末端时间)都有效,则代理IP的有效时长IPtime必须符合有效时长条件,本实施例中基于更新起点和预设区间时长设置所述有效时长判定条件,将所述有效时长条件设置为:所述代理IP的有效时长IPtime大于预设区间时长与所述更新起点之和,将更新起点标记为T0。由此将代理IP的有效时长IPtime的有效时长条件表示为:
IPtime≥Tseg+T0
如图4a所示,若所述当前时间是位于[SiBeginTime,SiEndTime]之间的t1,则对应的代理IP能轻易地落入有效时长范围内。若所述当前时间是位于SEndTimeTime之外的t2,则如果预先按所述有效时长条件筛选代理IP,也能保证时间点为SEndTimeTime时,代理IP依然有效。
本实施例中,通过目标区间计算公式计算所述目标区间,所述目标区间计算公式为:
i=[floor(t-SBeginTime)/Tseg]+k;
也即所述目标区间的计算方法是:获取当前时间t减去源主机起始运行时间SBeginTime的差值,将所述差值除以预设区间时长Tseg获得除式结果,再取所述除式结果的下整数,最后将所述下整数加常数值k获得所述目标区间,其中,常数值k的具体数值根据实际情况设置,本实施例可选设置为1。
例如,若当前时间t为9:30,SBeginTime为8:00,Tseg为2小时,由此对应的区间i=[floor(9:30-8:00)/2]+1,在数学理解中将当前时间t减去源主机起始运行时间(9:30-8:00)对应于(9.5-8.0)得到差值,将差值确定为1.5,1.5除以2并取下整数的结果是0,再加上1之后,最终的值为1,也就是说,当前时间t为9:30所在的区间是区间1。
在利用C语言进行处理设置时,可以将所述目标区间计算公式表示为:
i=(t-SBeginTime)%Tseg+k;
其中,%表示求模运算。
根据所述目标区间计算公式确定所述当前时间所在的目标区间后,进一步确定所述目标区间的时间范围。对于平均划分各个区间的区间,所述时间范围是[SBeginTime+(i-1)×Tseg,SBeginTime+i×Tseg]。
基于所述时间范围即可确定定所述目标区间的区间起点SiBeginTime:SiBeginTime=SBeginTime+(i-1)×Tseg。
本实施例中,由所述区间管理单元确定预设临界值,将所述预设临界值表示为c,预设临界值可以根据经验确定,例如预设临界值c的值可以为0.5min、1min、2min。
将所述区间起点与所述预设临界值的差值确定为更新起点。继续参照图4b,也即所述更新起点为SiBeginTime-c。进一步地,将所述预设更新时间范围确定为大于所述更新起点且小于或等于所述区间起点。也即所述预设更新时间范围是[SiBeginTime-c,SiBeginTime],值得说明的是所述预设更新时间范围包括SiBeginTime-c这个时间点,但不包括SiBeginTime这个时间点。
当获取到所述预设更新时间范围后,则判断所述当前时间是否在所述预设更新时间范围内;若所述当前时间在预设更新时间范围内,则从代理池中获取有效时长满足有效时长判定条件的多个代理IP,基于所述多个代理IP为域名列表中的每个域名分配一个代理IP,生成所述代理IP列表。其中,所述有效时长判定条件是IPtime≥Tseg+T0。所述代理IP列表中包括多个代理IP,例如IP1、IP2、IP3……IPn
具体地,所述从代理池中获取有效时长满足有效时长判定条件的多个代理IP的步骤包括:获取所述代理池中各个代理IP的实际有效时长,筛选出所述实际有效时长满足所述有效时长判定条件的待选择代理IP;从所述待选择代理IP中选择与所述域名数量一致的多个代理IP。所述代理池中的各个待选择IP标记有各自的实际有效时长,根据所述有效时长判定条件选择多个代理IP,并随机为预先保存的多个域名分配代理IP,所述域名与所述代理IP一一对应。本实施例中,基于预先保存的多个域名生成域名列表,例如用D表示域名,则所述域名列表中包括D1、D2、D3……Dn
通过以下示例进行进一步解释说明上述方案。将总工作时长设置为24h,将所述预设区间时长Tseg设置为1h,将会话时长Tmes设置为1h,将所述预设临界值c设置为1min。基于上述设置,代理IP的有效时长IPtime为2h。由此,将所述总工作时长划分为24个区间,每个区间均为1h,为了避免时间重合,将代理IP列表的预设更新时间范围确定为区间起点往前1分钟。结果如表1所示,表1是本实施例中区间划分情况表。
Figure BDA0002548323860000091
Figure BDA0002548323860000101
表1是本实施例中区间划分情况表
如表1所示,如果当前时间为08:39:02,则从08:39:02到08:59:59之间的访问请求都会使用区间7对应的代理IP列表中的对应代理IP,同时,由于代理IP的有效时长为[08:00:00,9:00:00),对于最晚08:59:59的请求,都可以保证代理IP列表中的IP有效且不变。
可以理解地,由于划分了区间,因此不同区间中同一个域名对应的代理IP不相同。并且需要不断更新所述代理IP列表。本实施例中,等待预设时长后,再次基于实际时间和所述代理IP的有效时长生成新的代理IP列表,其中,相同域名在所述新的代理IP列表和所述代理IP列表中对应的IP不相同。所述预设时长可以小于或等于所述预设区间时长。所述新的IP列表中各个代理IP在其对应的区间内也是有效的。由此,实现了IP列表的动态更新,并且能保证同一个域名在各个区间分配到不同的有效代理IP,避免了同一个域名在不同区间内被分配相同代理IP导致的IP被禁风险,提高了源主机的隐私性和安全性,并增强了访问网站的便捷性和稳定性。
由此,获得所述代理IP列表后,基于所述访问请求中的域名从所述代理IP列表中查询对应的目标代理IP。具体地,基于所述当前时间计算目标区间,并确定与所述目标区间对应的代理IP列表,从所述代理IP列表中选择与所述域名对应的目标代理IP。由于缓存中预先保存有未清除的多个历史代理IP列表,因此需要根据所述当前时间计算目标区间,获取与所述目标区间对应的代理IP列表。判断所述代理IP列表中是否存在与所述域名匹配的目标代理IP,若存在与所述域名匹配的目标代理IP,则获取所述目标代理IP,例如在IP列表中若域名example.domain1.com对应的代理IP为10.10.10.1,则将10.10.10.1作为目标代理IP;在IP列表中若域名example.domainn.com对应的代理IP为10.10.10.n,则将10.10.10.n作为目标代理IP。若所述代理IP列表中不存在与所述域名匹配的目标代理IP,则基于补偿机制将当前时间段有效的备用代理IP作为目标代理IP。并且将保存所述域名,将所述域名存入所述域名列表。获取到所述目标代理IP后,则通过所述目标代理IP向所述目标主机发送所述访问请求,以供所述目标主机基于所述访问请求返回响应数据。
本实施例通过上述方法,获取源主机发送的访问请求,基于所述访问请求获取所述源主机的域名;从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP;通过所述目标代理IP向所述目标主机发送所述访问请求。由此通过目标代理IP发送访问请求,不会暴露真实IP,提高了源主机的隐私性和安全性,并且从基于当前时间更新的IP列表中选择目标代理IP,既实现了IP的动态更新又保证了邻近时间不会反复使用相同的代理IP访问同一个域名对应的目标主机,避免了代理IP被禁止的风险,保证应用分配到的IP在使用过程中有效且不变,增强了访问网站的便捷性和稳定性。
此外,本实施例还提供一种基于代理的访问装置。参照图6,图6为本发明基于代理的访问装置第一实施例的功能模块示意图。
本实施例中,所述基于代理的访问装置为虚拟装置,存储于图1所示的基于代理的访问设备的存储器1005中,以实现基于代理的访问程序的所有功能:用于获取源主机发送的访问请求,基于所述访问请求获取目标主机的域名;用于从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP;用于通过所述目标代理IP向所述目标主机发送所述访问请求。
具体地,所述基于代理的访问装置包括:
获取模块10,用于获取源主机发送的访问请求,基于所述访问请求获取目标主机的域名;
选择模块20,用于从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP;
发送模块30,用于通过所述目标代理IP向所述目标主机发送所述访问请求。
进一步,所述选择模块20还用于:
获取当前时间所在的区间起点,基于所述区间起点和预设临界值确定预设更新时间范围;
判断所述当前时间是否在所述预设更新时间范围内;
若所述当前时间在预设更新时间范围内,则从代理池中获取实际有效时长满足有效时长判定条件的多个代理IP,基于所述多个代理IP为每个域名分配一个代理IP,生成所述代理IP列表。
进一步,所述选择模块20还用于:
根据所述当前时间、源主机起始运行时间以及预设区间时长计算所述当前时间所在的目标区间,并确定所述目标区间的时间范围;
根据所述目标区间的时间范围确定所述目标区间的区间起点,将所述区间起点与所述预设临界值的差值确定为更新起点;
将所述预设更新时间范围确定为所述更新起点与所述开始时间之间。
进一步,所述选择模块20还用于:
基于更新起点和预设区间时长设置所述有效时长判定条件;
所述从代理池中获取有效时长满足有效时长判定条件的多个代理IP的步骤包括:
获取所述代理池中各个代理IP的实际有效时长,筛选出所述实际有效时长满足所述有效时长判定条件的待选择代理IP;
从所述待选择代理IP中选择与所述域名数量一致的多个代理IP。
进一步,所述选择模块20还用于:
等待预设时长后,再次基于实际时间和所述代理IP的有效时长生成新的代理IP列表,其中,相同域名在所述新的代理IP列表和所述代理IP列表中对应的IP不相同。
进一步,所述选择模块20还用于:
通过区间管理单元划分时间区间并设置各个代理IP的有效时长,所述时间区间包括所述源主机起始运行时间以及所述预设区间时长。
进一步,所述选择模块20还用于:
基于所述当前时间计算目标区间,并确定与所述目标区间对应的代理IP列表,从所述代理IP列表中选择与所述域名对应的目标代理IP。
此外,本发明实施例还提供一种计算机存储介质,所述计算机存储介质上存储有基于代理的访问程序,所述基于代理的访问程序被处理器运行时实现如上所述基于代理的访问方法的步骤,此处不再赘述。
相比现有技术,本发明提出的一种基于代理的访问装置、设备及存储介质,获取源主机发送的访问请求,基于所述访问请求获取所述源主机的域名;从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP;通过所述目标代理IP向所述目标主机发送所述访问请求。由此通过目标代理IP发送访问请求,不会暴露真实IP,提高了源主机的隐私性和安全性,并且从基于当前时间更新的IP列表中选择目标代理IP,既实现了IP的动态更新又保证了邻近时间不会反复使用相同的代理IP访问同一个域名对应的目标主机,避免了代理IP被禁止的风险,增强了访问网站的便捷性和稳定性。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备执行本发明各个实施例所述的方法。
以上所述仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或流程变换,或直接或间接运用在其它相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种基于代理的访问方法,其特征在于,所述方法包括:
获取源主机发送的访问请求,基于所述访问请求获取目标主机的域名;
从基于当前时间更新的代理网际互连协议IP列表中选择与所述域名对应的目标代理IP;
通过所述目标代理IP向所述目标主机发送所述访问请求。
2.根据权利要求1所述的方法,其特征在于,所述从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP的步骤之前还包括:
获取当前时间所在的区间起点,基于所述区间起点和预设临界值确定预设更新时间范围;
判断所述当前时间是否在所述预设更新时间范围内;
若所述当前时间在预设更新时间范围内,则从代理池中获取实际有效时长满足有效时长判定条件的多个代理IP,基于所述多个代理IP为每个域名分配一个代理IP,生成所述代理IP列表。
3.根据权利要求2所述的方法,其特征在于,所述获取当前时间所在的区间起点,基于所述区间起点和预设临界值确定预设更新时间范围的步骤包括:
根据所述当前时间、源主机起始运行时间以及预设区间时长计算所述当前时间所在的目标区间,并确定所述目标区间的时间范围;
根据所述目标区间的时间范围确定所述目标区间的区间起点,将所述区间起点与所述预设临界值的差值确定为更新起点;
将所述预设更新时间范围确定为所述更新起点与所述开始时间之间。
4.根据权利要求2所述的方法,其特征在于,所述从代理池中获取实际有效时长满足有效时长判定条件的多个代理IP的步骤之前还包括:
基于更新起点和预设区间时长设置所述有效时长判定条件;
所述从代理池中获取有效时长满足有效时长判定条件的多个代理IP的步骤包括:
获取所述代理池中各个代理IP的实际有效时长,筛选出所述实际有效时长满足所述有效时长判定条件的待选择代理IP;
从所述待选择代理IP中选择与所述域名数量一致的多个代理IP。
5.根据权利要求2中所述的方法,其特征在于,所若所述当前时间在预设更新时间范围内,则从代理池中获取有效时长满足有效时长判定条件的多个代理IP,基于所述多个代理IP为每个域名分配一个代理IP,生成所述代理IP列表的步骤之后还包括:
等待预设时长后,再次基于实际时间和所述代理IP的有效时长生成新的代理IP列表,其中,相同域名在所述新的代理IP列表和所述代理IP列表中对应的IP不相同。
6.根据权利要求2所述的方法,其特征在于,所述从代理池中获取实际有效时长满足有效时长判定条件的多个代理IP源主机起始运行时间的步骤之前还包括:
划分时间区间并设置各个代理IP的有效时长,所述时间区间包括所述源主机起始运行时间以及所述预设区间时长。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP的步骤包括:
基于所述当前时间计算目标区间,并确定与所述目标区间对应的代理IP列表,从所述代理IP列表中选择与所述域名对应的目标代理IP。
8.一种基于代理的访问装置,其特征在于,所述基于代理的访问装置包括:
获取模块,用于获取源主机发送的访问请求,基于所述访问请求获取目标主机的域名;
选择模块,用于从基于当前时间更新的代理IP列表中选择与所述域名对应的目标代理IP;
发送模块,用于通过所述目标代理IP向所述目标主机发送所述访问请求。
9.一种基于代理的访问设备,其特征在于,所述基于代理的访问设备包括处理器,存储器以及存储在所述存储器中的基于代理的访问程序,所述基于代理的访问程序被所述处理器运行时,实现如权利要求1-7中任一项所述的基于代理的访问方法的步骤。
10.一种计算机存储介质,其特征在于,所述计算机存储介质上存储有基于代理的访问程序,所述基于代理的访问程序被处理器运行时实现如权利要求1-7中任一项所述基于代理的访问方法的步骤。
CN202010571469.6A 2020-06-19 2020-06-19 基于代理的访问方法、装置、设备及存储介质 Active CN111741109B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010571469.6A CN111741109B (zh) 2020-06-19 2020-06-19 基于代理的访问方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010571469.6A CN111741109B (zh) 2020-06-19 2020-06-19 基于代理的访问方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN111741109A true CN111741109A (zh) 2020-10-02
CN111741109B CN111741109B (zh) 2024-06-18

Family

ID=72651935

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010571469.6A Active CN111741109B (zh) 2020-06-19 2020-06-19 基于代理的访问方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN111741109B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112822306A (zh) * 2021-02-03 2021-05-18 深圳前海微众银行股份有限公司 代理ip动态管理方法、设备及计算机可读存储介质
CN113645294A (zh) * 2021-08-06 2021-11-12 腾讯科技(深圳)有限公司 消息获取方法、装置、计算机设备和消息传输系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108173976A (zh) * 2016-12-07 2018-06-15 腾讯科技(深圳)有限公司 域名解析方法及装置
CN108616525A (zh) * 2018-04-16 2018-10-02 深圳市小满科技有限公司 网站访问方法和装置、电子设备及存储介质
CN109361784A (zh) * 2018-12-07 2019-02-19 成都知道创宇信息技术有限公司 一种在四层代理网络环境下获取客户端真实ip的方法
CN109787951A (zh) * 2018-11-22 2019-05-21 北京奇艺世纪科技有限公司 一种网络数据访问方法、装置及电子设备
CN110489626A (zh) * 2019-08-05 2019-11-22 苏州闻道网络科技股份有限公司 一种信息采集方法和装置
CN110677510A (zh) * 2019-09-11 2020-01-10 苏州朗动网络科技有限公司 Ip代理池的管理方法、设备和存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108173976A (zh) * 2016-12-07 2018-06-15 腾讯科技(深圳)有限公司 域名解析方法及装置
CN108616525A (zh) * 2018-04-16 2018-10-02 深圳市小满科技有限公司 网站访问方法和装置、电子设备及存储介质
CN109787951A (zh) * 2018-11-22 2019-05-21 北京奇艺世纪科技有限公司 一种网络数据访问方法、装置及电子设备
CN109361784A (zh) * 2018-12-07 2019-02-19 成都知道创宇信息技术有限公司 一种在四层代理网络环境下获取客户端真实ip的方法
CN110489626A (zh) * 2019-08-05 2019-11-22 苏州闻道网络科技股份有限公司 一种信息采集方法和装置
CN110677510A (zh) * 2019-09-11 2020-01-10 苏州朗动网络科技有限公司 Ip代理池的管理方法、设备和存储介质

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112822306A (zh) * 2021-02-03 2021-05-18 深圳前海微众银行股份有限公司 代理ip动态管理方法、设备及计算机可读存储介质
CN112822306B (zh) * 2021-02-03 2022-07-29 深圳前海微众银行股份有限公司 代理ip动态管理方法、设备及计算机可读存储介质
CN113645294A (zh) * 2021-08-06 2021-11-12 腾讯科技(深圳)有限公司 消息获取方法、装置、计算机设备和消息传输系统
CN113645294B (zh) * 2021-08-06 2022-08-26 腾讯科技(深圳)有限公司 消息获取方法、装置、计算机设备和消息传输系统

Also Published As

Publication number Publication date
CN111741109B (zh) 2024-06-18

Similar Documents

Publication Publication Date Title
CN111460460B (zh) 任务访问方法、装置、代理服务器及机器可读存储介质
JP6306187B2 (ja) 動的電話番号割り当て
EP3557841A1 (en) Dns attack defense method, apparatus and system
US20060039352A1 (en) System and method for designating a priority access order of domain name service servers
AU2011352884B2 (en) Systems and methods for domain name exchange
EP3860095A1 (en) Methods for information drainage, requesting transmission and communication acceleration, and drainage and node server
CN103002069A (zh) 一种域名解析方法、装置及系统
CN113497817A (zh) 流量调度方法、装置、cdn网络的边缘节点及服务器
CN111741109B (zh) 基于代理的访问方法、装置、设备及存储介质
CN111585887A (zh) 基于多个网络的通信方法、装置、电子设备及存储介质
US10237233B2 (en) Allocating identifiers with minimal fragmentation
CN110677492A (zh) 一种访问请求处理方法、装置、电子设备及存储介质
WO2020088170A1 (zh) 域名系统配置方法及相关装置
JP2007089138A (ja) 通信機器、通信方法および通信プログラム
CN110944007B (zh) 一种网络访问管理方法、系统、装置及存储介质
JP2010233213A5 (ja) 画像処理装置及びその制御方法、並びに記憶媒体
CN111556109B (zh) 请求处理方法、装置、电子设备和存储介质
CN117592685A (zh) 业务处理方法、装置、电子设备及存储介质
JP6484166B2 (ja) 名前解決装置、名前解決方法及び名前解決プログラム
CN115037693B (zh) 一种基于令牌桶的分布式限流方法和分布式限流装置
CN112866355B (zh) 用于服务器故障转移和负荷平衡的系统和方法
CN115842641A (zh) 访问请求的处理方法、电子装置、电子设备以及介质
CN112689031A (zh) 一种ip地址分配方法、装置及介质
KR100784152B1 (ko) Isp 시스템에 dns 시스템을 부가 설치하여 가입자pc에게 서비스를 제공하는 방법 및 그 시스템
CN113497811A (zh) 一种域名系统服务器分配方法及相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant