CN115118598A - 信息采集方法、装置、设备及存储介质 - Google Patents

信息采集方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN115118598A
CN115118598A CN202210720252.6A CN202210720252A CN115118598A CN 115118598 A CN115118598 A CN 115118598A CN 202210720252 A CN202210720252 A CN 202210720252A CN 115118598 A CN115118598 A CN 115118598A
Authority
CN
China
Prior art keywords
information
configuration
information acquisition
instruction
terminal equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210720252.6A
Other languages
English (en)
Inventor
杨苗
徐名扬
郑强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
3600 Technology Group Co ltd
Original Assignee
3600 Technology Group Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 3600 Technology Group Co ltd filed Critical 3600 Technology Group Co ltd
Priority to CN202210720252.6A priority Critical patent/CN115118598A/zh
Publication of CN115118598A publication Critical patent/CN115118598A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0803Configuration setting
    • H04L41/084Configuration by using pre-existing information, e.g. using templates or copying from other elements
    • H04L41/0843Configuration by using pre-existing information, e.g. using templates or copying from other elements based on generic templates
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0803Configuration setting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1001Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004Server selection for load balancing
    • H04L67/1008Server selection for load balancing based on parameters of servers, e.g. available memory or workload

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Telephone Function (AREA)

Abstract

本发明公开了一种信息采集方法、装置、设备及存储介质,属于信息处理技术领域,所述方法包括:获取待处理任务和空闲设备;根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息;根据所述配置信息进行信息采集。从而可以利用模板配置的方式实现信息采集功能,提高了信息采集的效率。

Description

信息采集方法、装置、设备及存储介质
技术领域
本发明涉及信息处理技术领域,尤其涉及一种信息采集方法、装置、设备及存储介质。
背景技术
群控手机采集技术目前已经比较成熟,但是,仍没有统一的方案去解决所有app的信息采集问题,存在信息采集效率较低的问题。
发明内容
本发明的主要目的在于提出一种信息采集方法、装置、设备及存储介质,旨在解决如何提高信息采集效率的技术问题。
为实现上述目的,本发明实施例提供一种信息采集方法,所述信息采集方法包括:
获取待处理任务和空闲设备;
根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息;
根据所述配置信息进行信息采集。
可选地,所述根据所述配置信息进行信息采集,包括:
根据所述配置信息和预设操作映射生成采集操作指令;
基于所述采集操作指令和目标终端设备进行信息采集。
可选地,所述根据所述配置信息和预设操作映射生成采集操作指令,包括:
根据所述配置信息确定控制策略和循环参数信息;
根据所述控制策略、所述循环参数信息以及预设操作映射确定操作逻辑;
根据所述操作逻辑生成采集操作指令。
可选地,所述根据所述控制策略、所述循环参数信息以及预设操作映射确定操作逻辑,包括:
根据所述控制策略和预设操作映射确定目标操作动作;
根据所述目标操作动作和所述循环参数信息确定操作逻辑。
可选地,所述预设操作映射中包括待选控制策略与待选操作动作之间的对应关系;
所述根据所述控制策略和预设操作映射确定目标操作动作,包括:
将所述控制策略与所述预设操作映射中的待选控制策略进行匹配;
根据匹配结果将与所述控制策略相匹配的待选控制策略对应的待选操作动作作为目标操作动作。
可选地,所述基于所述采集操作指令和目标终端设备进行信息采集,包括:
将所述采集操作指令发送至目标终端设备,以使所述目标终端设备根据所述采集操作指令执行操作逻辑;
采集所述目标终端设备执行所述操作逻辑产生的目标信息。
可选地,所述基于所述采集操作指令和目标终端设备进行信息采集之前,还包括:
获取当前处于联机状态的候选终端设备;
对所述候选终端设备进行探活操作;
对探活失败的候选终端设备进行下线操作,并对探活成功的候选终端设备进行上线操作;
将处于上线状态的候选终端设备作为目标终端设备。
可选地,所述探活操作包括解锁探活操作和唤醒探活操作;
所述对所述候选终端设备进行探活操作,包括:
对所述候选终端设备的屏幕进行解锁探活操作,并对所述候选终端设备进行唤醒探活操作。
可选地,所述对所述候选终端设备的屏幕进行解锁探活操作,并对所述候选终端设备进行唤醒探活操作之后,还包括:
若候选终端设备能够完成所述解锁探活操作和唤醒探活操作,则判定针对所述候选终端设备的探活成功;
若候选终端设备不能够完成所述解锁探活操作和唤醒探活操作,则判定针对所述候选终端设备的探活失败。
可选地,所述获取当前处于联机状态的候选终端设备,包括:
获取与目标主机连接的待选终端设备;
对所述待选终端设备进行连接验证;
将通过连接验证的待选终端设备作为当前处于联机状态的候选终端设备。
可选地,所述根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息,包括:
根据所述待处理任务确定配置需求;
根据所述配置需求生成配置指令;
将所述配置指令发送至所述空闲设备,以使所述空闲设备根据所述配置指令在预设配置模板中执行配置内容,并反馈配置信息。
此外,为实现上述目的,本发明实施例还提出一种信息采集装置,所述信息采集装置包括:
信息获取模块,用于获取待处理任务和空闲设备;
信息配置模块,用于根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息;
信息采集模块,用于根据所述配置信息进行信息采集。
可选地,所述信息采集模块,还用于根据所述配置信息和预设操作映射生成采集操作指令;基于所述采集操作指令和目标终端设备进行信息采集。
可选地,所述信息采集模块,还用于根据所述配置信息确定控制策略和循环参数信息;根据所述控制策略、所述循环参数信息以及预设操作映射确定操作逻辑;根据所述操作逻辑生成采集操作指令。
可选地,所述信息采集模块,还用于根据所述控制策略和预设操作映射确定目标操作动作;根据所述目标操作动作和所述循环参数信息确定操作逻辑。
可选地,所述预设操作映射中包括待选控制策略与待选操作动作之间的对应关系;所述信息采集模块,还用于将所述控制策略与所述预设操作映射中的待选控制策略进行匹配;根据匹配结果将与所述控制策略相匹配的待选控制策略对应的待选操作动作作为目标操作动作。
可选地,所述信息采集模块,还用于将所述采集操作指令发送至目标终端设备,以使所述目标终端设备根据所述采集操作指令执行操作逻辑;采集所述目标终端设备执行所述操作逻辑产生的目标信息。
可选地,所述信息采集装置还包括:
设备探活模块,用于获取当前处于联机状态的候选终端设备;对所述候选终端设备进行探活操作;对探活失败的候选终端设备进行下线操作,并对探活成功的候选终端设备进行上线操作;将处于上线状态的候选终端设备作为目标终端设备。
此外,为实现上述目的,本发明实施例还提出一种信息采集设备,所述信息采集设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的信息采集程序,所述信息采集程序被处理器执行时实现如上所述的信息采集方法。
此外,为实现上述目的,本发明实施例还提出一种存储介质,所述存储介质上存储有信息采集程序,所述信息采集程序被处理器执行时实现如上所述的信息采集方法。
本发明实施例提出的信息采集方法中,获取待处理任务和空闲设备;根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息;根据所述配置信息进行信息采集。从而可以利用模板配置的方式实现信息采集功能,提高了信息采集的效率。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的信息采集设备结构示意图;
图2为本发明信息采集方法第一实施例的流程示意图;
图3为本发明信息采集方法一实施例的信息采集系统的架构示意图;
图4为本发明信息采集方法第二实施例的流程示意图;
图5为本发明信息采集方法一实施例的模板配置示意图;
图6为本发明信息采集方法第三实施例的流程示意图;
图7为本发明信息采集装置第一实施例的功能模块示意图。
本发明实施例目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明实施例,并不用于限定本发明实施例。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的信息采集设备结构示意图。
如图1所示,该信息采集设备可以包括:处理器1001,例如中央处理器(CentralProcessing Unit,CPU),通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如按键,可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如Wi-Fi接口)。存储器1005可以是高速随机存取存储器(Random Access Memory,RAM),也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的设备结构并不构成对信息采集设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及信息采集程序。
在图1所示的信息采集设备中,网络接口1004主要用于连接外网,与其他网络设备进行数据通信;用户接口1003主要用于连接用户设备,与所述用户设备进行数据通信;本发明实施例设备通过处理器1001调用存储器1005中存储的信息采集程序,并执行本发明实施例提供的信息采集方法。
基于上述硬件结构,提出本发明信息采集方法实施例。
参照图2,图2为本发明信息采集方法第一实施例的流程示意图。
在第一实施例中,所述信息采集方法包括:
步骤S10,获取待处理任务和空闲设备。
需要说明的是,本实施例的执行主体可为信息采集设备,该信息采集设备可为具有数据处理功能的计算机设备,还可为其他可实现相同或相似功能的设备,本实施例对此不作限制,在本实施例中,以信息采集设备为计算机设备为例进行说明。
需要说明的是,本实施例中的空闲设备和目标终端设备可以包括但不限于手机、平板、电脑以及智能穿戴设备等多种类型的设备,本实施例对此不作限制。其中,空闲设备可为用于模板配置的设备,目标终端设备可为与主机相连、需要进行信息采集的设备,在本实施例中,以目标终端设备为手机为例进行说明。
应当理解的是,群控手机采集技术目前已经比较成熟,但是,仍没有统一的方案去解决所有app的信息采集问题,存在信息采集效率较低的问题。因此,为了提高信息采集效率,进而提高开发效率,提出了本方案以及对应的信息采集系统,解决通用配置操作群控手机的问题。
可以理解的是,可以如图3所示,图3为信息采集系统的架构示意图,该信息采集系统可以包括但不限于调度模块、手机群控模块、通用配置模块以及主从分发架构等,包含多种目前比较领先的通用技术和采集技术,本实施例对此不作限制。
需要说明的是,该系统中的调度模块可以包括多个调度程序(scheduler);通用配置模块可以包括通用配置平台(platform),基于配置平台可以进行调度程序配置(scheduler config)和手机配置(phone config);并且,在该系统中还可以设置主机(master)与调度模块进行连接,该主机还与多个从机(follower)连接,每个从机也可以连接对应的手机,从而通过上述这种主从分发架构进行手机群控。
可以理解的是,在进行信息采集之前,可以通过通用配置平台先进行调度程序配置和手机配置,在配置完成之后,由调度模块将配置信息发送给主机,然后由主机转发给从机,最后发送给处于上线状态的手机,以从这些手机上进行信息采集。
需要说明的是,由于不同任务需要采集的信息不同,因此,为了在提高信息采集效率的同时,保证信息采集的准确性,还可以通过空闲设备根据待处理任务进行配置,得到配置信息,然后再通过配置信息进行信息采集。
应当理解的是,可以将多个具有模板配置功能的设备与通用配置平台连接,但是,由于可能有些设备正在进行模板配置或者正在进行其他操作,如果选用这些设备来进行本次的模板配置可能会影响到设备的处理效率,并且还容易出现处理故障。因此,为了达到更好的模板配置效果,可以筛选出空间设备,通过空闲设备来进行模板配置。
在具体实现中,可以先检测与通用配置平台相连的多个具有模板配置功能的设备,然后分别向这些设备发送状态检测指令,以使这些设备根据状态检测指令反馈当前状态信息,进而根据设备反馈的当前状态信息来判断设备是否处于空闲状态,将处于空闲状态的设备作为空闲设备,除此之外,还可以通过其他方式来进行确定空闲设备,本实施例对此不作限制。
步骤S20,根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息。
可以理解的是,在确定待处理任务和空闲之后,可以根据待处理任务确定配置需求,进而根据配置需求生成配置指令,将配置指令发送至空闲设备,由空闲设备根据配置指令在预设配置模板中执行配置内容,并在配置完成之后反馈配置信息。
应当理解的是,本方案提出完整的解释自定义协议的解释系统,通过此系统可以完全脱离代码层面,实现页面操作就可以完成复杂场景的信息采集工作。通过上述方式,可以利用模板配置的方式实现采集功能,在最底层实现一套解释配置模板的通用系统,并且系统搭建在分布式任务系统中,提供了任务的管理、监控、报警等集成模块。
步骤S30,根据所述配置信息进行信息采集。
应当理解的是,在得到配置信息之后,还可以根据配置信息和预设操作映射生成采集操作指令,进而基于采集操作指令和目标终端设备来进行信息采集。
可以理解的是,可以根据配置信息确定控制策略和循环参数信息,根据控制策略和预设操作映射确定目标操作动作,然后根据目标操作动作和循环参数信息确定操作逻辑,进而根据操作逻辑生成采集操作指令,本实施例对此不作限制。
在具体实现中,可以首先由程序定时发现任务,并发现空闲设备,发送指令到空闲设备执行配置内容,服务端读取到配置信息,并对配置信息进行解读,根据预设操作映射和解读后的配置信息生成采集操作指令,以使手机根据采集操作指令按照程序解读的配置信息执行操作逻辑,并反馈目标信息,从而实现信息采集的效果。
进一步地,由于在本方案的主从分发架构中可能连接有多个手机,但是,这些手机可能并不都处于上线状态,即有些手机可能因为某些特殊情况已经断开了连接、或者处于关机状态,而向上述这些不处于上线状态的手机发送采集操作指令显然是无法实现信息采集的,不仅浪费了处理资源,而且会延误处理时间,会降低信息采集的效率。因此,针对上述问题,本方案还可以先对手机进行连接检测和探活检测,然后对手机进行自动上下线,将处于上线状态的手机作为目标终端设备,进而向目标终端设备发送采集操作指令以进行信息采集,可以进一步提高信息采集效率。
在具体实现中,可以将广告app媒体监管运用到本方案的框架和系统中,针对各种目前app开发配置操作,并提供了统一模板式流程,因此,本方案可以增加统一模板,以增加信息采集效率和开发效率,并且,通过平台化的方式,还可以灵活的进行水平扩展和动态伸缩。
在本实施例中,获取待处理任务和空闲设备;根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息;根据所述配置信息进行信息采集。从而可以利用模板配置的方式实现信息采集功能,提高了信息采集的效率。
在一实施例中,如图4所示,基于第一实施例提出本发明信息采集方法第二实施例,所述步骤S20,包括:
步骤S201,根据所述待处理任务确定配置需求。
需要说明的是,由于不同任务需要采集的信息不同,因此,需要根据不同任务的任务信息确定对应的配置需求,从而达到更好的模板配置效果。所以,在确定当前的待处理任务之后,可以对待处理任务进行解析,进而确定待处理任务对应的配置需求。
应当理解的是,本实施例中的配置需求可以包括但不限于控制策略以及循环次数,还可以包括其他更多的需求,本实施例对此不作限制。
步骤S202,根据所述配置需求生成配置指令。
应当理解的是,在确定待处理任务对应的配置需求之后,还可以根据配置需求生成配置指令,通过将配置指令发送到空闲设备,使空闲设备执行配置内容的方式来进行模板配置。
步骤S203,将所述配置指令发送至所述空闲设备,以使所述空闲设备根据所述配置指令在预设配置模板中执行配置内容,并反馈配置信息。
可以理解的是,可以预先设置方便用户填写信息或者选择信息的配置模板,将配置指令发送至空闲设备之后,可以由空闲设备根据配置指令在预设的配置模板中执行配置指令对应的配置内容,显示对应的配置页面,然由配置人员基于空闲设备上显示的配置页面以及配置内容进行模板配置,在配置完成之后,得到配置信息,并将该配置信息反馈给平台服务器。
需要说明的是,可如图5所示,图5为模板配置示意图,本方案提出完整的解释自定义协议的解释系统,通过此系统可以完全脱离代码层面,实现页面操作就可以完成复杂场景的信息采集工作。
可以参照图5所示的模板配置示意图,通过图5中的页面配置,可以将自定义配置形成json格式,如下结构:
Figure BDA0003711026390000091
Figure BDA0003711026390000101
Figure BDA0003711026390000111
Figure BDA0003711026390000121
在上述结构中,可以通过不同标识代表不同含义,并实现判断逻辑、循环逻辑以及手机操作逻辑,结合这些逻辑来实现高效率的群控手机信息采集。使用这种方式,我们就利用模版配置的方式实现了采集功能,最底层在实现一套解释配置模版的通用系统,并且系统搭建在分布式任务系统中,提供了任务的管理、监控、报警等集成模块
在本实施例中,根据所述待处理任务确定配置需求;根据所述配置需求生成配置指令;将所述配置指令发送至所述空闲设备,以使所述空闲设备根据所述配置指令在预设配置模板中执行配置内容,并反馈配置信息。从而可以根据配置需求生成配置指令后,将配置指令发送至空闲设备进行模板配置,提高了模板配置的效率,也进一步提高了信息采集的效率。
在一实施例中,如图6所示,基于第一实施例或第二实施例提出本发明信息采集方法第三实施例,在本实施例中,基于第一实施例进行说明,所述步骤S30,包括:
步骤S301,根据所述配置信息和预设操作映射生成采集操作指令。
需要说明的是,可以预先根据信息采集的需求配置一些待选控制策略和待选操作动作,并使各待选控制策略与待选操作动作之间具有对应关系,例如,可以使待选控制策略与待选操作动作之间一一对应,本实施例对此不作限制。
可以理解的是,为了便于数据查找和数据调用,可以根据待选控制策略、待选操作动作以及它们之间的对应关系构建预设操作映射,其中,预设操作映射可以表格的形式进行保存,也可以其他形式进行保存,本实施例对此不作限制。在具体实现中,以预设操作映射表为例进行说明,例如,预设操作映射表可如表1所示:
表1预设操作映射表
待选控制策略 待选操作动作
swipe 滑动
screen_shot 截屏
click 单击
scroll_screen_shot 滚动截屏
next_operate 下个操作(back返回)
可以理解的是,具体以上每个操作映射,都可以进行程序封装,通过这种方式,可以不关注底层程序,只需了解其含义就可完成配置采集操作,降低了配置采集操作的操作难度,从而可以更加方便地进行配置采集操作。
应当理解的是,可以根据配置信息确定控制策略以及循环参数信息等信息,然后根据控制策略和预设操作映射确定与控制策略匹配的目标操作动作,进而根据目标操作动作和循环参数信息确定操作逻辑,再根据操作逻辑生成采集操作指令。其中,本实施例中的循环参数信息可以包括但不限于循环次数,本实施例对此不作限制。
可以理解的是,为了更加准确地确定目标操作动作,可以将控制策略与预设操作映射中的待选控制策略进行匹配,根据匹配结果将与控制策略相匹配的待选控制策略作为目标控制策略,并将目标控制策略对应的待选操作动作作为目标操作动作。在具体实现中,例如,假设控制策略为click,则可以匹配到对应的目标操作动作为单击。
步骤S302,基于所述采集操作指令和目标终端设备进行信息采集。
应当理解的是,在通过上述方式得到采集操作指令之后,可以将采集操作指令发送至目标终端设备,以使目标终端设备根据采集操作指令执行对应的操作逻辑,进而可以采集目标终端设备执行操作逻辑产生的目标信息,从而实现信息采集。
可以理解的是,由于本方案可以用于与手机群控场景,目标终端设备可以为多个,因此,在目标终端设备为多个时,可以同时向这些目标终端设备发送采集操作指令,使这些目标终端设备同时根据采集操作指令执行对应的操作逻辑,从而可以同时采集这些目标终端设备执行操作逻辑产生的目标信息,本实施例对此不作限制。
在具体实现中,本实施例的任务执行流程描述可如下所示:首先程序定时发现任务,并发现空闲设备,根据任务发送指令到空闲设备执行配置内容,服务端读取到如上所述配置数据结构的配置信息,对配置信息进行解读,按照操作映射和解读后的配置信息确定操作逻辑并生成对应的采集操作指令,使手机根据采集操作指令按照程序解读的配置信息执行操作逻辑。其中,本实施例中的配置信息可以包括但不限于控制策略以及循环参数信息等信息,按照定义,配置中数组代表循环执行,json代表单次执行内容,本实施例对此不作限制。
进一步地,为了避免浪费处理资源,延长处理时间,还可以获取与目标主机连接的待选终端设备,对这些待选终端设备进行连接验证,将通过连接验证的待选终端设备作为当前处于联机状态的候选终端设备。其中,可以通过use connect连接的方式来进行连接验证,可以通过其他方式来进行连接验证,本实施例对此不作限制。其中,本实施例中的目标主机可以包括但不限于电脑端,本实施例对此不作限制。
可以理解的是,可获取当前处于联机状态的候选终端设备,并对候选终端设备进行探活操作,对探活失败的候选终端设备进行下线操作,并对探活成功的候选终端设备进行上线操作,进而将处于上线状态的候选终端设备作为目标终端设备,基于目标终端设备进行信息采集操作。
应当理解的是,为了提高探活的准确性,本实施例中采用两种探活操作,本实施例中的探活操作可以包括解锁探活操作和唤醒探活操作。在具体实现中,可以先对候选终端设备的屏幕进行解锁探活操作,然后再对候选终端设备进行唤醒然后操作,本实施例对此不作限制。
可以理解的是,如果候选终端设备可以同时完成上述两种探活操作,则可以判定探活成功,否则探活失败。即若候选终端设备能够完成解锁探活操作和唤醒探活操作,则判定针对该候选终端设备的探活成功;若候选终端设备不能够完成解锁探活操作和唤醒探活操作,则判定针对该候选终端设备的探活失败。
应当理解的是,本方案通过自主研发主从架构,通过uiautomator2完成手机操作,实现了群控手机等功能,并包含手机探活,手机自动上下线,程序安装卸载app等,本实施例对此不作限制。
可以理解的是,本实施例中的探活功能和手机自动上下线功能的具体操作方式可如下所示:
探活功能:程序会定时拉取电脑端连接的手机设备,每次执行,会首先进行useconnect连接,还在联机的设备,进行探活操作,探活总共有两个操作,首先进行手机屏幕unlock进行解锁,然后进行wakeup唤醒操作,通过以上两个步骤完成探活行为,不能完成以上两个操作的手机设备,认为是异常设备进行下线。
手机自动上下线:上线,手机插入电脑端,adb devices会检测到新设备接入,探活功能定时操作时,发现此设备不在线上设备中,然后进行探活流程,最后进行上线;下线,探活定时操作,发现线上手机已经不在adb devices中,认定此设备为丢失设备,进行下线操作,将其从缓存中删除。
在本实施例中,根据所述配置信息和预设操作映射生成采集操作指令,基于所述采集操作指令和目标终端设备进行信息采集,从而可以先进行模板配置,然后再根据配置信息结合预设操作映射生成采集操作指令来对目标终端设备进行信息采集,提高了开发效率。
此外,本发明实施例还提出一种存储介质,所述存储介质上存储有信息采集程序,所述信息采集程序被处理器执行时实现如上文所述的信息采集方法的步骤。
由于本存储介质采用了上述所有实施例的全部技术方案,因此至少具有上述实施例的技术方案所带来的所有有益效果,在此不再一一赘述。
此外,参照图7,本发明实施例还提出一种信息采集装置,所述信息采集装置包括:
信息获取模块10,用于获取待处理任务和空闲设备。
需要说明的是,本实施例中的空闲设备和目标终端设备可以包括但不限于手机、平板、电脑以及智能穿戴设备等多种类型的设备,本实施例对此不作限制。其中,空闲设备可为用于模板配置的设备,目标终端设备可为与主机相连、需要进行信息采集的设备,在本实施例中,以目标终端设备为手机为例进行说明。
应当理解的是,群控手机采集技术目前已经比较成熟,但是,仍没有统一的方案去解决所有app的信息采集问题,存在信息采集效率较低的问题。因此,为了提高信息采集效率,进而提高开发效率,提出了本方案以及对应的信息采集系统,解决通用配置操作群控手机的问题。
可以理解的是,可以如图3所示,图3为信息采集系统的架构示意图,该信息采集系统可以包括但不限于调度模块、手机群控模块、通用配置模块以及主从分发架构等,包含多种目前比较领先的通用技术和采集技术,本实施例对此不作限制。
需要说明的是,该系统中的调度模块可以包括多个调度程序(scheduler);通用配置模块可以包括通用配置平台(platform),基于配置平台可以进行调度程序配置(scheduler config)和手机配置(phone config);并且,在该系统中还可以设置主机(master)与调度模块进行连接,该主机还与多个从机(follower)连接,每个从机也可以连接对应的手机,从而通过上述这种主从分发架构进行手机群控。
可以理解的是,在进行信息采集之前,可以通过通用配置平台先进行调度程序配置和手机配置,在配置完成之后,由调度模块将配置信息发送给主机,然后由主机转发给从机,最后发送给处于上线状态的手机,以从这些手机上进行信息采集。
需要说明的是,由于不同任务需要采集的信息不同,因此,为了在提高信息采集效率的同时,保证信息采集的准确性,还可以通过空闲设备根据待处理任务进行配置,得到配置信息,然后再通过配置信息进行信息采集。
应当理解的是,可以将多个具有模板配置功能的设备与通用配置平台连接,但是,由于可能有些设备正在进行模板配置或者正在进行其他操作,如果选用这些设备来进行本次的模板配置可能会影响到设备的处理效率,并且还容易出现处理故障。因此,为了达到更好的模板配置效果,可以筛选出空间设备,通过空闲设备来进行模板配置。
在具体实现中,可以先检测与通用配置平台相连的多个具有模板配置功能的设备,然后分别向这些设备发送状态检测指令,以使这些设备根据状态检测指令反馈当前状态信息,进而根据设备反馈的当前状态信息来判断设备是否处于空闲状态,将处于空闲状态的设备作为空闲设备,除此之外,还可以通过其他方式来进行确定空闲设备,本实施例对此不作限制。
信息配置模块20,用于根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息。
可以理解的是,在确定待处理任务和空闲之后,可以根据待处理任务确定配置需求,进而根据配置需求生成配置指令,将配置指令发送至空闲设备,由空闲设备根据配置指令在预设配置模板中执行配置内容,并在配置完成之后反馈配置信息。
应当理解的是,本方案提出完整的解释自定义协议的解释系统,通过此系统可以完全脱离代码层面,实现页面操作就可以完成复杂场景的信息采集工作。通过上述方式,可以利用模板配置的方式实现采集功能,在最底层实现一套解释配置模板的通用系统,并且系统搭建在分布式任务系统中,提供了任务的管理、监控、报警等集成模块。
信息采集模块30,用于根据所述配置信息进行信息采集。
应当理解的是,在得到配置信息之后,还可以根据配置信息和预设操作映射生成采集操作指令,进而基于采集操作指令和目标终端设备来进行信息采集。
可以理解的是,可以根据配置信息确定控制策略和循环参数信息,根据控制策略和预设操作映射确定目标操作动作,然后根据目标操作动作和循环参数信息确定操作逻辑,进而根据操作逻辑生成采集操作指令,本实施例对此不作限制。
在具体实现中,可以首先由程序定时发现任务,并发现空闲设备,发送指令到空闲设备执行配置内容,服务端读取到配置信息,并对配置信息进行解读,根据预设操作映射和解读后的配置信息生成采集操作指令,以使手机根据采集操作指令按照程序解读的配置信息执行操作逻辑,并反馈目标信息,从而实现信息采集的效果。
进一步地,由于在本方案的主从分发架构中可能连接有多个手机,但是,这些手机可能并不都处于上线状态,即有些手机可能因为某些特殊情况已经断开了连接、或者处于关机状态,而向上述这些不处于上线状态的手机发送采集操作指令显然是无法实现信息采集的,不仅浪费了处理资源,而且会延误处理时间,会降低信息采集的效率。因此,针对上述问题,本方案还可以先对手机进行连接检测和探活检测,然后对手机进行自动上下线,将处于上线状态的手机作为目标终端设备,进而向目标终端设备发送采集操作指令以进行信息采集,可以进一步提高信息采集效率。
在具体实现中,可以将广告app媒体监管运用到本方案的框架和系统中,针对各种目前app开发配置操作,并提供了统一模板式流程,因此,本方案可以增加统一模板,以增加信息采集效率和开发效率,并且,通过平台化的方式,还可以灵活的进行水平扩展和动态伸缩。
在本实施例中,获取待处理任务和空闲设备;根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息;根据所述配置信息进行信息采集。从而可以利用模板配置的方式实现信息采集功能,提高了信息采集的效率。
在一实施例中,所述探活操作包括解锁探活操作和唤醒探活操作;所述设备探活模块,还用于对所述候选终端设备的屏幕进行解锁探活操作,并对所述候选终端设备进行唤醒探活操作。
在一实施例中,所述设备探活模块,还用于若候选终端设备能够完成所述解锁探活操作和唤醒探活操作,则判定针对所述候选终端设备的探活成功;若候选终端设备不能够完成所述解锁探活操作和唤醒探活操作,则判定针对所述候选终端设备的探活失败。
在一实施例中,所述设备探活模块,还用于获取与目标主机连接的待选终端设备;对所述待选终端设备进行连接验证;将通过连接验证的待选终端设备作为当前处于联机状态的候选终端设备。
在一实施例中,所述信息配置模块20,还用于根据所述待处理任务确定配置需求;根据所述配置需求生成配置指令;将所述配置指令发送至所述空闲设备,以使所述空闲设备根据所述配置指令在预设配置模板中执行配置内容,并反馈配置信息。
在本发明实施例所述信息采集装置的其他实施例或具体实现方法可参照上述各方法实施例,此处不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该估算机软件产品存储在如上所述的一个估算机可读存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台智能设备(可以是手机,估算机,信息采集设备,或者网络信息采集设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
本发明公开了A1、一种信息采集方法,所述信息采集方法包括:
获取待处理任务和空闲设备;
根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息;
根据所述配置信息进行信息采集。
A2、如A1所述的信息采集方法,所述根据所述配置信息进行信息采集,包括:
根据所述配置信息和预设操作映射生成采集操作指令;
基于所述采集操作指令和目标终端设备进行信息采集。
A3、如A2所述的信息采集方法,所述根据所述配置信息和预设操作映射生成采集操作指令,包括:
根据所述配置信息确定控制策略和循环参数信息;
根据所述控制策略、所述循环参数信息以及预设操作映射确定操作逻辑;
根据所述操作逻辑生成采集操作指令。
A4、如A3所述的信息采集方法,所述根据所述控制策略、所述循环参数信息以及预设操作映射确定操作逻辑,包括:
根据所述控制策略和预设操作映射确定目标操作动作;
根据所述目标操作动作和所述循环参数信息确定操作逻辑。
A5、如A4所述的信息采集方法,所述预设操作映射中包括待选控制策略与待选操作动作之间的对应关系;
所述根据所述控制策略和预设操作映射确定目标操作动作,包括:
将所述控制策略与所述预设操作映射中的待选控制策略进行匹配;
根据匹配结果将与所述控制策略相匹配的待选控制策略对应的待选操作动作作为目标操作动作。
A6、如A2所述的信息采集方法,所述基于所述采集操作指令和目标终端设备进行信息采集,包括:
将所述采集操作指令发送至目标终端设备,以使所述目标终端设备根据所述采集操作指令执行操作逻辑;
采集所述目标终端设备执行所述操作逻辑产生的目标信息。
A7、如A2所述的信息采集方法,所述基于所述采集操作指令和目标终端设备进行信息采集之前,还包括:
获取当前处于联机状态的候选终端设备;
对所述候选终端设备进行探活操作;
对探活失败的候选终端设备进行下线操作,并对探活成功的候选终端设备进行上线操作;
将处于上线状态的候选终端设备作为目标终端设备。
A8、如A7所述的信息采集方法,所述探活操作包括解锁探活操作和唤醒探活操作;
所述对所述候选终端设备进行探活操作,包括:
对所述候选终端设备的屏幕进行解锁探活操作,并对所述候选终端设备进行唤醒探活操作。
A9、如A8所述的信息采集方法,所述对所述候选终端设备的屏幕进行解锁探活操作,并对所述候选终端设备进行唤醒探活操作之后,还包括:
若候选终端设备能够完成所述解锁探活操作和唤醒探活操作,则判定针对所述候选终端设备的探活成功;
若候选终端设备不能够完成所述解锁探活操作和唤醒探活操作,则判定针对所述候选终端设备的探活失败。
A10、如A7所述的信息采集方法,所述获取当前处于联机状态的候选终端设备,包括:
获取与目标主机连接的待选终端设备;
对所述待选终端设备进行连接验证;
将通过连接验证的待选终端设备作为当前处于联机状态的候选终端设备。
A11、如A1至A10中任一项所述的信息采集方法,所述根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息,包括:
根据所述待处理任务确定配置需求;
根据所述配置需求生成配置指令;
将所述配置指令发送至所述空闲设备,以使所述空闲设备根据所述配置指令在预设配置模板中执行配置内容,并反馈配置信息。
本发明还公开了B12、一种信息采集装置,所述信息采集装置包括:
信息获取模块,用于获取待处理任务和空闲设备;
信息配置模块,用于根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息;
信息采集模块,用于根据所述配置信息进行信息采集。
B13、如B12所述的信息采集装置,所述信息采集模块,还用于根据所述配置信息和预设操作映射生成采集操作指令;基于所述采集操作指令和目标终端设备进行信息采集。
B14、如B13所述的信息采集装置,所述信息采集模块,还用于根据所述配置信息确定控制策略和循环参数信息;根据所述控制策略、所述循环参数信息以及预设操作映射确定操作逻辑;根据所述操作逻辑生成采集操作指令。
B15、如B14所述的信息采集装置,所述信息采集模块,还用于根据所述控制策略和预设操作映射确定目标操作动作;根据所述目标操作动作和所述循环参数信息确定操作逻辑。
B16、如B15所述的信息采集装置,所述预设操作映射中包括待选控制策略与待选操作动作之间的对应关系;所述信息采集模块,还用于将所述控制策略与所述预设操作映射中的待选控制策略进行匹配;根据匹配结果将与所述控制策略相匹配的待选控制策略对应的待选操作动作作为目标操作动作。
B17、如B16所述的信息采集装置,所述信息采集模块,还用于将所述采集操作指令发送至目标终端设备,以使所述目标终端设备根据所述采集操作指令执行操作逻辑;采集所述目标终端设备执行所述操作逻辑产生的目标信息。
B18、如B12所述的信息采集装置,所述信息采集装置还包括:
设备探活模块,用于获取当前处于联机状态的候选终端设备;对所述候选终端设备进行探活操作;对探活失败的候选终端设备进行下线操作,并对探活成功的候选终端设备进行上线操作;将处于上线状态的候选终端设备作为目标终端设备。
本发明还公开了C19、一种信息采集设备,所述信息采集设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的信息采集程序,所述信息采集程序被处理器执行时实现如上所述的信息采集方法。
本发明还公开了D20、一种存储介质,所述存储介质上存储有信息采集程序,所述信息采集程序被处理器执行时实现如上所述的信息采集方法。

Claims (10)

1.一种信息采集方法,其特征在于,所述信息采集方法包括:
获取待处理任务和空闲设备;
根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息;
根据所述配置信息进行信息采集。
2.如权利要求1所述的信息采集方法,其特征在于,所述根据所述配置信息进行信息采集,包括:
根据所述配置信息和预设操作映射生成采集操作指令;
基于所述采集操作指令和目标终端设备进行信息采集。
3.如权利要求2所述的信息采集方法,其特征在于,所述根据所述配置信息和预设操作映射生成采集操作指令,包括:
根据所述配置信息确定控制策略和循环参数信息;
根据所述控制策略、所述循环参数信息以及预设操作映射确定操作逻辑;
根据所述操作逻辑生成采集操作指令。
4.如权利要求3所述的信息采集方法,其特征在于,所述根据所述控制策略、所述循环参数信息以及预设操作映射确定操作逻辑,包括:
根据所述控制策略和预设操作映射确定目标操作动作;
根据所述目标操作动作和所述循环参数信息确定操作逻辑。
5.如权利要求4所述的信息采集方法,其特征在于,所述预设操作映射中包括待选控制策略与待选操作动作之间的对应关系;
所述根据所述控制策略和预设操作映射确定目标操作动作,包括:
将所述控制策略与所述预设操作映射中的待选控制策略进行匹配;
根据匹配结果将与所述控制策略相匹配的待选控制策略对应的待选操作动作作为目标操作动作。
6.如权利要求2所述的信息采集方法,其特征在于,所述基于所述采集操作指令和目标终端设备进行信息采集,包括:
将所述采集操作指令发送至目标终端设备,以使所述目标终端设备根据所述采集操作指令执行操作逻辑;
采集所述目标终端设备执行所述操作逻辑产生的目标信息。
7.如权利要求2所述的信息采集方法,其特征在于,所述基于所述采集操作指令和目标终端设备进行信息采集之前,还包括:
获取当前处于联机状态的候选终端设备;
对所述候选终端设备进行探活操作;
对探活失败的候选终端设备进行下线操作,并对探活成功的候选终端设备进行上线操作;
将处于上线状态的候选终端设备作为目标终端设备。
8.一种信息采集装置,其特征在于,所述信息采集装置包括:
信息获取模块,用于获取待处理任务和空闲设备;
信息配置模块,用于根据所述待处理任务发送配置指令至所述空闲设备,以使所述空闲设备根据所述配置指令执行配置内容,并反馈配置信息;
信息采集模块,用于根据所述配置信息进行信息采集。
9.一种信息采集设备,其特征在于,所述信息采集设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的信息采集程序,所述信息采集程序被处理器执行时实现如权利要求1至7中任一项所述的信息采集方法。
10.一种存储介质,其特征在于,所述存储介质上存储有信息采集程序,所述信息采集程序被处理器执行时实现如权利要求1至7中任一项所述的信息采集方法。
CN202210720252.6A 2022-06-23 2022-06-23 信息采集方法、装置、设备及存储介质 Pending CN115118598A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210720252.6A CN115118598A (zh) 2022-06-23 2022-06-23 信息采集方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210720252.6A CN115118598A (zh) 2022-06-23 2022-06-23 信息采集方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN115118598A true CN115118598A (zh) 2022-09-27

Family

ID=83327790

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210720252.6A Pending CN115118598A (zh) 2022-06-23 2022-06-23 信息采集方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN115118598A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018000686A1 (zh) * 2016-06-27 2018-01-04 乐视控股(北京)有限公司 通话建立方法及系统
CN108512705A (zh) * 2018-04-10 2018-09-07 深信服科技股份有限公司 监管标准的同步方法、设备、存储介质、装置及服务器
CN109726073A (zh) * 2018-07-26 2019-05-07 平安科技(深圳)有限公司 数据库监控方法、装置、设备及可读存储介质
CN111563151A (zh) * 2020-05-07 2020-08-21 腾讯科技(深圳)有限公司 一种信息采集的方法、会话配置的方法、装置及存储介质
CN113467824A (zh) * 2021-06-30 2021-10-01 北京达佳互联信息技术有限公司 一种数据处理方法、装置、设备及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018000686A1 (zh) * 2016-06-27 2018-01-04 乐视控股(北京)有限公司 通话建立方法及系统
CN108512705A (zh) * 2018-04-10 2018-09-07 深信服科技股份有限公司 监管标准的同步方法、设备、存储介质、装置及服务器
CN109726073A (zh) * 2018-07-26 2019-05-07 平安科技(深圳)有限公司 数据库监控方法、装置、设备及可读存储介质
CN111563151A (zh) * 2020-05-07 2020-08-21 腾讯科技(深圳)有限公司 一种信息采集的方法、会话配置的方法、装置及存储介质
CN113467824A (zh) * 2021-06-30 2021-10-01 北京达佳互联信息技术有限公司 一种数据处理方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN110427252B (zh) 基于任务依赖关系的任务调度方法、装置及存储介质
CN108665239B (zh) 工作流处理方法、装置、计算机设备及存储介质
JP2019523462A (ja) マルチタスクスケジューリング方法、システム、アプリケーションサーバ及びコンピュータの読み取り可能な記憶媒体
CN102789305A (zh) 推迟挂起
CN110362401A (zh) 数据跑批方法、装置、存储介质及集群中的成员主机
CN110569250B (zh) 一种物联网网元的解析库的管理方法及装置
CN105847446B (zh) 一种网络数据的获取方法、装置和系统
CN116382462B (zh) 振动方法和振动装置
CN113254153B (zh) 流程任务处理方法、装置、计算机设备和存储介质
CN115118598A (zh) 信息采集方法、装置、设备及存储介质
CN111208985A (zh) 基于生产者消费者模型的数据处理方法、系统及存储介质
CN104021007A (zh) 一种参数更新的方法及电子设备
CN108874381B (zh) 一种输出页面视图控制器的方法、装置及电子设备
CN114490134A (zh) 事件处理方法、系统、装置、计算机设备和存储介质
CN114995970A (zh) 任务处理方法、装置、存储介质及电子设备
CN112769688B (zh) 协议栈适配的方法、装置、电子设备及存储介质
WO2019024643A1 (zh) 数据同步管控方法、装置及电子设备
CN114327673A (zh) 一种任务启动方法、装置、电子设备及存储介质
WO2018042350A2 (en) Techniques for event driven scheduling in a welding or cutting system
CN109597641B (zh) 一种对象行为的控制方法、装置、终端及存储介质
CN102385529B (zh) 多cpu领域移动电子装置与其操作方法
CN103488773A (zh) 一种网站数据获取方法及装置
CN113282850B (zh) 资源标签管理方法、装置、电子设备、系统及存储介质
CN103297479A (zh) 一种插件升级的分布式检测方法及装置
CN101281418A (zh) 设定通用串行总线设备的方法及计算机可读取的记录媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination