CN112000403B - 信息发送方法、装置、计算机设备和存储介质 - Google Patents

信息发送方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN112000403B
CN112000403B CN202010655761.6A CN202010655761A CN112000403B CN 112000403 B CN112000403 B CN 112000403B CN 202010655761 A CN202010655761 A CN 202010655761A CN 112000403 B CN112000403 B CN 112000403B
Authority
CN
China
Prior art keywords
sending
information
target
position information
display interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010655761.6A
Other languages
English (en)
Other versions
CN112000403A (zh
Inventor
凌勇
蒋旭曦
高勇
陈杰
朱惟恺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suning Cloud Computing Co Ltd
Original Assignee
Suning Cloud Computing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suning Cloud Computing Co Ltd filed Critical Suning Cloud Computing Co Ltd
Priority to CN202010655761.6A priority Critical patent/CN112000403B/zh
Publication of CN112000403A publication Critical patent/CN112000403A/zh
Application granted granted Critical
Publication of CN112000403B publication Critical patent/CN112000403B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/52User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail for supporting social networking services

Abstract

本申请涉及一种信息发送方法、装置、计算机设备和存储介质。所述方法包括:获取信息发送任务;其中,信息发送任务中包括发送对象、发送内容以及目标社群软件的窗体标识信息;根据窗体标识信息获取目标社群软件的目标窗体内的控件相对于目标窗体的第一位置信息;从目标窗体所在的显示界面中确定目标窗体相对于显示界面的第二位置信息;根据第一位置信息和第二位置信息计算控件相对于显示界面的第三位置信息;基于第三位置信息模拟人工操作事件,通过目标社群软件将发送内容发送至发送对象。采用本方法能够在非人工干预的情况下,适应性匹配多种社群软件,实现信息快速、准确地自动发送,提升了信息发送的效率。

Description

信息发送方法、装置、计算机设备和存储介质
技术领域
本申请涉及自动化技术领域,特别是涉及一种信息发送方法、装置、计算机设备和存储介质。
背景技术
随着自动化技术的发展,在自动化行业出现无人值守机器人,无人值守机器人一般采用虚拟机的部署方式,也称为云端机器人,但是该类机器人无法高效地针对不同的应用场景适配不同的处理对象,尤其在涉及图形用户界面的相关操作时,适配性差且可靠度低。
所以,在传统技术中,对于利用社群软件的图形用户界面为指定的联系人发送信息等操作,只能人工打开社群软件的窗体,通过窗体选择联系人或联系人群组、手动输入内容后进行发送。但是,当发送任务量增多时,例如,在社群营销等场合下,需要利用不同的社群软件,对不同社群软件中的不同的联系人进行商品信息的发送,需要进行商品信息发送的联系人的数量、以及被推送商品的种类、数量都非常多,如果采用人工手动进行信息发送的方式,将大大降低信息发送的效率。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高信息发送效率的信息发送方法、装置、计算机设备和存储介质。
一种信息发送方法,上述方法包括:获取信息发送任务;其中,信息发送任务中包括发送对象、发送内容以及目标社群软件的窗体标识信息;根据窗体标识信息获取目标社群软件的目标窗体内的控件相对于目标窗体的第一位置信息;从目标窗体所在的显示界面中确定目标窗体相对于显示界面的第二位置信息;根据第一位置信息和第二位置信息计算控件相对于显示界面的第三位置信息;基于第三位置信息模拟人工操作事件,通过目标社群软件将发送内容发送至发送对象。
在一个实施例中,从目标窗体所在的显示界面中确定目标窗体相对于显示界面的第二位置信息,包括:获取目标窗体所在显示界面的界面信息;根据界面信息从显示界面中确定目标窗体,并确定目标窗体在显示界面中相对于显示界面的第二位置信息。
在一个实施例中,根据界面信息从显示界面中确定目标窗体,包括:将窗体标识信息与界面信息中的各窗体对应的窗体类名进行匹配,将窗体类名与窗体标识信息相匹配的窗体确定为目标窗体。
在一个实施例中,根据窗体标识信息获取目标社群软件的目标窗体内的控件相对于目标窗体的第一位置信息,包括:将窗体标识信息与数据库中的多个社群软件的控件参数表进行匹配,获得与窗体标识信息相匹配的适配于目标窗体的目标控件参数表;其中,目标控件参数表为预先根据目标窗体测量的用于表征目标窗体内各控件相对于目标窗体的位置信息的控件参数表;根据目标控件参数表确定目标窗体内的控件相对于目标窗体的第二位置信息。
在一个实施例中,第一位置信息中包括第一横坐标数据和第一纵坐标数据;其中,第一横坐标数据为控件的第一原点相对于目标窗体的第二原点的横坐标数据,第一纵坐标数据为控件的第一原点相对于目标窗体的第二原点的纵坐标数据;第二位置信息中包括第二横坐标数据和第二纵坐标数据;其中,第二横坐标数据为目标窗体的第二原点相对于显示界面的第三原点的横坐标数据,第二纵坐标数据为目标窗体的第二原点相对于显示界面的第三原点的纵坐标数据;
根据第一位置信息和第二位置信息计算控件相对于显示界面的第三位置信息,包括:根据第一横坐标数据和第二横坐标数据计算控件相对于显示界面的第三原点的第三横坐标数据;根据第一纵坐标数据和第二纵坐标数据计算控件相对于显示界面的第三原点的第三纵坐标数据;根据第三横坐标数据和第三纵坐标数据确定第三位置信息。
在一个实施例中,根据第三横坐标数据和第三纵坐标数据确定第三位置信息,包括:根据第三横坐标数据和第三纵坐标数据结合控件的尺寸信息,确定控件在显示界面中能够被触发生成指令的区域,根据区域确定第三位置信息。
在一个实施例中,控件包括会话输入框第一个字符、粘贴按钮和发送按钮,第三位置信息包括会话输入框第一个字符相对于显示界面的第三一位置信息、粘贴按钮相对于显示界面的第三二位置信息以及发送按钮相对于显示界面的第三三位置信息;
基于第三位置信息模拟人工操作事件,通过目标社群软件将发送内容发送至发送对象,包括:基于发送对象对应的会话输入框中的第三一位置信息模拟人工操作事件中的鼠标右击事件以弹出粘贴按钮;基于第三二位置信息模拟人工操作事件中的鼠标左击事件以将发送内容粘贴至会话输入框;基于第三三位置信息模拟鼠标左击事件以使目标社群软件将会话输入框中的发送内容发送至发送对象。
在一个实施例中,控件还包括联系人搜索框和搜索结果框第一栏,第三位置信息还包括联系人搜索框相对于显示界面的第三四位置信息、搜索结果框第一栏相对于显示界面的第三五位置信息;
基于发送对象对应的会话输入框中的会话输入框第一个字符的第三位置信息模拟人工操作事件中的鼠标右击事件以弹出粘贴按钮之前,还包括:基于第三四位置信息模拟人工操作事件中的键盘输入事件将发送对象输入至联系人搜索框,以使目标社群软件在联系人列表中对发送对象进行搜索;基于第三五位置信息模拟人工操作事件中的鼠标左击事件,以使目标社群软件在目标窗体内打开搜索结果框第一栏中的发送对象对应的会话输入框。
在一个实施例中,将发送内容发送至发送对象,包括:根据预设发送规则将发送内容发送至发送对象。
在一个实施例中,预设发送规则包括下述至少一个:与上一次信息发送的时间间隔在预设阈值之内;若发送内容为图像且发送次数大于预设次数,为发送内容添加新的标识符之后再发送;若发送次数小于发送对象接收信息的预设上限则进行发送。
在一个实施例中,获取信息发送任务,包括:判断是否获得了虚拟机服务器的管理员权限的会话控制号码,若是,采用虚拟机服务器执行获取信息发送任务的步骤。
在一个实施例中,获取信息发送任务之前,还包括:接收目标社群软件的启动指令,启动目标社群软件;在目标社群软件的登录认证完成时,关联目标社群软件中的联系人数据,以使信息发送客户端根据联系人数据生成信息发送任务。
在一个实施例中,关联目标社群软件中的联系人数据,包括:
识别目标社群软件的联系人列表;对联系人列表进行截图处理,获得至少一张联系人列表图;对联系人列表图进行图像识别处理,得到联系人列表图中包含的文本信息;对文本信息进行去重处理并将去重处理后的文本信息作为联系人数据进行关联。
一种信息发送装置,上述装置包括:发送任务获取模块,用于获取信息发送任务;其中,信息发送任务中包括发送对象、发送内容以及目标社群软件的窗体标识信息;第一位置获取模块,用于根据窗体标识信息获取目标社群软件的目标窗体内的控件相对于目标窗体的第一位置信息;第二位置获取模块,用于从目标窗体所在的显示界面中确定目标窗体相对于显示界面的第二位置信息;第三位置获取模块,用于根据第一位置信息和第二位置信息计算控件相对于显示界面的第三位置信息;信息发送模块,用于基于第三位置信息模拟人工操作事件,通过目标社群软件将发送内容发送至发送对象。
一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述任一方法的步骤。
一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述任一方法的步骤。
上述信息发送方法、装置、计算机设备和存储介质,根据信息发送任务可以得到指定的社群软件的窗体内的控件相对于窗体的位置信息,并从显示界面中确定出该社群软件的窗体在显示界面中的位置信息,从而计算出窗体内的控件在显示界面中的位置信息,并基于窗体内的控件相对于显示界面的位置模拟人工操作事件,在非人工干预的情况下,根据信息发送任务确定出指定的社群软件的窗体的信息,适应性匹配多种社群软件,实现信息快速、准确地自动发送,提升了信息发送的效率。
附图说明
图1为一个实施例中信息发送方法的应用环境图;
图2为一个实施例中信息发送方法的流程示意图;
图3为一个实施例中包含目标窗体的显示界面的结构示意图;
图4为一个实施例中根据第一位置信息和第二位置信息计算控件相对于显示界面的第三位置信息的步骤的流程示意图;
图5为一个实施例中基于第三位置信息模拟人工操作事件,通过目标社群软件将发送内容发送至发送对象的步骤的流程示意图;
图6为一个实施例中信息发送装置的结构框图;
图7为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅用以解释本申请,并不用于限定本申请。
本申请提供的信息发送方法,可以应用于如图1所示的应用环境中。其中,信息发送服务器端100可以接收信息发送客户端102创建的信息发送任务;其中,信息发送任务中包括发送对象、发送内容以及目标通信客户端的窗体标识信息。根据窗体标识信息可以获取目标社群软件的目标窗体内的控件相对于目标窗体的第一位置信息,并在终端设备的显示界面104中的多个窗体中确定出该目标窗体在显示界面中的位置信息;根据目标窗体内的控件相对于目标窗体的第一位置信息和目标窗体在显示界面中的位置信息可以计算出目标窗体内的控件在显示界面中的位置信息;基于目标窗体内的各控件在显示界面中的位置信息可以进行人工操作事件的模拟,以使目标社群软件将发送内容自动发送至发送对象。
其中,信息发送客户端102是指安装有本发明实施例涉及的信息发送方法的应用程序客户端,或者可以使用本发明实施例涉及的信息发送方法的应用程序客户端,该客户端包括但不限于PC(Personal Computer,个人计算机)、平板电脑、智能手机、笔记本电脑等,信息发送服务器端100是指安装有本发明实施例涉及的信息发送方法的应用程序服务器端,可以是独立的服务器或多台服务器所组成的服务器集群,也可以是虚拟服务器。
在一个实施例中,如图2所示,提供了一种信息发送方法,该方法可以应用于图1中的应用环境,包括以下步骤:
步骤S10:获取信息发送任务;其中,信息发送任务中包括发送对象、发送内容以及目标社群软件的窗体标识信息。
其中,信息发送任务可以由作业人员通过信息发送客户端进行创建。发送对象可以是社群软件中能够接收信息的联系人或联系人群组,发送对象的个数不做限制。发送内容的形式可以是文字、图片、链接或其组合等。社群软件是指可以提供即时通讯服务的社交软件程序,目标社群软件是指该信息发送任务所依赖的社群软件。窗体标识信息与目标社群软件唯一对应,用于对目标社群软件的窗体进行标识,例如,可以是目标社群软件窗体的窗体类名。
具体地,用户可以通过信息发送客户端进行信息发送任务的创建,并将创建的信息发送任务上传至信息发送服务器端,信息发送服务器端获取该上传的信息发送任务。信息发送任务的创建可以通过信息发送客户端的界面进行,在信息发送客户端的界面中选择社群软件、该社群软件中的联系人或联系人群组、以及想要进行自动发送的发送内容等。也可以通过其他方式进行信息发送任务的创建,只要信息发送任务中包含发送对象、发送内容以及完成当前信息发送任务所依赖的社群软件的窗体标识信息即可。
步骤S20:根据窗体标识信息获取目标社群软件的目标窗体内的控件相对于目标窗体的第一位置信息。
其中,目标窗体为目标社群软件在终端设备的显示界面中的窗体;目标窗体内的控件可以是目标窗体内的按钮、窗框或标识符等组成元素,通过触发目标窗体内各控件可以使目标社群软件实现相应的功能。第一位置信息为目标窗体内的控件相对于目标窗体的位置信息。
具体地,可以通过窗体标识信息得到目标窗体内的控件相对于目标窗体的相对位置信息。可以根据窗体标识信息查询目标窗体的布局结构从而获取目标窗体内控件的相对位置信息,也可以通过调用数据库从数据库中获取预先测量的与窗体标识信息相匹配的目标窗体内控件的相对位置信息等。
在一个实施例中,根据窗体标识信息获取目标社群软件的目标窗体内的控件相对于目标窗体的第一位置信息,包括:将窗体标识信息与数据库中的多个社群软件的控件参数表进行匹配,获得与窗体标识信息相匹配的适配于目标窗体的目标控件参数表;其中,目标控件参数表为预先根据目标窗体测量的用于表征目标窗体内各控件相对于目标窗体的位置信息的控件参数表;根据目标控件参数表确定目标窗体内的控件相对于目标窗体的第二位置信息。
在本实施例中,可以预先根据社群软件在显示界面中的窗体内部构造测量窗体内各控件相对于窗体的相对位置信息,将测量得到的各相对位置信息写入控件参数表,并将窗体标识信息作为控件参数表的主键录入数据库。数据库中可以包含多个社群软件的控件参数表,但由于窗体标识信息与社群软件唯一对应,可以通过目标社群软件的窗体标识信息从数据库中的多个控件参数表中唯一匹配到适配于目标社群软件的目标控件参数表,根据该目标控件参数表中预先存入的测量数据可以得到目标窗体内各控件相对于目标窗体的位置信息。
本实施例,通过预先测量并采集各控件相对于窗体的相对位置信息并存入数据库,在获取到目标社群软件的窗体标识信息后能够从数据库中的多个控件参数表中快速、精确地匹配到预存的适配于目标窗体的控件参数表。可以根据信息发送任务中所选择的社群软件的不同适应性地匹配控件参数表,无论选择那款社群软件,都可以匹配到该款社群软件的控件参数表,从而快速、准确地获取到该款软件的窗体内各控件相对于窗体的相对位置信息,提高了信息发送方法的适配性。
步骤S30:从目标窗体所在的显示界面中确定目标窗体相对于显示界面的第二位置信息。
其中,显示界面为启动目标社群软件的终端设备的显示界面,可以是终端设备的桌面界面。第二位置信息为在显示界面中的目标窗体相对于显示界面的位置信息。
具体地,从显示目标窗体的终端设备的显示界面中确定出目标窗体,并确定出目标窗体在显示界面中相对于显示界面的具体位置信息。例如,可以利用UIAutomation编程的方法查询窗体在显示界面中的具体位置信息。
在一个实施例中,从目标窗体所在的显示界面中确定目标窗体相对于显示界面的第二位置信息,包括:获取目标窗体所在显示界面的界面信息;根据界面信息从显示界面中确定目标窗体,并确定目标窗体在显示界面中相对于显示界面的第二位置信息。
在本实施例中,通过获取目标窗体所在显示界面的界面信息,并在界面信息中查询目标窗体的窗体信息,从而可以快速、准确地从显示界面中确定出目标窗体并得到目标窗体在显示界面中的具体位置信息,进而可以提高信息发送的准确性。
在一个实施例中,根据界面信息从显示界面中确定目标窗体,包括:将窗体标识信息与界面信息中的各窗体对应的窗体类名进行匹配,将窗体类名与窗体标识信息相匹配的窗体确定为目标窗体。
在本实施例中,由于显示界面的界面信息中可能包含当前正在显示界面中显示的多个窗体的信息,而每个窗体都有对应的窗体类名,用目标窗体的窗体标识信息在界面信息中与多个窗体类名进行匹配,可以匹配到目标窗体的窗体类名,从而实现确定目标窗体的目的。利用窗体标识信息进行目标窗体的匹配可以提高从显示界面中识别目标窗体的准确性,进而提高信息发送的准确性。
步骤S40:根据第一位置信息和第二位置信息计算控件相对于显示界面的第三位置信息。
其中,第三位置信息为目标窗体内的控件相对于目标窗体所在的显示界面的位置信息。一般而言,研发人员在社群软件在创建过程,将社群软件的窗体内的信息进行技术封装,社群软件对外显示窗体内的图像信息,不能直接通过社群软件的显示界面的界面信息查询出被封装在窗体内的各控件在当前的显示界面中所处的相对于显示界面的具体位置信息。例如,社群软件的显示界面为电脑桌面,此时不能通过查询电脑桌面的界面显示信息得到社群软件内的控件信息。而且,由于人为因素的影响,目标窗体在显示界面中的位置并不固定,对于不同的终端设备,目标窗体启动后出现在显示界面中的位置也不同。但是,各控件相对目标窗体的相对位置和比例一般是固定的,根据目标窗体在显示界面中所处的位置以及各控件相对于目标窗体的相对位置,就可以计算出目标窗体内的各控件在当前的显示界面中所处的相对于显示界面的具体位置信息,而且,无论目标窗体出现显示界面中的何处,都不影响各控件在当前显示界面中的位置计算的准确性,实现了动态计算各控件相对于显示界面的实时、准确的位置信息。
具体地,根据各控件相对于目标窗体的第一位置信息,以及目标窗体在相对于显示界面的第二位置信息计算目标窗体内的控件相对于目标窗体所在的显示界面的第三位置信息的公式不做限定,根据获取到的坐标数据、选取的原点和缩放比例等的不同,计算公式可能不同。
步骤S50:基于第三位置信息模拟人工操作事件,通过目标社群软件将发送内容发送至发送对象。
其中,人工操作事件是指用户利用计算机进行的一系列触发操作事件,可以包括鼠标点击或键盘输入等。
具体地,在计算出目标社群软件的目标窗体内的控件在显示界面中所处的相对于显示界面的具体位置后,按照人工通过目标社群软件进行信息发送的一般流程,在控件所在的位置处进行鼠标左击、鼠标右击或键盘输入等人工操作事件的模拟,以使目标社群软件接收被模拟事件触发的指令,并根据指令将发送内容发送至发送对象。
上述信息发送方法,根据信息发送任务可以得到指定的社群软件的窗体内的控件相对于窗体的位置信息,并从显示界面中确定出该社群软件的窗体在显示界面中的位置信息,从而计算出窗体内的控件在显示界面中的位置信息,并基于窗体内的控件相对于显示界面的位置模拟人工操作事件,在非人工干预的情况下,适应性匹配多种社群软件,实现信息快速、准确地自动发送,提升了信息发送的效率。
此外,通过目标社群软件的目标窗体内各控件相对于目标窗体的第一位置信息、以及目标窗体相对于显示社群软件的目标窗体的显示界面的第二位置信息计算得到社群软件的目标窗体内的各控件相对于显示界面的第三位置信息,从而可以根据第三位置信息在显示社群软件的目标窗体的显示界面中直接确定出目标窗体的各控件的位置信息,突破了目标社群软件本身的技术封锁,使得原本机器无法直接在目标社群软件的用户图形界面执行相关操作变成了可能。具体实现方式为:当确定出目标窗体的各控件在社群软件的显示界面的第三位置信息时,根据该第三位置信息模拟人工操作,通过目标社群软件将发送内容发送至发送对象,从而实现了通过目标社群软件的用户图形界面的相关操作完成信息发送。因此,为自动化的精准信息发送提供了技术基础,从而能够在非人工干预的情况下实现信息快速、准确地自动发送。
在一个实施例中,如图3所示,图3示出了一个实施例中包含目标窗体的显示界面的结构示意图。第一位置信息中包括第一横坐标数据和第一纵坐标数据;其中,第一横坐标数据为控件的第一原点300相对于目标窗体的第二原点302的横坐标数据,第一纵坐标数据为控件的第一原点300相对于目标窗体的第二原点302的纵坐标数据。第二位置信息中包括第二横坐标数据和第二纵坐标数据;其中,第二横坐标数据为目标窗体的第二原点302相对于显示界面的第三原点304的横坐标数据,第二纵坐标数据为目标窗体的第二原点302相对于显示界面的第三原点304的纵坐标数据。
在本实施例中,结合图4所示,图4示出了根据第一位置信息和第二位置信息计算控件相对于显示界面的第三位置信息的步骤的流程示意图,包括:
步骤S401:根据第一横坐标数据和第二横坐标数据计算控件相对于显示界面的第三原点的第三横坐标数据。
步骤S402:根据第一纵坐标数据和第二纵坐标数据计算控件相对于显示界面的第三原点的第三纵坐标数据。
步骤S403:根据第三横坐标数据和第三纵坐标数据确定第三位置信息。
在本实施例中,由于社群软件的窗体等不属于计算机系统自身的窗体,其控件经过封装被嵌入窗体中,在没有窗体封装信息的情况时,不能从显示界面的界面信息中直接获取到各控件相对于显示界面的具体位置信息,因此,就需要计算出控件的第一原点300相对于显示界面的第三原点304的位置信息,从而确定控件在显示界面中的具体位置。
从图3中可以看出,控件的第一原点300相对于目标社群软件的窗体的第二原点302的位置是固定的,但控件的第一原点300相对于显示界面的第三原点304的位置会随着目标社群软件的窗体的第二原点302在显示界面中的移动而改变。所以,可以预先测量出第一原点300相对于第二原点302的固定的坐标数据,再根据第二原点302相对于第三原点304的实时的坐标数据动态计算出第一原点300相对于第三原点304的准确位置。
例如,可以采用下述方法计算控件在显示界面中的第三位置信息,但计算方式可以有多种,并不以此为限。假设目标窗体原点相对于显示界面原点的坐标为:x2=200px,y2=85px;目标窗口的尺寸是:width=850px,height=590px。预先利用标尺测量出的目标窗体中的某控件在该目标窗体内的控件参数为:控件原点相对于目标窗体原点的横坐标x1=750px,控件宽度:w=70px,高度:h=25px;距离底部距离space=10px,即,该控件原点相对于目标窗体原点的坐标为x1=750px,y1=height-(h+space)。计算该控件在显示界面中的坐标的公式可以是:x3=x2+x1;y3=y2+height-(h+space)。
在一个实施例中,根据第三横坐标数据和第三纵坐标数据确定第三位置信息,包括:根据第三横坐标数据和第三纵坐标数据结合控件的尺寸信息,确定控件在显示界面中能够被触发生成指令的区域,根据区域确定第三位置信息。
在本实施例中,在计算出第三横坐标数据和第三纵坐标数据后还可以进一步结合控件的尺寸信息,即在确定控件的原点相对于显示界面原点的坐标之后,可以根据控件的长、宽等尺寸信息确定出控件在显示界面中能够被触发生成指令的有效触发区域,在该区域中确定第三位置信息。通过确定控件在显示界面中的有效触发区域,可以提高触发控件的准确性,从而提高信息发送的准确性。
在一个实施例中,控件包括会话输入框第一个字符、粘贴按钮和发送按钮,第三位置信息包括会话输入框第一个字符相对于显示界面的第三一位置信息、粘贴按钮相对于显示界面的第三二位置信息以及发送按钮相对于显示界面的第三三位置信息。
在本实施例中,如图5所示,图5示出了基于第三位置信息模拟人工操作事件,通过目标社群软件将发送内容发送至发送对象的步骤的流程示意图,包括:
步骤S503:基于发送对象对应的会话输入框中的第三一位置信息模拟人工操作事件中的鼠标右击事件以弹出粘贴按钮。
步骤S504:基于第三二位置信息模拟人工操作事件中的鼠标左击事件以将发送内容粘贴至会话输入框。
步骤S505:基于第三三位置信息模拟鼠标左击事件以使目标社群软件将会话输入框中的发送内容发送至发送对象。
本实施例,根据目标窗体内的发送对象对应的会话输入框的会话输入框第一个字符、触发会话输入框第一个字符所弹出的粘贴按钮、以及发送按钮分别相对于显示界面的位置信息,按照人工信息发送的一般流程,依次进行人工操作事件的模拟以将各控件依次触发,从而实现信息的自动化发送,节省了人力和时间,提高了信息发送的效率。
在一个实施例中,进一步地,控件还包括联系人搜索框和搜索结果框第一栏,第三位置信息还包括联系人搜索框相对于显示界面的第三四位置信息、搜索结果框第一栏相对于显示界面的第三五位置信息。
在本实施例中,如图5所示,基于发送对象对应的会话输入框中的会话输入框第一个字符的第三位置信息模拟人工操作事件中的鼠标右击事件以弹出粘贴按钮之前,还包括:
步骤S501:基于第三四位置信息模拟人工操作事件中的键盘输入事件将发送对象输入至联系人搜索框,以使目标社群软件在联系人列表中对发送对象进行搜索。
步骤S502:基于第三五位置信息模拟人工操作事件中的鼠标左击事件,以使目标社群软件在目标窗体内打开搜索结果框第一栏中的发送对象对应的会话输入框。
在本实施例中,可以进一步计算目标窗体内的联系人搜索框和搜索结果框第一栏在显示界面中位置信息,根据联系人搜索框和搜索结果框第一栏分别相对于显示界面的位置信息,通过人工操作事件的模拟触发目标社群软件在联系人列表中搜索对应的发送对象并打开与该发送对象的对话输入框,从而将发送内容准确地发送至发送对象。本实施例,通过增加了触发社群软件检索发送对象的步骤,可以更加完善信息发送的自动化流程,进一步减少人工操作,实现联系人或联系人群组的自动化匹配以及信息的高效发送。
在一个实施例中,将发送内容发送至发送对象,包括:根据预设发送规则将发送内容发送至发送对象。为了使自动化的信息发送过程更接近人工操作过程,可以预先添加发送规则对发送操作进行逻辑控制,这样可以避免社群软件针对非人工操作的侦测。
优选的,预设发送规则包括下述至少一个:(1)与上一次信息发送的时间间隔在预设阈值之内,例如,发送每条信息的间隔在3至10秒之间随机取值。(2)若发送内容为图像且发送次数大于预设次数,为发送内容添加新的标识符之后再发送,例如,若发送的是图片,每发送三个联系人或联系人群组为图片加换水印。(3)若发送次数小于发送对象接收信息的预设上限则进行发送,例如,针对每个联系人或联系人群组每天发送的文本数量不大于500次。
进一步还可以设置定时发送、周期性发送等发送规则,发送规则可以根据用户需求进行自定义设置。根据预设的发送规则进行信息发送,可以到达一个周期内信息发送任务的完全托管,即使不用人工管理也能全自动发送信息并产生效益,大大减少了人力消耗,提升了工作效率。
在一个实施例中,获取信息发送任务,包括:判断是否获得了虚拟机服务器的管理员权限的会话控制号码,若是,采用虚拟机服务器执行获取信息发送任务的步骤。
在本实施例中,由于目前流程自动化行业无人值守机器人一般采用虚拟机的部署方式,该类机器人无法直接执行图形用户界面(GUI)的相关操作,所以在部署该类机器人的自动化进程时,需要在虚拟机上获取管理员权限的session Id(会话控制号码),然后在管理员权限下进行自动化进程的创建。因此,首先需要判断本实施例的信息发送的自动化进程是否有管理员权限的session Id。
在一个实施例中,获取信息发送任务之前,还包括:接收目标社群软件的启动指令,启动目标社群软件;在目标社群软件的登录认证完成时,关联目标社群软件中的联系人数据,以使信息发送客户端根据联系人数据生成信息发送任务。
在本实施例中,具体地,若目标社群软件没有提前在终端设备上启动,还可以根据信息发送客户端发送的目标社群软件的启动指令启动目标社群软件。对目标社群软件进行启动的步骤可以包括:通过Inspect组件获取目标社群软件登录界面内的切换按钮,模拟鼠标点击事件切换至二维码登录模式,通过图像识别组件获得登录界面内的二维码图片,将二维码图片推送至信息发送客户端的界面,用户可以通过扫描信息发送客户端中的二维码图片完成目标社群软件的登录认证。在目标社群软件的登录认证完成时,关联目标社群软件中的联系人数据,并将关联的联系人数据展示在信息发送客户端,用户可以根据展示在信息发送客户端中的联系人数据进行自定义选择,信息发送客户端根据被选择的联系人数据生成信息发送任务。
在一个实施例中,关联目标社群软件中的联系人数据,包括:识别目标社群软件的联系人列表;对联系人列表进行截图处理,获得至少一张联系人列表图;对联系人列表图进行图像识别处理,得到联系人列表图中包含的文本信息;对文本信息进行去重处理并将去重处理后的文本信息作为联系人数据进行关联。
在本实施例中,通过图像识别组件对社群软件中的联系人列表的截图进行识别处理,将识别获得的联系人列表的截图中的文本信息进行去重处理后作为联系人数据进行关联,可以避免因联系人重复关联而导致的信息重复发送的问题。
应该理解的是,虽然图2、4、5的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2、4、5中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图6所示,提供了一种信息发送装置,包括:发送任务获取模块10、第一位置获取模块20、第二位置获取模块30、第三位置获取模块40和信息发送模块50,其中:
发送任务获取模块10,用于获取信息发送任务;其中,信息发送任务中包括发送对象、发送内容以及目标社群软件的窗体标识信息。
第一位置获取模块20,用于根据窗体标识信息获取目标社群软件的目标窗体内的控件相对于目标窗体的第一位置信息。
第二位置获取模块30,用于从目标窗体所在的显示界面中确定目标窗体相对于显示界面的第二位置信息。
第三位置获取模块40,用于根据第一位置信息和第二位置信息计算控件相对于显示界面的第三位置信息。
信息发送模块50,用于基于第三位置信息模拟人工操作事件,通过目标社群软件将发送内容发送至发送对象。
在一个实施例中,第二位置获取模块30,还用于获取目标窗体所在显示界面的界面信息;根据界面信息从显示界面中确定目标窗体,并确定目标窗体在显示界面中相对于显示界面的第二位置信息。
在一个实施例中,第二位置获取模块30,还用于将窗体标识信息与界面信息中的各窗体对应的窗体类名进行匹配,将窗体类名与窗体标识信息相匹配的窗体确定为目标窗体。
在一个实施例中,第一位置获取模块20,还用于将窗体标识信息与数据库中的多个社群软件的控件参数表进行匹配,获得与窗体标识信息相匹配的适配于目标窗体的目标控件参数表;其中,目标控件参数表为预先根据目标窗体测量的用于表征目标窗体内各控件相对于目标窗体的位置信息的控件参数表;根据目标控件参数表确定目标窗体内的控件相对于目标窗体的第二位置信息。
在一个实施例中,第一位置信息中包括第一横坐标数据和第一纵坐标数据;其中,第一横坐标数据为控件的第一原点相对于目标窗体的第二原点的横坐标数据,第一纵坐标数据为控件的第一原点相对于目标窗体的第二原点的纵坐标数据;第二位置信息中包括第二横坐标数据和第二纵坐标数据;其中,第二横坐标数据为目标窗体的第二原点相对于显示界面的第三原点的横坐标数据,第二纵坐标数据为目标窗体的第二原点相对于显示界面的第三原点的纵坐标数据;
第三位置获取模块40,还用于根据第一横坐标数据和第二横坐标数据计算控件相对于显示界面的第三原点的第三横坐标数据;根据第一纵坐标数据和第二纵坐标数据计算控件相对于显示界面的第三原点的第三纵坐标数据;根据第三横坐标数据和第三纵坐标数据确定第三位置信息。
在一个实施例中,第三位置获取模块40,还用于根据第三横坐标数据和第三纵坐标数据结合控件的尺寸信息,确定控件在显示界面中能够被触发生成指令的区域,根据区域确定第三位置信息。
在一个实施例中,控件包括会话输入框第一个字符、粘贴按钮和发送按钮,第三位置信息包括会话输入框第一个字符相对于显示界面的第三一位置信息、粘贴按钮相对于显示界面的第三二位置信息以及发送按钮相对于显示界面的第三三位置信息;
信息发送模块50,还用于基于发送对象对应的会话输入框中的第三一位置信息模拟人工操作事件中的鼠标右击事件以弹出粘贴按钮;基于第三二位置信息模拟人工操作事件中的鼠标左击事件以将发送内容粘贴至会话输入框;基于第三三位置信息模拟鼠标左击事件以使目标社群软件将会话输入框中的发送内容发送至发送对象。
在一个实施例中,控件还包括联系人搜索框和搜索结果框第一栏,第三位置信息还包括联系人搜索框相对于显示界面的第三四位置信息、搜索结果框第一栏相对于显示界面的第三五位置信息;
信息发送模块50,还用于基于第三四位置信息模拟人工操作事件中的键盘输入事件将发送对象输入至联系人搜索框,以使目标社群软件在联系人列表中对发送对象进行搜索;基于第三五位置信息模拟人工操作事件中的鼠标左击事件,以使目标社群软件在目标窗体内打开搜索结果框第一栏中的发送对象对应的会话输入框。
在一个实施例中,信息发送模块50,还用于根据预设发送规则将发送内容发送至发送对象。
在一个实施例中,发送任务获取模块10,还用于判断是否获得了虚拟机服务器的管理员权限的会话控制号码,若是,采用虚拟机服务器执行获取信息发送任务的步骤。
在一个实施例中,发送任务获取模块10,还用于触发目标社群软件的启动指令,在用户完成目标社群软件的登录认证时,关联目标社群软件中的联系人数据,以使用户根据关联的联系人数据创建信息发送任务。
在一个实施例中,发送任务获取模块10,还用于识别目标社群软件的联系人列表;对联系人列表进行截图处理,获得至少一张联系人列表图;对联系人列表图进行图像识别处理,得到联系人列表图中包含的文本信息;对文本信息进行去重处理并将去重处理后的文本信息作为联系人数据进行关联。
关于信息发送装置的具体限定可以参见上文中对于信息发送方法的限定,在此不再赘述。上述信息发送装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图7所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储社群软件的控件参数表数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种信息发送方法。
本领域技术人员可以理解,图7中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现以下步骤:获取信息发送任务;其中,信息发送任务中包括发送对象、发送内容以及目标社群软件的窗体标识信息;根据窗体标识信息获取目标社群软件的目标窗体内的控件相对于目标窗体的第一位置信息;从目标窗体所在的显示界面中确定目标窗体相对于显示界面的第二位置信息;根据第一位置信息和第二位置信息计算控件相对于显示界面的第三位置信息;基于第三位置信息模拟人工操作事件,通过目标社群软件将发送内容发送至发送对象。
在一个实施例中,处理器执行计算机程序实现从目标窗体所在的显示界面中确定目标窗体相对于显示界面的第二位置信息时,具体实现以下步骤:获取目标窗体所在显示界面的界面信息;根据界面信息从显示界面中确定目标窗体,并确定目标窗体在显示界面中相对于显示界面的第二位置信息。
在一个实施例中,处理器执行计算机程序实现根据界面信息从显示界面中确定目标窗体时,具体实现以下步骤:将窗体标识信息与界面信息中的各窗体对应的窗体类名进行匹配,将窗体类名与窗体标识信息相匹配的窗体确定为目标窗体。
在一个实施例中,处理器执行计算机程序实现根据窗体标识信息获取目标社群软件的目标窗体内的控件相对于目标窗体的第一位置信息时,具体实现以下步骤:将窗体标识信息与数据库中的多个社群软件的控件参数表进行匹配,获得与窗体标识信息相匹配的适配于目标窗体的目标控件参数表;其中,目标控件参数表为预先根据目标窗体测量的用于表征目标窗体内各控件相对于目标窗体的位置信息的控件参数表;根据目标控件参数表确定目标窗体内的控件相对于目标窗体的第二位置信息。
在一个实施例中,第一位置信息中包括第一横坐标数据和第一纵坐标数据;其中,第一横坐标数据为控件的第一原点相对于目标窗体的第二原点的横坐标数据,第一纵坐标数据为控件的第一原点相对于目标窗体的第二原点的纵坐标数据;第二位置信息中包括第二横坐标数据和第二纵坐标数据;其中,第二横坐标数据为目标窗体的第二原点相对于显示界面的第三原点的横坐标数据,第二纵坐标数据为目标窗体的第二原点相对于显示界面的第三原点的纵坐标数据;处理器执行计算机程序实现根据第一位置信息和第二位置信息计算控件相对于显示界面的第三位置信息时,具体实现以下步骤:根据第一横坐标数据和第二横坐标数据计算控件相对于显示界面的第三原点的第三横坐标数据;根据第一纵坐标数据和第二纵坐标数据计算控件相对于显示界面的第三原点的第三纵坐标数据;根据第三横坐标数据和第三纵坐标数据确定第三位置信息。
在一个实施例中,处理器执行计算机程序实现根据第三横坐标数据和第三纵坐标数据确定第三位置信息时,具体实现以下步骤:根据第三横坐标数据和第三纵坐标数据结合控件的尺寸信息,确定控件在显示界面中能够被触发生成指令的区域,根据区域确定第三位置信息。
在一个实施例中,控件包括会话输入框第一个字符、粘贴按钮和发送按钮,第三位置信息包括会话输入框第一个字符相对于显示界面的第三一位置信息、粘贴按钮相对于显示界面的第三二位置信息以及发送按钮相对于显示界面的第三三位置信息;处理器执行计算机程序实现基于第三位置信息模拟人工操作事件,通过目标社群软件将发送内容发送至发送对象时,具体实现以下步骤:基于发送对象对应的会话输入框中的第三一位置信息模拟人工操作事件中的鼠标右击事件以弹出粘贴按钮;基于第三二位置信息模拟人工操作事件中的鼠标左击事件以将发送内容粘贴至会话输入框;基于第三三位置信息模拟鼠标左击事件以使目标社群软件将会话输入框中的发送内容发送至发送对象。
在一个实施例中,控件还包括联系人搜索框和搜索结果框第一栏,第三位置信息还包括联系人搜索框相对于显示界面的第三四位置信息、搜索结果框第一栏相对于显示界面的第三五位置信息;处理器执行计算机程序实现基于发送对象对应的会话输入框中的会话输入框第一个字符的第三位置信息模拟人工操作事件中的鼠标右击事件以弹出粘贴按钮之前,还实现:基于第三四位置信息模拟人工操作事件中的键盘输入事件将发送对象输入至联系人搜索框,以使目标社群软件在联系人列表中对发送对象进行搜索;基于第三五位置信息模拟人工操作事件中的鼠标左击事件,以使目标社群软件在目标窗体内打开搜索结果框第一栏中的发送对象对应的会话输入框。
在一个实施例中,处理器执行计算机程序实现将发送内容发送至发送对象时,具体实现以下步骤:根据预设发送规则将发送内容发送至发送对象。
在一个实施例中,处理器执行计算机程序实现获取信息发送任务时,具体实现以下步骤:判断是否获得了虚拟机服务器的管理员权限的会话控制号码,若是,采用虚拟机服务器执行获取信息发送任务的步骤。
在一个实施例中,处理器执行计算机程序实现获取信息发送任务之前,还实现:接收目标社群软件的启动指令,启动目标社群软件;在目标社群软件的登录认证完成时,关联目标社群软件中的联系人数据,以使信息发送客户端根据联系人数据生成信息发送任务。
在一个实施例中,处理器执行计算机程序实现关联目标社群软件中的联系人数据时,具体实现以下步骤:识别目标社群软件的联系人列表;对联系人列表进行截图处理,获得至少一张联系人列表图;对联系人列表图进行图像识别处理,得到联系人列表图中包含的文本信息;对文本信息进行去重处理并将去重处理后的文本信息作为联系人数据进行关联。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:获取信息发送任务;其中,信息发送任务中包括发送对象、发送内容以及目标社群软件的窗体标识信息;根据窗体标识信息获取目标社群软件的目标窗体内的控件相对于目标窗体的第一位置信息;从目标窗体所在的显示界面中确定目标窗体相对于显示界面的第二位置信息;根据第一位置信息和第二位置信息计算控件相对于显示界面的第三位置信息;基于第三位置信息模拟人工操作事件,通过目标社群软件将发送内容发送至发送对象。
在一个实施例中,计算机程序被处理器执行实现从目标窗体所在的显示界面中确定目标窗体相对于显示界面的第二位置信息时,具体实现以下步骤:获取目标窗体所在显示界面的界面信息;根据界面信息从显示界面中确定目标窗体,并确定目标窗体在显示界面中相对于显示界面的第二位置信息。
在一个实施例中,计算机程序被处理器执行实现根据界面信息从显示界面中确定目标窗体时,具体实现以下步骤:将窗体标识信息与界面信息中的各窗体对应的窗体类名进行匹配,将窗体类名与窗体标识信息相匹配的窗体确定为目标窗体。
在一个实施例中,计算机程序被处理器执行实现根据窗体标识信息获取目标社群软件的目标窗体内的控件相对于目标窗体的第一位置信息时,具体实现以下步骤:将窗体标识信息与数据库中的多个社群软件的控件参数表进行匹配,获得与窗体标识信息相匹配的适配于目标窗体的目标控件参数表;其中,目标控件参数表为预先根据目标窗体测量的用于表征目标窗体内各控件相对于目标窗体的位置信息的控件参数表;根据目标控件参数表确定目标窗体内的控件相对于目标窗体的第二位置信息。
在一个实施例中,第一位置信息中包括第一横坐标数据和第一纵坐标数据;其中,第一横坐标数据为控件的第一原点相对于目标窗体的第二原点的横坐标数据,第一纵坐标数据为控件的第一原点相对于目标窗体的第二原点的纵坐标数据;第二位置信息中包括第二横坐标数据和第二纵坐标数据;其中,第二横坐标数据为目标窗体的第二原点相对于显示界面的第三原点的横坐标数据,第二纵坐标数据为目标窗体的第二原点相对于显示界面的第三原点的纵坐标数据;计算机程序被处理器执行实现根据第一位置信息和第二位置信息计算控件相对于显示界面的第三位置信息时,具体实现以下步骤:根据第一横坐标数据和第二横坐标数据计算控件相对于显示界面的第三原点的第三横坐标数据;根据第一纵坐标数据和第二纵坐标数据计算控件相对于显示界面的第三原点的第三纵坐标数据;根据第三横坐标数据和第三纵坐标数据确定第三位置信息。
在一个实施例中,计算机程序被处理器执行实现根据第三横坐标数据和第三纵坐标数据确定第三位置信息时,具体实现以下步骤:根据第三横坐标数据和第三纵坐标数据结合控件的尺寸信息,确定控件在显示界面中能够被触发生成指令的区域,根据区域确定第三位置信息。
在一个实施例中,控件包括会话输入框第一个字符、粘贴按钮和发送按钮,第三位置信息包括会话输入框第一个字符相对于显示界面的第三一位置信息、粘贴按钮相对于显示界面的第三二位置信息以及发送按钮相对于显示界面的第三三位置信息;计算机程序被处理器执行实现基于第三位置信息模拟人工操作事件,通过目标社群软件将发送内容发送至发送对象时,具体实现以下步骤:基于发送对象对应的会话输入框中的第三一位置信息模拟人工操作事件中的鼠标右击事件以弹出粘贴按钮;基于第三二位置信息模拟人工操作事件中的鼠标左击事件以将发送内容粘贴至会话输入框;基于第三三位置信息模拟鼠标左击事件以使目标社群软件将会话输入框中的发送内容发送至发送对象。
在一个实施例中,控件还包括联系人搜索框和搜索结果框第一栏,第三位置信息还包括联系人搜索框相对于显示界面的第三四位置信息、搜索结果框第一栏相对于显示界面的第三五位置信息;计算机程序被处理器执行实现基于发送对象对应的会话输入框中的会话输入框第一个字符的第三位置信息模拟人工操作事件中的鼠标右击事件以弹出粘贴按钮之前,还实现:基于第三四位置信息模拟人工操作事件中的键盘输入事件将发送对象输入至联系人搜索框,以使目标社群软件在联系人列表中对发送对象进行搜索;基于第三五位置信息模拟人工操作事件中的鼠标左击事件,以使目标社群软件在目标窗体内打开搜索结果框第一栏中的发送对象对应的会话输入框。
在一个实施例中,计算机程序被处理器执行实现将发送内容发送至发送对象时,具体实现以下步骤:根据预设发送规则将发送内容发送至发送对象。
在一个实施例中,计算机程序被处理器执行实现获取信息发送任务时,具体实现以下步骤:判断是否获得了虚拟机服务器的管理员权限的会话控制号码,若是,采用虚拟机服务器执行获取信息发送任务的步骤。
在一个实施例中,计算机程序被处理器执行实现获取信息发送任务之前,还实现:接收目标社群软件的启动指令,启动目标社群软件;在目标社群软件的登录认证完成时,关联目标社群软件中的联系人数据,以使信息发送客户端根据联系人数据生成信息发送任务。
在一个实施例中,计算机程序被处理器执行实现关联目标社群软件中的联系人数据时,具体实现以下步骤:识别目标社群软件的联系人列表;对联系人列表进行截图处理,获得至少一张联系人列表图;对联系人列表图进行图像识别处理,得到联系人列表图中包含的文本信息;对文本信息进行去重处理并将去重处理后的文本信息作为联系人数据进行关联。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种信息发送方法,所述方法包括:
获取信息发送任务;其中,所述信息发送任务中包括发送对象、发送内容以及目标社群软件的窗体标识信息;
根据所述窗体标识信息获取所述目标社群软件的目标窗体内的控件相对于所述目标窗体的第一位置信息;
从所述目标窗体所在的显示界面中确定所述目标窗体相对于所述显示界面的第二位置信息;
根据所述第一位置信息和所述第二位置信息计算所述控件相对于所述显示界面的第三位置信息;
基于所述第三位置信息模拟人工操作事件,通过所述目标社群软件将所述发送内容发送至所述发送对象。
2.根据权利要求1所述的方法,其特征在于,所述从所述目标窗体所在的显示界面中确定所述目标窗体相对于所述显示界面的第二位置信息,包括:
获取所述目标窗体所在显示界面的界面信息;
根据所述界面信息从所述显示界面中确定所述目标窗体,并确定所述目标窗体在所述显示界面中相对于所述显示界面的第二位置信息;
其中,所述根据所述界面信息从所述显示界面中确定所述目标窗体,包括:
将所述窗体标识信息与所述界面信息中的各窗体对应的窗体类名进行匹配,将窗体类名与所述窗体标识信息相匹配的窗体确定为所述目标窗体。
3.根据权利要求1所述的方法,其特征在于,所述根据所述窗体标识信息获取所述目标社群软件的目标窗体内的控件相对于所述目标窗体的第一位置信息,包括:
将所述窗体标识信息与数据库中的多个社群软件的控件参数表进行匹配,获得与所述窗体标识信息相匹配的适配于所述目标窗体的目标控件参数表;其中,所述目标控件参数表为预先根据所述目标窗体测量的用于表征所述目标窗体内各控件相对于所述目标窗体的位置信息的控件参数表;
根据所述目标控件参数表确定所述目标窗体内的所述控件相对于所述目标窗体的第二位置信息。
4.根据权利要求1所述的方法,其特征在于,所述第一位置信息中包括第一横坐标数据和第一纵坐标数据;其中,所述第一横坐标数据为所述控件的第一原点相对于所述目标窗体的第二原点的横坐标数据,所述第一纵坐标数据为所述控件的第一原点相对于所述目标窗体的第二原点的纵坐标数据;
所述第二位置信息中包括第二横坐标数据和第二纵坐标数据;其中,所述第二横坐标数据为所述目标窗体的第二原点相对于所述显示界面的第三原点的横坐标数据,所述第二纵坐标数据为所述目标窗体的第二原点相对于所述显示界面的第三原点的纵坐标数据;
所述根据所述第一位置信息和所述第二位置信息计算所述控件相对于所述显示界面的第三位置信息,包括:
根据所述第一横坐标数据和所述第二横坐标数据计算所述控件相对于所述显示界面的所述第三原点的第三横坐标数据;
根据所述第一纵坐标数据和所述第二纵坐标数据计算所述控件相对于所述显示界面的所述第三原点的第三纵坐标数据;
根据所述第三横坐标数据和所述第三纵坐标数据确定所述第三位置信息;
其中,所述根据所述第三横坐标数据和所述第三纵坐标数据确定所述第三位置信息,包括:
根据所述第三横坐标数据和所述第三纵坐标数据结合所述控件的尺寸信息,确定所述控件在所述显示界面中能够被触发生成指令的区域,根据所述区域确定所述第三位置信息。
5.根据权利要求1所述的方法,其特征在于,所述控件包括会话输入框第一个字符、粘贴按钮和发送按钮,所述第三位置信息包括所述会话输入框第一个字符相对于所述显示界面的第三一位置信息、所述粘贴按钮相对于所述显示界面的第三二位置信息以及所述发送按钮相对于所述显示界面的第三三位置信息;
所述基于所述第三位置信息模拟人工操作事件,通过所述目标社群软件将所述发送内容发送至所述发送对象,包括:
基于所述发送对象对应的会话输入框中的所述第三一位置信息模拟人工操作事件中的鼠标右击事件以弹出粘贴按钮;
基于所述第三二位置信息模拟人工操作事件中的鼠标左击事件以将所述发送内容粘贴至所述会话输入框;
基于所述第三三位置信息模拟鼠标左击事件以使目标社群软件将所述会话输入框中的所述发送内容发送至所述发送对象;
其中,所述控件还包括联系人搜索框和搜索结果框第一栏,所述第三位置信息还包括所述联系人搜索框相对于所述显示界面的第三四位置信息、所述搜索结果框第一栏相对于所述显示界面的第三五位置信息;
所述基于所述发送对象对应的会话输入框中的所述第三一位置信息模拟人工操作事件中的鼠标右击事件以弹出粘贴按钮之前,还包括:
基于所述第三四位置信息模拟人工操作事件中的键盘输入事件将所述发送对象输入至所述联系人搜索框,以使目标社群软件在联系人列表中对所述发送对象进行搜索;
基于所述第三五位置信息模拟人工操作事件中的鼠标左击事件,以使目标社群软件在所述目标窗体内打开所述搜索结果框第一栏中的所述发送对象对应的会话输入框。
6.根据权利要求1所述的方法,其特征在于,所述将所述发送内容发送至所述发送对象,包括:
根据预设发送规则将所述发送内容发送至所述发送对象;
其中,所述预设发送规则包括下述至少一个:与上一次信息发送的时间间隔在预设阈值之内;若所述发送内容为图像且发送次数大于预设次数,为所述发送内容添加新的标识符之后再发送;若发送次数小于所述发送对象接收信息的预设上限则进行发送。
7.根据权利要求1所述的方法,其特征在于,所述获取信息发送任务,包括:判断是否获得了虚拟机服务器的管理员权限的会话控制号码,若是,采用所述虚拟机服务器执行所述获取信息发送任务的步骤;和/或,
所述获取信息发送任务之前,还包括:
接收目标社群软件的启动指令,启动所述目标社群软件;在所述目标社群软件的登录认证完成时,关联所述目标社群软件中的联系人数据,以使信息发送客户端根据所述联系人数据生成信息发送任务;其中,所述关联所述目标社群软件中的联系人数据,包括:
识别所述目标社群软件的联系人列表;对所述联系人列表进行截图处理,获得至少一张联系人列表图;对所述联系人列表图进行图像识别处理,得到所述联系人列表图中包含的文本信息;对所述文本信息进行去重处理并将去重处理后的文本信息作为联系人数据进行关联。
8.一种信息发送装置,其特征在于,所述装置包括:
发送任务获取模块,用于获取信息发送任务;其中,所述信息发送任务中包括发送对象、发送内容以及目标社群软件的窗体标识信息;
第一位置获取模块,用于根据所述窗体标识信息获取所述目标社群软件的目标窗体内的控件相对于所述目标窗体的第一位置信息;
第二位置获取模块,用于从所述目标窗体所在的显示界面中确定所述目标窗体相对于所述显示界面的第二位置信息;
第三位置获取模块,用于根据所述第一位置信息和所述第二位置信息计算所述控件相对于所述显示界面的第三位置信息;
信息发送模块,用于基于所述第三位置信息模拟人工操作事件,通过所述目标社群软件将所述发送内容发送至所述发送对象。
9.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述方法的步骤。
CN202010655761.6A 2020-07-09 2020-07-09 信息发送方法、装置、计算机设备和存储介质 Active CN112000403B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010655761.6A CN112000403B (zh) 2020-07-09 2020-07-09 信息发送方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010655761.6A CN112000403B (zh) 2020-07-09 2020-07-09 信息发送方法、装置、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
CN112000403A CN112000403A (zh) 2020-11-27
CN112000403B true CN112000403B (zh) 2022-11-18

Family

ID=73468085

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010655761.6A Active CN112000403B (zh) 2020-07-09 2020-07-09 信息发送方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN112000403B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117171188A (zh) * 2022-05-30 2023-12-05 荣耀终端有限公司 搜索方法、装置、电子设备和可读存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120331405A1 (en) * 2011-06-24 2012-12-27 Google Inc. Group conversation between a plurality of participants
CN109885365A (zh) * 2019-01-25 2019-06-14 平安科技(深圳)有限公司 操作引导方法、装置、计算机设备和存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120331405A1 (en) * 2011-06-24 2012-12-27 Google Inc. Group conversation between a plurality of participants
CN109885365A (zh) * 2019-01-25 2019-06-14 平安科技(深圳)有限公司 操作引导方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
CN112000403A (zh) 2020-11-27

Similar Documents

Publication Publication Date Title
CN110209652B (zh) 数据表迁移方法、装置、计算机设备和存储介质
CN109815471A (zh) 合同文本生成方法、装置、计算机设备和存储介质
CN111079841A (zh) 目标识别的训练方法、装置、计算机设备和存储介质
EP1594050A1 (en) Method and system for planning and control/estimation of software size driven by standard representation of software structure
CN110941555B (zh) 测试用例推荐方法、装置、计算机设备和存储介质
US11132584B2 (en) Model reselection for accommodating unsatisfactory training data
CN112737922B (zh) 通讯方法、装置、计算机设备和存储介质
US10963888B2 (en) Payment complaint method, device, server and readable storage medium
CN108304243B (zh) 界面生成方法、装置、计算机设备和存储介质
CN110209978B (zh) 一种数据处理方法和相关装置
CN110321284B (zh) 测试数据录入方法、装置、计算机设备和存储介质
CN110765001A (zh) 针对应用系统的模块化自动测试方法和装置
CN110889457A (zh) 样本图像分类训练方法、装置、计算机设备和存储介质
CN112000403B (zh) 信息发送方法、装置、计算机设备和存储介质
CN111054060B (zh) 游戏控制方法、装置、计算机设备和存储介质
JP2019040417A (ja) 情報処理装置及びプログラム
CN112000903A (zh) 数据查询方法、装置、计算机设备和存储介质
CN111242167B (zh) 分布式图像标注方法、装置、计算机设备和存储介质
CN110457361B (zh) 特征数据获取方法、装置、计算机设备和存储介质
CN109542962B (zh) 数据处理方法、装置、计算机设备和存储介质
CN113608805A (zh) 掩膜预测方法、图像处理方法、显示方法及设备
CN111191115B (zh) 基于用户数据的信息推送方法及装置
CN110609683B (zh) 对话机器人配置方法、装置、计算机设备和存储介质
CN111079059A (zh) 页面检查方法、装置、设备及计算机可读存储介质
GB2546402A (en) Resource allocation forecasting

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant