CN105786706B - 一种真人测试系统防作弊方法及装置 - Google Patents
一种真人测试系统防作弊方法及装置 Download PDFInfo
- Publication number
- CN105786706B CN105786706B CN201610107547.0A CN201610107547A CN105786706B CN 105786706 B CN105786706 B CN 105786706B CN 201610107547 A CN201610107547 A CN 201610107547A CN 105786706 B CN105786706 B CN 105786706B
- Authority
- CN
- China
- Prior art keywords
- test
- identification code
- user terminal
- server
- terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Transfer Between Computers (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明提供一种真人测试系统防作弊方法及装置,属于真人测试系统领域,具体实现过程为,在测试员领取测试任务时获取用户终端的唯一标识码,并将当前获取的唯一标识码与已经领取过相同测试任务的用户终端的唯一标识码相比对,若有存在相同的码字,则判定当前领取测试任务的测试账号为作弊,这种真人测试系统防作弊方法及装置能够有效检测到测试人员的作弊行为,进而提升系统整体测试结果的准确性。
Description
技术领域
本发明涉及真人测试系统领域,具体而言,涉及一种真人测试系统防作弊方法及装置。
背景技术
真人测试系统是指采用真人对软件进行测试的系统。目前的真人测试系统中,由服务器分发测试任务给测试人员,测试人员各自完成测试任务,并向服务器提交测试结果。但是在研究中发现,测试人员在测试时,为了减少工作量,可能会存在作弊行为,例如直接使用其他测试人员的测试结果作为自己的测试结果进行提交,或者在测试过程中不认真答题等情况,导致测试结果失准。
发明内容
有鉴于此,本发明的目的在于提供一种真人测试系统防作弊方法及装置。
第一方面,本发明实施例提供的一种真人测试系统防作弊方法,包括:服务器发送测试任务至用户终端;在测试员通过用户终端领取测试任务时,所述服务器接收所述用户终端反馈的用户终端唯一标识码;所述服务器查询已领取过相同所述测试任务的用户终端已反馈的用户终端唯一标识码中,是否存在与当前用户终端反馈的所述唯一标识码相同的码字;若是,生成并输出测试员作弊的结果。
优选地,所述方法还包括:所述服务器接收多个用户终端反馈的测试员回答所述测试任务中的每一个问题时所使用的答题时间;
所述服务器根据多个用户终端反馈的属于同一个测试任务中同一问题的答题时间,得到该问题的答题时间的正态分布,所述正态分布的均值为μ、标准差为σ;
所述服务器依次判断用户终端反馈的每个问题的答题时间是否在该问题对应的答题时间的正态分布的μ-3σ~μ+3σ范围内,若否,则判定该问题为潜在作弊问题;
所述服务器判断用户终端反馈的答题时间对应的问题被判定为潜在作弊问题的数目是否大于或等于第一阈值;若是,则生成并输出测试员潜在作弊的结果。
优选地,所述方法还包括:所述服务器在测试任务中随机设置预定义陷阱问题;所述服务器接收所述用户终端反馈的完成所述测试任务后所提交的相应测试报告;所述服务器检查所述测试报告中的所述预定义陷阱问题的答案是否正确;若否,则生成并输出测试员潜在作弊的结果。
与现有技术相比,本发明提供的真人测试系统防作弊方法及装置,能够有效防止测试人员作弊,提升测试结果的准确率,其实现过程包括,其一是通过将领取测试任务的用户终端的唯一标识码与所述测试任务相绑定,防止同一用户终端重复领取相同的测试任务进行作弊;其二是在完成测试任务进行提交时,检测与测试任务绑定的唯一标识码与当前用户终端的唯一标识码是否相同,防止测试人员在一个用户终端上领取任务,在另一用户终端进行测试,避免作弊;其三是测试人员需要对测试的软件进行截图以证明确实进行了实际测试;其四是对潜在作弊行为进行监控,包括对答题时间进行拟合得到相应的正太分布以及设定预定义陷阱问题。这种真人测试系统防作弊方法及装置通过作弊防止和潜在作弊行为监控两个方面进行设计,有效防止了测试人员作弊和不认真答题情况的出现,保证了真人测试系统测试结果的准确性。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。通过附图所示,本发明的上述及其它目的、特征和优势将更加清晰。在全部附图中相同的附图标记指示相同的部分。并未刻意按实际尺寸等比例缩放绘制附图,重点在于示出本发明的主旨。
图1为本发明提供的应用真人测试系统防作弊装置的服务器与用户终端的交互图;
图2为本发明提供的应用真人测试系统防作弊装置的服务器的结构框图;
图3为本发明第一实施例提供的一种应用于服务器的真人测试系统防作弊方法的流程图;
图4为本发明第二实施例提供的另一种应用于服务器的真人测试系统防作弊方法的流程图;
图5为本发明第三实施例提供的另一种应用于服务器的真人测试系统防作弊方法的流程图;
图6为本发明第四实施例提供的一种应用于用户终端的真人测试系统防作弊方法的流程图;
图7为本发明第五实施例提供的另一种应用于用户终端的真人测试系统防作弊方法的流程图;
图8为本发明第六实施例提供的另一种应用于用户终端的真人测试系统防作弊方法的流程图;
图9为本发明第七实施例提供的一种真人测试系统防作弊方法流程图;
图10为本发明第八实施例提供的一种运用于服务器的真人测试系统防作弊装置的功能模块框图;
图11为本发明第九实施例提供的一种运用于用户终端的真人测试系统防作弊装置的功能模块框图。
主要元件符号汇总:
具体实施方式
下面将结合本发明实施例中附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,是本发明较佳实施例提供的服务器100与用户终端200进行交互的示意图。所述服务器100通过网络与一个或多个用户终端200进行通信连接,以进行数据通信或交互。所述服务器100可以是网络服务器、数据库服务器等。所述用户终端200可以是个人电脑(personal computer,PC)、平板电脑、智能手机、个人数字助理(personal digitalassistant,PDA)等。
如图2所示,是所述服务器100(或用户终端200)的方框示意图。所述服务器100(或用户终端200)包括真人测试系统防作弊装置300、存储器400、存储控制器500以及处理器600。所述存储器400、存储控制器500、处理器600各元件相互之间直接或间接地电性连接,以实现数据的传输或交互。例如,这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。所述真人测试系统防作弊装置300包括至少一个可以软件或固件(firmware)的形式存储于所述存储器400中或固化在操作系统(operating system,OS)中的软件功能模块。所述处理器600用于执行存储器400中存储的可执行模块,例如所述真人测试系统防作弊装置300包括的软件功能模块或计算机程序。
存储器400可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。处理器600以及其他可能的组件对存储器400的访问可在存储控制器500的控制下进行。
处理器600可能是一种集成电路芯片,具有信号的处理能力。上述的处理器600可以是通用处理器,包括中央处理器、网络处理器等;还可以是数字信号处理器、专用集成电路、现成可编程门阵列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件,可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器600也可以是任何常规的处理器等。
请参阅图3,是本发明第一实施例提供的真人测试系统防作弊方法流程图,应用于服务器100,所应说明的是,本发明所述的真人测试系统防作弊方法并不以图3以及以下所述的具体顺序为限制。下面将对图3所示的具体流程进行详细描述。
步骤S110,服务器100发送测试任务至用户终端200。
现有的真人测试系统中,一个测试员可以任意注册多个测试账号并重复申请相同的测试任务,导致测试结果失准,为了有效避免这一情况的发生,于本发明的一种具体实施方式中,测试员注册测试账号时需要绑定真实的手机号码,系统会将验证码发送至与绑定的手机号码相应的用户终端200上,测试员需要在注册页面填入正确的验证码才能注册成功,使得测试账号与手机号码一一对应。
在实现测试账号与手机号码一一对应的基础上,针对某一具体的测试任务,可由该测试任务的客户在系统后台选择测试账号,并由服务器100创建该测试任务的副本并发送至与所选定的测试账号相绑定的用户终端200上。
步骤S111,在测试员通过用户终端200领取测试任务时,所述服务器100接收所述用户终端200反馈的用户终端200唯一标识码。
在测试员通过用户终端200登录测试账号领取测试任务时,用户终端200反馈其自身的唯一标示码至服务器100,这里的唯一标识码优选为IMEI(International MobileEquipment Identity,国际移动设备唯一标识码),当然对于应用安卓系统(Android)的移动终端和应用网际操作系统(IOS)的移动终端,还可以有其他的选择,例如,IOS移动终端可以采用广告标示符(IDFA)、设备唯一识别码(UDID)或者通用位移识别码(UUID)中的任意一个作为唯一标识码返回至服务器100,安卓移动终端可以采用设备标示码(Android ID)等作为唯一标识码返回至服务器100。
步骤S112,所述服务器100查询已领取过相同所述测试任务的用户终端200已反馈的用户终端200唯一标识码中,是否存在与当前用户终端200反馈的所述唯一标识码相同的码字。
同一个测试任务通常需要选择多个测试人员进行测试以保证测试结果的准确性,在服务器100创建多个测试任务副本并发送给相应的选定测试账号后,每一个领取过测试任务的用户终端200后会反馈其自身的唯一标识码至服务器100,对于当前领取任务的用户终端200,服务器100需要查询当前用户终端200的唯一标识码是否在已经领取过相同测试任务的用户终端200所反馈的唯一标识码中出现过,以判断当前用户终端200是否在重复领取相同的测试任务。
步骤S113,若是,则判定测试员作弊,生成并输出测试员作弊的结果。
当服务器100的查询结果为,当前反馈的唯一标识码所对应的用户终端200已经领取过相同的测试任务,则判定使用该用户终端200的测试账号在作弊,同时生成并输出测试员作弊的结果。
本实施例提供的真人测试系统防作弊方法,在测试员领取测试任务时获取用户终端200的唯一标识码,并将当前获取的唯一标识码与已经领取过相同测试任务的用户终端200的唯一标识码相比对,若有重复出现,则判定当前领取测试任务的测试账号为作弊,这种方法能够有效检测到测试员的作弊行为,进而提升测试结果的准确性。
请参阅图4,是本发明第二实施例提供的真人测试系统防作弊方法的流程图,其与第一实施例不同的是,本实施例提供的真人测试系统防作弊方法还包括:
步骤S210,该步骤在步骤S113后执行,该步骤S210为所述服务器100接收多个用户终端200反馈的测试员回答所述测试任务中的每一个问题时所使用的答题时间。
在测试员完成测试任务的过程中,用户终端200记录测试员回答每一个问题时所花费的时间,并将该时间反馈给服务器100。对于反馈过程,可以是每回答一个问题则记录下对应的答题时间并反馈至服务器100,也可以是对测试任务中每一个问题的答题时间先依次记录后再统一反馈至服务器100,再或者是将答题时间记录下测试任务的注释文本中,待测试员提交测试任务时将记录的答题时间一并反馈至服务器100,当然还可以有其他的实现方式,本领域的技术人员可以根据实际情况进行相应的变化设计。
步骤S211,所述服务器100根据多个用户终端200反馈的属于同一个测试任务中同一问题的答题时间,得到该问题的答题时间的正态分布,所述正态分布的均值为μ、标准差为σ。
服务器100根据接收到的多个用户终端200反馈的相同测试任务中同一个问题的答题时间,利用概率统计原理得到相应的均值为μ、标准差为σ的正态分布,公式如下所示:
其中,N表示样本数,即服务器100接收到的反馈相同测试任务中同一问题的答题时间的用户终端200的数目。
步骤S212,所述服务器100判断用户终端200反馈的答题时间对应的问题被判定为潜在作弊问题的数目是否大于或等于第一阈值,潜在作弊问题是指答题时间不在该问题对应的答题时间的正态分布的μ-3σ~μ+3σ范围内的问题。
如果测试员在回答某一个问题时,其所使用的时间小于μ-3σ,则认为该测试员回答问题过于草率,不够认真,若其所使用的时间大于μ+3σ,则认为时间花费过长,在答题时可能存在走神分心等不认真的情况,服务器100依次对一份测试任务中所有问题的答题时间与相应的正态分布进行比对,判定潜在作弊问题的问题数目是否大于或等于第一阈值。
对于第一阈值,其为人为设定,根据一份测试任务中的问题数目设定一个阈值,例如一份测试任务中的问题数目为20,则第一阈值可以设定为3,若问题数据为10,则第一阈值可以设定为1,这个设定的具体数值可以由测试任务的客户或者系统人工进行设定,也可以是系统默认的总问题数目的一个百分比,如15%,在具体的实施方式中,可以根据情况进行相应的优选设计。
步骤S213,若是,则判定测试员潜在作弊,生成并输出测试员潜在作弊的结果。
若最后的比对结果为,潜在作弊问题的数目大于或等于第一阈值,则认为完成该份测试任务的测试员存在作弊嫌疑,判定其为潜在作弊,并将该判定结果反馈给系统的后台人工,以使人工进行最终的判定。仍然以总问题数目为20个为例,第一阈值设定为3,若某一测试员所提交的测试完成报告中,被判定为潜在作弊问题的数目大于或等于3个,则系统会判定该份测试报告存在潜在作弊嫌疑,并将该判定结果反馈给后台人工,人工再对测试报告进行仔细的核对检查,并根据一定的规则进行人工判定,以确定其是否在作弊。人工判定规则存在多方面的考虑因素,如具体问题的难易、答案的正确与否以及测试报告的整体准确率等等,于不同的实施方式中,可以设定不同的判定规则。
本实施例提供的真人测试系统防作弊方法,在第一实施例的基础上,增加了潜在作弊判定的步骤,使得系统能够对测试员的潜在作弊行为进行预判,以提供给后台人工相应的预判结果,进一步的保证了测试结果的准确性。
请参阅图5,是本发明第三实施例提供的真人测试系统防作弊方法的流程图,其与第一实施例和第二实施例不同的是,本实施例提供的真人测试系统防作弊方法还包括:
步骤S310,该步骤在步骤S110之前执行,该步骤S310为所述服务器100在测试任务中随机设置预定义陷阱问题。
系统在测试题目中随机插入一些预定义的陷阱题目,具有非常明确的答案,例如询问客户端内指定页面的标题是什么,如果测试员没有认真测试过客户端是无法正确回答的。
步骤S311,该步骤在步骤S113或步骤S213后执行,该步骤S311为所述服务器100接收所述用户终端200反馈的完成所述测试任务后所提交的相应测试报告。
需要说明的是,若第二实施例中,用户终端200所记录的答题时间是与测试员所提交的测试任务完成报告一起反馈至服务器100的,那么本实施例中的步骤S311则与步骤S210本质相同,即步骤S311在此种情况在便不再是在步骤S213后执行的,相当于是本实施例提供的方法流程与第二实施例提供的方法流程为并列执行的过程。
步骤S312,所述服务器100检查所述测试报告中的所述预定义陷阱问题的答案是否正确。
步骤S313,若否,则判定测试员潜在作弊,生成并输出测试员潜在作弊的结果。
如果测试任务完成报告中,预定义陷阱问题的答案不正确,或者是多个预定义陷阱问题中回答错误的比例超过第二阈值,则判定为潜在作弊,并将判定结果反馈给后台人工。对于第二阈值,可以与第一阈值类似的设定方法进行设计,例如预定义陷阱题目有3个,则第二阈值可以设定为1,当一份测试完成报告中预定义陷阱题目的错误数量大于1时,则判定为潜在作弊。后续的人工判定同样是综合多方面因素进行考虑,具体情况需要具体的分析,这里不再赘述。
本实施例提供的真人测试系统防作弊方法,通过在第一实施例或第二实施例的基础上,增设预定义陷阱题目,进一步保证了测试结果的准确性。
请参阅图6,是本发明第四实施例提供的真人测试系统防作弊方法流程图,应用于用户终端200,所应说明的是,本发明所述的真人测试系统防作弊方法并不以图6以及以下所述的具体顺序为限制。下面将对图6所示的具体流程进行详细描述。
步骤S410,用户终端200接收服务器100发送的测试任务。
测试人员注册测试账号时,绑定真实的手机号码,在服务器100创建完成测试任务副本并发送至客户选定的测试账号内后,与绑定的手机号码相应的用户终端200接收到该测试任务,与此同时,用户终端200会接收到通知测试员领取测试任务的推送消息。
步骤S411,在测试员通过所述用户终端200领取测试任务时,获取当前用户终端200的唯一标识码。
测试员在用户终端200登录测试账号,并领取测试任务时,用户终端200获取自身的唯一标识码。与第一实施例中对唯一标识码的解释相同地,优选为IMEI。
步骤S412,所述用户终端200将所述唯一标识码发送至所述服务器100,以使所述服务器100判断已领取过相同所述测试任务的用户终端200已反馈的用户终端200唯一标识码中,是否存在与当前用户终端200反馈的所述唯一标识码相同的码字。
步骤S413,获得所述服务器的判定结果。
本实施例提供的真人测试系统防作弊方法,在测试员领取测试任务时,获取用户终端200的唯一标识码并反馈至服务器100,判断已领取过相同所述测试任务的用户终端200已反馈的用户终端200唯一标识码中,是否存在与当前用户终端200反馈的所述唯一标识码相同的码字,若存在,则就可判定为作弊,有效保证了测试结果的准确性。
请参阅图7,是本发明第五实施例提供的真人测试系统防作弊方法的流程图,其与第四实施例不同的是,本实施例提供的真人测试系统防作弊方法还包括:
步骤S510,该步骤在步骤S413所返回的结果为“是”后执行,该步骤S510为将当前用户终端200唯一标识码与所述测试任务相绑定。
在步骤S413所获得的服务器返回的判定结果为“是”时,即判定测试员未作弊时,将当前用户终端200的唯一标识码与测试任务相绑定的方法有多种,可选地,将唯一标识码记录在测试任务的注释文本内,或者记录在与所述测试任务相关联的专属文本内。
步骤S511,所述用户终端200在完成所述测试任务并进行提交时,检测与所述测试任务相绑定的唯一标识码是否和当前用户终端200的唯一标识码相同。
在测试员完成测试任务并提交相应的完成报告时,用户终端200获取自身的唯一标识码并且与所述测试任务相绑定的唯一标识码进行比对,以判断是否相同,如果不相同,则表明该测试任务是在一台用户终端200上领取,却在另一台用户终端200上提交。
步骤S512,若否,则所述用户终端200发送相应的检测结果至所述服务器100,以使所述服务器100判定测试员作弊。
需要说明的是,用户终端也可以直接根据检测结果判定出作弊行为,而不需要将检测结果发送至服务器,再由服务器做出判定,或者是发送至服务器的同时,在用户终端也得出判定结果。
本实施例提供的真人测试系统防作弊方法,通过在测试员完成测试任务并提交时,检测当前用户终端200的唯一标识码与领取任务时与测试任务相绑定的唯一标识码是否相同,来判断测试员是否存在作弊行为,这种方法在第四实施例提供的方法的基础上进一步增强了系统测试的可靠性和准确性。
请参阅图8,是本发明第六实施例提供的真人测试系统防作弊方法的流程图,其与第四实施例和第五实施例不同的是,本实施例提供的真人测试系统防作弊方法还包括:
步骤S610,该步骤在步骤S413之后及步骤S510之前执行,该步骤S610为所述用户终端200在进行测试任务的过程中,监听用户终端200进行的截图操作。
为了保证测试员在完成测试任务过程中,对软件进行了实际测试,测试员在完成任务的过程中需要对测试的软件进行截图并上传至服务器100。为了保证截图信息的可靠性,测试员在进行测试时,用户终端200将对截图操作进行监听。
步骤S611,在监听到所述截图操作时,所述用户终端200将得到的截图信息与当前用户终端200的唯一标识码相绑定后并保存。
步骤S612,当用户终端200上传截图信息至服务器100时,所述用户终端200检测与上传的截图信息所绑定的唯一标识码与当前用户终端200的唯一标识码是否一致。
步骤S613,若否,则判定测试员作弊,生成并输出测试员作弊的结果。
如果与截图信息相绑定的唯一标识码和当前用户终端200的唯一标识码不相同,表明测试员使用的截图非自身测试软件时的截图,存在作弊行为。
进一步地,为了更好的保证截图信息的可靠性,于本发明的一种具体实施方式中,在监测到截图操作后,用户终端200将生成的截图信息直接压缩成压缩文件格式,如JPG格式,并将当前用户终端200的唯一标识码记录在压缩文件的注释内,再将压缩文件保存在专属文件夹内,在测试员选择提交截图时只能够从专属文件夹内选择相应的截图信息,并且在选择图片后,用户终端200检测记录在压缩文件注释内的唯一标识码与当前用户终端200的唯一标识码是否一致,如果一致,则判定为作弊。
本实施例提供的真人测试系统防作弊方法,通过要求测试员提交测试对象的截图信息,并且检测截图信息的真实可靠性,避免测试员用别人的截图信息蒙混过关,来进一步的保证测试结果的准确性。
请参阅图9,是本发明第七实施例提供的真人测试系统防作弊方法流程图。本实施例以服务器100和用户终端200之间的交互为主要描述方法。下面将对图9所示的具体流程进行详细阐述。
步骤S710,所述服务器100发送测试任务至所述用户终端200。
步骤S711,所述用户终端200接收所述服务器100发送的测试任务。
步骤S712,在测试员通过所述用户终端200领取测试任务时,所述用户终端200获取自身的唯一标识码。
步骤S713,所述用户终端200将所述唯一标识码发送至所述服务器100。
步骤S714,所述服务器100接收所述用户终端200反馈的所述唯一标识码。
步骤S715,所述服务器100查询已领取过相同所述测试任务的用户终端200已反馈的用户终端200唯一标识码中,是否存在与当前用户终端200反馈的所述唯一标识码相同的码字。
步骤S716,若是,所述服务器100判定测试员作弊,生成并输出测试员作弊的结果。
本实施例提供的真人测试系统防作弊方法,在测试员领取测试任务时用户终端200获取自身的唯一标识码并发送给服务器100,服务器100将所述唯一标识码与已经领取过相同测试任务的用户终端200的唯一标识码相比对,若存在相同的码字,则判定当前领取测试任务的测试账号为作弊,这种方法能够有效检测到测试员的作弊行为,进而提升测试结果的准确性。
请参阅图10,是本发明第八实施例提供的一种真人测试系统防作弊装置300,运用于服务器100,下面将对图10所示的具体功能模块进行阐述。
第一发送模块801,用于发送测试任务至用户终端200。具体地,该第一发送模块801可用于执行步骤S110和步骤S710,具体的操作方法可参照上述对步骤S110和步骤S710的详细描述。
第一接收模块802,用于在测试员通过用户终端200领取测试任务时,接收所述用户终端200反馈的用户终端200唯一标识码,还用于接收多个用户终端200反馈的测试员回答所述测试任务中的每一个问题时所使用的答题时间,还用于接收所述用户终端200反馈的完成所述测试任务后所提交的相应测试报告。具体地,该第一接收模块802可用于执行步骤S111、步骤S210、步骤S310和步骤S714,具体的操作方法可参照上述对步骤S111、步骤S210、步骤S310和步骤S714的详细描述。
查询模块803,用于查询已领取过相同所述测试任务的用户终端200已反馈的用户终端200唯一标识码中,是否存在与当前用户终端200反馈的所述唯一标识码相同的码字。具体地,该查询模块803可用于执行步骤S112和步骤S715,具体的操作方法可参照上述对步骤S112和步骤S715的详细描述。
第一判定模块804,用于在已领取过相同所述测试任务的用户终端200已反馈的用户终端200唯一标识码中存在与当前用户终端200反馈的所述唯一标识码相同的码字时,判定当前用户终端200在作弊,还用于在用户终端200反馈的答题时间对应的问题被判定为潜在作弊问题的数目大于或等于第一阈值时判定为潜在作弊,以及还用于在测试报告中预定义陷阱问题回答错误时判定为潜在作弊。具体地,该第一判定模块804可用于执行步骤S113、步骤S213、步骤S313和步骤S716,具体的操作方法可参照上述对步骤S113、步骤S213、步骤S313和步骤S716的详细描述。
正态分布获得模块805,用于根据多个用户终端200反馈的属于同一个测试任务中同一问题的答题时间,得到该问题的答题时间的正态分布,所述正态分布的均值为μ、标准差为σ。具体地,该正态分布获得模块805可用于执行步骤S211,具体的操作方法可参照上述对步骤S211的详细描述。
判断模块806,用于判断用户终端200反馈的答题时间对应的问题被判定为潜在作弊问题的数目是否大于或等于第一阈值,潜在作弊问题是指答题时间不在该问题对应的答题时间的正态分布的μ-3σ~μ+3σ范围内的问题。具体地,该判断模块806可用于执行步骤S212,具体的操作方法可参照上述对步骤S212的详细描述。
陷阱问题设置模块807,用于在测试任务中随机设置预定义陷阱问题。具体地,该陷阱问题设置模块807可用于执行步骤S310,具体的操作方法可参照上述对步骤S310的详细描述。
答案检查模块808,用于检查所述测试报告中的所述预定义陷阱问题的答案是否正确。具体地,该答案检查模块808可用于执行步骤S312,具体的操作方法可参照上述对步骤S312的详细描述。
请参阅图11,是本发明第九实施例提供的一种真人测试系统防作弊装置300,运用于用户终端200,下面将对图11所示的具体功能模块进行阐述。
第二接收模块901,用于接收所述服务器100发送的测试任务,还用于接收所述服务器100返回的判定结果。具体地,该第二接收模块901可用于执行步骤S410、步骤S510和步骤S711,具体的操作方法可参照上述对步骤S410、步骤S510和步骤S711的详细描述。
唯一标识码获取模块902,用于在测试员通过所述用户终端200领取测试任务时,获取当前用户终端200的唯一标识码。具体地,该唯一标识码获取模块902可用于执行步骤S411和步骤S712,具体的操作方法可参照上述对步骤S411和步骤S712的详细描述。
第二发送模块903,用于将所述唯一标识码发送至所述服务器100,还用于在与所述测试任务相绑定的唯一标识码和当前用户终端200的唯一标识码不相同时,发送相应的检测结果至所述服务器100。具体地,该第二发送模块903可用于执行步骤S412、步骤S512和步骤S713,具体的操作方法可参照上述对步骤S412、步骤S512和步骤S713的详细描述。
绑定模块904,用于将当前用户终端200唯一标识码与所述测试任务相绑定,还用于在监听到截图操作时,将生成的截图信息与当前用户终端200的唯一标识码绑定。具体地,该绑定模块904可用于执行步骤S413和步骤S611中的绑定操作,具体的操作方法可参照上述对步骤S413和步骤S611的详细描述。
检测模块905,用于在完成所述测试任务并进行提交时,检测与所述测试任务相绑定的唯一标识码是否和当前用户终端200的唯一标识码相同,还用于当测试员上传截图信息至服务器100时,检测与上传的截图信息所绑定的唯一标识码与当前用户终端200的唯一标识码是否一致。具体地,该检测模块905可用于执行步骤S511和步骤S612,具体的操作方法可参照上述对步骤S511和步骤S612的详细描述。
监听模块906,用于在进行测试任务的过程中,监听用户终端200进行的截图操作。具体地,该监听模块906可用于执行步骤S610,具体的操作方法可参照上述对步骤S610的详细描述。
保存模块907,用于在监听到所述截图操作后,将与用户终端200的唯一标识码相绑定的截图信息进行保存。具体地,该保存模块907可用于执行步骤S611中的保存操作,具体的操作方法可参照上述对步骤S611的详细描述。
第二判定模块908,用于在与上传的截图信息所绑定的唯一标识码和当前用户终端200的唯一标识码不一致时,判定当前用户终端200在作弊。具体地,该第二判定模块908可用于执行步骤S613,具体的操作方法可参照上述对步骤S613的详细描述。
综上所述,本发明提供的真人测试系统防作弊方法及装置,能够有效防止测试人员作弊,提升测试结果的准确率,其实现过程包括,其一是通过将领取测试任务的用户终端200的唯一标识码与所述测试任务相绑定,防止同一用户终端200重复领取相同的测试任务进行作弊;其二是在完成测试任务进行提交时,检测与测试任务绑定的唯一标识码与当前用户终端200的唯一标识码是否相同,防止测试人员在一个用户终端200上领取任务,在另一用户终端200进行测试,避免作弊;其三是测试人员需要对测试的软件进行截图以证明确实进行了实际测试;其四是对潜在作弊行为进行监控,包括对答题时间进行拟合得到相应的正太分布以及设定预定义陷阱问题。这种真人测试系统防作弊方法及装置通过作弊防止和潜在作弊行为监控两个方面进行设计,有效防止了测试人员作弊和不认真答题情况的出现,保证了真人测试系统测试结果的准确性。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。
Claims (7)
1.一种真人测试系统防作弊方法,其特征在于,所述方法包括:
服务器发送测试任务至用户终端;
在测试员通过用户终端领取测试任务时,所述服务器接收所述用户终端反馈的用户终端唯一标识码;
所述服务器查询已领取过相同所述测试任务的用户终端已反馈的用户终端唯一标识码中,是否存在与当前用户终端反馈的所述唯一标识码相同的码字;
若存在与当前用户终端反馈的所述唯一标识码相同的码字,则所述服务器生成并输出测试员作弊的结果;
若不存在与当前用户终端反馈的所述唯一标识码相同的码字,则该方法还包括由所述服务器执行的下述过程:
接收多个用户终端反馈的测试员回答所述测试任务中的每一个问题时所使用的答题时间;
根据多个用户终端反馈的属于同一个测试任务中同一问题的答题时间,得到该问题的答题时间的正态分布,所述正态分布的均值为μ、标准差为σ;
依次判断用户终端反馈的每个问题的答题时间是否在该问题对应的答题时间的正态分布的μ-3σ~μ+3σ范围内,若否,则判定该问题为潜在作弊问题;
判断用户终端反馈的答题时间对应的问题中被判定为潜在作弊问题的数目是否大于或等于第一阈值;
若大于或等于第一阈值,则生成并输出测试员潜在作弊的结果。
2.根据权利要求1所述的真人测试系统防作弊方法,其特征在于,该方法还包括:
所述服务器在测试任务中随机设置预定义陷阱问题;
所述服务器接收所述用户终端反馈的完成所述测试任务后所提交的相应测试报告;
所述服务器检查所述测试报告中的所述预定义陷阱问题的答案是否正确;
若否,则所述服务器生成并输出测试员潜在作弊的结果。
3.一种真人测试系统防作弊方法,其特征在于,所述方法包括:
用户终端接收服务器发送的测试任务;
在测试员通过所述用户终端领取测试任务时,获取当前用户终端的唯一标识码;
所述用户终端将所述唯一标识码发送至所述服务器,以使所述服务器判断已领取过相同所述测试任务的用户终端已反馈的用户终端唯一标识码中,是否存在与当前用户终端反馈的所述唯一标识码相同的码字;
获得所述服务器的判断结果;
在从所述服务器获得的判断结果指示测试员作弊的情况下,该方法流程结束;
在从所述服务器获得的判断结果指示测试员没有作弊的情况下,该方法还包括由用户终端执行的下述过程:
在进行测试任务的过程中,监听用户终端进行的截图操作;
在监听到所述截图操作时,将得到的截图信息与当前用户终端的唯一标识码相绑定后并保存;
当用户终端上传截图信息至服务器时,检测上传的截图信息所绑定的唯一标识码与当前用户终端的唯一标识码是否一致;
若不一致,则生成并输出测试员作弊的结果。
4.根据权利要求3所述的真人测试系统防作弊方法,其特征在于,所述方法还包括:
将当前用户终端唯一标识码与所述测试任务相绑定;
所述用户终端在完成所述测试任务并进行提交时,检测与所述测试任务相绑定的唯一标识码是否和当前用户终端的唯一标识码相同;
若否,则所述用户终端发送相应的检测结果至所述服务器,以使所述服务器生成并输出测试员作弊的结果。
5.一种真人测试系统防作弊装置,运用于服务器,其特征在于,所述装置包括:
第一发送模块,用于发送测试任务至用户终端;
第一接收模块,用于在测试员通过用户终端领取测试任务时,接收所述用户终端反馈的用户终端唯一标识码;
查询模块,用于查询已领取过相同所述测试任务的用户终端已反馈的用户终端唯一标识码中,是否存在与当前用户终端反馈的所述唯一标识码相同的码字;
第一判定模块,用于若已领取过相同所述测试任务的用户终端已反馈的用户终端唯一标识码中存在与当前用户终端反馈的所述唯一标识码相同的码字,则生成并输出测试员作弊的结果;
正态分布获得模块,用于若已领取过相同所述测试任务的用户终端已反馈的用户终端唯一标识码中不存在与当前用户终端反馈的所述唯一标识码相同的码字,则执行以下过程:
接收多个用户终端反馈的测试员回答所述测试任务中的每一个问题时所使用的答题时间;
根据多个用户终端反馈的属于同一个测试任务中同一问题的答题时间,得到该问题的答题时间的正态分布,所述正态分布的均值为μ、标准差为σ;
判断模块,用于依次判断用户终端反馈的每个问题的答题时间是否在该问题对应的答题时间的正态分布的μ-3σ~μ+3σ范围内,若否,则判定该问题为潜在作弊问题;
所述判断模块,还用于判断用户终端反馈的答题时间对应的问题中被判定为潜在作弊问题的数目是否大于或等于第一阈值;
所述第一判定模块,还用于若用户终端反馈的答题时间对应的问题中被判定为潜在作弊问题的数目大于或等于第一阈值,则生成并输出测试员潜在作弊的结果。
6.一种真人测试系统防作弊装置,运用于用户终端,其特征在于,所述装置包括:
第二接收模块,用于接收服务器发送的测试任务;
唯一标识码获取模块,用于在测试员通过所述用户终端领取测试任务时,获取当前用户终端的唯一标识码;
第二发送模块,用于将所述唯一标识码发送至所述服务器,以使所述服务器判断已领取过相同所述测试任务的用户终端已反馈的用户终端唯一标识码中,是否存在与当前用户终端反馈的所述唯一标识码相同的码字;
所述第二接收模块,还用于获得所述服务器的判断结果;
所述装置还包括在所述第二接收模块从所述服务器获得的判断结果指示测试员没有作弊并且测试员开始进行测试任务的情况下执行对应过程的下述模块:
监听模块,用于在测试员进行测试任务的过程中,监听用户终端进行的截图操作;
绑定模块,用于在监听到所述截图操作时,将得到的截图信息与当前用户终端的唯一标识码相绑定;
保存模块,用于保存与当前用户终端的唯一标识码相绑定的截图信息;
检测模块,用于当上传截图信息至服务器时,检测与上传的截图信息所绑定的唯一标识码与当前用户终端的唯一标识码是否一致;
第二判定模块,用于在与上传的截图信息所绑定的唯一标识码和当前用户终端的唯一标识码不一致时,生成并输出测试员作弊的结果。
7.根据权利要求6所述的真人测试系统防作弊装置,其特征在于:
所述绑定模块,还用于将当前用户终端唯一标识码与所述测试任务相绑定;
所述检测模块,还用于在完成所述测试任务并进行提交时,检测与所述测试任务相绑定的唯一标识码是否和当前用户终端的唯一标识码相同;
所述第二发送模块,还用于在与所述测试任务相绑定的唯一标识码和当前用户终端的唯一标识码不相同时,发送相应的检测结果至所述服务器,以使所述服务器判定测试员作弊。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610107547.0A CN105786706B (zh) | 2016-02-26 | 2016-02-26 | 一种真人测试系统防作弊方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610107547.0A CN105786706B (zh) | 2016-02-26 | 2016-02-26 | 一种真人测试系统防作弊方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105786706A CN105786706A (zh) | 2016-07-20 |
CN105786706B true CN105786706B (zh) | 2018-07-20 |
Family
ID=56403771
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610107547.0A Active CN105786706B (zh) | 2016-02-26 | 2016-02-26 | 一种真人测试系统防作弊方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105786706B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108933765B (zh) * | 2017-05-26 | 2021-11-09 | 武汉斗鱼网络科技有限公司 | 一种提高设备id安全性的方法、客户端和服务器 |
CN108933766B (zh) * | 2017-05-26 | 2021-11-09 | 武汉斗鱼网络科技有限公司 | 一种提高设备id安全性的方法和客户端 |
CN109218009B (zh) * | 2017-06-30 | 2021-11-09 | 武汉斗鱼网络科技有限公司 | 一种提高设备id安全性的方法、客户端和服务器 |
JP7029726B2 (ja) * | 2018-02-27 | 2022-03-04 | 株式会社Splink | 判定システム、判定方法及びプログラム |
CN109165134A (zh) * | 2018-07-16 | 2019-01-08 | 付坤元 | 基于区块链技术的机试数据处理方法及系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104184747A (zh) * | 2014-09-12 | 2014-12-03 | 北京国双科技有限公司 | 访问作弊的识别方法和装置 |
CN105117289A (zh) * | 2015-09-30 | 2015-12-02 | 北京奇虎科技有限公司 | 基于云测试平台的任务分配方法、装置及系统 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2933549A1 (en) * | 2014-01-03 | 2015-07-09 | Gleim Conferencing, Llc | System and method for validating test takers |
-
2016
- 2016-02-26 CN CN201610107547.0A patent/CN105786706B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104184747A (zh) * | 2014-09-12 | 2014-12-03 | 北京国双科技有限公司 | 访问作弊的识别方法和装置 |
CN105117289A (zh) * | 2015-09-30 | 2015-12-02 | 北京奇虎科技有限公司 | 基于云测试平台的任务分配方法、装置及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN105786706A (zh) | 2016-07-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105786706B (zh) | 一种真人测试系统防作弊方法及装置 | |
US10810663B1 (en) | Heuristic document verification and real time deposit engine | |
CN105243715B (zh) | 一种基于动态二维码的小区来访用户自动登记方法及系统 | |
CN107894952A (zh) | 接口测试用例的生成方法、装置、设备及可读存储介质 | |
CN107480483A (zh) | 一种账号检测的方法及装置 | |
CN104869019A (zh) | 用于定位故障的反馈方法、装置及服务器 | |
CN103455411B (zh) | 日志分类模型的建立、行为日志分类方法及装置 | |
CN105162604A (zh) | 一种基于特征图像识别的验证方法、服务器及系统 | |
CN111198797B (zh) | 操作监控方法及装置、操作分析方法及装置 | |
CN108076056A (zh) | 云服务器登录方法及装置 | |
CN112181835B (zh) | 自动化测试方法、装置、计算机设备及存储介质 | |
CN105068935A (zh) | 一种软件测试结果的处理方法及装置 | |
CN105323748B (zh) | 一种测试错误上传方法及装置 | |
CN111666193B (zh) | 基于实时日志解析的终端功能监控与测试的方法与系统 | |
CN110267215A (zh) | 一种数据检测方法、设备及存储介质 | |
CN107231358B (zh) | 一种问卷数据采集方法、服务器及移动终端 | |
CN108092947A (zh) | 一种对第三方应用进行身份鉴别的方法及装置 | |
CN111385272A (zh) | 弱口令的检测方法及装置 | |
CN111563037B (zh) | 基于测试试题的测试优化方法及装置、存储介质、终端 | |
CN104796451A (zh) | 用于互联网应用的数据处理方法和装置 | |
CN106682516A (zh) | 应用程序的检测方法、检测装置和服务器 | |
CN112783942B (zh) | 基于区块链的数据采集质量核验方法及系统及装置及介质 | |
JP6977133B2 (ja) | デジタル試験をセキュアに実施するための方法およびシステム | |
CN112765213A (zh) | 一种二代征信自动化查询方法、系统及计算机设备 | |
Benstead et al. | Using tablet computers to implement surveys in challenging environments |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |