CN111241272A - 一种快速定位未掌握考点的评测系统及其测试方法 - Google Patents
一种快速定位未掌握考点的评测系统及其测试方法 Download PDFInfo
- Publication number
- CN111241272A CN111241272A CN201811441828.5A CN201811441828A CN111241272A CN 111241272 A CN111241272 A CN 111241272A CN 201811441828 A CN201811441828 A CN 201811441828A CN 111241272 A CN111241272 A CN 111241272A
- Authority
- CN
- China
- Prior art keywords
- test
- question
- questions
- examination
- label
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000010998 test method Methods 0.000 title claims abstract description 13
- 238000011156 evaluation Methods 0.000 title claims abstract description 12
- 238000012360 testing method Methods 0.000 claims abstract description 239
- 238000000034 method Methods 0.000 claims description 27
- 230000000750 progressive effect Effects 0.000 claims description 15
- 238000002372 labelling Methods 0.000 claims description 8
- 238000012163 sequencing technique Methods 0.000 claims description 4
- FGUUSXIOTUKUDN-IBGZPJMESA-N C1(=CC=CC=C1)N1C2=C(NC([C@H](C1)NC=1OC(=NN=1)C1=CC=CC=C1)=O)C=CC=C2 Chemical compound C1(=CC=CC=C1)N1C2=C(NC([C@H](C1)NC=1OC(=NN=1)C1=CC=CC=C1)=O)C=CC=C2 FGUUSXIOTUKUDN-IBGZPJMESA-N 0.000 claims description 3
- 238000009795 derivation Methods 0.000 claims description 3
- 208000003443 Unconsciousness Diseases 0.000 abstract description 4
- 238000011160 research Methods 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000012550 audit Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 235000019580 granularity Nutrition 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
- G06Q50/205—Education administration or guidance
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B7/00—Electrically-operated teaching apparatus or devices working with questions and answers
- G09B7/02—Electrically-operated teaching apparatus or devices working with questions and answers of the type wherein the student is expected to construct an answer to the question which is presented or wherein the machine gives an answer to the question presented by a student
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Educational Technology (AREA)
- Theoretical Computer Science (AREA)
- Educational Administration (AREA)
- Tourism & Hospitality (AREA)
- General Physics & Mathematics (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- General Business, Economics & Management (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Electrically Operated Instructional Devices (AREA)
Abstract
本发明公开了一种快速定位未掌握考点的测试方法及评测系统，包括为该试题附上相应考点标签；将考点标签具备相关性的试题建立起考核题库；建立知识链条；为用户提供知识链条中的任意一个试题进行第一次测试；如第一次测试结果正确则在知识链条上前进n个试题进行第二次测试，如果测试结果错误则在知识链条上后退n个试题进行第二次测试；如第二次测试结果正确则在知识链条上前进m个试题进行第三次测试，如第二次测试结果错误则在知识链条上后退k个试题进行第三次测试；重复上述步骤，直至找倒未掌握考点的试题；通过建立知识链条，即按照标签之间的传递性，提出一种折半查找的方式，快速定位到学生未掌握考点的方式，极大的提高了学生学习效率，提高了老师对学生的评测效率。
Description
技术领域
本发明涉及一种快速定位未掌握考点的评测系统及其测试方法。
背景技术
目前，计算机技术和网络技术的不断发展，使得一些无纸化且随机选题的练习和考试方式越来越多地应用于各种考试系统中，这种应用的实现离不开电子试题库。试题库管理有着十分重要的意义和价值，良好的试题库管理系统可以为考试系统提供有效的、丰富的试题数据，还可以为师生的教、学活动提供一种新的教学平台。在学习的过程中，往往需要检测学习的效果，或者说评价知识的未掌握的考点。这样才可以为后期的学习提供指导方向。现有相似的检测方案：完全由老师根据自己的经验，从题库中选题，这种方式效率低下，而且完全受限于试卷出题人的经验，难以复制给其他老师操作。
发明内容
本发明的目的在于克服以上所述的缺点，提供一种快速定位未掌握考点的评测系统及其测试方法。
为实现上述目的，本发明的具体方案如下：一种快速定位未掌握考点的测试方法：
a、根据每一道试题的考点分布情况，为该试题附上相应考点标签；
b、将考点标签具备相关性的试题建立起考核题库；
c、将考核题库中的试题以延伸性关系排序并建立知识链条；
d、为用户提供知识链条中的任意一个试题进行第一次测试；
e、如第一次测试结果正确则在知识链条上前进n个试题进行第二次测试，如果测试结果错误则在知识链条上后退n个试题进行第二次测试；
f、如第二次测试结果正确则在知识链条上前进m个试题进行第三次测试，如第二次测试结果错误则在知识链条上后退k个试题进行第三次测试；
其中，n＞m；
g、重复第f步骤，直至找倒未掌握考点的试题。
其中， 每道试题上的考点标签为多个，且多个标签标记通过关联标记方法标记。
其中， 标签与标签关系包括有递进关系、包括关系、并列关系、相关度关系等。
其中，所述延伸性包括递进延续性和包含延续性等。
其中，给试题进行打标的方法为：
A、将试题标签集合label进行变量初始化，将试题标签集合label赋为所有已有的试题标签的集合；
B、将所有未打满试题标签的试题放入待分类试题库中；
C、获取上一条试题K中被选择最多的试题标签Lj，并且统计出与试题标签Lj关联的试题的数量QLj；
D、统计每个试题标签需要关联的试题数量的平均值Qaverage；
E、比较QLj以及Qaverage；若QLj小于Qaverage，则从待分类试题库中获取与上一条试题K相似度最高的一条试题；否则，则从待分类试题库中获取与上一试题K相似度为0.4~0.6的一条试题；
F、将获取的试题进行人工打标得到新的试题标签；
G、将该新获得的试题标签保留至试题标签集合label中；
H、检测打完试题标签后的试题是否已打满试题标签，若是，则将该试题移入审核集合中进行审核；否则，则将该试题转入待分类试题库中。
一种快速定位未掌握考点的评测系统：包括有试题库建立单元、试题标签打标单元、知识链条建成单元、考点推送单元；
试题库建立单元，用于将大类相同的题目建立初步试题库；
试题标签打标单元，用于将试题库中的试题打标；
知识链条建成单元，用于将打标好的试题进行排列组合建成知识链条；
考点推导单元，用于给用户推送知识链条上的试题，并通过循环方式找到用户未掌握的考点。
其中，知识链条建成单元将打标好的试题按照递进延续性或包含延续性进行排列组合建成知识链条；递进延续性为考点的难度关系，包含延续性为考点的包含关系。
本发明的有益效果为：通过建立知识链条，即按照标签之间的传递性，提出一种折半查找的方式，快速定位到学生未掌握考点的方式，极大的提高了学生学习效率，提高了老师对学生的评测效率。
附图说明
图1是本发明的知识链条的示意图；
图2是本发明打标方法图。
具体实施方式
下面结合附图和具体实施例对本发明作进一步详细的说明，并不是把本发明的实施范围局限于此。
如图1所示，本实施例所述的一种快速定位未掌握考点的测试方法：
a、根据每一道试题的考点分布情况，为该试题附上相应考点标签；
b、将考点标签具备相关性的试题建立起考核题库；
c、将考核题库中的试题以延伸性关系排序并建立知识链条；
d、为用户提供知识链条中的任意一个试题进行第一次测试；
e、如第一次测试结果正确则在知识链条上前进n个试题进行第二次测试，如果测试结果错误则在知识链条上后退n个试题进行第二次测试；
f、如第二次测试结果正确则在知识链条上前进m个试题进行第三次测试，如第二次测试结果错误则在知识链条上后退k个试题进行第三次测试；
其中，n＞m；
g、重复第f步骤，直至找倒未掌握考点的试题。
本实施例所述的一种快速定位未掌握考点的测试方法， 每道试题上的考点标签为多个，且多个标签标记通过关联标记方法标记。
本实施例具体为：将考核题库中的试题以延伸性关系排序并建立知识链条，以每个考题只有一个考点标签举例，例如：每个考题的考点标签依次为：一元一次方程、二元一次方程、一元二次方程、二元二次方程；当为用户提供知识链条中的任意一个试题进行第一次测试；例如二元一次方程，如用户答对了，说明用户已经掌握一元一次方程以及二元一次方程，系统会自动推送二元二次方程，当用户不会，则后退推送一元二次方程，从而判断用户具体的未掌握考点在哪里。已经未掌握考点的以后的所有知识点。
再比如，每个考题有多个标签，考点标签依次为：三角形+勾股定理、四边形+勾股定理、五边形+勾股定理、六边形+勾股定理，依次建立链条，当四边形+勾股定理如果掌握，则三角形的勾股定理一般可以认定为用户也掌握了，通过上述方法，可以快速找到未掌握考点的具体位置。
其中，标签与标签关系包括有递进关系、包括关系、并列关系、相关度关系等。比如，一元一次方程、二元一次方程、一元二次方程、二元二次方程属于递进关系，圆和椭圆也属于递进、六边形与三角形属于包含关系、加法和减法属于并列关系。
其中，所述延伸性包括递进延续性和包含延续性等。没个考题包含多个标签，每个考题的标签之间存在关联关系，比如递进、包含、并列等。
如图2所示，在建立知识链条之前，需要给每个考题打标签， 其中，给试题进行打标的方法为：
A、将试题标签集合label进行变量初始化，将试题标签集合label赋为所有已有的试题标签的集合；
B、将所有未打满试题标签的试题放入待分类试题库中；
C、获取上一条试题K中被选择最多的试题标签Lj，并且统计出与试题标签Lj关联的试题的数量QLj；
D、统计每个试题标签需要关联的试题数量的平均值Qaverage；
E、比较QLj以及Qaverage；若QLj小于Qaverage，则从待分类试题库中获取与上一条试题K相似度最高的一条试题；否则，则从待分类试题库中获取与上一试题K相似度为0.4~0.6的一条试题；
F、将获取的试题进行人工打标得到新的试题标签；
G、将该新获得的试题标签保留至试题标签集合label中；
H、检测打完试题标签后的试题是否已打满试题标签，若是，则将该试题移入审核集合中进行审核；否则，则将该试题转入待分类试题库中。
在步骤F中，人工打标得到的新的试题标签包括必须项和可选项，所述必须项包括方法标签和原理标签，所述可选项包括应用标签和组合标签。
具体地，本实施例所述的原理标签是用于表达一些原理性的内容的试题标签，这类标签是学生必须掌握的内容；应用标签是用于表达一些题型，应用，或者场景等等，需要使用原理标签的知识进行解答问题的试题题型；组合标签，这类标签主要也是描述一些场景相关的题型，主要是一个标签里面含有多个原理标签的内容；应用标签和组合标签这两类标签不能单独标注试题，一般和原理标签相结合对题目进行分类；方法标签：这类标签主要是描述一类标签，他不属于当前原理标签所在章节的内容，但是他可以用于解决某些应用问题，并且可能与多个原理标签进行结合。本实施例将知识点标签的按照“原理标签”，“应用标签”，“组合标签”，“方法标签”进行分类的分类方法，其中“方法标签”可以脱离具体的被描述的概念而单独被学习，避免让这些方法和所有的概念进行结合从而显得重复。标签本身的层次特征，使得题目的知识点可以按不同的粒度进行分析。另外，本实施例可以将知识点标签按照不同的视角分为同步知识点，和专题知识点。并且融合这两个知识点。让专题知识点作为同步知识点的一个子集。这种方法，使得打标签的人员在给一个试题打标签的时候，会根据自己的思维习惯从不同的角度定位和思考一个试题所代表的知识点。所有的专题知识点都在同步知识点里面可以找到，避免既要按照同步知识点打标签，也要按照专题知识点打标签。这种方法使得打标签的工作量降低到一半。在人工打标签的过程中，多个（一般为3个）内容教研人员打标签，一个资深教研人员审核标签，这种方式既有利于提高准确率，也可以发动普通的教研人员参加，加快进度，也让审核员通过阅读初级教研人员的标签进行判断，而不是亲自查找标签，使得整体进展更快。在步骤E中，通过开源软件lucene计算出待分类试题库中的试题与上一条试题K的相似度。通过算法可以让打标签的人员优先获得已经打过的题目的类似题目进行标注。这样可以利用人们的记忆在短期不会丢失的原理，让效率变得更高。在步骤E中；当QLj大于Qaverage时，从待分类试题库中获取与上一试题K相似度为0.5的一条试题。具有这个相似度的好处是：（1）与上一个标签仍然有一定的相似性，因此当前打标人员可能还是熟悉这个知识点。（2）同时也可避免与上一题目K的标签完全相同，在步骤E中，QLj小于Qaverage，则从待分类试题库中获取与上一条试题K相似度最高的一条试题；并且该试题为打标人员未操作过的试题；所述试题标签分类方法还包括以下步骤： I、获取一条与上一试题K相似度最高的试题M； J、通过试题M与审核集合中的试题进行对比审核，若审核不成功，则审核人员自行增加标签。具有这个相似度的好处是审核人员刚刚审核类似的题目，会比较熟悉这些知识点，可以提高效率。
本实施例中，一种快速定位未掌握考点的评测系统：包括有试题库建立单元、试题标签打标单元、知识链条建成单元、考点推送单元；
试题库建立单元，用于将大类相同的题目建立初步试题库；
试题标签打标单元，用于将试题库中的试题打标；
知识链条建成单元，用于将打标好的试题进行排列组合建成知识链条；
考点推导单元，用于给用户推送知识链条上的试题，并通过循环方式找到用户未掌握的考点。
其中，知识链条建成单元将打标好的试题按照递进延续性或包含延续性进行排列组合建成知识链条；递进延续性为考点的难度关系，包含延续性为考点的包含关系。
通过建立知识链条，即按照标签之间的传递性，提出一种折半查找的方式，快速定位到学生未掌握考点的方式，极大的提高了学生学习效率，提高了老师对学生的评测效率。
以上所述仅是本发明的一个较佳实施例，故凡依本发明专利申请范围所述的构造、特征及原理所做的等效变化或修饰，包含在本发明专利申请的保护范围内。
Claims (7)
1.一种快速定位未掌握考点的测试方法：其特征在于：
a、根据每一道试题的考点分布情况，为该试题附上相应考点标签；
b、将考点标签具备相关性的试题建立起考核题库；
c、将考核题库中的试题以延伸性关系排序并建立知识链条；
d、为用户提供知识链条中的任意一个试题进行第一次测试；
e、如第一次测试结果正确则在知识链条上前进n个试题进行第二次测试，如果测试结果错误则在知识链条上后退n个试题进行第二次测试；
f、如第二次测试结果正确则在知识链条上前进m个试题进行第三次测试，如第二次测试结果错误则在知识链条上后退k个试题进行第三次测试；
其中，n＞m；
g、重复第f步骤，直至找倒未掌握考点的试题。
2.根据权利要求1所述的一种快速定位未掌握考点的测试方法：其特征在于：每道试题上的考点标签为多个，且多个标签标记通过关联标记方法标记。
3.根据权利要求1所述的一种快速定位未掌握考点的测试方法：其特征在于：标签与标签关系包括有递进关系、包括关系、并列关系、相关度关系等。
4.根据权利要求1所述的一种快速定位未掌握考点的测试方法：其特征在于：所述延伸性包括递进延续性和包含延续性等。
5.根据权利要求1所述的一种快速定位未掌握考点的测试方法：其特征在于：给试题进行打标的方法为：
A、将试题标签集合label进行变量初始化，将试题标签集合label赋为所有已有的试题标签的集合；
B、将所有未打满试题标签的试题放入待分类试题库中；
C、获取上一条试题K中被选择最多的试题标签Lj，并且统计出与试题标签Lj关联的试题的数量QLj；
D、统计每个试题标签需要关联的试题数量的平均值Qaverage；
E、比较QLj以及Qaverage；若QLj小于Qaverage，则从待分类试题库中获取与上一条试题K相似度最高的一条试题；否则，则从待分类试题库中获取与上一试题K相似度为0.4~0.6的一条试题；
F、将获取的试题进行人工打标得到新的试题标签；
G、将该新获得的试题标签保留至试题标签集合label中；
H、检测打完试题标签后的试题是否已打满试题标签，若是，则将该试题移入审核集合中进行审核；否则，则将该试题转入待分类试题库中。
6.一种快速定位未掌握考点的评测系统：其特征在于：包括有试题库建立单元、试题标签打标单元、知识链条建成单元、考点推送单元；
试题库建立单元，用于将大类相同的题目建立初步试题库；
试题标签打标单元，用于将试题库中的试题打标；
知识链条建成单元，用于将打标好的试题进行排列组合建成知识链条；
考点推导单元，用于给用户推送知识链条上的试题，并通过循环方式找到用户未掌握的考点。
7.根据权利要求6所述的一种快速定位未掌握考点的评测系统：其特征在于：知识链条建成单元将打标好的试题按照递进延续性或包含延续性进行排列组合建成知识链条；递进延续性为考点的难度关系，包含延续性为考点的包含关系。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811441828.5A CN111241272B (zh) | 2018-11-29 | 2018-11-29 | 一种快速定位未掌握考点的评测系统及其测试方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811441828.5A CN111241272B (zh) | 2018-11-29 | 2018-11-29 | 一种快速定位未掌握考点的评测系统及其测试方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111241272A true CN111241272A (zh) | 2020-06-05 |
| CN111241272B CN111241272B (zh) | 2023-05-05 |
Family
ID=70870132
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811441828.5A Active CN111241272B (zh) | 2018-11-29 | 2018-11-29 | 一种快速定位未掌握考点的评测系统及其测试方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111241272B (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130017531A1 (en) * | 2011-07-12 | 2013-01-17 | National Taiwan Normal University | Testing system and method using an ipsative scale |
| CN106227809A (zh) * | 2016-07-22 | 2016-12-14 | 广东小天才科技有限公司 | 一种试题的推送方法及装置 |
| CN107483397A (zh) * | 2017-06-19 | 2017-12-15 | 上海高顿教育培训有限公司 | 一种基于bs架构的考生自我测评方法 |
| CN107909520A (zh) * | 2017-11-02 | 2018-04-13 | 浙江工商大学 | 基于试题相关性的出卷方法和装置 |
-
2018
- 2018-11-29 CN CN201811441828.5A patent/CN111241272B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130017531A1 (en) * | 2011-07-12 | 2013-01-17 | National Taiwan Normal University | Testing system and method using an ipsative scale |
| CN106227809A (zh) * | 2016-07-22 | 2016-12-14 | 广东小天才科技有限公司 | 一种试题的推送方法及装置 |
| CN107483397A (zh) * | 2017-06-19 | 2017-12-15 | 上海高顿教育培训有限公司 | 一种基于bs架构的考生自我测评方法 |
| CN107909520A (zh) * | 2017-11-02 | 2018-04-13 | 浙江工商大学 | 基于试题相关性的出卷方法和装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111241272B (zh) | 2023-05-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Pan et al. | Prerequisite relation learning for concepts in moocs | |
| Ke et al. | Automated Essay Scoring: A Survey of the State of the Art. | |
| Moody et al. | Evaluating the quality of information models: empirical testing of a conceptual model quality framework | |
| US20170193393A1 (en) | Automated Knowledge Graph Creation | |
| Yazgan | Sixth graders and non-routine problems: Which strategies are decisive for success? | |
| Chow et al. | Automated data-driven hints for computer programming students | |
| Roy et al. | A perspective on computer assisted assessment techniques for short free-text answers | |
| CN111563156B (zh) | 一种知识点智能诊断的方法、装置、电子设备及存储介质 | |
| Agarwal et al. | Autoeval: A nlp approach for automatic test evaluation system | |
| Kong | The association between children’s common Chinese stroke errors and spelling ability | |
| O'Rourke et al. | Visualizing Topic Flow in Students' Essays. | |
| Alzetta et al. | Prelearn@ evalita 2020: Overview of the prerequisite relation learning task for italian | |
| Nafa et al. | Conceptualize the domain knowledge space in the light of cognitive skills | |
| Memon et al. | Analysis and classification of problems associated with requirements engineering education: Towards an integrated view | |
| Haberman et al. | Teaching abstraction to novices: Pattern-based and ADT-based problem-solving processes | |
| CN111241272A (zh) | 一种快速定位未掌握考点的评测系统及其测试方法 | |
| González‐López et al. | Lexical analysis of student research drafts in computing | |
| Amiri et al. | Spotting spurious data with neural networks | |
| CN111324730B (zh) | 一种试题标签分类方法 | |
| Hladká et al. | Crowdsourcing in language classes can help natural language processing | |
| White et al. | Volunteer research and knowledge competency codebook: A tool for identifying volunteer needs | |
| CN112860983B (zh) | 一种学习内容推送的方法、系统、设备及可读存储介质 | |
| Bresfelean | Data mining applications in higher education and academic intelligence management | |
| Becker et al. | What’s next? Target concept identification and sequencing | |
| Wang et al. | Teacher Talk Moves in K12 Mathematics Lessons: Automatic Identification, Prediction Explanation, and Characteristic Exploration |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |