CN111768439B - 一种确定实验评分的方法、装置、电子设备及介质 - Google Patents
一种确定实验评分的方法、装置、电子设备及介质 Download PDFInfo
- Publication number
- CN111768439B CN111768439B CN201911054633.XA CN201911054633A CN111768439B CN 111768439 B CN111768439 B CN 111768439B CN 201911054633 A CN201911054633 A CN 201911054633A CN 111768439 B CN111768439 B CN 111768439B
- Authority
- CN
- China
- Prior art keywords
- operation step
- video frame
- video
- determining
- video frames
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000002474 experimental method Methods 0.000 title claims abstract description 158
- 238000000034 method Methods 0.000 title claims abstract description 59
- 239000007788 liquid Substances 0.000 claims description 166
- 238000012360 testing method Methods 0.000 claims description 101
- 238000004891 communication Methods 0.000 claims description 21
- 238000006386 neutralization reaction Methods 0.000 claims description 12
- 241000973497 Siphonognathus argyrophanes Species 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 10
- 239000012530 fluid Substances 0.000 claims description 5
- 238000013136 deep learning model Methods 0.000 description 33
- 238000012549 training Methods 0.000 description 17
- 238000001514 detection method Methods 0.000 description 15
- 230000006870 function Effects 0.000 description 9
- 230000008569 process Effects 0.000 description 9
- 230000009286 beneficial effect Effects 0.000 description 6
- HEMHJVSKTPXQMS-UHFFFAOYSA-M Sodium hydroxide Chemical compound [OH-].[Na+] HEMHJVSKTPXQMS-UHFFFAOYSA-M 0.000 description 3
- 230000002378 acidificating effect Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000007781 pre-processing Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 239000000126 substance Substances 0.000 description 3
- VEXZGXHMUGYJMC-UHFFFAOYSA-N Hydrochloric acid Chemical compound Cl VEXZGXHMUGYJMC-UHFFFAOYSA-N 0.000 description 2
- 238000003556 assay Methods 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- KJFMBFZCATUALV-UHFFFAOYSA-N phenolphthalein Chemical compound C1=CC(O)=CC=C1C1(C=2C=CC(O)=CC=2)C2=CC=CC=C2C(=O)O1 KJFMBFZCATUALV-UHFFFAOYSA-N 0.000 description 2
- 238000013077 scoring method Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000000802 evaporation-induced self-assembly Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
- G06Q10/06393—Score-carding, benchmarking or key performance indicator [KPI] analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
- G06Q50/205—Education administration or guidance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Human Resources & Organizations (AREA)
- Strategic Management (AREA)
- Educational Administration (AREA)
- General Physics & Mathematics (AREA)
- Economics (AREA)
- Theoretical Computer Science (AREA)
- Tourism & Hospitality (AREA)
- Physics & Mathematics (AREA)
- Development Economics (AREA)
- Educational Technology (AREA)
- Marketing (AREA)
- Entrepreneurship & Innovation (AREA)
- General Business, Economics & Management (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Game Theory and Decision Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
Abstract
本发明实施例提供了一种确定实验评分的方法、装置、电子设备及介质,涉及教育信息化技术领域,可以减少确定实验评分所消耗的人力资源。本发明实施例的方案包括:从目标实验的操作录像中,获取各视频帧包括的指定对象的位置,并从目标实验的操作录像中,获取所述各视频帧包括的指定对象的状态。然后从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧;其中,每个操作步骤对应的视频帧用于评判该操作步骤的分数。再根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分,接着基于各操作步骤的评分,计算所述目标实验的评分结果。
Description
技术领域
本发明涉及教育信息化技术领域,特别是涉及一种确定实验评分的方法、装置、电子设备及介质。
背景技术
实验考试是检测学生对知识掌握程度的重要手段之一,实验考试包括物理实验和化学实验。其中,物理实验包括:测量电阻、测量小灯泡电功率、验证凸透镜成像规律等。化学实验包括:气体的检验、气体的制取、液体的量取等。
目前对学生实验操作的评分方法是监考老师观察考场中的考生对实验操作的全过程,而实验考试的考生较多,监考老师难以同时观察多个考生的实验操作细节。为提高对实验操作判定的准确度,减少监考老师同时监考的考生数量,需要增大考场中的监考老师数量,使得确定实验的评分需要消耗大量的人力资源。
发明内容
本发明实施例的目的在于提供一种确定实验评分的方法、装置、电子设备及介质,以实现减少确定实验的评分所消耗的人力资源。具体技术方案如下:
第一方面,本发明实施例提供了一种确定实验评分的方法,包括:
从目标实验的操作录像中,获取各视频帧包括的指定对象的位置;
从所述目标实验的操作录像中,获取所述各视频帧包括的指定对象的状态;
从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧;其中,每个操作步骤对应的视频帧用于评判该操作步骤的分数;
根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分;
基于各操作步骤的评分,计算所述目标实验的评分结果。
可选的,所述目标实验为量筒读数实验;
所述目标实验所包括的操作步骤包括:第一操作步骤、第二操作步骤和第三操作步骤;其中,所述第一操作步骤为由胶头滴管向量筒中滴加液体的步骤,所述第二操作步骤为待评分人员读取量筒液面高度的步骤,所述第三操作步骤为量筒液面高度判定的步骤。
可选的,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:
针对所述第一操作步骤,从各个视频帧中确定第一视频帧,所述第一视频帧中的胶头滴管位于试管上方且量筒中的液面高度高于前指定数量的视频帧中至少一个视频帧的量筒液面高度;
将所述第一视频帧作为所述第一操作步骤对应的视频帧。
可选的,所述指定对象的位置包括胶头滴管的位置和量筒的位置,所述根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分,包括:
针对所述第一操作步骤,当胶头滴管与量筒的位置不存在重合的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当胶头滴管与量筒的位置存在重合的第一视频帧中,连续的第一视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可选的,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:
针对所述第二操作步骤,按照各视频帧对应的时间戳的先后顺序,从所述第一操作步骤所对应的视频帧开始,逐帧检测是否为第二视频帧,所述第二视频帧中的待评分人员观察量筒液面;
将所述第二视频帧作为所述第二操作步骤对应的视频帧。
可选的,所述指定对象的状态包括待评分人员是否平视,所述指定对象的位置包括量筒的液面位置以及量筒的位置,所述根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分,包括:
针对所述第二操作步骤,当所述待评分人员平视量筒的液面且量筒放置在桌面上的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当待评分人员未平视量筒液面和/或量筒未放置在桌面上的第二视频帧中,连续的第二视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可选的,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:
针对所述第三操作步骤,按照各视频帧对应的时间戳的先后顺序,从所述第二操作步骤所对应的视频帧开始,逐帧检测是否为第三视频帧,所述第三视频帧中的量筒液面高度与前指定数量的视频帧的量筒液面高度相同;
将所述第三视频帧作为所述第三操作步骤对应的视频帧。
可选的,所述指定对象的位置包括量筒的液面高度,所述根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分,包括:
针对所述第三操作步骤,当量筒的液面高度为预设高度的第三视频帧中,连续的第三视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当量筒的液面高度不为所述预设高度的第三视频帧中,连续的第三视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可选的,所述目标实验为酸碱中和实验;
所述目标实验所包括的操作步骤包括:第一操作步骤、第二操作步骤和第三操作步骤;其中,所述第一操作步骤为量筒向试管倾倒液体的步骤,所述第二操作步骤为胶头滴管向试管滴加液体的步骤,所述第三操作步骤为中和现象判定的步骤。
可选的,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:
针对所述第一操作步骤,从各个视频帧中确定第一视频帧,所述第一视频帧中的量筒的旋转角度小于前指定数量的视频帧中至少一个视频帧包括的量筒的旋转角度,所述旋转角度为量筒与水平面的夹角;
将所述第一视频帧作为所述第一操作步骤对应的视频帧。
可选的,所述指定对象的位置包括量筒的尖嘴位置和试管的试管口位置,所述根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分,包括:
针对所述第一操作步骤,当量筒的尖嘴贴合试管口的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当量筒的尖嘴未贴合试管口的第一视频帧中,连续的第一视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可选的,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:
针对所述第二操作步骤,按照各视频帧对应的时间戳的先后顺序,从所述第一操作步骤所对应的视频帧开始,逐帧检测是否为第二视频帧,所述第二视频帧中的胶头滴管位于试管上方且试管中的液面高度高于前指定数量的视频帧中至少一个视频帧的试管液面高度;
将所述第二视频帧作为所述第二操作步骤对应的视频帧。
可选的,所述指定对象的位置包括胶头滴管的位置和试管的位置,所述根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分,包括:
针对所述第二操作步骤,当胶头滴管与试管的位置不存在重合的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当胶头滴管与试管的位置存在重合的第二视频帧中,连续的第二视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可选的,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:
针对所述第三操作步骤,按照各视频帧对应的时间戳的先后顺序,从所述第二操作步骤所对应的视频帧开始,逐帧检测是否为第三视频帧,所述第三视频帧的试管中的液体颜色与前指定数量的视频帧中至少一个视频帧的试管中的液体颜色不同;
将所述第三视频帧作为所述第三操作步骤对应的视频帧。
可选的,所述指定对象的状态包括试管中的液体颜色,所述根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分,包括:
针对所述第三操作步骤,当连续的第三视频帧组成的视频片段中,试管中的液体颜色由无色变为红色,且再由红色变为无色时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当连续的第三视频帧组成的视频片段中,试管中的液体颜色未由无色变为红色,和/或未再由红色变为无色时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
第二方面,本发明实施例提供了一种确定实验评分的装置,包括:
获取模块,被配置为从目标实验的操作录像中,获取各视频帧包括的指定对象的位置;
所述获取模块,还被配置为从所述目标实验的操作录像中,获取所述各视频帧包括的指定对象的状态;
确定模块,被配置为从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧;其中,每个操作步骤对应的视频帧用于评判该操作步骤的分数;
所述确定模块,还被配置为根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分;
计算模块,被配置为基于各操作步骤的评分,计算所述目标实验的评分结果。
可选的,所述目标实验为量筒读数实验;
所述目标实验所包括的操作步骤包括:第一操作步骤、第二操作步骤和第三操作步骤;其中,所述第一操作步骤为由胶头滴管向量筒中滴加液体的步骤,所述第二操作步骤为待评分人员读取量筒液面高度的步骤,所述第三操作步骤为量筒液面高度判定的步骤。
可选的,所述确定模块,具体被配置为:
针对所述第一操作步骤,从各个视频帧中确定第一视频帧,所述第一视频帧中的胶头滴管位于试管上方且量筒中的液面高度高于前指定数量的视频帧中至少一个视频帧的量筒液面高度;
将所述第一视频帧作为所述第一操作步骤对应的视频帧。
可选的,所述指定对象的位置包括胶头滴管的位置和量筒的位置,所述确定模块,具体被配置为:
针对所述第一操作步骤,当胶头滴管与量筒的位置不存在重合的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当胶头滴管与量筒的位置存在重合的第一视频帧中,连续的第一视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可选的,所述确定模块,具体被配置为:
针对所述第二操作步骤,按照各视频帧对应的时间戳的先后顺序,从所述第一操作步骤所对应的视频帧开始,逐帧检测是否为第二视频帧,所述第二视频帧中的待评分人员观察量筒液面;
将所述第二视频帧作为所述第二操作步骤对应的视频帧。
可选的,所述指定对象的状态包括待评分人员是否平视,所述指定对象的位置包括量筒的液面位置以及量筒的位置,所述确定模块,具体被配置为:
针对所述第二操作步骤,当所述待评分人员平视量筒的液面且量筒放置在桌面上的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当待评分人员未平视量筒液面和/或量筒未放置在桌面上的第二视频帧中,连续的第二视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可选的,所述确定模块,具体被配置为:
针对所述第三操作步骤,按照各视频帧对应的时间戳的先后顺序,从所述第二操作步骤所对应的视频帧开始,逐帧检测是否为第三视频帧,所述第三视频帧中的量筒液面高度与前指定数量的视频帧的量筒液面高度相同;
将所述第三视频帧作为所述第三操作步骤对应的视频帧。
可选的,所述指定对象的位置包括量筒的液面高度,所述确定模块,具体被配置为:
针对所述第三操作步骤,当量筒的液面高度为预设高度的第三视频帧中,连续的第三视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当量筒的液面高度不为所述预设高度的第三视频帧中,连续的第三视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可选的,所述目标实验为酸碱中和实验;
所述目标实验所包括的操作步骤包括:第一操作步骤、第二操作步骤和第三操作步骤;其中,所述第一操作步骤为量筒向试管倾倒液体的步骤,所述第二操作步骤为胶头滴管向试管滴加液体的步骤,所述第三操作步骤为中和现象判定的步骤。
可选的,所述确定模块,具体被配置为:
针对所述第一操作步骤,从各个视频帧中确定第一视频帧,所述第一视频帧中的量筒的旋转角度小于前指定数量的视频帧中至少一个视频帧包括的量筒的旋转角度,所述旋转角度为量筒与水平面的夹角;
将所述第一视频帧作为所述第一操作步骤对应的视频帧。
可选的,所述指定对象的位置包括量筒的尖嘴位置和试管的试管口位置,所述确定模块,具体被配置为:
针对所述第一操作步骤,当量筒的尖嘴贴合试管口的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当量筒的尖嘴未贴合试管口的第一视频帧中,连续的第一视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可选的,所述确定模块,具体被配置为:
针对所述第二操作步骤,按照各视频帧对应的时间戳的先后顺序,从所述第一操作步骤所对应的视频帧开始,逐帧检测是否为第二视频帧,所述第二视频帧中的胶头滴管位于试管上方且试管中的液面高度高于前指定数量的视频帧中至少一个视频帧的试管液面高度;
将所述第二视频帧作为所述第二操作步骤对应的视频帧。
可选的,所述指定对象的位置包括胶头滴管的位置和试管的位置,所述确定模块,具体被配置为:
针对所述第二操作步骤,当胶头滴管与试管的位置不存在重合的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当胶头滴管与试管的位置存在重合的第二视频帧中,连续的第二视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
所述确定模块,具体被配置为:
针对所述第三操作步骤,按照各视频帧对应的时间戳的先后顺序,从所述第二操作步骤所对应的视频帧开始,逐帧检测是否为第三视频帧,所述第三视频帧的试管中的液体颜色与前指定数量的视频帧中至少一个视频帧的试管中的液体颜色不同;
将所述第三视频帧作为所述第三操作步骤对应的视频帧。
可选的,所述指定对象的状态包括试管中的液体颜色,所述确定模块,具体被配置为:
针对所述第三操作步骤,当连续的第三视频帧组成的视频片段中,试管中的液体颜色由无色变为红色,且再由红色变为无色时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当连续的第三视频帧组成的视频片段中,试管中的液体颜色未由无色变为红色,和/或未再由红色变为无色时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
第三方面,提供了一种电子设备,所述电子设备包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现上述任一所述的确定实验评分的方法步骤。
第四方面,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述任一所述的确定实验评分的方法步骤。
第五方面,本发明实施例还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一所述的确定实验评分的方法步骤。
本发明实施例至少包括如下有益效果:由于本发明实施例可以基于目标实验的操作录像,确定目标实验的各操作步骤的评分,进而确定目标实验的评分结果,期间不需要人工参与,减少了确定实验的评分所消耗的人力资源。
当然,实施本发明的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种确定实验评分的方法流程图;
图2为本发明实施例提供的另一种确定实验评分的方法流程图;
图3为本发明实施例提供的另一种确定实验评分的方法流程图;
图4为本发明实施例提供的另一种确定实验评分的方法流程图;
图5为本发明实施例提供的一种确定实验评分的装置结构示意图;
图6为本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明实施例提供的一种确定实验评分的方法可以应用于任意电子设备,例如,可以是平板电脑、笔记本电脑、台式电脑、手机等,在此不作具体限定,以下简称电子设备。
可以理解的,本发明实施例提供的是一种确定实验评分的方法,因此,在执行该方法的具体步骤前,电子设备需要首先获取到待评分人员操作目标实验的操作录像,也就是说,在待评分人员操作目标实验时,需要对该目标实验的操作过程进行录像。
需要说明的是,可以通过多种方式对待评分人员操作目标实验的过程进行录像,得到操作录像,对此,本发明实施例不做具体限定。
例如,在每个实验台上安装一台镜头对准该实验台的摄像机,当待评分人员在该实验台上操作目标实验时,该摄像头便可以对该人员操作目标实验的过程进行录像,得到操作录像,进而,该摄像机可以将该操作录像发送到与自身通信连接的电子设备中,也可以保存在本地的存储空间中,这都是合理的。
显然,电子设备也可以通过多种方式获取该操作录像,对此,本发明实施例不做具体限定。
例如,电子设备可以与实验室中的摄像头建立通信连接,这样,摄像机在拍摄到这些操作录像后,便可以将这些操作录像发送给电子设备,进而,电子设备将这些操作录像保存在自身的存储空间中。这样,在对某个待评分人员进行评分时,电子设备便可以直接调用该人员所对应的操作录像。
又例如,实验室中的摄像头将拍摄到的操作录像保存在本地的存储空间中,且这些摄像头与电子设备建立通信连接。这样,在对某个待评分人员进行评分时,电子设备可以向该设备发送录像获取请求,进而,接收该设备响应该录像获取请求发送的操作录像。其中,上述录像获取请求中,可以包括待评分人员的标识、目标实验的标识等信息,这样,保存操作录像的设备便可以基于这些信息从所保存的操作录像中确定电子设备所需要的操作录像,并将之发送给电子设备。
又例如,实验室中的摄像头将拍摄到的操作录像保存在自身的内存卡中,这样,在对某个待评分人员进行评分时,可以取出该摄像头的内存卡安装到电子设备中,这样,电子设备便可以通过读取该内存卡来获取该人员的操作录像。
基于上述说明,电子设备在获取待评分人员操作目标实验的操作录像后,便可以基于该操作录像对该待评分人员的执行实验进行评分。
下面对本发明实施例提供在一种确定实验评分的方法进行介绍。
参见图1,本发明实施例提供的确定实验评分的方法可以应用于电子设备,该方法包括如下步骤:
步骤101,从目标实验的操作录像中,获取各视频帧包括的指定对象的位置。
一种实施方式中,可以将各视频帧输入位置检测模型,获取位置检测模型输出的每个视频帧包括的指定对象的位置。
其中,位置检测模型为基于第一预设训练集对深度学习模型进行训练后得到的模型,第一训练集中包括从样本实验的操作录像中采集的各样本图像以及每个样本图像包括的指定对象的实际位置。
可选的,指定对象的位置可以包括指定对象的中心点位置、指定对象的指定数量个边缘点位置以及指定对象的指定点的位置。
例如:可以获取每个视频帧图像包括的量筒的中心点位置、5个边缘点位置以及量筒中液面位置。
示例性的,目标实验可以为物理实验或者化学实验等。
步骤102,从目标实验的操作录像中,获取各视频帧包括的指定对象的状态。
可选的,指定对象的状态可以包括指定对象的模糊位置、指定对象与水平面的角度以及指定对象所容纳的液体的颜色。
例如:模糊位置可以为指定对象的外接矩形框位置。
在本发明实施例中,步骤101和步骤102可以并行执行,也可以先执行步骤101再执行步骤102,还可以先执行步骤102再执行步骤101,本发明实施例对步骤101和步骤102的执行顺序不作具体限定。
步骤103,从各视频帧中,确定目标实验所包括的每个操作步骤对应的视频帧。其中,每个操作步骤对应的视频帧用于评判该操作步骤的分数。
一种实施方式中,可以根据各视频帧包括的指定对象,确定每个操作步骤对应的视频帧。
例如:目标实验包括两个操作步骤,第一个操作步骤为利用胶头滴管吸取液体,第二个操作步骤为利用胶头滴管向试管或量筒中滴加液体。若视频帧包括胶头滴管和滴瓶,则该视频帧对应的操作步骤为第一个操作步骤;若视频帧包括胶头滴管和试管,则该视频帧对应的操作步骤为第二个操作步骤。
步骤104,根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分。
一种实施方式中,可以根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,判断该视频帧中的指定对象是否满足该操作步骤对应的操作条件。并基于判断结果,确定该操作步骤的评分。其中,操作条件可以包括预设状态条件和/或预设位置条件。
可以理解的,不同的操作步骤可以对应不同的预设状态条件,不同的操作步骤还可以对应不同的预设位置条件。
例如,当操作步骤为量筒向试管中倾倒液体时,预设状态条件可以为量筒的尖嘴贴合试管口。
又例如,当操作步骤为胶头滴管向试管滴加液体时,预设位置条件可以为胶头滴管的位置与试管的位置不存在重合。
可以理解的,由于不同的操作步骤对应的实验操作规范不同,所以存在一些实验操作既需要满足预设位置条件,也需要满足预设状态条件。例如:由胶头滴管向量筒中滴加液体的操作步骤需要满足:胶头滴管不能伸入量筒内,且胶头滴管保持竖直状态。
还存在一些实验操作需要满足预设位置条件。例如:胶头滴管吸取液体的操作步骤需要满足:吸取的液体高度不能超过胶头滴管的玻璃管总高度的1/3。
还存在一些实验操作需要满足预设状态条件。例如:量筒读数的操作步骤需要满足:待评分人员平视量筒液面凹陷处。
步骤105,基于各操作步骤的评分,计算目标实验的评分结果。
一种实施方式中,可以累加将各操作步骤的评分,并将累加结果作为目标实验的评分结果。
本发明实施例至少包括如下有益效果:由于本发明实施例可以基于目标实验的操作录像,确定目标实验的各操作步骤的评分,进而确定目标实验的评分结果,期间不需要人工参与,减少了确定实验的评分所消耗的人力资源。
可以理解的,在待评分人员操作目标实验的操作录像中,可以存在多个视频帧所反映的内容并不是目标实验的操作步骤所对应的内容。例如,在操作录像的前几分钟内所拍摄的内容是学生正在阅读实验注意事项。为避免这些视频帧对目标实验的评分结果的影响,可以预先将这些视频帧删除。
可选的,在上述步骤101以及步骤102之前,还可以对各视频帧进行图像预处理,包括:若视频帧的尺寸大于第一预设尺寸,则缩小该视频帧的尺寸。若视频帧包括的指定对象的尺寸小于第二预设尺寸,则放大该视频帧包括的指定对象的尺寸。
例如,视频帧的像素数量可以表示视频帧的尺寸,当视频帧包括的像素数量超过预设数量时,可以减少视频帧包括的像素数量,达到缩小图像的效果。
例如,当视频帧包括的指定对象的尺寸小于第二预设尺寸时,可以提高视频帧图像的分辨率,达到放大视频帧包括的指定对象的效果。
可见,本发明实施例还包括以下有益效果:由于缩小后的视频帧包括的像素点数量较少,所以可以提高对视频帧包括的指定对象的位置进行检测的速度,以及可以提高对视频帧包括的指定对象的状态进行检测的速度。由于放大后的视频帧中指定对象的尺寸也随之放大,更有利于准确地识别指定对象的位置以及状态。
可选的,图像预处理还可以包括对图像进行裁剪或者对图像进行抠图操作。例如:当指定对象为量筒时,可以从包括量筒的视频帧中将量筒图像从视频帧中抠出。
裁剪以及抠图后的视频帧与原视频帧相比,尺寸减小,可以减少对视频帧进行识别的计算量,提高实验操作评分的效率。
在一种具体的实现方式中,上述目标实验可以是量筒读数实验。
对于量筒读数实验而言,指定对象可以包括:待评分人员、胶头滴管和量筒。该实验的顺序为:待评分人员利用胶头滴管向量筒中滴加液体,并观察量筒的液面高度,当观察到量筒中的液面高度为预设高度时,停止向量筒中滴加液体,实验操作完成。
可见,该实验包括三个操作步骤,分别为:第一操作步骤、第二操作步骤和第三操作步骤。其中,第一操作步骤为由胶头滴管向量筒中滴加液体的步骤,第二操作步骤为待评分人员读取量筒液面高度的步骤,第三操作步骤为量筒液面高度判定的步骤。
可选的,在这种情况下,参见图2,确定各操作步骤的对应的视频帧的方式包括:
步骤201,针对第一操作步骤,从各个视频帧中确定第一视频帧。
其中,第一视频帧中的胶头滴管位于试管上方且量筒中的液面高度高于前指定数量的视频帧中至少一个视频帧的量筒液面高度。
可以理解的,当第一视频帧包括的量筒中的液面高度高于前指定数量的视频帧中至少一个视频帧的量筒液面高度,说明量筒中的液体增加,而胶头滴管位于量筒上方,说明胶头滴管向量筒中滴加液体。
由于待评分人员在调整量筒液面高度时,间断地向量筒中滴加液体,避免一次向量筒中滴加的液体过多,使得量筒液面高度高于预设高度,所以量筒液面高度在调整完毕之前,间隔一段时间升高一次,在间隔的时间段内,量筒液面高度不变。为了减少间隔的时间段内量筒液面高度对确定第一视频帧的影响,当量筒中的液面高度高于前指定数量的视频帧中至少一个视频帧的量筒液面高度时,可以认为待评分人员在执行第一操作步骤。当量筒中的液面高度等于前指定数量的视频帧的量筒液面高度时,可以认为待评分人员对量筒液面高度调整完毕,即对第一操作步骤执行完毕。
步骤202,将第一视频帧作为第一操作步骤对应的视频帧。
可选的,指定对象的位置包括胶头滴管的位置和量筒的位置,在确定第一操作步骤对应的视频帧之后,确定第一操作步骤的评分的方式,可以包括:
当胶头滴管与量筒的位置不存在重合的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分。
当胶头滴管与量筒的位置存在重合的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可以理解的,当胶头滴管与量筒的位置存在重合的第一视频帧中,连续的第一视频帧的数量未达到预设数量时,说明待评分人员执行第一操作步骤时存在误操作且误操作持续时间较短,而并非该待评分人员不了解该实验的操作规范,所以可以不将该操作步骤的评分为该操作步骤的错误操作所对应的评分。
当胶头滴管与量筒的位置存在重合的第一视频帧中,连续的第一视频帧的数量达到预设数量时,说明待评分人员持续地执行错误操作,该待评分人员不了解该实验的操作规范,所以可以确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
步骤203,针对第二操作步骤,按照各视频帧对应的时间戳的先后顺序,从第一操作步骤所对应的视频帧开始,逐帧检测是否为第二视频帧。
其中,第二视频帧中的待评分人员观察量筒液面。
可以理解的,由于待评分人员在执行第一操作步骤之前,量筒中没有液体,待评分人员也就不会观察量筒中的液面高度,所以可以从第一操作步骤对应的视频帧开始,逐帧检测是否为第二视频帧。
步骤204,将第二视频帧作为第二操作步骤对应的视频帧。
可选的,指定对象的状态包括待评分人员是否平视,指定对象的位置包括量筒的液面位置以及量筒的位置,在确定第二操作步骤对应的视频帧之后,确定第二操作步骤的评分的方式,可以包括:
当待评分人员平视量筒的液面且量筒放置在桌面上的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分。
当待评分人员未平视量筒液面和/或量筒未放置在桌面上的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可以理解的,当待评分人员未平视量筒液面和/或量筒未放置在桌面上的第二视频帧中,连续的第二视频帧的数量未达到预设数量时,说明待评分人员执行第二操作步骤时存在误操作且误操作持续时间较短,而并非该待评分人员不了解该实验的操作规范,所以可以不将该操作步骤的评分为该操作步骤的错误操作所对应的评分。
当待评分人员未平视量筒液面和/或量筒未放置在桌面上的第二视频帧中,连续的第二视频帧的数量达到预设数量时,说明待评分人员持续地执行错误操作,该待评分人员不了解该实验的操作规范,所以可以确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
步骤205,针对第三操作步骤,按照各视频帧对应的时间戳的先后顺序,从第二操作步骤所对应的视频帧开始,逐帧检测是否为第三视频帧。
其中,第三视频帧中的量筒液面高度与前指定数量的视频帧的量筒液面高度相同。
可以理解的,在执行第二操作步骤之前,待评分人员对量筒液面高度未调整完毕,此时判定量筒液面高度无意义,所以可以从第二操作步骤所对应的视频帧开始,逐帧检测是否为第三视频帧。
当量筒液面高度与前指定数量的视频帧的量筒液面高度相同,说明量筒液面高度持续不变,此时待评分人员对量筒液面高度调整完毕,此时可以判断待评分人员调整的量筒液面高度是否满足操作规范。
步骤206,将第三视频帧作为第三操作步骤对应的视频帧。
可选的,指定对象的位置包括量筒的液面高度,在确定第三操作步骤对应的视频帧之后,确定第三操作步骤的评分的方式,包括:
当量筒的液面高度为预设高度的第三视频帧中,连续的第三视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分。
当量筒中的液面高度不为预设高度的第三视频帧中,连续的第三视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可以理解的,当量筒的液面高度持续保持非预设高度时,说明待评分人员调整的液面高度不正确。
在另一种具体的实现方式中,上述目标实验可以为酸碱中和实验。
对于酸碱中和实验而言,指定对象可以包括:量筒、试管和胶头滴管。该实验的顺序为:待评分人员利用量筒向试管中倾倒碱性液体(如氢氧化钠),再利用胶头滴管向试管中逐渐滴加酚酞,轻晃试管,试管中液体颜色由无色变为红色,再利用胶头滴管向试管中逐渐滴加酸性液体(如盐酸),轻晃试管,试管中液体颜色由红色变为无色。
可见,该实验包括三个操作步骤,分别为:第一操作步骤、第二操作步骤和第三操作步骤。其中,第一操作步骤为量筒向试管倾倒液体的步骤,第二操作步骤为胶头滴管向试管滴加液体的步骤,第三操作步骤为中和现象判定的步骤。
可选的,在这种情况下,参见图3,确定各操作步骤的对应的视频帧的方式包括:
步骤301,针对第一操作步骤,从各个视频帧中确定第一视频帧。
其中,第一视频帧中的量筒的旋转角度小于前指定数量的视频帧中至少一个视频帧包括的量筒的旋转角度。其中,旋转角度为量筒与水平面的夹角。
可以理解的,当量筒的旋转角度小于前指定数量的视频帧中至少一个视频帧包括的量筒的旋转角度,说明量筒与水平面的夹角减小,量筒在倾倒液体。
由于待评分人员在利用量筒倾倒液体时,为减少倾倒时液体飞溅以及倒入试管的液体过多,可能存在间隔一段时间调整一次量筒的旋转角度,在间隔的时间段内,量筒的旋转角度不变。为了减少间隔的时间段内量筒的旋转角度对确定第一视频帧的影响,当量筒的旋转角度小于前指定数量的视频帧中至少一个视频帧包括的量筒的旋转角度,可以认为待评分人员在执行第一操作步骤。当量筒的旋转角度不小于前指定数量的视频帧中至少一个视频帧包括的量筒的旋转角度,可以认为待评分人员利用量筒向试管中添加液体的步骤执行完毕,即对第一操作步骤执行完毕。
步骤302,将第一视频帧作为第一操作步骤对应的视频帧。
可选的,指定对象的位置包括量筒的尖嘴位置和试管的试管口位置,在确定第一操作步骤对应的视频帧之后,确定第一操作步骤的评分的方式,可以包括:
当量筒的尖嘴贴合试管口的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分。
当量筒的尖嘴未贴合试管口的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可以理解的,当量筒的尖嘴未贴合试管口的第一视频帧中,连续的第一视频帧的数量未达到预设数量时,说明待评分人员执行第一操作步骤时存在误操作,而并非该待评分人员不了解该实验的操作规范,所以可以不将该操作步骤的评分为该操作步骤的错误操作所对应的评分。
当量筒的尖嘴未贴合试管口的第一视频帧中,连续的第一视频帧的数量达到预设数量时,说明待评分人员持续地执行错误操作,该待评分人员不了解该实验的操作规范,所以可以确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
步骤303,针对第二操作步骤,按照各视频帧对应的时间戳的先后顺序,从第一操作步骤所对应的视频帧开始,逐帧检测是否为第二视频帧。
其中,第二视频帧中的胶头滴管位于试管上方且试管中的液面高度高于前指定数量的视频帧中至少一个视频帧的试管液面高度。
可以理解的,试管中的液面高度高于前指定数量的视频帧中至少一个视频帧的试管液面高度,说明试管中液体增加,而胶头滴管位于试管上方,说明胶头滴管向试管中滴加液体。
步骤304,将第二视频帧作为第二操作步骤对应的视频帧。
可选的,指定对象的位置包括胶头滴管的位置和试管的位置,在确定第二操作步骤对应的视频帧之后,确定第二操作步骤的评分的方式,可以包括:
当胶头滴管与试管的位置不存在重合的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分。
当胶头滴管与试管的位置存在重合的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可以理解的,当胶头滴管与试管的位置存在重合的第二视频帧中,连续的第二视频帧的数量未达到预设数量时,说明待评分人员执行第二操作步骤时存在误操作且误操作持续时间较短,而并非该待评分人员不了解该实验的操作规范,所以可以不将该操作步骤的评分为该操作步骤的错误操作所对应的评分。
当胶头滴管与试管的位置存在重合的第二视频帧中,连续的第二视频帧的数量达到预设数量时,说明待评分人员持续地执行错误操作,该待评分人员不了解该实验的操作规范,所以可以确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
步骤305,针对第三操作步骤,按照各视频帧对应的时间戳的先后顺序,从第二操作步骤所对应的视频帧开始,逐帧检测是否为第三视频帧。
其中,第三视频帧的试管中的液体颜色与前指定数量的视频帧中至少一个视频帧的试管中的液体颜色不同。
可以理解的,在胶头滴管未向试管滴加液体之前,试管中液体颜色不会变化,此时的视频帧不会是第三视频帧,所以可以从第二操作步骤所对应的视频帧开始,逐帧检测是否为第三视频帧。
步骤306,将第三视频帧作为第三操作步骤对应的视频帧。
可选的,指定对象的状态包括试管中的液体颜色,在确定第三操作步骤对应的视频帧之后,确定第三操作步骤的评分的方式,可以包括:
当连续的第三视频帧组成的视频片段中,试管中的液体颜色由无色变为红色,且再由红色变为无色时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分。
当连续的第三视频帧组成的视频片段中,试管中的液体颜色未由无色变为红色,和/或未再由红色变为无色时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可以理解的,当连续的第三视频帧组成的视频片段中,试管中的液体颜色未由无色变为红色,说明量筒向试管倾倒的液体呈酸性,所以该操作步骤执行错误。
当连续的第三视频帧组成的视频片段中试管中的液体颜色未再由红色变为无色时,说明胶头滴管未向试管中滴加酸性液体,所以该操作步骤执行错误。
可见,本发明实施例还包括以下有益效果:本发明实施例可针对不同的实验,确定实验所包括的操作步骤对应的视频帧,使得本发明实施例提供的确定实验评分的方法适用范围广。
可选的,各操作步骤的正确操作所对应的得分可以不同,各操作步骤的错误操作所对应的得分也可以不同。每个操作步骤所对应的得分可以根据该操作步骤的重要性设置。
可选的,上述步骤101中的位置检测模型可以通过如下步骤训练获得:
步骤一、将第一预设训练集中的样本图像以及样本图像中指定对象的标准位置输入深度学习模型。
可选的,样本图像中指定对象的标准位置可以是预先标记的。
例如,深度学习模型可以为深度学习算法(YOLOV2或者YOLOV3)。深度学习模型的框架可以为卷积神经网络(Convolutional Architecture for Fast Feature Embedding,Caffe)。
可选的,可以从第一预设训练集中随机选择样本图像;还可以按照样本图像在第一预设训练集中的排列顺序,选择样本图像。
步骤二、获取深度学习模型输出的指定物品的位置。
可选的,指定物品的位置可以包括指定物品的中心点位置、指定物品的预设数量个边缘点位置和指定点的位置。
一种实施方式中,深度学习模型可以对于输入图像的每个像素点,根据以该像素点为中心的每个指定范围内的图像特征,计算该指定范围包括指定对象的置信度,并根据该置信度调整该指定范围的尺寸。然后将置信度最大的指定范围的位置作为指定对象的位置。
步骤三、根据输入的样本图像的指定对象的标准位置、深度学习模型输出的指定对象的位置、以及损失函数,计算损失值。
可选的,损失函数可以为交叉熵损失函数(Cross-entropy loss function)。
步骤四、若深度学习模型未收敛,则调整深度学习模型中的模型参数,并进行下一次训练。若深度学习模型收敛,则将深度学习模型作为位置检测模型。
其中,模型参数可以包括深度学习模型的各网络层对应的权重。
可选的,若本次计算的损失值与上一次计算的损失值的差值小于预设差值,则深度学习模型收敛。若本次计算的损失值与上一次计算的损失值的差值不小于预设差值,则深度学习模型未收敛。
一种实施方式中,可以根据损失值计算模型参数的梯度,然后沿梯度下降方向,按照预设学习率调整模型参数。然后继续利用第一预设训练集包括的样本图像以及样本图像的标准位置训练深度学习模型,直至深度学习模型收敛,将当前的深度学习模型确定为位置检测模型。
可见,本发明实施例还包括以下有益效果:本发明实施例可以利用位置检测模型对视频帧包括的指定对象的位置进行准确识别,与人工凭借经验识别指定对象的位置的方式相比,本发明实施例识别的指定对象的位置更准确。
可选的,上述步骤102中的状态检测模型可以通过如下步骤训练获得:
步骤一、将第二预设训练集中的样本图像以及样本图像中指定对象的标准状态输入深度学习模型。
可选的,样本图像中指定对象的标准状态可以是预先标记的。
例如,深度学习模型可以为深度学习算法(YOLOV2或者YOLOV3)。深度学习模型的框架可以为卷积神经网络(Convolutional Architecture for Fast Feature Embedding,Caffe)。
可选的,可以从第二预设训练集中随机选择样本图像;还可以按照样本图像在第二预设训练集中的排列顺序,选择样本图像。
步骤二、获取深度学习模型输出的视频帧图像包括的指定物品对应的状态。
一种实施方式中,深度学习模型可以对于输入图像的每个像素点,根据以该像素点为中心的每个指定范围内的图像特征,计算该指定范围包括指定对象的置信度,并根据该置信度调整该指定范围的尺寸。然后将置信度最大的指定范围的状态作为指定对象的状态。
步骤三、根据输入的样本图像的指定对象的标准状态、深度学习模型输出的指定对象的状态、以及损失函数,计算损失值。
可选的,损失函数可以为交叉熵损失函数(Cross-entropy loss function)。
步骤四、若深度学习模型未收敛,则调整深度学习模型中的模型参数,并进行下一次训练。若深度学习模型收敛,则将深度学习模型作为位置检测模型。
其中,模型参数可以包括深度学习模型的各网络层对应的权重。
可选的,若本次计算的损失值与上一次计算的损失值的差值小于预设差值,则深度学习模型收敛。若本次计算的损失值与上一次计算的损失值的差值不小于预设差值,则深度学习模型未收敛。
一种实施方式中,可以根据损失值计算模型参数的梯度,然后沿梯度下降方向,按照预设学习率调整模型参数。然后继续利用第二预设训练集包括的样本图像以及样本图像的标准状态训练深度学习模型,直至深度学习模型收敛,将当前的深度学习模型确定为状态检测模型。
可见,本发明实施例还包括以下有益效果:本发明实施例可以利用状态检测模型对视频帧包括的指定对象的状态进行准确识别,与人工凭借经验识别指定对象的状态的方式相比,本发明实施例识别的指定对象的状态更准确。
结合图1,以下对本发明实施例提供的对实验的评分方法进行详细描述,如图4所示,该方法包括如下步骤:
步骤401,从目标实验的操作录像中抽取多个视频帧。
步骤402,对抽取的多个视频帧进行图像预处理。
步骤403,将预处理后的视频帧输入位置检测模型,获取位置检测模型输出的视频帧包括的指定对象的位置。
步骤404,将预处理后的视频帧输入状态检测模型,获取状态检测模型输出的视频帧包括的指定对象的状态。
步骤405,从各视频帧中,确定目标实验所包括的每个操作步骤对应的视频帧。
步骤406,根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分。
步骤407,基于各操作步骤的评分,计算目标实验的评分结果。
可见,本发明实施例中可以对实验进行智能化评分,自动获得实验的分数,减少了获得实验评分所消耗的人力成本,对教学工作有较大的辅助作用。
对应于上述方法实施例,参见图5,本发明实施例还提供了一种确定实验评分的装置,包括:获取模块501、确定模块502和计算模块503。
获取模块501,被配置为从目标实验的操作录像中,获取各视频帧包括的指定对象的位置;
获取模块501,还被配置为从目标实验的操作录像中,获取各视频帧包括的指定对象的状态;
确定模块502,被配置为从各视频帧中,确定目标实验所包括的每个操作步骤对应的视频帧;其中,每个操作步骤对应的视频帧用于评判该操作步骤的分数;
确定模块502,还被配置为根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分;
计算模块503,被配置为基于各操作步骤的评分,计算目标实验的评分结果。
可选的,目标实验可以为量筒读数实验;
目标实验所包括的操作步骤包括:第一操作步骤、第二操作步骤和第三操作步骤;其中,第一操作步骤为由胶头滴管向量筒中滴加液体的步骤,第二操作步骤为待评分人员读取量筒液面高度的步骤,第三操作步骤为量筒液面高度判定的步骤。
可选的,确定模块502,可以具体被配置为:
针对第一操作步骤,从各个视频帧中确定第一视频帧,第一视频帧中的胶头滴管位于试管上方且量筒中的液面高度高于前指定数量的视频帧中至少一个视频帧的量筒液面高度;
将第一视频帧作为第一操作步骤对应的视频帧。
可选的,指定对象的位置包括胶头滴管的位置和量筒的位置,确定模块502,可以具体被配置为:
针对第一操作步骤,当胶头滴管与量筒的位置不存在重合的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当胶头滴管与量筒的位置存在重合的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可选的,确定模块502,可以具体被配置为:
针对第二操作步骤,按照各视频帧对应的时间戳的先后顺序,从第一操作步骤所对应的视频帧开始,逐帧检测是否为第二视频帧,第二视频帧中的待评分人员观察量筒液面;
将第二视频帧作为第二操作步骤对应的视频帧。
可选的,指定对象的状态包括待评分人员是否平视,指定对象的位置包括量筒的液面位置以及量筒的位置,确定模块502,可以具体被配置为:
针对第二操作步骤,当待评分人员平视量筒的液面且量筒放置在桌面上的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当待评分人员未平视量筒液面和/或量筒未放置在桌面上的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可选的,确定模块502,可以具体被配置为:
针对第三操作步骤,按照各视频帧对应的时间戳的先后顺序,从第二操作步骤所对应的视频帧开始,逐帧检测是否为第三视频帧,第三视频帧中的量筒液面高度与前指定数量的视频帧的量筒液面高度相同;
将第三视频帧作为第三操作步骤对应的视频帧。
可选的,指定对象的位置包括量筒的液面高度,确定模块502,可以具体被配置为:
针对第三操作步骤,当量筒的液面高度为预设高度的第三视频帧中,连续的第三视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当量筒的液面高度不为预设高度的第三视频帧中,连续的第三视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可选的,目标实验可以为酸碱中和实验;
目标实验所包括的操作步骤包括:第一操作步骤、第二操作步骤和第三操作步骤;其中,第一操作步骤为量筒向试管倾倒液体的步骤,第二操作步骤为胶头滴管向试管滴加液体的步骤,第三操作步骤为中和现象判定的步骤。
可选的,确定模块502,可以具体被配置为:
针对第一操作步骤,从各个视频帧中确定第一视频帧,第一视频帧中的量筒的旋转角度小于前指定数量的视频帧中至少一个视频帧包括的量筒的旋转角度,旋转角度为量筒与水平面的夹角;
将第一视频帧作为第一操作步骤对应的视频帧。
可选的,指定对象的位置包括量筒的尖嘴位置和试管的试管口位置,确定模块502,可以具体被配置为:
针对第一操作步骤,当量筒的尖嘴贴合试管口的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当量筒的尖嘴未贴合试管口的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
可选的,确定模块502,可以具体被配置为:
针对第二操作步骤,按照各视频帧对应的时间戳的先后顺序,从第一操作步骤所对应的视频帧开始,逐帧检测是否为第二视频帧,第二视频帧中的胶头滴管位于试管上方且试管中的液面高度高于前指定数量的视频帧中至少一个视频帧的试管液面高度;
将第二视频帧作为第二操作步骤对应的视频帧。
可选的,指定对象的位置包括胶头滴管的位置和试管的位置,确定模块502,可以具体被配置为:
针对第二操作步骤,当胶头滴管与试管的位置不存在重合的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当胶头滴管与试管的位置存在重合的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
确定模块502,可以具体被配置为:
针对第三操作步骤,按照各视频帧对应的时间戳的先后顺序,从第二操作步骤所对应的视频帧开始,逐帧检测是否为第三视频帧,第三视频帧的试管中的液体颜色与前指定数量的视频帧中至少一个视频帧的试管中的液体颜色不同;
将第三视频帧作为第三操作步骤对应的视频帧。
可选的,指定对象的状态包括试管中的液体颜色,确定模块502,可以具体被配置为:
针对第三操作步骤,当连续的第三视频帧组成的视频片段中,试管中的液体颜色由无色变为红色,且再由红色变为无色时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当连续的第三视频帧组成的视频片段中,试管中的液体颜色未由无色变为红色,和/或未再由红色变为无色时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
本发明实施例还提供了一种电子设备,如图6所示,包括处理器601、通信接口602、存储器603和通信总线604,其中,处理器601,通信接口602,存储器603通过通信总线604完成相互间的通信,
存储器603,用于存放计算机程序;
处理器601,用于执行存储器603上所存放的程序时,实现上述方法实施例中由电子设备执行的步骤。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述任一确定实验评分的方法的步骤。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一确定实验评分的方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。
Claims (18)
1.一种确定实验评分的方法,其特征在于,所述方法包括:
从目标实验的操作录像中,获取各视频帧包括的指定对象的位置;其中,所述目标实验为量筒读数实验;
从所述目标实验的操作录像中,获取所述各视频帧包括的指定对象的状态;
从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧;其中,每个操作步骤对应的视频帧用于评判该操作步骤的分数;所述每个操作步骤对应的视频帧的确定方式为基于各视频帧包括的指定对象进行确认的方式;其中,所述目标实验的第一操作步骤为由胶头滴管向量筒中滴加液体的步骤,相应的,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:针对所述第一操作步骤,从各个视频帧中确定第一视频帧,所述第一视频帧中的胶头滴管位于试管上方且量筒中的液面高度高于前指定数量的视频帧中至少一个视频帧的量筒液面高度;将所述第一视频帧作为所述第一操作步骤对应的视频帧;
根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分;
基于各操作步骤的评分,计算所述目标实验的评分结果。
2.根据权利要求1所述的方法,其特征在于,所述目标实验所包括的操作步骤还包括:第二操作步骤和第三操作步骤;其中,所述第二操作步骤为待评分人员读取量筒液面高度的步骤,所述第三操作步骤为量筒液面高度判定的步骤。
3.根据权利要求1所述的方法,其特征在于,所述指定对象的位置包括胶头滴管的位置和量筒的位置,所述根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分,包括:
针对所述第一操作步骤,当胶头滴管与量筒的位置不存在重合的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当胶头滴管与量筒的位置存在重合的第一视频帧中,连续的第一视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
4.根据权利要求2所述的方法,其特征在于,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:
针对所述第二操作步骤,按照各视频帧对应的时间戳的先后顺序,从所述第一操作步骤所对应的视频帧开始,逐帧检测是否为第二视频帧,所述第二视频帧中的待评分人员观察量筒液面;
将所述第二视频帧作为所述第二操作步骤对应的视频帧。
5.根据权利要求4所述的方法,其特征在于,所述指定对象的状态包括待评分人员是否平视,所述指定对象的位置包括量筒的液面位置以及量筒的位置,所述根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分,包括:
针对所述第二操作步骤,当所述待评分人员平视量筒的液面且量筒放置在桌面上的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当待评分人员未平视量筒液面和/或量筒未放置在桌面上的第二视频帧中,连续的第二视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
6.根据权利要求2所述的方法,其特征在于,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:
针对所述第三操作步骤,按照各视频帧对应的时间戳的先后顺序,从所述第二操作步骤所对应的视频帧开始,逐帧检测是否为第三视频帧,所述第三视频帧中的量筒液面高度与前指定数量的视频帧的量筒液面高度相同;
将所述第三视频帧作为所述第三操作步骤对应的视频帧。
7.根据权利要求6所述的方法,其特征在于,所述指定对象的位置包括量筒的液面高度,所述根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分,包括:
针对所述第三操作步骤,当量筒的液面高度为预设高度的第三视频帧中,连续的第三视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当量筒的液面高度不为所述预设高度的第三视频帧中,连续的第三视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
8.一种确定实验评分的方法,其特征在于,所述方法包括:
从目标实验的操作录像中,获取各视频帧包括的指定对象的位置;其中,所述目标实验为酸碱中和实验;
从所述目标实验的操作录像中,获取所述各视频帧包括的指定对象的状态;
从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧;其中,每个操作步骤对应的视频帧用于评判该操作步骤的分数;所述每个操作步骤对应的视频帧的确定方式为基于各视频帧包括的指定对象进行确认的方式;其中,所述目标实验的第一操作步骤为量筒向试管倾倒液体的步骤,相应的,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:针对所述第一操作步骤,从各个视频帧中确定第一视频帧,所述第一视频帧中的量筒的旋转角度小于前指定数量的视频帧中至少一个视频帧包括的量筒的旋转角度,所述旋转角度为量筒与水平面的夹角;将所述第一视频帧作为所述第一操作步骤对应的视频帧;
根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分;
基于各操作步骤的评分,计算所述目标实验的评分结果。
9.根据权利要求8所述的方法,其特征在于,所述目标实验所包括的操作步骤还包括:第二操作步骤和第三操作步骤;其中,所述第二操作步骤为胶头滴管向试管滴加液体的步骤,所述第三操作步骤为中和现象判定的步骤。
10.根据权利要求8所述的方法,其特征在于,所述指定对象的位置包括量筒的尖嘴位置和试管的试管口位置,所述根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分,包括:
针对所述第一操作步骤,当量筒的尖嘴贴合试管口的第一视频帧中,连续的第一视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当量筒的尖嘴未贴合试管口的第一视频帧中,连续的第一视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
11.根据权利要求9所述的方法,其特征在于,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:
针对所述第二操作步骤,按照各视频帧对应的时间戳的先后顺序,从所述第一操作步骤所对应的视频帧开始,逐帧检测是否为第二视频帧,所述第二视频帧中的胶头滴管位于试管上方且试管中的液面高度高于前指定数量的视频帧中至少一个视频帧的试管液面高度;
将所述第二视频帧作为所述第二操作步骤对应的视频帧。
12.根据权利要求11所述的方法,其特征在于,所述指定对象的位置包括胶头滴管的位置和试管的位置,所述根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分,包括:
针对所述第二操作步骤,当胶头滴管与试管的位置不存在重合的第二视频帧中,连续的第二视频帧的数量达到预设数量时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当胶头滴管与试管的位置存在重合的第二视频帧中,连续的第二视频帧的数量达到所述预设数量时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
13.根据权利要求9所述的方法,其特征在于,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:
针对所述第三操作步骤,按照各视频帧对应的时间戳的先后顺序,从所述第二操作步骤所对应的视频帧开始,逐帧检测是否为第三视频帧,所述第三视频帧的试管中的液体颜色与前指定数量的视频帧中至少一个视频帧的试管中的液体颜色不同;
将所述第三视频帧作为所述第三操作步骤对应的视频帧。
14.根据权利要求13所述的方法,其特征在于,所述指定对象的状态包括试管中的液体颜色,所述根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分,包括:
针对所述第三操作步骤,当连续的第三视频帧组成的视频片段中,试管中的液体颜色由无色变为红色,且再由红色变为无色时,确定该操作步骤的评分为该操作步骤的正确操作所对应的评分;
当连续的第三视频帧组成的视频片段中,试管中的液体颜色未由无色变为红色,和/或未再由红色变为无色时,确定该操作步骤的评分为该操作步骤的错误操作所对应的评分。
15.一种确定实验评分的装置,其特征在于,包括:
获取模块,被配置为从目标实验的操作录像中,获取各视频帧包括的指定对象的位置;其中,所述目标实验为量筒读数实验;
所述获取模块,还被配置为从所述目标实验的操作录像中,获取所述各视频帧包括的指定对象的状态;
确定模块,被配置为从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧;其中,每个操作步骤对应的视频帧用于评判该操作步骤的分数;所述每个操作步骤对应的视频帧的确定方式为基于各视频帧包括的指定对象进行确认的方式;其中,所述目标实验的第一操作步骤为由胶头滴管向量筒中滴加液体的步骤,相应的,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:针对所述第一操作步骤,从各个视频帧中确定第一视频帧,所述第一视频帧中的胶头滴管位于试管上方且量筒中的液面高度高于前指定数量的视频帧中至少一个视频帧的量筒液面高度;将所述第一视频帧作为所述第一操作步骤对应的视频帧;所述确定模块,还被配置为根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分;
计算模块,被配置为基于各操作步骤的评分,计算所述目标实验的评分结果。
16.一种确定实验评分的装置,其特征在于,包括:
获取模块,被配置为从目标实验的操作录像中,获取各视频帧包括的指定对象的位置;其中,所述目标实验为酸碱中和实验;
所述获取模块,还被配置为从所述目标实验的操作录像中,获取所述各视频帧包括的指定对象的状态;
确定模块,被配置为从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧;其中,每个操作步骤对应的视频帧用于评判该操作步骤的分数;所述每个操作步骤对应的视频帧的确定方式为基于各视频帧包括的指定对象进行确认的方式;其中,所述目标实验的第一操作步骤为量筒向试管倾倒液体的步骤,相应的,所述从所述各视频帧中,确定所述目标实验所包括的每个操作步骤对应的视频帧,包括:针对所述第一操作步骤,从各个视频帧中确定第一视频帧,所述第一视频帧中的量筒的旋转角度小于前指定数量的视频帧中至少一个视频帧包括的量筒的旋转角度,所述旋转角度为量筒与水平面的夹角;将所述第一视频帧作为所述第一操作步骤对应的视频帧;
所述确定模块,还被配置为根据每个操作步骤对应的视频帧中指定对象的位置和/或状态,确定该操作步骤的评分;
计算模块,被配置为基于各操作步骤的评分,计算所述目标实验的评分结果。
17.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-14任一所述的方法步骤。
18.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-14任一所述的方法步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911054633.XA CN111768439B (zh) | 2019-10-31 | 2019-10-31 | 一种确定实验评分的方法、装置、电子设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911054633.XA CN111768439B (zh) | 2019-10-31 | 2019-10-31 | 一种确定实验评分的方法、装置、电子设备及介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111768439A CN111768439A (zh) | 2020-10-13 |
CN111768439B true CN111768439B (zh) | 2024-02-02 |
Family
ID=72718995
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911054633.XA Active CN111768439B (zh) | 2019-10-31 | 2019-10-31 | 一种确定实验评分的方法、装置、电子设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111768439B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112735198A (zh) * | 2020-12-31 | 2021-04-30 | 深兰科技(上海)有限公司 | 实验教学系统及方法 |
CN117789078B (zh) * | 2023-12-18 | 2024-05-31 | 广东广视通智慧教育科技有限公司 | 一种基于ai视觉识别的实验操作考评方法及系统 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013088114A (ja) * | 2011-10-13 | 2013-05-13 | Hitachi High-Technologies Corp | 液面状態検出装置、自動分析装置および液面状態検出方法 |
CN103345719A (zh) * | 2013-07-03 | 2013-10-09 | 青岛大学 | 一种实验教学成绩评定系统和方法 |
CN106643965A (zh) * | 2016-12-23 | 2017-05-10 | 贵州电网有限责任公司电力科学研究院 | 一种利用模板匹配精确识别液位的方法 |
CN107330645A (zh) * | 2017-09-05 | 2017-11-07 | 王东红 | 一种实验教学平台的协同操作评估方法及装置 |
CN107507114A (zh) * | 2017-09-08 | 2017-12-22 | 赵宇航 | 一种物联网教学平台安全控制方法及装置 |
CN108831238A (zh) * | 2018-08-07 | 2018-11-16 | 苏州承儒信息科技有限公司 | 一种基于虚拟实验的教育系统控制方法 |
CN108831228A (zh) * | 2018-06-01 | 2018-11-16 | 王雨杨 | 基于dis的实验操作测评方法及系统 |
CN109035091A (zh) * | 2018-07-25 | 2018-12-18 | 深圳市异度信息产业有限公司 | 一种用于学生实验的打分方法、装置及设备 |
CN109215445A (zh) * | 2018-07-31 | 2019-01-15 | 蚌埠学院 | 一种大学实验课程的考核方法 |
CN109727172A (zh) * | 2019-03-18 | 2019-05-07 | 上海中科教育装备集团有限公司 | 一种人工智能机器学习实验技能评分系统 |
CN109872595A (zh) * | 2019-04-03 | 2019-06-11 | 大连理工大学 | 一种虚实结合的远程液压实验教学系统 |
CN110286765A (zh) * | 2019-06-21 | 2019-09-27 | 济南大学 | 一种智能实验容器及其使用方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107066082B (zh) * | 2016-12-30 | 2018-10-02 | 百度在线网络技术(北京)有限公司 | 显示方法和装置 |
-
2019
- 2019-10-31 CN CN201911054633.XA patent/CN111768439B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013088114A (ja) * | 2011-10-13 | 2013-05-13 | Hitachi High-Technologies Corp | 液面状態検出装置、自動分析装置および液面状態検出方法 |
CN103345719A (zh) * | 2013-07-03 | 2013-10-09 | 青岛大学 | 一种实验教学成绩评定系统和方法 |
CN106643965A (zh) * | 2016-12-23 | 2017-05-10 | 贵州电网有限责任公司电力科学研究院 | 一种利用模板匹配精确识别液位的方法 |
CN107330645A (zh) * | 2017-09-05 | 2017-11-07 | 王东红 | 一种实验教学平台的协同操作评估方法及装置 |
CN107507114A (zh) * | 2017-09-08 | 2017-12-22 | 赵宇航 | 一种物联网教学平台安全控制方法及装置 |
CN108831228A (zh) * | 2018-06-01 | 2018-11-16 | 王雨杨 | 基于dis的实验操作测评方法及系统 |
CN109035091A (zh) * | 2018-07-25 | 2018-12-18 | 深圳市异度信息产业有限公司 | 一种用于学生实验的打分方法、装置及设备 |
CN109215445A (zh) * | 2018-07-31 | 2019-01-15 | 蚌埠学院 | 一种大学实验课程的考核方法 |
CN108831238A (zh) * | 2018-08-07 | 2018-11-16 | 苏州承儒信息科技有限公司 | 一种基于虚拟实验的教育系统控制方法 |
CN109727172A (zh) * | 2019-03-18 | 2019-05-07 | 上海中科教育装备集团有限公司 | 一种人工智能机器学习实验技能评分系统 |
CN109872595A (zh) * | 2019-04-03 | 2019-06-11 | 大连理工大学 | 一种虚实结合的远程液压实验教学系统 |
CN110286765A (zh) * | 2019-06-21 | 2019-09-27 | 济南大学 | 一种智能实验容器及其使用方法 |
Non-Patent Citations (3)
Title |
---|
Qualitative and Quantitative Evaluation of Three Types of Student-Generated Videos as Instructional Support in Organic Chemistry Laboratories;Melinda C. Box et al.;《Journal of Chemical Education》;全文 * |
中学化学虚拟实验操作诊断方法研究;李晨;《中国优秀硕士学位论文全文数据库 信息科技辑》(第2012年第06期);全文 * |
深度学习在虚拟实验指导与批改中的应用;汪生海;《中国优秀硕士学位论文全文数据库 社会科学Ⅱ辑》(第2018年第10期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN111768439A (zh) | 2020-10-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11774735B2 (en) | System and method for performing automated analysis of air samples | |
TWI716012B (zh) | 樣本標註方法、裝置、儲存媒體和計算設備、損傷類別的識別方法及裝置 | |
WO2021082662A1 (zh) | 辅助用户拍摄车辆视频的方法及装置 | |
WO2017092427A1 (zh) | 一种电子元件定位方法及装置 | |
US20180174000A1 (en) | Defect image classification device and defect image classification method | |
CN111210399B (zh) | 一种成像质量评价方法、装置及设备 | |
CN111768439B (zh) | 一种确定实验评分的方法、装置、电子设备及介质 | |
CN113628079A (zh) | 评分方法、装置、电子设备及可读介质 | |
US10395091B2 (en) | Image processing apparatus, image processing method, and storage medium identifying cell candidate area | |
CN111127508B (zh) | 一种基于视频的目标跟踪方法及装置 | |
CN111951210A (zh) | 数据的处理方法、装置及设备 | |
CN110199316A (zh) | 相机和相机的图像处理方法 | |
CN111652145B (zh) | 一种公式检测的方法、装置、电子设备和存储介质 | |
CN114973090A (zh) | 一种实验评分方法、装置、电子设备及存储介质 | |
CN112153320B (zh) | 一种物品尺寸的测量方法、装置、电子设备和存储介质 | |
CN112036280A (zh) | 水鸟种群动态监测方法、装置和设备 | |
CN115359412B (zh) | 一种盐酸中和实验评分方法、装置、设备及可读存储介质 | |
CN111753613A (zh) | 基于实验操作的图像分析方法、装置、设备及存储介质 | |
CN111753633B (zh) | 目标检测方法及装置 | |
CN111144172B (zh) | 一种基于视频的评分方法、装置及电子设备 | |
CN113804704A (zh) | 电路板检测方法、视觉检测设备及具有存储功能的装置 | |
CN113808067B (zh) | 电路板检测方法、视觉检测设备及具有存储功能的装置 | |
JP2021051022A (ja) | 建物構造物診断システム | |
CN117132174B (zh) | 一种应用于工业流水线质量检测的模型训练方法与系统 | |
CN110930364B (zh) | 一种基于ai的视频显微镜的实现方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |