CN113537801A - 板书处理方法、装置、终端和存储介质 - Google Patents
板书处理方法、装置、终端和存储介质 Download PDFInfo
- Publication number
- CN113537801A CN113537801A CN202110841003.8A CN202110841003A CN113537801A CN 113537801 A CN113537801 A CN 113537801A CN 202110841003 A CN202110841003 A CN 202110841003A CN 113537801 A CN113537801 A CN 113537801A
- Authority
- CN
- China
- Prior art keywords
- blackboard
- writing
- content
- target
- writing content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003860 storage Methods 0.000 title claims abstract description 56
- 238000012545 processing Methods 0.000 title claims abstract description 39
- 238000003672 processing method Methods 0.000 title description 12
- 238000011156 evaluation Methods 0.000 claims abstract description 116
- 238000000034 method Methods 0.000 claims abstract description 49
- 230000004044 response Effects 0.000 claims abstract description 5
- 238000009826 distribution Methods 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 8
- 238000012216 screening Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 10
- 230000008569 process Effects 0.000 description 10
- 239000003086 colorant Substances 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000003068 static effect Effects 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000013210 evaluation model Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
- G06Q10/06393—Score-carding, benchmarking or key performance indicator [KPI] analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
- G06Q50/205—Education administration or guidance
Landscapes
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Engineering & Computer Science (AREA)
- Strategic Management (AREA)
- Educational Administration (AREA)
- Economics (AREA)
- Tourism & Hospitality (AREA)
- General Physics & Mathematics (AREA)
- Educational Technology (AREA)
- Marketing (AREA)
- Theoretical Computer Science (AREA)
- Development Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- Quality & Reliability (AREA)
- Operations Research (AREA)
- Game Theory and Decision Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Drawing Aids And Blackboards (AREA)
Abstract
本发明公开了一种板书处理方法、装置、终端和存储介质,所述方法包括:响应于采集指令,采集目标场景下的板书画面,对板书画面进行识别,得到板书画面中的当前板书内容;基于预设板书架构对当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容,基于目标评价方式对目标板书内容进行评价,得到评价结果;确定评价结果对应的内容更新方式,并基于内容更新方式对目标板书内容进行处理,得到更新板书内容,并对更新板书内容进行呈现。通过实施上述方法,可以对教学板书进行智能评价,并基于评价结果对板书进行处理,使得终端对于板书处理的智能性得到提升,并提高教学板书质量。
Description
技术领域
本申请涉及计算机技术领域,尤其涉及一种板书处理方法、装置、终端和存储介质。
背景技术
板书作为课堂教学中的重要组成部分,对于课堂质量有重要意义,优秀的板书不仅仅能够简化课堂教学,也能有效提升学生的学习效果。而现有技术下,要评价一位老师的课堂板书,往往是安排其他的老师去听课,然后由评课老师进行评价。
这样的评价方式有以下问题:首先,受评课老师水平影响,如果评课老师本身的教学板书水平不高,则可能导致评价结果失真;其次,这样的方式需要协调评课老师和讲课老师的课表,操作实施不方便;再次,由评课老师评价的方式,其结果可能会受到评课老师主观性影响,导致数据失去客观性;最后,这样的方式评价的仅仅是老师的某一节课,进行分析的基础数据不够丰富,所得到的最终结果可能存在局限性,无法整体体现老师的教学板书水平。进一步的,评价也只是起到了考核作用,并未能对该授课时间的教学板书质量进行提升。
发明内容
本申请实施例提供了一种板书处理方法、装置、终端和存储介质,可以对教学板书进行智能评价,并基于评价结果对板书进行处理,使得终端对于板书处理的智能性得到提升,并提高教学板书质量。
一方面,本申请实施例提供了一种板书处理方法,所述方法包括:
响应于采集指令,采集目标场景下的板书画面,所述板书画面包括所述目标场景下传统板书区域中的传统板书画面和多媒体板书区域中的多媒体板书画面;
对所述板书画面进行识别,得到所述板书画面中的当前板书内容;
基于预设板书架构对所述当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容,所述历史板书内容为预设的历史时间段内识别出的板书内容;
基于目标评价方式对所述目标板书内容进行评价,得到针对所述目标板书内容的评价结果;
确定所述评价结果对应的内容更新方式,并基于所述内容更新方式对所述目标板书内容进行处理,得到更新板书内容;
当接收到呈现指令时,基于目标呈现格式对所述更新板书内容进行呈现。
一方面,本申请实施例提供了一种板书处理装置,所述装置包括:
采集模块,用于响应于采集指令,采集目标场景下的板书画面,所述板书画面包括所述目标场景下传统板书区域中的传统板书画面和多媒体板书区域中的多媒体板书画面;
识别模块,用于对所述板书画面进行识别,得到所述板书画面中的当前板书内容;
组合模块,用于基于预设板书架构对所述当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容,所述历史板书内容为预设的历史时间段内识别出的板书内容;
评价模块,用于基于目标评价方式对所述目标板书内容进行评价,得到针对所述目标板书内容的评价结果;
更新模块,用于确定所述评价结果对应的内容更新方式,并基于所述内容更新方式对所述目标板书内容进行处理,得到更新板书内容;
呈现模块,用于当接收到呈现指令时,基于目标呈现格式对所述更新板书内容进行呈现。
一方面,本申请实施例提供了一种终端,包括处理器、输入接口、输出接口和存储器,所述处理器、输入接口、输出接口和存储器相互连接,其中,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行所述板书处理方法。
一方面,本申请实施例提供了一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行所述板书处理方法。
本申请实施例中,终端响应于采集指令,采集目标场景下的板书画面,对板书画面进行识别,得到板书画面中的当前板书内容;基于预设板书架构对当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容,基于目标评价方式对目标板书内容进行评价,得到评价结果;确定评价结果对应的内容更新方式,并基于内容更新方式对目标板书内容进行处理,得到更新板书内容,基于目标场景对应的呈现格式对更新板书内容进行呈现。通过实施上述方法,可以对教学板书进行智能评价,并基于评价结果对板书进行处理,使得终端对于板书处理的智能性得到提升,并提高教学板书质量。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种板书处理方法的流程示意图;
图2为本申请实施例提供的另一种板书处理方法的流程示意图;
图3为本申请实施例提供的一种板书处理系统的结构示意图;
图4为本申请实施例提供的一种板书处理装置的结构示意图;
图5为本申请实施例提供的一种终端的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例提供的板书处理方法实现于终端,所述终端包括智能录播主机、智能手机、平板电脑、数字音视频播放器、电子阅读器、手持游戏机或车载电子设备等电子设备。
图1是本申请实施例中一种板书处理方法的流程示意图,如图1所示,本实施例中的板书处理方法的流程可以包括:
S101、响应于采集指令,采集目标场景下的板书画面。
本申请实施例中,板书画面包括目标场景下传统板书区域中的传统板书画面和多媒体板书区域中的多媒体板书画面。采集指令具体可以为用户手动输入的操作生成的指令,如用户对指定按键输入按压操作生成采集指令。或者,采集指令也可以基于声音信号生成,如目标场景为教学场景,则终端可以在检测到上课铃声信号或老师说出的“上课”声音信号时,生成采集指令。进一步的,终端可以响应于采集指令,采集目标场景下的板书画面,其中,目标场景可以为教学场景,目标场景包括传统板书区域和多媒体板书区域,目标场景下预先安装有网络摄像头,正对黑板和多媒体显示设备,通过自动识别或手动指定方式,终端可以确定出目标场景下的传统板书区域和多媒体板书区域,并调用安装好的网络摄像头采集到目标场景下的板书画面。需要说明的是,传统板书区域可以为用于板书书写的黑板或白板所在的区域,多媒体板书区域可以为用于呈现多媒体内容的区域,如投影幕布、显示屏幕或电子白板板书功能的一体机所在的区域。
S102、对板书画面进行识别,得到板书画面中的当前板书内容。
本申请实施例中,终端获取到板书画面之后,将对板书画面进行识别,得到板书画面中的当前板书内容。
在一种实现方式中,终端对板书画面进行识别的具体方式可以为,终端获取参照基础画面,调用比对模型对板书画面和参照基础画面进行比对,得到板书画面和参照基础画面之间的差异信息;根据差异信息确定板书画面中的板书内容作为当前板书内容,其中,参照基础画面中包括预设时刻下传统板书区域中的画面和多媒体板书区域中的画面,预设时刻可以为教学开始的时刻,此时传统板书区域中的画面和多媒体板书区域中的画面可以为空白画面,即画面中不存在字符、图像等内容,例如,参照基础画面的具体构建方式为,将黑板擦干净,关闭投影仪或者多媒体显示器,然后调用网络摄像头对传统板书区域进行拍照,通过系统自动识别或由人工指定传统板书的具体显示区域,将拍照得到的图片进行保存,作为后期对手写板书进行识别的传统初始画面。打开投影仪或者多媒体显示屏幕,显示内容为桌面,然后对多媒体板书区域进行拍照,通过系统自动识别或由人工指定多媒体板书的具体显示区域,作为后期对多媒体板书进行识别的多媒体初始画面,将传统初始画面和多媒体初始画面进行组合即得到参照基础画面。或者,预设时刻也可以为用户录入的一个时刻,在教学过程中,用户可以在终端中输入一个操作以指定一个时刻,终端可以采集到该时刻下的板书区域中的画面作为参照基础画面。比对模型可以为预先训练完成的深度学习模型,用于比较输入的两个画面之间的差异,得到画面之间的差异信息,差异信息具体可以为画面之间差异像素点所处的位置,针对任一位置处的像素点,当其在两个画面之间所对应的像素值不同时,将其确定为差异像素点。比对模型的训练方式可以为,获取样本画面集合,样本画面集合中包括多个样本画面组,以及每个样本画面组之间的预设差异信息,调用样本画面集合对初始比对模型进行训练,以对初始比对模型中的参数进行更新,若参数更新后的初始比对模型满足预设条件,则确定训练完成,并将参数更新后的初始比对模型确定为比对模型,其中,预设条件包括模型对于样本画面之间的差异信息的预测准确率高于预设准确率,当模型针对输入的样本画面组输出的预测差异信息与预设差异信息匹配时,确定预测准确。进一步的,终端可根据差异信息确定板书画面中的板书内容,即终端找到差异信息指示的差异像素点,并构建出相应的字符、图像,作为当前板书内容。
S103、基于预设板书架构对当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容。
本申请实施例中,终端识别出当前板书内容之后,将基于预设板书架构对当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容,其中,历史板书内容为预设的历史时间段内识别得到的板书内容,如预设的历史时间段为教学开始到当前时间之间的时间段,则终端可以将该历史时间段之内识别到的板书画面中的内容作为历史板书内容,其中,在历史时间段内,针对历史板书内容的触发识别的方式可以为检测到板书中存在特殊字符时,如检测到存在字符“完结”时,触发识别当前板书内容作为历史板书内容;或者,检测到板书区域内字符占用比例超过预设比例时,触发识别当前板书内容作为历史板书内容;或者,检测到场景下人物输入的动作时,如检测到人物有“擦黑板”的动作时,触发识别当前板书内容作为历史板书内容;或者,检测到场景下人物输入的声音时,如检测到人物有“记板书”的声音时,触发识别当前板书内容作为历史板书内容。该预设的历史时间段也可以由用户在教学过程中设置,终端可以接收用户输入的操作,并基于操作确定相应的预设时间段。因不同时刻目标场景下板书区域中显示的内容不同,通过上述对当前板书内容和历史板书内容进行组合的方式,可以得到整个教学过程中完整的板书内容或用户需要的重要部分的板书内容,以方便于后续对整体板书进行评价。具体实现中,终端对当前板书内容和数据库中存储的历史板书内容进行组合的方式可以为,终端基于关键词匹配的方式确定历史板书内容在预设板书架构中的第一存放位置,第一存放位置中的关键词存在于历史板书内容中;基于关键词匹配的方式确定当前板书内容在预设板书架构中的第二存放位置,第二存放位置中的关键词存在于当前板书内容中;将历史板书内容存放于第一存放位置处,以及将当前板书内容存放于第二存放位置处,以实现当前板书内容与历史板书内容的组合。其中,预设板书架构的具体确定方式为,终端获取板书主题,板书主题可以为课程名称,具体可由用户预先录入,并根据板书主题显示对应的板书架构的创建界面;接收在创建界面输入的创建操作,并基于创建操作构造出预设板书架构,即可以由用户预先在终端提供的界面中创建目标板架构,预设板书架构中包含了至少一个存放位置,每个存放位置中包含一个关键词,各个存放位置之间的建立有连接。例如,预设板书架构中包含两个存放位置,存放位置1处包含的关键词为“第一”,存放位置2处包含的关键词为“第二”,历史板书内容为“第一点.....”,当前板书内容为“第二点...”,则可确定历史板书内容对应于存放位置1,当前板书内容对应于存放位置2,终端将历史板书内容存放于存放位置1处,以及将当前板书内容存放于存放位置2处,实现对当前板书内容和历史板书内容的组合,使得不同时间段识别得到的当前板书内容统一整理于一个结构中,使其规整且结构化的显示,也便于后续对整体的板书进行评价。其中,当预设板书架构为一个页面时,存放位置1和存放位置2可以为同一页面中的不同位置,或者,当预设板书架构为多个页面时,存放位置1和存放位置2也可以为不同分别处于不同页面中,后续即可实现以ppt形式滚动展示目标板书内容。
S104、基于目标评价方式对目标板书内容进行评价,得到针对目标板书内容的评价结果。
本申请实施例中,终端确定目标板书内容之后,将基于目标评价方式对目标板书内容进行评价,目标板书内容中包括传统板书内容和多媒体板书内容,传统板书内容可以为不同时刻下传统板书区域中内容的组合,多媒体板书内容可以为不同时刻下多媒体板书区域中内容的组合。目标评价方式可以为目标场景对应的评价方式,针对不同的场景,可预先设置有不同的评价方式,目标评价方式中可以包括对传统板书内容进行评价的评价方案,以及对于多媒体板书内容的评价方案。
在一种实现方式中,终端采用第一指标集合对目标板书内容中传统板书内容进行评价,得到第一评价结果,第一指标集合包括工整度指标、结构指标、文字大小指标、清晰度指标中至少一个,传统板书内容为传统板书区域中显示过的画面对应的内容;第一指标集合中各个指标对应有第一标准形式的内容,第一评价结果由传统板书内容与第一标准形式的内容之间的比对差异得到,采用第二指标集合对目标板书内容中多媒体板书内容进行评价,得到第二评价结果,第二指标集合包括色彩指标、图像大小指标、字体指标中的至少一个,多媒体板书内容为多媒体板书区域中显示过的画面对应的内容;第二指标集合中各个指标对应有第二标准形式的内容,第二评价结果由多媒体板书内容与第二标准形式的内容之间的比对差异得到,对第一评价结果和第二评价结果进行汇总处理,得到针对目标板书内容的评价结果。在一个实施例中,终端基于工整度指标评价传统板书内容的具体方式为,从传统板书内容中筛选出目标字符,确定目标字符对应的标准形式字符,并确定标准形式字符与目标字符之间的相似度,相似度具体可以为目标字符与标准形式字符之间在同一显示区域内占用相同像素点的数量与总像素点数量之间的比值,终端将该相似度作为目标字符的工整度。如针对传统板书内容中手写的目标字符“熙”,其对应的标准形式字符则为电脑中楷体4号的字符“熙”,终端可以基于两者之间的相似度确定目标字符的工整度。通过上述方式,终端可确定出传统板书内容中各个字符对应的工整度,并将各个字符的工整度的平均值作为传统板书内容对应的工整度,进一步的,终端也可以基于差异像素点的分布确定工整度的提升方向,并添加至针对工整度的评价结果中。在一个实施例中,终端基于结构指标评价传统板书内容的具体方式为,终端对传统板书内容进行掩膜处理,得到传统板书内容对应的架构,并从数据库中找到与该架构相匹配的参考板书架构,将预设的参考板书架构的评分作为结构指标对应的评分。在一个实施例中,终端基于文字大小指标评价传统板书内容的具体方式为,终端获取目标场景对应的文字大小标准,并校验传统板书内容中文字大小与文字大小标准的匹配度,以及基于匹配度确定文字大小指标对应的评分,其中,不同的场景对应有不同的文字大小标准,如场景为100平方米的场地,其对应的文字大小标准为一号字体大小,场景为10平方米的场地,其对应的文字大小标准为四号字体大小。终端可以基于文字大小标准确定出该指标项对应的评分,并指出该指标项的提升方向。在一个实施例中,不同清晰度由在传统板书区域中针对字符的下笔轻重确定,即书写字符时下笔有力,则可致使书写出字符的清晰度高,同理,下笔较轻,则会导致字符模糊,清晰度较低。终端基于清晰度指标评价传统板书内容的具体方式为,从传统板书内容中筛选出目标字符,确定目标字符对应的标准清晰度字符的图像中各个像素点对应的标准像素值,并确定标准形式字符的图像中各个像素点对应的像素值与各个标准像素值构成的差值集合,对差值集合中各个差值进行汇总得到目标像素差值,基于预先建立的对应关系确定目标像素差值对应的清晰度,终端将该清晰度作为目标字符的清晰度,通过上述方式,即可得到传统板书内容中各个字符的清晰度,并汇总即可得到传统板书内容对应的清晰度。在一个实施例中,终端基于多媒体板书内容中的色彩分布确定色彩指标对应的评分,或者,基于多媒体板书内容中图像大小确定图像大小指标评分,或者,基于多媒体板书内容中字体大小确定字体指标对应的评分。终端可以对上述指标评分进行筛选组合运算,进一步判断出板书是否字迹工整、颜色字体是否合理、板书是否简明扼要、板书逻辑是否清晰、板书布局是否合理,如对文字大小指标得分和工整度指标得分进行加权求和运算,得到板书是否字迹工整的评价,终端也可以从数据库中找到的评分对应的板书提升方式,并将提升方式添加至板书评价结果中,该数据库中可以包括了多个评分,以及每个评分对应的板书提升方式。
在一种实现方式中,终端可以调用训练完成的评价模型对目标板书内容进行评价,得到针对目标板书内容的评价结果,该评价模型可以用于筛选出板书中的错别字、错误标点符号、错误知识点等,并生成相应的评分以及改正方式,作为评价结果。
S105、确定评价结果对应的内容更新方式,并基于内容更新方式对目标板书内容进行处理,得到更新板书内容。
本申请实施例中,终端得到目标板书内容对应的评价结果之后,将确定评价结果对应的内容更新方式,其中,每个评价结果可以预先设置有相应的内容更新方式,并存储于数据库中,终端可以从数据库中找到针对目标板书内容的评价结果对应的内容更新方式,并基于内容更新方式对目标板书内容进行处理,得到更新板书内容。例如,评价结果为存在错别字,则终端将目标板书内容中的错别字进行相应更改处理,或者,评价结果为板书结构混乱,则终端可以调整目标板书内容中的结构,得到更新板书内容。通过上述方式,可以实现对当前板书内容的自动调整,提升教学板书质量。进一步的,终端可以接收针对目标板书内容输入的调整指令,并基于调整指令对板书进行进一步调整,上述方式可以对板书中自动调整不到位的地方进行人为调整,以实现板书的优化。
S106、当接收到呈现指令时,基于目标呈现格式对更新板书内容进行呈现。
本申请实施例中,终端得到更新板书内容后,可以接收用户输入的呈现指令,当接收到呈现指令时,基于目标呈现格式对更新板书内容进行呈现。
具体的,可以在目标场景下的多媒体板书区域中进行呈现,目标呈现格式的具体确定方式可以为,获取目标场景下各个人物的分布信息,并基于分布信息确定出目标场景下各个人物与多媒体板书区域之间的距离;从各个人物与多媒体板书区域之间的距离中筛选出目标距离,并基于距离与字体大小的对应关系确定目标距离对应的目标字体大小;获取目标场景下的光线信息,并基于光线信息确定目标字体颜色;将目标字体大小和目标字体颜色确定为目标呈现格式。其中,目标距离可以为各个距离中最大的距离,或者距离的众数、平均值等,不同的距离可以对应有不同的字体大小,如距离为10米,对应的字体大小为4号字体,距离为20米,对应的字体大小为3号字体。光线信息可以为目标场景下的光线亮度和光线颜色,不同的光线信息可以对应有不同字体颜色,如白色光线且亮度较高时,对应字体颜色可以为黑色,黄色光线且亮度较低时,对应字体颜色可以为红色。通过上述方式,可以使得板书内容在目标场景下有着较好的呈现效果,观看者可以更清晰的了解到板书内容。可选的,呈现也可以在用户所使用的电子设备中进行,如在电脑、平板电脑或手机中对更新板书内容进行呈现,使得使用电子设备的用户可以完整查阅课堂中的板书内容。
在一种实现方式中,终端基于目标呈现格式对更新板书内容进行呈现之后,可以获取目标场景下的音频信息,并提取出音频信息中的音频关键词;校验音频关键词是否存在于更新板书内容中,若存在,则将呈现的更新板书内容中音频关键词添加预设标记,以对音频关键词进行突出显示。其中,音频关键词可以为音频信息中出现频次超过预设频次的词组,如预设频次为2次,音频信息中词组“勾股定理”的出现频次为5次,则终端可以将词组“勾股定理”确定为音频信息中的音频关键词,并可以在更新板书内容中对其进行标记,以实现突出显示。
本申请实施例中,终端响应于采集指令,采集目标场景下的板书画面,对板书画面进行识别,得到板书画面中的当前板书内容;基于预设板书架构对当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容,基于目标评价方式对目标板书内容进行评价,得到评价结果;确定评价结果对应的内容更新方式,并基于内容更新方式对目标板书内容进行处理,得到更新板书内容,基于目标场景对应的呈现格式对更新板书内容进行呈现。通过实施上述方法,可以对教学板书进行智能评价,并基于评价结果对板书进行处理,使得终端对于板书处理的智能性得到提升,并提高教学板书质量。
图2是本申请实施例中一种板书处理方法的流程示意图,如图2所示,本实施例中的板书处理方法的流程可以包括:
S201、响应于采集指令,采集目标场景下的板书画面。
本申请实施例中,板书画面包括目标场景下传统板书区域中的传统板书画面和多媒体板书区域中的多媒体板书画面。
S202、对板书画面进行识别,得到板书画面中的当前板书内容。
在一种实现方式中,针对板书画面中多媒体板书区域中的内容,进行识别的方式可以为,将板书画面与多媒体参照基础模板进行对比,以此来确定当前是否使用多媒体,如果没有使用多媒体,则后续不再对多媒体内容进行评价,而采用传统板书画面对应的画面内容提取方式提取出传统板书区域中的内容,作为当前板书内容;进一步的,当确定使用多媒体时,对板书画面进行文字识别,并且记录获取到的文字。如果没有文字,则获取下一帧板书画面,获取到的下一帧板书画面同样进行文字识别,如果仍然没有识别到文字则对比两张板书画面的像素点色彩值。如果两张板书画面的像素点色彩值有明显区别,则判定为演示动画或者视频片段;如果像素点色彩值基本相同则继续识别下一帧板书画面,连续三张板书画面色彩值基本相同,则判定为静态图片或视频暂停,对色彩值相同的板书画面进行暂停图标识别,如果识别到暂停图标,则判定为视频暂停;如果没有识别到暂停图标则判定为静态图片,终端将板书画面中的文字、视频图片进行分类提取,并将提取的内容与传统板书区域中内容进行组合得到板书画面中的当前板书内容。终端基于上述方式确定出板书画面中的数据类型,以便于后续对相应数据类型的板书画面分类处理后展示,其中,该视频图片为包括传统视频中的图片和老师采用多媒体动态演示PPT、flash等多媒体内容的中产生的图片。
S203、基于预设板书架构对当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容。
S204、基于目标评价方式对目标板书内容进行评价,得到针对目标板书内容的评价结果。
在一种实现方式中,终端基于目标评价方式对目标板书内容中传统板书内容进行评价的具体步骤为,对传统板书内容中文字的书写角度(与水平线夹角)和文字的大小以及文字的规范工整度进行评价,其中同一句话中的字体和大小要统一,否则即判定为不和规范。如果所有文字与水平线均平行状态(允许一定误差),则判断为普通列举板书;如果文字与水平线呈非平行状态,则在板书区域内寻找是否存在对称角度的文字排版,只要有对称文字排版,则判定为板书中包括结构图或者解说图;如果文字与水平线有夹角而没有找到角度对称的文字排版,则检索文字附近是否有各种线段或者曲线、圆之类的线条,如果有,则将此部分判定为图表。如果文字与水平线有夹角而没有找到角度对称的文字排版,并且不能判定为结构图或者图表,则判定为板书不规范。对文字识别和检索完毕之后检索单独的线段、曲线以及圆和圆弧之类的线条。如果检索到相关线段而附近又没有文字,则判定为示意图,传统板书内容中的文字内容要和多媒体板书内容中的文字进行对比,相同的内容,不能重复,否则判定为不合规范。进一步的,终端基于上述方式进行评价后,可以得到上述每一项指标对应的评分,以及不合规范的指标项,基于分析得到的不合规范的指标项,终端给与其相应评分的同时分析出其不合规范的原因,并将各个指标项的评分和原因进行汇总得到传统板书内容对应的评分。进一步的,终端基于目标评价方式对目标板书内容中多媒体板书内容进行评价的具体步骤为,对多媒体板书内容中识别到有文字的图片,则进一步判断文件类型,如为word、ppt、execl等文件。具体方法为识别文字的字体大小,识别文字的姿态,如果相邻一行文字大小相同、或者背景颜色基本相同则判定为ppt或word,终端基于文件类型对应的评分方式对进行评分以及给出相应评分原因。或者,结合人数判断允许最小字体,多媒体板书内容中的字体大小要满足学生的观看,具体要求为系统可以预设最小观看面积,如果最后排学生看到的字体面积小于系统预设的最小面积,则判定为不和规范。或者,判断板书内容中相关的箭头,或者下划线等标注位置是否明确,如箭头是否明确指向某一内容,不会因为箭头角度不准确,导致误判,具体为系统预设箭头允许误差偏转值,偏转误差超过此范围即为不合规范,下滑线与相应文字内容的距离也应在系统预设距离内,否则即为不合规。或者,对多媒体板书内容中结构布局、色彩进行分析。具体为对文件进行全扫描,以确定文件的背景色是否统一,并且记录背景图案是否统一,如果背景色或者背景图案不统一,即为不合规。或者,将多媒体板书内容中的文字内容结合老师讲课过程中的高频词对比,确定知识点范围,并且识别判断板书中相关知识点是否有特殊颜色(与上下文颜色不一致)、特殊字体(与上下文字体不一致)或者特殊标记,如果有,则记为加分项。智能板书评分系统最终得分由三部分组成:传统板书得分包含板书书写工整度、板书结构得分;多媒体板书得分包含呈现动画得分、静态图片得分、多媒体文字流得分;综合得分结合逻辑分析模块对老师的整个板书进行综合评分。评分标准1为没有传统板书和多媒体板书不得分,只有传统板书或者只有多媒体板书得基础分,同时具备多媒体和传统板书得基础分以及附加分。评分标准2为传统板书中有普通列举板书得列举板书分,有结构图板书得结构图板书分,传统板书书写工整得工整分,有示意图得示意图分,同时具备多项的得相应组合的附加分。评分标准3为多媒体板书中有使用到呈现动画或视频得视频分,有使用到静态图片得图片分,有使用到word或者ppt等文字流文件得文档分,在最终拼接成的板书记录文件中如果满足了背景统一、布局色彩丰富、字体多变、有特殊标注等等分别得相应的附加分,最后如果板书内容中同时有视频、静态图片以及文档则得多媒体附加分。将各个模板得分加入到总分中,课堂板书总得分与扣分项以及扣分项相关图片和课堂讲课视频一起存放,便于随时查询或者调用。
S205、确定评价结果对应的内容更新方式,并基于内容更新方式对目标板书内容进行处理,得到更新板书内容。
S206、当接收到呈现指令时,基于目标呈现格式对更新板书内容进行呈现。
本申请实施例中,目标呈现格式可以为用于预先设定的呈现格式,包括字体大小、字体颜色等,呈现指令用于指示在用户使用的电子设备中对更新板书内容进行呈现,如在用户使用的手机、电脑、平板电脑等设备上进行显示。当目标场景为教学场景时,用户可以为评课的专家,则终端将更新板书内容上传至评课专家所使用的电子设备上,评课专家还可以通过电子设备向终端发送相应的评价信息,实现在线评课。或者,终端可以将更新板书内容投影至目标场景下的多媒体板书区域进行呈现,以使得目标场景下的观看者清晰的对更新板书内容进行查阅。
S207、获取更新板书内容对应的关联信息。
本申请实施例中,终端对更新板书内容进行呈现之后,可以获取更新板书内容对应的关联信息,其中,关联信息包括更新板书内容中词组的释义、更新板书内容关联的知识点标识、针对目标更新板书内容输入的评价信息中的至少一种。终端可以从释义数据库中查询更新板书内容中各个词组的释义,该释义数据库中可以存储了多个与目标场景相关的词组,以及每个词组对应的释义,研发人员可预先录入重难词组的释义到释义数据库中,终端可以在释义数据库中对更新板书内容中每个词组进行遍历查询,对于查询到的词组,则获取相应的释义信息,对于未查询到的词组,则不做处理。更新板书内容关联的知识点标识可以为更新板书内容关联的知识点所在的页码,如数学书第52页,或者更新板书内容关联的知识点的难易程度等。针对目标更新板书内容输入的评价信息可以由评课人员通过电子设备向终端传输,终端对其进行接收。
S208、将关联信息添加至更新板书内容中指定位置处进行呈现。
本申请实施例中,终端获取到更新板书内容对应的关联信息之后,可以对将关联信息添加至更新板书内容中指定位置处进行呈现,其中,指定位置可以为目标场景下板书区域中专用于呈现关联信息的位置,如板书区域的最下方,板书区域右方以批注形式进行呈现等。终端可以自动对关联信息进行呈现,或者,在接收到用户在终端中输入的操作后,将操作对应的关联信息进行呈现。通过上述方法,可以使得板书中包括更多相关内容,方便观看者从板书中学习到更多知识,提升学习效率。其中,终端可以还将更新板书内容发送给板书的制定人员(如老师),方便板书制定人员对板书中的评价进行学习,以使其提升板书制定水平。需要说明的是,更新板书内容可以包括更新后的文字内容和视频图片内容,终端可以有限对文字内容进行呈现,当接收到视频图片呈现指令时,对视频图片内容进行呈现。
进一步的,终端将关联信息添加至更新板书内容中指定位置处进行呈现之后,还可以将更新板书内容和关联信息以指定方式进行存储,在一种实现方式中,可以采用数据库对上述更新板书内容和关联信息进行存储,或者,采用区块链对上述更新板书内容和关联信息进行存储,具体的,终端可以将更新板书内容和关联信息发送至区块链中的各个节点,以使得各个节点对更新板书内容和关联信息进行共识校验,若接收到共识校验通过的结果,则终端将更新板书内容和关联信息打包成区块,并将区块上传至区块链中。以使得板书内容得到可靠存储,方便后续人员使用。
本申请实施例中,终端响应于采集指令,采集目标场景下的板书画面,对板书画面进行识别,得到板书画面中的当前板书内容;基于预设板书架构对当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容,基于目标评价方式对目标板书内容进行评价,得到评价结果;确定评价结果对应的内容更新方式,并基于内容更新方式对目标板书内容进行处理,得到更新板书内容,基于目标场景对应的呈现格式对更新板书内容进行呈现,获取更新板书内容对应的关联信息,将关联信息添加至更新板书内容中指定位置处进行呈现。通过实施上述方法,可以对教学板书进行智能评价,并基于评价结果对板书进行处理,使得终端对于板书处理的智能性得到提升,并可多维度展示板书相关内容,提高了教学板书质量。
如图3所示,为本申请实施例提供的一种板书处理系统的结构示意图,该板书处理系统中包括终端301、采集设备302和客户端303,其中,终端与采集设备建立有连接,采集设备可以有摄像机和话筒,分别用于采集目标场景下的画面和声音。终端可以获取到采集设备302上传的板书画面和音频信息,终端与客户端303建立有通讯连接,可以向客户端发送更新板书内容,或者,客户端可以为投影仪,使得客户端在目标场景下投影展示更新板书内容。通过上述系统,即可实现本申请图1和图2所示的方法。
基于上述板书处理方法实施例的描述,本申请实施例还公开了一种板书处理装置。该板书处理装置可以是运行于终端中的一个计算机程序(包括程序代码),也可以是包含在终端中的一个实体装置。该板书处理装置可以执行图1-图2所示的方法。请参见图4,该板书处理装置40包括:采集模块401、识别模块402、组合模块403、评价模块404、更新模块405和呈现模块406。
采集模块401,用于采集模块,用于响应于采集指令,采集目标场景下的板书画面,所述板书画面包括所述目标场景下传统板书区域中的传统板书画面和多媒体板书区域中的多媒体板书画面;
识别模块402,用于对所述板书画面进行识别,得到所述板书画面中的当前板书内容;
组合模块403,用于基于预设板书架构对所述当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容,所述历史板书内容为预设的历史时间段内识别出的板书内容;
评价模块404,用于基于目标评价方式对所述目标板书内容进行评价,得到针对所述目标板书内容的评价结果;
更新模块405,用于确定所述评价结果对应的内容更新方式,并基于所述内容更新方式对所述目标板书内容进行处理,得到更新板书内容;
呈现模块406,用于当接收到呈现指令时,基于目标呈现格式对所述更新板书内容进行呈现。
在一种实现方式中,呈现模块406,还用于:
获取参照基础画面,所述参照基础画面中包括预设时刻下所述传统板书区域中的画面和所述多媒体板书区域中的画面;
调用比对模型对所述板书画面和所述参照基础画面进行比对,得到所述板书画面和所述参照基础画面之间的差异信息;
根据所述差异信息确定所述板书画面中的板书内容作为当前板书内容。
在一种实现方式中,识别模块402,具体用于:
获取所述目标场景下各个人物的分布信息,并基于所述分布信息确定出所述目标场景下各个人物与所述多媒体板书区域之间的距离;
从所述各个人物与所述多媒体板书区域之间的距离中筛选出目标距离,并基于距离与字体大小的对应关系确定所述目标距离对应的目标字体大小;
获取所述目标场景下的光线信息,并基于所述光线信息确定目标字体颜色;
将所述目标字体大小和所述目标字体颜色确定为目标呈现格式。
在一种实现方式中,评价模块404,具体用于:
采用第一指标集合对所述目标板书内容中传统板书内容进行评价,得到第一评价结果,所述第一指标集合包括工整度指标、结构指标、文字大小指标和清晰度指标中至少一个,所述传统板书内容为所述传统板书区域中显示过的画面对应的内容;
采用第二指标集合对所述目标板书内容中多媒体板书内容进行评价,得到第二评价结果,所述第二指标集合包括色彩指标、图像大小指标和字体指标中的至少一个,所述多媒体板书内容为所述多媒体板书区域中显示过的画面对应的内容;
对所述第一评价结果和所述第二评价结果进行汇总处理,得到针对所述目标板书内容的评价结果。
在一种实现方式中,组合模块403,还用于:
获取板书主题,并根据所述板书主题显示对应的板书架构的创建界面;
接收在所述创建界面输入的创建操作,并基于所述创建操作构造出预设板书架构,所述预设板书架构中包含了至少一个存放位置,每个存放位置中包含一个关键词,各个存放位置之间的建立有连接。
在一种实现方式中,组合模块403,还用于:
基于关键词匹配的方式确定所述历史板书内容在所述预设板书架构中的第一存放位置,所述第一存放位置中的关键词存在于所述历史板书内容中;
基于关键词匹配的方式确定所述当前板书内容在所述预设板书架构中的第二存放位置,所述第二存放位置中的关键词存在于所述当前板书内容中;
将所述历史板书内容存放于所述第一存放位置处,以及将所述当前板书内容存放于所述第二存放位置处,以实现所述当前板书内容与所述历史板书内容的组合。
在一种实现方式中,呈现模块406,还用于:
获取所述目标场景下的音频信息,并提取出所述音频信息中的音频关键词;
校验所述音频关键词是否存在于更新板书内容中,若存在,则将呈现的所述更新板书内容中所述音频关键词添加预设标记,以对所述音频关键词进行突出显示。
在一种实现方式中,呈现模块406,还用于:
获取所述更新板书内容对应的关联信息,所述关联信息包括所述更新板书内容中词组的释义、更新板书内容关联的知识点标识、针对所述目标更新板书内容输入的评价信息中的至少一种;
将所述关联信息添加至所述更新板书内容中指定位置处进行呈现。
本申请实施例中,采集模块401响应于采集指令,采集目标场景下的板书画面,识别模块402对板书画面进行识别,得到板书画面中的当前板书内容;组合模块403基于预设板书架构对当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容,评价模块404基于目标评价方式对目标板书内容进行评价,得到评价结果;更新模块405确定评价结果对应的内容更新方式,并基于内容更新方式对目标板书内容进行处理,得到更新板书内容,呈现模块406基于目标场景对应的呈现格式对更新板书内容进行呈现。通过实施上述方法,可以对教学板书进行智能评价,并基于评价结果对板书进行处理,使得终端对于板书处理的智能性得到提升,并提高教学板书质量。
请参见图5,为本申请实施例提供的一种终端的结构示意图。如图5所示,该终端包括:至少一个处理器501,输入设备503,输出设备504,存储器505,至少一个通信总线502。其中,通信总线502用于实现这些组件之间的连接通信。其中,存储器505可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。存储器505可选的还可以是至少一个位于远离前述处理器501的存储装置。其中处理器501可以结合图4所描述的装置,存储器505中存储一组程序代码,且处理器501,输入设备503,输出设备504调用存储器505中存储的程序代码,用于执行以下操作:
处理器501,用于响应于采集指令,采集目标场景下的板书画面,所述板书画面包括所述目标场景下传统板书区域中的传统板书画面和多媒体板书区域中的多媒体板书画面;
处理器501,用于对所述板书画面进行识别,得到所述板书画面中的当前板书内容;
处理器501,用于基于预设板书架构对所述当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容,所述历史板书内容为预设的历史时间段内识别出的板书内容;
处理器501,用于基于目标评价方式对所述目标板书内容进行评价,得到针对所述目标板书内容的评价结果;
处理器501,用于确定所述评价结果对应的内容更新方式,并基于所述内容更新方式对所述目标板书内容进行处理,得到更新板书内容;
处理器501,用于当接收到呈现指令时,基于目标呈现格式对更新板书内容进行呈现。
在一种实现方式中,处理器501,具体用于:
获取参照基础画面,所述参照基础画面中包括预设时刻下所述传统板书区域中的画面和所述多媒体板书区域中的画面;
调用比对模型对所述板书画面和所述参照基础画面进行比对,得到所述板书画面和所述参照基础画面之间的差异信息;
根据所述差异信息确定所述板书画面中的板书内容作为当前板书内容。
在一种实现方式中,处理器501,具体用于:
获取所述目标场景下各个人物的分布信息,并基于所述分布信息确定出所述目标场景下各个人物与所述多媒体板书区域之间的距离;
从所述各个人物与所述多媒体板书区域之间的距离中筛选出目标距离,并基于距离与字体大小的对应关系确定所述目标距离对应的目标字体大小;
获取所述目标场景下的光线信息,并基于所述光线信息确定目标字体颜色;
将所述目标字体大小和所述目标字体颜色确定为目标呈现格式。
在一种实现方式中,处理器501,具体用于:
采用第一指标集合对所述目标板书内容中传统板书内容进行评价,得到第一评价结果,所述第一指标集合包括工整度指标、结构指标、文字大小指标和清晰度指标中至少一个,所述传统板书内容为所述传统板书区域中显示过的画面对应的内容;
采用第二指标集合对所述目标板书内容中多媒体板书内容进行评价,得到第二评价结果,所述第二指标集合包括色彩指标、图像大小指标和字体指标中的至少一个,所述多媒体板书内容为所述多媒体板书区域中显示过的画面对应的内容;
对所述第一评价结果和所述第二评价结果进行汇总处理,得到针对所述目标板书内容的评价结果。
在一种实现方式中,处理器501,具体用于:
获取板书主题,并根据所述板书主题显示对应的板书架构的创建界面;
接收在所述创建界面输入的创建操作,并基于所述创建操作构造出预设板书架构,所述预设板书架构中包含了至少一个存放位置,每个存放位置中包含一个关键词,各个存放位置之间的建立有连接。
在一种实现方式中,处理器501,具体用于:
基于关键词匹配的方式确定所述历史板书内容在所述预设板书架构中的第一存放位置,所述第一存放位置中的关键词存在于所述历史板书内容中;
基于关键词匹配的方式确定所述当前板书内容在所述预设板书架构中的第二存放位置,所述第二存放位置中的关键词存在于所述当前板书内容中;
将所述历史板书内容存放于所述第一存放位置处,以及将所述当前板书内容存放于所述第二存放位置处,以实现所述当前板书内容与所述历史板书内容的组合。
在一种实现方式中,处理器501,具体用于:
获取所述目标场景下的音频信息,并提取出所述音频信息中的音频关键词;
校验所述音频关键词是否存在于更新板书内容中,若存在,则将呈现的所述更新板书内容中所述音频关键词添加预设标记,以对所述音频关键词进行突出显示。
在一种实现方式中,处理器501,具体用于:
获取所述更新板书内容对应的关联信息,所述关联信息包括所述更新板书内容中词组的释义、更新板书内容关联的知识点标识、针对所述目标更新板书内容输入的评价信息中的至少一种;
将所述关联信息添加至所述更新板书内容中指定位置处进行呈现。
本申请实施例中,处理器501响应于采集指令,采集目标场景下的板书画面,对板书画面进行识别,得到板书画面中的当前板书内容;基于预设板书架构对当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容,基于目标评价方式对目标板书内容进行评价,得到评价结果;确定评价结果对应的内容更新方式,并基于内容更新方式对目标板书内容进行处理,得到更新板书内容,基于目标场景对应的呈现格式对更新板书内容进行呈现。通过实施上述方法,可以对教学板书进行智能评价,并基于评价结果对板书进行处理,使得终端对于板书处理的智能性得到提升,并提高教学板书质量。
本申请实施例中所述模块,可以通过通用集成电路,例如CPU(CentralProcessing Unit,中央处理器),或通过ASIC(Application Specific IntegratedCircuit,专用集成电路)来实现。
应当理解,在本申请实施例中,所称处理器501可以是中央处理模块(CentralProcessing Unit,CPU),该处理器还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
总线502可以是工业标准体系结构(Industry Standard Architecture,ISA)总线、外部设备互联(Peripheral Component,PCI)总线或扩展工业标准体系结构(ExtendedIndustry Standard Architecture,EISA)总线等,该总线502可以分为地点总线、数据总线、控制总线等,为便于表示,图5仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于计算机可读存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的计算机可读存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(RandomAccess Memory,RAM)等。
以上所揭露的仅为本申请较佳实施例而已,当然不能以此来限定本申请之权利范围,因此依本申请权利要求所作的等同变化,仍属本申请所涵盖的范围。
Claims (10)
1.一种板书处理方法,其特征在于,所述方法包括:
响应于采集指令,采集目标场景下的板书画面,所述板书画面包括所述目标场景下传统板书区域中的传统板书画面和多媒体板书区域中的多媒体板书画面;
对所述板书画面进行识别,得到所述板书画面中的当前板书内容;
基于预设板书架构对所述当前板书内容和数据库中存储的历史板书内容进行组合,得到目标板书内容,所述历史板书内容为预设的历史时间段内识别出的板书内容;
基于目标评价方式对所述目标板书内容进行评价,得到针对所述目标板书内容的评价结果;
确定所述评价结果对应的内容更新方式,并基于所述内容更新方式对所述目标板书内容进行处理,得到更新板书内容;
当接收到呈现指令时,基于目标呈现格式对所述更新板书内容进行呈现。
2.根据权利要求1所述的方法,其特征在于,所述对所述板书画面进行识别,得到所述板书画面中的当前板书内容,包括:
获取参照基础画面,所述参照基础画面中包括预设时刻下所述传统板书区域中的画面和所述多媒体板书区域中的画面;
调用比对模型对所述板书画面和所述参照基础画面进行比对,得到所述板书画面和所述参照基础画面之间的差异信息;
根据所述差异信息确定所述板书画面中的板书内容作为当前板书内容。
3.根据权利要求1所述的方法,其特征在于,所述基于目标呈现格式对所述更新板书内容进行呈现之前,所述方法还包括:
获取所述目标场景下各个人物的分布信息,并基于所述分布信息确定出所述目标场景下各个人物与所述多媒体板书区域之间的距离;
从所述各个人物与所述多媒体板书区域之间的距离中筛选出目标距离,并基于距离与字体大小的对应关系确定所述目标距离对应的目标字体大小;
获取所述目标场景下的光线信息,并基于所述光线信息确定目标字体颜色;
将所述目标字体大小和所述目标字体颜色确定为目标呈现格式。
4.根据权利要求1所述的方法,其特征在于,所述基于目标评价方式对所述目标板书内容进行评价,得到针对所述目标板书内容的评价结果,包括:
采用第一指标集合对所述目标板书内容中传统板书内容进行评价,得到第一评价结果,所述第一指标集合包括工整度指标、结构指标、文字大小指标和清晰度指标中至少一个,所述传统板书内容为所述传统板书区域中显示过的画面对应的内容,所述第一指标集合中各个指标对应有第一标准形式的内容,所述第一评价结果由所述传统板书内容与所述第一标准形式的内容之间的比对差异得到;
采用第二指标集合对所述目标板书内容中多媒体板书内容进行评价,得到第二评价结果,所述第二指标集合包括色彩指标、图像大小指标和字体指标中的至少一个,所述多媒体板书内容为所述多媒体板书区域中显示过的画面对应的内容,所述第二指标集合中各个指标对应有第二标准形式的内容,所述第二评价结果由所述多媒体板书内容与所述第二标准形式的内容之间的比对差异得到;
对所述第一评价结果和所述第二评价结果进行汇总处理,得到针对所述目标板书内容的评价结果。
5.根据权利要求1所述的方法,其特征在于,所述基于预设板书架构对所述当前板书内容和数据库中存储的历史板书内容进行组合之前,所述方法还包括:
获取板书主题,并根据所述板书主题显示对应的板书架构的创建界面;
接收在所述创建界面输入的创建操作,并基于所述创建操作构造出预设板书架构,所述预设板书架构中包含了至少一个存放位置,每个存放位置中包含一个关键词,各个存放位置之间的建立有连接。
6.根据权利要求5所述的方法,其特征在于,所述基于预设板书架构对所述当前板书内容和数据库中存储的历史板书内容进行组合,包括:
基于关键词匹配的方式确定所述历史板书内容在所述预设板书架构中的第一存放位置,所述第一存放位置中的关键词存在于所述历史板书内容中;
基于关键词匹配的方式确定所述当前板书内容在所述预设板书架构中的第二存放位置,所述第二存放位置中的关键词存在于所述当前板书内容中;
将所述历史板书内容存放于所述第一存放位置处,以及将所述当前板书内容存放于所述第二存放位置处,以实现所述当前板书内容与所述历史板书内容的组合。
7.根据权利要求1所述的方法,其特征在于,所述基于目标呈现格式对所述更新板书内容进行呈现之后,所述方法还包括:
获取所述目标场景下的音频信息,并提取出所述音频信息中的音频关键词;
校验所述音频关键词是否存在于所述更新板书内容中,若存在,则将呈现的所述更新板书内容中所述音频关键词添加预设标记,以对所述音频关键词进行突出显示。
8.根据权利要求1所述的方法,其特征在于,所述基于目标呈现格式对所述更新板书内容进行呈现之后,所述方法还包括:
获取所述更新板书内容对应的关联信息,所述关联信息包括所述更新板书内容中词组的释义、更新板书内容关联的知识点标识、针对所述目标更新板书内容输入的评价信息中的至少一种;
将所述关联信息添加至所述更新板书内容中指定位置处进行呈现。
9.一种终端,其特征在于,包括处理器、输入接口、输出接口和存储器,所述处理器、输入接口、输出接口和存储器相互连接,其中,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行如权利要求1-8任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行如权利要求1-8任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110841003.8A CN113537801B (zh) | 2021-07-23 | 2021-07-23 | 板书处理方法、装置、终端和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110841003.8A CN113537801B (zh) | 2021-07-23 | 2021-07-23 | 板书处理方法、装置、终端和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113537801A true CN113537801A (zh) | 2021-10-22 |
CN113537801B CN113537801B (zh) | 2023-01-10 |
Family
ID=78088901
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110841003.8A Active CN113537801B (zh) | 2021-07-23 | 2021-07-23 | 板书处理方法、装置、终端和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113537801B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114936787A (zh) * | 2022-06-08 | 2022-08-23 | 武汉行已学教育咨询有限公司 | 一种基于人工智能的线上学生教学智能分析管理云平台 |
CN116798047A (zh) * | 2023-05-08 | 2023-09-22 | 华南师范大学 | 一种基于图像识别的教学板书分析方法及系统 |
WO2023245420A1 (zh) * | 2022-06-21 | 2023-12-28 | 北京全道智源教育科技院 | 职业教育课程开发方法、装置及计算机设备 |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5305114A (en) * | 1991-07-12 | 1994-04-19 | Matsushita Electric Industrial Co., Ltd. | Electronic blackboard apparatus |
JP2012206431A (ja) * | 2011-03-30 | 2012-10-25 | Casio Computer Co Ltd | 情報表示装置、サーバ及びプログラム |
JP2012210754A (ja) * | 2011-03-31 | 2012-11-01 | Casio Computer Co Ltd | 電子黒板、サーバ及びプログラム |
JP2012240283A (ja) * | 2011-05-19 | 2012-12-10 | Casio Computer Co Ltd | 電子黒板及びプログラム |
CN107423407A (zh) * | 2017-07-27 | 2017-12-01 | 广州视源电子科技股份有限公司 | 教学信息记录方法、装置、终端和计算机可读存储介质 |
CN107506719A (zh) * | 2017-08-18 | 2017-12-22 | 广州视源电子科技股份有限公司 | 教学板书显示方法、装置、设备及计算机可读存储介质 |
CN107809563A (zh) * | 2017-11-30 | 2018-03-16 | 浙江大华技术股份有限公司 | 一种板书检测系统、方法及装置 |
JP2018077473A (ja) * | 2017-11-01 | 2018-05-17 | カシオ計算機株式会社 | 情報表示装置 |
CN109240494A (zh) * | 2018-08-23 | 2019-01-18 | 京东方科技集团股份有限公司 | 电子显示板的控制方法、计算机可读存储介质和控制系统 |
CN110322086A (zh) * | 2018-03-29 | 2019-10-11 | 施建锋 | 一种基于智能硬件和云平台的教育板书考核系统 |
CN110347993A (zh) * | 2019-07-11 | 2019-10-18 | 深圳云智教育科技有限公司 | 一种板书管理方法及装置 |
CN111626297A (zh) * | 2020-04-13 | 2020-09-04 | 小船出海教育科技(北京)有限公司 | 文字书写质量评价方法、装置、电子设备和记录介质 |
CN112183046A (zh) * | 2020-09-25 | 2021-01-05 | 北京有竹居网络技术有限公司 | 一种手写字的质量评价方法、装置、设备和存储介质 |
-
2021
- 2021-07-23 CN CN202110841003.8A patent/CN113537801B/zh active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5305114A (en) * | 1991-07-12 | 1994-04-19 | Matsushita Electric Industrial Co., Ltd. | Electronic blackboard apparatus |
JP2012206431A (ja) * | 2011-03-30 | 2012-10-25 | Casio Computer Co Ltd | 情報表示装置、サーバ及びプログラム |
JP2012210754A (ja) * | 2011-03-31 | 2012-11-01 | Casio Computer Co Ltd | 電子黒板、サーバ及びプログラム |
JP2012240283A (ja) * | 2011-05-19 | 2012-12-10 | Casio Computer Co Ltd | 電子黒板及びプログラム |
CN107423407A (zh) * | 2017-07-27 | 2017-12-01 | 广州视源电子科技股份有限公司 | 教学信息记录方法、装置、终端和计算机可读存储介质 |
WO2019033659A1 (zh) * | 2017-08-18 | 2019-02-21 | 广州视源电子科技股份有限公司 | 教学板书显示方法、装置、设备及计算机可读存储介质 |
CN107506719A (zh) * | 2017-08-18 | 2017-12-22 | 广州视源电子科技股份有限公司 | 教学板书显示方法、装置、设备及计算机可读存储介质 |
JP2018077473A (ja) * | 2017-11-01 | 2018-05-17 | カシオ計算機株式会社 | 情報表示装置 |
CN107809563A (zh) * | 2017-11-30 | 2018-03-16 | 浙江大华技术股份有限公司 | 一种板书检测系统、方法及装置 |
CN110322086A (zh) * | 2018-03-29 | 2019-10-11 | 施建锋 | 一种基于智能硬件和云平台的教育板书考核系统 |
CN109240494A (zh) * | 2018-08-23 | 2019-01-18 | 京东方科技集团股份有限公司 | 电子显示板的控制方法、计算机可读存储介质和控制系统 |
CN110347993A (zh) * | 2019-07-11 | 2019-10-18 | 深圳云智教育科技有限公司 | 一种板书管理方法及装置 |
CN111626297A (zh) * | 2020-04-13 | 2020-09-04 | 小船出海教育科技(北京)有限公司 | 文字书写质量评价方法、装置、电子设备和记录介质 |
CN112183046A (zh) * | 2020-09-25 | 2021-01-05 | 北京有竹居网络技术有限公司 | 一种手写字的质量评价方法、装置、设备和存储介质 |
Non-Patent Citations (1)
Title |
---|
刘夕冉 等: "课堂板书定量评价指标体系的构建", 《科技资讯》 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114936787A (zh) * | 2022-06-08 | 2022-08-23 | 武汉行已学教育咨询有限公司 | 一种基于人工智能的线上学生教学智能分析管理云平台 |
WO2023245420A1 (zh) * | 2022-06-21 | 2023-12-28 | 北京全道智源教育科技院 | 职业教育课程开发方法、装置及计算机设备 |
CN116798047A (zh) * | 2023-05-08 | 2023-09-22 | 华南师范大学 | 一种基于图像识别的教学板书分析方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN113537801B (zh) | 2023-01-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11790641B2 (en) | Answer evaluation method, answer evaluation system, electronic device, and medium | |
CN113537801B (zh) | 板书处理方法、装置、终端和存储介质 | |
WO2020135472A1 (zh) | 一种错题本生成方法及装置 | |
CN111881310B (zh) | 一种汉字硬笔书写智能指导和评分方法及指导评分系统 | |
CN107273002B (zh) | 手写输入答题方法、终端及计算机可读存储介质 | |
CN112115736B (zh) | 一种基于图像识别的作业批改方法、系统和智能终端 | |
CN110956138B (zh) | 一种基于家教设备的辅助学习方法及家教设备 | |
CN105427696A (zh) | 一种对目标题目所作答案进行判别的方法 | |
WO2023123590A1 (zh) | 基于手写轨迹识别的答题处理方法、手写笔、系统及终端 | |
CN111833861A (zh) | 基于人工智能的事件评估报告生成 | |
CN112396032B (zh) | 书写检测方法、装置、存储介质及电子设备 | |
CN110852204A (zh) | 一种智能远程书法数字化学习评价信息处理系统及方法 | |
CN112580503A (zh) | 一种作业批改方法、装置、设备及存储介质 | |
CN108121987B (zh) | 一种信息处理方法和电子设备 | |
CN112116840B (zh) | 一种基于图像识别的作业批改方法、系统和智能终端 | |
CN113657509B (zh) | 教学训练提升方法、装置、终端和存储介质 | |
CN112528799B (zh) | 一种教学直播方法、装置、计算机设备和存储介质 | |
CN110309754B (zh) | 一种习题采集的方法及系统 | |
CN116758786A (zh) | 书法测评方法、装置、计算机设备及介质 | |
Koushik et al. | Automated marks entry processing in handwritten answer scripts using character recognition techniques | |
CN115294573A (zh) | 作业批改方法、装置、设备及介质 | |
KR102178848B1 (ko) | 증강 현실을 이용한 한자 공부를 위한 전자 장치의 동작 방법 | |
CN111062377B (zh) | 一种题号检测方法、系统、存储介质及电子设备 | |
CN114445744A (zh) | 一种教育视频自动定位方法、装置及存储介质 | |
Rajesh et al. | Digitized exam paper evaluation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |