CN110753256A - 录像回放的方法、装置、存储介质及计算机设备 - Google Patents

录像回放的方法、装置、存储介质及计算机设备 Download PDF

Info

Publication number
CN110753256A
CN110753256A CN201910883502.6A CN201910883502A CN110753256A CN 110753256 A CN110753256 A CN 110753256A CN 201910883502 A CN201910883502 A CN 201910883502A CN 110753256 A CN110753256 A CN 110753256A
Authority
CN
China
Prior art keywords
video
data
text data
target
review
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910883502.6A
Other languages
English (en)
Other versions
CN110753256B (zh
Inventor
陈梦莎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
OneConnect Smart Technology Co Ltd
Original Assignee
OneConnect Smart Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by OneConnect Smart Technology Co Ltd filed Critical OneConnect Smart Technology Co Ltd
Priority to CN201910883502.6A priority Critical patent/CN110753256B/zh
Publication of CN110753256A publication Critical patent/CN110753256A/zh
Application granted granted Critical
Publication of CN110753256B publication Critical patent/CN110753256B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4753—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for user identification, e.g. by entering a PIN or password

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本发明提供了一种录像回放的方法、装置、存储介质及计算机设备，其中，该方法包括：获取摄像设备采集的目标视频，并同时获取演示设备的演示数据；将目标视频和演示数据同步结合生成综合视频；获取用于回看综合视频的回看指令，确定回看指令的开始位置，并在开始位置处播放综合视频。该方法在采集目标视频的同时还采集演示设备的演示数据，从而可以生成比较完整的包含教学情况的综合视频，方便学生后续可以清晰、完整地回看教师的教学情况；采用同步结合的方式生成综合视频，可以有效降低因摄像设备与演示设备时间不同步所导致的问题，可以保证综合视频中目标视频与演示数据的一致同步性。

Description

录像回放的方法、装置、存储介质及计算机设备
技术领域
本发明涉及课堂录像技术领域，特别涉及一种录像回放的方法、装置、存储介质及计算机设备。
背景技术
课堂教学是教师给学生传授知识和技能的全过程，是人才培养过程中进行理论知识传授最基本、最重要的环节。其是教育教学中普遍使用的一种手段，课堂教学质量的优劣对人才培养的质量有着直接的影响。
在目前的教师授课过程中，尤其大班授课，老师很难顾及到所有的学生；在上课过程中，若老师讲解的内容过多、过快，有可能导致学生没有很好的吸收知识点，遗漏知识点。长期下来学生容易出现跟不上课堂的授课内容、成绩下滑等情况。
发明内容
为解决上述问题，本发明提供一种录像回放的方法、装置、存储介质及计算机设备。
根据本发明的第一个方面，提供一种录像回放的方法，包括：
获取摄像设备采集的目标视频，并同时获取演示设备的演示数据；
将所述目标视频和所述演示数据同步结合生成综合视频；
获取用于回看所述综合视频的回看指令，确定所述回看指令的开始位置，并在所述开始位置处播放所述综合视频。
在一种可能的实现方式中，所述将所述目标视频和所述演示数据同步结合生成综合视频包括：
在获取到所述演示设备发送的同步指令之后，生成与当前时间点唯一对应的同步标识，并将所述同步标识分别发送至所述摄像设备和所述演示设备；
接收所述摄像设备反馈的第一响应信号，并接收所述演示设备反馈的第二响应信号，所述第一响应信号包括所述同步标识和所述目标视频的第一时间戳，所述第二响应信号包括所述同步标识和所述演示数据的第二时间戳；
当接收到所述第一响应信号的时间与接收到所述第二响应信号的时间之间的差值小于预设差值时，将所述第一时间戳和所述第二时间戳作为一对同步的时间戳，对所述目标视频和所述演示数据进行同步结合处理。
在一种可能的实现方式中，所述将所述目标视频和所述演示数据同步结合生成综合视频包括：
将所述目标视频和所述演示数据同步结合生成综合视频；同时对所述目标视频或所述综合视频进行语音识别处理，提取出所述目标视频或所述综合视频中的文本格式的数据，并生成资料数据库，所述资料数据库包括所述目标视频或所述综合视频中的文本格式的数据；
在所述将所述目标视频和所述演示数据同步结合生成综合视频之后，该方法还包括：
在获取到用于回看所述综合视频的回看指令时，在所述回看指令的开始位置处显示相应的目标文本数据，所述目标文本数据是所述资料数据库中与所述回看指令相对应的数据。
在一种可能的实现方式中，所述获取用于回看所述综合视频的回看指令包括：
接收用户输入的问题信息，所述问题信息包括问题内容；
查询所述资料数据库中与所述问题内容相匹配的目标文本数据，确定与所述目标文本数据相对应的综合视频，并确定所述目标文本数据在所述综合视频中的位置；
生成具有开始位置的回看指令，所述开始位置为所述目标文本数据在所述综合视频中的位置。
在一种可能的实现方式中，所述查询所述资料数据库中与所述问题内容相匹配的目标文本数据包括：
对所述资料数据库中的所有文本数据进行分段处理，将每一段的文本数据作为一个临时文本数据；
计算所述问题内容与所述临时文本数据之间的相似度，在所述相似度大于预设相似度时，将所述临时文本数据作为有效文本数据；
在所有的所述有效文本数据中查询与所述问题内容相匹配的目标文本数据。
在一种可能的实现方式中，所述计算所述问题内容与所述临时文本数据之间的相似度包括：
对所述问题内容进行分词处理，确定所述问题内容的每个分词wi，i∈[1,m]，m为所述问题内容的分词数量；
确定每个分词wi的权重λi，
Figure BDA0002206600500000031
N为所述临时文本数据的数量，
Figure BDA0002206600500000032
表示包含分词wi的所述临时文本数据的数量，a为非零系数；
确定每个分词wi与临时文本数据Dj之间的相似度sij，并计算所述问题内容与所述临时文本数据Dj之间的相似度Sj；
Figure BDA0002206600500000033
其中，fij表示分词wi在临时文本数据Dj中的词频；Lj表示临时文本数据Dj中的字符数量，
Figure BDA0002206600500000034
表示所有临时文本数据的字符数量的平均值。
在一种可能的实现方式中，所述问题信息还包括所述用户的身份标识；
所述方法还包括：在获取到所述回看指令之后，以所述身份标识为单位分别记录每个所述身份标识的回看行为，并基于所述回看行为和相应的问题内容统计所有用户的回看记录。
根据本发明的第二个方面，提供一种录像回放的装置，包括：
获取模块，用于获取摄像设备采集的目标视频，并同时获取演示设备的演示数据；
同步结合模块，用于将所述目标视频和所述演示数据同步结合生成综合视频；
回看模块，用于获取用于回看所述综合视频的回看指令，确定所述回看指令的开始位置，并在所述开始位置处播放所述综合视频。
根据本申请的第三个方面，提供一种计算机可读存储介质，其上存储有计算机可读指令，该计算机可读指令被处理器执行时实现录像回放的步骤。
根据本申请的第四个方面，提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机可读指令，所述处理器执行所述计算机可读指令时实现录像回放的步骤。
本发明实施例提供的一种录像回放的方法、装置、存储介质及计算机设备，在采集目标视频的同时还采集演示设备的演示数据，从而可以生成比较完整的包含教学情况的综合视频，方便学生后续可以清晰、完整地回看教师的教学情况，为学生提供了可自主学习和复习的素材；同时也为老师记录上课的内容，方便老师回看并做相对应的教学改进。采用同步结合的方式生成综合视频，可以有效降低因摄像设备与演示设备时间不同步所导致的问题，可以保证综合视频中目标视频与演示数据的一致同步性。以文字的形式向学生展示教学内容，可以方便学生更加快速地定位到自己所需的内容。从有效文本数据中查询学生所需的目标文本数据，可以减小查询时的数据基数，减小查询量，提高查询效率。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：
图1为本发明实施例提供的录像回放的方法流程图；
图2为本发明实施例提供的录像回放的方法中，摄像设备与演示设备的同步流程图；
图3为本发明实施例提供的录像回放的方法中，获取用于回看综合视频的回看指令的方法流程图；
图4为本发明实施例提供的录像回放的装置的结构图；
图5为本发明实施例提供的用于执行课堂录像回放方法的计算机设备的结构示意图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。
本发明实施例提供的一种录像回放的方法，参见图1所示，包括：
步骤101：获取摄像设备采集的目标视频，并同时获取演示设备的演示数据。
本发明实施例中，教师在向学生授课的过程中，可以在课堂内架设摄像装置，例如具有摄像功能的相机、摄像头等，且该摄像装置可以采集到教师教学时的视频，即目标视频。该摄像装置可以架设在课堂内，且镜头朝向授课的教师。通过该摄像设备可以采集老师授课时的视频，即目标视频。此外，该摄像设备还可以设置在能够自动转动的云台上，使得摄像设备的镜头始终朝向教师。
同时，随着教学方式的多样化，很多老师会结合辅助性的教学材料(例如教学幻灯片等)在演示设备上进行演示授课，该演示设备是教师授课时所使用的设备，利用该演示设备使得教师可以演示教学材料，例如展示PPT(PowerPoint)课件等。其中，该演示数据可以是演示视频，也可以是演示图片，具体根据实际情况而定。例如，若教师使用的是PPT格式的课件，由于PPT本质上可以看作是多张图片，可以将图片形式的PPT作为演示图片；或者，教师授课时也可以实时编辑PPT(比如标出PPT中的重点、切换下一页等)，也可以将演示设备采集的整个视频作为演示视频。
此外，还可以架设另外一件摄像设备，该摄像设备用于采集学生的听课情况；或者，当学生也有自己使用的课堂设备时，该学生用的摄像设备还可以采集学生所使用的课堂设备中的数据(图片、视频等)，该数据也可以作为一种演示数据。
步骤102：将目标视频和演示数据同步结合生成综合视频。
传统课堂录制方式只是简单的录制目标视频，学生在回看传统的目标视频时，并不能看清楚演示设备的内容，比如不能看清楚投影仪所投出的演示内容。本发明实施例中，将目标视频和演示数据结合为一个整体，生成最终的综合视频，方便学生后续查看清晰的演示数据，比如老师课堂上所使用的课件等。其中，可以将目标视频和演示数据拼接成综合视频，例如综合视频的左半部分是目标视频，右半部分是演示数据等。
此外，由于目标视频和演示数据是两个不同的设备分别采集的，二者容易存在时间不同步的问题，导致最后结合生成的综合视频中，目标视频和演示数据不同步。本发明实施例中，采用同步结合的方式生成综合视频，以有效降低目标视频和演示数据不同步的影响。具体的，本实施例中通过一个唯一的标识实现摄像设备与演示设备的同步，参见图2所示，该同步过程包括：
步骤1021：在获取到演示设备发送的同步指令之后，生成与当前时间点唯一对应的同步标识，并将同步标识分别发送至摄像设备和演示设备。
本发明实施例中，由于摄像设备采集目标视频时，可以全程不存在任何操作；而老师使用演示设备时，需要对演示设备进行操作，例如切换下一页PPT等，老师对演示设备所触发的操作可以生成该同步指令，即老师操作演示设备的同时，演示设备生成同步指令，之后演示设备将该同步指令发送至本地设备，由本地设备生成同步标识。其中，本地设备具有自己的时钟系统，对于本地设备来说，每个时间点所生成的同步标识是不同的，以在存在大量同步指令时对不同的同步指令进行区分，在生成同步标识后即可将该同步标识分别发送至摄像设备和演示设备。
步骤1022：接收摄像设备反馈的第一响应信号，并接收演示设备反馈的第二响应信号，第一响应信号包括同步标识和目标视频的第一时间戳，第二响应信号包括同步标识和演示数据的第二时间戳。
本实施例中，摄像设备接收到同步标识后，确定接收到该同步标识的时间所对应的目标视频的第一时间戳，之后将包含该第一时间戳和该同步标识的第一响应信号反馈至本地设备。例如，对于摄像设备的时间系统来说，若在时间点A接收到该同步标识，则可以确定该时间点A对应目标视频的哪一帧图像，该帧图像所对应的时间戳即为第一时间戳。同理，演示设备接收到该同步标识后，确定接收到该同步标识的时间所对应的演示数据的第二时间戳，之后可以将包含第二时间戳和该同步标识的第二响应信号反馈至本地设备。
步骤1023：当接收到第一响应信号的时间与接收到第二响应信号的时间之间的差值小于预设差值时，将第一时间戳和第二时间戳作为一对同步的时间戳，对目标视频和演示数据进行同步结合处理。
本发明实施例中，以本地设备的时间系统作为基准来进行同步结合。具体的，由于第一响应信号和第二响应信号均包含相同的同步标识，则第一响应信号和第二响应信号是一对信号，当接收到第一响应信号的时间与接收到第二响应信号的时间之间的差值小于预设差值时，则说明本地设备与摄像设备之间的延迟、本地设备与演示设备之间的延迟几乎相同，此时即可进行同步结合处理。具体的，第一时间戳和第二时间戳作为一对同步的时间戳，将目标视频中第一时间戳的内容与演示数据中第二时间戳的内容进行同步结合处理，从而生成综合视频。
需要说明的是，本实施例中的“同步指令”用于对摄像设备和演示设备进行时钟同步，并不用于限定只有在接收到“同步指令”时才将目标视频和演示数据同步结合生成综合视频，即在没有接收到该同步指令是仍然可以执行同步结合生成综合视频的过程。本实施例中，利用该“同步指令”可以确定目标视频的第一时间戳与演示数据的第二时间戳之间是无延迟的，此时可以无延迟同步第一时间戳对应的目标视频和第二时间戳对应的演示数据。
步骤103：获取用于回看综合视频的回看指令，确定回看指令的开始位置，并在开始位置处播放综合视频。
本发明实施例中，综合视频可以比较完整地记录课堂中的情况，在生成综合视频后可以存储该综合视频，供其他人之后随时观看。具体的，当用户(例如学生)有不同的地方时，可以回看相应的综合视频，此时用户通过输入回看指令即可回看相应的综合视频。其中，该综合视频可以上传至服务器，供学生随时查看。
可选的，由于老师讲课过程中并不一定是全程都在讲授知识，回看播放该综合视频时，可以基于综合视频的语音频率实时调整播放速度。例如，当综合视频中没有声音，则说明老师此时并未讲授知识，此时可以自动加快播放速度。
本发明实施例提供的一种录像回放的方法，在采集目标视频的同时还采集演示设备的演示数据，从而可以生成比较完整的包含教学情况的综合视频，方便学生后续可以清晰、完整地回看教师的教学情况，为学生提供了可自主学习和复习的素材；同时也为老师记录上课的内容，方便老师回看并做相对应的教学改进。采用同步结合的方式生成综合视频，可以有效降低因摄像设备与演示设备时间不同步所导致的问题，可以保证综合视频中目标视频与演示数据的一致同步性。
在上述实施例的基础上，在获取到综合视频后，还可以生成文本格式的教学数据。具体的，步骤102“将目标视频和演示数据同步结合生成综合视频”包括：
步骤A1：将目标视频和演示数据同步结合生成综合视频；同时对目标视频或综合视频进行语音识别处理，提取出目标视频或综合视频中的文本格式的数据，并生成资料数据库，资料数据库包括目标视频或综合视频中的文本格式的数据。
本发明实施例中，目标视频中记录有教师授课过程中的声音，同样的，由于综合视频是基于该目标视频生成的，该综合视频中也包含教师授课过程的声音，此时对目标视频或综合视频进行语音识别处理，即可以文本的形式表示教师的授课内容，即可以提取出文本格式的数据，并生成相应的资料数据库。其中，该资料数据库可以包括目标视频或综合视频中的文本格式的数据，还可以包含其他教学资料等。
此外，在步骤102“将目标视频和演示数据同步结合生成综合视频”之后，该方法还包括：
步骤A2：在获取到用于回看综合视频的回看指令时，在回看指令的开始位置处显示相应的目标文本数据，目标文本数据是资料数据库中与回看指令相对应的数据。
本发明实施例中，综合视频与从中提取出来的目标文本数据二者之间是有关联的，在回看综合视频的同时，还可以显示相应的目标文本数据。例如，回看指令用于回看综合视频在时间节点A处的内容，此时即可从资料数据库中提取出与该时间节点A所对应的目标文本数据，并同时显示该目标文本数据；以文字的形式向学生展示教学内容，可以方便学生更加快速地定位到自己所需的内容。
在上述实施例的基础上，用户可以直接输入回看指令，或者，用户可以通过提问的方式间接输入回看指令。本实施例中，参见图3所示，上述步骤103“获取用于回看综合视频的回看指令”包括：
步骤1031：接收用户输入的问题信息，问题信息包括问题内容。
步骤1032：查询资料数据库中与问题内容相匹配的目标文本数据，确定与目标文本数据相对应的综合视频，并确定目标文本数据在综合视频中的位置。
步骤1033：生成具有开始位置的回看指令，开始位置为目标文本数据在综合视频中的位置。
本发明实施例中，在获取到综合视频后，还可以基于该综合视频实现智能问答功能。具体的，当用户需要查询问题时，即可将问题内容提交至本地设备，用户可以手动输入该问题内容，或者以语音的方式输入问题内容。在获取到问题内容后，即可在资料数据库中查询到与该问题内容相关的数据，即目标文本数据；由于目标文本数据与综合视频是具有关联关系的，此时基于目标文本数据在综合视频中的位置即可生成相应的回看指令，并向用户回放相应的综合视频。其中，步骤1033是由本地设备自行执行的，该回看指令可以是一个触发指令，本地设备检测到该触发指令后即可触发回放综合视频的动作。
在上述实施例的基础上，上述1032“查询资料数据库中与问题内容相匹配的目标文本数据”具体包括：
步骤B1：对资料数据库中的所有文本数据进行分段处理，将每一段的文本数据作为一个临时文本数据。
步骤B2：计算问题内容与临时文本数据之间的相似度，在相似度大于预设相似度时，将临时文本数据作为有效文本数据。
步骤B3：在所有的有效文本数据中查询与问题内容相匹配的目标文本数据。
由于存在多个老师，且每个老师会教授很多内容，即会生成较多的综合视频和相应的目标文本数据，若直接根据学生的问题内容进行查询检索，查询量过大，效率较低。本发明实施例中，从海量的文本数据中选取适合该问题内容的数据，即有效文本数据，之后从该有效文本数据中即可提取出相应的回复信息。具体的，本申请中将所有的文本数据进行分段处理，分别确定每一段文本数据(即临时文本数据)与该问题内容之间的相似度，将相似度足够大的临时文本数据作为有效文本数据，之后从有效文本数据中查询学生所需的目标文本数据。该方式可以减小查询时的数据基数，减小查询量，提高查询效率。
可选的，该问题信息中还可以包含用户的身份标识，此时也可以基于用户的身份标识选取出有效文本数据。具体的，根据该用户的身份标识可以确定与该用户相符的教学信息(例如老师、年级等)，则将与该教学信息相关的文本数据作为有效文本数据。例如，学生A是老师B的学生，则该学生A查询问题时，可以优先将与老师B相关的文本数据(比如基于老师B的综合视频所确定的文本数据等)作为有效文本数据。
此外，若确定的目标文本数据并不是学生所需的内容，则可以扩大查询范围，即扩大有效文本数据，之后重新确定目标文本数据，直至查询到学生所需的内容，或者直至以整个资料数据库作为查询样本进行了查询。
在上述实施例的基础上，步骤B2“计算问题内容与临时文本数据之间的相似度”包括：
步骤B21：对问题内容进行分词处理，确定问题内容的每个分词wi，i∈[1,m]，m为问题内容的分词数量。
步骤B22：确定每个分词wi的权重λi，
Figure BDA0002206600500000111
N为临时文本数据的数量，
Figure BDA0002206600500000113
表示包含分词wi的临时文本数据的数量，a为非零系数。
其中，通过非零系数a，可以避免
Figure BDA0002206600500000112
为零导致分母为零。本实施例中，分词wi在越多的临时文本数据中出现，则说明该分词wi越有可能是常用字(比如：是、的等)，其权重越低。
步骤B23：确定每个分词wi与临时文本数据Dj之间的相似度sij，并计算问题内容与临时文本数据Dj之间的相似度Sj；
其中，fij表示分词wi在临时文本数据Dj中的词频；Lj表示临时文本数据Dj中的字符数量，
Figure BDA0002206600500000122
表示所有临时文本数据的字符数量的平均值。
本实施例中，词频越大，说明二者越相似，相似度越大；临时文本数据Dj中的字符数量越多，说明该临时文本数据中越可能包含无效的分词wi，故二者之间的相似度越小。本发明实施例中，基于分词与临时文本数据之间的相似度以及词频可以合理确定该问题内容与临时文本数据之间的相似度，从而可以选出与该问题内容比较相关的文本数据，即有效文本数据，之后从有效文本数据中查询学生所需的目标文本数据，可以减小查询时的数据基数，减小查询量，提高查询效率。
在上述实施例的基础上，该问题信息还包括用户的身份标识。同时，该方法还包括：在获取到回看指令之后，以身份标识为单位分别记录每个身份标识的回看行为，并基于回看行为和相应的问题内容统计所有用户的回看记录。
本发明实施例中，在确定学生的身份标识后，还可以以身份标识为单位，记录每个学生的回看行为，即可以得知学生问了哪些问题，并基于该回看行为生成该学生的行为数据(例如用户画像)，并进行统计；此外，还可以统计某个老师所有学生的行为数据，从而可以分析出学生的高频问题、疑难点，方便老师有针对性的给出教学优化方案。
本发明实施例提供的一种录像回放的方法，在采集目标视频的同时还采集演示设备的演示数据，从而可以生成比较完整的包含教学情况的综合视频，方便学生后续可以清晰、完整地回看教师的教学情况，为学生提供了可自主学习和复习的素材；同时也为老师记录上课的内容，方便老师回看并做相对应的教学改进。采用同步结合的方式生成综合视频，可以有效降低因摄像设备与演示设备时间不同步所导致的问题，可以保证综合视频中目标视频与演示数据的一致同步性。以文字的形式向学生展示教学内容，可以方便学生更加快速地定位到自己所需的内容。从有效文本数据中查询学生所需的目标文本数据，可以减小查询时的数据基数，减小查询量，提高查询效率。
以上详细介绍了录像回放的方法流程，该方法也可以通过相应的装置实现，下面详细介绍该装置的结构和功能。
本发明实施例提供的一种录像回放的装置，参见图4所示，包括：
获取模块401，用于获取摄像设备采集的目标视频，并同时获取演示设备的演示数据；
同步结合模块402，用于将所述目标视频和所述演示数据同步结合生成综合视频；
回看模块403，用于获取用于回看所述综合视频的回看指令，确定所述回看指令的开始位置，并在所述开始位置处播放所述综合视频。
在上述实施例的基础上，所述同步结合模块102包括：
同步标识单元，用于在获取到所述演示设备发送的同步指令之后，生成与当前时间点唯一对应的同步标识，并将所述同步标识分别发送至所述摄像设备和所述演示设备；
响应单元，用于接收所述摄像设备反馈的第一响应信号，并接收所述演示设备反馈的第二响应信号，所述第一响应信号包括所述同步标识和所述目标视频的第一时间戳，所述第二响应信号包括所述同步标识和所述演示数据的第二时间戳；
同步结合单元，用于当接收到所述第一响应信号的时间与接收到所述第二响应信号的时间之间的差值小于预设差值时，将所述第一时间戳和所述第二时间戳作为一对同步的时间戳，对所述目标视频和所述演示数据进行同步结合处理。
在上述实施例的基础上，所述同步结合模块402具体用于：
将所述目标视频和所述演示数据同步结合生成综合视频；同时对所述目标视频或所述综合视频进行语音识别处理，提取出所述目标视频或所述综合视频中的文本格式的数据，并生成资料数据库，所述资料数据库包括所述目标视频或所述综合视频中的文本格式的数据；
所述回看模块403还用于在获取到用于回看所述综合视频的回看指令时，在所述回看指令的开始位置处显示相应的目标文本数据，所述目标文本数据是所述资料数据库中与所述回看指令相对应的数据。
在上述实施例的基础上，所述回看模块403包括：
问题接收单元，用于接收用户输入的问题信息，所述问题信息包括问题内容；
查询单元，用于查询所述资料数据库中与所述问题内容相匹配的目标文本数据，确定与所述目标文本数据相对应的综合视频，并确定所述目标文本数据在所述综合视频中的位置；
回看指令单元，用于生成具有开始位置的回看指令，所述开始位置为所述目标文本数据在所述综合视频中的位置。
在上述实施例的基础上，所述查询单元查询所述资料数据库中与所述问题内容相匹配的目标文本数据包括：
对所述资料数据库中的所有文本数据进行分段处理，将每一段的文本数据作为一个临时文本数据；
计算所述问题内容与所述临时文本数据之间的相似度，在所述相似度大于预设相似度时，将所述临时文本数据作为有效文本数据；
在所有的所述有效文本数据中查询与所述问题内容相匹配的目标文本数据。
在上述实施例的基础上，所述查询单元计算所述问题内容与所述临时文本数据之间的相似度包括：
对所述问题内容进行分词处理，确定所述问题内容的每个分词wi，i∈[1,m]，m为所述问题内容的分词数量；
确定每个分词wi的权重λi，N为所述临时文本数据的数量，
Figure BDA0002206600500000152
表示包含分词wi的所述临时文本数据的数量，a为非零系数；
确定每个分词wi与临时文本数据Dj之间的相似度sij，并计算所述问题内容与所述临时文本数据Dj之间的相似度Sj；
Figure BDA0002206600500000153
其中，fij表示分词wi在临时文本数据Dj中的词频；Lj表示临时文本数据Dj中的字符数量，
Figure BDA0002206600500000154
表示所有临时文本数据的字符数量的平均值。
在上述实施例的基础上，所述问题信息还包括所述用户的身份标识；
所述装置还包括：记录模块；所述记录模块用于在获取到所述回看指令之后，以所述身份标识为单位分别记录每个所述身份标识的回看行为，并基于所述回看行为和相应的问题内容统计所有用户的回看记录。
本发明实施例提供的一种录像回放的装置，在采集目标视频的同时还采集演示设备的演示数据，从而可以生成比较完整的包含教学情况的综合视频，方便学生后续可以清晰、完整地回看教师的教学情况，为学生提供了可自主学习和复习的素材；同时也为老师记录上课的内容，方便老师回看并做相对应的教学改进。采用同步结合的方式生成综合视频，可以有效降低因摄像设备与演示设备时间不同步所导致的问题，可以保证综合视频中目标视频与演示数据的一致同步性。以文字的形式向学生展示教学内容，可以方便学生更加快速地定位到自己所需的内容。从有效文本数据中查询学生所需的目标文本数据，可以减小查询时的数据基数，减小查询量，提高查询效率。
本申请实施例还提供了一种计算机存储介质，所述计算机存储介质存储有计算机可执行指令，其包含用于执行上述录像回放的方法的程序，该计算机可执行指令可执行上述任意方法实施例中的方法。
其中，所述计算机存储介质可以是计算机能够存取的任何可用介质或数据存储设备，包括但不限于磁性存储器(例如软盘、硬盘、磁带、磁光盘(MO)等)、光学存储器(例如CD、DVD、BD、HVD等)、以及半导体存储器(例如ROM、EPROM、EEPROM、非易失性存储器(NANDFLASH)、固态硬盘(SSD))等。
图5示出了本发明的另一个实施例的一种计算机设备的结构框图。所述计算机设备1100可以是具备计算能力的主机服务器、个人计算机PC、或者可携带的便携式计算机或终端等。本发明具体实施例并不对计算机设备的具体实现做限定。
该计算机设备1100包括至少一个处理器(processor)1110、通信接口(Communications Interface)1120、存储器(memory array)1130和总线1140。其中，处理器1110、通信接口1120、以及存储器1130通过总线1140完成相互间的通信。
通信接口1120用于与网元通信，其中网元包括例如虚拟机管理中心、共享存储等。
处理器1110用于执行程序。处理器1110可能是一个中央处理器CPU，或者是专用集成电路ASIC(Application Specific Integrated Circuit)，或者是被配置成实施本发明实施例的一个或多个集成电路。
存储器1130用于可执行的指令。存储器1130可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。存储器1130也可以是存储器阵列。存储器1130还可能被分块，并且所述块可按一定的规则组合成虚拟卷。存储器1130存储的指令可被处理器1110执行，以使处理器1110能够执行上述任意方法实施例中的方法。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种录像回放的方法，其特征在于，包括：
获取摄像设备采集的目标视频，并同时获取演示设备的演示数据；
将所述目标视频和所述演示数据同步结合生成综合视频；
获取用于回看所述综合视频的回看指令，确定所述回看指令的开始位置，并在所述开始位置处播放所述综合视频。
2.根据权利要求1所述的方法，其特征在于，所述将所述目标视频和所述演示数据同步结合生成综合视频包括：
在获取到所述演示设备发送的同步指令之后，生成与当前时间点唯一对应的同步标识，并将所述同步标识分别发送至所述摄像设备和所述演示设备；
接收所述摄像设备反馈的第一响应信号，并接收所述演示设备反馈的第二响应信号，所述第一响应信号包括所述同步标识和所述目标视频的第一时间戳，所述第二响应信号包括所述同步标识和所述演示数据的第二时间戳；
当接收到所述第一响应信号的时间与接收到所述第二响应信号的时间之间的差值小于预设差值时，将所述第一时间戳和所述第二时间戳作为一对同步的时间戳，对所述目标视频和所述演示数据进行同步结合处理。
3.根据权利要求1所述的方法，其特征在于，所述将所述目标视频和所述演示数据同步结合生成综合视频，包括：
将所述目标视频和所述演示数据同步结合生成综合视频；同时对所述目标视频或所述综合视频进行语音识别处理，提取出所述目标视频或所述综合视频中的文本格式的数据，并生成资料数据库，所述资料数据库包括所述目标视频或所述综合视频中的文本格式的数据；
在所述将所述目标视频和所述演示数据同步结合生成综合视频之后，该方法还包括：
在获取到用于回看所述综合视频的回看指令时，在所述回看指令的开始位置处显示相应的目标文本数据，所述目标文本数据是所述资料数据库中与所述回看指令相对应的数据。
4.根据权利要求3所述的方法，其特征在于，所述获取用于回看所述综合视频的回看指令包括：
接收用户输入的问题信息，所述问题信息包括问题内容；
查询所述资料数据库中与所述问题内容相匹配的目标文本数据，确定与所述目标文本数据相对应的综合视频，并确定所述目标文本数据在所述综合视频中的位置；
生成具有开始位置的回看指令，所述开始位置为所述目标文本数据在所述综合视频中的位置。
5.根据权利要求4所述的方法，其特征在于，所述查询所述资料数据库中与所述问题内容相匹配的目标文本数据包括：
对所述资料数据库中的所有文本数据进行分段处理，将每一段的文本数据作为一个临时文本数据；
计算所述问题内容与所述临时文本数据之间的相似度，在所述相似度大于预设相似度时，将所述临时文本数据作为有效文本数据；
在所有的所述有效文本数据中查询与所述问题内容相匹配的目标文本数据。
6.根据权利要求5所述的方法，其特征在于，所述计算所述问题内容与所述临时文本数据之间的相似度包括：
对所述问题内容进行分词处理，确定所述问题内容的每个分词wi，i∈[1,m]，m为所述问题内容的分词数量；
确定每个分词wi的权重λi，
Figure FDA0002206600490000021
N为所述临时文本数据的数量，
Figure FDA0002206600490000022
表示包含分词wi的所述临时文本数据的数量，a为非零系数；
确定每个分词wi与临时文本数据Dj之间的相似度sij，并计算所述问题内容与所述临时文本数据Dj之间的相似度Sj；
Figure FDA0002206600490000031
其中，fij表示分词wi在临时文本数据Dj中的词频；Lj表示临时文本数据Dj中的字符数量，表示所有临时文本数据的字符数量的平均值。
7.根据权利要求4-6任一所述的方法，其特征在于，所述问题信息还包括所述用户的身份标识；
所述方法还包括：在获取到所述回看指令之后，以所述身份标识为单位分别记录每个所述身份标识的回看行为，并基于所述回看行为和相应的问题内容统计所有用户的回看记录。
8.一种录像回放的装置，其特征在于，包括：
获取模块，用于获取摄像设备采集的目标视频，并同时获取演示设备的演示数据；
同步结合模块，用于将所述目标视频和所述演示数据同步结合生成综合视频；
回看模块，用于获取用于回看所述综合视频的回看指令，确定所述回看指令的开始位置，并在所述开始位置处播放所述综合视频。
9.一种计算机可读存储介质，其上存储有计算机可读指令，其特征在于，所述计算机可读指令被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
10.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机可读指令，其特征在于，所述处理器执行所述计算机可读指令时实现权利要求1至7中任一项所述方法的步骤。
CN201910883502.6A 2019-09-18 2019-09-18 录像回放的方法、装置、存储介质及计算机设备 Active CN110753256B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910883502.6A CN110753256B (zh) 2019-09-18 2019-09-18 录像回放的方法、装置、存储介质及计算机设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910883502.6A CN110753256B (zh) 2019-09-18 2019-09-18 录像回放的方法、装置、存储介质及计算机设备

Publications (2)

Publication Number Publication Date
CN110753256A true CN110753256A (zh) 2020-02-04
CN110753256B CN110753256B (zh) 2022-09-16

Family

ID=69276650

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910883502.6A Active CN110753256B (zh) 2019-09-18 2019-09-18 录像回放的方法、装置、存储介质及计算机设备

Country Status (1)

Country Link
CN (1) CN110753256B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112218024A (zh) * 2020-09-17 2021-01-12 浙江大华技术股份有限公司 课件视频生成、通道组合信息的确定方法及装置
CN112637687A (zh) * 2020-12-29 2021-04-09 平安科技（深圳）有限公司 基于埋点行为的视频回放方法、装置、计算机设备及介质
CN112702617A (zh) * 2020-12-15 2021-04-23 湖南新云网科技有限公司 直播视频页面的缓存方法、显示方法及相关设备
CN112866610A (zh) * 2021-01-07 2021-05-28 卓望数码技术（深圳）有限公司 视频录制方法、电子设备及存储介质
CN114885187A (zh) * 2022-06-23 2022-08-09 深圳市必提教育科技有限公司 一种在线教育直播回放方法和系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080177730A1 (en) * 2007-01-22 2008-07-24 Fujitsu Limited Recording medium storing information attachment program, information attachment apparatus, and information attachment method
CN106326343A (zh) * 2016-08-05 2017-01-11 重庆锐畅科技有限公司 一种基于音视频数据关联同步的电子白板数据共享系统
CN107920280A (zh) * 2017-03-23 2018-04-17 广州思涵信息科技有限公司 视频、讲义ppt和语音内容精准匹配的方法和系统
CN108563636A (zh) * 2018-04-04 2018-09-21 广州杰赛科技股份有限公司 提取文本关键词的方法、装置、设备及存储介质
US10417695B1 (en) * 2016-04-15 2019-09-17 Amazon Technologies, Inc. Method and system for displaying items provided by a merchant

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080177730A1 (en) * 2007-01-22 2008-07-24 Fujitsu Limited Recording medium storing information attachment program, information attachment apparatus, and information attachment method
US10417695B1 (en) * 2016-04-15 2019-09-17 Amazon Technologies, Inc. Method and system for displaying items provided by a merchant
CN106326343A (zh) * 2016-08-05 2017-01-11 重庆锐畅科技有限公司 一种基于音视频数据关联同步的电子白板数据共享系统
CN107920280A (zh) * 2017-03-23 2018-04-17 广州思涵信息科技有限公司 视频、讲义ppt和语音内容精准匹配的方法和系统
CN108563636A (zh) * 2018-04-04 2018-09-21 广州杰赛科技股份有限公司 提取文本关键词的方法、装置、设备及存储介质

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112218024A (zh) * 2020-09-17 2021-01-12 浙江大华技术股份有限公司 课件视频生成、通道组合信息的确定方法及装置
CN112702617A (zh) * 2020-12-15 2021-04-23 湖南新云网科技有限公司 直播视频页面的缓存方法、显示方法及相关设备
CN112637687A (zh) * 2020-12-29 2021-04-09 平安科技（深圳）有限公司 基于埋点行为的视频回放方法、装置、计算机设备及介质
CN112637687B (zh) * 2020-12-29 2022-10-14 平安科技（深圳）有限公司 基于埋点行为的视频回放方法、装置、计算机设备及介质
CN112866610A (zh) * 2021-01-07 2021-05-28 卓望数码技术（深圳）有限公司 视频录制方法、电子设备及存储介质
CN112866610B (zh) * 2021-01-07 2023-08-04 卓望数码技术（深圳）有限公司 视频录制方法、电子设备及存储介质
CN114885187A (zh) * 2022-06-23 2022-08-09 深圳市必提教育科技有限公司 一种在线教育直播回放方法和系统
CN114885187B (zh) * 2022-06-23 2023-08-08 深圳市必提教育科技有限公司 一种在线教育直播回放方法和系统

Also Published As

Publication number Publication date
CN110753256B (zh) 2022-09-16

Similar Documents

Publication Publication Date Title
CN110753256B (zh) 录像回放的方法、装置、存储介质及计算机设备
CN109359215B (zh) 视频智能推送方法和系统
CN109698920B (zh) 一种基于互联网教学平台的跟随教学系统
WO2019095447A1 (zh) 一种具有远程评价功能的跟随教学方法
CN209980508U (zh) 一种智慧黑板，及智慧教室的教学系统
WO2019095446A1 (zh) 一种具有语音评价功能的跟随教学系统
WO2021000909A1 (zh) 一种课程优化方法、装置和系统
CN111611434B (zh) 一种线上课程互动方法及互动平台
CN109275046A (zh) 一种基于双视频采集的教学数据标注方法
CN111522970A (zh) 习题推荐方法、装置、设备及存储介质
US8014716B2 (en) Information management server and information distribution system
CN109697906B (zh) 一种基于互联网教学平台的跟随教学方法
CN106874382A (zh) 一种教学资源共享系统
CN108765229B (zh) 基于大数据与人工智能的学习表现评价方法和机器人系统
CN113194328A (zh) 一种智慧课堂课件标注答疑的系统及方法
CN109064787B (zh) 一种点读设备
CN113254708A (zh) 一种视频搜索方法、装置、计算机设备及存储介质
CN110795055A (zh) 基于互动课堂的信息处理方法及课堂平板
CN113391745A (zh) 网络课程的重点内容处理方法、装置、设备及存储介质
CN111522992A (zh) 题目入库方法、装置、设备及存储介质
CN111417026A (zh) 一种基于书写内容的在线学习方法及装置
CN110163777A (zh) 一种公益支教管理方法及装置
CN108805770A (zh) 基于大数据与人工智能的教学内容画像方法和机器人系统
CN108776794B (zh) 基于大数据与人工智能的教学效果画像方法和机器人系统
CN117033665B (zh) 一种图谱知识点与视频的对齐方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant