CN113556599A - 视频教学方法、装置、电视机及存储介质 - Google Patents
视频教学方法、装置、电视机及存储介质 Download PDFInfo
- Publication number
- CN113556599A CN113556599A CN202110771036.XA CN202110771036A CN113556599A CN 113556599 A CN113556599 A CN 113556599A CN 202110771036 A CN202110771036 A CN 202110771036A CN 113556599 A CN113556599 A CN 113556599A
- Authority
- CN
- China
- Prior art keywords
- teaching
- video
- image
- human body
- preset
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 54
- 230000008569 process Effects 0.000 abstract description 16
- 238000012552 review Methods 0.000 abstract description 5
- 210000000746 body region Anatomy 0.000 description 10
- 230000009471 action Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000036544 posture Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
- G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Abstract
本发明属于电视机技术领域,公开了一种视频教学方法、装置、电视机及存储介质。该方法包括:接收用户的语音指令;当所述语音指令为预设指令时,获取摄像视频,并将所述摄像视频显示在显示窗口的第一预设区域;获取预设教学视频,并将所述预设教学视频显示在所述显示窗口的第二预设区域;将所述第一预设区域中的视频图像与所述第二预设区域中的教学图像进行对比,生成对比结果;根据所述对比结果、所述摄像视频及所述预设教学视频生成教学回放视频;将所述教学回放视频展示在回放窗口,以使用户根据所述教学回放视频提升自学进度。通过上述方式,用户可回看自己的学习过程,对自己的学习有更好的了解,以便有针对性的练习,极大提升了用户体验感。
Description
技术领域
本发明涉及电视机技术领域,尤其涉及一种视频教学方法、装置、电视机及存储介质。
背景技术
电视机作为客厅娱乐的中心设备已经不可取代,随着电视机技术的不断进步与发展,电视机功能越来越多、形态也越来越多,娱乐、学习、健身、拍摄几大块功能尤为突出,然而我们在利用电视健身APP学习瑜伽、舞蹈等时,往往只能跟着视频里的动作学习,但学的好不好、动作有没到位自己都不知道,从而会降低自学的质量,也降低了用户体验。
上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供一种视频教学方法、装置、电视机及存储介质,旨在解决现有技术如何在使用电视进行健身教学时更加智能化的技术问题。
为实现上述目的,本发明提供了一种视频教学方法,所述方法包括以下步骤:
接收用户的语音指令;
当所述语音指令为预设指令时,获取摄像视频,并将所述摄像视频显示在显示窗口的第一预设区域;
获取预设教学视频,并将所述预设教学视频显示在所述显示窗口的第二预设区域;
将所述第一预设区域中的视频图像与所述第二预设区域中的教学图像进行对比,生成对比结果;
根据所述对比结果、所述摄像视频及所述预设教学视频生成教学回放视频;
将所述教学回放视频展示在回放窗口,以使用户根据所述教学回放视频提升自学进度。
可选地,所述将所述第一预设区域中的图将所述第一预设区域中的视频图像与所述第二预设区域中的教学图像进行对比,生成对比结果的步骤,包括:
识别所述视频图像中的人体区域以及所述教学图像中的教学人体区域,得到人体区域图像以及教学人体区域图像;
根据所述人体区域图像与预设背景生成人体图像,并根据所述教学人体区域图像与所述预设背景生成教学人体图像;
将所述人体图像与所述教学人体图像进行对比,生成对比结果。
可选地,所述将所述人体图像与所述教学人体图像进行对比,生成对比结果的步骤,包括:
将所述人体图像以及所述教学人体图像分别转化为预设尺寸的缩放人体图像以及缩放教学人体图像;
将所述缩放人体图像以及所述缩放教学人体图像分别转化为灰度缩放人体图像以及灰度缩放教学人体图像;
确定所述灰度缩放人体图像以及所述灰度缩放教学人体图像的相似度,根据所述相似度生成对比结果。
可选地,所述确定所述灰度缩放人体图像以及所述灰度缩放教学人体图像的相似度,根据所述相似度生成对比结果的步骤,包括:
确定所述灰度缩放人体图像的平均灰度值,并确定所述灰度缩放教学人体图像的教学平均灰度值;
将所述灰度缩放人体图像中各像素的灰度值与所述平均灰度值进行比较,得到图像指纹;
将所述灰度缩放教学人体图像中各像素的灰度值与所述教学平均灰度值进行比较,得到教学图像指纹;
确定所述图像指纹与所述教学图像指纹的汉明距离,并根据所述汉明距离确定相似度;
根据所述相似度确定相似度评分,并根据所述相似度评分生成对比结果。
可选地,所述根据所述对比结果、所述摄像视频及所述预设教学视频生成教学回放视频的步骤,包括:
根据对比结果确定相似度评分低于预设评分的目标视频图像;
确定所述目标视频图像对应的目标教学图像;
确定所述目标视频图像在所述摄像视频中的目标时刻,并确定所述目标教学图像在所述预设教学视频的目标教学时刻;
根据所述目标时刻以及所述目标教学时刻确定所述摄像视频以及所述所述预设教学视频中的回放重点,得到教学回放视频。
可选地,所述将所述教学回放视频展示在回放窗口,以使用户根据所述教学回放视频提升自学进度的步骤之后,还包括:
将所述教学回放视频发送至云端服务器,以使用户在不同用户设备上回放所述教学回放视频。
可选地,所述接收用户的语音指令的步骤之前,还包括:
当接收到遥控指令时,判断所述遥控指令是否为预设遥控指令;
当所述遥控指令为预设遥控指令时,获取摄像视频,并将所述摄像视频显示在所述显示窗口的第一预设区域。
此外,为实现上述目的,本发明还提出一种视频教学装置,所述视频教学装置包括:
接收模块,用于接收用户的语音指令;
获取模块,用于当所述语音指令为预设指令时,获取摄像视频,并将所述摄像视频显示在显示窗口的第一预设区域;
显示模块,用于获取预设教学视频,并将所述预设教学视频显示在所述显示窗口的第二预设区域;
对比模块,用于将所述第一预设区域中的视频图像与所述第二预设区域中的教学图像进行对比,生成对比结果;
生成模块,用于根据所述对比结果、所述摄像视频及所述预设教学视频生成教学回放视频;
回放模块,用于将所述教学回放视频展示在回放窗口,以使用户根据所述教学回放视频提升自学进度。
此外,为实现上述目的,本发明还提出一种电视机,所述电视机包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的视频教学程序,所述视频教学程序配置为实现如上文所述的视频教学方法的步骤。
此外,为实现上述目的,本发明还提出一种存储介质,所述存储介质上存储有视频教学程序,所述视频教学程序被处理器执行时实现如上文所述的视频教学方法的步骤。
本发明通过接收用户的语音指令;当所述语音指令为预设指令时,获取摄像视频,并将所述摄像视频显示在显示窗口的第一预设区域;获取预设教学视频,并将所述预设教学视频显示在所述显示窗口的第二预设区域;将所述第一预设区域中的视频图像与所述第二预设区域中的教学图像进行对比,生成对比结果;根据所述对比结果、所述摄像视频及所述预设教学视频生成教学回放视频;将所述教学回放视频展示在回放窗口,以使用户根据所述教学回放视频提升自学进度。通过上述方式,用户可回看自己的学习过程,对自己的学习有更好的了解,以便有针对性的练习,极大提升了用户体验感。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的电视机的结构示意图;
图2为本发明视频教学方法第一实施例的流程示意图;
图3为本发明视频教学方法一实施例的整体流程图;
图4为本发明视频教学方法第二实施例的流程示意图;
图5为本发明视频教学装置第一实施例的结构框图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的电视机结构示意图。
如图1所示,该电视机可以包括:处理器1001,例如中央处理器(CentralProcessing Unit,CPU),通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(Wireless-Fidelity,Wi-Fi)接口)。存储器1005可以是高速的随机存取存储器(RandomAccess Memory,RAM)存储器,也可以是稳定的非易失性存储器(Non-Volatile Memory,NVM),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的结构并不构成对电视机的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及视频教学程序。
在图1所示的电视机中,网络接口1004主要用于与网络服务器进行数据通信;用户接口1003主要用于与用户进行数据交互;本发明电视机中的处理器1001、存储器1005可以设置在电视机中,所述电视机通过处理器1001调用存储器1005中存储的视频教学程序,并执行本发明实施例提供的视频教学方法。
本发明实施例提供了一种视频教学方法,参照图2,图2为本发明一种视频教学方法第一实施例的流程示意图。
本实施例中,所述视频教学方法包括以下步骤:
步骤S10:接收用户的语音指令。
需要说明的是,本实施例的执行主体可为带有显示功能以及摄像功能的终端设备,例如电视、电脑等,本实施例以电视为例。电视上运行有智能操作系统,例如安卓系统。智能操作系统可进行多窗口模式,即同一界面下可显示多个应用程序的画面。
能够理解的是,为了方便用户打开多窗口模式,智能操作系统可接收用户的语音信息,从而识别是否为语音指令。
进一步地,为了方便用户使用,步骤S10之前还包括:当接收到遥控指令时,判断所述遥控指令是否为预设遥控指令;当所述遥控指令为预设遥控指令时,获取摄像视频,并将所述摄像视频显示在所述显示窗口的第一预设区域。
能够理解的是,电视遥控上可设置有相应的按键,用户可通过遥控开启视频教学功能,电视机接收到此遥控指令后确定为预设遥控指令(即视频教学指令)时,开启摄像头,并开启多窗口模式,将摄像头捕捉的摄像视频显示在显示窗口的第一预设区域。
步骤S20:当所述语音指令为预设指令时,获取摄像视频,并将所述摄像视频显示在显示窗口的第一预设区域。
应理解的是,当操作系统识别出的语音指令为预设指令时,预设指令为视频教学模式指令,例如:当用户说出“请开启视频教学模式”,操作系统识别出为视频教学模式指令,则开启视频教学模式。当开启视频教学模式后,操作系统将电视的显示窗口分为多个显示区域,并调用电视机上的摄像头,从而获得摄像视频,并将摄像视频显示在显示窗口的第一预设区域。
步骤S30:获取预设教学视频,并将所述预设教学视频显示在所述显示窗口的第二预设区域。
需要说明的是,摄像头开启获取画面后,为了实现与教学视频中形成更好的对比,操作系统会识别预设教学视频中人体的视角,并在第一预设区域中显示该视角框,用户可以根据视角框调整自身的位置,从而达到与预设教学视频中人体的视角一致。
能够理解的是,预设教学视频为健身类应用程序中的教学视频,用户也可以在电视机的存储空间中存储教学视频,从而可以离线播放教学视频。
应理解的是,显示窗口中的第一预设区域与第二预设区域可为纵向排列或横向排列,可根据用户自身需求进行调整,本实施例不加以限制。
步骤S40:将所述第一预设区域中的视频图像与所述第二预设区域中的教学图像进行对比,生成对比结果。
需要说明的是,当用户使用遥控点击开始学习,或使用语音指令开启学习时,摄像头开启录像功能,从而录制用户学习的全部过程。在学习结束后结束视频录制。
能够理解的是,视频为以时间为序的多张图片的集合,第一预设区域中的视频图像为摄像视频中某一时刻的图像,第二预设区域中的教学图像为与视频图像同一时刻的预设教学视频中的图像,并计算两张图像中人体姿态的相似度。
应理解的是,可预先采集大量的健身舞蹈等人体的姿态,并使用深度神经网络进行训练,从而可以计算出两张图像中人体姿态的相似度,并将相似度低于阈值的图像标记,用户回放学习视频时可以直接跳转到该标记的时刻重新学习。
进一步地,当电视的性能足够强大时,无需使用采集图像的方法进行相似度计算,可实时将摄像视频与预设教学视频中的人体进行相似度比较。
在具体实现中,为了方便用户能直观感受,根据相似度给出此图像中动作的相似度评分,对比结果中包括相似度评分低于阈值的图像标记。
步骤S50:根据所述对比结果、所述摄像视频及所述预设教学视频生成教学回放视频。
应理解的是,根据对比结果中的图像标记确定该图像在摄像视频中的时刻,由于摄像视频与预设教学视频的时间轴一致,从而可以确定该时刻对应于预设教学视频中的位置。
进一步地,为了提升用户的自学效率,步骤S50包括:根据对比结果确定相似度评分低于预设评分的目标视频图像;确定所述目标视频图像对应的目标教学图像;确定所述目标视频图像在所述摄像视频中的目标时刻,并确定所述目标教学图像在所述预设教学视频的目标教学时刻;根据所述目标时刻以及所述目标教学时刻确定所述摄像视频以及所述所述预设教学视频中的回放重点,得到教学回放视频。
需要说明的是,当视频图像与教学图像对比后,相似度对应的相似度评分低于预设评分时,说明此视频图像中的动作与教学图像中的动作相差较大,用户需要重新学习此动作。则确定此视频图像为目标视频图像,此教学图像为目标教学图像,并确定此目标视频图像在摄像视频中的目标时刻以及目标教学图像在预设教学视频中的目标教学时刻,则此目标教学时刻则是用户需要重新学习教学重点,此目标时刻是用户需要观看自身动作不足的时刻。并根据这两个时刻确定回放重点,将摄像视频与预设教学视频合并后,根据回放重点,生成教学回放视频。
步骤S60:将所述教学回放视频展示在回放窗口,以使用户根据所述教学回放视频提升自学进度。
能够理解的是,当用户结束初步学习,需要进行重点回顾时,可以在回放窗口播放教学回放视频,用户可直接跳转至回放重点进行重新学习,在重新学习时,用户也可以开启视频教学模式,开启摄像头进行拍摄,并重新评分。
应理解的是,在结束视频教学之后,确定所有相似度评分的平均值,将此平均值作为此次视频教学的总体评分。
进一步地,为了方便用户随时学习,步骤S60之后,还包括:将所述教学回放视频视频发送至云端服务器,以使用户在不同用户设备上回放所述教学回放视频。
需要说明的是,用户可在不同设备上登录统一账号,从云端服务器中获取就教学回放视频,从而可以随时随地进行学习。
在具体实现中,如图3所示,用户用语音开启电视的多窗口模式,其中一窗口中显示健身类应用,另一窗口显示摄像头拍摄的画面,并对比健身类应用中的人体的动作与摄像头拍摄的人体动作,摄像头会拍摄用户的全部学习过程,并计算两个画面中动作之间的相似度,当相似度低于设定值时,说明此动作用户完成不标准,标记拍摄视频的此动作,用户可直接跳转此标记,拍摄的视频可上传至云端,用户也可在在其他终端查看视频。
本实施例通过接收用户的语音指令;当所述语音指令为预设指令时,获取摄像视频,并将所述摄像视频显示在显示窗口的第一预设区域;获取预设教学视频,并将所述预设教学视频显示在所述显示窗口的第二预设区域;将所述第一预设区域中的视频图像与所述第二预设区域中的教学图像进行对比,生成对比结果;根据所述对比结果、所述摄像视频及所述预设教学视频生成教学回放视频;将所述教学回放视频展示在回放窗口,以使用户根据所述教学回放视频提升自学进度。通过上述方式,利用摄像头拍摄用户的学习过程,并将学习过程与教学视频进行比较,确定学习过程中的不足之处,并且用户可回看自己的学习过程,对自己的学习有更好的了解,以便有针对性的练习,极大提升了用户体验感。
参考图4,图4为本发明一种视频教学方法第二实施例的流程示意图。
基于上述第一实施例,本实施例视频教学方法在所述步骤S40,包括:
步骤S41:识别所述视频图像中的人体区域以及所述教学图像中的教学人体区域,得到人体区域图像以及教学人体区域图像。
需要说明的是,为了可以更加专注于人体姿态的对比,忽略用户拍摄背景的影响,可通过深度学习神经网络识别图像中人体的区域,以及教学图像中人体的区域,即人体区域图像及教学人体区域图像。
步骤S42:根据所述人体区域图像与预设背景生成人体图像,并根据所述教学人体区域图像与所述预设背景生成教学人体图像。
应理解的是,将人体区域图像与预设背景结合生成人体图像,将教学人途区域图像与预设背景结合生成教学人体图像。预设背景通常为单色背景,例如纯白色。
步骤S43:将所述人体图像与所述教学人体图像进行对比,生成对比结果。
进一步地,为了获得更准确的对比结果,步骤S43包括:将所述人体图像以及所述教学人体图像分别转化为预设尺寸的缩放人体图像以及缩放教学人体图像;将所述缩放人体图像以及所述缩放教学人体图像分别转化为灰度缩放人体图像以及灰度缩放教学人体图像;确定所述灰度缩放人体图像以及所述灰度缩放教学人体图像的相似度,根据所述相似度生成对比结果。
能够理解的是,首先将人体图像以及教学人体图像缩小为预设尺寸的图像,得到缩放人体图像以及缩放教学人体图像,预设尺寸可为8*8个像素,本实施例不加以限制。
应理解的是,为了忽略颜色的影响,需要将缩放人体图像以及缩放教学人体图像转化为灰度图,得到灰度缩放人体图像以及灰度缩放教学人体图像,例如:可转化为64级灰度图。
进一步地,确定所述灰度缩放人体图像以及所述灰度缩放教学人体图像的相似度,根据所述相似度生成对比结果的步骤,具体包括:确定所述灰度缩放人体图像的平均灰度值,并确定所述灰度缩放教学人体图像的教学平均灰度值;将所述灰度缩放人体图像中各像素的灰度值与所述平均灰度值进行比较,得到图像指纹;将所述灰度缩放教学人体图像中各像素的灰度值与所述教学平均灰度值进行比较,得到教学图像指纹;确定所述图像指纹与所述教学图像指纹的汉明距离,并根据所述汉明距离确定相似度;根据所述相似度确定相似度评分,并根据所述相似度评分生成对比结果。
在具体实现中,计算灰度缩放人体图像每一像素点的灰度值,并确定平均灰度值,计算灰度缩放教学人体图像每一像素点的灰度值(即教学灰度值),并确定平均灰度值(即教学平均灰度值)。将每个像素的灰度值,与平均灰度值进行比较。大于或等于平均值,记为1;小于平均值,记为0。最终得到两张图像的指纹。并计算两个指纹的汉明距离(Hammingdistance),从而得到两张图像的相似度。为了用户能直观感受相似度,将相似度转化为相似度评分,并根据相似度评分确定用户需要重新学习的部分,从而生成对比结果。
本实施例通过识别所述视频图像中的人体区域以及所述教学图像中的教学人体区域,得到人体区域图像以及教学人体区域图像;根据所述人体区域图像与预设背景生成人体图像,并根据所述教学人体区域图像与所述预设背景生成教学人体图像;将所述人体图像与所述教学人体图像进行对比,生成对比结果。通过上述方式,更关注与用户的人体图像与教学视频中的人体图像进行对比,从而可以更准确的判断用户的动作是否标准,以便用户进行回放学习。
此外,本发明实施例还提出一种存储介质,所述存储介质上存储有视频教学程序,所述视频教学程序被处理器执行时实现如上文所述的视频教学方法的步骤。
由于本存储介质采用了上述所有实施例的全部技术方案,因此至少具有上述实施例的技术方案所带来的所有有益效果,在此不再一一赘述。
参照图5,图5为本发明视频教学装置第一实施例的结构框图。
如图5所示,本发明实施例提出的视频教学装置包括:
接收模块10,用于接收用户的语音指令。
获取模块20,用于当所述语音指令为预设指令时,获取摄像视频,并将所述摄像视频显示在显示窗口的第一预设区域。
显示模块30,用于获取预设教学视频,并将所述预设教学视频显示在所述显示窗口的第二预设区域。
对比模块40,用于将所述第一预设区域中的视频图像与所述第二预设区域中的教学图像进行对比,生成对比结果。
生成模块50,用于根据所述对比结果、所述摄像视频及所述预设教学视频生成教学回放视频。
回放模块60,用于将所述教学回放视频展示在回放窗口,以使用户根据所述教学回放视频提升自学进度。
应当理解的是,以上仅为举例说明,对本发明的技术方案并不构成任何限定,在具体应用中,本领域的技术人员可以根据需要进行设置,本发明对此不做限制。
本实施例中,接收模块10,用于接收用户的语音指令。获取模块20,用于当所述语音指令为预设指令时,获取摄像视频,并将所述摄像视频显示在显示窗口的第一预设区域。显示模块30,用于获取预设教学视频,并将所述预设教学视频显示在所述显示窗口的第二预设区域。对比模块40,用于将所述第一预设区域中的视频图像与所述第二预设区域中的教学图像进行对比,生成对比结果。生成模块50,用于根据所述对比结果、所述摄像视频及所述预设教学视频生成教学回放视频。回放模块60,用于将所述教学回放视频展示在回放窗口,以使用户根据所述教学回放视频提升自学进度。通过上述方式,利用摄像头拍摄用户的学习过程,并将学习过程与教学视频进行比较,确定学习过程中的不足之处,并且用户可回看自己的学习过程,对自己的学习有更好的了解,以便有针对性的练习,极大提升了用户体验感。
在一实施例中,所述对比模块40,还用于识别所述视频图像中的人体区域以及所述教学图像中的教学人体区域,得到人体区域图像以及教学人体区域图像;根据所述人体区域图像与预设背景生成人体图像,并根据所述教学人体区域图像与所述预设背景生成教学人体图像;将所述人体图像与所述教学人体图像进行对比,生成对比结果。
在一实施例中,所述对比模块40,还用于将所述人体图像以及所述教学人体图像分别转化为预设尺寸的缩放人体图像以及缩放教学人体图像;将所述缩放人体图像以及所述缩放教学人体图像分别转化为灰度缩放人体图像以及灰度缩放教学人体图像;确定所述灰度缩放人体图像以及所述灰度缩放教学人体图像的相似度,根据所述相似度生成对比结果。
在一实施例中,所述对比模块40,还用于确定所述灰度缩放人体图像的平均灰度值,并确定所述灰度缩放教学人体图像的教学平均灰度值;将所述灰度缩放人体图像中各像素的灰度值与所述平均灰度值进行比较,得到图像指纹;将所述灰度缩放教学人体图像中各像素的灰度值与所述教学平均灰度值进行比较,得到教学图像指纹;确定所述图像指纹与所述教学图像指纹的汉明距离,并根据所述汉明距离确定相似度;根据所述相似度确定相似度评分,并根据所述相似度评分生成对比结果。
在一实施例中,所述生成模块50,还用于根据对比结果确定相似度评分低于预设评分的目标视频图像;确定所述目标视频图像对应的目标教学图像;确定所述目标视频图像在所述摄像视频中的目标时刻,并确定所述目标教学图像在所述预设教学视频的目标教学时刻;根据所述目标时刻以及所述目标教学时刻确定所述摄像视频以及所述所述预设教学视频中的回放重点,得到教学回放视频。
在一实施例中,所述回放模块60,还用于将所述教学回放视频发送至云端服务器,以使用户在不同用户设备上回放所述教学回放视频。
在一实施例中,所述接收模块10,还用于当接收到遥控指令时,判断所述遥控指令是否为预设遥控指令;当所述遥控指令为预设遥控指令时,获取摄像视频,并将所述摄像视频显示在所述显示窗口的第一预设区域。
由于本装置采用了上述所有实施例的全部技术方案,因此至少具有上述实施例的技术方案所带来的所有有益效果,在此不再一一赘述。
需要说明的是,以上所描述的工作流程仅仅是示意性的,并不对本发明的保护范围构成限定,在实际应用中,本领域的技术人员可以根据实际的需要选择其中的部分或者全部来实现本实施例方案的目的,此处不做限制。
另外,未在本实施例中详尽描述的技术细节,可参见本发明任意实施例所提供的视频教学方法,此处不再赘述。
此外,需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如只读存储器(Read Only Memory,ROM)/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种视频教学方法,其特征在于,所述视频教学方法包括:
接收用户的语音指令;
当所述语音指令为预设指令时,获取摄像视频,并将所述摄像视频显示在显示窗口的第一预设区域;
获取预设教学视频,并将所述预设教学视频显示在所述显示窗口的第二预设区域;
将所述第一预设区域中的视频图像与所述第二预设区域中的教学图像进行对比,生成对比结果;
根据所述对比结果、所述摄像视频及所述预设教学视频生成教学回放视频;
将所述教学回放视频展示在回放窗口,以使用户根据所述教学回放视频提升自学进度。
2.如权利要求1所述的方法,其特征在于,所述将所述第一预设区域中的图将所述第一预设区域中的视频图像与所述第二预设区域中的教学图像进行对比,生成对比结果的步骤,包括:
识别所述视频图像中的人体区域以及所述教学图像中的教学人体区域,得到人体区域图像以及教学人体区域图像;
根据所述人体区域图像与预设背景生成人体图像,并根据所述教学人体区域图像与所述预设背景生成教学人体图像;
将所述人体图像与所述教学人体图像进行对比,生成对比结果。
3.如权利要求2所述的方法,其特征在于,所述将所述人体图像与所述教学人体图像进行对比,生成对比结果的步骤,包括:
将所述人体图像以及所述教学人体图像分别转化为预设尺寸的缩放人体图像以及缩放教学人体图像;
将所述缩放人体图像以及所述缩放教学人体图像分别转化为灰度缩放人体图像以及灰度缩放教学人体图像;
确定所述灰度缩放人体图像以及所述灰度缩放教学人体图像的相似度,根据所述相似度生成对比结果。
4.如权利要求3所述的方法,其特征在于,所述确定所述灰度缩放人体图像以及所述灰度缩放教学人体图像的相似度,根据所述相似度生成对比结果的步骤,包括:
确定所述灰度缩放人体图像的平均灰度值,并确定所述灰度缩放教学人体图像的教学平均灰度值;
将所述灰度缩放人体图像中各像素的灰度值与所述平均灰度值进行比较,得到图像指纹;
将所述灰度缩放教学人体图像中各像素的灰度值与所述教学平均灰度值进行比较,得到教学图像指纹;
确定所述图像指纹与所述教学图像指纹的汉明距离,并根据所述汉明距离确定相似度;
根据所述相似度确定相似度评分,并根据所述相似度评分生成对比结果。
5.如权利要求1-4任一项所述的方法,其特征在于,所述根据所述对比结果、所述摄像视频及所述预设教学视频生成教学回放视频的步骤,包括:
根据对比结果确定相似度评分低于预设评分的目标视频图像;
确定所述目标视频图像对应的目标教学图像;
确定所述目标视频图像在所述摄像视频中的目标时刻,并确定所述目标教学图像在所述预设教学视频的目标教学时刻;
根据所述目标时刻以及所述目标教学时刻确定所述摄像视频以及所述所述预设教学视频中的回放重点,得到教学回放视频。
6.如权利要求1-4任一项所述的方法,其特征在于,所述将所述教学回放视频展示在回放窗口,以使用户根据所述教学回放视频提升自学进度的步骤之后,还包括:
将所述教学回放视频发送至云端服务器,以使用户在不同用户设备上回放所述教学回放视频。
7.如权利要求1-4任一项所述的方法,其特征在于,所述接收用户的语音指令的步骤之前,还包括:
当接收到遥控指令时,判断所述遥控指令是否为预设遥控指令;
当所述遥控指令为预设遥控指令时,获取摄像视频,并将所述摄像视频显示在所述显示窗口的第一预设区域。
8.一种视频教学装置,其特征在于,所述视频教学装置包括:
接收模块,用于接收用户的语音指令;
获取模块,用于当所述语音指令为预设指令时,获取摄像视频,并将所述摄像视频显示在显示窗口的第一预设区域;
显示模块,用于获取预设教学视频,并将所述预设教学视频显示在所述显示窗口的第二预设区域;
对比模块,用于将所述第一预设区域中的视频图像与所述第二预设区域中的教学图像进行对比,生成对比结果;
生成模块,用于根据所述对比结果、所述摄像视频及所述预设教学视频生成教学回放视频;
回放模块,用于将所述教学回放视频展示在回放窗口,以使用户根据所述教学回放视频提升自学进度。
9.一种电视机,其特征在于,所述电视机包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的视频教学程序,所述视频教学程序配置为实现如权利要求1至7中任一项所述的视频教学方法。
10.一种存储介质,其特征在于,所述存储介质上存储有视频教学程序,所述视频教学程序被处理器执行时实现如权利要求1至7任一项所述的视频教学方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110771036.XA CN113556599A (zh) | 2021-07-07 | 2021-07-07 | 视频教学方法、装置、电视机及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110771036.XA CN113556599A (zh) | 2021-07-07 | 2021-07-07 | 视频教学方法、装置、电视机及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113556599A true CN113556599A (zh) | 2021-10-26 |
Family
ID=78131429
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110771036.XA Pending CN113556599A (zh) | 2021-07-07 | 2021-07-07 | 视频教学方法、装置、电视机及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113556599A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114241595A (zh) * | 2021-11-03 | 2022-03-25 | 橙狮体育(北京)有限公司 | 数据处理方法、装置、电子设备及计算机存储介质 |
CN114267220A (zh) * | 2021-12-27 | 2022-04-01 | 林华 | 一种外科手术教学模拟方法及系统 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170213111A1 (en) * | 2016-01-21 | 2017-07-27 | Wizr Llc | Video processing |
CN109584232A (zh) * | 2018-11-28 | 2019-04-05 | 成都天衡智造科技有限公司 | 基于图像识别的设备使用状态在线监测方法、系统及终端 |
US20200042776A1 (en) * | 2018-08-03 | 2020-02-06 | Baidu Online Network Technology (Beijing) Co., Ltd. | Method and apparatus for recognizing body movement |
CN112348942A (zh) * | 2020-09-18 | 2021-02-09 | 当趣网络科技(杭州)有限公司 | 一种健身交互方法和系统 |
CN112399234A (zh) * | 2019-08-18 | 2021-02-23 | 聚好看科技股份有限公司 | 一种界面显示方法及显示设备 |
-
2021
- 2021-07-07 CN CN202110771036.XA patent/CN113556599A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170213111A1 (en) * | 2016-01-21 | 2017-07-27 | Wizr Llc | Video processing |
US20200042776A1 (en) * | 2018-08-03 | 2020-02-06 | Baidu Online Network Technology (Beijing) Co., Ltd. | Method and apparatus for recognizing body movement |
CN109584232A (zh) * | 2018-11-28 | 2019-04-05 | 成都天衡智造科技有限公司 | 基于图像识别的设备使用状态在线监测方法、系统及终端 |
CN112399234A (zh) * | 2019-08-18 | 2021-02-23 | 聚好看科技股份有限公司 | 一种界面显示方法及显示设备 |
CN112348942A (zh) * | 2020-09-18 | 2021-02-09 | 当趣网络科技(杭州)有限公司 | 一种健身交互方法和系统 |
Non-Patent Citations (1)
Title |
---|
苏湘芬等: "行为回放式教学法在护理本科实习生创伤急救教学中的应用", 《中华护理教育》 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114241595A (zh) * | 2021-11-03 | 2022-03-25 | 橙狮体育(北京)有限公司 | 数据处理方法、装置、电子设备及计算机存储介质 |
CN114267220A (zh) * | 2021-12-27 | 2022-04-01 | 林华 | 一种外科手术教学模拟方法及系统 |
CN114267220B (zh) * | 2021-12-27 | 2024-01-26 | 林华 | 一种外科手术教学模拟方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107105310B (zh) | 一种视频直播中人物形象替换方法、装置和一种录播系统 | |
CN111556278B (zh) | 一种视频处理的方法、视频展示的方法、装置及存储介质 | |
CN102947774A (zh) | 用于驱动交互式故事的自然用户输入 | |
CN113556599A (zh) | 视频教学方法、装置、电视机及存储介质 | |
CN111147880A (zh) | 视频直播的互动方法、装置、系统、电子设备及存储介质 | |
EP4072147A1 (en) | Video stream processing method, apparatus and device, and medium | |
CN110418205A (zh) | 健身教学方法、装置、设备、系统及存储介质 | |
CN110992222A (zh) | 教学交互方法、装置、终端设备及存储介质 | |
CN110490173B (zh) | 一种基于3d体感模型的智能动作打分系统 | |
CN109274883A (zh) | 姿态矫正方法、装置、终端及存储介质 | |
CN109545003A (zh) | 一种显示方法、装置、终端设备及存储介质 | |
CN114022512A (zh) | 运动辅助方法、装置及介质 | |
CN115937961A (zh) | 一种线上学习识别方法及设备 | |
CN111507139A (zh) | 图像效果生成方法、装置和电子设备 | |
CN113283246B (zh) | 视觉交互方法、装置、设备及存储介质 | |
CN112712450A (zh) | 基于云课堂的实时交互方法、装置、设备及存储介质 | |
CN115543135A (zh) | 显示屏幕的控制方法、装置及设备 | |
CN111105651A (zh) | 基于ar的废弃物归类的教学方法及系统 | |
CN111507143A (zh) | 表情图像效果生成方法、装置和电子设备 | |
CN215814140U (zh) | 学习系统 | |
CN117078976B (zh) | 动作评分方法、装置、计算机设备以及存储介质 | |
CN113426101B (zh) | 教学方法、装置、设备及计算机可读存储介质 | |
CN210119873U (zh) | 一种基于vr设备的监督装置 | |
CN115937989B (zh) | 基于缩放处理的在线教育智能解析系统及方法 | |
CN112135152B (zh) | 信息处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20211026 |