CN112804516A - 一种视频播放方法、装置、可读存储介质、电子设备 - Google Patents

一种视频播放方法、装置、可读存储介质、电子设备 Download PDF

Info

Publication number
CN112804516A
CN112804516A CN202110377315.8A CN202110377315A CN112804516A CN 112804516 A CN112804516 A CN 112804516A CN 202110377315 A CN202110377315 A CN 202110377315A CN 112804516 A CN112804516 A CN 112804516A
Authority
CN
China
Prior art keywords
video
courseware
background
foreground
dimensional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110377315.8A
Other languages
English (en)
Other versions
CN112804516B (zh
Inventor
王群
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Century TAL Education Technology Co Ltd
Original Assignee
Beijing Century TAL Education Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Century TAL Education Technology Co Ltd filed Critical Beijing Century TAL Education Technology Co Ltd
Priority to CN202110377315.8A priority Critical patent/CN112804516B/zh
Publication of CN112804516A publication Critical patent/CN112804516A/zh
Application granted granted Critical
Publication of CN112804516B publication Critical patent/CN112804516B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/08—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
    • G09B5/12—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations different stations being capable of presenting different information simultaneously
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/08—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
    • G09B5/12—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations different stations being capable of presenting different information simultaneously
    • G09B5/125—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations different stations being capable of presenting different information simultaneously the stations being mobile
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/398—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G06T2207/10021—Stereoscopic video; Stereoscopic image sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Marketing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明实施例提供了一种视频播放方法、装置、可读存储介质、电子设备，用于将课程视频转化为三维视频，通过用户交互可以对此三维播放画面进行视角角度调整，这样在收看过程中没有视觉盲点，用户也无需使用额外的三维显示设备。方法包括：获取视频，以及获取与所述视频对应的课件资源；对所述视频作前后景分割处理，获取所述视频的前景部分和后景部分；当接收到三维视频播放任务时，将所述视频的前景部分作为三维视频的前景播放；以及，将与所述视频的当前帧的后景部分相似度最大的课件资源作为所述三维视频的后景播放。

Description

一种视频播放方法、装置、可读存储介质、电子设备
技术领域
本发明涉及一种视频交互方法，尤其是涉及一种视频播放方法、装置、可读存储介质及电子设备。
背景技术
随着互联网视频技术的发展，线上教学的突破时间、空间的限制，人与人交流不受空间物理特性的约束等优势逐渐为大众所认识。但是由于直播课最终在学生学习终端上呈现出的是平面图像，因此交互性和沉浸感都不足，甚至在教学效果上也有所缺陷。例如教师在讲课过程中身体遮挡了后方黑板上的部分内容而没有察觉，此时学生的学习效果就会受到影响。
对此，最佳的解决方案就是采用三维视频交互进行教学。例如公开号为CN110233841的发明专利《一种基于AR全息眼镜的远程教育数据交互系统及方法》中就公开了一种基于AR全息眼镜的远程教育数据交互系统及方法，通过借助网页实时通信技术在现场学生的AR全息眼镜和远程教师的PC机或平板间建立音、视频传输通道，使远程教师都能实时看到现场学生的第一视角画面并与现场学生和其它远程教师进行音、视频交流；同时利用Canvas画布技术在学生和教师间建立同步的虚拟协作画板，远程教师可在现场视频画面上自由添加绘图、文字等虚拟协助信息；然后借助搭建的通道将虚拟协作信息同步推送至学生AR全息眼镜端和其他远程教师端，学生AR全息眼镜端通过将虚拟协助信息在虚拟屏幕上的叠加显示来对现场学生所在场景实现“增强”。与现有技术相比，该发明具有解放学生双手、多人实时沟通等优点。
这样的技术方案存在三大问题，首先该发明采用的是教师进入学生视角，这样导致只能实现教师和学生一对一的教学。其次该发明的应用依靠于专用的设备，带来了额外的负担。最后该发明的在线实时处理方案对网络要求非常高，并且无法应用到录播的课程中去。
现有技术中也有通过切换视角进行视频视角转换的方案，但是那些方案需要在拍摄时采用多机位进行同时拍摄，而用户也只能在固定的几个视角之间进行切换。
发明内容
针对现有技术的不足，本发明涉及一种视频播放方法、装置、可读存储介质及电子设备用于视频直播、录播课程，通过对常规的视频进行处理，最终使得用户可以无角度盲区地观看视频内容，加强用户在三维空间中的感受，提升课程视频的用户体验，三维视频获取成本低，且整个观看过程无需额外的三维支持设备。
为实现以上目的，本发明通过以下技术方案予以实现：
一种视频播放方法，包括：
获取视频，以及获取与所述视频对应的课件资源；对所述视频作前后景分割处理，获取所述视频的前景部分和后景部分；当接收到三维视频播放任务时，将所述视频的前景部分作为三维视频的前景播放；以及，将与所述视频的当前帧的后景部分相似度最大的课件资源作为所述三维视频的后景播放。
优选的，将与所述视频的当前帧的后景部分相似度最大的课件资源作为所述三维视频的后景播放，包括：
获取预先生成的课件索引；所述课件索引包括：时间区间，以及与所述时间区间对应的课件资源信息，当所述时间区间与所述视频的时间线同步时，与所述时间区间对应的课件资源和所述视频的当前帧的后景部分相似度最大；
根据所述课件索引、所述课件资源和所述视频播放的时间信息，将与所述视频的当前帧的后景部分相似度最大的课件资源作为所述三维视频的后景播放。
通过课件索引可以确保课件资源和前景部分匹配且同步，避免在播放过程中出现前景部分和后景部分脱节的情况。
优选的，生成课件索引的具体步骤包括：
计算所述视频的时间线的各个时间点上的当前帧的后景部分与所述课件资源包含的课件图像的相似度；
确定出与所述视频的时间线的各个时间点上的当前帧的后景部分相似度最高的课件图像；
根据所述视频的时间线的各个时间点，以及与所述视频的时间线的各个时间点上的当前帧的后景部分相似度最高的课件图像，生成课件索引。
课件索引生成过程中通过视频的时间线来进行管理，提高了课件索引的准确性和可靠性。
优选的，预先生成课件索引之后，方法还包括：
将所述课件索引和所述课件资源分别存储至指定位置。
这样在播放视频的过程中方便查找并及时地获取到相应资源，保持三维视频播放的流畅性。
优选的，所述课件资源包括若干课件图像，或者，包含课件图像的课件视频。
优选的，当接收到三维视频播放任务时，还包括：
通过Web GL（Web Graphics Library，3D绘图协议）在三维空间中生成前景层和后景层, 所述前景层和所述后景层之间设置预设深度。
前景层用于播放视频的前景部分，后景层用于播放与视频的当前帧的后景部分相似度最大的课件资源，从而实现了最终视频呈现为三维的形式。
优选的，还包括：
根据用户的操作，调整所述三维视频的显示视角。
由于用户可以对三维播放画面进行视角角度调整，这样在收看过程中没有视觉盲点，用户也无需使用额外的三维显示设备。
本发明还提供一种视频播放装置，包括：
素材获取单元，用于获取视频，以及获取与所述视频对应的课件资源；
图像分割单元，用于对所述视频作前景与后景分割处理，获取视频的前景部分和后景部分；
三维视频播放单元，用于当接收到三维视频播放任务时，将所述视频的前景部分作为三维视频的前景播放；以及，将与所述视频的当前帧的后景部分相似度最大的课件资源作为所述三维视频的后景播放。
本发明还提供一种电子设备，包括存储器和处理器，所述存储器用于存储计算机指令，所述计算机指令被所述处理器执行以实现上述的视频播放方法。
本发明还提供一种可读存储介质，其上存储有计算机指令，该计算机指令被处理器执行时实现上述的视频播放方法。
本发明提供的技术方案，获取视频，以及获取与所述视频对应的课件资源；对所述视频作前后景分割处理，获取所述视频的前景部分和后景部分；当接收到三维视频播放任务时，将所述视频的前景部分作为三维视频的前景播放；以及，将与所述视频的当前帧的后景部分相似度最大的课件资源作为所述三维视频的后景播放。通过将课程视频分为前景部分和后景部分，播放过程中将后景部分替换为对应课件资源，并与前景部分图像进度保持同步，前景部分与后景部分叠加并保持一定的空间距离构成三维的播放画面，用户通过交互可以对此三维播放画面进行视角角度调整；这样在收看过程中没有视觉盲点，用户也无需使用额外的三维显示设备，三维视频在拍摄的过程中也无需添加额外的摄像设备。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明提供的视频播放方法的流程示意图。
图2是本发明提供的生成课件索引的过程示意图。
图3是本发明提供的生成三维视频的过程示意图。
图4是本发明提供的GL空间视频图像画布生成器的效果示意图。
图5是本发明提供的视频播放装置的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
参见图1，本发明提供了一种视频播放方法，包括：
步骤S110：获取视频，以及获取与视频对应的课件资源；这里的视频可以是在线播放的视频也可以是保存在本地的离线视频，课件资源是指包含图片的课件资源，具体形式可以是图片、视频、ppt文件等。
随后，在步骤S120中，对视频作前后景分割处理，获取视频的前景部分和后景部分。
如图2所示，步骤S120可以通过图像背景分割器实现，图像背景分割器的主要作用是通过输入原视频，对视频中逐帧图像进行服务端人像背景分割处理，处理后不改变整个视频的时间线，只是生成透明背景视频或者单一色背景视频。
随后，在步骤S130中，当接收到三维视频播放任务时，将视频的前景部分作为三维视频的前景播放；以及，将与视频的当前帧的后景部分相似度最大的课件资源作为三维视频的后景播放。
优选的，通过建立索引的方式生成三维视频的后景部分，具体过程包括：将视频的后景部分与课件资源进行比较，计算视频的时间线的各个时间点上的当前帧的后景部分与课件资源包含的课件图像的相似度；确定出与视频的时间线的各个时间点上的当前帧的后景部分的相似度最高的课件图像；根据视频的时间线的各个时间点，以及与视频的时间线的各个时间点上的当前帧的后景部分相似度最高的课件图像，生成课件索引；其中，课件索引包括：时间区间，以及与时间区间对应的课件资源信息，当时间区间与视频的时间线同步时，与时间区间对应的课件资源和视频的当前帧的后景部分相似度最大。
如图2所示，可以在课程视频背景分割的同时通过视频时间关联索引生成器来生成索引，视频时间关联索引生成器的作用是通过原视频当前时间线位置图像a，将图像a的后景部分与课件图像做相似度对比，找到相似度最大的课件图像，生成索引。然后逐帧原视频建立与课件图像索引，例如{时间a1-时间a2：课件图像1，时间a2-时间a3：课件图像2，…，时间an-时间am：课件图像n}。
随后将课件索引和课件资源分别存储至指定位置，即得到用于三维视频播放的视频物料。
三维视频的播放过程如图3所示，GL空间视频画板生成器、生成控制器、交互控制器等多个软件模块共同实现了三维视频的播放功能。各模块具体功能如下：
图像时间校准器：本部分的主要作用是通过获取步骤S120得到的前景视频流，将视频流当前时间线中的时间位置同步给图像寻址控制器读取相应课件视频索引数据，定位具体课件图像，达到前景和课件后景图像同步还原视频同步效果，以及，根据不同时间阶段进行不断地更新课件图像。
图像前景投影器：本部分主要作用是不断地将图像时间校准器产出的视频图像前景数据通过canvas投影技术投影到GL空间视频画板生成器，具体方式是将当前视频图像内容用drawImage方法获取到视频逐帧图像内容并投影到GL空间视频画板生成器中，使得在三维空间容器播放的前景画布中的最顶端图层画布展现出前景主体内容。
课件图像寻址控制器：本部分主要作用是通过在线播放的过程中根据当前播放时间从课件视频索引中匹配图像数据地址，根据地址获取相应图像或者预先获取图像，将图像内容通过后景同步投影器投影到GL空间视频画板生成器并生成相应的画面。
后景同步投影器：本部分主要作用是将课件图像画面内容投影到展现GL空间画布容器的底层背景区域，作为与前景区域保持空间深度叠加的底层展现内容。
GL空间视频画板生成器：本部分主要作用是提供一个播放器展现内容的容器，用Web GL在三维空间中生成一个立体画布结构，分为前景曾和后景层，两层中间保持2S深度。对于空间坐标中通过制定的camera视角观察视频效果，因为前景层是透明背景，所以通过camera视角看到的投影到二维平面上的视频图像会产生空间叠加效果，具体形式见图4所示；图4中，x、y、z表示坐标轴方向，s表示景深。
交互控制器：本部分主要作用是当用户使用放大缩小/调整观看角度会出发camera视角和相对于空间坐标原点的变化，导致呈现视频效果展现变化的效果。
生成控制器：本部分主要作用是通过预设深度s等参数影响空间画板的生成。
以下选取两个具体的实施例进行说明：
实施例1：直播数学课程乘法口诀，原视频中教师站在黑板前将乘法口诀表遮挡了一半。此时通过所述步骤进行处理：
步骤1：获取视频，通过图像背景分割器将视频图像分为前景部分与后景部分。其中前景部分为教师的形象，后景部分为显示的乘法口诀表图案；该步骤采用的是现有技术中基于视频的人像分离技术，在此不再赘述。
步骤2：视频时间关联索引生成器通过原视频当前时间线位置后景部分的图像作为基准，将此图像与课件资源中的对应时间线位置的图像做相似度对比，找到当前相似度最大的课件资源，生成课件索引。在同一平台上，教师的教课内容在课件资料库中均有备份或近似教案。在本实施例中所述图像为分割为后景部分的乘法口诀表，此时在课件资料库中找到对应的完整的乘法口诀表图案。
步骤3：将前景图案、后景的乘法口诀表图案以及基于时间的索引共同存储在相同课件资源目录中；此时视频处理完成。
步骤4：当用户进行视频播放时，根据课程前景视频和课件索引自动加载对应的课件资源。
步骤5：将前景视频中的前景图像和加载的课件资源的图像分别映射投影在空间视频图像画布的两个空间分画布上，通过空间立体坐标系中生成空间视频的效果；具体是利用GL空间视频画板生成器提供一个播放器展现内容的容器，用Web GL在三维空间中生成一个立体画布结构，分为前景层和后景层，两层中间保持2S深度。
通过图像前景投影器断地将步骤1产出的视频图像前景数据通过canvas投影技术将当前video图像内容逐帧图像内容投影到GL空间视频画板生成器的前景层中，使得在三维空间容器播放的前景画布中的最顶端图层画布展现出前景主体内容。Canvas是在HTML5中新增的标签，用于在网页实时生成图像，并且可以操作图像内容，基本上它是一个可以用JavaScript操作的位图。在本实施例中即将教师的图像投影到GL空间视频画板生成器的前景层中。
同时通过后景同步投影器将步骤2中获取的课件资源的图像画面内容投影到展现到GL空间视频画板生成器的后景层中，作为与前景区域保持空间深度叠加的底层展现内容。在本实施例中即将乘法口诀表的图案展现在GL空间视频画板生成器的后景层中。
在GL空间视频画板生成器中通过制定的camera视角观察视频效果，因为前景层是透明背景，所以通过camera视角看到的投影到二维平面上的视频图像会产生空间叠加效果。且前景层和后景层之间保持一定的距离，这样使得整个画面进行旋转后呈现出三维的立体效果。
步骤6：用户通过交互控件调整预设深度s等参数，以及观看视频的视角。当用户采用电脑学习时，发现教师站的位置正好挡住了乘法口诀表右侧部分。此时就可以利用鼠标点击画面任意位置，按住鼠标进行拖动操作，此时画面就以鼠标点击的位置作为轴心进行转动。转动一定角度后就可以观察到后景层中原先被教师图像遮挡的部分画面。在这个过程中用户也可以通过滑动鼠标滚轮来调整预设深度s等参数，确保看到的画面大小合适。
在步骤5播放过程中需要采用课件图像寻址控制器根据图像时间校准器提供的视频流当前时间线中的时间位置，从视频索引中匹配课件资源数据地址，根据地址获取相应课件资源。由于本实施例后景图为单独的一张静态图，因此无需对其进行更新变换。但是用户可以利用生成控制器手动切换后景中显示的课件资源。切换的课件资源还是基于本课程内容，不会转到其它无关内容中去。
通过这样的设计，用户在学习过程中就可以自行解决教师挡住部分课件内容的情况，非常方便。
实施例2：直播化学实验课程，原视频中教师站在实验台前进行实验操作，由于水平拍摄导致实验台上的实验步骤看不清楚。此时通过所述步骤进行处理：
步骤1：获取视频，通过图像背景分割器将视频图像分为前景部分与后景部分。其中前景部分为教师的形象，后景部分为显示的实验台；该步骤采用的是现有技术中基于视频的人像分离技术，在此不再赘述。
步骤2：视频时间关联索引生成器通过原视频当前时间线位置图像a，将图像a的后景部分与课件图像做相似度对比，找到当前相似度最大的课件资源，生成课件索引。在同一平台上，教师的教课内容在课件资料库中均有备份或近似教案。在本实施例中所述图像a为实验台上操作的步骤，此时课件资料库中在课件资料库中找到对应的实验视频。将课件资料库中的视频逐帧分解并通过视频时间关联索引生成器将每帧图形和前景的对应时间的图案建立一一对应的关系，这样就生成了课件索引。
步骤3：将前景图案、后景的视频以及基于时间的索引共同存储在相同课件资源目录中；此时视频处理完成。
步骤4：当用户进行视频播放时，根据课程前景视频和课件索引自动加载对应的课件资源。
步骤5：将前景视频中的前景图像和加载的课件资源的图像分别映射投影在空间视频图像画布的两个空间分画布上，通过空间立体坐标系中生成空间视频的效果；具体的说是利用GL空间视频画板生成器提供一个播放器展现内容的容器，用Web GL在三维空间中生成一个立体画布结构，分为前景层和后景层，两层中间保持2S深度。
通过图像前景投影器断地将步骤1产出的视频图像前景数据通过canvas投影技术将当前video图像内容逐帧图像内容投影到GL空间视频画板生成器的前景层中，使得在三维空间容器播放的前景画布中的最顶端图层画布展现出前景主体内容。Canvas是在HTML5中新增的标签，用于在网页实时生成图像，并且可以操作图像内容，基本上它是一个可以用JavaScript操作的位图。在本实施例中即将教师的图像投影到GL空间视频画板生成器的前景层中。
同时通过后景同步投影器将步骤2中获取的课件资源的图像画面内容投影到展现到GL空间视频画板生成器的后景层中，作为与前景区域保持空间深度叠加的底层展现内容。在本实施例中即将实验的视频展现在GL空间视频画板生成器的后景层中。
在GL空间视频画板生成器中通过制定的camera视角观察视频效果，因为前景层是透明背景，所以通过camera视角看到的投影到二维平面上的视频图像会产生空间叠加效果。且前景层和后景层之间保持一定的距离，这样使得整个画面进行旋转后呈现出近似三维的立体效果。
步骤6：用户通过交互控件调整预设深度s等参数，以及观看视频的视角。当用户采用平板电脑进行学习时，发现由于实验台的位置较低，无法观察到具体的实验细节。此时就可以用手点击触摸屏上画面任意位置，进行拖动操作，此时画面就以手指点击的位置作为轴心进行转动。转动一定角度后就可以观察到后景层中更佳角度的实验过程。在这个过程中用户也可以通过双指操作来调整预设深度s等参数，确保看到的画面大小合适。
在步骤5播放过程中需要采用课件图像寻址控制器根据图像时间校准器提供的视频流当前时间线中的时间位置，从视频索引中匹配课件资源数据地址，根据地址获取相应课件资源。由于本实施例后景播放的是对应的实验视频，因此在播放过程中课件图像寻址控制器根据图像时间校准器提供的视频流当前时间线中的时间位置，从视频索引中匹配课件资源数据地址后逐帧匹配，保证了前景和后景的匹配。
实施例3：时事与政治课程，原视频中教师站在电视墙前，电视墙上挂有一台电视机，电视中正播放时事新闻：
步骤1：获取视频，通过图像背景分割器将视频图像分为前景部分与后景部分。其中前景部分为教师的形象。此实施例中后景部分分为两部分，一部分为静止的电视墙以及电视机的外轮廓部分，另一部分为动态的时事新闻视频。
步骤2：视频时间关联索引生成器通过原视频当前时间线位置图像a，将图像a的后景部分与课件图像做相似度对比，找到当前相似度最大的课件资源，生成课件索引。此时需要做两次课件图像相似度对比，在课件资源中分别找到最接近的电视墙图片，以及时事新闻视频对应的课件资源。在本实施例中在找到电视墙图片后，需要进行处理去掉时事新闻视频放映部分的图案，给时事新闻视频对应的课件资源预留播放的空间。将时事新闻视频对应的课件资源视频逐帧分解并通过视频时间关联索引生成器将每帧图形和前景的对应时间的图案建立一一对应的关系，这样就生成了课件索引。
步骤3：将前景图案、后景的电视墙图案、时事新闻视频对应的课件资源视频以及基于时间的索引共同存储在相同课件资源目录中；此时视频处理完成。
步骤4：当用户进行视频播放时，根据课程前景视频和课件索引自动加载对应的课件资源。
步骤5：将前景视频中的前景图像和加载的课件资源的图像分别映射投影在空间视频图像画布的两个空间分画布上，通过空间立体坐标系中生成空间视频的效果；具体的说是利用GL空间视频画板生成器提供一个播放器展现内容的容器，用Web GL在三维空间中生成一个立体画布结构，分为前景层和后景层，两层中间保持2S深度。
通过图像前景投影器断地将步骤1产出的视频图像前景数据通过canvas投影技术将当前video图像内容逐帧图像内容投影到GL空间视频画板生成器的前景层中，使得在三维空间容器播放的前景画布中的最顶端图层画布展现出前景主体内容。Canvas是在HTML5中新增的标签，用于在网页实时生成图像，并且可以操作图像内容，基本上它是一个可以用JavaScript操作的位图。在本实施例中即将教师的图像投影到GL空间视频画板生成器的前景层中。
同时通过后景同步投影器将步骤2中获取的课件资源的图像画面内容投影到展现到GL空间视频画板生成器的后景层中，作为与前景区域保持空间深度叠加的底层展现内容。在本实施例中后景同步投影器需要同步投影电视墙图片以及时事新闻视频对应的课件资源视频。其中电视墙图片中留出播放时事新闻视频对应的课件资源视频的位置，使其展现在GL空间视频画板生成器的后景层中。电视墙图片和时事新闻视频对应的课件资源视频处于同一个平面内。
在GL空间视频画板生成器中通过制定的camera视角观察视频效果，因为前景层是透明背景，所以通过camera视角看到的投影到二维平面上的视频图像会产生空间叠加效果。且前景层和后景层之间保持一定的距离，这样使得整个画面进行旋转后呈现出近似三维的立体效果。
步骤6：用户通过交互控件调整预设深度s等参数，以及观看视频的视角。当用户采用智能电视进行学习时，发现由于后景位置的视频太小，无法观察到展示的内容。此时就可以操作电视遥控器，找到观察的焦点。本实施例中用户选择教师肩部上方位置作为焦点。再通过电视遥控器进行视频图像放大操作。同样用户也可以通过遥控器调整观看的视角。
在步骤5播放过程中需要采用课件图像寻址控制器根据图像时间校准器提供的视频流当前时间线中的时间位置，从视频索引中匹配课件资源数据地址，根据地址获取相应课件资源。由于本实施例后景播放的是图片和视频的叠加，因此在播放过程中课件图像寻址控制器根据图像时间校准器提供的视频流当前时间线中的时间位置，从视频索引中同时匹配电视墙图片资源和播放视频的资源的数据地址后逐帧匹配，保证了前景和后景的匹配以及后景的和谐统一。
需要说明的是，虽然以上实施例中前景部分均为人像，并不意味前景只能限定为人像。前景还可以是通过绿屏或者人像分割产生的教具图像或一些卡通形象等。
通过这样的设计，用户在学习过程中就可以自行解决观察角度不便的问题。
本发明适合直播的课件也适合于录播的课件。在处理录播的视频时，视频处理过程进行离线操作，节省大量的网络资源。而课件资源中数据庞大，通常通过云存储进行保存，通常需要保持联网状态。
采用本发明提供的技术方案，用户在手机或者PC上使用网课终端观看直播/视频课程页面的过程中，页面会自动将课程视频分为前景和后景，前景为通过绿屏或者人像分割产生的人像教具图像，后景为课件内容，通过播放器内进度控制模块将原始视频中的相互分离的后景课件与前景人像教具进度保持同步，前景与后景高清视频叠加构成播放画面，前景后后景间保持一定空间距离，通过用户交互可以进行视角角度调整，达到近似三维立体的视频图像展现感受。
参见图5，本发明还提供了一种视频播放装置，包括：
素材获取单元510，用于获取视频，以及获取与所述视频对应的课件资源；
图像分割单元520，用于对所述视频作前景与后景分割处理，获取视频的前景部分和后景部分；
三维视频播放单元530，用于当接收到三维视频播放任务时，将所述视频的前景部分作为三维视频的前景播放；以及，将与所述视频的当前帧的后景部分相似度最大的课件资源作为所述三维视频的后景播放。
优选的，三维视频播放单元530用于将与所述视频的当前帧的后景部分相似度最大的课件资源作为所述三维视频的后景播放时，具体用于：
获取预先生成的课件索引；所述课件索引包括：时间区间，以及与所述时间区间对应的课件资源信息，当所述时间区间与所述视频的时间线同步时，与所述时间区间对应的课件资源和所述视频的当前帧的后景部分相似度最大；
根据所述课件索引、所述课件资源和所述视频播放的时间信息，将与所述视频的当前帧的后景部分相似度最大的课件资源作为所述三维视频的后景播放。
优选的，视频播放装置还包括索引生成单元，用于：
计算所述视频的时间线的各个时间点上的当前帧与所述课件资源包含的课件图像的相似度；
确定出与所述视频的时间线的各个时间点上的当前帧的后景部分相似度最高的课件图像；
根据所述视频的时间线的各个时间点，以及与所述视频的时间线的各个时间点上的当前帧的后景部分相似度最高的课件图像，生成课件索引。
优选的，视频播放装置还包括存储单元，用于将所述课件索引和所述课件资源分别存储至指定位置。
优选的，三维视频播放单元530还用于当接收到三维视频播放任务时，通过Web GL在三维空间中生成前景层和后景层, 所述前景层和所述后景层之间设置预设深度。
优选的，三维视频播放单元530还用于根据用户的操作，调整三维视频的显示视角。
为了实现本发明的运行，本发明还包括一种电子设备，包括存储器和处理器，所述存储器用于存储计算机指令，所述计算机指令被所述处理器执行以实现上述一种智能化深度调整分层的课程播放方法。
为了实现本发明的存储，本发明还包括一种可读存储介质，其上存储有计算机指令，该计算机指令被处理器执行时实现上述一种智能化深度调整分层的课程播放方法。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种视频播放方法，其特征在于，包括：
获取视频，以及获取与所述视频对应的课件资源；
对所述视频作前后景分割处理，获取所述视频的前景部分和后景部分；
当接收到三维视频播放任务时，将所述视频的前景部分作为三维视频的前景播放；以及，将与所述视频的当前帧的后景部分相似度最大的课件资源作为所述三维视频的后景播放。
2.如权利要求1所述的方法，其特征在于，将与所述视频的当前帧的后景部分相似度最大的课件资源作为所述三维视频的后景播放，包括：
获取预先生成的课件索引；所述课件索引包括：时间区间，以及与所述时间区间对应的课件资源信息，当所述时间区间与所述视频的时间线同步时，与所述时间区间对应的课件资源和所述视频的当前帧的后景部分相似度最大；
根据所述课件索引、所述课件资源和所述视频播放的时间信息，将与所述视频的当前帧的后景部分相似度最大的课件资源作为所述三维视频的后景播放。
3.如权利要求2所述的方法，其特征在于，生成课件索引，包括：
计算所述视频的时间线的各个时间点上的当前帧的后景部分与所述课件资源包含的课件图像的相似度；
确定出与所述视频的时间线的各个时间点上的当前帧的后景部分相似度最高的课件图像；
根据所述视频的时间线的各个时间点，以及与所述视频的时间线的各个时间点上的当前帧的当前帧的后景部分相似度最高的课件图像，生成课件索引。
4.如权利要求2所述的方法，其特征在于，预先生成课件索引之后，还包括：
将所述课件索引和所述课件资源分别存储至指定位置。
5.如权利要求1-4的任一项所述的方法，其特征在于，所述课件资源包括：
若干课件图像，或者，包含课件图像的课件视频。
6.如权利要求1-4的任一项所述的方法，其特征在于，当接收到三维视频播放任务时，还包括：
通过Web GL在三维空间中生成前景层和后景层, 所述前景层和所述后景层之间设置预设深度。
7.如权利要求1-4的任一项所述的方法，其特征在于，还包括：
根据用户的操作，调整所述三维视频的显示视角。
8.一种视频播放装置，其特征在于，包括：
素材获取单元，用于获取视频，以及获取与所述视频对应的课件资源；
图像分割单元，用于对所述视频作前景与后景分割处理，获取视频的前景部分和后景部分；
三维视频播放单元，用于当接收到三维视频播放任务时，将所述视频的前景部分作为三维视频的前景播放；以及，将与所述视频的当前帧的后景部分相似度最大的课件资源作为所述三维视频的后景播放。
9.一种电子设备，包括存储器和处理器，所述存储器用于存储计算机指令，其特征在于，所述计算机指令被所述处理器执行以实现如权利要求1-7任一项所述的方法。
10.一种可读存储介质，其上存储有计算机指令，其特征在于，该计算机指令被处理器执行时实现如权利要求1-7任一项所述的方法。
CN202110377315.8A 2021-04-08 2021-04-08 一种视频播放方法、装置、可读存储介质、电子设备 Active CN112804516B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110377315.8A CN112804516B (zh) 2021-04-08 2021-04-08 一种视频播放方法、装置、可读存储介质、电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110377315.8A CN112804516B (zh) 2021-04-08 2021-04-08 一种视频播放方法、装置、可读存储介质、电子设备

Publications (2)

Publication Number Publication Date
CN112804516A true CN112804516A (zh) 2021-05-14
CN112804516B CN112804516B (zh) 2021-07-06

Family

ID=75816588

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110377315.8A Active CN112804516B (zh) 2021-04-08 2021-04-08 一种视频播放方法、装置、可读存储介质、电子设备

Country Status (1)

Country Link
CN (1) CN112804516B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113963000A (zh) * 2021-10-21 2022-01-21 北京字节跳动网络技术有限公司 图像分割方法、装置、电子设备及程序产品
CN114007098A (zh) * 2021-11-04 2022-02-01 Oook(北京)教育科技有限责任公司 一种用于智能课堂中3d全息视频的生成方法和装置

Citations (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040160640A1 (en) * 2001-08-16 2004-08-19 Corrales Richard C. Systems and methods for creating three-dimensional and animated images
CN103024416A (zh) * 2011-12-14 2013-04-03 微软公司 视差补偿
CN104994434A (zh) * 2015-07-06 2015-10-21 天脉聚源（北京）教育科技有限公司 一种视频播放方法及装置
CN105677626A (zh) * 2014-11-20 2016-06-15 北京世纪好未来教育科技有限公司 课件之配置文件的自动生成方法及装置
CN106157341A (zh) * 2015-03-30 2016-11-23 阿里巴巴集团控股有限公司 生成合成图片的方法及装置
CN106303694A (zh) * 2015-06-25 2017-01-04 上海峙森网络科技有限公司 一种多媒体幻灯片制备的方法
CN106572385A (zh) * 2015-10-10 2017-04-19 北京佳讯飞鸿电气股份有限公司 一种用于远程培训视频呈现的图像叠加方法
CN106846940A (zh) * 2016-12-29 2017-06-13 珠海思课技术有限公司 一种在线直播课堂教育的实现方法
CN107025813A (zh) * 2017-05-08 2017-08-08 上海哇嗨网络科技有限公司 基于即时通讯工具的在线教育方法和系统
CN107801083A (zh) * 2016-09-06 2018-03-13 星播网（深圳）信息有限公司 一种基于三维虚拟技术的网络实时互动直播方法及装置
CN107945231A (zh) * 2017-11-21 2018-04-20 江西服装学院 一种三维视频播放方法及装置
CN108010394A (zh) * 2017-12-20 2018-05-08 杭州埃欧哲建设工程咨询有限公司 一种基于vr的虚拟教学方法、控制终端、虚拟教学系统
CN108270978A (zh) * 2016-12-30 2018-07-10 纳恩博（北京）科技有限公司 一种图像处理方法和装置
CN109785687A (zh) * 2019-01-31 2019-05-21 北京谦仁科技有限公司 一种用于在线视频教学的数据处理方法、装置及系统
CN109840881A (zh) * 2018-12-12 2019-06-04 深圳奥比中光科技有限公司 一种3d特效图像生成方法、装置及设备
CN109887096A (zh) * 2019-01-24 2019-06-14 深圳职业技术学院 利用虚拟现实技术的教育教学信息处理系统及其教学方法
CN110047034A (zh) * 2019-03-27 2019-07-23 北京大生在线科技有限公司 在线教育场景下的抠图换背景方法、客户端及系统
CN110913267A (zh) * 2019-11-29 2020-03-24 上海赛连信息科技有限公司 图像处理方法、装置、系统、界面、介质和计算设备
CN111242962A (zh) * 2020-01-15 2020-06-05 中国平安人寿保险股份有限公司 远程培训视频的生成方法、装置、设备及存储介质
CN111581568A (zh) * 2020-03-25 2020-08-25 中山大学 一种网页端人物换背景的方法
CN112040185A (zh) * 2020-08-28 2020-12-04 深圳市融讯视通科技有限公司 一种改善远程教育课件共享的方法及系统
CN112560663A (zh) * 2020-12-11 2021-03-26 南京谦萃智能科技服务有限公司 教学视频打点方法、相关设备及可读存储介质

Patent Citations (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040160640A1 (en) * 2001-08-16 2004-08-19 Corrales Richard C. Systems and methods for creating three-dimensional and animated images
CN103024416A (zh) * 2011-12-14 2013-04-03 微软公司 视差补偿
CN105677626A (zh) * 2014-11-20 2016-06-15 北京世纪好未来教育科技有限公司 课件之配置文件的自动生成方法及装置
CN106157341A (zh) * 2015-03-30 2016-11-23 阿里巴巴集团控股有限公司 生成合成图片的方法及装置
CN106303694A (zh) * 2015-06-25 2017-01-04 上海峙森网络科技有限公司 一种多媒体幻灯片制备的方法
CN104994434A (zh) * 2015-07-06 2015-10-21 天脉聚源（北京）教育科技有限公司 一种视频播放方法及装置
CN106572385A (zh) * 2015-10-10 2017-04-19 北京佳讯飞鸿电气股份有限公司 一种用于远程培训视频呈现的图像叠加方法
CN107801083A (zh) * 2016-09-06 2018-03-13 星播网（深圳）信息有限公司 一种基于三维虚拟技术的网络实时互动直播方法及装置
CN106846940A (zh) * 2016-12-29 2017-06-13 珠海思课技术有限公司 一种在线直播课堂教育的实现方法
CN108270978A (zh) * 2016-12-30 2018-07-10 纳恩博（北京）科技有限公司 一种图像处理方法和装置
CN107025813A (zh) * 2017-05-08 2017-08-08 上海哇嗨网络科技有限公司 基于即时通讯工具的在线教育方法和系统
CN107945231A (zh) * 2017-11-21 2018-04-20 江西服装学院 一种三维视频播放方法及装置
CN108010394A (zh) * 2017-12-20 2018-05-08 杭州埃欧哲建设工程咨询有限公司 一种基于vr的虚拟教学方法、控制终端、虚拟教学系统
CN109840881A (zh) * 2018-12-12 2019-06-04 深圳奥比中光科技有限公司 一种3d特效图像生成方法、装置及设备
CN109887096A (zh) * 2019-01-24 2019-06-14 深圳职业技术学院 利用虚拟现实技术的教育教学信息处理系统及其教学方法
CN109785687A (zh) * 2019-01-31 2019-05-21 北京谦仁科技有限公司 一种用于在线视频教学的数据处理方法、装置及系统
CN110047034A (zh) * 2019-03-27 2019-07-23 北京大生在线科技有限公司 在线教育场景下的抠图换背景方法、客户端及系统
CN110913267A (zh) * 2019-11-29 2020-03-24 上海赛连信息科技有限公司 图像处理方法、装置、系统、界面、介质和计算设备
CN111242962A (zh) * 2020-01-15 2020-06-05 中国平安人寿保险股份有限公司 远程培训视频的生成方法、装置、设备及存储介质
CN111581568A (zh) * 2020-03-25 2020-08-25 中山大学 一种网页端人物换背景的方法
CN112040185A (zh) * 2020-08-28 2020-12-04 深圳市融讯视通科技有限公司 一种改善远程教育课件共享的方法及系统
CN112560663A (zh) * 2020-12-11 2021-03-26 南京谦萃智能科技服务有限公司 教学视频打点方法、相关设备及可读存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
LI-YI WU: "The Rotation Angle of the Video Background Based on Image-Based Rendering", 《2011 FOURTH INTERNATIONAL CONFERENCE ON UBI-MEDIA COMPUTING》 *
章逸: "地方高校多媒体教学运用现状及其思考", 《江西教育科研》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113963000A (zh) * 2021-10-21 2022-01-21 北京字节跳动网络技术有限公司 图像分割方法、装置、电子设备及程序产品
CN113963000B (zh) * 2021-10-21 2024-03-15 抖音视界有限公司 图像分割方法、装置、电子设备及程序产品
CN114007098A (zh) * 2021-11-04 2022-02-01 Oook(北京)教育科技有限责任公司 一种用于智能课堂中3d全息视频的生成方法和装置
CN114007098B (zh) * 2021-11-04 2024-01-30 Oook(北京)教育科技有限责任公司 一种用于智能课堂中3d全息视频的生成方法和装置

Also Published As

Publication number Publication date
CN112804516B (zh) 2021-07-06

Similar Documents

Publication Publication Date Title
CN106210861B (zh) 显示弹幕的方法及系统
CN112804516B (zh) 一种视频播放方法、装置、可读存储介质、电子设备
US9049482B2 (en) System and method for combining computer-based educational content recording and video-based educational content recording
US9684994B2 (en) Modifying perspective of stereoscopic images based on changes in user viewpoint
CN109887096A (zh) 利用虚拟现实技术的教育教学信息处理系统及其教学方法
CN113112612B (zh) 一种真实人物与混合现实动态叠加的定位方法及系统
KR20150084586A (ko) 가상 ３ｄ 아바타를 이용한 동영상 강의 저작 키오스크 및 저작 시스템
CN110427107A (zh) 虚拟与现实互动教学方法及系统、服务器、存储介质
CN106780754A (zh) 一种混合现实方法及系统
WO2019105600A1 (de) Avataranimation
Ryskeldiev et al. Streamspace: Pervasive mixed reality telepresence for remote collaboration on mobile devices
CN103823877A (zh) 实物展示方法、实物展示系统及对应的图片获取装置
CN113781660A (zh) 一种用于直播间在线渲染加工虚拟场景的方法及装置
CN114007098B (zh) 一种用于智能课堂中3d全息视频的生成方法和装置
CN108831216B (zh) 真三维虚拟仿真交互方法及系统
KR20160136833A (ko) 영상콘텐츠를 활용한 의료교육 시스템
CN115379278B (zh) 基于扩展现实（xr）技术沉浸式微课的录制方法及系统
CN116012509A (zh) 一种虚拟形象的驱动方法、系统、设备及存储介质
CN114038254A (zh) 一种虚拟现实教学方法以及系统
Nummenmaa et al. Space Pace: Method for creating augmented reality tours based on 360 videos
Flores et al. Rebuilding cultural and heritage space of corregidor island using GPS-based augmented reality
CN114025185B (zh) 一种视频回放方法、装置、电子设备及存储介质
CN114205640B (zh) 一种教学用vr场景控制系统
CN113823133B (zh) 一种将虚拟现实技术与教育培训结合的数据交换系统
CN113923460B (zh) 视频画面的显示方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant