CN106326343A - 一种基于音视频数据关联同步的电子白板数据共享系统 - Google Patents

一种基于音视频数据关联同步的电子白板数据共享系统 Download PDF

Info

Publication number
CN106326343A
CN106326343A CN201610636234.4A CN201610636234A CN106326343A CN 106326343 A CN106326343 A CN 106326343A CN 201610636234 A CN201610636234 A CN 201610636234A CN 106326343 A CN106326343 A CN 106326343A
Authority
CN
China
Prior art keywords
data
demonstration
electronic whiteboard
video data
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610636234.4A
Other languages
English (en)
Inventor
何云虎
陈亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yunyang County, Chongqing City, Rui changtongda Technology Co. Ltd.
Original Assignee
CHONGQING RUICHANG TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CHONGQING RUICHANG TECHNOLOGY Co Ltd filed Critical CHONGQING RUICHANG TECHNOLOGY Co Ltd
Priority to CN201610636234.4A priority Critical patent/CN106326343A/zh
Publication of CN106326343A publication Critical patent/CN106326343A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44—Browsing; Visualisation therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供了一种基于音视频数据关联同步的电子白板数据共享系统，在其提供电子白板内容数据共享的过程中，通过演示时间同步协议数据建立了播放演示的电子白板内容数据与同步采集的演示音频数据和演示视频数据之间的联动交互操作关系，使得在共享方实现了电子白板内容数据与现场演示音视频数据之间的关联同步共享，并且能够实现回放操作并依然保证播放进度上的关联同步，有效提升了电子白板数据共享系统所提供的电子白板数据共享服务的灵活性、生动性以及现场情况再现能力，能够用以解决基于现有技术提供的电子白板数据共享服务的灵活性和生动性不佳、现场情况再现能力有限的问题。

Description

一种基于音视频数据关联同步的电子白板数据共享系统
技术领域
本发明涉及通信技术领域和网络应用服务技术领域，特别涉及一种基于音视频数据关联同步的电子白板数据共享系统。
背景技术
电子白板是广泛用于教育、远程会议等的交互系统，安装相关软件后，实现在白板上书写、绘图、演示课件、批注等功能，并且通过互联网络技术，各类通信终端设备（包括计算机终端、手机终端、平板电脑等）都能够实时的获取电子白板上的数据信息，实现与电子白板之间的实时信息交互共享，应用于开展互联网络教学、网络会议等应用服务业务。
将电子白板与通信终端设备之间建立信息交互共享应用于开展互联网络教学、网络会议等，实际上是提供一种电子白板数据的共享服务，然而现有的电子白板数据共享服务还存在以下的不足：
1、在电子白板数据共享方只能够对电子白板数据发布方所播放演示的电子白板内容数据加以共享播放，无法直接对电子白板数据发布方所在的教学、会议等场合的现场情况加以共享，因此无法在电子白板数据共享方呈现教学、会议等场合的临场信息；虽然，可以通过在教学、会议等场合的现场增加音视频录制设备后，借助第三方即时通讯软件实现电子白板数据发布方与电子白板数据共享方之间的现场音视频实时传输，来达到模拟电子白板数据发布方所在教学、会议等场合的临场效果，但由于电子白板数据共享方所接收到的电子白板内容数据和电子白板数据共享方现场音视频数据是各自独立的，缺乏联动交互操作性，无法实现电子白板内容数据与现场演示音视频数据之间的关联同步。
2、在电子白板数据共享方仅能够共享到电子白板内容数据中已经预先载入的批注、板书等附加数据，而无法呈现出电子白板数据发布方在电子白板上演示操作过程中临时添加产生的批注、板书等数据，导致电子白板数据共享方在获得电子白板内容数据共享的过程中缺失了部分电子白板数据发布方的现场演示操作信息内容。
上述的这些不足，都使得电子白板数据共享服务的灵活性和生动性不佳，对电子白板数据发布方所在场合现场情况的再现能力非常有限，影响了电子白板数据共享服务应用于开展互联网络教学、网络会议等服务的服务效果。
发明内容
针对现有技术的上述不足，本发明的目的在于提供一种基于音视频数据关联同步的电子白板数据共享系统，其能够实现电子白板内容数据与现场演示音视频数据之间的关联同步共享，帮助提升电子白板数据共享系统所提供的电子白板数据共享服务的灵活性、生动性以及现场情况再现能力，以解决基于现有技术提供的电子白板数据共享服务的灵活性和生动性不佳、现场情况再现能力有限的问题。
为解决上述技术问题，本发明采用了如下的技术方案：
一种基于音视频数据关联同步的电子白板数据共享系统，所述电子白板数据共享系统能够在共享电子白板内容数据的同时提供演示音频数据和演示视频数据的共享，并实现电子白板内容数据与音频数据和视频数据的关联同步；该系统包括相互建立数据传输连接的电子白板数据发布客户端和电子白板数据共享播放客户端；
所述电子白板数据发布客户端具有音视频数据采集能力，用于进行电子白板内容数据的播放演示，并记录播放演示过程中不同时间节点对应的电子白板内容数据对象以及每个电子白板内容数据对象在播放演示过程中不同时间节点对应的电子白板演示状态信息和产生的电子白板演示操作数据，且同步采集电子白板内容数据播放演示过程的演示音频数据和演示视频数据，生成用于表征电子白板内容数据对象、电子白板演示状态信息、电子白板演示操作数据、演示音频数据和演示视频数据在电子白板内容数据播放演示过程中的播放时间节点对应关系的演示时间同步协议数据，并对所播放演示的各电子白板内容数据对象、所记录的电子白板演示状态信息和电子白板演示操作数据、所采集的演示音频数据和演示视频数据以及生成的演示时间同步协议数据进行对外发布；
所述电子白板数据共享播放客户端具备电子白板内容数据播放演示和音视频数据播放能力，且能够调节音频数据或视频数据的播放进度，用于获取电子白板数据发布客户端所对外发布的电子白板内容数据对象、电子白板演示状态信息、电子白板演示操作数据、演示音频数据、演示视频数据以及演示时间同步协议数据，对演示音频数据和演示视频数据进行播放，并根据演示时间同步协议数据中记录的播放时间节点对应关系确保演示音频数据和演示视频数据的同步播放，且在演示音频数据和演示视频数据的同步播放过程中，实时地根据演示时间同步协议数据中记录的播放时间节点对应关系以及演示音频数据或演示视频数据的自然播放进度或调节设定的播放进度，读取所述自然播放进度或调节设定的播放进度所在播放时间节点对应的电子白板内容数据对象、电子白板演示状态信息和电子白板演示操作数据，对所读取的电子白板内容数据对象按照所读取的电子白板演示状态信息所是指的播放演示状态进行实时同步的播放演示，并在播放演示的电子白板内容数据中实时地加载相应播放时间节点对应的电子白板演示操作数据，从而实现电子白板内容数据的播放演示与示音频数据、演示视频数据在播放进度上的关联同步。
上述基于音视频数据关联同步的电子白板数据共享系统中，作为优选方案，所述电子白板数据发布客户端生成的演示时间同步协议数据包括时间戳协议项、对象列表协议项和对象数据协议项；所述时间戳协议项用于记录演示音频数据和演示视频数据的播放时间戳，且在所述播放时间戳中以固定时间间隔标记若干个播放时间节点；所述对象列表协议项用于记录标记的各个播放时间节点各自所对应的电子白板内容数据对象识别标识；所述对象数据协议项用于记录标记的各个播放时间节点各自所对应的电子白板演示状态信息识别标识和电子白板演示操作数据识别标识。
上述基于音视频数据关联同步的电子白板数据共享系统中，作为优选方案，所述电子白板数据共享播放客户端对演示音频数据和演示视频数据进行播放的过程中，根据演示时间同步协议数据中时间戳协议项所记录的演示音频数据和演示视频数据的播放时间戳来确保演示音频数据和演示视频数据的同步播放。
上述基于音视频数据关联同步的电子白板数据共享系统中，作为优选方案，所述电子白板数据共享播放客户端对演示音频数据和演示视频数据进行播放的过程中，实时地根据演示音频数据或演示视频数据的自然播放进度或调节设定的播放进度，从演示时间同步协议数据中时间戳协议项所记录的演示音频数据和演示视频数据的播放时间戳中标记的各个播放时间节点之中找到所述自然播放进度或调节设定的播放进度所在的播放时间节点，进而根据演示时间同步协议数据中对象列表协议项和对象列表协议项的记录找到所述自然播放进度或调节设定的播放进度所在播放时间节点对应的电子白板内容数据对象识别标识、电子白板演示状态信息识别标识和电子白板演示操作数据识别标识，根据所述电子白板内容数据对象识别标识、电子白板演示状态信息识别标识和电子白板演示操作数据识别标识读取所述自然播放进度或调节设定的播放进度所在播放时间节点对应的电子白板内容数据对象、电子白板演示状态信息和电子白板演示操作数据，实现电子白板内容数据的播放演示与示音频数据、演示视频数据在播放进度上的关联同步。
相比于现有技术，本发明具有以下有益效果：
本发明基于音视频数据关联同步的电子白板数据共享系统，在其提供电子白板内容数据共享的过程中，在进行电子白板内容数据播放演示情况及其现场的演示音频数据、演示视频数据的同步采集的基础上，还通过演示时间同步协议数据建立了播放演示的电子白板内容数据与演示音频数据和演示视频数据之间的联动交互操作关系，使得在共享方实现了电子白板内容数据与现场演示音视频数据之间的关联同步共享，并且在共享播放演示中的任意自然播放进度或调节设定的播放进度下都能够保证电子白板内容数据的播放演示与示音频数据、演示视频数据在播放进度上的关联同步，从而可以实现回放操作，有效提升了电子白板数据共享系统所提供的电子白板数据共享服务的灵活性、生动性以及现场情况再现能力，能够用以解决基于现有技术提供的电子白板数据共享服务的灵活性和生动性不佳、现场情况再现能力有限的问题。
附图说明
图1为本发明基于音视频数据关联同步的电子白板数据共享系统的构架框图。
图2为本发明基于音视频数据关联同步的电子白板数据共享系统中演示时间同步协议数据的一种协议设计构架示意图。
具体实施方式
下面结合附图和实施例对本发明的技术方案进一步说明。
在现有技术中所提供的电子白板数据共享服务，由于提供共享的电子白板内容数据与现场演示音视频数据各自独立，两者之间无法实现联动交互操作的关联同步，同时在贡献过程中缺失了部分电子白板数据发布方的现场演示操作信息内容，导致了电子白板数据共享服务的灵活性和生动性不佳、现场情况再现能力有限的问题。为了能够解决这些问题，本发明提供了一种基于音视频数据关联同步的电子白板数据共享系统，能够在共享电子白板内容数据的同时提供演示音频数据和演示视频数据的共享，并实现电子白板内容数据与音频数据和视频数据的关联同步，进而达到帮助提升电子白板数据共享系统所提供的电子白板数据共享服务的灵活性、生动性以及现场情况再现能力的效果。
如图1所示，本发明基于音视频数据关联同步的电子白板数据共享系统，包括相互建立数据传输连接的电子白板数据发布客户端和电子白板数据共享播放客户端；其中，电子白板数据发布客户端具有音视频数据采集能力，用于进行电子白板内容数据的播放演示，并记录播放演示过程中不同时间节点对应的电子白板内容数据对象以及每个电子白板内容数据对象在播放演示过程中不同时间节点对应的电子白板演示状态信息和产生的电子白板演示操作数据，且同步采集电子白板内容数据播放演示过程的演示音频数据和演示视频数据，生成用于表征电子白板内容数据对象、电子白板演示状态信息、电子白板演示操作数据、演示音频数据和演示视频数据在电子白板内容数据播放演示过程中的播放时间节点对应关系的演示时间同步协议数据，并对所播放演示的各电子白板内容数据对象、所记录的电子白板演示状态信息和电子白板演示操作数据、所采集的演示音频数据和演示视频数据以及生成的演示时间同步协议数据进行对外发布；电子白板数据共享播放客户端具备电子白板内容数据播放演示和音视频数据播放能力，且能够调节音频数据或视频数据的播放进度，用于获取电子白板数据发布客户端所对外发布的电子白板内容数据对象、电子白板演示状态信息、电子白板演示操作数据、演示音频数据、演示视频数据以及演示时间同步协议数据，对演示音频数据和演示视频数据进行播放，并根据演示时间同步协议数据中记录的播放时间节点对应关系确保演示音频数据和演示视频数据的同步播放，且在演示音频数据和演示视频数据的同步播放过程中，实时地根据演示时间同步协议数据中记录的播放时间节点对应关系以及演示音频数据或演示视频数据的自然播放进度或调节设定的播放进度，读取所述自然播放进度或调节设定的播放进度所在播放时间节点对应的电子白板内容数据对象、电子白板演示状态信息和电子白板演示操作数据，对所读取的电子白板内容数据对象按照所读取的电子白板演示状态信息所是指的播放演示状态进行实时同步的播放演示，并在播放演示的电子白板内容数据中实时地加载相应播放时间节点对应的电子白板演示操作数据，从而实现电子白板内容数据的播放演示与示音频数据、演示视频数据在播放进度上的关联同步。
在本发明中，电子白板数据发布客户端可以是增设有音频、视频采集设备的电子白板设备，能够在进行电子白板内容数据播放演示的同时进行演示音频数据和演示视频数据的采集，而电子白板数据共享播放客户端可以是电子白板，也可以是计算机终端、手机终端、平板电脑等具备数据处理和通信能力的电子终端设备；同时，在本发明中，电子白板内容数据对象是指用以运行呈现电子白板内容数据的计算机可识别格式文件对象，例如Word文件、Excel文件、PowerPoint文件、PDF文件等常用的信息文档文件，或者能够通过专用软件或浏览器进行播放演示的计算机可识别格式文件，都可以作为电子白板内容数据对象；电子白板演示状态信息是指用以指示电子白板内容数据对象运行演示时状态的信息，例如用以指示电子白板内容数据对象所播放演示的显示窗口尺寸状态、演示页码位置状态、演示段落位置状态等；电子白板演示操作数据是指用以指示电子白板内容数据对象在播放演示过程中对其进行演示操作所额外产生的附属数据，例如演示操作中额外添加的板书、批注等。
由此，本发明基于音视频数据关联同步的电子白板数据共享系统具备了如下的关联同步式共享机制：首先，在电子白板数据发布客户端进行电子白板内容数据的播放演示过程中，电子白板数据发布客户端会记录播放演示过程中不同时间节点对应的电子白板内容数据对象以及每个电子白板内容数据对象在播放演示过程中不同时间节点对应的电子白板演示状态信息和产生的电子白板演示操作数据，并且同步采集电子白板内容数据播放演示过程的演示音频数据和演示视频数据，且生成演示时间同步协议数据用以表征电子白板内容数据对象、电子白板演示状态信息、电子白板演示操作数据、演示音频数据和演示视频数据在电子白板内容数据播放演示过程中的播放时间节点对应关系，这些数据均对外进行发布，其具体的对外发布方式，可以是直接发布给与之建立数据传输连接的电子白板数据共享播放客户端，也可以是发布上传至互联网络中的服务器上；而电子白板数据共享播放客户端则获取电子白板数据发布客户端所对外发布的电子白板内容数据对象、电子白板演示状态信息、电子白板演示操作数据、演示音频数据、演示视频数据以及演示时间同步协议数据，其具体的获取方式，可以是直接接收来自电子白板数据发布客户端对外发布的数据，也可以是从互联网络中的服务器上接收获取电子白板数据发布客户端发布上传到服务器上的数据，电子白板数据共享播放客户端成功接收到这些数据之后，便可以对进行演示音频数据、演示视频数据和电子白板内容数据的关联同步播放，无论是按照播放进程进行到任意位置的自然播放进度，还是在播放过程中被调节设定到任意的播放进度，演示音频数据、演示视频数据和电子白板内容数据始终能够根据演示时间同步协议数据中记录的播放时间节点对应关系来保证关联同步播放，从而使得在电子白板数据共享播放客户端播放演示的该三种数据之间具备了联动交互操作性，便于共享方使用者能够在同步收听和观看电子白板内容数据播放演示现场所的演示音频数据和演示视频数据的同时，还能够同步的观看到相同进度的电子白板内容数据，并且在同步播放演示的电子白板内容数据中还一并呈现出了演示操作过程中临时添加产生的批注、板书等电子白板演示操作数据，提升了电子白板数据共享系统所提供的电子白板数据共享服务的灵活性、生动性以及现场情况再现能力。
在电子白板数据共享播放客户端进行演示音频数据、演示视频数据和电子白板内容数据的关联同步播放过程中，三者之间的关联同步播放是根据演示时间同步协议数据中记录的播放时间节点对应关系来保证的；具体应用设计中，电子白板数据发布客户端生成的演示时间同步协议数据可以采用多种不同方式的协议设计形式，而作为一种优选的方式，演示时间同步协议数据的协议设计形式可以设计为包括时间戳协议项、对象列表协议项和对象数据协议项，其中，时间戳协议项用于记录演示音频数据和演示视频数据的播放时间戳，且在所述播放时间戳中以固定时间间隔标记若干个播放时间节点，对象列表协议项用于记录标记的各个播放时间节点各自所对应的电子白板内容数据对象识别标识，对象数据协议项用于记录标记的各个播放时间节点各自所对应的电子白板演示状态信息识别标识和电子白板演示操作数据识别标识。这样以来，电子白板数据共享播放客户端对演示音频数据和演示视频数据进行播放的过程中，便可以直接根据演示时间同步协议数据中时间戳协议项所记录的演示音频数据和演示视频数据的播放时间戳来确保演示音频数据和演示视频数据的同步播放；而电子白板数据共享播放客户端对演示音频数据和演示视频数据进行播放的过程中，可以实时地根据演示音频数据或演示视频数据的自然播放进度或调节设定的播放进度，从演示时间同步协议数据中时间戳协议项所记录的演示音频数据和演示视频数据的播放时间戳中标记的各个播放时间节点之中找到所述自然播放进度或调节设定的播放进度所在的播放时间节点，进而根据演示时间同步协议数据中对象列表协议项和对象列表协议项的记录找到所述自然播放进度或调节设定的播放进度所在播放时间节点对应的电子白板内容数据对象识别标识、电子白板演示状态信息识别标识和电子白板演示操作数据识别标识，根据所述电子白板内容数据对象识别标识、电子白板演示状态信息识别标识和电子白板演示操作数据识别标识读取所述自然播放进度或调节设定的播放进度所在播放时间节点对应的电子白板内容数据对象、电子白板演示状态信息和电子白板演示操作数据，实现电子白板内容数据的播放演示与示音频数据、演示视频数据在播放进度上的关联同步。采用此优选方案的演示时间同步协议数据的协议设计形式，不仅能够很好的保证电子白板内容数据的播放演示与示音频数据、演示视频数据在播放进度上的关联同步，并且可以使得演示时间同步协议数据的协议内容简单，协议数据量小，也有助于简化电子白板数据共享播放客户端对演示时间同步协议数据的解析处理。
下面通过一个实施例，来对本发明的电子白板数据共享系统加以进一步的说明。例如，在一个互联网络远程教学应用场景中，老师采用配备有音频、视频采集设备的电子白板进行多个PPT文件（PowerPoint文件）课件的播放演示和讲解，以该多PPT文件课件作为授课播放演示的电子白板内容数据，并在讲解过程中进行演示操作产生了临时的板书、标注等电子白板演示操作数据，以便于学生理解，电子白板的控制处理芯片在PPT文件课件的播放演示过程中记录不同时间节点对应的作为电子白板内容数据对象的PPT文件课件信息以及每个电子白板内容数据对象在播放演示过程中不同时间节点对应的电子白板演示状态信息和产生的电子白板演示操作数据，同时由音频、视频采集设备采集老师讲课过程的声音和影像，分别形成演示音频数据和演示视频数据传输给电子白板设备，且期间由电子白板设备的控制处理芯片处理生成了演示时间同步协议数据来记录电子白板内容数据对象、电子白板演示状态信息、电子白板演示操作数据、演示音频数据和演示视频数据在电子白板内容数据播放演示过程中的播放时间节点对应关系，并将作为授课播放演示的电子白板内容数据对象的各个PPT文件、所记录的电子白板演示状态信息和电子白板演示操作数据、所采集的演示音频数据和演示视频数据以及生成的演示时间同步协议数据进行对外发布，具体的发布对象可以是学生用以作为电子白板数据共享播放客户端的是计算机终端、手机终端、平板电脑等设备，也可以发布上传到互联网络中的服务器上，使得学生可以通过其电子白板数据共享播放客户端通过互联网连接到服务器来获取这些数据进行电子白板数据的共享；学生通过其电子白板数据共享播放客户端获取到这些数据后，就可以又电子白板数据共享播放客户端根据演示时间同步协议数据对作为授课播放演示的电子白板内容数据对象的各个PPT文件以及演示音频数据和演示视频数据进行关联同步播放，且播放演示的PPT文件的演示状态和演示操作数据都是与演示音频数据和演示视频数据相同步的，从而再现出老师的授课过程；如果学生点击演示音频数据或演示视频数据的播放时间线以调节设定播放进度，电子白板数据共享播放客户端便会演示时间同步协议数据中记录的播放时间节点对应关系，读取当前调节设定的播放进度所在播放时间节点对应的电子白板内容数据对象、电子白板演示状态信息和电子白板演示操作数据，对所读取的电子白板内容数据对象按照所读取的电子白板演示状态信息所是指的播放演示状态进行实时同步的播放演示，并在播放演示的电子白板内容数据中实时地加载相应播放时间节点对应的电子白板演示操作数据，同步的再现对演示音频数据或演示视频数据调节设定的播放进度时刻所对应的电子白板内容数据播放演示进度，让学生可以回放老师在授课过程中任意时刻的音视频及其对应的授课内容，达到更好的互联网络教学效果。
可以看到，本发明基于音视频数据关联同步的电子白板数据共享系统，在其提供电子白板内容数据共享的过程中，在进行电子白板内容数据播放演示情况及其现场的演示音频数据、演示视频数据的同步采集的基础上，还通过演示时间同步协议数据建立了播放演示的电子白板内容数据与演示音频数据和演示视频数据之间的联动交互操作关系，使得在共享方实现了电子白板内容数据与现场演示音视频数据之间的关联同步共享，并且在共享播放演示中的任意自然播放进度或调节设定的播放进度下都能够保证电子白板内容数据的播放演示与示音频数据、演示视频数据在播放进度上的关联同步，从而可以实现回放操作，有效提升了电子白板数据共享系统所提供的电子白板数据共享服务的灵活性、生动性以及现场情况再现能力，能够用以解决基于现有技术提供的电子白板数据共享服务的灵活性和生动性不佳、现场情况再现能力有限的问题。
最后说明的是，以上实施例仅用以说明本发明的技术方案而非限制，尽管参照实施例对本发明进行了详细说明，本领域的普通技术人员应当理解，可以对本发明的技术方案进行修改或者等同替换，而不脱离本发明技术方案的宗旨和范围，其均应涵盖在本发明的权利要求范围当中。

Claims (4)

1.一种基于音视频数据关联同步的电子白板数据共享系统，其特征在于，所述电子白板数据共享系统能够在共享电子白板内容数据的同时提供演示音频数据和演示视频数据的共享，并实现电子白板内容数据与音频数据和视频数据的关联同步；该系统包括相互建立数据传输连接的电子白板数据发布客户端和电子白板数据共享播放客户端；
所述电子白板数据发布客户端具有音视频数据采集能力，用于进行电子白板内容数据的播放演示，并记录播放演示过程中不同时间节点对应的电子白板内容数据对象以及每个电子白板内容数据对象在播放演示过程中不同时间节点对应的电子白板演示状态信息和产生的电子白板演示操作数据，且同步采集电子白板内容数据播放演示过程的演示音频数据和演示视频数据，生成用于表征电子白板内容数据对象、电子白板演示状态信息、电子白板演示操作数据、演示音频数据和演示视频数据在电子白板内容数据播放演示过程中的播放时间节点对应关系的演示时间同步协议数据，并对所播放演示的各电子白板内容数据对象、所记录的电子白板演示状态信息和电子白板演示操作数据、所采集的演示音频数据和演示视频数据以及生成的演示时间同步协议数据进行对外发布；
所述电子白板数据共享播放客户端具备电子白板内容数据播放演示和音视频数据播放能力，且能够调节音频数据或视频数据的播放进度，用于获取电子白板数据发布客户端所对外发布的电子白板内容数据对象、电子白板演示状态信息、电子白板演示操作数据、演示音频数据、演示视频数据以及演示时间同步协议数据，对演示音频数据和演示视频数据进行播放，并根据演示时间同步协议数据中记录的播放时间节点对应关系确保演示音频数据和演示视频数据的同步播放，且在演示音频数据和演示视频数据的同步播放过程中，实时地根据演示时间同步协议数据中记录的播放时间节点对应关系以及演示音频数据或演示视频数据的自然播放进度或调节设定的播放进度，读取所述自然播放进度或调节设定的播放进度所在播放时间节点对应的电子白板内容数据对象、电子白板演示状态信息和电子白板演示操作数据，对所读取的电子白板内容数据对象按照所读取的电子白板演示状态信息所是指的播放演示状态进行实时同步的播放演示，并在播放演示的电子白板内容数据中实时地加载相应播放时间节点对应的电子白板演示操作数据，从而实现电子白板内容数据的播放演示与示音频数据、演示视频数据在播放进度上的关联同步。
2.根据权利要求1所述基于音视频数据关联同步的电子白板数据共享系统，其特征在于，所述电子白板数据发布客户端生成的演示时间同步协议数据包括时间戳协议项、对象列表协议项和对象数据协议项；
所述时间戳协议项用于记录演示音频数据和演示视频数据的播放时间戳，且在所述播放时间戳中以固定时间间隔标记若干个播放时间节点；
所述对象列表协议项用于记录标记的各个播放时间节点各自所对应的电子白板内容数据对象识别标识；
所述对象数据协议项用于记录标记的各个播放时间节点各自所对应的电子白板演示状态信息识别标识和电子白板演示操作数据识别标识。
3.根据权利要求2所述基于音视频数据关联同步的电子白板数据共享系统，其特征在于，所述电子白板数据共享播放客户端对演示音频数据和演示视频数据进行播放的过程中，根据演示时间同步协议数据中时间戳协议项所记录的演示音频数据和演示视频数据的播放时间戳来确保演示音频数据和演示视频数据的同步播放。
4.根据权利要求2所述基于音视频数据关联同步的电子白板数据共享系统，其特征在于，所述电子白板数据共享播放客户端对演示音频数据和演示视频数据进行播放的过程中，实时地根据演示音频数据或演示视频数据的自然播放进度或调节设定的播放进度，从演示时间同步协议数据中时间戳协议项所记录的演示音频数据和演示视频数据的播放时间戳中标记的各个播放时间节点之中找到所述自然播放进度或调节设定的播放进度所在的播放时间节点，进而根据演示时间同步协议数据中对象列表协议项和对象列表协议项的记录找到所述自然播放进度或调节设定的播放进度所在播放时间节点对应的电子白板内容数据对象识别标识、电子白板演示状态信息识别标识和电子白板演示操作数据识别标识，根据所述电子白板内容数据对象识别标识、电子白板演示状态信息识别标识和电子白板演示操作数据识别标识读取所述自然播放进度或调节设定的播放进度所在播放时间节点对应的电子白板内容数据对象、电子白板演示状态信息和电子白板演示操作数据，实现电子白板内容数据的播放演示与示音频数据、演示视频数据在播放进度上的关联同步。
CN201610636234.4A 2016-08-05 2016-08-05 一种基于音视频数据关联同步的电子白板数据共享系统 Pending CN106326343A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610636234.4A CN106326343A (zh) 2016-08-05 2016-08-05 一种基于音视频数据关联同步的电子白板数据共享系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610636234.4A CN106326343A (zh) 2016-08-05 2016-08-05 一种基于音视频数据关联同步的电子白板数据共享系统

Publications (1)

Publication Number Publication Date
CN106326343A true CN106326343A (zh) 2017-01-11

Family

ID=57739601

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610636234.4A Pending CN106326343A (zh) 2016-08-05 2016-08-05 一种基于音视频数据关联同步的电子白板数据共享系统

Country Status (1)

Country Link
CN (1) CN106326343A (zh)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106951457A (zh) * 2017-02-24 2017-07-14 北京银河润泰科技有限公司 曲谱的处理方法及装置
CN107679111A (zh) * 2017-09-15 2018-02-09 广州视源电子科技股份有限公司 播放演示文件的方法和系统
CN108377229A (zh) * 2018-01-23 2018-08-07 广州视源电子科技股份有限公司 数据处理方法、发送终端、服务器及接收终端
CN108965786A (zh) * 2018-07-25 2018-12-07 深圳市异度信息产业有限公司 一种电子白板内容共享方法及装置
CN109547831A (zh) * 2018-11-19 2019-03-29 网宿科技股份有限公司 一种白板与视频同步的方法、装置、计算设备及存储介质
CN109640108A (zh) * 2018-12-13 2019-04-16 广州易方信息科技股份有限公司 基于文档类直播交互数据和音视频数据同步方法和系统
CN110290106A (zh) * 2019-05-13 2019-09-27 视联动力信息技术股份有限公司 显示系统
CN110753256A (zh) * 2019-09-18 2020-02-04 深圳壹账通智能科技有限公司 录像回放的方法、装置、存储介质及计算机设备
WO2020119229A1 (zh) * 2018-12-11 2020-06-18 中兴通讯股份有限公司 电子白板的控制方法、移动终端及电子白板系统
CN111327510A (zh) * 2018-12-13 2020-06-23 国家电投集团科学技术研究院有限公司 核电计算分析业务的通讯系统
CN111541945A (zh) * 2020-04-28 2020-08-14 Oppo广东移动通信有限公司 视频播放进度控制方法、装置、存储介质及电子设备
WO2020199304A1 (zh) * 2019-04-04 2020-10-08 网宿科技股份有限公司 一种同步播放消息流与音视频流的方法、装置和系统
CN112543297A (zh) * 2019-09-20 2021-03-23 北京新媒传信科技有限公司 一种视频会议直播方法、装置和系统
CN113038247A (zh) * 2021-03-18 2021-06-25 深圳奇实科技有限公司 电子白板智能录播的方法
US11102540B2 (en) 2019-04-04 2021-08-24 Wangsu Science & Technology Co., Ltd. Method, device and system for synchronously playing message stream and audio-video stream
CN113905003A (zh) * 2021-10-12 2022-01-07 广州创必承信息科技有限公司 一种智能交互的同频互动讲解方法及系统
CN113971551A (zh) * 2021-12-27 2022-01-25 深圳至简天成科技有限公司 一种在线面试的实时评估方法及系统
WO2022104606A1 (zh) * 2020-11-18 2022-05-27 京东方科技集团股份有限公司 终端的交互方法、电子白板及计算机非瞬态可读存储介质
WO2024021078A1 (zh) * 2022-07-29 2024-02-01 京东方科技集团股份有限公司 一种图文交互的方法及显示设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105306861A (zh) * 2015-10-15 2016-02-03 深圳市时尚德源文化传播有限公司 一种网络教学录播方法及系统
CN105376634A (zh) * 2014-08-26 2016-03-02 天脉聚源（北京）教育科技有限公司 多种媒体的同步录制方法
CN105405325A (zh) * 2015-12-22 2016-03-16 深圳市时尚德源文化传播有限公司 一种网络教学方法及系统
CN105407379A (zh) * 2014-08-26 2016-03-16 天脉聚源（北京）教育科技有限公司 多种媒体的同步录制方法
CN105451065A (zh) * 2014-08-26 2016-03-30 天脉聚源（北京）教育科技有限公司 多种媒体的同步录制方法
US20160217829A1 (en) * 2013-03-15 2016-07-28 JBF Interlude 2009 LTD System and method for synchronization of selectably presentable media streams

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160217829A1 (en) * 2013-03-15 2016-07-28 JBF Interlude 2009 LTD System and method for synchronization of selectably presentable media streams
CN105376634A (zh) * 2014-08-26 2016-03-02 天脉聚源（北京）教育科技有限公司 多种媒体的同步录制方法
CN105407379A (zh) * 2014-08-26 2016-03-16 天脉聚源（北京）教育科技有限公司 多种媒体的同步录制方法
CN105451065A (zh) * 2014-08-26 2016-03-30 天脉聚源（北京）教育科技有限公司 多种媒体的同步录制方法
CN105306861A (zh) * 2015-10-15 2016-02-03 深圳市时尚德源文化传播有限公司 一种网络教学录播方法及系统
CN105405325A (zh) * 2015-12-22 2016-03-16 深圳市时尚德源文化传播有限公司 一种网络教学方法及系统

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106951457A (zh) * 2017-02-24 2017-07-14 北京银河润泰科技有限公司 曲谱的处理方法及装置
CN107679111A (zh) * 2017-09-15 2018-02-09 广州视源电子科技股份有限公司 播放演示文件的方法和系统
CN108377229A (zh) * 2018-01-23 2018-08-07 广州视源电子科技股份有限公司 数据处理方法、发送终端、服务器及接收终端
CN108377229B (zh) * 2018-01-23 2021-08-17 广州视源电子科技股份有限公司 数据处理方法、发送终端、服务器及接收终端
CN108965786A (zh) * 2018-07-25 2018-12-07 深圳市异度信息产业有限公司 一种电子白板内容共享方法及装置
WO2020103203A1 (zh) * 2018-11-19 2020-05-28 网宿科技股份有限公司 一种白板与视频同步的方法、装置、计算设备及存储介质
CN109547831A (zh) * 2018-11-19 2019-03-29 网宿科技股份有限公司 一种白板与视频同步的方法、装置、计算设备及存储介质
CN109547831B (zh) * 2018-11-19 2021-06-01 网宿科技股份有限公司 一种白板与视频同步的方法、装置、计算设备及存储介质
WO2020119229A1 (zh) * 2018-12-11 2020-06-18 中兴通讯股份有限公司 电子白板的控制方法、移动终端及电子白板系统
CN109640108A (zh) * 2018-12-13 2019-04-16 广州易方信息科技股份有限公司 基于文档类直播交互数据和音视频数据同步方法和系统
CN111327510A (zh) * 2018-12-13 2020-06-23 国家电投集团科学技术研究院有限公司 核电计算分析业务的通讯系统
CN109640108B (zh) * 2018-12-13 2020-10-30 广州易方信息科技股份有限公司 基于文档类直播交互数据和音视频数据同步方法和系统
CN111327510B (zh) * 2018-12-13 2022-02-08 国家电投集团科学技术研究院有限公司 核电计算分析业务的通讯系统
WO2020199304A1 (zh) * 2019-04-04 2020-10-08 网宿科技股份有限公司 一种同步播放消息流与音视频流的方法、装置和系统
US11102540B2 (en) 2019-04-04 2021-08-24 Wangsu Science & Technology Co., Ltd. Method, device and system for synchronously playing message stream and audio-video stream
CN110290106A (zh) * 2019-05-13 2019-09-27 视联动力信息技术股份有限公司 显示系统
CN110290106B (zh) * 2019-05-13 2022-03-04 视联动力信息技术股份有限公司 显示系统
CN110753256A (zh) * 2019-09-18 2020-02-04 深圳壹账通智能科技有限公司 录像回放的方法、装置、存储介质及计算机设备
CN110753256B (zh) * 2019-09-18 2022-09-16 深圳壹账通智能科技有限公司 录像回放的方法、装置、存储介质及计算机设备
CN112543297A (zh) * 2019-09-20 2021-03-23 北京新媒传信科技有限公司 一种视频会议直播方法、装置和系统
CN112543297B (zh) * 2019-09-20 2024-03-29 北京新媒传信科技有限公司 一种视频会议直播方法、装置和系统
CN111541945A (zh) * 2020-04-28 2020-08-14 Oppo广东移动通信有限公司 视频播放进度控制方法、装置、存储介质及电子设备
CN111541945B (zh) * 2020-04-28 2022-05-10 Oppo广东移动通信有限公司 视频播放进度控制方法、装置、存储介质及电子设备
WO2022104606A1 (zh) * 2020-11-18 2022-05-27 京东方科技集团股份有限公司 终端的交互方法、电子白板及计算机非瞬态可读存储介质
CN113038247A (zh) * 2021-03-18 2021-06-25 深圳奇实科技有限公司 电子白板智能录播的方法
CN113905003A (zh) * 2021-10-12 2022-01-07 广州创必承信息科技有限公司 一种智能交互的同频互动讲解方法及系统
CN113971551A (zh) * 2021-12-27 2022-01-25 深圳至简天成科技有限公司 一种在线面试的实时评估方法及系统
WO2024021078A1 (zh) * 2022-07-29 2024-02-01 京东方科技集团股份有限公司 一种图文交互的方法及显示设备

Similar Documents

Publication Publication Date Title
CN106326343A (zh) 一种基于音视频数据关联同步的电子白板数据共享系统
Latchman et al. Information technology enhanced learning in distance and conventional education
Murray et al. Student Perceptions of Flipped Learning.
WO2015089888A1 (zh) 一种基于全景学习系统平台的师生互动教学方法
TW201044331A (en) Interactive teaching system
CN205158690U (zh) 一种课堂云和教育云协作的教学交互系统
CN106534188A (zh) 课堂操作轨迹同步方法及系统
Snow et al. Network EducationWare: an open-source web-based system for synchronous distance education
Shoemaker et al. ePiano, a case of music education via internet in rural Zambia
Iorwerth et al. Challenges of using networked music performance in education
Charles et al. Design and implementation of a web-based virtual classroom system
Ebner et al. Lifelong learning and Doctoral Studies–Facilitation with Podcasting Techniques
Mchichi et al. Web 2.0 based e-learning: Moodle-openmeetings platform
Labhart et al. The ShanghAI Lectures: A global education project on artificial intelligence
Ihama et al. A review of virtual learning systems
Fazakas et al. Collaborative learning tools for formal and informal engineering education
Chunwijitra An advanced cloud-based e-learning platform for higher education for low speed internet
Adler Conducting pantless: Exploring internet communication technologies to rehearse choirs at a distance
Støckert et al. Hybrid Spaces in Higher Education: A Comprehensive Guide to Pedagogical, Space and Technology Design
Kardaš et al. E-learning: delivering knowledge in digital age
Day et al. Determining the requirements for geographically extended learning (gxLearning): A multiple case study approach
Jackson et al. Framework for Cooperative Synchronous and Asynchronous Distributed Engineering Education
Öz Converging of Virtual and Traditional University Teaching for Educating Digital Generation: Class Simulcasting and Backchanneling
Mark et al. Student engagement in geographically distributed classrooms through localized solutions
Mahmud et al. Contribution Of Information And Communication Technology In Achieving Adult Education Programmes In Nigeria

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20170706

Address after: 404500, Yunyang Chongqing industrial park people and groups of standard factory building, A District, building 1, 1-2

Applicant after: Yunyang County, Chongqing City, Rui changtongda Technology Co. Ltd.

Address before: Jiulongpo District of Chongqing City Park Street 400039 No. 139 of 61 No. 8-3

Applicant before: CHONGQING RUICHANG TECHNOLOGY CO., LTD.

TA01 Transfer of patent application right
RJ01 Rejection of invention patent application after publication

Application publication date: 20170111

RJ01 Rejection of invention patent application after publication