CN111124333A - 电子白板显示内容同步的方法、装置、设备以及存储介质 - Google Patents
电子白板显示内容同步的方法、装置、设备以及存储介质 Download PDFInfo
- Publication number
- CN111124333A CN111124333A CN201911236139.5A CN201911236139A CN111124333A CN 111124333 A CN111124333 A CN 111124333A CN 201911236139 A CN201911236139 A CN 201911236139A CN 111124333 A CN111124333 A CN 111124333A
- Authority
- CN
- China
- Prior art keywords
- video
- display
- video networking
- data
- packet
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 70
- 238000003860 storage Methods 0.000 title claims abstract description 15
- 230000006855 networking Effects 0.000 claims abstract description 207
- 230000005540 biological transmission Effects 0.000 claims abstract description 33
- 230000008569 process Effects 0.000 claims abstract description 25
- 238000004590 computer program Methods 0.000 claims description 16
- 238000004806 packaging method and process Methods 0.000 claims description 15
- 230000015654 memory Effects 0.000 claims description 12
- 238000006243 chemical reaction Methods 0.000 claims description 8
- 238000000605 extraction Methods 0.000 claims description 7
- 238000012545 processing Methods 0.000 abstract description 13
- 230000001360 synchronised effect Effects 0.000 abstract description 3
- 238000005516 engineering process Methods 0.000 description 20
- 238000010586 diagram Methods 0.000 description 15
- 230000009467 reduction Effects 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 238000001514 detection method Methods 0.000 description 5
- 238000011144 upstream manufacturing Methods 0.000 description 5
- 238000013075 data extraction Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000003111 delayed effect Effects 0.000 description 3
- 230000033001 locomotion Effects 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 241000700605 Viruses Species 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000002155 anti-virotic effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明涉及视频数据处理技术领域,提供了一种电子白板显示内容同步方法、装置、设备以及存储介质,所述方法包括:在与第二视联网终端进行电子白板共享的过程中,将电子白板的显示内容转换为显示数据;将所述显示数据封装到第一视联网协议包中;对所述第一视联网协议包添加包头;通过与所述第二视联网终端之间的视联网透传通道,将携带包头的第一视联网协议包发送给所述第二视联网终端。以使进行视频会议或视频通话的视联网终端之间能稳定同步电子白板的显示内容。
Description
技术领域
本发明涉及视频数据处理技术领域,特别是涉及一种电子白板显示内容同步的方法、装置、设备以及存储介质。
背景技术
目前,在电子白板共享中,主要通过TCP/IP协议传输电子白板界面的显示内容,数据传输速度易受网络状态的影响,导致电子白板笔画、图片的显示出现延迟。
视联网是一个实时网络,能够实现目前互联网无法实现的全网高清视频实时传输,实现视频会议高清面对面。互联网中多个终端可以协同操作同一块电子白板,为用户远程协作办公,远程教育提供便利。而在视联网中使用TCP/IP协议同步笔画数据,并不能达到电子白板编辑的笔画实时同步的效果。
发明内容
鉴于上述问题,提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种电子白板显示内容同步的方法、装置、设备以及存储介质。
为了解决上述问题,本发明实施例第一方面公开了一种电子白板显示内容同步的方法,应用于第一视联网终端,所述方法包括:
在与第二视联网终端进行电子白板共享的过程中,将电子白板的显示内容转换为显示数据;
将所述显示数据封装到第一视联网协议包中;
对所述第一视联网协议包添加包头;
通过与所述第二视联网终端之间的视联网透传通道,将携带包头的第一视联网协议包发送给所述第二视联网终端。
可选地,在与第二视联网终端进行电子白板共享的过程中,同时与所述第二视联网终端进行视频会议或视频通话;所述方法还包括:
在所述视联网终端的第一显示区域显示电子白板的界面,并在所述视联网终端的第二显示区域显示视频会议的画面。
可选地,所述显示内容为显示图片,所述方法还包括:
在检测到用户对所述显示图片的编辑指令时,根据所述编辑指令,对所述显示图片进行编辑;
在所述电子白板界面显示编辑后的图片;
根据所述编辑后的图片的最终状态,获得编辑数据;
将所述编辑数据封装到第二视联网协议包中;
依据所述编辑数据,对所述第二视联网协议包添加包头;
通过与所述第二视联网终端之间的视联网透传通道,将携带包头的第二视联网协议包发送给所述第二视联网终端。
可选地,所述显示内容为笔画编辑记录;对所述视联网协议包添加包头,包括:
获得所述笔画编辑记录的笔画类型和时间戳;
以所述笔画类型和时间戳,对所述视联网协议包添加包头。
可选地,所述显示内容为显示图片;将所述显示数据封装到第一视联网协议包中,包括:
根据所述显示图片,将所述显示数据分割为N个图片数据;
对每个图片数据标记编码标识;
将所述N个图片数据封装到N个第一视联网协议包中;
对所述第一视联网协议包添加包头,包括:
确定每个所述第一视联网协议包封装的所述图片数据对应的所述编码标识;
以所述编码标识对每个所述第一视联网协议包添加包头。
可选地,所述方法还包括:
将所述第一视联网协议包添加到发送队列,以使所述第一视联网协议包在所述发送队列顺序排列;
通过与所述第二视联网终端之间的透传通道,将顺序排列的所述第一视联网协议包发依次送给所述第二视联网终端。
本发明实施例第二方面公开了一种电子白板显示内容同步的方法,应用于第二视联网终端,所述方法包括:
在与第一视联网终端进行电子白板共享的过程中,接收所述第一视联网终端发送的携带包头的第一视联网协议包;
提取所述第一视联网协议包中的显示数据;
根据所述包头,将所述显示数据还原为显示内容;
在电子白板界面显示所述显示内容。
可选地,所述显示内容为笔画编辑记录;提取所述第一视联网协议包中的显示数据,包括:
提取所述第一视联网协议包中的笔画数据;
根据所述包头,将所述显示数据还原为显示内容,包括:
获得所述包头中的笔画类型和时间戳;
将所述笔画数据按照笔画类型还原为所述笔画编辑记录;
根据所述时间戳,在所述电子白板界面顺序显示所述笔画编辑记录。
可选地,所述显示内容为显示图片;提取所述第一视联网协议包中的显示数据,包括:
提取所述第一视联网协议包中的图片数据;
根据所述包头,将所述显示数据还原为显示内容,包括:
获得所述包头中的编码标识;
依据所述编码标识,将N个图片数据依次排列,拼接成整体的图片数据;
将所述整体的图片数据还原为显示图片。
本发明实施例第三方面公开了一种电子白板显示内容同步的装置,应用于操作终端,所述装置包括:
转换模块,用于在与第二视联网终端进行电子白板共享的过程中,将电子白板的显示内容转换为显示数据;
第一封装模块,用于将所述显示数据封装到第一视联网协议包中;
第一添加模块,用于对所述第一视联网协议包添加包头;
第一发送模块,用于通过与所述第二视联网终端之间的视联网透传通道,将携带包头的第一视联网协议包发送给所述第二视联网终端。
可选地,所述装置还包括:
第一显示模块,用于在所述视联网终端的第一显示区域显示电子白板的界面,并在所述视联网终端的第二显示区域显示视频会议的画面。
可选地,所述装置还包括:
编辑模块,用于在检测到用户对所述显示图片的编辑指令时,根据所述编辑指令,对所述显示图片进行编辑;
第二显示模块,用于在所述电子白板界面显示编辑后的图片;
获得模块,用于根据所述编辑后的图片的最终状态,获得编辑数据;
第二封装模块,用于将所述编辑数据封装到第二视联网协议包中;
第二添加模块,用于依据所述编辑数据,对所述第二视联网协议包添加包头;
第二发送模块,用于通过与所述第二视联网终端之间的视联网透传通道,将携带包头的第二视联网协议包发送给所述第二视联网终端。
可选地,所述第一添加模块包括:
得到笔画类型子模块,用于获得所述笔画编辑记录的笔画类型和时间戳;
第一添加包头子模块,以所述笔画类型和时间戳,对所述视联网协议包添加包头。
可选地,所述第一封装模块包括:
数据分割子模块,用于根据所述显示图片,将所述显示数据分割为N个图片数据;
标记子模块,用于对每个图片数据标记编码标识;
将所述N个图片数据封装到N个第一视联网协议包中;
所述第一添加模块包括:
编码标识确定模块,用于确定每个所述第一视联网协议包封装的所述图片数据对应的所述编码标识;
第二添加包头子模块,用于以所述编码标识对每个所述第一视联网协议包添加包头。
可选地,所述装置还包括:
缓存模块,用于将所述第一视联网协议包添加到发送队列,以使所述第一视联网协议包在所述发送队列顺序排列;
顺序发送模块,用于通过与所述第二视联网终端之间的透传通道,将顺序排列的所述第一视联网协议包发依次送给所述第二视联网终端。
本发明实施例第四方面公开了一种电子白板显示内容同步的装置,应用于第二视联网终端,所述装置包括:
接收模块,用于在与第一视联网终端进行电子白板共享的过程中,接收所述第一视联网终端发送的携带包头的第一视联网协议包;
提取模块,用于提取所述第一视联网协议包中的显示数据;
还原模块,用于根据所述包头,将所述显示数据还原为显示内容;
显示模块,用于在电子白板界面显示所述显示内容。
可选地,所述提取模块包括:
笔画数据提取子模块,用于提取所述第一视联网协议包中的笔画数据;
所述还原模块包括:
提取笔画类型子模块,用于获得所述包头中的笔画类型和时间戳;
第一还原子模块,用于将所述笔画数据按照笔画类型还原为所述笔画编辑记录;
显示子模块,根据所述时间戳,在所述电子白板界面顺序显示所述笔画编辑记录。
可选地,所述提取模块包括:
图片数据提取子模块,用于提取所述第一视联网协议包中的图片数据;
所述还原模块包括:
提取编码标识子模块,用于获得所述包头中的编码标识;
拼接子模块,用于依据所述编码标识,将N个图片数据依次排列,拼接成整体的图片数据;
第二还原子模块,用于将所述整体的图片数据还原为显示图片。
本发明实施例第五方面提供一种可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时,实现如本发明第一方面或第二方面所述的方法中的步骤。
本发明实施例第六方面提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时,实现本发明第一方面或第二方面所述的方法的步骤。
本发明实施例包括以下优点:
本发明实施例应用视联网的特性,使第一视联网终端和第二视联网终端在进行视频会议或视频通话的过程中,共享电子白板;第一视联网终端通过透传通道,将电子白板接收的显示内容,如笔画编辑记录、显示图片等,转换为二进制数据,并封装为视联网协议包传输到第二视联网终端,不受网络状况的影响,保证第二视联网终端能同步显示第一视联网终端的电子白板的显示内容。
在显示内容为笔画编辑记录时,第一视联网终端以时间戳和笔画类型添加视联网协议包的包头,以使第二视联网终端能,根据笔画类型能更准确地将笔画数据还原为笔画,根据时间戳顺序显示笔画。
在显示内容为显示图片时,第一视联网终端依据图片属性,将图片数据分割为N个图片数据,并将N个图片数据封装为N个视联网协议包,根据N个图片数据的编码标识对N个视联网协议包添加包头,以保证第二视联网终端能将N个图片数据准确地拼接为整体的图片数据,进而准确地将图片数据还原为图片。
附图说明
图1是本发明实施例电子白板显示内容同步的步骤流程图;
图2是本发明实施例对电子白板的显示内容进行编辑并同步的步骤流程图;
图3是本发明另一个实施例中电子白板显示内容同步的步骤流程图;
图4是本发明实施例第一视联网终端将笔画数据传输到第二视联网终端的流程图;
图5是本发明实施例第一视联网终端将图片数据传输到第二视联网终端的流程图;
图6是本发明实施例第一视联网终端将编辑数据传输到第二视联网终端的流程图;
图7是本发明实施例中电子白板显示内容同步装置的结构示意图;
图8是本发明另一个实施例中电子白板显示内容同步装置的结构示意图;
图9是本发明的一种视联网的组网示意图;
图10是本发明的一种节点服务器的硬件结构示意图;
图11是本发明的一种接入交换机的硬件结构示意图;
图12是本发明的一种以太网协转网关的硬件结构示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
现有技术下,多个终端之间主要通过TCP/IP协议传输数据,达到电子白板的共享。TCP/IP协议易受网络状态的影响,导致终端收到的电子白板数据出现延迟,造成电子白板共享体验较差,除此之外,若互联网受到不安全的攻击,会导致终端发送的电子白板的数据有泄漏的风险;并且终端的显示界面在显示电子白板共享的数据时,不能显示其他数据(如音频数据、视频数据等)。
鉴于此,本发明提出了一种电子白板显示内容同步的方法,应用于第一视联网终端,以使视联网终端能够对电子白板显示内容进行同步。
电子白板的显示内容指的是,视联网终端的显示界面根据用户的操作指令所显示出的数据,显示内容可以包括:电子白板根据用户的指令显示出的笔画数据、图片数据以及对图片的放大、缩小、删除、旋转等。
第一视联网终端和第二视联网终端为接入视联网的安卓终端。
主席终端可以发起视联网视频会议,与主席终端进行视联网视频会议的其他安卓终端为参会终端,主席终端在与参会终端进行视联网视频会议的过程中,可以发起电子白板共享,在参会终端响应电子白板共享后,主席终端可以对电子白板进行编辑操作(绘制笔画,选择图片进行显示等),参会终端显示主席终端对电子白板的编辑操作,此时主席终端可以操作电子白板,为第一视联网终端;参会终端仅在显示界面显示主席终端对电子白板的编辑,为第二视联网终端。
基于相同的原理,主叫终端可以对被叫终端发起视联网视频通话,主叫终端在与被叫终端进行视频通话的过程中,可以发起电子白板共享,在被叫终端响应电子白板共享后,主叫终端可以对电子白板进行编辑操作,此时主叫终端可以操作电子白板,为第一视联网终端;被叫终端仅在显示界面显示主叫终端对电子白板的编辑,为第二视联网终端。
在主席终端将电子白板的操作权限移交给被叫终端后,被叫终端可以操作电子白板,此时被叫终端可以视为第一视联网终端;可以理解的是,在视联网视频会议或视联网视频通话中,可以对共享的电子白板进行操作,并显示电子白板的编辑内容的安卓终端为第一视联网终端,仅能在显示界面显示电子白板的编辑内容的安卓终端第二视联网终端。
第一视联网终端和第二视联网终端都可以在显示界面同时显示视频会议的画面和电子白板的界面,或在显示界面同时显示视频通话的画面和电子白板的界面。
在与第二视联网终端进行电子白板共享的过程中,同时与所述第二视联网终端进行视频会议或视频通话;所述方法还包括:
在所述视联网终端的第一显示区域显示电子白板的界面,并在所述视联网终端的第二显示区域显示视频会议的画面。
第一显示区域指的是显示视频会议或视频通话的画面的区域,第二显示区域指的是显示的是电子白板的界面。
第一显示区域和第二显示区域可以以任何平面组合关系,共同存在安卓终端的显示屏幕。例如:第二显示区域以四分之一的大小存在于第一显示区域的右下角,或者第一显示区域和第一显示区域以1:1的大小横向排列,本发明实施例对此并不限制。
以在主席终端编辑电子白板,显示对电子白板的编辑,并同步电子白板显示内容为例,同步电子白板显示内容具体包括以下内容:
参考图1,图1是本发明实施例电子白板显示内容同步的步骤流程图。
步骤S101:在与第二视联网终端进行电子白板共享的过程中,将电子白板的显示内容转换为显示数据;
步骤S102:将所述显示数据封装到第一视联网协议包中;
在用户于主席终端的电子白板绘制笔画时,主席终端的电子白板界面显示用户的笔画编辑记录,笔画编辑记录可以是文字的组成笔画或构成图形的曲线、直线等。
主席终端再将电子白板界面显示的文字的组成笔画或构成图形的曲线、直线等内容,转换为二进制数据。
假设电子白板界面显示的是“田”字,主席终端将“丨”、“”“ ̄”“丨”分别转换为二进制数据,并将该二进制数据封装到视联网协议包。
步骤S103:对所述第一视联网协议包添加包头;
所述显示内容为笔画编辑记录;对所述视联网协议包添加包头,包括:
获得所述笔画编辑记录的笔画类型和时间戳;
以所述笔画类型和时间戳,对所述视联网协议包添加包头。
笔画类型包括但不限于:曲线、直线、折线、四边形、圆形、三角形等。除了笔画的线条信息外,笔画指令包含的笔画信息还可以是:笔画的颜色、对比度和笔画的粗细等,以及横折、竖勾、点等笔画类型。
时间戳指的是主席终的电子白板接收到笔画的时间信息生成的数字顺列。
封装笔画数据的视联网协议包的包头携带了笔画类型和获得笔画的时间信息。
用户通过主席终端的显示屏绘制的第一条笔画编辑记录的时间戳01,第二条笔画编辑记录的时间戳02,参会终端接收到携带包头的视联网协议包后,获得包头中关于笔画的笔画类型和时间信息,具体地,获得第一条笔画编辑记录为椭圆,时间戳01,第二条笔画编辑记录为直线,时间戳02;按照椭圆,将封装有第一条笔画编辑记录的视联网协议包中的二进制数据还原为椭圆的笔画,显示于电子白板界面;再按照直线,将封装有第二条笔画编辑记录的视联网协议包中的二进制数据还原为直线的笔画,显示于电子白板界面。
所述显示内容为显示图片;将所述显示数据封装到第一视联网协议包中,包括:
根据所述显示图片,将所述显示数据分割为N个图片数据;
对每个图片数据标记编码标识;
在用户于主席终端的电子白板选择显示图片时,主席终端将用户选择的目标显示图片显示在电子白板的界面,同时将目标显示图片转换为二进制的图片数据。
实际应用中,透传通道可以传输的数据大小在1K左右,因此根据图片的大小,确定最终图片数据的数量。例如图片B的大小为520K,那么最终需要将图片数据分割为520个图片数据。
对于520K的图片,有唯一的标识B,结合图片的像素点,将每一个像素点顺序对应N个图片数据中特定的图片数据,对于像素点M对应的图片数据,可标记对应的编码标识,编码标识可以是该图片的图片数据总数和N个图片数据中任一图片数据的编码。对应像素点M对应的图片数据,其编码标识可以是(M,520),也可以将图片标记为B图片,像素点M的编码标识是(M,B)。根据编码标识可以确定该图片数据对应的像素点在图片的位置和顺序。
对所述第一视联网协议包添加包头,包括:
确定每个所述第一视联网协议包封装的所述图片数据对应的所述编码标识;
以所述编码标识对每个所述第一视联网协议包添加包头。
封装像素点M对应的图片数据时,将编码标识(M,520)或(M,B)添加到包头中。
参会终端接收到视联网协议包后,从包头中获得该视联网协议包封装的图片数据对应的编码标识,根据该编码标识,将图片B的520个图片数据依次排列,拼接为整体的图片数据,再将拼接后的整体的图片数据还原为图片B,显示于本地的电子白板界面。
步骤S104:通过与所述第二视联网终端之间的视联网透传通道,将携带包头的第一视联网协议包发送给所述第二视联网终端。
依据电子白板显示内容转换得到的二进制数据可以通过透传通道传输,视频数据用过视频通道传输,互不影响。
用户可以通过主席终端或主叫终端,对在其第一显示区域显示电子白板的界面的显示图片,进行放大、缩小、移动、旋转、删除等操作。
参考图2,图2是本发明实施例对电子白板的显示内容进行编辑并同步的步骤流程图。
步骤S201:在检测到用户对所述显示图片的编辑指令时,根据所述编辑指令,对所述显示图片进行编辑;
步骤S202:在所述电子白板界面显示编辑后的图片;
步骤S203:根据所述编辑后的图片的最终状态,获得编辑数据;
以在主席终端的电子白板的界面对图片B进行放大为例,图片B的四个顶点在主席终端的电子白板的界面的坐标分别为:(1,0)、(2,0)、(1,1)、(2,1),主席终端接收到用户对图片B的放大2倍的指令,放大后的图片B在电子白板界面显示的四个顶点的坐标分别为:(0,-1)、(3,-1)、(0,2)、(3,2),以放大后的图片B的顶点坐标作为图片的编辑数据,通过透传通道传输给共享电子白板的参会终端。
编辑后的图片的最终状态以其最终的坐标(0,-1)、(3,-1)、(0,2)、(3,2)表示。
步骤S204:将所述编辑数据封装到第二视联网协议包中;
步骤S205:依据所述编辑数据,对所述第二视联网协议包添加包头;
步骤S206:通过与所述第二视联网终端之间的视联网透传通道,将携带包头的第二视联网协议包发送给所述第二视联网终端。
对于图片编辑数据,也可将其封装为视联网协议包。视联网协议包的包头可以是图片B顶点的像素点对应的编码标识。
第一视联网协议包中封装的是显示内容转换的数据,如图片数据或笔画数据;第二视联网协议包中封装的是对显示内容的编辑数据,例如:编辑数据。
共享电子白板的参会终端接收到第二视联网协议包后,提取出图片B放大后的顶点坐标(0,-1)、(3,-1)、(0,2)、(3,2),通过谷歌android开源方法对显示终端的电子白板界面的显示的图片B进行操作,将图片B的四个顶点(1,0)、(2,0)、(1,1)、(2,1)分别变换为(0,-1)、(3,-1)、(0,2)、(3,2),完成对图片B的放大。
在本发明的另一个实施例中,主席终端可以将显示数据封装为视联网协议包,再将具有包头的视联网协议包添加到发送队列,通过透传通道传输到显示终端。
将所述第一视联网协议包添加到发送队列,以使所述第一视联网协议包在所述发送队列顺序排列;
通过与所述第二视联网终端之间的透传通道,将顺序排列的所述第一视联网协议包发依次送给所述第二视联网终端。
发送队列用于缓存待发送的视联网协议包,若主席终端获取的显示数据较多,导致封装显示数据的视联网协议包较多,直接通过透传协议发送大量的视联网协议包,易发生丢包的情况,故将视联网协议包缓存到发送队列,在视联网协议包较多的情况下,依次发送视联网协议包,保证显示数据的完整传输。
参考图3,图3是本发明另一个实施例中电子白板显示内容同步的步骤流程图。应用于第二视联网终端。
步骤S301:在与第一视联网终端进行电子白板共享的过程中,接收所述第一视联网终端发送的携带包头的第一视联网协议包;
步骤S302:提取所述第一视联网协议包中的显示数据;
步骤S303:根据所述包头,将所述显示数据还原为显示内容;
步骤S304:在电子白板界面显示所述显示内容。
以共享电子白板的参会终端,对第二视联网终端对显示数据的处理进行说明。
在显示数据为笔画数据时,参会终端可以解析视联网协议包的包头,得到笔画类型和时间戳。
并提取视联网协议包中的笔画数据,按照笔画类型将笔画数据还原,例如在笔画类型是椭圆时,将笔画数据还原成椭圆。
并将多个视联网协议包中的笔画数据按照各自的时间戳,依次显示于本地电子白板的界面。
所述显示内容为笔画编辑记录;提取所述第一视联网协议包中的显示数据,包括:
提取所述第一视联网协议包中的笔画数据;
根据所述包头,将所述显示数据还原为显示内容,包括:
获得所述包头中的笔画类型和时间戳;
将所述笔画数据按照笔画类型还原为所述笔画编辑记录;
根据所述时间戳,在所述电子白板界面顺序显示所述笔画编辑记录。
在显示数据为图片数据时,参会终端可以解析视联网协议包的包头,得到该图片数据的编码标识。
依据编码标识将各视联网协议包中提取出的图片数据依次排列,拼接为整体的图片数据,将整体的图片数据还原为图片,显示于本地电子白板的界面。
所述显示内容为显示图片;提取所述第一视联网协议包中的显示数据,包括:
提取所述第一视联网协议包中的图片数据;
根据所述包头,将所述显示数据还原为显示内容,包括:
获得所述包头中的编码标识;
依据所述编码标识,将N个图片数据依次排列,拼接成整体的图片数据;
将所述整体的图片数据还原为显示图片。
参考图4,图4是本发明实施例第一视联网终端将笔画数据传输到第二视联网终端的流程图。
A1:第一视联网终端的电子白板界面接收笔画指令,并显示笔画绘制记录;
A2:第一视联网终端将笔画指令转换为二进制笔画数据,并根据笔画类型和电子白板界面接收到笔画指令的时间,得到笔画类型和时间戳。
A3:第一视联网终端将笔画数据封装为视联网协议包,再根据笔画类型和时间戳添加视联网协议包的包头。
A4:操作终端通过视联网的透传通道,将具有包头的视联网协议包发送至显示终端。
A5:第二视联网终端接收具有包头的视联网协议包,提取包头中的笔画类型和时间戳。
A6:第二视联网终端获得笔画数据。
A7:第二视联网终端将根据笔画类型和时间戳将笔画数据还原为笔画编辑记录。
A8:显示终端将笔画编辑记录上传给显示屏。
参考图5,图5是本发明实施例第一视联网终端将图片数据传输到第二视联网终端的流程图。
B1:第一视联网终端将显示图片转换图片数据,再分割为N个图片数据,并显示于本地电子白板界面。
B2:第一视联网终端将N个图片数据封装为N个视联网协议包,并将编码标识添加到视联网协议包包头;
B3:第一视联网终端将N个具有包头的视联网协议包发送给第二视联网终端。
B4:第二视联网终端收具有包头的视联网协议包,提取得到N个图片数据。
B5:第二视联网终端根据N个视联网协议包的包头中的编码标识,将N个图片数据合并为整体的图片数据;
B6:第二视联网终端整体的图片数据还原为图片。
参考图6,是本发明实施例第一视联网终端将编辑数据传输到第二视联网终端的流程图。
C1:第一视联网终端对电子白板界面的显示图片进行放大、缩小、移动、旋转等操作。
C2:第一视联网终端得到图片放大、缩小、移动、旋转后的四个顶点的坐标数据。
C3:第一视联网终端将坐标数据封装为视联网协议包,并发送给第二视联网终端。
C4:第二视联网终端接收具有包头的视联网协议包,并对其提取数据,得到图片的坐标数据。
C5:第二视联网终端通过通过谷歌android开源方法,应用图片的坐标数据,实现在本地电子白板界面对图片的操作。
需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。
参考图7,图7是本发明实施例中电子白板显示内容同步装置的结构示意图。
应用于第一视联网终端,所述装置包括:
701:转换模块,用于在与第二视联网终端进行电子白板共享的过程中,将电子白板的显示内容转换为显示数据;
702:第一封装模块,用于将所述显示数据封装到第一视联网协议包中;
703:第一添加模块,用于对所述第一视联网协议包添加包头;
704:第一发送模块,用于通过与所述第二视联网终端之间的视联网透传通道,将携带包头的第一视联网协议包发送给所述第二视联网终端。
在图7的基础上,可选地,所述装置还包括:
第一显示模块,用于在所述视联网终端的第一显示区域显示电子白板的界面,并在所述视联网终端的第二显示区域显示视频会议的画面。
在图7的基础上,可选地,所述装置还包括:
编辑模块,用于在检测到用户对所述显示图片的编辑指令时,根据所述编辑指令,对所述显示图片进行编辑;
第二显示模块,用于在所述电子白板界面显示编辑后的图片;
获得模块,用于根据所述编辑后的图片的最终状态,获得编辑数据;
第二封装模块,用于将所述编辑数据封装到第二视联网协议包中;
第二添加模块,用于依据所述编辑数据,对所述第二视联网协议包添加包头;
第二发送模块,用于通过与所述第二视联网终端之间的视联网透传通道,将携带包头的第二视联网协议包发送给所述第二视联网终端。
在图7的基础上,所述第一添加模块包括:
得到笔画类型子模块,用于获得所述笔画编辑记录的笔画类型和时间戳;
第一添加包头子模块,以所述笔画类型和时间戳,对所述视联网协议包添加包头。
在图7的基础上,所述第一封装模块包括:
数据分割子模块,用于根据所述显示图片,将所述显示数据分割为N个图片数据;
标记子模块,用于对每个图片数据标记编码标识;
将所述N个图片数据封装到N个第一视联网协议包中;
所述第一添加模块包括:
编码标识确定模块,用于确定每个所述第一视联网协议包封装的所述图片数据对应的所述编码标识;
第二添加包头子模块,用于以所述编码标识对每个所述第一视联网协议包添加包头。
在图7的基础上,所述装置还包括:
缓存模块,用于将所述第一视联网协议包添加到发送队列,以使所述第一视联网协议包在所述发送队列顺序排列;
顺序发送模块,用于通过与所述第二视联网终端之间的透传通道,将顺序排列的所述第一视联网协议包发依次送给所述第二视联网终端。
参考图8,图8是本发明另一个实施例中电子白板显示内容同步装置的结构示意图。
应用于第二视联网终端,所述装置包括:
801:接收模块,用于在与第一视联网终端进行电子白板共享的过程中,接收所述第一视联网终端发送的携带包头的第一视联网协议包;
802:提取模块,用于提取所述第一视联网协议包中的显示数据;
803:还原模块,用于根据所述包头,将所述显示数据还原为显示内容;
804:显示模块,用于在电子白板界面显示所述显示内容。
在图8的基础上,所述提取模块包括:
笔画数据提取子模块,用于提取所述第一视联网协议包中的笔画数据;
所述还原模块包括:
提取笔画类型子模块,用于获得所述包头中的笔画类型和时间戳;
第一还原子模块,用于将所述笔画数据按照笔画类型还原为所述笔画编辑记录;
显示子模块,根据所述时间戳,在所述电子白板界面顺序显示所述笔画编辑记录。
在图8的基础上,所述提取模块包括:
图片数据提取子模块,用于提取所述第一视联网协议包中的图片数据;
所述还原模块包括:
提取编码标识子模块,用于获得所述包头中的编码标识;
拼接子模块,用于依据所述编码标识,将N个图片数据依次排列,拼接成整体的图片数据;
第二还原子模块,用于将所述整体的图片数据还原为显示图片。
对于电子白板图片同步装置实施例而言,由于其与电子白板图片同步方法实施例基本相似,所以描述的比较简单,相关之处参见电子白板图片同步方法实施例的部分说明即可。
本发明实施例还提供一种可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时,实现如本发明上述实施例方法中的步骤。
本发明实施例还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时,实现本发明上述实施例的方法的步骤。
视联网是网络发展的重要里程碑,是一个实时网络,能够实现高清视频实时传输,将众多互联网应用推向高清视频化,高清面对面。
视联网采用实时高清视频交换技术,可以在一个网络平台上将所需的服务,如高清视频会议、视频监控、智能化监控分析、应急指挥、数字广播电视、延时电视、网络教学、现场直播、VOD点播、电视邮件、个性录制(PVR)、内网(自办)频道、智能化视频播控、信息发布等数十种视频、语音、图片、文字、通讯、数据等服务全部整合在一个系统平台,通过电视或电脑实现高清品质视频播放。
为使本领域技术人员更好地理解本发明实施例,以下对视联网进行介绍:
视联网所应用的部分技术如下所述:
网络技术(Network Technology)
视联网的网络技术创新改良了传统以太网(Ethernet),以面对网络上潜在的巨大视频流量。不同于单纯的网络分组包交换(Packet Switching)或网络电路交换(CircuitSwitching),视联网技术采用Packet Switching满足Streaming需求。视联网技术具备分组交换的灵活、简单和低价,同时具备电路交换的品质和安全保证,实现了全网交换式虚拟电路,以及数据格式的无缝连接。
交换技术(Switching Technology)
视联网采用以太网的异步和包交换两个优点,在全兼容的前提下消除了以太网缺陷,具备全网端到端无缝连接,直通用户终端,直接承载IP数据包。用户数据在全网范围内不需任何格式转换。视联网是以太网的更高级形态,是一个实时交换平台,能够实现目前互联网无法实现的全网大规模高清视频实时传输,将众多网络视频应用推向高清化、统一化。
服务器技术(Server Technology)
视联网和统一视频平台上的服务器技术不同于传统意义上的服务器,它的流媒体传输是建立在面向连接的基础上,其数据处理能力与流量、通讯时间无关,单个网络层就能够包含信令及数据传输。对于语音和视频业务来说,视联网和统一视频平台流媒体处理的复杂度比数据处理简单许多,效率比传统服务器大大提高了百倍以上。
储存器技术(Storage Technology)
统一视频平台的超高速储存器技术为了适应超大容量和超大流量的媒体内容而采用了最先进的实时操作系统,将服务器指令中的节目信息映射到具体的硬盘空间,媒体内容不再经过服务器,瞬间直接送达到用户终端,用户等待一般时间小于0.2秒。最优化的扇区分布大大减少了硬盘磁头寻道的机械运动,资源消耗仅占同等级IP互联网的20%,但产生大于传统硬盘阵列3倍的并发流量,综合效率提升10倍以上。
网络安全技术(Network Security Technology)
视联网的结构性设计通过每次服务单独许可制、设备与用户数据完全隔离等方式从结构上彻底根除了困扰互联网的网络安全问题,一般不需要杀毒程序、防火墙,杜绝了黑客与病毒的攻击,为用户提供结构性的无忧安全网络。
服务创新技术(Service Innovation Technology)
统一视频平台将业务与传输融合在一起,不论是单个用户、私网用户还是一个网络的总合,都不过是一次自动连接。用户终端、机顶盒或PC直接连到统一视频平台,获得丰富多彩的各种形态的多媒体视频服务。统一视频平台采用“菜谱式”配表模式来替代传统的复杂应用编程,可以使用非常少的代码即可实现复杂的应用,实现“无限量”的新业务创新。
视联网的组网如下所述:
视联网是一种集中控制的网络结构,该网络可以是树型网、星型网、环状网等等类型,但在此基础上网络中需要有集中控制节点来控制整个网络。
如图9所示,视联网分为接入网和城域网两部分。
接入网部分的设备主要可以分为3类:节点服务器,接入交换机,终端(包括各种机顶盒、编码板、存储器等)。节点服务器与接入交换机相连,接入交换机可以与多个终端相连,并可以连接以太网。
其中,节点服务器是接入网中起集中控制功能的节点,可控制接入交换机和终端。节点服务器可直接与接入交换机相连,也可以直接与终端相连。
类似的,城域网部分的设备也可以分为3类:城域服务器,节点交换机,节点服务器。城域服务器与节点交换机相连,节点交换机可以与多个节点服务器相连。
其中,节点服务器即为接入网部分的节点服务器,即节点服务器既属于接入网部分,又属于城域网部分。
城域服务器是城域网中起集中控制功能的节点,可控制节点交换机和节点服务器。城域服务器可直接连接节点交换机,也可直接连接节点服务器。
由此可见,整个视联网络是一种分层集中控制的网络结构,而节点服务器和城域服务器下控制的网络可以是树型、星型、环状等各种结构。
形象地称,接入网部分可以组成统一视频平台(虚线圈中部分),多个统一视频平台可以组成视联网;每个统一视频平台可以通过城域以及广域视联网互联互通。
视联网设备分类
1.1本发明实施例的视联网中的设备主要可以分为3类:服务器,交换机(包括以太网网关),终端(包括各种机顶盒,编码板,存储器等)。视联网整体上可以分为城域网(或者国家网、全球网等)和接入网。
1.2其中接入网部分的设备主要可以分为3类:节点服务器,接入交换机(包括以太网网关),终端(包括各种机顶盒,编码板,存储器等)。
各接入网设备的具体硬件结构为:
节点服务器:
如图10所示,主要包括网络接口模块1001、交换引擎模块1002、CPU模块1003、磁盘阵列模块1004;
其中,网络接口模块1001,CPU模块1003、磁盘阵列模块1004进来的包均进入交换引擎模块1002;交换引擎模块1002对进来的包进行查地址表1005的操作,从而获得包的导向信息;并根据包的导向信息把该包存入对应的包缓存器1006的队列;如果包缓存器1006的队列接近满,则丢弃;交换引擎模1002轮询所有包缓存器队列,如果满足以下条件进行转发:1)该端口发送缓存未满;2)该队列包计数器大于零。磁盘阵列模块1004主要实现对硬盘的控制,包括对硬盘的初始化、读写等操作;CPU模块1003主要负责与接入交换机、终端(图中未示出)之间的协议处理,对地址表1005(包括下行协议包地址表、上行协议包地址表、数据包地址表)的配置,以及,对磁盘阵列模块1004的配置。
接入交换机:f
如图11所示,主要包括网络接口模块(下行网络接口模块1101、上行网络接口模块1102)、交换引擎模块1103和CPU模块1104;
其中,下行网络接口模块1101进来的包(上行数据)进入包检测模块1105;包检测模块1105检测包的目地地址(DA)、源地址(SA)、数据包类型及包长度是否符合要求,如果符合,则分配相应的流标识符(stream-id),并进入交换引擎模块1103,否则丢弃;上行网络接口模块1102进来的包(下行数据)进入交换引擎模块1103;CPU模块1104进来的数据包进入交换引擎模块1103;交换引擎模块1103对进来的包进行查地址表1106的操作,从而获得包的导向信息;如果进入交换引擎模块1103的包是下行网络接口往上行网络接口去的,则结合流标识符(stream-id)把该包存入对应的包缓存器1107的队列;如果该包缓存器1107的队列接近满,则丢弃;如果进入交换引擎模块1103的包不是下行网络接口往上行网络接口去的,则根据包的导向信息,把该数据包存入对应的包缓存器1107的队列;如果该包缓存器1107的队列接近满,则丢弃。
交换引擎模块1103轮询所有包缓存器队列,在本发明实施例中分两种情形:
如果该队列是下行网络接口往上行网络接口去的,则满足以下条件进行转发:1)该端口发送缓存未满;2)该队列包计数器大于零;3)获得码率控制模块产生的令牌;
如果该队列不是下行网络接口往上行网络接口去的,则满足以下条件进行转发:1)该端口发送缓存未满;2)该队列包计数器大于零。
码率控制模块1108是由CPU模块1104来配置的,在可编程的间隔内对所有下行网络接口往上行网络接口去的包缓存器队列产生令牌,用以控制上行转发的码率。
CPU模块1004主要负责与节点服务器之间的协议处理,对地址表1106的配置,以及,对码率控制模块1108的配置。
以太网协转网关:
如图12所示,主要包括网络接口模块(下行网络接口模块1201、上行网络接口模块1202)、交换引擎模块1203、CPU模块1204、包检测模块1205、码率控制模块1208、地址表1206、包缓存器1207和MAC添加模块1209、MAC删除模块1210。
其中,下行网络接口模块1201进来的数据包进入包检测模块905;包检测模块1205检测数据包的以太网MAC DA、以太网MAC SA、以太网length or frame type、视联网目地地址DA、视联网源地址SA、视联网数据包类型及包长度是否符合要求,如果符合则分配相应的流标识符(stream-id);然后,由MAC删除模块1210减去MAC DA、MACSA、length or frametype(2byte),并进入相应的接收缓存,否则丢弃;
下行网络接口模块1201检测该端口的发送缓存,如果有包则根据包的视联网目地地址DA获知对应的终端的以太网MAC DA,添加终端的以太网MAC DA、以太网协转网关的MACSA、以太网length or frametype,并发送。
以太网协转网关中其他模块的功能与接入交换机类似。
终端:
主要包括网络接口模块、业务处理模块和CPU模块;例如,机顶盒主要包括网络接口模块、视音频编解码引擎模块、CPU模块;编码板主要包括网络接口模块、视音频编码引擎模块、CPU模块;存储器主要包括网络接口模块、CPU模块和磁盘阵列模块。
1.3城域网部分的设备主要可以分为2类:节点服务器,节点交换机,城域服务器。其中,节点交换机主要包括网络接口模块、交换引擎模块和CPU模块;城域服务器主要包括网络接口模块、交换引擎模块和CPU模块构成。
2、视联网数据包定义
2.1接入网数据包定义
接入网的数据包主要包括以下几部分:目的地址(DA)、源地址(SA)、保留字节、payload(PDU)、CRC。
如下表所示,接入网的数据包主要包括以下几部分:
DA | SA | Reserved | Payload | CRC |
其中:
目的地址(DA)由8个字节(byte)组成,第一个字节表示数据包的类型(例如各种协议包、组播数据包、单播数据包等),最多有256种可能,第二字节到第六字节为城域网地址,第七、第八字节为接入网地址;
源地址(SA)也是由8个字节(byte)组成,定义与目的地址(DA)相同;
保留字节由2个字节组成;
payload部分根据不同的数据报的类型有不同的长度,如果是各种协议包的话是64个字节,如果是单组播数据包话是32+1024=1056个字节,当然并不仅仅限于以上2种;
CRC有4个字节组成,其计算方法遵循标准的以太网CRC算法。
2.2城域网数据包定义
城域网的拓扑是图型,两个设备之间可能有2种、甚至2种以上的连接,即节点交换机和节点服务器、节点交换机和节点交换机、节点交换机和节点服务器之间都可能超过2种连接。但是,城域网设备的城域网地址却是唯一的,为了精确描述城域网设备之间的连接关系,在本发明实施例中引入参数:标签,来唯一描述一个城域网设备。
本说明书中标签的定义和MPLS(Multi-Protocol Label Switch,多协议标签交换)的标签的定义类似,假设设备A和设备B之间有两个连接,那么数据包从设备A到设备B就有2个标签,数据包从设备B到设备A也有2个标签。标签分入标签、出标签,假设数据包进入设备A的标签(入标签)是0x0000,这个数据包离开设备A时的标签(出标签)可能就变成了0x0001。城域网的入网流程是集中控制下的入网过程,也就意味着城域网的地址分配、标签分配都是由城域服务器主导的,节点交换机、节点服务器都是被动的执行而已,这一点与MPLS的标签分配是不同的,MPLS的标签分配是交换机、服务器互相协商的结果。
如下表所示,城域网的数据包主要包括以下几部分:
DA | SA | Reserved | 标签 | Payload | CRC |
即目的地址(DA)、源地址(SA)、保留字节(Reserved)、标签、payload(PDU)、CRC。其中,标签的格式可以参考如下定义:标签是32bit,其中高16bit保留,只用低16bit,它的位置是在数据包的保留字节和payload之间。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种电子白板显示内容同步方法、装置、设备以及存储介质,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (13)
1.一种电子白板显示内容同步的方法,其特征在于,应用于第一视联网终端,所述方法包括:
在与第二视联网终端进行电子白板共享的过程中,将电子白板的显示内容转换为显示数据;
将所述显示数据封装到第一视联网协议包中;
对所述第一视联网协议包添加包头;
通过与所述第二视联网终端之间的视联网透传通道,将携带包头的第一视联网协议包发送给所述第二视联网终端。
2.根据权利要求1所述的方法,其特征在于,在与第二视联网终端进行电子白板共享的过程中,同时与所述第二视联网终端进行视频会议或视频通话;所述方法还包括:
在所述视联网终端的第一显示区域显示电子白板的界面,并在所述视联网终端的第二显示区域显示视频会议的画面。
3.根据权利要求1所述的方法,其特征在于,所述显示内容为显示图片,所述方法还包括:
在检测到用户对所述显示图片的编辑指令时,根据所述编辑指令,对所述显示图片进行编辑;
在所述电子白板界面显示编辑后的图片;
根据所述编辑后的图片的最终状态,获得编辑数据;
将所述编辑数据封装到第二视联网协议包中;
依据所述编辑数据,对所述第二视联网协议包添加包头;
通过与所述第二视联网终端之间的视联网透传通道,将携带包头的第二视联网协议包发送给所述第二视联网终端。
4.根据权利要求1所述的方法,其特征在于,所述显示内容为笔画编辑记录;对所述视联网协议包添加包头,包括:
获得所述笔画编辑记录的笔画类型和时间戳;
以所述笔画类型和时间戳,对所述视联网协议包添加包头。
5.根据权利要求1所述的方法,其特征在于,所述显示内容为显示图片;将所述显示数据封装到第一视联网协议包中,包括:
根据所述显示图片,将所述显示数据分割为N个图片数据;
对每个图片数据标记编码标识;
将所述N个图片数据封装到N个第一视联网协议包中;
对所述第一视联网协议包添加包头,包括:
确定每个所述第一视联网协议包封装的所述图片数据对应的所述编码标识;
以所述编码标识对每个所述第一视联网协议包添加包头。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
将所述第一视联网协议包添加到发送队列,以使所述第一视联网协议包在所述发送队列顺序排列;
通过与所述第二视联网终端之间的透传通道,将顺序排列的所述第一视联网协议包发依次送给所述第二视联网终端。
7.一种电子白板显示内容同步的方法,其特征在于,应用于第二视联网终端,所述方法包括:
在与第一视联网终端进行电子白板共享的过程中,接收所述第一视联网终端发送的携带包头的第一视联网协议包;
提取所述第一视联网协议包中的显示数据;
根据所述包头,将所述显示数据还原为显示内容;
在电子白板界面显示所述显示内容。
8.根据权利要求7所述的方法,其特征在于,所述显示内容为笔画编辑记录;提取所述第一视联网协议包中的显示数据,包括:
提取所述第一视联网协议包中的笔画数据;
根据所述包头,将所述显示数据还原为显示内容,包括:
获得所述包头中的笔画类型和时间戳;
将所述笔画数据按照笔画类型还原为所述笔画编辑记录;
根据所述时间戳,在所述电子白板界面顺序显示所述笔画编辑记录。
9.根据权利要求7所述的方法,其特征在于,所述显示内容为显示图片;提取所述第一视联网协议包中的显示数据,包括:
提取所述第一视联网协议包中的图片数据;
根据所述包头,将所述显示数据还原为显示内容,包括:
获得所述包头中的编码标识;
依据所述编码标识,将N个图片数据依次排列,拼接成整体的图片数据;
将所述整体的图片数据还原为显示图片。
10.一种电子白板显示内容同步的装置,其特征在于,应用于第一视联网终端,所述装置包括:
转换模块,用于在与第二视联网终端进行电子白板共享的过程中,将电子白板的显示内容转换为显示数据;
第一封装模块,用于将所述显示数据封装到第一视联网协议包中;
第一添加模块,用于对所述第一视联网协议包添加包头;
第一发送模块,用于通过与所述第二视联网终端之间的视联网透传通道,将携带包头的第一视联网协议包发送给所述第二视联网终端。
11.一种电子白板显示内容同步的装置,其特征在于,应用于第二视联网终端,所述装置包括:
接收模块,用于在与第一视联网终端进行电子白板共享的过程中,接收所述第一视联网终端发送的携带包头的第一视联网协议包;
提取模块,用于提取所述第一视联网协议包中的显示数据;
还原模块,用于根据所述包头,将所述显示数据还原为显示内容;
显示模块,用于在电子白板界面显示所述显示内容。
12.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1至6任一或权利要求7至9任一所述的方法中的步骤。
13.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行时实现如权利要求1至6任一或权利要求7至9任一所述的方法中的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911236139.5A CN111124333A (zh) | 2019-12-05 | 2019-12-05 | 电子白板显示内容同步的方法、装置、设备以及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911236139.5A CN111124333A (zh) | 2019-12-05 | 2019-12-05 | 电子白板显示内容同步的方法、装置、设备以及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111124333A true CN111124333A (zh) | 2020-05-08 |
Family
ID=70496171
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911236139.5A Pending CN111124333A (zh) | 2019-12-05 | 2019-12-05 | 电子白板显示内容同步的方法、装置、设备以及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111124333A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112954261A (zh) * | 2021-03-18 | 2021-06-11 | 深圳奇实科技有限公司 | 一种视频会议网络流量控制方法和系统 |
CN114168098A (zh) * | 2021-12-10 | 2022-03-11 | 天津洪恩完美未来教育科技有限公司 | 电子白板的数据同步方法、装置、设备和存储介质 |
WO2022062625A1 (zh) * | 2020-09-25 | 2022-03-31 | 华为技术有限公司 | 一种视频通话方法及装置 |
CN115883865A (zh) * | 2023-01-31 | 2023-03-31 | 北京微吼时代科技有限公司 | 白板交互数据和音视频数据的同步方法、系统、存储介质和电子设备 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102209080A (zh) * | 2010-03-30 | 2011-10-05 | 刘盛举 | 一种用于同步教学或会议的终端系统及其控制方法 |
CN103650431A (zh) * | 2012-06-29 | 2014-03-19 | 华为技术有限公司 | 视频数据传输方法及装置 |
US20150371417A1 (en) * | 2013-11-19 | 2015-12-24 | Wacom Co., Ltd. | Method and system for ink data generator, ink data rendering, ink data manipulation and ink data communication |
CN105306861A (zh) * | 2015-10-15 | 2016-02-03 | 深圳市时尚德源文化传播有限公司 | 一种网络教学录播方法及系统 |
CN105405325A (zh) * | 2015-12-22 | 2016-03-16 | 深圳市时尚德源文化传播有限公司 | 一种网络教学方法及系统 |
CN105491414A (zh) * | 2015-11-19 | 2016-04-13 | 深圳市时尚德源文化传播有限公司 | 一种图像同步显示方法及装置 |
CN105869091A (zh) * | 2016-05-12 | 2016-08-17 | 深圳市时尚德源文化传播有限公司 | 一种互联网教学方法及系统 |
CN108881927A (zh) * | 2017-11-30 | 2018-11-23 | 北京视联动力国际信息技术有限公司 | 一种视频数据合成方法和装置 |
CN109168064A (zh) * | 2018-09-17 | 2019-01-08 | 视联动力信息技术股份有限公司 | 一种电子数据的同步显示方法和系统 |
CN110138724A (zh) * | 2019-03-25 | 2019-08-16 | 视联动力信息技术股份有限公司 | 一种白板共享方法和视联网系统 |
CN110392227A (zh) * | 2019-06-20 | 2019-10-29 | 视联动力信息技术股份有限公司 | 数据处理方法、装置及存储介质 |
-
2019
- 2019-12-05 CN CN201911236139.5A patent/CN111124333A/zh active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102209080A (zh) * | 2010-03-30 | 2011-10-05 | 刘盛举 | 一种用于同步教学或会议的终端系统及其控制方法 |
CN103650431A (zh) * | 2012-06-29 | 2014-03-19 | 华为技术有限公司 | 视频数据传输方法及装置 |
US20150371417A1 (en) * | 2013-11-19 | 2015-12-24 | Wacom Co., Ltd. | Method and system for ink data generator, ink data rendering, ink data manipulation and ink data communication |
CN105306861A (zh) * | 2015-10-15 | 2016-02-03 | 深圳市时尚德源文化传播有限公司 | 一种网络教学录播方法及系统 |
CN105491414A (zh) * | 2015-11-19 | 2016-04-13 | 深圳市时尚德源文化传播有限公司 | 一种图像同步显示方法及装置 |
CN105405325A (zh) * | 2015-12-22 | 2016-03-16 | 深圳市时尚德源文化传播有限公司 | 一种网络教学方法及系统 |
CN105869091A (zh) * | 2016-05-12 | 2016-08-17 | 深圳市时尚德源文化传播有限公司 | 一种互联网教学方法及系统 |
CN108881927A (zh) * | 2017-11-30 | 2018-11-23 | 北京视联动力国际信息技术有限公司 | 一种视频数据合成方法和装置 |
CN109168064A (zh) * | 2018-09-17 | 2019-01-08 | 视联动力信息技术股份有限公司 | 一种电子数据的同步显示方法和系统 |
CN110138724A (zh) * | 2019-03-25 | 2019-08-16 | 视联动力信息技术股份有限公司 | 一种白板共享方法和视联网系统 |
CN110392227A (zh) * | 2019-06-20 | 2019-10-29 | 视联动力信息技术股份有限公司 | 数据处理方法、装置及存储介质 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022062625A1 (zh) * | 2020-09-25 | 2022-03-31 | 华为技术有限公司 | 一种视频通话方法及装置 |
CN112954261A (zh) * | 2021-03-18 | 2021-06-11 | 深圳奇实科技有限公司 | 一种视频会议网络流量控制方法和系统 |
CN114168098A (zh) * | 2021-12-10 | 2022-03-11 | 天津洪恩完美未来教育科技有限公司 | 电子白板的数据同步方法、装置、设备和存储介质 |
CN115883865A (zh) * | 2023-01-31 | 2023-03-31 | 北京微吼时代科技有限公司 | 白板交互数据和音视频数据的同步方法、系统、存储介质和电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108632525B (zh) | 一种业务处理的方法和系统 | |
CN109168064B (zh) | 一种电子数据的同步显示方法和系统 | |
CN108737768B (zh) | 一种基于监控系统的监控方法和监控装置 | |
CN108965224B (zh) | 一种视频点播的方法和装置 | |
CN109167960B (zh) | 一种视频流数据的处理方法和系统 | |
CN111124333A (zh) | 电子白板显示内容同步的方法、装置、设备以及存储介质 | |
CN109547163B (zh) | 一种数据传输速率的控制方法和装置 | |
CN108965930B (zh) | 一种视频数据处理的方法和装置 | |
CN110557319B (zh) | 一种基于视联网的报文处理方法及装置 | |
CN110139124B (zh) | 一种监控录制的处理方法和装置 | |
CN110113564B (zh) | 一种数据获取方法和视联网系统 | |
CN110769179B (zh) | 一种音视频数据流的处理方法和系统 | |
CN109743284B (zh) | 一种基于视联网的视频处理方法及系统 | |
CN109544879B (zh) | 一种报警数据的处理方法和系统 | |
CN110769297A (zh) | 一种音视频数据的处理方法和系统 | |
CN111212255B (zh) | 监控资源获取方法、装置及计算机可读存储介质 | |
CN110392227B (zh) | 数据处理方法、装置及存储介质 | |
CN110086773B (zh) | 一种音视频数据的处理方法和系统 | |
CN110138729B (zh) | 一种数据获取方法和视联网系统 | |
CN111246237A (zh) | 一种全景视频直播方法和装置 | |
CN111478880A (zh) | 一种数据处理的方法和装置 | |
CN110324578B (zh) | 监控视频处理方法、装置及存储介质 | |
CN110830185B (zh) | 一种数据传输的方法及装置 | |
CN110536148B (zh) | 一种基于视联网的直播方法和设备 | |
CN110795008B (zh) | 图片传输方法、装置及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |