CN112954261A - 一种视频会议网络流量控制方法和系统 - Google Patents
一种视频会议网络流量控制方法和系统 Download PDFInfo
- Publication number
- CN112954261A CN112954261A CN202110291051.4A CN202110291051A CN112954261A CN 112954261 A CN112954261 A CN 112954261A CN 202110291051 A CN202110291051 A CN 202110291051A CN 112954261 A CN112954261 A CN 112954261A
- Authority
- CN
- China
- Prior art keywords
- video frame
- video
- pixels
- pixel
- frame image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
- H04N21/4334—Recording operations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种视频会议网络流量控制方法，包括：将视频会议视频帧图像进行时间序列化智能对比分析，识别分离相同像素区域的像素和不同像素区域的像素；传输时间序列内一帧相同像素区域的像素，传输时间序列内每一帧不同像素区域的像素，嵌合还原生成完整视频帧图像；根据视频会议完整还原视频，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制，形成文本记录，通过压缩算法对文本记录进一步压缩存储，通过网络流量传输，通过专用播放器进行回放及播放；一种视频会议网络流量控制系统，其特征在于，包括：视频帧图像识别分离模块、像素传输嵌合还原模块、视频会议还原播放模块、电子白板录制播放模块。
Description
技术领域
本发明涉及视频会议网络流量控制领域，更具体地说，本发明涉及一种视频会议网络流量控制方法和系统。
背景技术
一般的录屏是以录制视频文件的方式来实现的，最终视频文件会比较大；如具体的录屏录制视频会议过程中，会有大量重复的像素部分进行了反复录制；在一个较短的时间序列内，相邻视频帧图像往往具有较大概率的相同像素区域，而传输这些重复相同像素区域会使视频会议的流畅度和互动的及时性降低；如何将视频会议视频帧图像进行对比分析以及识别分离，是解决大量重复的像素反复录制的关键技术因素；识别分离后传输到接收端需解决如何将相同像素区域的像素和不同像素区域的像素进行嵌合还原；形成视频会议完整还原视频，基于电子白板解决录屏文件过大的问题是一个关键的技术问题，如何进一步压缩存储，并最大程度的减少网络流量传输、回放及播放是网络传输的难点；因此，有必要提出基于智能化操作的冰箱食材管理方法及系统，以至少部分地解决现有技术中存在的问题。
发明内容
在发明内容部分中引入了一系列简化形式的概念，这将在具体实施方式部分中进一步详细说明。本发明的发明内容部分并不意味着要试图限定出所要求保护的技术方案的关键特征和必要技术特征，更不意味着试图确定所要求保护的技术方案的保护范围。
为至少部分地解决上述问题，本发明提供了一种视频会议网络流量控制方法，包括：
S100、将视频会议视频帧图像进行时间序列化智能对比分析，识别出时间序列内相邻序列视频帧图像的相同像素区域和不同像素区域，分离相同像素区域的像素和不同像素区域的像素；
S200、传输时间序列内一帧相同像素区域的像素，传输时间序列内每一帧不同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行嵌合还原，生成完整还原的视频帧图像；
S300、将完整还原的视频帧图像按照时间序列和视频帧频率播放，形成视频会议完整还原视频；
S400、根据视频会议完整还原视频，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制，形成文本记录，通过zip压缩算法对文本记录进一步压缩存储，通过网络流量传输文本记录和压缩后的存储信息，通过专用播放器进行回放及播放。
优选的，S100包括：
S101、将时间序列内的视频会议视频帧图像进行序列排序；
S102、将序列排序后的视频会议视频帧图像分别与相邻的视频会议视频帧图像进行智能对比分析；
将序列排序的第二视频会议视频帧图像与第一视频会议视频帧图像进行智能对比分析，通过智能对比分析，识别出第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域；将序列排序的第三视频会议视频帧图像与第二视频会议视频帧图像进行智能对比分析，识别出第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域；
S103、分离第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域的像素；分离第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域的像素；像素识别分离的计算公式如下：
其中,F为像素识别分离度，ps为0-1之间的随机调节概率数，i为视频帧图像的第i个像素，j为视频帧图像的第j个像素，j≠i，d为距离j与i的距离，t为时间序列的序列排序值，ud(max)为像素分离的最大分离速度，ud(min)为像素分离的最小分离速度，
为序列排序值t时视频帧图像的第i个像素的分离速度，
为第j个像素的随机调节概率数，H(t)表示t时刻引力常数，Mj(t)第j个像素的惯性质量，
为视频帧图像的第i个像素和第j个像素的距离，ε为最小距离常量，
为序列排序值t时视频帧图像的第j个像素的位置，
为序列排序值t时视频帧图像的第i个像素的位置；根据计算的像素识别分离度，当分离度大于自适应设定的分离度，则识别为不同像素区域的像素，当分离度不大于自适应设定的分离度，则识别为相同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行像素分离，从而实现分离相同像素区域的像素和不同像素区域的像素。
优选的，S200包括：
S201、传输时间序列内一帧相同像素区域的像素；传输完整的第一帧视频帧图像；传输第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，传输第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素；
S202、将传输的第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，与第一帧视频帧图像相同像素区域的像素进行嵌合，将第一、第二不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理；识别不同像素区域的像素与相同像素区域的像素区域的重叠区域像素重叠度；当识别出重叠区域像素重叠度大于设定的像素重叠度阈值时，可嵌合衔接位置不需进行重叠度加深处理，当重叠区域像素重叠度不大于设定的像素重叠度阈值时，对可嵌合衔接位置进行重叠度加深调整处理，重新识别重叠区域像素重叠度，至重叠区域像素重叠度大于设定的像素重叠度阈值时，调整处理完成；嵌合衔接后，生成完整还原第二帧视频帧图像；
S203、将传输的第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素，与第二帧视频帧图像相同像素区域的像素进行嵌合，将第二、第三不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理，生成完整还原第三帧视频帧图像；按照步骤S201-S203，生成时间序列范围内的视频帧图像全部进行完整还原，从而生成完整还原的视频帧图像。
优选的，S300包括：
S301、将完整还原的视频帧图像恢复成原时间序列排序值；
S302、将恢复成原时间序列排序值的完整还原的视频帧图像存储到视频会议播放端；
S303、视频会议播放端读取完整还原的视频帧图像，对时间序列排序值恢复缺失的图像根据其时间序列排序值前后还原的视频帧图像进行图像差补；
S304、将图像差补后的完整时间序列排序值视频帧图像，按照视频帧频率对原时间序列排序值的完整还原的视频帧图像进行播放，形成视频会议完整还原视频。
优选的，S400包括：
S401、根据视频会议完整还原视频，采集视频中的记录动作；
S402、基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制；将视频中的记录动作，按照采集时间进行连贯一致性处理，去除掉设定记录位置区域范围以外的动作位置；
S403、对屏幕录制的记录进行处理和文本生成，形成文本记录；
S404、对形成的文本记录通过zip压缩算法对文本记录进一步压缩存储，生成文本记录压缩存储文件；通过网络流量传输文本记录和压缩后的存储信息，并通过专用播放器进行回放及播放。
一种视频会议网络流量控制系统，包括：
视频帧图像识别分离模块，将视频会议视频帧图像进行时间序列化智能对比分析，识别出时间序列内相邻序列视频帧图像的相同像素区域和不同像素区域，分离相同像素区域的像素和不同像素区域的像素；
像素传输嵌合还原模块，传输时间序列内一帧相同像素区域的像素，传输时间序列内每一帧不同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行嵌合还原，生成完整还原的视频帧图像；
视频会议还原播放模块，将完整还原的视频帧图像按照时间序列和视频帧频率播放，形成视频会议完整还原视频；
电子白板录制播放模块，根据视频会议完整还原视频，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制，形成文本记录，通过zip压缩算法对文本记录进一步压缩存储，通过网络流量传输文本记录和压缩后的存储信息，通过专用播放器进行回放及播放。
优选的，所述视频帧图像识别分离模块，包括：
视频帧图像序列排序模块，将时间序列内的视频会议视频帧图像进行序列排序；
视频帧图像智能对比分析模块，将序列排序后的视频会议视频帧图像分别与相邻的视频会议视频帧图像进行智能对比分析；
将序列排序的第二视频会议视频帧图像与第一视频会议视频帧图像进行智能对比分析，通过智能对比分析，识别出第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域；将序列排序的第三视频会议视频帧图像与第二视频会议视频帧图像进行智能对比分析，识别出第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域；
区域像素识别分离模块，分离第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域的像素；分离第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域的像素；像素识别分离的计算公式如下：
其中,F为像素识别分离度，ps为0-1之间的随机调节概率数，i为视频帧图像的第i个像素，j为视频帧图像的第j个像素，j≠i，d为距离j与i的距离，t为时间序列的序列排序值，ud(max)为像素分离的最大分离速度，ud(min)为像素分离的最小分离速度，
为序列排序值t时视频帧图像的第i个像素的分离速度，
为第j个像素的随机调节概率数，H(t)表示t时刻引力常数，Mj(t)第j个像素的惯性质量，
为视频帧图像的第i个像素和第j个像素的距离，ε为最小距离常量，
为序列排序值t时视频帧图像的第j个像素的位置，
为序列排序值t时视频帧图像的第i个像素的位置；根据计算的像素识别分离度，当分离度大于自适应设定的分离度，则识别为不同像素区域的像素，当分离度不大于自适应设定的分离度，则识别为相同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行像素分离，从而实现分离相同像素区域的像素和不同像素区域的像素。
优选的，所述像素传输嵌合还原模块，包括：
像素传输模块，传输时间序列内一帧相同像素区域的像素；传输完整的第一帧视频帧图像；传输第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，传输第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素；
像素嵌合衔接模块，将传输的第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，与第一帧视频帧图像相同像素区域的像素进行嵌合，将第一、第二不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理；识别不同像素区域的像素与相同像素区域的像素区域的重叠区域像素重叠度；当识别出重叠区域像素重叠度大于设定的像素重叠度阈值时，可嵌合衔接位置不需进行重叠度加深处理，当重叠区域像素重叠度不大于设定的像素重叠度阈值时，对可嵌合衔接位置进行重叠度加深调整处理，重新识别重叠区域像素重叠度，至重叠区域像素重叠度大于设定的像素重叠度阈值时，调整处理完成；嵌合衔接后，生成完整还原第二帧视频帧图像；
还原视频帧图像模块，将传输的第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素，与第二帧视频帧图像相同像素区域的像素进行嵌合，将第二、第三不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理，生成完整还原第三帧视频帧图像；按照步骤S201-S203，生成时间序列范围内的视频帧图像全部进行完整还原，从而生成完整还原的视频帧图像。
优选的，所述视频会议还原播放模块，包括：
图像时间序列恢复模块，成原将完整还原的视频帧图像恢复成原时间序列排序值；
序列视频帧图像存储模块，将恢复成原时间序列排序值的完整还原的视频帧图像存储到视频会议播放端的存储器；
视频帧图像差补模块，视频会议播放端读取完整还原的视频帧图像，对时间序列排序值恢复缺失的图像根据其时间序列排序值前后还原的视频帧图像进行图像差补；
视频会议视频还原模块，将图像差补后的完整时间序列排序值视频帧图像，按照视频帧频率对原时间序列排序值的完整还原的视频帧图像进行播放，形成视频会议完整还原视频。
优选的，所述电子白板录制播放模块，包括：
还原视频记录动作模块，根据视频会议完整还原视频，采集视频中的记录动作；
电子白板记录录制模块，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制；将视频中的记录动作，按照采集时间进行连贯一致性处理，去除掉设定记录位置区域范围以外的动作位置；
文本记录生成模块，对屏幕录制的记录进行处理和文本生成，形成文本记录；
记录压缩传输播放模块，对形成的文本记录通过zip压缩算法对文本记录进一步压缩存储，生成文本记录压缩存储文件；通过网络流量传输文本记录和压缩后的存储信息，并通过专用播放器进行回放及播放。
本发明所述的一种视频会议网络流量控制方法及系统，本发明的其它优点、目标和特征将部分通过下面的说明体现，部分还将通过对本发明的研究和实践而为本领域的技术人员所理解。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：
图1为本发明所述的一种视频会议网络流量控制方法步骤图。
图2为本发明所述的一种视频会议网络流量控制系统结构图。
具体实施方式
下面结合附图以及实施例对本发明做进一步的详细说明，以令本领域技术人员参照说明书文字能够据以实施。
如图1所示，本发明提供了一种视频会议网络流量控制方法，包括：
S100、将视频会议视频帧图像进行时间序列化智能对比分析，识别出时间序列内相邻序列视频帧图像的相同像素区域和不同像素区域，分离相同像素区域的像素和不同像素区域的像素；
S200、传输时间序列内一帧相同像素区域的像素，传输时间序列内每一帧不同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行嵌合还原，生成完整还原的视频帧图像；
S300、将完整还原的视频帧图像按照时间序列和视频帧频率播放，形成视频会议完整还原视频；
S400、根据视频会议完整还原视频，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制，形成文本记录，通过zip压缩算法对文本记录进一步压缩存储，通过网络流量传输文本记录和压缩后的存储信息，通过专用播放器进行回放及播放。
上述技术方案的工作原理：根据时间序列，将视频会议视频帧图像进行时间序列化处理，然后对相邻序列视频帧图像进行智能对比分析，识别出时间序列内相邻序列视频帧图像的相同像素区域和不同像素区域，并根据识别结果对相同像素区域的像素和不同像素区域的像素进行分离；对于设置的时间序列内，相同像素区域的像素仅传输内一帧，不同像素区域的像素，传输时间序列内每一帧不同像素区域的像素；利用图像嵌合还原技术，将相同像素区域的像素和不同像素区域的像素进行嵌合还原，生成完整还原的视频帧图像；读取完整还原的视频帧图像，并按照原时间序列和视频帧频率进行播放，形成视频会议完整还原视频；根据视频会议完整还原视频，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制，形成文本记录，通过zip压缩算法对文本记录进一步压缩存储；在移动APP传输过程中，具有小视频传输的流量；可以包括：基于微信小程序的会议系统，技术端使用很少流量，进行互动沟通、互相展示动画、PPT文字、语音等各种形式的会议系统；通过网络流量传输文本记录和压缩后的存储信息，利用专用播放器进行回放及播放。
上述技术方案的有益效果：通过时间序列将视频会议视频帧图像进行时间序列化处理，可以将视频会议视频帧图像分成独立的视频帧图像，并能够对相邻序列视频帧图像进行智能对比分析；通过对视频帧图像智能对比分析，可以识别出时间序列内相邻序列视频帧图像的相同像素区域和不同像素区域；根据识别结果，可以对相同像素区域的像素和不同像素区域的像素进行分离；对于设置的时间序列内，相同像素区域的像素仅传输内一帧，不同像素区域的像素，传输时间序列内每一帧不同像素区域的像素；利用图像嵌合还原技术，将相同像素区域的像素和不同像素区域的像素进行嵌合还原，生成完整还原的视频帧图像；读取完整还原的视频帧图像，并按照原时间序列和视频帧频率进行播放，形成视频会议完整还原视频；根据视频会议完整还原视频，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制，可以形成文本记录，从而可以将基于视频的屏幕录制的大文件大幅减小，形成非常小的文本记录文件，并能够通过zip压缩算法对文本记录进一步压缩存储，在网络传输过程中可以大幅度节省流量，在移动APP传输过程中，更具有小视频传输的流量优势；基于微信小程序的会议，技术端可以使用很少流量，减少流量消耗，并可以互动沟通、互相展示动画、PPT文字、语音等各种形式的会议；通过网络流量传输文本记录和压缩后的存储信息，利用专用播放器进行回放及播放，可以在节省网络流量的同时，保证播放的效果和视频动作的流畅度。
在一个实施例中，S100包括：
S101、将时间序列内的视频会议视频帧图像进行序列排序；
S102、将序列排序后的视频会议视频帧图像分别与相邻的视频会议视频帧图像进行智能对比分析；
将序列排序的第二视频会议视频帧图像与第一视频会议视频帧图像进行智能对比分析，通过智能对比分析，识别出第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域；将序列排序的第三视频会议视频帧图像与第二视频会议视频帧图像进行智能对比分析，识别出第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域；
S103、分离第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域的像素；分离第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域的像素；像素识别分离的计算公式如下：
其中,F为像素识别分离度，ps为0-1之间的随机调节概率数，i为视频帧图像的第i个像素，j为视频帧图像的第j个像素，j≠i，d为距离j与i的距离，t为时间序列的序列排序值，ud(max)为像素分离的最大分离速度，ud(min)为像素分离的最小分离速度，
为序列排序值t时视频帧图像的第i个像素的分离速度，
为第j个像素的随机调节概率数，H(t)表示t时刻引力常数，Mj(t)第j个像素的惯性质量，
为视频帧图像的第i个像素和第j个像素的距离，ε为最小距离常量，
为序列排序值t时视频帧图像的第j个像素的位置，
为序列排序值t时视频帧图像的第i个像素的位置；根据计算的像素识别分离度，当分离度大于自适应设定的分离度，则识别为不同像素区域的像素，当分离度不大于自适应设定的分离度，则识别为相同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行像素分离，从而实现分离相同像素区域的像素和不同像素区域的像素。
上述技术方案的工作原理：利用将时间序列对视频会议视频帧图像进行序列排序；将序列排序后的视频会议视频帧图像，通过图像对比、图像识别等图像处理技术，接合机器智能分析，分别与相邻的视频会议视频帧图像进行智能对比分析；具体对比分析过程原理：将序列排序的第二视频会议视频帧图像与第一视频会议视频帧图像进行智能对比、机器智能分析等，通过智能对比分析，识别出第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域，相同像素区域具有相同的像素集合，或像素集合的区别度小于设定的区别度，不同像素区域像素可以设置像素集合的区别度不小于某设定区别度值，识别出不同像素区域像素；同理，将序列排序的第三视频会议视频帧图像与第二视频会议视频帧图像进行智能对比分析，识别出第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域；利用像素识别分离技术，对识别的图像进行像素分离；分离第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域的像素；分离第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域的像素；根据计算的像素识别分离度，当分离度大于自适应设定的分离度，则识别为不同像素区域的像素，当分离度不大于自适应设定的分离度，则识别为相同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行像素分离，从而实现分离相同像素区域的像素和不同像素区域的像素。
上述技术方案的有益效果：通过时间序列可以对视频会议视频帧图像进行序列排序；序列排序后的视频会议视频帧图像，可以按照序列排序进行图像对比、图像识别；接合机器智能分析，可以分别与相邻的视频会议视频帧图像进行智能对比分析；可以灵活设置具有相同的像素集合、或像素集合的区别度小于设定的区别度，不同像素区域像素可以设置像素集合的区别度不小于设定区别度值，从而对比识别出相同像素区域和不同像素区域像素；通过像素识别分离技术，可以对识别的图像进行像素分离；分离相同像素区域和不同像素区域像素，可以在视频传输过程中，设置时间序列范围内仅传输一个相同像素区域，而不必传输大量的重复像素，其余不同像素区域的文件大小将被大幅减小；还可以根据计算的像素识别分离度，自适应设置分离度，当分离度大于自适应设定的分离度，则识别为不同像素区域的像素，当分离度不大于自适应设定的分离度，则识别为相同像素区域的像素，从而可以将相同像素区域的像素和不同像素区域的像素进行像素分离；可通过多种方式实现智能分离相同像素区域的像素和不同像素区域的像素。
在一个实施例中，S200包括：
S201、传输时间序列内一帧相同像素区域的像素；传输完整的第一帧视频帧图像；传输第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，传输第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素；
S202、将传输的第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，与第一帧视频帧图像相同像素区域的像素进行嵌合，将第一、第二不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理；识别不同像素区域的像素与相同像素区域的像素区域的重叠区域像素重叠度；当识别出重叠区域像素重叠度大于设定的像素重叠度阈值时，可嵌合衔接位置不需进行重叠度加深处理，当重叠区域像素重叠度不大于设定的像素重叠度阈值时，对可嵌合衔接位置进行重叠度加深调整处理，重新识别重叠区域像素重叠度，至重叠区域像素重叠度大于设定的像素重叠度阈值时，调整处理完成；嵌合衔接后，生成完整还原第二帧视频帧图像；
S203、将传输的第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素，与第二帧视频帧图像相同像素区域的像素进行嵌合，将第二、第三不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理，生成完整还原第三帧视频帧图像；按照步骤S201-S203，生成时间序列范围内的视频帧图像全部进行完整还原，从而生成完整还原的视频帧图像。
上述技术方案的工作原理：利用设置的图像传输技术，传输时间序列内一帧相同像素区域的像素；在一个较短的时间序列内，相邻视频帧图像往往具有较大概率的相同像素区域，而传输这些重复相同像素区域会使视频会议的流畅度和互动的及时性降低；传输完整的第一帧视频帧图像；传输第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，传输第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素，依次传输其余视频帧图像不同像素区域的像素；可以利用图像拼接技术，对分离传输的图像部分及图像像素进行拼接嵌合，将传输的第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，与第一帧视频帧图像相同像素区域的像素进行嵌合，将第一、第二不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理，嵌合衔接图像处理的原理可以利用图像全景拼接技术进行嵌合衔接，还可以通过灰度调整等技术进行衔接均匀过度；通过识别不同像素区域的像素与相同像素区域的像素区域的重叠区域像素重叠度；当识别出重叠区域像素重叠度大于设定的像素重叠度阈值时，可嵌合衔接位置不需进行重叠度加深处理，当重叠区域像素重叠度不大于设定的像素重叠度阈值时，对可嵌合衔接位置进行重叠度加深调整处理，重新识别重叠区域像素重叠度，至重叠区域像素重叠度大于设定的像素重叠度阈值时，调整处理完成；嵌合衔接后，生成完整还原第二帧视频帧图像；同理，将传输的第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素，与第二帧视频帧图像相同像素区域的像素进行嵌合，将第二、第三不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理，生成完整还原第三帧视频帧图像；按照步骤S201-S203，生成时间序列范围内的视频帧图像全部进行完整还原，从而生成完整还原的视频帧图像。
上述技术方案的有益效果：可以通过智能设置图像传输的方式，仅传输时间序列内一帧相同像素区域的像素；在一个较短的时间序列内，相邻视频帧图像的相同像素区域，可以设置不再传输这些重复相同像素区域，仅传输视频帧图像不同像素区域的像素，可以减小视频会议过程中的视频传输流量，提高视频会议的流畅度和互动的及时性；利用图像拼接技术，可以对分离传输的图像部分及图像像素进行拼接嵌合，并进行嵌合衔接图像处理；还可以通过灰度调整等技术进行衔接均匀过度；通过识别不同像素区域的像素与相同像素区域的像素区域的重叠区域像素重叠度；当识别出重叠区域像素重叠度大于设定的像素重叠度阈值时，可嵌合衔接位置不需进行重叠度加深处理，当重叠区域像素重叠度不大于设定的像素重叠度阈值时，对可嵌合衔接位置进行重叠度加深调整处理，重新识别重叠区域像素重叠度，至重叠区域像素重叠度大于设定的像素重叠度阈值时，调整处理完成；嵌合衔接后，可以生成完整还原的视频帧图像；从而生成完整还原的视频帧图像；还可以利用图像全景拼接技术进行嵌合衔接，更适合视频会议过程中全景图像的需求，而不必反复调整视频录制的角度，进一步提高视频图像的全景化效果。
在一个实施例中，S300包括：
S301、将完整还原的视频帧图像恢复成原时间序列排序值；
S302、将恢复成原时间序列排序值的完整还原的视频帧图像存储到视频会议播放端；
S303、视频会议播放端读取完整还原的视频帧图像，对时间序列排序值恢复缺失的图像根据其时间序列排序值前后还原的视频帧图像进行图像差补；
S304、将图像差补后的完整时间序列排序值视频帧图像，按照视频帧频率对原时间序列排序值的完整还原的视频帧图像进行播放，形成视频会议完整还原视频。
上述技术方案的工作原理：利用时间同步，将完整还原的视频帧图像恢复成原时间序列排序值；通过视频会议播放端的存储系统，将恢复成原时间序列排序值的完整还原的视频帧图像存储到视频会议播放端；视频会议播放端读取完整还原的视频帧图像，对时间序列排序值恢复缺失的图像根据其时间序列排序值前后还原的视频帧图像进行图像差补；将图像差补后的完整时间序列排序值视频帧图像，按照视频帧频率对原时间序列排序值的完整还原的视频帧图像进行播放，形成视频会议完整还原视频。
上述技术方案的有益效果：利用时间同步，将完整还原的视频帧图像恢复成原时间序列排序值，效率更高、更容易实现视频帧图像恢复的复现度；通过视频会议播放端的存储系统，将恢复成原时间序列排序值的完整还原的视频帧图像存储到视频会议播放端，播放时可以实现本地存储、播放过程的可靠度更高，可以在网络传输过程中很大程度上减少网速对视频的影响；视频会议播放端读取完整还原的视频帧图像，对时间序列排序值恢复缺失的图像根据其时间序列排序值前后还原的视频帧图像进行图像差补，可以将图像的连贯性进一步提高；将图像差补后的完整时间序列排序值视频帧图像，可以按照视频帧频率对原时间序列排序值的完整还原的视频帧图像进行播放，从而形成视频会议完整还原视频。
在一个实施例中，S400包括：
S401、根据视频会议完整还原视频，采集视频中的记录动作；
S402、基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制；将视频中的记录动作，按照采集时间进行连贯一致性处理，去除掉设定记录位置区域范围以外的动作位置；
S403、对屏幕录制的记录进行处理和文本生成，形成文本记录；
S404、对形成的文本记录通过zip压缩算法对文本记录进一步压缩存储，生成文本记录压缩存储文件；通过网络流量传输文本记录和压缩后的存储信息，并通过专用播放器进行回放及播放。
上述技术方案的工作原理：利用图像采集及动作记录，根据视频会议完整还原视频，采集视频中的记录动作；基于电子白板技术按照记录动作及动作发生时间的方式记录屏幕录制；将视频中的记录动作，利用采集时间进行连贯一致性处理，去除掉设定记录位置区域范围以外的动作位置，记录位置区域范围以外可以为视频会议过程中的非会议位置区域，如会议记录的空白部分、记录范围明显不会到达的位置等；对屏幕录制的记录进行处理和文本生成，形成文本记录；对形成的文本记录通过zip压缩算法对文本记录进一步压缩存储，生成文本记录压缩存储文件；通过网络流量传输文本记录和压缩后的存储信息，并通过专用播放器进行回放及播放。
上述技术方案的有益效果：通过图像采集及动作记录，可以根据视频会议完整还原视频采集视频中的记录动作；基于电子白板技术按照记录动作及动作发生时间的方式记录屏幕录制，可以大幅减小录制屏幕的文件大小；将视频中的记录动作，利用采集时间进行连贯一致性处理，可以去除掉设定记录位置区域范围以外的动作位置，可以排除记录位置区域范围以外的非会议记录位置区域；对屏幕录制的记录进行处理和文本生成，可以形成文本记录；对形成的文本记录通过zip压缩算法，还能够进一步压缩存储，并生成文本记录压缩存储文件；压缩后的文件可以实现传输过程的无滞后传输，对于需要大范围互动的移动端视频会议更加有利，可以实现更广区域及指数数量级别的视频互动提升；通过网络流量传输文本记录和压缩后的存储信息，可以通过专用播放器进行回放及播放，播放效果、清晰度及流畅度更好。
如图2所示，本发明提供了一种视频会议网络流量控制系统，包括：
视频帧图像识别分离模块，将视频会议视频帧图像进行时间序列化智能对比分析，识别出时间序列内相邻序列视频帧图像的相同像素区域和不同像素区域，分离相同像素区域的像素和不同像素区域的像素；
像素传输嵌合还原模块，传输时间序列内一帧相同像素区域的像素，传输时间序列内每一帧不同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行嵌合还原，生成完整还原的视频帧图像；
视频会议还原播放模块，将完整还原的视频帧图像按照时间序列和视频帧频率播放，形成视频会议完整还原视频；
电子白板录制播放模块，根据视频会议完整还原视频，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制，形成文本记录，通过zip压缩算法对文本记录进一步压缩存储，通过网络流量传输文本记录和压缩后的存储信息，通过专用播放器进行回放及播放。
上述技术方案的工作原理：根据时间序列，将视频会议视频帧图像进行时间序列化处理，然后对相邻序列视频帧图像进行智能对比分析，识别出时间序列内相邻序列视频帧图像的相同像素区域和不同像素区域，并根据识别结果对相同像素区域的像素和不同像素区域的像素进行分离；对于设置的时间序列内，相同像素区域的像素仅传输内一帧，不同像素区域的像素，传输时间序列内每一帧不同像素区域的像素；利用图像嵌合还原技术，将相同像素区域的像素和不同像素区域的像素进行嵌合还原，生成完整还原的视频帧图像；读取完整还原的视频帧图像，并按照原时间序列和视频帧频率进行播放，形成视频会议完整还原视频；根据视频会议完整还原视频，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制，形成文本记录，通过zip压缩算法对文本记录进一步压缩存储；在移动APP传输过程中，具有小视频传输的流量；可以包括：基于微信小程序的会议系统，技术端使用很少流量，进行互动沟通、互相展示动画、PPT文字、语音等各种形式的会议系统；通过网络流量传输文本记录和压缩后的存储信息，利用专用播放器进行回放及播放。
上述技术方案的有益效果：通过时间序列将视频会议视频帧图像进行时间序列化处理，可以将视频会议视频帧图像分成独立的视频帧图像，并能够对相邻序列视频帧图像进行智能对比分析；通过对视频帧图像智能对比分析，可以识别出时间序列内相邻序列视频帧图像的相同像素区域和不同像素区域；根据识别结果，可以对相同像素区域的像素和不同像素区域的像素进行分离；对于设置的时间序列内，相同像素区域的像素仅传输内一帧，不同像素区域的像素，传输时间序列内每一帧不同像素区域的像素；利用图像嵌合还原技术，将相同像素区域的像素和不同像素区域的像素进行嵌合还原，生成完整还原的视频帧图像；读取完整还原的视频帧图像，并按照原时间序列和视频帧频率进行播放，形成视频会议完整还原视频；根据视频会议完整还原视频，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制，可以形成文本记录，从而可以将基于视频的屏幕录制的大文件大幅减小，形成非常小的文本记录文件，并能够通过zip压缩算法对文本记录进一步压缩存储，在网络传输过程中可以大幅度节省流量，在移动APP传输过程中，更具有小视频传输的流量优势；基于微信小程序的会议，技术端可以使用很少流量，减少流量消耗，并可以互动沟通、互相展示动画、PPT文字、语音等各种形式的会议；通过网络流量传输文本记录和压缩后的存储信息，利用专用播放器进行回放及播放，可以在节省网络流量的同时，保证播放的效果和视频动作的流畅度。
在一个实施例中，所述视频帧图像识别分离模块，包括：
视频帧图像序列排序模块，将时间序列内的视频会议视频帧图像进行序列排序；
视频帧图像智能对比分析模块，将序列排序后的视频会议视频帧图像分别与相邻的视频会议视频帧图像进行智能对比分析；
将序列排序的第二视频会议视频帧图像与第一视频会议视频帧图像进行智能对比分析，通过智能对比分析，识别出第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域；将序列排序的第三视频会议视频帧图像与第二视频会议视频帧图像进行智能对比分析，识别出第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域；
区域像素识别分离模块，分离第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域的像素；分离第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域的像素；像素识别分离的计算公式如下：
其中,F为像素识别分离度，ps为0-1之间的随机调节概率数，i为视频帧图像的第i个像素，j为视频帧图像的第j个像素，j≠i，d为距离j与i的距离，t为时间序列的序列排序值，ud(max)为像素分离的最大分离速度，ud(min)为像素分离的最小分离速度，
为序列排序值t时视频帧图像的第i个像素的分离速度，
为第j个像素的随机调节概率数，H(t)表示t时刻引力常数，Mj(t)第j个像素的惯性质量，
为视频帧图像的第i个像素和第j个像素的距离，ε为最小距离常量，
为序列排序值t时视频帧图像的第j个像素的位置，
为序列排序值t时视频帧图像的第i个像素的位置；根据计算的像素识别分离度，当分离度大于自适应设定的分离度，则识别为不同像素区域的像素，当分离度不大于自适应设定的分离度，则识别为相同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行像素分离，从而实现分离相同像素区域的像素和不同像素区域的像素。
上述技术方案的工作原理：利用将时间序列对视频会议视频帧图像进行序列排序；将序列排序后的视频会议视频帧图像，通过图像对比、图像识别等图像处理技术，接合机器智能分析，分别与相邻的视频会议视频帧图像进行智能对比分析；具体对比分析过程原理：将序列排序的第二视频会议视频帧图像与第一视频会议视频帧图像进行智能对比、机器智能分析等，通过智能对比分析，识别出第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域，相同像素区域具有相同的像素集合，或像素集合的区别度小于设定的区别度，不同像素区域像素可以设置像素集合的区别度不小于某设定区别度值，识别出不同像素区域像素；同理，将序列排序的第三视频会议视频帧图像与第二视频会议视频帧图像进行智能对比分析，识别出第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域；利用像素识别分离技术，对识别的图像进行像素分离；分离第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域的像素；分离第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域的像素；根据计算的像素识别分离度，当分离度大于自适应设定的分离度，则识别为不同像素区域的像素，当分离度不大于自适应设定的分离度，则识别为相同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行像素分离，从而实现分离相同像素区域的像素和不同像素区域的像素。
上述技术方案的有益效果：通过时间序列可以对视频会议视频帧图像进行序列排序；序列排序后的视频会议视频帧图像，可以按照序列排序进行图像对比、图像识别；接合机器智能分析，可以分别与相邻的视频会议视频帧图像进行智能对比分析；可以灵活设置具有相同的像素集合、或像素集合的区别度小于设定的区别度，不同像素区域像素可以设置像素集合的区别度不小于设定区别度值，从而对比识别出相同像素区域和不同像素区域像素；通过像素识别分离技术，可以对识别的图像进行像素分离；分离相同像素区域和不同像素区域像素，可以在视频传输过程中，设置时间序列范围内仅传输一个相同像素区域，而不必传输大量的重复像素，其余不同像素区域的文件大小将被大幅减小；还可以根据计算的像素识别分离度，自适应设置分离度，当分离度大于自适应设定的分离度，则识别为不同像素区域的像素，当分离度不大于自适应设定的分离度，则识别为相同像素区域的像素，从而可以将相同像素区域的像素和不同像素区域的像素进行像素分离；可通过多种方式实现智能分离相同像素区域的像素和不同像素区域的像素。
在一个实施例中，所述像素传输嵌合还原模块，包括：
像素传输模块，传输时间序列内一帧相同像素区域的像素；传输完整的第一帧视频帧图像；传输第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，传输第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素；
像素嵌合衔接模块，将传输的第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，与第一帧视频帧图像相同像素区域的像素进行嵌合，将第一、第二不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理；识别不同像素区域的像素与相同像素区域的像素区域的重叠区域像素重叠度；当识别出重叠区域像素重叠度大于设定的像素重叠度阈值时，可嵌合衔接位置不需进行重叠度加深处理，当重叠区域像素重叠度不大于设定的像素重叠度阈值时，对可嵌合衔接位置进行重叠度加深调整处理，重新识别重叠区域像素重叠度，至重叠区域像素重叠度大于设定的像素重叠度阈值时，调整处理完成；嵌合衔接后，生成完整还原第二帧视频帧图像；
还原视频帧图像模块，将传输的第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素，与第二帧视频帧图像相同像素区域的像素进行嵌合，将第二、第三不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理，生成完整还原第三帧视频帧图像；按照步骤S201-S203，生成时间序列范围内的视频帧图像全部进行完整还原，从而生成完整还原的视频帧图像。
上述技术方案的工作原理：利用设置的图像传输技术，传输时间序列内一帧相同像素区域的像素；在一个较短的时间序列内，相邻视频帧图像往往具有较大概率的相同像素区域，而传输这些重复相同像素区域会使视频会议的流畅度和互动的及时性降低；传输完整的第一帧视频帧图像；传输第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，传输第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素，依次传输其余视频帧图像不同像素区域的像素；可以利用图像拼接技术，对分离传输的图像部分及图像像素进行拼接嵌合，将传输的第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，与第一帧视频帧图像相同像素区域的像素进行嵌合，将第一、第二不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理，嵌合衔接图像处理的原理可以利用图像全景拼接技术进行嵌合衔接，还可以通过灰度调整等技术进行衔接均匀过度；通过识别不同像素区域的像素与相同像素区域的像素区域的重叠区域像素重叠度；当识别出重叠区域像素重叠度大于设定的像素重叠度阈值时，可嵌合衔接位置不需进行重叠度加深处理，当重叠区域像素重叠度不大于设定的像素重叠度阈值时，对可嵌合衔接位置进行重叠度加深调整处理，重新识别重叠区域像素重叠度，至重叠区域像素重叠度大于设定的像素重叠度阈值时，调整处理完成；嵌合衔接后，生成完整还原第二帧视频帧图像；同理，将传输的第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素，与第二帧视频帧图像相同像素区域的像素进行嵌合，将第二、第三不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理，生成完整还原第三帧视频帧图像；按照步骤S201-S203，生成时间序列范围内的视频帧图像全部进行完整还原，从而生成完整还原的视频帧图像。
上述技术方案的有益效果：可以通过智能设置图像传输的方式，仅传输时间序列内一帧相同像素区域的像素；在一个较短的时间序列内，相邻视频帧图像的相同像素区域，可以设置不再传输这些重复相同像素区域，仅传输视频帧图像不同像素区域的像素，可以减小视频会议过程中的视频传输流量，提高视频会议的流畅度和互动的及时性；利用图像拼接技术，可以对分离传输的图像部分及图像像素进行拼接嵌合，并进行嵌合衔接图像处理；还可以通过灰度调整等技术进行衔接均匀过度；通过识别不同像素区域的像素与相同像素区域的像素区域的重叠区域像素重叠度；当识别出重叠区域像素重叠度大于设定的像素重叠度阈值时，可嵌合衔接位置不需进行重叠度加深处理，当重叠区域像素重叠度不大于设定的像素重叠度阈值时，对可嵌合衔接位置进行重叠度加深调整处理，重新识别重叠区域像素重叠度，至重叠区域像素重叠度大于设定的像素重叠度阈值时，调整处理完成；嵌合衔接后，可以生成完整还原的视频帧图像；从而生成完整还原的视频帧图像；还可以利用图像全景拼接技术进行嵌合衔接，更适合视频会议过程中全景图像的需求，而不必反复调整视频录制的角度，进一步提高视频图像的全景化效果。
在一个实施例中，所述视频会议还原播放模块，包括：
图像时间序列恢复模块，成原将完整还原的视频帧图像恢复成原时间序列排序值；
序列视频帧图像存储模块，将恢复成原时间序列排序值的完整还原的视频帧图像存储到视频会议播放端的存储器；
视频帧图像差补模块，视频会议播放端读取完整还原的视频帧图像，对时间序列排序值恢复缺失的图像根据其时间序列排序值前后还原的视频帧图像进行图像差补；
视频会议视频还原模块，将图像差补后的完整时间序列排序值视频帧图像，按照视频帧频率对原时间序列排序值的完整还原的视频帧图像进行播放，形成视频会议完整还原视频。
上述技术方案的工作原理：利用时间同步，将完整还原的视频帧图像恢复成原时间序列排序值；通过视频会议播放端的存储系统，将恢复成原时间序列排序值的完整还原的视频帧图像存储到视频会议播放端；视频会议播放端读取完整还原的视频帧图像，对时间序列排序值恢复缺失的图像根据其时间序列排序值前后还原的视频帧图像进行图像差补；将图像差补后的完整时间序列排序值视频帧图像，按照视频帧频率对原时间序列排序值的完整还原的视频帧图像进行播放，形成视频会议完整还原视频。
上述技术方案的有益效果：利用时间同步，将完整还原的视频帧图像恢复成原时间序列排序值，效率更高、更容易实现视频帧图像恢复的复现度；通过视频会议播放端的存储系统，将恢复成原时间序列排序值的完整还原的视频帧图像存储到视频会议播放端，播放时可以实现本地存储、播放过程的可靠度更高，可以在网络传输过程中很大程度上减少网速对视频的影响；视频会议播放端读取完整还原的视频帧图像，对时间序列排序值恢复缺失的图像根据其时间序列排序值前后还原的视频帧图像进行图像差补，可以将图像的连贯性进一步提高；将图像差补后的完整时间序列排序值视频帧图像，可以按照视频帧频率对原时间序列排序值的完整还原的视频帧图像进行播放，从而形成视频会议完整还原视频。
在一个实施例中，所述电子白板录制播放模块，包括：
还原视频记录动作模块，根据视频会议完整还原视频，采集视频中的记录动作；
电子白板记录录制模块，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制；将视频中的记录动作，按照采集时间进行连贯一致性处理，去除掉设定记录位置区域范围以外的动作位置；
文本记录生成模块，对屏幕录制的记录进行处理和文本生成，形成文本记录；
记录压缩传输播放模块，对形成的文本记录通过zip压缩算法对文本记录进一步压缩存储，生成文本记录压缩存储文件；通过网络流量传输文本记录和压缩后的存储信息，并通过专用播放器进行回放及播放。
上述技术方案的工作原理：利用图像采集及动作记录，根据视频会议完整还原视频，采集视频中的记录动作；基于电子白板技术按照记录动作及动作发生时间的方式记录屏幕录制；将视频中的记录动作，利用采集时间进行连贯一致性处理，去除掉设定记录位置区域范围以外的动作位置，记录位置区域范围以外可以为视频会议过程中的非会议位置区域，如会议记录的空白部分、记录范围明显不会到达的位置等；对屏幕录制的记录进行处理和文本生成，形成文本记录；对形成的文本记录通过zip压缩算法对文本记录进一步压缩存储，生成文本记录压缩存储文件；通过网络流量传输文本记录和压缩后的存储信息，并通过专用播放器进行回放及播放。
上述技术方案的有益效果：通过图像采集及动作记录，可以根据视频会议完整还原视频采集视频中的记录动作；基于电子白板技术按照记录动作及动作发生时间的方式记录屏幕录制，可以大幅减小录制屏幕的文件大小；将视频中的记录动作，利用采集时间进行连贯一致性处理，可以去除掉设定记录位置区域范围以外的动作位置，可以排除记录位置区域范围以外的非会议记录位置区域；对屏幕录制的记录进行处理和文本生成，可以形成文本记录；对形成的文本记录通过zip压缩算法，还能够进一步压缩存储，并生成文本记录压缩存储文件；压缩后的文件可以实现传输过程的无滞后传输，对于需要大范围互动的移动端视频会议更加有利，可以实现更广区域及指数数量级别的视频互动提升；通过网络流量传输文本记录和压缩后的存储信息，可以通过专用播放器进行回放及播放，播放效果、清晰度及流畅度更好。
尽管本发明的实施方案已公开如上，但其并不仅仅限于说明书和实施方式中所列运用，它完全可以被适用于各种适合本发明的领域，对于熟悉本领域的人员而言，可容易地实现另外的修改，因此在不背离权利要求及等同范围所限定的一般概念下，本发明并不限于特定的细节与这里示出与描述的图例。
Claims (10)
1.一种视频会议网络流量控制方法，其特征在于，包括：
S100、将视频会议视频帧图像进行时间序列化智能对比分析，识别出时间序列内相邻序列视频帧图像的相同像素区域和不同像素区域，分离相同像素区域的像素和不同像素区域的像素；
S200、传输时间序列内一帧相同像素区域的像素，传输时间序列内每一帧不同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行嵌合还原，生成完整还原的视频帧图像；
S300、将完整还原的视频帧图像按照时间序列和视频帧频率播放，形成视频会议完整还原视频；
S400、根据视频会议完整还原视频，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制，形成文本记录，通过zip压缩算法对文本记录进一步压缩存储，通过网络流量传输文本记录和压缩后的存储信息，通过专用播放器进行回放及播放。
2.根据权利要求1所述的一种视频会议网络流量控制方法，其特征在于，S100包括：
S101、将时间序列内的视频会议视频帧图像进行序列排序；
S102、将序列排序后的视频会议视频帧图像分别与相邻的视频会议视频帧图像进行智能对比分析；
将序列排序的第二视频会议视频帧图像与第一视频会议视频帧图像进行智能对比分析，通过智能对比分析，识别出第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域；将序列排序的第三视频会议视频帧图像与第二视频会议视频帧图像进行智能对比分析，识别出第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域；
S103、分离第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域的像素；分离第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域的像素；像素识别分离的计算公式如下：
其中,F为像素识别分离度，ps为0-1之间的随机调节概率数，i为视频帧图像的第i个像素，j为视频帧图像的第j个像素，j≠i，d为距离j与i的距离，t为时间序列的序列排序值，ud(max)为像素分离的最大分离速度，ud(min)为像素分离的最小分离速度，
为序列排序值t时视频帧图像的第i个像素的分离速度，
为第j个像素的随机调节概率数，H(t)表示t时刻引力常数，Mj(t)第j个像素的惯性质量，
为视频帧图像的第i个像素和第j个像素的距离，ε为最小距离常量，
为序列排序值t时视频帧图像的第j个像素的位置，
为序列排序值t时视频帧图像的第i个像素的位置；根据计算的像素识别分离度，当分离度大于自适应设定的分离度，则识别为不同像素区域的像素，当分离度不大于自适应设定的分离度，则识别为相同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行像素分离，从而实现分离相同像素区域的像素和不同像素区域的像素。
3.根据权利要求1所述的一种视频会议网络流量控制方法，其特征在于，S200包括：
S201、传输时间序列内一帧相同像素区域的像素；传输完整的第一帧视频帧图像；传输第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，传输第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素；
S202、将传输的第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，与第一帧视频帧图像相同像素区域的像素进行嵌合，将第一、第二不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理；识别不同像素区域的像素与相同像素区域的像素区域的重叠区域像素重叠度；当识别出重叠区域像素重叠度大于设定的像素重叠度阈值时，可嵌合衔接位置不需进行重叠度加深处理，当重叠区域像素重叠度不大于设定的像素重叠度阈值时，对可嵌合衔接位置进行重叠度加深调整处理，重新识别重叠区域像素重叠度，至重叠区域像素重叠度大于设定的像素重叠度阈值时，调整处理完成；嵌合衔接后，生成完整还原第二帧视频帧图像；
S203、将传输的第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素，与第二帧视频帧图像相同像素区域的像素进行嵌合，将第二、第三不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理，生成完整还原第三帧视频帧图像；按照步骤S201-S203，生成时间序列范围内的视频帧图像全部进行完整还原，从而生成完整还原的视频帧图像。
4.根据权利要求1所述的一种视频会议网络流量控制方法，其特征在于，S300包括：
S301、将完整还原的视频帧图像恢复成原时间序列排序值；
S302、将恢复成原时间序列排序值的完整还原的视频帧图像存储到视频会议播放端；
S303、视频会议播放端读取完整还原的视频帧图像，对时间序列排序值恢复缺失的图像根据其时间序列排序值前后还原的视频帧图像进行图像差补；
S304、将图像差补后的完整时间序列排序值视频帧图像，按照视频帧频率对原时间序列排序值的完整还原的视频帧图像进行播放，形成视频会议完整还原视频。
5.根据权利要求1所述的一种视频会议网络流量控制方法，其特征在于，S400包括：
S401、根据视频会议完整还原视频，采集视频中的记录动作；
S402、基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制；将视频中的记录动作，按照采集时间进行连贯一致性处理，去除掉设定记录位置区域范围以外的动作位置；
S403、对屏幕录制的记录进行处理和文本生成，形成文本记录；
S404、对形成的文本记录通过zip压缩算法对文本记录进一步压缩存储，生成文本记录压缩存储文件；通过网络流量传输文本记录和压缩后的存储信息，并通过专用播放器进行回放及播放。
6.一种视频会议网络流量控制系统，其特征在于，包括：
视频帧图像识别分离模块，将视频会议视频帧图像进行时间序列化智能对比分析，识别出时间序列内相邻序列视频帧图像的相同像素区域和不同像素区域，分离相同像素区域的像素和不同像素区域的像素；
像素传输嵌合还原模块，传输时间序列内一帧相同像素区域的像素，传输时间序列内每一帧不同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行嵌合还原，生成完整还原的视频帧图像；
视频会议还原播放模块，将完整还原的视频帧图像按照时间序列和视频帧频率播放，形成视频会议完整还原视频；
电子白板录制播放模块，根据视频会议完整还原视频，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制，形成文本记录，通过zip压缩算法对文本记录进一步压缩存储，通过网络流量传输文本记录和压缩后的存储信息，通过专用播放器进行回放及播放。
7.根据权利要求6所述的一种视频会议网络流量控制系统，其特征在于，所述视频帧图像识别分离模块，包括：
视频帧图像序列排序模块，将时间序列内的视频会议视频帧图像进行序列排序；
视频帧图像智能对比分析模块，将序列排序后的视频会议视频帧图像分别与相邻的视频会议视频帧图像进行智能对比分析；将序列排序的第二视频会议视频帧图像与第一视频会议视频帧图像进行智能对比分析，通过智能对比分析，识别出第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域；将序列排序的第三视频会议视频帧图像与第二视频会议视频帧图像进行智能对比分析，识别出第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域；
区域像素识别分离模块，分离第二视频会议视频帧图像与第一视频会议视频帧图像的相同像素区域和不同像素区域的像素；分离第三视频会议视频帧图像与第二视频会议视频帧图像的相同像素区域和不同像素区域的像素；像素识别分离的计算公式如下：
其中,F为像素识别分离度，ps为0-1之间的随机调节概率数，i为视频帧图像的第i个像素，j为视频帧图像的第j个像素，j≠i，d为距离j与i的距离，t为时间序列的序列排序值，ud(max)为像素分离的最大分离速度，ud(min)为像素分离的最小分离速度，
为序列排序值t时视频帧图像的第i个像素的分离速度，
为第j个像素的随机调节概率数，H(t)表示t时刻引力常数，Mj(t)第j个像素的惯性质量，
为视频帧图像的第i个像素和第j个像素的距离，ε为最小距离常量，
为序列排序值t时视频帧图像的第j个像素的位置，
为序列排序值t时视频帧图像的第i个像素的位置；根据计算的像素识别分离度，当分离度大于自适应设定的分离度，则识别为不同像素区域的像素，当分离度不大于自适应设定的分离度，则识别为相同像素区域的像素，将相同像素区域的像素和不同像素区域的像素进行像素分离，从而实现分离相同像素区域的像素和不同像素区域的像素。
8.根据权利要求6所述的一种视频会议网络流量控制系统，其特征在于，所述像素传输嵌合还原模块，包括：
像素传输模块，传输时间序列内一帧相同像素区域的像素；传输完整的第一帧视频帧图像；传输第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，传输第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素；
像素嵌合衔接模块，将传输的第二帧视频帧图像和第一帧视频帧图像不同像素区域的像素，与第一帧视频帧图像相同像素区域的像素进行嵌合，将第一、第二不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理；识别不同像素区域的像素与相同像素区域的像素区域的重叠区域像素重叠度；当识别出重叠区域像素重叠度大于设定的像素重叠度阈值时，可嵌合衔接位置不需进行重叠度加深处理，当重叠区域像素重叠度不大于设定的像素重叠度阈值时，对可嵌合衔接位置进行重叠度加深调整处理，重新识别重叠区域像素重叠度，至重叠区域像素重叠度大于设定的像素重叠度阈值时，调整处理完成；嵌合衔接后，生成完整还原第二帧视频帧图像；
还原视频帧图像模块，将传输的第三帧视频帧图像和第二帧视频帧图像不同像素区域的像素，与第二帧视频帧图像相同像素区域的像素进行嵌合，将第二、第三不同像素区域的像素嵌合到相同像素区域的像素中，并进行嵌合衔接图像处理，生成完整还原第三帧视频帧图像；按照步骤S201-S203，生成时间序列范围内的视频帧图像全部进行完整还原，从而生成完整还原的视频帧图像。
9.根据权利要求6所述的一种视频会议网络流量控制系统，其特征在于，所述视频会议还原播放模块，包括：
图像时间序列恢复模块，成原将完整还原的视频帧图像恢复成原时间序列排序值；
序列视频帧图像存储模块，将恢复成原时间序列排序值的完整还原的视频帧图像存储到视频会议播放端的存储器；
视频帧图像差补模块，视频会议播放端读取完整还原的视频帧图像，对时间序列排序值恢复缺失的图像根据其时间序列排序值前后还原的视频帧图像进行图像差补；
视频会议视频还原模块，将图像差补后的完整时间序列排序值视频帧图像，按照视频帧频率对原时间序列排序值的完整还原的视频帧图像进行播放，形成视频会议完整还原视频。
10.根据权利要求6所述的一种视频会议网络流量控制系统，其特征在于，所述电子白板录制播放模块，包括：
还原视频记录动作模块，根据视频会议完整还原视频，采集视频中的记录动作；
电子白板记录录制模块，基于电子白板按照记录动作及动作发生时间的方式记录屏幕录制；将视频中的记录动作，按照采集时间进行连贯一致性处理，去除掉设定记录位置区域范围以外的动作位置；
文本记录生成模块，对屏幕录制的记录进行处理和文本生成，形成文本记录；
记录压缩传输播放模块，对形成的文本记录通过zip压缩算法对文本记录进一步压缩存储，生成文本记录压缩存储文件；通过网络流量传输文本记录和压缩后的存储信息，并通过专用播放器进行回放及播放。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110291051.4A CN112954261B (zh) | 2021-03-18 | 2021-03-18 | 一种视频会议网络流量控制方法和系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110291051.4A CN112954261B (zh) | 2021-03-18 | 2021-03-18 | 一种视频会议网络流量控制方法和系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112954261A true CN112954261A (zh) | 2021-06-11 |
| CN112954261B CN112954261B (zh) | 2021-09-10 |
Family
ID=76228335
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110291051.4A Active CN112954261B (zh) | 2021-03-18 | 2021-03-18 | 一种视频会议网络流量控制方法和系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112954261B (zh) |
Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102104764A (zh) * | 2009-12-17 | 2011-06-22 | 于培宁 | 一种图像序列的压缩存储处理方法 |
| CN102246208A (zh) * | 2008-12-09 | 2011-11-16 | 皇家飞利浦电子股份有限公司 | 图像分割 |
| CN104639834A (zh) * | 2015-02-04 | 2015-05-20 | 惠州Tcl移动通信有限公司 | 一种摄像头图像数据传输的方法及系统 |
| CN104735449A (zh) * | 2015-02-27 | 2015-06-24 | 成都信息工程学院 | 一种基于矩形分割隔列扫描的图像传输方法及系统 |
| CN104869327A (zh) * | 2015-05-28 | 2015-08-26 | 惠州Tcl移动通信有限公司 | 一种高清显示屏的图像文件快速显示的方法及系统 |
| CN104917935A (zh) * | 2014-03-14 | 2015-09-16 | 欧姆龙株式会社 | 图像处理装置以及图像处理方法 |
| CN105744281A (zh) * | 2016-03-28 | 2016-07-06 | 飞依诺科技(苏州)有限公司 | 一种连续图像的处理方法及装置 |
| CN106851282A (zh) * | 2017-02-15 | 2017-06-13 | 福建时迅信息科技有限公司 | 一种vdi协议中减少视频图像编码数据量的方法和系统 |
| CN107231561A (zh) * | 2017-07-11 | 2017-10-03 | Tcl移动通信科技（宁波）有限公司 | 一种图像数据传输方法、移动终端及存储装置 |
| CN107492092A (zh) * | 2017-07-13 | 2017-12-19 | 青岛黄海学院 | 基于fcm算法融合改进gsa算法的医学图像分割方法 |
| US20180262759A1 (en) * | 2015-09-18 | 2018-09-13 | Sisvel Technology S.R.L. | Methods and apparatus for encoding and decoding digital images or video streams |
| CN108765429A (zh) * | 2018-05-18 | 2018-11-06 | 深圳智达机械技术有限公司 | 一种基于聚类分析的图像分割系统 |
| CN109218748A (zh) * | 2017-06-30 | 2019-01-15 | 京东方科技集团股份有限公司 | 视频传输方法、装置及计算机可读存储介质 |
| CN111124333A (zh) * | 2019-12-05 | 2020-05-08 | 视联动力信息技术股份有限公司 | 电子白板显示内容同步的方法、装置、设备以及存储介质 |
| CN111935454A (zh) * | 2020-07-27 | 2020-11-13 | 衡阳市大井医疗器械科技有限公司 | 省流量图像流传输方法及电子设备 |
-
2021
- 2021-03-18 CN CN202110291051.4A patent/CN112954261B/zh active Active
Patent Citations (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102246208A (zh) * | 2008-12-09 | 2011-11-16 | 皇家飞利浦电子股份有限公司 | 图像分割 |
| US20120257836A1 (en) * | 2009-12-17 | 2012-10-11 | Intellesys Co., Ltd. | Method for storing and processing image sequence and method for compressing, storing and processing image sequence |
| CN102104764A (zh) * | 2009-12-17 | 2011-06-22 | 于培宁 | 一种图像序列的压缩存储处理方法 |
| CN104917935A (zh) * | 2014-03-14 | 2015-09-16 | 欧姆龙株式会社 | 图像处理装置以及图像处理方法 |
| CN104639834A (zh) * | 2015-02-04 | 2015-05-20 | 惠州Tcl移动通信有限公司 | 一种摄像头图像数据传输的方法及系统 |
| CN104735449A (zh) * | 2015-02-27 | 2015-06-24 | 成都信息工程学院 | 一种基于矩形分割隔列扫描的图像传输方法及系统 |
| CN104869327A (zh) * | 2015-05-28 | 2015-08-26 | 惠州Tcl移动通信有限公司 | 一种高清显示屏的图像文件快速显示的方法及系统 |
| US20180262759A1 (en) * | 2015-09-18 | 2018-09-13 | Sisvel Technology S.R.L. | Methods and apparatus for encoding and decoding digital images or video streams |
| CN105744281A (zh) * | 2016-03-28 | 2016-07-06 | 飞依诺科技(苏州)有限公司 | 一种连续图像的处理方法及装置 |
| CN106851282A (zh) * | 2017-02-15 | 2017-06-13 | 福建时迅信息科技有限公司 | 一种vdi协议中减少视频图像编码数据量的方法和系统 |
| CN109218748A (zh) * | 2017-06-30 | 2019-01-15 | 京东方科技集团股份有限公司 | 视频传输方法、装置及计算机可读存储介质 |
| CN107231561A (zh) * | 2017-07-11 | 2017-10-03 | Tcl移动通信科技（宁波）有限公司 | 一种图像数据传输方法、移动终端及存储装置 |
| CN107492092A (zh) * | 2017-07-13 | 2017-12-19 | 青岛黄海学院 | 基于fcm算法融合改进gsa算法的医学图像分割方法 |
| CN108765429A (zh) * | 2018-05-18 | 2018-11-06 | 深圳智达机械技术有限公司 | 一种基于聚类分析的图像分割系统 |
| CN111124333A (zh) * | 2019-12-05 | 2020-05-08 | 视联动力信息技术股份有限公司 | 电子白板显示内容同步的方法、装置、设备以及存储介质 |
| CN111935454A (zh) * | 2020-07-27 | 2020-11-13 | 衡阳市大井医疗器械科技有限公司 | 省流量图像流传输方法及电子设备 |
Non-Patent Citations (3)
| Title |
|---|
| JIAN CAO等: "Study on Target Detection of Probability based on Pixels", 《2020 5TH INTERNATIONAL CONFERENCE ON INFORMATION SCIENCE, COMPUTER TECHNOLOGY AND TRANSPORTATION (ISCTT)》 * |
| 彭自立: "用于交互式图像分割的自适应表观分离", 《中国博士学位论文全文数据库(信息科技辑)》 * |
| 杨白: "基于超像素的目标协同分割与搜索", 《中国博士学位论文全文数据库(信息科技辑)》 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112954261B (zh) | 2021-09-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109145784B (zh) | 用于处理视频的方法和装置 | |
| CN102348115B (zh) | 一种去除视频中冗余图像的方法和装置 | |
| CN111402399B (zh) | 人脸驱动和直播方法、装置、电子设备及存储介质 | |
| CN102214304A (zh) | 信息处理设备、信息处理方法、和程序 | |
| CN1658663A (zh) | 用于对多个帧进行摘录的方法和设备 | |
| CN112672090B (zh) | 一种云视频会议中优化音视频效果的方法 | |
| US11836887B2 (en) | Video generation method and apparatus, and readable medium and electronic device | |
| CN110516598B (zh) | 用于生成图像的方法和装置 | |
| CN112861659A (zh) | 一种图像模型训练方法、装置及电子设备、存储介质 | |
| CN106454195A (zh) | 一种基于vr视频聊天防偷窥的方法及系统 | |
| CN112954261B (zh) | 一种视频会议网络流量控制方法和系统 | |
| Sharma et al. | Deep multimodal feature encoding for video ordering | |
| US20040036782A1 (en) | Video image enhancement method and apparatus | |
| US20210092403A1 (en) | Object manipulation video conference compression | |
| CN108391142B (zh) | 一种视频增强的方法及相关设备 | |
| CN102957913A (zh) | 图像编码设备、图像编码方法和程序 | |
| CN113365104B (zh) | 一种视频浓缩方法和装置 | |
| JP3859989B2 (ja) | 画像マッチング方法およびその方法を利用可能な画像処理方法と装置 | |
| CN112887666B (zh) | 视频处理方法和装置、网络摄像头和服务器及存储介质 | |
| CN106412663A (zh) | 直播方法、直播装置以及终端 | |
| CN114710474B (zh) | 一种基于物联网的数据流处理以及分类方法 | |
| US20220406339A1 (en) | Video information generation method, apparatus, and system and storage medium | |
| CN116320521A (zh) | 一种基于人工智能的三维动画直播方法及装置 | |
| JP3063739B2 (ja) | 逆テレシネ変換映像蓄積装置 | |
| CN113873247A (zh) | 一种数字视频数据编码及解码装置及方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |