CN105187883A - 一种数据处理方法和客户端设备 - Google Patents
一种数据处理方法和客户端设备 Download PDFInfo
- Publication number
- CN105187883A CN105187883A CN201510578262.0A CN201510578262A CN105187883A CN 105187883 A CN105187883 A CN 105187883A CN 201510578262 A CN201510578262 A CN 201510578262A CN 105187883 A CN105187883 A CN 105187883A
- Authority
- CN
- China
- Prior art keywords
- frame
- video data
- client device
- road video
- frame number
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 19
- 238000000034 method Methods 0.000 claims abstract description 80
- 230000005540 biological transmission Effects 0.000 claims abstract description 73
- 230000001360 synchronised effect Effects 0.000 claims description 62
- 239000000284 extract Substances 0.000 claims description 39
- 238000000605 extraction Methods 0.000 claims description 34
- 241001269238 Data Species 0.000 description 8
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000001788 irregular Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明实施例公开了一种数据处理方法和客户端设备，用于自动快速准确的确定多路实时视频传输同步过程中各路视频数据的传输状态，为用户快速得到同步故障的具体原因提供支持。本发明实施例方法包括：接收服务器发送的N路视频数据，其中，所述服务器发送每路视频数据之前，在每路视频数据的每个帧中嵌入有以预置循环数值M为循环的帧序号，对于一路视频数据，按照所述M循环计数，在当前循环中提取该路视频数据的M个帧，从提取出的该路视频数据的M个帧中，提取该M个帧的帧序号，提取出的该M个帧的帧序号，确定该路视频数据的传输状态。
Description
技术领域
本发明涉及多路实时视频数据处理领域，尤其涉及一种数据处理方法和客户端设备。
背景技术
多路实时视频的传输和同步性问题一直是业界控制的难点，特别是多路高清网络视频信号的传输和接收同步处理。
目前对多路实时视频做同步的处理方法多为，服务器在多路视频信号帧特定位置分别嵌入连续的帧同步序号，例如若以循环参数5为帧序号循环，分别在第一帧至第五帧的特定位置分别嵌入帧序号1至5，在第六帧至第十帧的特定位置循环再次嵌入帧序号1至5，以此类推。客户端接收来自服务器的各路视频数据，提取各帧的帧同步序号，将提取帧同步序号后的帧放入各路视频对应的存储队列缓存；轮循检查各路视频帧同步序号，根据帧同步序号读取存储队列缓存的信号进行播放，可以理解的是，不同步误差均在循环参数个帧以内。
然而在实际应用中，直接对接收到的各路视频信号作同步处理，可能出现最终播放的效果并不理想，又由于同步处理的实时视频是多路，用户难以确定同步故障的具体原因。
发明内容
本发明实施例提供了一种数据处理方法和客户端设备，用于自动快速准确的确定多路实时视频传输同步过程中各路视频数据的传输状态，为用户快速得到同步故障的具体原因提供支持。
一种数据处理方法，应用于多路实时视频的传输场景，包括：
客户端设备接收服务器发送的N路视频数据，其中，所述服务器发送每路视频数据之前，在每路视频数据的每个帧中嵌入有以预置循环数值M为循环的帧序号，各帧中的帧序号与相邻帧的帧序号连续；
对于一路视频数据，所述客户端设备按照所述M循环计数，在当前循环中提取该路视频数据的M个帧；
所述客户端设备从提取出的该路视频数据的M个帧中，提取所述M个帧的帧序号；
所述客户端设备根据提取出的所述M个帧的帧序号，确定该路视频数据的传输状态。
一种客户端设备，包括：
接收模块，用于接收服务器发送的N路视频数据，其中，所述服务器发送每路视频数据之前，在每路视频数据的每个帧中嵌入有以预置循环数值M为循环的帧序号，各帧中的帧序号与相邻帧的帧序号连续；
第一帧提取模块，用于对于一路视频数据，按照所述M循环计数，在当前循环中提取该路视频数据的M个帧；
序号提取模块，用于从所述第一帧提取模块提取出的该路视频数据的M个帧中，提取所述M个帧的帧序号；
传输状态确定模块，用于根据所述序号提取模块提取出的所述M个帧的帧序号，确定该路视频数据的传输状态。
从以上技术方案可以看出，本发明实施例具有以下优点：本发明实施例中，客户端设备按照预置循环数值M循环提取视频数据中的M个帧，并提取出这M个帧的帧序号，根据这M个帧的帧序号，确定该路视频数据的传输状态，可以理解的是，若提取出的M个帧的帧序号排布不规律，例如存在很多相同的帧序号，或者相邻帧的帧序号不连续等，则可以确定该路视频数据传输故障，会直接影响到同步处理后的该N路同步视频数据的播放效果，因此，根据从各路视频数据的M个帧中提取出的帧序号确定各路视频数据的传输状态，实现了自动快速准确的确定多路实时视频传输同步过程中各路视频数据的传输状态的目的，为用户快速得到同步故障的具体原因提供了支持。
附图说明
图1为本发明实施例中数据处理方法一个流程示意图；
图2为本发明实施例中数据处理方法另一个流程示意图；
图3为本发明实施例中客户端设备一个结构示意图；
图4为本发明实施例中客户端设备另一个结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例的数据处理方法应用于多路实时视频的传输场景，可以理解的是，传输多路视频给客户端设备的可以是多个服务器，也可以是一个服务器，此处不作限定。可以理解的是，在服务器发送多路视频数据给客户端设备之前，服务器会按照预置循环数值M为循环，按照正确的同步顺序，分别在多路视频数据的各路视频数据中嵌入连续的帧序号。例如，若有两路视频数据，以5为循环，服务器在第一路视频数据中的1到5帧分别嵌入帧序号1至5，在第二路视频数据中相应的5帧中也分别嵌入帧序号1至5；在第一路视频数据的6到10帧再次分别嵌入帧序号为1至5，在第二路视频数据中相应的5帧中也再次分别嵌入帧序号1至5，依次类推。可以理解的是，预置循环数值M的取值可以根据实际应用情况而定，此处不作限定。
需要说明的是，在本发明实施例中，各路视频数据同步误差的幅度不会超出该预置循环数值M个帧的范围。例如，在第一路视频数据的第二个帧序号循环中的帧序号为1的帧发送到客户端设备时，第二路视频数据发送到客户端设备的帧的范围只能在第一个帧序号循环中的帧序号为2的帧到第二个帧序号循环中帧序号为5的帧之间。在实际应用中，可以通过对M值的设定来确保这一点，也可以通过其他方式控制，此处不作限定。
请参阅图1，本发明实施例中数据处理方法一个实施例包括：
101、客户端设备接收服务器发送的N路视频数据，其中，所述服务器发送每路视频数据之前，在每路视频数据的每个帧中嵌入有以预置循环数值M为循环的帧序号，各帧中的帧序号与相邻帧的帧序号连续；
客户端设备接收服务器发送的N路视频数据，可以理解的是，实时视频的帧是连续不断的，按照预置循环数值M为循环，服务器会依次在每个帧中嵌入一个帧序号，最终按照各个帧的顺序形成多个帧序号循环，每个循环中有分别对应M个帧的M个帧序号，各帧的帧序号与相邻帧的帧序号连续。
可以理解的是，在帧中嵌入帧序号的位置可以有很多种，可以根据实际情况选择，此处不作限定。例如可以为每个帧中的第一个像素点，也可以为每个帧中最后一个像素点，还可以为每个帧中预先选定位置的一个或多个像素点，此处不作限定。
102、对于一路视频数据，所述客户端设备按照所述M循环计数，在当前循环中提取该路视频数据的M个帧；
可以理解的是，该一路视频可以为N路视频数据中的任一路视频数据，也可以为按照设定的规则选定的某些特定路的视频数据，此处不作限定。
对于一路视频数据中的帧，按照M循环计数，每当完成一个循环时，该循环即为当前循环，在该当前循环中提取该路视频数据的M个帧。
可以理解的是，对于完成的每个循环，都可以执行步骤102至104，此处不作限定。
103、所述客户端设备从提取出的该路视频数据的M个帧中，提取所述M个帧的帧序号；
由于各个帧中都嵌入有帧序号，客户端设备从提取出的该路视频数据的M个帧中，提取该M个帧的帧序号。
104、所述客户端设备根据提取出的所述M个帧的帧序号，确定该路视频数据的传输状态。
该客户端设备根据提取出的M个帧的帧序号，确定该路视频数据的传输状态。
本发明实施例中，客户端设备按照预置循环数值M循环提取视频数据中的M个帧，并提取出这M个帧的帧序号，根据这M个帧的帧序号，确定该路视频数据的传输状态，可以理解的是，若提取出的M个帧的帧序号排布不规律，例如存在很多相同的帧序号，或者相邻帧的帧序号不连续等，则可以确定该路视频数据传输故障，会直接影响到同步处理后的该N路同步视频数据的播放效果，因此，根据从各路视频数据的M个帧中提取出的帧序号确定各路视频数据的传输状态，实现了自动快速准确的确定多路实时视频传输同步过程中各路视频数据的传输状态的目的，为用户快速得到同步故障的具体原因提供了支持。
上面实施例中，根据提取出的M个帧的帧序号，确定该路视频数据的传输状态，在实际应用中，可以采用计数器对每个不规律的点进行计数，达到预置数值才确定传输故障；进一步的，在实际应用中，还可以根据各路视频数据的帧中的帧序号对同步处理后的同步状态进行判定，下面对本发明实施例中的数据处理方法进行具体描述，请参阅图2，本发明实施例中数据处理方法另一个实施例包括：
201、客户端设备接收服务器发送的N路视频数据，其中，所述服务器发送每路视频数据之前，在每路视频数据的每个帧中嵌入有以预置循环数值M为循环的帧序号，各帧中的帧序号与相邻帧的帧序号连续；
202、对于一路视频数据，所述客户端设备按照所述M循环计数，在当前循环中提取该路视频数据的M个帧；
203、所述客户端设备从提取出的该路视频数据的M个帧中，提取所述M个帧的帧序号；
步骤201至203与步骤101至103类似，此处不作赘述。
204、所述客户端设备根据提取出的所述M个帧的帧序号，确定该路视频数据的传输状态；
该客户端设备根据提取出的M个帧的帧序号，确定该路视频数据的传输状态。
可以理解的是，根据M个帧的帧序号，确定该路视频数据的传输状态的具体方式有很多种：
可选的，其中一种方式可以为：
在该M个帧中，每当确定一组相邻帧的帧序号相同时，表示存在一个重复帧，第一累加计数器加1，其中一组相邻帧表示两个相邻的帧；
在该M个帧中，每当确定一组相邻帧中前一个帧的帧序号按照M进制加1不等于后一个帧的帧序号时，表示存在丢帧，该第一累加计数器加1；例如，若M为5，两个相邻的帧中，前一个帧中帧序号为3，后一个帧中帧序号为5，前一个帧的帧序号3加1为4，不等于5，则表示存在丢帧，该第一累加计数器加1；若前一个帧中帧序号为5，后一个帧中帧序号为1，前一个帧的帧序号5加1按照5进制为1，等于后一个帧中的帧序号1，则表示帧序号连续。
当该第一累加计数器的数值超出第一预置数值时，该客户端设备确定该路视频数据的传输故障；
该M个帧检测完成，第一累加计数器的数值都不超过该第一预置数值时，该客户端设备可以确定该路视频数据的传输正常。
可选的，还可以对确定一组相邻帧的帧序号相同时的情况和确定一组相邻帧中前一个帧的帧序号按照M进制加1不等于后一个帧的帧序号时的情况分别采用计数器累加，当两个计数器中任一个超出则两个计数器相应的预置数值时，表示该路视频数据的传输故障，否则，表示传输正常。
以上仅仅是两个具体方式的举例，在实际应用中，还可以有其他的根据帧序号确定该路视频数据的传输状态的具体方式，此处不作限定。
可以理解的是，在实际应用中，在步骤204之前，可以对该第一累加计数器进行清零处理，以防该第一累加计数器溢出。
205、所述客户端设备对所述N路视频数据进行同步处理；
本步骤中，具体对N路视频数据同步处理的过程与现有技术类似，包括将提取帧序号后的帧放入各路视频数据对应的存储队列缓存，轮循检查各路视频中帧的帧序号，读取各路视频数据对应的存储队列中帧序号相同的帧进行播放，具体过程此处不作赘述。
206、所述客户端设备按照第二预置数值P循环计数，同时从同步处理后的每路视频数据中提取P个帧，得到N个帧集合，每个帧集合中包含从同步处理后的一路视频数据中提取的P个帧，每个帧集合中的帧按提取顺序排列；
可以理解的是，同步处理后，在同一时刻每路视频数据输出的帧中的帧序号应该完全相同。该客户端设备按照第二预置数值P循环计数，同时从同步处理后每一路视频数据中提取P个帧，得到N个帧集合，每个帧集合中包含从同步处理后的一路视频数据中提取的P个帧，每个帧集合在那个的帧按照提取顺序排列。
可以理解的是，该第二预置数值P可以根据实际应用情况预先设定，也可以按照预置规则运算产生，还可以随机产生等，此处不作限定。
需要说明的是，按照第二预置数值P循环计数，表示提取P个帧并执行后续步骤后，还可以再次提取P个帧并再次执行后续步骤，依此循环。
207、所述客户端设备根据在N个帧集合的各个帧集合之间，各排列位置相同的帧的帧序号是否相等，确定所述N路视频数据的同步状态。
每个帧中都嵌入有帧序号，客户端设备得到N个帧集合后，可以根据该N个帧集合的各个帧集合之间，各排列位置相同的帧的帧序号是否全部相等，确定该N路视频数据的同步状态。
例如，对于从2路视频数据中提取的2个帧集合，若P值为7，M值为5：
帧集合1：{Q1，Q2，Q3，Q4，Q5，Q6，Q7}，帧序号依次为：3、4、5、1、2、3、5；
帧集合2：{K1，K2，K3，K4，K5，K6，K7}，帧序号依次为：3、4、4、1、2、3、4；
Q1与K1即为位于相同排列位置的帧，该相同排列位置的帧的帧序号相等；Q7与K7也为位于相同排列位置的帧，该相同排列位置的帧的帧序号不相等。
若排列位置相同的帧的帧序号不相等，则表示同步状态有误差。
在实际应用中，根据各排列位置相同的帧的帧序号是否相等，确定所述N路视频数据的同步状态的具体方式可以有很多种：
可选的，其中一种方式可以为：
客户端设备依次确定该N个帧集合中每个排列位置的N个帧的帧序号是否全部相等；
每当存在一个排列位置的N个帧的帧序号不全部相等，该客户端设备中的第二累加计数器加1；
当该第二累加计数器的数值超出第二预置数值时，该客户端设备确定同步处理后的N路视频数据不同步。
可选的，在实际应用中，也可以每当存在一路视频数据中一个排列位置的帧的帧序号与其他路视频数据中相同排列位置的帧的帧序号不相等时，客户端设备中的计数器加1，当该计数器超出相应的预置数值时，确定同步处理后的N路视频数据不同步。
还可以有其他的根据帧序号确定同步状态的具体执行方式，此处不作限定。
需要说明的是，步骤205至207可以在步骤201之后的任一个时机执行，此处不作限定。在实际应用中，根据需要，步骤206和207也可以不存在，此处不作限定。
可选的，在步骤207之前，客户端设备也可以对该第二累加计数器作清零处理，以防该第二累加计数器溢出。
本发明实施例中，能对同步处理后的N路视频数据进行检测，分别从N同步处理后的N路视频数据中提取P个帧，组成N个帧集合，根据该N个帧集合中相同排列位置的帧的帧序号是否相同，对该N路视频数据的同步状态进行判定，实现了对多路视频传输同步处理的智能化检测，能向用户实时提供传输和同步状态。
为便于理解，下面以一具体应用场景对本发明实施例中数据处理方法进行具体描述：
服务器以4为循环，对3路视频数据的帧进行循环计数，并嵌入帧序号，以处理过的前10个帧为例，分别为：
第一路视频数据：{X1，X2，X3，X4，X5，X6，X7，X8，X9，X10}，嵌入的帧序号依次为：2、3、4、1、2、3、4、1、2、3；
第二路视频数据：{Y1，Y2，Y3，Y4，Y5，Y6，Y7，Y8，Y9，Y10}，嵌入的帧序号依次为：3、4、1、2、3、4、1、2、3、4；
第三路视频数据：{Z1，Z2，Z3，Z4，Z5，Z6，Z7，Z8，Z9，Z10}，嵌入的帧序号依次为：1、2、3、4、1、2、3、4、1、2；
可以看到，同步处理之前，3路视频数据有两个帧范围内的不同步，例如，当第一路视频数据播放X1帧(帧序号为2)时，第二路视频数据播放Y1帧(帧序号为3)，第二路视频数据比第一路视频数据超前一个帧；
服务器设备将嵌入帧序号完成的该3路视频数据传输给客户端设备；
客户端设备接收服务器发送的这3路视频数据；
对于其中的任一路视频数据，此处以第一路视频数据为例，客户端设备按照M循环计数，在当前循环提取该路视频数据的M个帧：
例如，若以传输帧X3到客户端设备时作为当前循环的开始，提取出的M个帧应该为：{X3，X4，X5，X6}，嵌入的帧序号应该依次为：4、1、2、3；然而在实际传输过程中可能出现误差，实际提取出的M个帧为{X3，X4，X4，X6，X7}；
客户端设备从提取出的该第一路视频数据的M个帧中，提取M个帧的帧序号依次为：4、1、1、3；
客户端设备确定存在一组相邻帧的帧序号相同：1、1，第一累加计数器加1；且存在一组相邻帧中前一个帧的帧序号按照M进制加1不等于后一个帧的帧序号：1、3，第一累加计数器再加1；
第一累加计数器的数值2超出了第一预置数值1，该客户端设备确定该第一路视频数据传输故障，客户端设备可以将该故障信息通知用户或存储在该客户端设备中。可以理解的是，此处仅仅作为举例，用来描述该数据处理方法的过程，在实际应用中，该M值、该第一预置数值均可以根据实际情况设定；
客户端设备对接收到的3路视频数据进行同步处理，得到的其中八个帧应该为：
第一路视频数据：{X2，X3，X4，X5，X6，X7，X8，X9}，嵌入的帧序号依次为：3、4、1、2、3、4、1、2；
第二路视频数据：{Y1，Y2，Y3，Y4，Y5，Y6，Y7，Y8}，嵌入的帧序号依次为：3、4、1、2、3、4、1、2；
第三路视频数据：{Z3，Z4，Z5，Z6，Z7，Z8，Z9，Z10}，嵌入的帧序号依次为：3、4、1、2、3、4、1、2；
在实际应用中，由于传输过程和同步处理过程中可能出现误差，若第二预置数值P为6，从第二路视频的Y2帧同步处理完成开始提取，得到的3个帧集合为：
第一路视频数据对应的帧集合：{X3，X4，X4，X6，X7，X8}，嵌入的帧序号依次为：4、1、1、3、4、1；
第二路视频数据：{Y2，Y3，Y4，Y5，Y3，Y7}，嵌入的帧序号依次为：4、1、2、3、1、1；
第三路视频数据：{Z5，Z5，Z6，Z7，Z8，Z9}，嵌入的帧序号依次为：1、1、2、3、4、1；
客户端设备依次确定每个排列位置的3个帧的帧序号是否全部相等，得到：第一个排列位置为4、4、1，不全部相等，第二累加计数器加1；第二个排列位置为1、1、1，全部相等；第三个排列位置为1、2、2，不全部相等，第二累加计数器加1；第四个排列位置为3、3、3，全部相等，第四个排列位置为4、1、4，不全部相等，第二累加计数器加1，第五个排列位置为1、1、1，全部相等；
第二累加计数器的数值3超出第二预置数值2，该客户端设备确定同步处理后的N路视频数据不同步，客户端设备可以将该不同步信息通知用户或存储在该客户端设备中。可以理解的是，此处仅仅作为举例，用来描述该数据处理方法的过程，在实际应用中，该P值、该第二预置数值均可以根据实际情况设定。
下面对本发明实施例中的客户端设备进行描述：
请参阅图3，本发明实施例中客户端设备一个实施例包括：
接收模块301，用于接收服务器发送的N路视频数据，其中，所述服务器发送每路视频数据之前，在每路视频数据的每个帧中嵌入有以预置循环数值M为循环的帧序号，各帧中的帧序号与相邻帧的帧序号连续；
第一帧提取模块302，用于对于一路视频数据，按照所述M循环计数，在当前循环中提取该路视频数据的M个帧；
序号提取模块303，用于从所述第一帧提取模块302提取出的该路视频数据的M个帧中，提取所述M个帧的帧序号；
传输状态确定模块304，用于根据所述序号提取模块303提取出的所述M个帧的帧序号，确定该路视频数据的传输状态。
本发明实施例中，第一帧提取模块302按照预置循环数值M循环提取视频数据中的M个帧，序号提取模块303提取出这M个帧的帧序号，传输状态确定模块304根据这M个帧的帧序号，确定该路视频数据的传输状态，可以理解的是，若提取出的M个帧的帧序号排布不规律，例如存在很多相同的帧序号，或者相邻帧的帧序号不连续等，则可以确定该路视频数据传输故障，会直接影响到同步处理后的该N路同步视频数据的播放效果，因此，根据从各路视频数据的M个帧中提取出的帧序号确定各路视频数据的传输状态，实现了自动快速准确的确定多路实时视频传输同步过程中各路视频数据的传输状态的目的，为用户快速得到同步故障的具体原因提供了支持。
上面实施例中，传输状态确定模块304根据提取出的M个帧的帧序号，确定该路视频数据的传输状态，在实际应用中，传输状态确定模块304可以采用计数器对每个不规律的点进行计数，达到预置数值才确定传输故障；进一步的，在实际应用中，客户端设备还可以根据各路视频数据的帧中的帧序号对同步处理后的同步状态进行判定，下面对本发明实施例中的客户端设备进行具体描述，请参阅图4，本发明实施例中客户端设备另一个实施例包括：
接收模块401，用于接收服务器发送的N路视频数据，其中，所述服务器发送每路视频数据之前，在每路视频数据的每个帧中嵌入有以预置循环数值M为循环的帧序号，各帧中的帧序号与相邻帧的帧序号连续；
第一帧提取模块402，用于对于一路视频数据，按照所述M循环计数，在当前循环中提取该路视频数据的M个帧；
序号提取模块403，用于从所述第一帧提取模块402提取出的该路视频数据的M个帧中，提取所述M个帧的帧序号；
传输状态确定模块404，用于根据所述序号提取模块403提取出的所述M个帧的帧序号，确定该路视频数据的传输状态；
本实施例中，该传输状态确定模块404具体可以包括：
第一累加单元4041，用于在所述M个帧中，每当确定一组相邻帧的帧序号相同时，控制第一累加计数器加1，其中，所述一组相邻帧表示两个相邻的帧；
第二累加单元4042，用于在所述M个帧中，每当确定一组相邻帧中前一个帧的帧序号按照M进制加1不等于后一个帧的帧序号时，控制所述第一累加计数器加1；
第一确定单元4043，用于当所述第一累加计数器的数值超出第一预置数值时，确定该路视频数据的传输故障；
可选的，作为本发明实施例中客户端设备另一个实施例，该客户端设备还可以包括：
同步处理模块405，用于在所述接收模块401接收服务器发送的N路视频数据后，对所述N路视频数据进行同步处理；
第二帧提取模块406，用于按照第二预置数值P循环计数，同时从所述同步处理模块405同步处理后的每路视频数据中提取P个帧，得到N个帧集合，每个帧集合中包含从同步处理后的一路视频数据中提取的P个帧，每个帧集合中的帧按提取顺序排列；
同步状态确定模块407，用于根据在所述N个帧集合的各个帧集合之间，各排列位置相同的帧的帧序号是否相等，确定所述N路视频数据的同步状态；
可选的，该同步状态确定模块407具体可以包括：
第二确定单元4071，用于依次确定所述N个帧集合的每个排列位置的N个帧的帧序号是否全部相等；
第三累加单元4072，用于每当存在一个排列位置的N个帧的帧序号不全部相等时，控制第二累加计数器加1；
第三确定单元4073，用于当所述第二累加计数器的数值超出第二预置数值时，确定同步处理后的N路视频数据不同步；
可选的，该客户端设备还可以包括：
第一清零模块408，用于在触发所述传输状态确定模块404之前，对所述第一累加计数器作清零处理；
第二清零模块409，用于在触发所述第二确定单元4071之前，对所述第二累加计数器作清零处理。
本发明实施例中，能对同步处理后的N路视频数据进行检测，第二帧提取模块406分别从N同步处理后的N路视频数据中提取P个帧，组成N个帧集合，同步状态确定模块407根据该N个帧集合中相同排列位置的帧的帧序号是否相同，对该N路视频数据的同步状态进行判定，实现了对多路视频传输同步处理的智能化检测，能向用户实时提供传输和同步状态。
为了便于理解上述实施例，下面以上述客户端设备各个模块在一个具体应用场景中的交互过程进行说明：
服务器以4为循环，对3路视频数据的帧进行循环计数，并嵌入帧序号，以处理过的前10个帧为例，分别为：
第一路视频数据：{X1，X2，X3，X4，X5，X6，X7，X8，X9，X10}，嵌入的帧序号依次为：2、3、4、1、2、3、4、1、2、3；
第二路视频数据：{Y1，Y2，Y3，Y4，Y5，Y6，Y7，Y8，Y9，Y10}，嵌入的帧序号依次为：3、4、1、2、3、4、1、2、3、4；
第三路视频数据：{Z1，Z2，Z3，Z4，Z5，Z6，Z7，Z8，Z9，Z10}，嵌入的帧序号依次为：1、2、3、4、1、2、3、4、1、2；
可以看到，同步处理之前，3路视频数据有两个帧范围内的不同步，例如，当第一路视频数据播放X1帧(帧序号为2)时，第二路视频数据播放Y1帧(帧序号为3)，第二路视频数据比第一路视频数据超前一个帧；
服务器设备将嵌入帧序号完成的该3路视频数据传输给客户端设备；
接收模块401接收服务器发送的这3路视频数据；
对于其中的任一路视频数据，此处以第一路视频数据为例，第一帧提取模块402按照M循环计数，在当前循环提取该路视频数据的M个帧：
例如，若以传输帧X3到客户端设备时作为当前循环的开始，提取出的M个帧应该为：{X3，X4，X5，X6}，嵌入的帧序号应该依次为：4、1、2、3；然而在实际传输过程中可能出现误差，实际第一帧提取模块402提取出的M个帧为{X3，X4，X4，X6，X7}；
序号提取模块403从提取出的该第一路视频数据的M个帧中，提取M个帧的帧序号依次为：4、1、1、3；
第一累加单元4041确定存在一组相邻帧的帧序号相同：1、1，控制第一累加计数器加1；且第二累加单元4042确定存在一组相邻帧中前一个帧的帧序号按照M进制加1不等于后一个帧的帧序号：1、3，控制第一累加计数器再加1；
第一累加计数器的数值2超出了第一预置数值1，第一确定单元4043确定该第一路视频数据传输故障，客户端设备可以将该故障信息通知用户或存储在该客户端设备中。可以理解的是，此处仅仅作为举例，用来描述该数据处理方法的过程，在实际应用中，该M值、该第一预置数值均可以根据实际情况设定；
同步处理模块405对接收到的3路视频数据进行同步处理，得到的其中八个帧应该为：
第一路视频数据：{X2，X3，X4，X5，X6，X7，X8，X9}，嵌入的帧序号依次为：3、4、1、2、3、4、1、2；
第二路视频数据：{Y1，Y2，Y3，Y4，Y5，Y6，Y7，Y8}，嵌入的帧序号依次为：3、4、1、2、3、4、1、2；
第三路视频数据：{Z3，Z4，Z5，Z6，Z7，Z8，Z9，Z10}，嵌入的帧序号依次为：3、4、1、2、3、4、1、2；
在实际应用中，由于传输过程和同步处理过程中可能出现误差，若第二预置数值P为6，从第二路视频的Y2帧同步处理完成开始提取，第二帧提取模块406得到的3个帧集合为：
第一路视频数据对应的帧集合：{X3，X4，X4，X6，X7，X8}，嵌入的帧序号依次为：4、1、1、3、4、1；
第二路视频数据：{Y2，Y3，Y4，Y5，Y3，Y7}，嵌入的帧序号依次为：4、1、2、3、1、1；
第三路视频数据：{Z5，Z5，Z6，Z7，Z8，Z9}，嵌入的帧序号依次为：1、1、2、3、4、1；
第二确定单元4071依次确定每个排列位置的3个帧的帧序号是否全部相等，得到：第一个排列位置为4、4、1，不全部相等，第三累加单元4072控制第二累加计数器加1；第二个排列位置为1、1、1，全部相等；第三个排列位置为1、2、2，不全部相等，第三累加单元4072控制第二累加计数器加1；第四个排列位置为3、3、3，全部相等，第四个排列位置为4、1、4，不全部相等，第三累加单元4072控制第二累加计数器加1，第五个排列位置为1、1、1，全部相等；
第二累加计数器的数值3超出第二预置数值2，第三确定单元4073确定同步处理后的N路视频数据不同步，客户端设备可以将该不同步信息通知用户或存储在该客户端设备中。可以理解的是，此处仅仅作为举例，用来描述该数据处理方法的过程，在实际应用中，该P值、该第二预置数值均可以根据实际情况设定。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，RandomAccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种数据处理方法，应用于多路实时视频的传输场景，其特征在于，包括：
客户端设备接收服务器发送的N路视频数据，其中，所述服务器发送每路视频数据之前，在每路视频数据的每个帧中嵌入有以预置循环数值M为循环的帧序号，各帧中的帧序号与相邻帧的帧序号连续；
对于一路视频数据，所述客户端设备按照所述M循环计数，在当前循环中提取该路视频数据的M个帧；
所述客户端设备从提取出的该路视频数据的M个帧中，提取所述M个帧的帧序号；
所述客户端设备根据提取出的所述M个帧的帧序号，确定该路视频数据的传输状态。
2.根据权利要求1所述的方法，其特征在于，所述客户端设备根据提取出的所述M个帧的帧序号，确定该路视频数据的传输状态，具体包括：
在所述M个帧中，每当确定一组相邻帧的帧序号相同时，客户端设备中的第一累加计数器加1，其中，所述一组相邻帧表示两个相邻的帧；
在所述M个帧中，每当确定一组相邻帧中前一个帧的帧序号按照M进制加1不等于后一个帧的帧序号时，所述第一累加计数器加1；
当所述第一累加计数器的数值超出第一预置数值时，所述客户端设备确定该路视频数据的传输故障。
3.根据权利要求2所述的方法，其特征在于，所述客户端设备接收服务器发送的N路视频数据的步骤之后，还包括：
所述客户端设备对所述N路视频数据进行同步处理；
所述客户端设备按照第二预置数值P循环计数，同时从同步处理后的每路视频数据中提取P个帧，得到N个帧集合，每个帧集合中包含从同步处理后的一路视频数据中提取的P个帧，每个帧集合中的帧按提取顺序排列；
所述客户端设备根据在所述N个帧集合的各个帧集合之间，各排列位置相同的帧的帧序号是否相等，确定所述N路视频数据的同步状态。
4.根据权利要求3所述的方法，其特征在于，所述客户端设备根据在N个帧集合的各个帧集合之间，各排列位置相同的帧的帧序号是否全部相等，确定所述N路视频数据的同步状态，具体包括：
所述客户端设备依次确定所述N个帧集合的每个排列位置的N个帧的帧序号是否全部相等；
每当存在一个排列位置的N个帧的帧序号不全部相等时，所述客户端设备中的第二累加计数器加1；
当所述第二累加计数器的数值超出第二预置数值时，所述客户端设备确定同步处理后的N路视频数据不同步。
5.根据权利要求4所述的方法，其特征在于，所述客户端设备根据提取出的所述M个帧的帧序号，确定该路视频数据的传输状态的步骤之前还包括：
所述客户端设备对所述第一累加计数器作清零处理；
所述客户端设备依次确定所述N个帧集合的每个排列位置的N个帧的帧序号是否全部相等的步骤之前还包括：
所述客户端设备对所述第二累加计数器作清零处理。
6.一种客户端设备，其特征在于，包括：
接收模块，用于接收服务器发送的N路视频数据，其中，所述服务器发送每路视频数据之前，在每路视频数据的每个帧中嵌入有以预置循环数值M为循环的帧序号，各帧中的帧序号与相邻帧的帧序号连续；
第一帧提取模块，用于对于一路视频数据，按照所述M循环计数，在当前循环中提取该路视频数据的M个帧；
序号提取模块，用于从所述第一帧提取模块提取出的该路视频数据的M个帧中，提取所述M个帧的帧序号；
传输状态确定模块，用于根据所述序号提取模块提取出的所述M个帧的帧序号，确定该路视频数据的传输状态。
7.根据权利要求6所述的客户端设备，其特征在于，所述传输状态确定模块具体包括：
第一累加单元，用于在所述M个帧中，每当确定一组相邻帧的帧序号相同时，控制第一累加计数器加1，其中，所述一组相邻帧表示两个相邻的帧；
第二累加单元，用于在所述M个帧中，每当确定一组相邻帧中前一个帧的帧序号按照M进制加1不等于后一个帧的帧序号时，控制所述第一累加计数器加1；
第一确定单元，用于当所述第一累加计数器的数值超出第一预置数值时，确定该路视频数据的传输故障。
8.根据权利要求7所述的客户端设备，其特征在于，所述客户端设备还包括：
同步处理模块，用于在所述接收模块接收服务器发送的N路视频数据后，对所述N路视频数据进行同步处理；
第二帧提取模块，用于按照第二预置数值P循环计数，同时从所述同步处理模块同步处理后的每路视频数据中提取P个帧，得到N个帧集合，每个帧集合中包含从同步处理后的一路视频数据中提取的P个帧，每个帧集合中的帧按提取顺序排列；
同步状态确定模块，用于根据在所述N个帧集合的各个帧集合之间，各排列位置相同的帧的帧序号是否相等，确定所述N路视频数据的同步状态。
9.根据权利要求8所述的客户端设备，其特征在于，所述同步状态确定模块具体包括：
第二确定单元，用于依次确定所述N个帧集合的每个排列位置的N个帧的帧序号是否全部相等；
第三累加单元，用于每当存在一个排列位置的N个帧的帧序号不全部相等时，控制第二累加计数器加1；
第三确定单元，用于当所述第二累加计数器的数值超出第二预置数值时，确定同步处理后的N路视频数据不同步。
10.根据权利要求9所述的客户端设备，其特征在于，所述客户端设备还包括：
第一清零模块，用于在触发所述传输状态确定模块之前，对所述第一累加计数器作清零处理；
第二清零模块，用于在触发所述第二确定单元之前，对所述第二累加计数器作清零处理。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510578262.0A CN105187883B (zh) | 2015-09-11 | 2015-09-11 | 一种数据处理方法和客户端设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510578262.0A CN105187883B (zh) | 2015-09-11 | 2015-09-11 | 一种数据处理方法和客户端设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN105187883A true CN105187883A (zh) | 2015-12-23 |
| CN105187883B CN105187883B (zh) | 2018-05-29 |
Family
ID=54909682
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510578262.0A Active CN105187883B (zh) | 2015-09-11 | 2015-09-11 | 一种数据处理方法和客户端设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105187883B (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105898507A (zh) * | 2016-05-30 | 2016-08-24 | 广东威创视讯科技股份有限公司 | 一种视频信号同步方法及装置 |
| CN110740251A (zh) * | 2018-07-20 | 2020-01-31 | 杭州海康机器人技术有限公司 | 一种多相机同步取流方法、装置及系统 |
| CN112738009A (zh) * | 2019-10-28 | 2021-04-30 | 阿里巴巴集团控股有限公司 | 数据同步方法、设备、同步系统、介质和服务器 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007148419A1 (ja) * | 2006-06-21 | 2007-12-27 | Fujitsu Limited | 映像データ送信装置、映像データ受信装置および映像データ伝送システム |
| CN102231863A (zh) * | 2011-06-02 | 2011-11-02 | 南京中兴力维软件有限公司 | 一种多通道视频流的传输方法及系统 |
| CN102364952A (zh) * | 2011-10-25 | 2012-02-29 | 浙江万朋网络技术有限公司 | 一种多路音视频同时播放时处理音视频同步的方法 |
| CN103699886A (zh) * | 2013-12-19 | 2014-04-02 | 北京航天测控技术有限公司 | 一种视频实时比对方法 |
| CN103702013A (zh) * | 2013-11-28 | 2014-04-02 | 北京航空航天大学 | 一种用于多路实时视频的帧同步方法 |
| CN104734884A (zh) * | 2015-02-09 | 2015-06-24 | 南京南瑞继保电气有限公司 | 一种goose通信方法及装置 |
-
2015
- 2015-09-11 CN CN201510578262.0A patent/CN105187883B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007148419A1 (ja) * | 2006-06-21 | 2007-12-27 | Fujitsu Limited | 映像データ送信装置、映像データ受信装置および映像データ伝送システム |
| CN102231863A (zh) * | 2011-06-02 | 2011-11-02 | 南京中兴力维软件有限公司 | 一种多通道视频流的传输方法及系统 |
| CN102364952A (zh) * | 2011-10-25 | 2012-02-29 | 浙江万朋网络技术有限公司 | 一种多路音视频同时播放时处理音视频同步的方法 |
| CN103702013A (zh) * | 2013-11-28 | 2014-04-02 | 北京航空航天大学 | 一种用于多路实时视频的帧同步方法 |
| CN103699886A (zh) * | 2013-12-19 | 2014-04-02 | 北京航天测控技术有限公司 | 一种视频实时比对方法 |
| CN104734884A (zh) * | 2015-02-09 | 2015-06-24 | 南京南瑞继保电气有限公司 | 一种goose通信方法及装置 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105898507A (zh) * | 2016-05-30 | 2016-08-24 | 广东威创视讯科技股份有限公司 | 一种视频信号同步方法及装置 |
| CN105898507B (zh) * | 2016-05-30 | 2019-04-16 | 广东威创视讯科技股份有限公司 | 一种视频信号同步方法及装置 |
| CN110740251A (zh) * | 2018-07-20 | 2020-01-31 | 杭州海康机器人技术有限公司 | 一种多相机同步取流方法、装置及系统 |
| CN112738009A (zh) * | 2019-10-28 | 2021-04-30 | 阿里巴巴集团控股有限公司 | 数据同步方法、设备、同步系统、介质和服务器 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN105187883B (zh) | 2018-05-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103118247B (zh) | 视频数据处理方法及其装置、视频级联系统和芯片 | |
| CN105187883A (zh) | 一种数据处理方法和客户端设备 | |
| CN102426514A (zh) | 一种大屏幕拼接墙同步显示方法及装置 | |
| CN102186035B (zh) | 屏幕显示信息的显示方法 | |
| CN104468826A (zh) | 一种分布式渲染方法、装置及系统 | |
| EP3206387B1 (en) | Image dynamic range adjustment method, terminal, and storage media | |
| CN103578077A (zh) | 一种图像缩放处理方法和相关装置 | |
| CN104899088A (zh) | 一种消息处理方法及装置 | |
| CN110830678B (zh) | 一种多通道视频信号同步输出方法、装置、系统及介质 | |
| EP3203729B1 (en) | Method, device and video conference system for detecting video signals in same standard | |
| CN115426515B (zh) | 多设备同步校准的方法、设备、系统和存储介质 | |
| CN100579182C (zh) | 一种字幕叠加的方法及装置 | |
| CN106657705B (zh) | 一种基于移动终端向显示屏传输图像的方法及系统 | |
| CN111279277B (zh) | 基于多点矩阵的演示控制方法、装置、电子设备及系统 | |
| CN109269628B (zh) | 监测马达振动的方法、终端设备以及计算机可读存储介质 | |
| CN103019912A (zh) | 处理监视系统中的监视数据 | |
| CN112153409B (zh) | 直播方法、装置、直播接收端及存储介质 | |
| CN107864467B (zh) | 提高移动终端与设备间传输速度的信息传输方法及装置 | |
| CN112051974B (zh) | 电子价签信息传输方法及系统、电子价签、服务器 | |
| CN105262962A (zh) | 视频信号预览的调度方法和系统 | |
| CN103702085A (zh) | 一种新型无线电子猫眼 | |
| CN114500767B (zh) | 输入视频源调节方法、装置、视频输入卡和视频处理设备 | |
| CN107347098B (zh) | 一种基于云技术的设备监造辅助方法及云共享终端 | |
| JP2016530597A (ja) | マトリックスコードを読み取る手段を備える電子機器にデータを送信するために画面上に少なくとも１つのマトリックスコードを表示する方法 | |
| CN108959219B (zh) | 应用于新媒体实时图文包装编辑系统的特效编辑方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |