CN106358000A - 数据传输、处理方法及系统、微视仪及电子设备 - Google Patents

数据传输、处理方法及系统、微视仪及电子设备 Download PDF

Info

Publication number
CN106358000A
CN106358000A CN201610899430.0A CN201610899430A CN106358000A CN 106358000 A CN106358000 A CN 106358000A CN 201610899430 A CN201610899430 A CN 201610899430A CN 106358000 A CN106358000 A CN 106358000A
Authority
CN
China
Prior art keywords
frame
video
mjpeg
video data
backoff window
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610899430.0A
Other languages
English (en)
Other versions
CN106358000B (zh
Inventor
林靖
刘克彬
卢真
戎巍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai mirror Medical Instrument Co., Ltd.
Original Assignee
Shanghai Mirror Medical Instrument Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Mirror Medical Instrument Co Ltd filed Critical Shanghai Mirror Medical Instrument Co Ltd
Priority to CN201610899430.0A priority Critical patent/CN106358000B/zh
Publication of CN106358000A publication Critical patent/CN106358000A/zh
Application granted granted Critical
Publication of CN106358000B publication Critical patent/CN106358000B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43622—Interfacing an external recording device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供一种数据传输、处理方法及系统、微视仪及电子设备，在微视仪拍摄到视频时，将视频处理为MJPEG码流视频数据以及H.264码流视频数据的双码流数据进行传输，在电子设备端，将H.264码流进行存储，将MJPEG码流视频数据根据视频的时延以及帧间隔的关系选择相应的播放模式进行播放，减少播放的延时，保证播放视频的质量，且对H.264码流视频数据进行存储，从而实现对拍摄的视频的存储的同时，可以保证视频播放的质量，且降低对终端产品的硬件性能的要求。本发明一方面将视频播放录制的硬件需求降到最低，另一方面保证即使硬件的播放能力比标称的要求更低，软件仍可以较好的适应硬件平台的播放能力，而不会出现其他多媒体软件中常见的累积延迟和马赛克等问题。

Description

数据传输、处理方法及系统、微视仪及电子设备
技术领域
本发明涉及数据处理领域，特别是涉及一种数据传输、处理方法及系统、微视仪及电子设备。
背景技术
由于家庭微视仪需要适配大量的手机或平板电脑终端(覆盖高中低端)使用，各终端的多媒体播放能力各异，高端手机可以支持720P 30fps，而很多低端的终端只能支持720P 10fps的MJPEG播放能力，因此需要在不同的终端环境下使用不同的策略保证实时视频录制的用户体验为最优。
针对处理能力较弱的终端产品，瓶颈主要在处理器的多媒体处理能力方面不能匹配实时播放和录制视频的需求，造成视频播放的延迟等不好的用户体验。
发明内容
鉴于以上所述现有技术的缺点，本发明的目的在于提供一种数据传输、处理方法及系统、微视仪及电子设备，用于解决现有技术中终端产品视频处理能力弱，而不能匹配实时播放和录制视频的需求的问题。
为实现上述目的及其他相关目的，本发明提供一种双码流视频数据传输方法，应用于一微视仪中，所述微视仪与一电子设备进行通信，所述方法包括：对获取的视频进行处理，以生成对应所述视频的MJPEG码流视频数据以及H.264码流视频数据；传输所述MJPEG码流视频数据以供播放户视频且传输所述H.264码流视频数据以供存储所述视频。
为实现上述目的及其他相关目的，本发明还提供一种双码流视频数据传输系统，应用于一微视仪中，所述微视仪与一电子设备进行通信，包括：视频处理模块，用以对获取的视频进行处理，以生成对应所述视频的MJPEG码流视频数据以及H.264码流视频数据；数据传输模块，用以传输所述MJPEG码流视频数据以供播放户视频且传输所述H.264码流视频数据以供存储所述视频。
为实现上述目的及其他相关目的，本发明还提供一种微视仪，包括摄像头以及处理器；所述摄像头用于摄取视频；所述处理器用以对所述摄像头摄取的视频进行处理，以生成对应所述视频的MJPEG码流视频数据以及H.264码流视频数据；传输所述MJPEG码流视频数据以供播放户视频且传输所述H.264码流视频数据以供存储所述视频。
为实现上述目的及其他相关目的，本发明还提供一种视频数据处理方法，应用于一电子设备中，所述电子设备与一微视仪进行通信，所述方法包括：接收对应一视频的MJPEG码流视频数据以及H.264码流视频数据，对接收的所述H.264码流视频数据进行存储；获取对应所述视频的每帧的时延以及相邻帧之间的帧间隔；比较所述时延与所述帧间隔的大小，且根据所述比较的结果选取对应的播放模式对接收的所述MJPEG码流视频数据进行所述视频的播放。
于本发明一具体实施例中，所述播放模式包括第一播放模式以及第二播放模式，当所述时延大于或等于所述帧间隔时，选取所述第一播放模式对接收的所述MJPEG码流视频数据进行所述视频的播放；当所述时延小于所述帧间隔时，选取所述第二播放模式对接收的所述MJPEG码流视频数据进行所述视频的播放；所述第一播放模式包括：通过预定帧数长度的补偿窗口将所述视频分为多个部分以供分别处理，在每个所述补偿窗口内均选取一MJPEG帧进行播放，且丢弃剩余的其他帧；所述第二播放模式包括：通过预定帧数长度的补偿窗口将所述视频分为多个部分以供分别处理，在每个所述补偿窗口内均选取一MJPEG帧进行丢弃，且播放剩余的的其他帧。
于本发明一具体实施例中，所述第一播放模式包括：在一补偿窗口内，接收一视频帧，获取对应所述视频帧的MJPEG帧和H.264帧；判断是否播放过与所述补偿窗口对应的MJPEG帧；若播放过，则丢弃所述视频帧对应的MJPEG帧；若没有播放过，则判断所述视频帧是否为所述补偿窗口内的最后一帧，若是，则直接播放所述视频帧对应的MJPEG帧；若不是所述补偿窗口内的最后一帧，则判断与所述视频帧对应的H.264帧的类型，H.264帧的类型若是关键帧，则直接播放所述视频帧对应的MJPEG帧；H.264帧的类型若是前向预测编码帧，则计算预设统计窗口对应的信息量的当前EMA与所述H.264帧的信息量之间的差值，且当所述差值大于或等于预设的阈值时，丢弃所述视频帧对应的MJPEG帧；丢弃或播放当前视频帧对应的MJPEG帧后，返回所述接收一视频帧的步骤以重新接收与所述补偿窗口对应的新的视频帧，直到当前补偿窗口内的视频帧全部接收完。
于本发明一具体实施例中，所述第二播放模式包括：在一补偿窗口内，接收一视频帧，获取对应所述视频帧的MJPEG帧和H.264帧；判断是否丢弃过与所述补偿窗口对应的MJPEG帧；若丢弃过，则播放所述视频帧对应的MJPEG帧；若没有丢弃过，则判断所述视频帧是否为所述补偿窗口内的最后一帧，若是，则直接丢弃所述视频帧对应的MJPEG帧；若不是所述补偿窗口内的最后一帧，则判断与所述视频帧对应的H.264帧的类型，H.264帧的类型若是关键帧，则直接播放所述视频帧对应的MJPEG帧；H.264帧的类型若是前向预测编码帧，则计算预设统计窗口对应的信息量的当前EMA与所述H.264帧的信息量之间的差值，且当所述差值大于或等于预设的阈值时，丢弃所述视频帧对应的MJPEG帧；丢弃或播放当前视频帧对应的MJPEG帧后，返回所述接收一视频帧的步骤以重新接收与所述补偿窗口对应的新的视频帧，直到当前补偿窗口内的视频帧全部接收完。
于本发明一具体实施例中，根据所述时延以及帧间隔计算所述补偿窗口的帧数。
于本发明一具体实施例中，所述补偿窗口的帧数为所述时延与所述帧间隔的比值加1。
于本发明一具体实施例中，所述当前EMA为当前H.264帧的信息量与旧的EMA进行加权处理后的结果。
于本发明一具体实施例中，所述旧的EMA为除去当前H.264帧的信息量的影响的EMA。
为实现上述目的及其他相关目的，本发明还提供一种视频数据处理系统，应用于一电子设备中，所述电子设备与一微视仪进行通信，所述系统包括：数据接收模块，用以接收对应一视频的MJPEG码流视频数据以及H.264码流视频数据；存储模块，用以对所述数据接收模块接收的所述H.264码流视频数据进行存储；播放模块，用以获取对应所述视频的每帧的时延以及相邻帧之间的帧间隔；且比较所述时延与所述帧间隔的大小，且根据所述比较的结果选取对应的播放模式对接收的所述MJPEG码流视频数据进行所述视频的播放。
为实现上述目的及其他相关目的，本发明还提供一种电子设备，应用如上任一项所述的视频数据处理方法对接收到的对应一视频的MJPEG码流视频数据以及H.264码流视频数据进行处理。
如上所述，本发明的数据传输、处理方法及系统、微视仪及电子设备，在微视仪拍摄到视频时，将视频处理为MJPEG码流视频数据以及H.264码流视频数据的双码流数据进行传输，其中MJPEG码流用于实时视频的播放具有对多媒体处理能力要求低的特点，H.264视频码流用于实时视频的录制具有占用存储空间小的特点，所以，在电子设备端，将MJPEG码流视频数据根据视频的时延以及帧间隔的关系选择相应的播放模式进行播放，减少播放的延时，保证播放视频的质量，且对H.264码流视频数据进行存储，从而实现对拍摄的视频的存储的同时，可以保证视频播放的质量，且降低对终端产品的硬件性能的要求。本发明一方面将视频播放录制的硬件需求降到最低，另一方面保证即使硬件的播放能力比标称的要求更低，软件仍然可以较好的适应硬件平台的播放能力，而不会出现其他多媒体软件中常见的累积延迟和马赛克等问题。
附图说明
图1显示为本发明的通信系统在一具体实施例中的结构示意图。-
图2显示为本发明的双码流视频数据传输方法在一具体实施例中的流程示意图。
图3显示为本发明的双码流视频数据传输系统在一具体实施例中的模块示意图。
图4显示为本发明的视频数据处理方法在一具体实施例中的流程示意图。
图5显示为本发明的第一播放模式在一具体实施例中的应用示意图。
图6显示为本发明的第二播放模式在一具体实施例中的应用示意图。
图7显示为本发明的视频数据处理系统在一具体实施例中的模块示意图.
图8显示为本发明的电子设备在一具体实施例中采用的软件结构示意图。
元件标号说明
10 通信系统
11 微视仪
12 电子设备
20 双码流视频数据传输方法
21、22 方法步骤
30 双码流视频数据传输系统
31 视频处理模块
32 数据传输模块
40 视频数据处理方法
41～43 方法步骤
70 视频数据处理系统
71 数据接收模块
72 存储模块
73 播放模块
具体实施方式
以下通过特定的具体实例说明本发明的实施方式，本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本发明的精神下进行各种修饰或改变。需说明的是，在不冲突的情况下，以下实施例及实施例中的特征可以相互组合。
需要说明的是，以下实施例中所提供的图示仅以示意方式说明本发明的基本构想，遂图示中仅显示与本发明中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制，其实际实施时各组件的型态、数量及比例可为一种随意的改变，且其组件布局型态也可能更为复杂。
家庭微视仪通常与相应的终端产品进行通信，终端产品在接收到微视仪上传的视频后进行播放和存储，由于无线家庭微视仪需要适配大量的终端(覆盖高中低端)使用，各终端的多媒体播放能力各异，高端终端可以支持720P 30fps，而很多低端的终端只能支持720P 10fps的MJPEG播放能力，因此需要在不同的终端环境下使用不同的策略保证实时视频录制的用户体验为最优。本发明一方面将硬件播放录制的硬件需求降到最低，另一方面保证即使硬件的播放能力比标称的要求更低，软件仍然可以较好的适应硬件平台的播放能力，而不会出现其他多媒体软件中常见的累积延迟和马赛克等问题。本发明具体的系统结构如图1所示，通信系统10包括微视仪11和电子设备12。
进一步参阅图2，显示为本发明的双码流视频数据传输方法在一具体实施例中的流程示意图。所述双码流视频数据传输方法20，应用于所述微视仪11中，所述方法20包括：
21：对获取的视频进行处理，以生成对应所述视频的MJPEG码流视频数据以及H.264码流视频数据；所述视频的获取方式包括通过搭载于所述微视仪11的摄像头进行获取。
22：传输所述MJPEG码流视频数据以供播放户视频且传输所述H.264码流视频数据以供存储所述视频。所述微视仪11还包括处理器，用以对所述摄像头摄取的视频进行处理，以生成对应所述视频的MJPEG码流视频数据以及H.264码流视频数据，并传输所述MJPEG码流视频数据以供播放户视频且传输所述H.264码流视频数据以供存储所述视频。
请参阅图3，显示为本发明的双码流视频数据传输系统在一具体实施例中的模块示意图。所述双码流视频数据传输系统30应用于所述微视仪11中，所述双码流视频数据传输系统30包括：
视频处理模块31，用以对获取的视频进行处理，以生成对应所述视频的MJPEG码流视频数据以及H.264码流视频数据；
数据传输模块32，用以传输所述MJPEG码流视频数据以供播放户视频且传输所述H.264码流视频数据以供存储所述视频。
进一步的参阅图4，显示为本发明的视频数据处理方法在一具体实施例中的流程示意图。所述视频数据处理方法40应用于所述电子设备12中，所述方法40包括：
41：接收对应一视频的MJPEG码流视频数据以及H.264码流视频数据，对接收的所述H.264码流视频数据进行存储；
42：获取对应所述视频的每帧的时延以及相邻帧之间的帧间隔；于本发明一具体实施例中，根据所述时延TDelay以及帧间隔TInt计算所述补偿窗口的帧数N。具体为，所述补偿窗口的帧数为所述时延与所述帧间隔的比值加1，公式为：N＝TDelay/TInt+1。
43：比较所述时延与所述帧间隔的大小，且根据所述比较的结果选取对应的播放模式对接收的所述MJPEG码流视频数据进行所述视频的播放。
于本发明一具体实施例中，所述播放模式包括第一播放模式以及第二播放模式，当所述时延大于或等于所述帧间隔时，即TDelay>＝Tint时，此时FDrop>＝1，代表丢弃的帧数大于等于播放的帧数，其中FDrop为每帧需要丢弃的帧数。选取所述第一播放模式对接收的所述MJPEG码流视频数据进行所述视频的播放；当所述时延小于所述帧间隔时，即TDelay<Tint时，此时FDrop<1，代表丢弃的帧数小于播放的帧数，选取所述第二播放模式对接收的所述MJPEG码流视频数据进行所述视频的播放。
进一步的，所述第一播放模式包括：通过预定帧数长度N的补偿窗口将所述视频分为多个部分以供分别处理，在每个所述补偿窗口内均选取一MJPEG帧进行播放，且丢弃剩余的其他帧；所述第二播放模式包括：通过预定帧数长度N的补偿窗口将所述视频分为多个部分以供分别处理，在每个所述补偿窗口内均选取一MJPEG帧进行丢弃，且播放剩余的的其他帧。
于本发明一具体实施例中，结合图5所示的第一播放模式应用示意图，所述第一播放模式具体包括：
在一补偿窗口内，接收一视频帧，获取对应所述视频帧的MJPEG帧和H.264帧，其中H.264帧直接进行存储；
判断是否播放过与所述补偿窗口对应的MJPEG帧；
若播放过，则丢弃所述视频帧对应的MJPEG帧；
若没有播放过，则判断所述视频帧是否为所述补偿窗口内的最后一帧，若是所述补偿窗口内的最后一帧，则直接播放所述视频帧对应的MJPEG帧；
若不是所述补偿窗口内的最后一帧，则判断与所述视频帧对应的H.264帧的类型，
H.264帧的类型若是关键帧(I帧)，则直接播放所述视频帧对应的MJPEG帧；
H.264帧的类型若是前向预测编码帧(P帧)，则计算预设统计窗口对应的信息量的当前EMAnew与所述H.264帧的信息量Sizenew之间的差值，且当所述差值大于或等于预设的阈值Threshold时，丢弃所述视频帧对应的MJPEG帧；采用的公式为EMAnew-Sizenew>＝Threshold。其中，EMAnew＝α*Sizenew+(1-α)*EMAold，α＝2/(C+1)为平滑系数C为统计窗口帧数，窗口越大则信息量实时性越差，波动越小。一般Fps(每秒帧率)为30。EMA初始值为0。一种，EMA为指数平滑平均(Exponential Moving Average)。
丢弃或播放当前视频帧对应的MJPEG帧后，返回所述接收一视频帧的步骤以重新接收与所述补偿窗口对应的新的视频帧，直到当前补偿窗口内的视频帧全部接收完。
于本发明一具体实施例中，结合图6所示的第二播放模式应用示意图，所述第二播放模式包括：
在一补偿窗口内，接收一视频帧，获取对应所述视频帧的MJPEG帧和H.264帧；
判断是否丢弃过与所述补偿窗口对应的MJPEG帧；
若丢弃过，则播放所述视频帧对应的MJPEG帧；
若没有丢弃过，则判断所述视频帧是否为所述补偿窗口内的最后一帧，
若是所述补偿窗口内的最后一帧，则直接丢弃所述视频帧对应的MJPEG帧；
若不是所述补偿窗口内的最后一帧，则判断与所述视频帧对应的H.264帧的类型，
H.264帧的类型若是关键帧(I帧)，则直接播放所述视频帧对应的MJPEG帧；
H.264帧的类型若是前向预测编码帧(P帧)，则计算预设统计窗口对应的信息量的当前EMAnew与所述H.264帧的信息量Sizenew之间的差值，且当所述差值大于或等于预设的阈值Threshold时，丢弃所述视频帧对应的MJPEG帧；采用的公式为EMAnew-Sizenew>＝Threshold。其中，EMAnew＝α*Sizenew+(1-α)*EMAold，α＝2/(C+1)为平滑系数C为统计窗口帧数，窗口越大则信息量实时性越差，波动越小。一般Fps(每秒帧率)为30。EMA初始值为0。一种，EMA为指数平滑平均(Exponential Moving Average)。
丢弃或播放当前视频帧对应的MJPEG帧后，返回所述接收一视频帧的步骤以重新接收与所述补偿窗口对应的新的视频帧，直到当前补偿窗口内的视频帧全部接收完。
进一步参阅图7，显示为本发明的视频数据处理系统在一具体实施例中的模块示意图。所述视频数据处理系统70应用于所述电子设备12中，所述系统70包括：
数据接收模块71，用以接收对应一视频的MJPEG码流视频数据以及H.264码流视频数据；
存储模块72，用以对所述数据接收模块接收的所述H.264码流视频数据进行存储；
播放模块73，用以获取对应所述视频的每帧的时延以及相邻帧之间的帧间隔；且比较所述时延与所述帧间隔的大小，且根据所述比较的结果选取对应的播放模式对接收的所述MJPEG码流视频数据进行所述视频的播放。
所述视频数据处理系统70为与所述视频数据处理方法40对应的系统项，两者技术方案一一对应，所有关于所述视频数据处理方法40的描述均可应用于本实施例中，在此不一一赘述。
进一步参阅图8，显示为本发明的电子设备在一具体实施例中采用的软件结构示意图。
所述电子设备12在接收到MJPEG码流和H.264码流后，对H.264码流直接进行存储，而同时对H.264码流的类型(I帧或P帧)以及信息量进行判断，根据判断结果对MJPEG码流进行自适应选择性丢帧，且根据丢帧处理后对MJPEG码流进行相应的显示。
本发明具有如下有益效果：
1.采用MJPEG码流做图片实时预览，解码时间短，有效缩短解码延时。
2.采用MJPEG码流做图片实时预览，解码强度低，功耗低，对硬件多媒体性能要求低，可以适配大多数低端机型。
3.采用H.264码流录制多媒体视频，压缩比高，占用空间小。
4.自适应选择性丢帧算法保证在硬件支持的帧率下视频播放较为流畅。
综上所述，本发明的数据传输、处理方法及系统、微视仪及电子设备，在微视仪拍摄到视频时，将视频处理为MJPEG码流视频数据以及H.264码流视频数据的双码流数据进行传输，其中MJPEG码流用于实时视频的播放具有对多媒体处理能力要求低的特点，H.264视频码流用于实时视频的录制具有占用存储空间小的特点，所以，在电子设备端，将MJPEG码流视频数据根据视频的时延以及帧间隔的关系选择相应的播放模式进行播放，减少播放的延时，保证播放视频的质量，且对H.264码流视频数据进行存储，从而实现对拍摄的视频的存储的同时，可以保证视频播放的质量，且降低对终端产品的硬件性能的要求。所以，本发明有效克服了现有技术中的种种缺点而具高度产业利用价值。
上述实施例仅例示性说明本发明的原理及其功效，而非用于限制本发明。任何熟悉此技术的人士皆可在不违背本发明的精神及范畴下，对上述实施例进行修饰或改变。因此，举凡所属技术领域中具有通常知识者在未脱离本发明所揭示的精神与技术思想下所完成的一切等效修饰或改变，仍应由本发明的权利要求所涵盖。

Claims (13)

1.一种双码流视频数据传输方法，其特征在于，应用于一微视仪中，所述微视仪与一电子设备进行通信，所述方法包括：
对获取的视频进行处理，以生成对应所述视频的MJPEG码流视频数据以及H.264码流视频数据；
传输所述MJPEG码流视频数据以供播放户视频且传输所述H.264码流视频数据以供存储所述视频。
2.一种双码流视频数据传输系统，其特征在于，应用于一微视仪中，所述微视仪与一电子设备进行通信，包括：
视频处理模块，用以对获取的视频进行处理，以生成对应所述视频的MJPEG码流视频数据以及H.264码流视频数据；
数据传输模块，用以传输所述MJPEG码流视频数据以供播放户视频且传输所述H.264码流视频数据以供存储所述视频。
3.一种微视仪，其特征在于，包括摄像头以及处理器；
所述摄像头用于摄取视频；
所述处理器用以对所述摄像头摄取的视频进行处理，以生成对应所述视频的MJPEG码流视频数据以及H.264码流视频数据；传输所述MJPEG码流视频数据以供播放户视频且传输所述H.264码流视频数据以供存储所述视频。
4.一种视频数据处理方法，其特征在于，应用于一电子设备中，所述电子设备与一微视仪进行通信，所述方法包括：
接收对应一视频的MJPEG码流视频数据以及H.264码流视频数据，对接收的所述H.264码流视频数据进行存储；
获取对应所述视频的每帧的时延以及相邻帧之间的帧间隔；
比较所述时延与所述帧间隔的大小，且根据所述比较的结果选取对应的播放模式对接收的所述MJPEG码流视频数据进行所述视频的播放。
5.根据权利要求4所述的视频数据处理方法，其特征在于：所述播放模式包括第一播放模式以及第二播放模式，当所述时延大于或等于所述帧间隔时，选取所述第一播放模式对接收的所述MJPEG码流视频数据进行所述视频的播放；当所述时延小于所述帧间隔时，选取所述第二播放模式对接收的所述MJPEG码流视频数据进行所述视频的播放；
所述第一播放模式包括：通过预定帧数长度的补偿窗口将所述视频分为多个部分以供分别处理，在每个所述补偿窗口内均选取一MJPEG帧进行播放，且丢弃剩余的其他帧；
所述第二播放模式包括：通过预定帧数长度的补偿窗口将所述视频分为多个部分以供分别处理，在每个所述补偿窗口内均选取一MJPEG帧进行丢弃，且播放剩余的的其他帧。
6.根据权利要求5所述的视频数据处理方法，其特征在于，所述第一播放模式包括：
在一补偿窗口内，接收一视频帧，获取对应所述视频帧的MJPEG帧和H.264帧；
判断是否播放过与所述补偿窗口对应的MJPEG帧；
若播放过，则丢弃所述视频帧对应的MJPEG帧；
若没有播放过，则判断所述视频帧是否为所述补偿窗口内的最后一帧，
若是所述补偿窗口内的最后一帧，则直接播放所述视频帧对应的MJPEG帧；
若不是所述补偿窗口内的最后一帧，则判断与所述视频帧对应的H.264帧的类型，
H.264帧的类型若是关键帧，则直接播放所述视频帧对应的MJPEG帧；
H.264帧的类型若是前向预测编码帧，则计算预设统计窗口对应的信息量的当前EMA与所述H.264帧的信息量之间的差值，且当所述差值大于或等于预设的阈值时，丢弃所述视频帧对应的MJPEG帧；
丢弃或播放当前视频帧对应的MJPEG帧后，返回所述接收一视频帧的步骤以重新接收与所述补偿窗口对应的新的视频帧，直到当前补偿窗口内的视频帧全部接收完。
7.根据权利要求5所述的视频数据处理方法，其特征在于，所述第二播放模式包括：
在一补偿窗口内，接收一视频帧，获取对应所述视频帧的MJPEG帧和H.264帧；
判断是否丢弃过与所述补偿窗口对应的MJPEG帧；
若丢弃过，则播放所述视频帧对应的MJPEG帧；
若没有丢弃过，则判断所述视频帧是否为所述补偿窗口内的最后一帧，若是所述补偿窗口内的最后一帧，则直接丢弃所述视频帧对应的MJPEG帧；
若不是所述补偿窗口内的最后一帧，则判断与所述视频帧对应的H.264帧的类型，
H.264帧的类型若是关键帧，则直接播放所述视频帧对应的MJPEG帧；
H.264帧的类型若是前向预测编码帧，则计算预设统计窗口对应的信息量的当前EMA与所述H.264帧的信息量之间的差值，且当所述差值大于或等于预设的阈值时，丢弃所述视频帧对应的MJPEG帧；
丢弃或播放当前视频帧对应的MJPEG帧后，返回所述接收一视频帧的步骤以重新接收与所述补偿窗口对应的新的视频帧，直到当前补偿窗口内的视频帧全部接收完。
8.根据权利要求5所述的视频数据处理方法，其特征在于：根据所述时延以及帧间隔计算所述补偿窗口的帧数。
9.根据权利要求5所述的视频数据处理方法，其特征在于：所述补偿窗口的帧数为所述时延与所述帧间隔的比值加1。
10.根据权利要求6或7所述的视频数据处理方法，其特征在于：所述当前EMA为当前H.264帧的信息量与旧的EMA进行加权处理后的结果。
11.根据权利要求10所述的视频数据处理方法，其特征在于：所述旧的EMA为除去当前H.264帧的信息量的影响的EMA。
12.一种视频数据处理系统，其特征在于，应用于一电子设备中，所述电子设备与一微视仪进行通信，所述系统包括：
数据接收模块，用以接收对应一视频的MJPEG码流视频数据以及H.264码流视频数据；
存储模块，用以对所述数据接收模块接收的所述H.264码流视频数据进行存储；
播放模块，用以获取对应所述视频的每帧的时延以及相邻帧之间的帧间隔；且比较所述时延与所述帧间隔的大小，且根据所述比较的结果选取对应的播放模式对接收的所述MJPEG码流视频数据进行所述视频的播放。
13.一种电子设备，其特征在于：应用如权利要求4～11中任一项所述的视频数据处理方法对接收到的对应一视频的MJPEG码流视频数据以及H.264码流视频数据进行处理。
CN201610899430.0A 2016-10-14 2016-10-14 数据传输、处理方法及系统、微视仪及电子设备 Active CN106358000B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610899430.0A CN106358000B (zh) 2016-10-14 2016-10-14 数据传输、处理方法及系统、微视仪及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610899430.0A CN106358000B (zh) 2016-10-14 2016-10-14 数据传输、处理方法及系统、微视仪及电子设备

Publications (2)

Publication Number Publication Date
CN106358000A true CN106358000A (zh) 2017-01-25
CN106358000B CN106358000B (zh) 2020-08-07

Family

ID=57866579

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610899430.0A Active CN106358000B (zh) 2016-10-14 2016-10-14 数据传输、处理方法及系统、微视仪及电子设备

Country Status (1)

Country Link
CN (1) CN106358000B (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1561111A (zh) * 2004-02-26 2005-01-05 晶晨半导体(上海)有限公司 在数字视频压缩码流中快速索引播放信息的方法
CN101106683A (zh) * 2007-08-08 2008-01-16 北京中星微电子有限公司 一种硬件资源自适应的avi文件播放方法
KR100807360B1 (ko) * 2006-07-07 2008-03-03 (주)메리테크 디지털 멀티미디어 방송 수신 장치 및 그 방송 신호 처리방법
CN101917613A (zh) * 2009-12-17 2010-12-15 新奥特（北京）视频技术有限公司 一种流媒体采集编码服务系统
CN102143304A (zh) * 2010-02-03 2011-08-03 中电广通股份有限公司 矿用无线网络摄像机
CN102595114A (zh) * 2011-01-13 2012-07-18 安凯(广州)微电子技术有限公司 一种在低端嵌入式产品上播放视频的方法及终端
CN102665081A (zh) * 2012-05-14 2012-09-12 青岛海信信芯科技有限公司 多格式码流的解析方法、多格式码流的解析装置和显示装置
CN104270646A (zh) * 2014-09-22 2015-01-07 何震宇 一种基于移动流媒体的自适应传输方法和系统
CN204377045U (zh) * 2015-01-20 2015-06-03 上海炎荣电子科技有限公司 一种自带楼层显示功能的网络型数字摄像机
US9948896B2 (en) * 2011-07-12 2018-04-17 Solutions Xyz, Llc System and method for capturing and delivering video images

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1561111A (zh) * 2004-02-26 2005-01-05 晶晨半导体(上海)有限公司 在数字视频压缩码流中快速索引播放信息的方法
KR100807360B1 (ko) * 2006-07-07 2008-03-03 (주)메리테크 디지털 멀티미디어 방송 수신 장치 및 그 방송 신호 처리방법
CN101106683A (zh) * 2007-08-08 2008-01-16 北京中星微电子有限公司 一种硬件资源自适应的avi文件播放方法
CN101917613A (zh) * 2009-12-17 2010-12-15 新奥特（北京）视频技术有限公司 一种流媒体采集编码服务系统
CN102143304A (zh) * 2010-02-03 2011-08-03 中电广通股份有限公司 矿用无线网络摄像机
CN102595114A (zh) * 2011-01-13 2012-07-18 安凯(广州)微电子技术有限公司 一种在低端嵌入式产品上播放视频的方法及终端
US9948896B2 (en) * 2011-07-12 2018-04-17 Solutions Xyz, Llc System and method for capturing and delivering video images
CN102665081A (zh) * 2012-05-14 2012-09-12 青岛海信信芯科技有限公司 多格式码流的解析方法、多格式码流的解析装置和显示装置
CN104270646A (zh) * 2014-09-22 2015-01-07 何震宇 一种基于移动流媒体的自适应传输方法和系统
CN204377045U (zh) * 2015-01-20 2015-06-03 上海炎荣电子科技有限公司 一种自带楼层显示功能的网络型数字摄像机

Also Published As

Publication number Publication date
CN106358000B (zh) 2020-08-07

Similar Documents

Publication Publication Date Title
US9781477B2 (en) System and method for low-latency multimedia streaming
CN103974135B (zh) 一种视频分享方法及系统
US20100231797A1 (en) Video transition assisted error recovery for video data delivery
CN102948139B (zh) 在时域噪声滤波中减少幻影伪像
CN110381316A (zh) 一种视频传输控制方法、装置、设备及存储介质
CN101601073A (zh) 基于稳健主运动估计的数字视频稳定化
CN102480618B (zh) 实现h264视频编码格式播放优化的方法及系统
CN105472477A (zh) 一种数据传输方法、装置及设备
US20120243602A1 (en) Method and apparatus for pipelined slicing for wireless display
CN104604203A (zh) 在场景改变之后的图像中的编码和发射参数的调适
CN105376642A (zh) 视频播放分辨率切换方法及系统
CN106888169A (zh) 视频播放方法及装置
CN102348117A (zh) 低带宽传输数字高清信号的系统、方法及网络多媒体电视
CN110740380A (zh) 视频处理方法和装置、存储介质及电子装置
CN110121071A (zh) 视频编码方法及相关产品
CN111327908A (zh) 一种视频处理方法及相关装置
CN108200470A (zh) 一种视频码率调整方法及设备
JP2008011117A (ja) 画像符号化におけるインターレース符号化時の参照ピクチャ決定方法
CN101554053A (zh) 视频处理所共享的帧缓存
US20140123202A1 (en) Method for downloading content according to communication parameters, and associated content receiver
CN103401888A (zh) 多媒体数据的接收与处理方法和装置
US7403563B2 (en) Image decoding method and apparatus, and television receiver utilizing the same
CN103918258A (zh) 减少视频编码中的数据量
CN106358000A (zh) 数据传输、处理方法及系统、微视仪及电子设备
RU2526370C2 (ru) Устройство и способ для передачи множества информационных сигналов с разделенным по времени мультиплексированием

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20170825

Address after: 310002 1535 foresee future management Co., Ltd. Jiangnan 9, Baiyun Road, Zhejiang, Hangzhou

Applicant after: Li Can

Address before: 201203, Shanghai, Pudong New Area, China (Shanghai) free trade zone, 88 Darwin Road, building 204, room 3

Applicant before: Shanghai mirror Medical Instrument Co., Ltd.

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20171018

Address after: 204 room 3, building 88, Darwin Road, Shanghai, China (Shanghai) free trade zone, 201203

Applicant after: Shanghai mirror Medical Instrument Co., Ltd.

Address before: 310002 1535 foresee future management Co., Ltd. Jiangnan 9, Baiyun Road, Zhejiang, Hangzhou

Applicant before: Li Can

GR01 Patent grant
GR01 Patent grant