CN114640886B - 自适应带宽的音视频传输方法、装置、计算机设备及介质 - Google Patents

自适应带宽的音视频传输方法、装置、计算机设备及介质 Download PDF

Info

Publication number
CN114640886B
CN114640886B CN202210186726.3A CN202210186726A CN114640886B CN 114640886 B CN114640886 B CN 114640886B CN 202210186726 A CN202210186726 A CN 202210186726A CN 114640886 B CN114640886 B CN 114640886B
Authority
CN
China
Prior art keywords
data
audio
current
rate
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210186726.3A
Other languages
English (en)
Other versions
CN114640886A (zh
Inventor
陈维洲
龚潇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Hongdian Technologies Corp
Original Assignee
Shenzhen Hongdian Technologies Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Hongdian Technologies Corp filed Critical Shenzhen Hongdian Technologies Corp
Priority to CN202210186726.3A priority Critical patent/CN114640886B/zh
Publication of CN114640886A publication Critical patent/CN114640886A/zh
Application granted granted Critical
Publication of CN114640886B publication Critical patent/CN114640886B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44245—Monitoring the upstream path of the transmission network, e.g. its availability, bandwidth
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331—Caching operations, e.g. of an advertisement for later insertion during playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/437—Interfacing the upstream path of the transmission network, e.g. for transmitting client requests to a VOD server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明实施例公开了一种自适应带宽的音视频传输方法、装置、计算机设备及介质。该方法包括：通过音视频编码组件获取终端采集的音视频信号，并根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中；从音视频编码缓存依次取出编码数据中的音视频帧进行打包，得到打包数据存储于数据发送缓存中等待发送；从数据发送缓存依次取出打包数据并发送到云平台；实时获取数据发送缓存的当前使用率，并根据当前使用率确定当前网络状态，以根据当前网络状态实时对预设编码指标参数进行调整和/或对编码数据进行过滤。从而在网络抖动时，及时识别带宽波动动态适配，保证传输画面不花屏，最大程度保证视频流畅声音连续，为用户提供更好的体验。

Description

自适应带宽的音视频传输方法、装置、计算机设备及介质
技术领域
本发明实施例涉及数据传输技术领域，尤其涉及一种自适应带宽的音视频传输方法、装置、计算机设备及介质。
背景技术
监控终端需要实时的对摄像头采集的数据进行编码，传输到远程的云平台，在车载或者移动的环境下要求无线网络传输低延时，高带宽才能保证极佳的用户效果。传统在网络带宽不佳的情况下会导致视频数据丢帧，呈现给用户花屏或者卡顿的效果，音频也会因为数据送达不及时导致声音断断续续。
目前主要的解决方案有降低实时传输的码率和帧率，保证传输数据大小尽量在平均带宽范围内；通过附加协议来获取云端的丢包率，通过丢包率来判断当前的网络延时率，进而计算当前的网络状态；通过附加数据包的时间戳来统计接收延时率，根据该延时率计算当前网络拥塞的阈值，根据该阈值对比进行发送端数据量流控。
其中，通过码率大小来保证视频的低延时无法充分利用带宽，无法提供更高质量的实时图像效果和声音效果，通过附加协议(目前应用较多的rtcp)是基于通用的协议来实现的，正常需要支持rtsp数据流，对于其他协议或者私有协议无法做到兼容所有应用场景，扩展协议头带时间戳必须要接收端同步进行延时运算，然后再与发送端的相邻帧进行时延差进行对比，计算当前的网络拥塞趋势，这对接收端有极大的依赖，如果网络带宽小到一定程度，对端的网络分析结果都无法实时反馈，会极大的影响发送端的自适应流畅甚至导致误判。
发明内容
本发明实施例提供一种自适应带宽的音视频传输方法、装置、计算机设备及介质，以解决在网络出现抖动的情况下，无需依赖接收端的自动识别带宽波动并调整系统的编码指标参数，以动态的适配当前的网络环境，保证传输的画面不出现花屏，最大程度的保证视频流畅。
第一方面，本发明实施例提供了一种自适应带宽的音视频传输方法，该方法包括：
通过音视频编码组件获取终端采集的音视频信号，并根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中；
从所述音视频编码缓存依次取出所述编码数据中的音视频帧进行打包，得到打包数据存储于数据发送缓存中等待发送；
从所述数据发送缓存依次取出所述打包数据并发送到云平台；
实时获取所述数据发送缓存的当前使用率，并根据所述当前使用率确定当前网络状态，以根据所述当前网络状态实时对所述预设编码指标参数进行调整和/或对所述编码数据进行过滤。
可选的，所述从所述数据发送缓存依次取出所述打包数据并发送到云平台，包括：
获取每次发送过程的发送信息数据，并根据所述发送信息数据确定当前发送速率；
相应的，所述根据所述当前使用率确定当前网络状态，包括：
根据所述当前使用率以及所述当前发送速率确定所述当前网络状态。
可选的，所述根据所述当前使用率以及所述当前发送速率确定所述当前网络状态，包括：
若所述当前使用率小于等于第一比率，则确定所述当前网络状态为网络顺畅；
若所述当前使用率大于所述第一比率而小于等于第二比率，且所述当前发送速率大于第一速率而小于第二速率，则确定所述当前网络状态为带宽告警；
若所述当前使用率大于所述第二比率而小于等于第三比率，且所述当前发送速率小于第三速率，则确定所述当前网络状态为带宽不足；
若所述当前使用率大于所述第三比率，且所述当前发送速率小于第四速率，则确定所述当前网络状态为带宽极低。
可选的，所述根据所述当前网络状态实时对所述预设编码指标参数进行调整和/或对所述编码数据进行过滤，包括：
若所述当前网络状态为网络顺畅，则将所述预设编码指标参数设置为默认值；
若所述当前网络状态为带宽告警，则根据预设梯度规则对所述预设编码指标参数进行调整；
若所述当前网络状态为带宽不足，则将所述编码数据中的P帧进行删除，同时将所述预设编码指标参数中的I帧间隔设置为预设间隔；
若所述当前网络状态为带宽极低，则将所述编码数据中的视频帧进行删除。
可选的，所述根据预设梯度规则对所述预设编码指标参数进行调整，包括：
若所述当前发送速率持续变低，则逐渐降低所述预设编码指标参数中的编码码率和编码帧率，直至降幅达到预设最高降幅。
可选的，所述发送信息数据包括：发送时间戳和发送数据大小；
相应的，所述根据所述发送信息数据确定当前发送速率，包括：
根据最近预设次数的发送过程的发送时间戳和发送数据大小计算所述当前发送速率。
可选的，所述音视频编码缓存为双向链表；
相应的，所述根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中，包括：
若所述音视频编码缓存达到了缓存上限，则将所述音视频编码缓存中最老的一段I帧区间丢弃，并将新得到的所述编码数据添加到所述双向链表的末尾。
第二方面，本发明实施例还提供了一种自适应带宽的音视频传输装置，该装置包括：
音视频编码模块，用于通过音视频编码组件获取终端采集的音视频信号，并根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中；
编码数据打包模块，用于从所述音视频编码缓存依次取出所述编码数据中的音视频帧进行打包，得到打包数据存储于数据发送缓存中等待发送；
打包数据发送模块，用于从所述数据发送缓存依次取出所述打包数据并发送到云平台；
网络适配模块，用于实时获取所述数据发送缓存的当前使用率，并根据所述当前使用率确定当前网络状态，以根据所述当前网络状态实时对所述预设编码指标参数进行调整和/或对所述编码数据进行过滤。
第三方面，本发明实施例还提供了一种计算机设备，该计算机设备包括：
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本发明任意实施例所提供的自适应带宽的音视频传输方法。
第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本发明任意实施例所提供的自适应带宽的音视频传输方法。
本发明实施例提供了一种自适应带宽的音视频传输方法，首先通过音视频编码组件获取终端采集的音视频信号并根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中，然后从该音视频编码缓存依次取出编码数据中的音视频帧进行打包，得到打包数据存储于数据发送缓存中等待发送，再从该数据发送缓存依次取出打包数据并发送到云平台，在上述过程中可以实时获取数据发送缓存的当前使用率，并根据当前使用率确定当前网络状态，以根据当前网络状态实时对预设编码指标参数进行调整和/或对编码数据进行过滤。本发明实施例所提供的自适应带宽的音视频传输方法，通过使用音视频编码缓存存储编码数据，并使用数据发送缓存存储封装好的待发送数据，再根据数据发送缓存的当前使用率确定当前网络状态，并根据当前网络状态实时调整系统的编码指标参数和/或对编码数据进行过滤，从而实现在网络出现抖动的情况下，及时的识别到带宽的波动，并动态的适配当前的网络环境，以在网络带宽受硬件或周围环境影响出现较大的波动时，保证实时的音视频传输最小程度受到影响，保证传输的画面不出现花屏，最大程度的保证视频流畅，声音连续，为用户提供更好的体验。并且本方法对网络带宽的判断不依赖于接收端，极大的保证了对网络状态判定的准确性，从而保证视频传输稳定可靠，同时对通信模块的硬件性能要求也有所降低，能一定程度的降低产品的硬件成本，而且复杂度和风险也较低，开发难度较小，开发成本更低。
附图说明
图1为本发明实施例一提供的自适应带宽的音视频传输方法的流程图；
图2为本发明实施例二提供的自适应带宽的音视频传输装置的结构示意图；
图3为本发明实施例三提供的计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理，但是其中的许多步骤可以被并行地、并发地或者同时实施。此外，各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
实施例一
图1为本发明实施例一提供的自适应带宽的音视频传输方法的流程图。本实施例可适用于在网络出现抖动时自适应调整编码指标参数以动态适配当前网络环境的情况，该方法可以由本发明实施例所提供的自适应带宽的音视频传输装置来执行，该装置可以由硬件和/或软件的方式来实现，一般可集成于计算机设备中，该计算机设备具体可以是监控终端。如图1所示，具体包括如下步骤：
S11、通过音视频编码组件获取终端采集的音视频信号，并根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中。
具体的，音视频编码组件可以负责对监控终端采集的多路模拟音视频信号进行采集并编码，再将输出的编码数据送入音视频编码缓存，其中的编码数据可以包括视频数据(H264/H265)和音频数据(G711A/G726/PCM)等等。音视频编码缓存中可以存储单帧数据，其中视频帧包含I帧和P帧，大小不固定，正常I帧大小远大于P帧大小，音频帧大小固定，如G711A格式每帧320Byte，PCM格式每帧640Byte，G726格式每帧160Byte，音视频编码缓存主要用来缓存编码后的音视频数据，从而便于在网络不佳的情况下进行抽帧或丢帧处理，是发送流程控制中非常重要的一个环节。
其中，可选的，所述音视频编码缓存为双向链表；相应的，所述根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中，包括：若所述音视频编码缓存达到了缓存上限，则将所述音视频编码缓存中最老的一段I帧区间丢弃，并将新得到的所述编码数据添加到所述双向链表的末尾。具体的，音视频编码缓存可以由一个双向链表组成，并限定链表的总长度，如果存储达到链表的缓存上限，则可以丢弃最老的一段I帧区间，包括最老的两个I帧区间内的所有数据，而新添加的编码数据则可以添加到双向链表的末尾，从而保证最新编码数据得到保存。
S12、从所述音视频编码缓存依次取出所述编码数据中的音视频帧进行打包，得到打包数据存储于数据发送缓存中等待发送。
具体的，发送任务可以不断的从音视频编码缓存取出最老的音视频帧进行rtp打包，再将打包完的数据依次存入数据发送缓存中等待发送。其中，数据发送缓存可以是一个固定大小(如5M)的buffer，该固定大小可以根据实际码流进行确定，数据发送缓存可用于存储已经对音视频帧进行协议封装的待发送数据，发送的协议可以是私有协议，也可以是国家或交通部标准协议，该协议需要与对应的云平台关联。
S13、从所述数据发送缓存依次取出所述打包数据并发送到云平台。
具体的，发送任务可以直接从数据发送缓存中依次取出打包数据并通过socket发送到云平台。
S14、实时获取所述数据发送缓存的当前使用率，并根据所述当前使用率确定当前网络状态，以根据所述当前网络状态实时对所述预设编码指标参数进行调整和/或对所述编码数据进行过滤。
具体的，数据发送缓存的当前使用率可以用来评估当前带宽的拥塞程度，如果数据不能及时发送到云平台，则会导致数据发送缓存中的数据逐步积压从而导致音视频编码缓存丢数据。具体可以根据数据发送缓存的总容量和已使用的容量来实时计算当前使用率，从而实时的计算和分析当前的网络带宽，总体来说，数据发送缓存的剩余空间越小，网络带宽则越小，网络拥塞越严重。根据数据发送缓存的当前使用率，具体可以将当前网络状态描述为4个等级，每个等级对应不同的网络标准，并可以对编码模块有不同的应对措施，其中，该4个等级分别可以是网络顺畅、带宽告警、带宽不足和带宽极低，如当前使用率在第一比率范围内时可以确定当前网络状态为网络顺畅，如当前使用率在第二比率范围内时可以确定当前网络状态为带宽告警、如当前使用率在第三比率范围内时可以确定当前网络状态为带宽不足，如当前使用率在第四比率范围内时可以确定当前网络状态为带宽极低。在确定了当前网络状态之后，可以根据当前网络状态实时调整预设编码指标参数，如当网络变差时，可以降低编码码率和帧率。还可以对编码数据进行过滤，如当网络变差时，可以清除编码数据中的P帧，具体可以首先清除音视频编码缓存中的P帧，并在音视频编码组件编码输出的编码数据中直接丢弃P帧。当网络变得更差时，还可以清空编码数据中的视频帧，具体可以首先清空音视频编码缓存中的视频帧，并在音视频编码组件编码输出的编码数据中直接丢弃视频帧。在网络较差的情况下通过丢弃指定数据可以保证视频画面的完整，从而提高用户的体验，同时在远端进行音视频解码以及同步的过程中是以音频的时间戳作为同步的基准时间，因此，音频的传输效率至关重要，通过优先发送音频数据，保证了声音的连续性以及解码时间基准的连续，这样在极端的网络情况下，可以保证视频画面卡在网络拥塞前的最后一个画面，但声音是正常连续从而等待视频画面恢复。
在上述技术方案的基础上，可选的，所述从所述数据发送缓存依次取出所述打包数据并发送到云平台，包括：获取每次发送过程的发送信息数据，并根据所述发送信息数据确定当前发送速率；相应的，所述根据所述当前使用率确定当前网络状态，包括：根据所述当前使用率以及所述当前发送速率确定所述当前网络状态。具体的，除当前使用率之外，当相邻帧发送的时间戳间隔越大时，也说明网络带宽当前正由大到小的趋势变化。具体可以在每次向云平台发送打包数据的过程中，记录发送信息数据，并根据发送信息数据计算得到当前发送速率。由于如果网络带宽不足，发送端的速率必然受阻，通过socket发送的速率能从一定程度上评估当前网络带宽的变化趋势，因此可以将计算得到的当前发送速率作为网络带宽评估的一个辅助指标，与当前使用率一同用于确定当前网络状态。
进一步可选的，所述发送信息数据包括：发送时间戳和发送数据大小；相应的，所述根据所述发送信息数据确定当前发送速率，包括：根据最近预设次数的发送过程的发送时间戳和发送数据大小计算所述当前发送速率。具体的，可以将最近预设次数(如五次)发送过程的平均发送速率作为当前发送速率，从而能够一定程度上防止网络的瞬间抖动导致误判。具体可以使用最近预设次数发送过程的总发送数据大小除以总发送时间间隔来计算得到当前发送速率，其中，总发送时间间隔可以根据各个发送时间戳计算得到。对于最近预设次数的发送信息数据可以存储在对应的数组中，每发送一轮数据则可以更新该数据节点，一次覆盖最老的记录，以便使用。
在上述技术方案的基础上，可选的，所述根据所述当前使用率以及所述当前发送速率确定所述当前网络状态，包括：若所述当前使用率小于等于第一比率，则确定所述当前网络状态为网络顺畅；若所述当前使用率大于所述第一比率而小于等于第二比率，且所述当前发送速率大于第一速率而小于第二速率，则确定所述当前网络状态为带宽告警；若所述当前使用率大于所述第二比率而小于等于第三比率，且所述当前发送速率小于第三速率，则确定所述当前网络状态为带宽不足；若所述当前使用率大于所述第三比率，且所述当前发送速率小于第四速率，则确定所述当前网络状态为带宽极低。具体示例性的，假设当前码流的码率为1200kbps，帧率为20fps，关键帧间隔为60fps，音视频编码缓存的总帧数设定为5*(20+25)，即最大能缓存5s的音视频数据帧，数据发送缓存为10*(25*320+150*1024)，即最大存放10s的待发送数据，存放最近5次的发送信息数据到对应的数组，记录各次数据发送的总字节数以及发送所消耗的时间间隔，比如分别为S0{S0.size，S0.ms}，S1{S1.size，S1.ms}，…，S4{S4.size，S4.ms}，其中，S0.size表示发送任务S0的总字节数，S0.ms表示发送任务S0的时间间隔，则可以计算当前发送速率为(S0.size+S1.size+…+S4.size)/(S0.ms+S1.ms+…+S4.ms)。然后计算当前使用率T.user*100/T.total，其中，T.user表示数据发送缓存已使用的容量，T.total表示数据发送缓存的总容量。计算完成后，若当前使用率小于等于40％，则确定当前网络状态为网络顺畅，若当前使用率大于40％而小于等于65％，且当前发送速率大于0.8*(25*320+150*1024)而小于1.2*(25*320+150*1024)，则确定当前网络状态为带宽告警，若当前使用率大于65％而小于等于85％，，且当前发送速率小于1.0*(25*320+150*1024)，则确定当前网络状态为带宽不足，若当前使用率大于85％，且当前发送速率小于0.8*(25*320+150*1024)，则确定当前网络状态为带宽极低。
在上述技术方案的基础上，可选的，所述根据所述当前网络状态实时对所述预设编码指标参数进行调整和/或对所述编码数据进行过滤，包括：若所述当前网络状态为网络顺畅，则将所述预设编码指标参数设置为默认值；若所述当前网络状态为带宽告警，则根据预设梯度规则对所述预设编码指标参数进行调整；若所述当前网络状态为带宽不足，则将所述编码数据中的P帧进行删除，同时将所述预设编码指标参数中的I帧间隔设置为预设间隔；若所述当前网络状态为带宽极低，则将所述编码数据中的视频帧进行删除。其中，可选的，所述根据预设梯度规则对所述预设编码指标参数进行调整，包括：若所述当前发送速率持续变低，则逐渐降低所述预设编码指标参数中的编码码率和编码帧率，直至降幅达到预设最高降幅。具体的，在确定了当前网络状态之后，即可按照上述操作进行编码调控以及编码数据帧处理来满足当前带宽波动的输送需求。具体可以当网络顺畅时，将预设编码指标参数保持在默认的码率和帧率，并将I帧间隔设置为默认的5秒一帧。当网络状态下降到带宽警告时，当前网络带宽与当前传输数据量基本匹配，如果发送时延持续变高，则可以适当的降低编码码率和编码帧率，具体可以按照预设梯度规则(如每梯次10％，最高降到50％)逐渐降低来保证数据发送处于一个相对健康的状态。当网络状态进一步下降到带宽不足时，则可以在带宽警告所作出的调整的基础上，对音视频编码缓存中的P帧进行清除，同时提高I帧间隔为1秒一帧，即只发送I帧和音频帧，并将音视频编码组件编码输出的编码数据中的P帧直接丢弃，从而极大的降低编码输出的数据量以及帧数量，保证视频画面的连续完整以及声音的连续。当网络状态进一步下降到带宽极低时，则可以清空音视频编码缓存中的所有视频帧，仅保留音频帧，同时丢弃音视频编码组件编码输出的编码数据中的所有视频帧，从而保证声音的连续性以及解码的正常进度，这样在极端的网络情况下，可以保证视频画面卡在网络拥塞前的最后一个画面，但是声音是正常连续从而等待视频画面恢复。相应的，当网络带宽逐渐恢复时，预设编码指标参数以及编码数据也可以按照对应等级进行调控恢复，从而确定当前的参数与网络带宽同步对称匹配。
本发明实施例所提供的技术方案，首先通过音视频编码组件获取终端采集的音视频信号并根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中，然后从该音视频编码缓存依次取出编码数据中的音视频帧进行打包，得到打包数据存储于数据发送缓存中等待发送，再从该数据发送缓存依次取出打包数据并发送到云平台，在上述过程中可以实时获取数据发送缓存的当前使用率，并根据当前使用率确定当前网络状态，以根据当前网络状态实时对预设编码指标参数进行调整和/或对编码数据进行过滤。本发明实施例所提供的自适应带宽的音视频传输方法，通过使用音视频编码缓存存储编码数据，并使用数据发送缓存存储封装好的待发送数据，再根据数据发送缓存的当前使用率确定当前网络状态，并根据当前网络状态实时调整系统的编码指标参数和/或对编码数据进行过滤，从而实现在网络出现抖动的情况下，及时的识别到带宽的波动，并动态的适配当前的网络环境，以在网络带宽受硬件或周围环境影响出现较大的波动时，保证实时的音视频传输最小程度受到影响，保证传输的画面不出现花屏，最大程度的保证视频流畅，声音连续，为用户提供更好的体验。并且本方法对网络带宽的判断不依赖于接收端，极大的保证了对网络状态判定的准确性，从而保证视频传输稳定可靠，同时对通信模块的硬件性能要求也有所降低，能一定程度的降低产品的硬件成本，而且复杂度和风险也较低，开发难度较小，开发成本更低。
实施例二
图2为本发明实施例二提供的自适应带宽的音视频传输装置的结构示意图，该装置可以由硬件和/或软件的方式来实现，一般可集成于计算机设备中，用于执行本发明任意实施例所提供的自适应带宽的音视频传输方法。如图2所示，该装置包括：
音视频编码模块21，用于通过音视频编码组件获取终端采集的音视频信号，并根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中；
编码数据打包模块22，用于从所述音视频编码缓存依次取出所述编码数据中的音视频帧进行打包，得到打包数据存储于数据发送缓存中等待发送；
打包数据发送模块23，用于从所述数据发送缓存依次取出所述打包数据并发送到云平台；
网络适配模块24，用于实时获取所述数据发送缓存的当前使用率，并根据所述当前使用率确定当前网络状态，以根据所述当前网络状态实时对所述预设编码指标参数进行调整和/或对所述编码数据进行过滤。
本发明实施例所提供的技术方案，首先通过音视频编码组件获取终端采集的音视频信号并根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中，然后从该音视频编码缓存依次取出编码数据中的音视频帧进行打包，得到打包数据存储于数据发送缓存中等待发送，再从该数据发送缓存依次取出打包数据并发送到云平台，在上述过程中可以实时获取数据发送缓存的当前使用率，并根据当前使用率确定当前网络状态，以根据当前网络状态实时对预设编码指标参数进行调整和/或对编码数据进行过滤。本发明实施例所提供的自适应带宽的音视频传输方法，通过使用音视频编码缓存存储编码数据，并使用数据发送缓存存储封装好的待发送数据，再根据数据发送缓存的当前使用率确定当前网络状态，并根据当前网络状态实时调整系统的编码指标参数和/或对编码数据进行过滤，从而实现在网络出现抖动的情况下，及时的识别到带宽的波动，并动态的适配当前的网络环境，以在网络带宽受硬件或周围环境影响出现较大的波动时，保证实时的音视频传输最小程度受到影响，保证传输的画面不出现花屏，最大程度的保证视频流畅，声音连续，为用户提供更好的体验。并且本方法对网络带宽的判断不依赖于接收端，极大的保证了对网络状态判定的准确性，从而保证视频传输稳定可靠，同时对通信模块的硬件性能要求也有所降低，能一定程度的降低产品的硬件成本，而且复杂度和风险也较低，开发难度较小，开发成本更低。
在上述技术方案的基础上，可选的，打包数据发送模块23，包括：
当前发送速率确定单元，用于获取每次发送过程的发送信息数据，并根据所述发送信息数据确定当前发送速率；
相应的，网络适配模块24，包括：
当前网络状态确定单元，用于根据所述当前使用率以及所述当前发送速率确定所述当前网络状态。
在上述技术方案的基础上，可选的，当前网络状态确定单元具体用于：
若所述当前使用率小于等于第一比率，则确定所述当前网络状态为网络顺畅；
若所述当前使用率大于所述第一比率而小于等于第二比率，且所述当前发送速率大于第一速率而小于第二速率，则确定所述当前网络状态为带宽告警；
若所述当前使用率大于所述第二比率而小于等于第三比率，且所述当前发送速率小于第三速率，则确定所述当前网络状态为带宽不足；
若所述当前使用率大于所述第三比率，且所述当前发送速率小于第四速率，则确定所述当前网络状态为带宽极低。
在上述技术方案的基础上，可选的，网络适配模块24，包括：
第一适配单元，用于若所述当前网络状态为网络顺畅，则将所述预设编码指标参数设置为默认值；
第二适配单元，用于若所述当前网络状态为带宽告警，则根据预设梯度规则对所述预设编码指标参数进行调整；
第三适配单元，用于若所述当前网络状态为带宽不足，则将所述编码数据中的P帧进行删除，同时将所述预设编码指标参数中的I帧间隔设置为预设间隔；
第四适配单元，用于若所述当前网络状态为带宽极低，则将所述编码数据中的视频帧进行删除。
在上述技术方案的基础上，可选的，第二适配单元具体用于：
若所述当前发送速率持续变低，则逐渐降低所述预设编码指标参数中的编码码率和编码帧率，直至降幅达到预设最高降幅。
在上述技术方案的基础上，可选的，所述发送信息数据包括：发送时间戳和发送数据大小；
相应的，当前发送速率确定单元具体用于：
根据最近预设次数的发送过程的发送时间戳和发送数据大小计算所述当前发送速率。
在上述技术方案的基础上，可选的，所述音视频编码缓存为双向链表；
相应的，音视频编码模块21具体用于：
若所述音视频编码缓存达到了缓存上限，则将所述音视频编码缓存中最老的一段I帧区间丢弃，并将新得到的所述编码数据添加到所述双向链表的末尾。
本发明实施例所提供的自适应带宽的音视频传输装置可执行本发明任意实施例所提供的自适应带宽的音视频传输方法，具备执行方法相应的功能模块和有益效果。
值得注意的是，在上述自适应带宽的音视频传输装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
实施例三
图3为本发明实施例三提供的计算机设备的结构示意图，示出了适于用来实现本发明实施方式的示例性计算机设备的框图。图3显示的计算机设备仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。如图3所示，该计算机设备包括处理器31、存储器32、输入装置33及输出装置34；计算机设备中处理器31的数量可以是一个或多个，图3中以一个处理器31为例，计算机设备中的处理器31、存储器32、输入装置33及输出装置34可以通过总线或其他方式连接，图3中以通过总线连接为例。
存储器32作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的自适应带宽的音视频传输方法对应的程序指令/模块(例如，自适应带宽的音视频传输装置中的音视频编码模块21、编码数据打包模块22、打包数据发送模块23及网络适配模块24)。处理器31通过运行存储在存储器32中的软件程序、指令以及模块，从而执行计算机设备的各种功能应用以及数据处理，即实现上述的自适应带宽的音视频传输方法。
存储器32可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据计算机设备的使用所创建的数据等。此外，存储器32可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器32可进一步包括相对于处理器31远程设置的存储器，这些远程存储器可以通过网络连接至计算机设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置33可用于采集外界的音视频信号，以及产生与计算机设备的用户设置和功能控制有关的键信号输入等。输出装置34可用于将调整后的打包数据发送到云平台等等。
实施例四
本发明实施例四还提供一种包含计算机可执行指令的存储介质，该计算机可执行指令在由计算机处理器执行时用于执行一种自适应带宽的音视频传输方法，该方法包括：
通过音视频编码组件获取终端采集的音视频信号，并根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中；
从所述音视频编码缓存依次取出所述编码数据中的音视频帧进行打包，得到打包数据存储于数据发送缓存中等待发送；
从所述数据发送缓存依次取出所述打包数据并发送到云平台；
实时获取所述数据发送缓存的当前使用率，并根据所述当前使用率确定当前网络状态，以根据所述当前网络状态实时对所述预设编码指标参数进行调整和/或对所述编码数据进行过滤。
存储介质可以是任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括：安装介质，例如CD-ROM、软盘或磁带装置；计算机系统存储器或随机存取存储器，诸如DRAM、DDR RAM、SRAM、EDO RAM、兰巴斯(Rambus)RAM等；非易失性存储器，诸如闪存、磁介质(例如硬盘或光存储)；寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外，存储介质可以位于程序在其中被执行的计算机系统中，或者可以位于不同的第二计算机系统中，第二计算机系统通过网络(诸如因特网)连接到计算机系统。第二计算机系统可以提供程序指令给计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然，本发明实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的方法操作，还可以执行本发明任意实施例所提供的自适应带宽的音视频传输方法中的相关操作。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (9)

1.一种自适应带宽的音视频传输方法，其特征在于，包括：
通过音视频编码组件获取终端采集的音视频信号，并根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中；
从所述音视频编码缓存依次取出所述编码数据中的音视频帧进行打包，得到打包数据存储于数据发送缓存中等待发送；
从所述数据发送缓存依次取出所述打包数据并发送到云平台；
实时获取所述数据发送缓存的当前使用率，并根据所述当前使用率确定当前网络状态，以根据所述当前网络状态实时对所述预设编码指标参数进行调整和/或对所述编码数据进行过滤；
其中，所述从所述数据发送缓存依次取出所述打包数据并发送到云平台，包括：
获取每次发送过程的发送信息数据，并根据所述发送信息数据确定当前发送速率；
相应的，所述根据所述当前使用率确定当前网络状态，包括：
根据所述当前使用率以及所述当前发送速率确定所述当前网络状态。
2.根据权利要求1所述的自适应带宽的音视频传输方法，其特征在于，所述根据所述当前使用率以及所述当前发送速率确定所述当前网络状态，包括：
若所述当前使用率小于等于第一比率，则确定所述当前网络状态为网络顺畅；
若所述当前使用率大于所述第一比率而小于等于第二比率，且所述当前发送速率大于第一速率而小于第二速率，则确定所述当前网络状态为带宽告警；
若所述当前使用率大于所述第二比率而小于等于第三比率，且所述当前发送速率小于第三速率，则确定所述当前网络状态为带宽不足；
若所述当前使用率大于所述第三比率，且所述当前发送速率小于第四速率，则确定所述当前网络状态为带宽极低。
3.根据权利要求2所述的自适应带宽的音视频传输方法，其特征在于，所述根据所述当前网络状态实时对所述预设编码指标参数进行调整和/或对所述编码数据进行过滤，包括：
若所述当前网络状态为网络顺畅，则将所述预设编码指标参数设置为默认值；
若所述当前网络状态为带宽告警，则根据预设梯度规则对所述预设编码指标参数进行调整；
若所述当前网络状态为带宽不足，则将所述编码数据中的P帧进行删除，同时将所述预设编码指标参数中的I帧间隔设置为预设间隔；
若所述当前网络状态为带宽极低，则将所述编码数据中的视频帧进行删除。
4.根据权利要求3所述的自适应带宽的音视频传输方法，其特征在于，所述根据预设梯度规则对所述预设编码指标参数进行调整，包括：
若所述当前发送速率持续变低，则逐渐降低所述预设编码指标参数中的编码码率和编码帧率，直至降幅达到预设最高降幅。
5.根据权利要求1所述的自适应带宽的音视频传输方法，其特征在于，所述发送信息数据包括：发送时间戳和发送数据大小；
相应的，所述根据所述发送信息数据确定当前发送速率，包括：
根据最近预设次数的发送过程的发送时间戳和发送数据大小计算所述当前发送速率。
6.根据权利要求1所述的自适应带宽的音视频传输方法，其特征在于，所述音视频编码缓存为双向链表；
相应的，所述根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中，包括：
若所述音视频编码缓存达到了缓存上限，则将所述音视频编码缓存中最老的一段I帧区间丢弃，并将新得到的所述编码数据添加到所述双向链表的末尾。
7.一种自适应带宽的音视频传输装置，其特征在于，包括：
音视频编码模块，用于通过音视频编码组件获取终端采集的音视频信号，并根据预设编码指标参数进行编码，得到编码数据存储于音视频编码缓存中；
编码数据打包模块，用于从所述音视频编码缓存依次取出所述编码数据中的音视频帧进行打包，得到打包数据存储于数据发送缓存中等待发送；
打包数据发送模块，用于从所述数据发送缓存依次取出所述打包数据并发送到云平台；
网络适配模块，用于实时获取所述数据发送缓存的当前使用率，并根据所述当前使用率确定当前网络状态，以根据所述当前网络状态实时对所述预设编码指标参数进行调整和/或对所述编码数据进行过滤；
包数据发送模块，包括：
当前发送速率确定单元，用于获取每次发送过程的发送信息数据，并根据所述发送信息数据确定当前发送速率；
网络适配模块，包括：
当前网络状态确定单元，用于根据所述当前使用率以及所述当前发送速率确定所述当前网络状态。
8.一种计算机设备，其特征在于，包括：
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-6中任一所述的自适应带宽的音视频传输方法。
9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-6中任一所述的自适应带宽的音视频传输方法。
CN202210186726.3A 2022-02-28 2022-02-28 自适应带宽的音视频传输方法、装置、计算机设备及介质 Active CN114640886B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210186726.3A CN114640886B (zh) 2022-02-28 2022-02-28 自适应带宽的音视频传输方法、装置、计算机设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210186726.3A CN114640886B (zh) 2022-02-28 2022-02-28 自适应带宽的音视频传输方法、装置、计算机设备及介质

Publications (2)

Publication Number Publication Date
CN114640886A CN114640886A (zh) 2022-06-17
CN114640886B true CN114640886B (zh) 2023-09-15

Family

ID=81947943

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210186726.3A Active CN114640886B (zh) 2022-02-28 2022-02-28 自适应带宽的音视频传输方法、装置、计算机设备及介质

Country Status (1)

Country Link
CN (1) CN114640886B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115103235B (zh) * 2022-06-21 2023-10-20 咪咕互动娱乐有限公司 数据传输方法、装置、设备与介质
CN115103216B (zh) * 2022-07-19 2024-07-05 康键信息技术（深圳）有限公司 直播数据的处理方法、装置、计算机设备及存储介质
CN116723152B (zh) * 2023-08-11 2023-10-20 国网江苏省电力有限公司电力科学研究院 一种智能配电变压器快检装置的数据传输方法及系统
CN117241043B (zh) * 2023-11-10 2024-03-19 深圳中微电科技有限公司 视频硬件解码错误恢复的方法、系统及存储介质
CN118646930A (zh) * 2024-08-16 2024-09-13 浙江嗨皮网络科技有限公司 基于网络信号强度的视频背景处理方法、系统及存储介质

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010012155A1 (zh) * 2008-07-31 2010-02-04 中兴通讯股份有限公司 移动多媒体广播终端自适应调整接收速率缓冲播放的方法
CN104486688A (zh) * 2014-12-31 2015-04-01 深圳市华宝电子科技有限公司 一种车载视频传输方法及装置
WO2016101240A1 (zh) * 2014-12-23 2016-06-30 深圳Tcl数字技术有限公司 媒体数据播放的方法及终端
CN105744342A (zh) * 2016-01-28 2016-07-06 腾讯科技（深圳）有限公司 移动终端的数据传输方法和装置
CN108495142A (zh) * 2018-04-11 2018-09-04 腾讯科技（深圳）有限公司 视频编码方法及装置
WO2019242620A1 (zh) * 2018-06-21 2019-12-26 深圳市道通智能航空技术有限公司 数据传输控制方法、信息发送端、接收端及飞行器图传系统
CN110769296A (zh) * 2019-10-30 2020-02-07 杭州叙简科技股份有限公司 一种传输时基于本地缓存的视频码率自适应调节方式
CN111225209A (zh) * 2018-11-23 2020-06-02 北京字节跳动网络技术有限公司 视频数据推流方法、装置、终端及存储介质
CN111294634A (zh) * 2020-02-27 2020-06-16 腾讯科技（深圳）有限公司 直播方法、装置、系统、设备及计算机可读存储介质
WO2021143732A1 (zh) * 2020-01-17 2021-07-22 北京达佳互联信息技术有限公司 视频播放方法及装置
CN113453004A (zh) * 2021-06-28 2021-09-28 苏州科达科技股份有限公司 视频编码速率调节方法、系统、设备及存储介质

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010012155A1 (zh) * 2008-07-31 2010-02-04 中兴通讯股份有限公司 移动多媒体广播终端自适应调整接收速率缓冲播放的方法
WO2016101240A1 (zh) * 2014-12-23 2016-06-30 深圳Tcl数字技术有限公司 媒体数据播放的方法及终端
CN104486688A (zh) * 2014-12-31 2015-04-01 深圳市华宝电子科技有限公司 一种车载视频传输方法及装置
CN105744342A (zh) * 2016-01-28 2016-07-06 腾讯科技（深圳）有限公司 移动终端的数据传输方法和装置
CN108495142A (zh) * 2018-04-11 2018-09-04 腾讯科技（深圳）有限公司 视频编码方法及装置
WO2019242620A1 (zh) * 2018-06-21 2019-12-26 深圳市道通智能航空技术有限公司 数据传输控制方法、信息发送端、接收端及飞行器图传系统
CN111225209A (zh) * 2018-11-23 2020-06-02 北京字节跳动网络技术有限公司 视频数据推流方法、装置、终端及存储介质
CN110769296A (zh) * 2019-10-30 2020-02-07 杭州叙简科技股份有限公司 一种传输时基于本地缓存的视频码率自适应调节方式
WO2021143732A1 (zh) * 2020-01-17 2021-07-22 北京达佳互联信息技术有限公司 视频播放方法及装置
CN111294634A (zh) * 2020-02-27 2020-06-16 腾讯科技（深圳）有限公司 直播方法、装置、系统、设备及计算机可读存储介质
CN113453004A (zh) * 2021-06-28 2021-09-28 苏州科达科技股份有限公司 视频编码速率调节方法、系统、设备及存储介质

Also Published As

Publication number Publication date
CN114640886A (zh) 2022-06-17

Similar Documents

Publication Publication Date Title
CN114640886B (zh) 自适应带宽的音视频传输方法、装置、计算机设备及介质
CN109587510B (zh) 一种直播方法、装置、设备和存储介质
CN104735470B (zh) 一种流媒体数据传输方法及装置
CN110121114B (zh) 发送流数据的方法及数据发送设备
CN104519325B (zh) 一种基于4g网络的无线视频监控系统自适应保障方法
US8542136B1 (en) Data compression system and related methods
CN110324643B (zh) 一种视频录制方法及系统
CN109587551B (zh) 一种流媒体直播卡顿的判断方法、装置、设备及存储介质
US20100168885A1 (en) Method and device for sending and playing streaming data
KR20160110472A (ko) 상이한 인코딩 파라미터를 이용해 인코딩되는 복수의 인코딩 스트리밍
US20220255866A1 (en) Audio/video communication method, terminal, server, computer device, and storage medium
US8499058B2 (en) File transfer system and file transfer method
CN113992967A (zh) 一种投屏数据传输方法、装置、电子设备及存储介质
WO2018039003A1 (en) Media buffering
EP1187460A2 (en) Image transmitting method and apparatus and image receiving method and apparatus
CN102325275A (zh) 一种流媒体播放的丢包方法、装置及服务器
CN104506287A (zh) 一种td-lte应急通信下的实时语音通信方法
CN101340590A (zh) 复用装置和复用方法
CN109862400B (zh) 一种流媒体传输方法、装置及其系统
CN109862386A (zh) 直播数据传输方法及装置
CN113573003A (zh) 一种基于弱网的音视频实时通信方法、装置以及设备
US20130128902A1 (en) Method and Apparatus for Compressing Communication Packets
CN102833524B (zh) 一种对本地音频及呼叫方音频同时录像的控制方法
CN103036808A (zh) 一种去除网络抖动的方法及系统
CN105187688A (zh) 一种对手机采集的实时视频和音频进行同步的方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 518,000 2301, 501, 401, Block A, Hongdian Building, No. 100, Huabao Road, Shansha Community, Pinghu Street, Longgang District, Shenzhen, Guangdong

Applicant after: SHENZHEN HONGDIAN TECHNOLOGIES Corp.

Address before: 518000 14 / F, 1501, 1502, 1503, 16 / F, building 1, building a, China Hisense science and Technology Park, No. 12, Ganli Road, Ganli Industrial Park, Buji street, Longgang District, Shenzhen City, Guangdong Province

Applicant before: SHENZHEN HONGDIAN TECHNOLOGIES Corp.

GR01 Patent grant
GR01 Patent grant