CN115396732B - 音视频数据包的传输方法、装置、电子设备及存储介质 - Google Patents

音视频数据包的传输方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN115396732B
CN115396732B CN202210964941.1A CN202210964941A CN115396732B CN 115396732 B CN115396732 B CN 115396732B CN 202210964941 A CN202210964941 A CN 202210964941A CN 115396732 B CN115396732 B CN 115396732B
Authority
CN
China
Prior art keywords
information
code rate
historical
initial
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210964941.1A
Other languages
English (en)
Other versions
CN115396732A (zh
Inventor
焦志民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Haiyi Zhixin Technology Co Ltd
Original Assignee
Shenzhen Haiyi Zhixin Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Haiyi Zhixin Technology Co Ltd filed Critical Shenzhen Haiyi Zhixin Technology Co Ltd
Priority to CN202210964941.1A priority Critical patent/CN115396732B/zh
Publication of CN115396732A publication Critical patent/CN115396732A/zh
Application granted granted Critical
Publication of CN115396732B publication Critical patent/CN115396732B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64784Data processing by the network
    • H04N21/64792Controlling the complexity of the content stream, e.g. by dropping packets
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本公开实施例涉及一种音视频数据包的传输方法、装置、电子设备及存储介质,上述方法包括:获取目标摄像头的出流参照信息;基于所述出流参照信息,确定所述目标摄像头的初始码率信息和初始分辨率信息,其中,所述初始码率信息表征所述目标摄像头开启后传输首个音视频数据包的初始码率,所述初始分辨率信息表征所述目标摄像头传输所述首个音视频数据包的初始分辨率;控制所述目标摄像头按照所述初始码率和所述初始分辨率传输所述首个音视频数据包。由此方法,可以基于出流参照信息,确定目标摄像头的初始码率信息和初始分辨率信息,在传输和播放上述初始码率和初始分辨率的音视频的场景下,可以提高所播放的音视频的速度和清晰度。

Description

音视频数据包的传输方法、装置、电子设备及存储介质
技术领域
本公开涉及计算机技术领域,尤其涉及一种音视频数据包的传输方法、装置、电子设备及存储介质。
背景技术
现有技术中,为了省电,一些摄像头平时往往处于断电休眠状态。此类摄像头上设置有PIR(Passive Infrared Detector,被动红外探测器)/雷达。在有人或物体靠近摄像头时,PIR/雷达会唤醒摄像头。摄像头唤醒后会出视频流,并将视频流传输到基站端或路由器等接收端,之后传给服务端进行存储。此外,在用户通过手机APP(Application,应用程序)查看摄像头的监控画面时,摄像头也会启动并出流。目前,摄像头启动后的初始码率、初始分辨率通常是固定的。
然而,摄像头以固定的初始码率、初始分辨率进行出流,如果初始码率、初始分辨率较高,则容易产生较大时延,较长时间后才能呈现出清晰的视频,且容易出现卡顿和花屏;如果初始码率、初始分辨率较低,则所呈现的视频清晰度较低。
发明内容
鉴于此,为解决上述部分或全部技术问题,本公开实施例提供一种音视频数据包的传输方法、装置、电子设备及存储介质。
第一方面,本公开实施例提供一种音视频数据包的传输方法,上述方法包括:
获取目标摄像头的出流参照信息;
基于所述出流参照信息,确定所述目标摄像头的初始码率信息和初始分辨率信息,其中,所述初始码率信息表征所述目标摄像头开启后传输首个音视频数据包的初始码率,所述初始分辨率信息表征所述目标摄像头传输所述首个音视频数据包的初始分辨率;
控制所述目标摄像头按照所述初始码率和所述初始分辨率传输所述首个音视频数据包。
在一个可能的实施方式中,所述基于所述出流参照信息,确定所述目标摄像头的初始码率信息和初始分辨率信息,包括:
基于所述出流参照信息,确定所述目标摄像头的初始码率信息;
基于所述初始码率信息,确定所述目标摄像头的初始分辨率信息。
在一个可能的实施方式中,所述出流参照信息包括历史码率信息、历史网络信息和当前网络信息;以及
所述基于所述出流参照信息,确定所述目标摄像头的初始码率信息,包括:
基于如下公式,确定所述目标摄像头的初始码率信息:v1=v2×(k1÷k2);其中,v1表征所述初始码率信息,v2表征所述历史码率信息,k1为针对所述当前网络信息表征的网络强度设置的第一系数,k2为针对所述历史网络信息表征的网络强度设置的第二系数。
在一个可能的实施方式中,所述历史码率信息采用如下方式确定:
获取所述目标摄像头发送目标音视频数据包的历史时延信息和实际码率信息;
基于所述历史时延信息和所述实际码率信息,确定所述历史码率信息。
在一个可能的实施方式中,所述基于所述历史时延信息和所述实际码率信息,确定所述历史码率信息,包括:
确定所述历史时延信息指示的目标时延时长;
从预先确定的时延时长区间集合中,确定包括所述目标时延时长的目标时延时长区间,其中,所述时延时长区间集合包括多个时延时长区间,所述时延时长区间集合中的每个时延时长区间对应一个预设系数;
将所述目标时延时长区间对应的预设系数与所述实际码率信息表征的码率的乘积,确定为所述历史码率信息。
在一个可能的实施方式中,所述历史时延信息通过如下方式确定:
获取所述目标摄像头的目标唤醒时刻;其中,所述目标唤醒时刻为:所述目标摄像头的各个历史唤醒时刻中,与所述目标摄像头发送所述目标音视频数据包的发送时刻最接近的历史唤醒时刻;所述各个历史唤醒时刻在所述发送时刻之前;
获取所述目标摄像头接收到确认信息的目标接收时刻,其中,所述确认信息经由所述目标音视频数据包的接收端发送至所述目标摄像头;
计算所述目标接收时刻与所述目标唤醒时刻之间的目标时长;
将所述目标时长与2的商,确定为所述历史时延信息。
在一个可能的实施方式中,所述基于所述初始码率信息,确定所述目标摄像头的初始分辨率信息,包括:
基于预先确定的码率和分辨率的对应关系,确定与所述初始码率信息表征的初始码率对应的至少一个分辨率;
将所述至少一个分辨率中数值最大的分辨率,确定为所述目标摄像头的初始分辨率信息。
第二方面,本公开实施例提供一种音视频数据包的传输装置,上述装置包括:
获取单元,用于获取目标摄像头的出流参照信息;
确定单元,用于基于所述出流参照信息,确定所述目标摄像头的初始码率信息和初始分辨率信息,其中,所述初始码率信息表征所述目标摄像头开启后传输首个音视频数据包的初始码率,所述初始分辨率信息表征所述目标摄像头传输所述首个音视频数据包的初始分辨率;
控制单元,用于控制所述目标摄像头按照所述初始码率和所述初始分辨率传输所述首个音视频数据包。
在一个可能的实施方式中,所述基于所述出流参照信息,确定所述目标摄像头的初始码率信息和初始分辨率信息,包括:
基于所述出流参照信息,确定所述目标摄像头的初始码率信息;
基于所述初始码率信息,确定所述目标摄像头的初始分辨率信息。
在一个可能的实施方式中,所述出流参照信息包括历史码率信息、历史网络信息和当前网络信息;以及
所述基于所述出流参照信息,确定所述目标摄像头的初始码率信息,包括:
基于如下公式,确定所述目标摄像头的初始码率信息:v1=v2×(k1÷k2);其中,v1表征所述初始码率信息,v2表征所述历史码率信息,k1为针对所述当前网络信息表征的网络强度设置的第一系数,k2为针对所述历史网络信息表征的网络强度设置的第二系数。
在一个可能的实施方式中,所述历史码率信息采用如下方式确定:
获取所述目标摄像头发送目标音视频数据包的历史时延信息和实际码率信息;
基于所述历史时延信息和所述实际码率信息,确定所述历史码率信息。
在一个可能的实施方式中,所述基于所述历史时延信息和所述实际码率信息,确定所述历史码率信息,包括:
确定所述历史时延信息指示的目标时延时长;
从预先确定的时延时长区间集合中,确定包括所述目标时延时长的目标时延时长区间,其中,所述时延时长区间集合包括多个时延时长区间,所述时延时长区间集合中的每个时延时长区间对应一个预设系数;
将所述目标时延时长区间对应的预设系数与所述实际码率信息表征的码率的乘积,确定为所述历史码率信息。
在一个可能的实施方式中,所述历史时延信息通过如下方式确定:
获取所述目标摄像头的目标唤醒时刻;其中,所述目标唤醒时刻为:所述目标摄像头的各个历史唤醒时刻中,与所述目标摄像头发送所述目标音视频数据包的发送时刻最接近的历史唤醒时刻;所述各个历史唤醒时刻在所述发送时刻之前;
获取所述目标摄像头接收到确认信息的目标接收时刻,其中,所述确认信息经由所述目标音视频数据包的接收端发送至所述目标摄像头;
计算所述目标接收时刻与所述目标唤醒时刻之间的目标时长;
将所述目标时长与2的商,确定为所述历史时延信息。
在一个可能的实施方式中,所述基于所述初始码率信息,确定所述目标摄像头的初始分辨率信息,包括:
基于预先确定的码率和分辨率的对应关系,确定与所述初始码率信息表征的初始码率对应的至少一个分辨率;
将所述至少一个分辨率中数值最大的分辨率,确定为所述目标摄像头的初始分辨率信息。
第三方面,本公开实施例提供一种电子设备,包括:
存储器,用于存储计算机程序;
处理器,用于执行上述存储器中存储的计算机程序,且上述计算机程序被执行时,实现本公开上述第一方面的音视频数据包的传输方法中任一实施例的方法。
第四方面,本公开实施例提供一种计算机可读存储介质,该计算机程序被处理器执行时,实现如上述第一方面的音视频数据包的传输方法中任一实施例的方法。
第五方面,本公开实施例提供一种计算机程序,该计算机程序包括计算机可读代码,当该计算机可读代码在设备上运行时,使得该设备中的处理器执行用于实现如上述第一方面的音视频数据包的传输方法中任一实施例的方法中各步骤的指令。
本公开实施例提供的音视频数据包的传输方法,可以获取目标摄像头的出流参照信息,之后,基于所述出流参照信息,确定所述目标摄像头的初始码率信息和初始分辨率信息,其中,所述初始码率信息表征所述目标摄像头开启后传输首个音视频数据包的初始码率,所述初始分辨率信息表征所述目标摄像头传输所述首个音视频数据包的初始分辨率,然后,控制所述目标摄像头按照所述初始码率和所述初始分辨率传输所述首个音视频数据包。由此方法,可以基于出流参照信息,确定目标摄像头的初始码率信息和初始分辨率信息,在传输和播放上述初始码率和初始分辨率的音视频的场景下,可以提高所播放的音视频的速度和清晰度。
附图说明
图1为本公开实施例提供的一种音视频数据包的传输方法的流程示意图;
图2为本公开实施例提供的另一种音视频数据包的传输方法的流程示意图;
图3为本公开实施例提供的又一种音视频数据包的传输方法的流程示意图;
图4为本公开实施例提供的一种音视频数据包的传输装置的结构示意图;
图5为本公开实施例提供的一种电子设备的结构示意图。
具体实施方式
现在将参照附图来详细描述本公开的各种示例性实施例。应注意到:除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值并不限制本公开的范围。
本领域技术人员可以理解,本公开实施例中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等对象,既不代表任何特定技术含义,也不表示它们之间的逻辑顺序。
还应理解,在本实施例中,“多个”可以指两个或两个以上,“至少一个”可以指一个、两个或两个以上。
还应理解,对于本公开实施例中提及的任一部件、数据或结构,在没有明确限定或者在前后文给出相反启示的情况下,一般可以理解为一个或多个。
另外,本公开中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本公开中字符“/”,一般表示前后关联对象是一种“或”的关系。
还应理解,本公开对各个实施例的描述着重强调各个实施例之间的不同之处,其相同或相似之处可以相互参考,为了简洁,不再一一赘述。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本公开及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,上述技术、方法和设备应当被视为说明书的一部分。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
需要说明的是,在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。为便于对本公开实施例的理解,下面将参考附图并结合实施例来详细说明本公开。显然,所描述的实施例是本公开一部分实施例,而不是全部的实施例。基于本公开中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本公开保护的范围。
图1为本公开实施例提供的一种音视频数据包的传输方法的流程示意图。如图1所示,该方法具体包括:
101、获取目标摄像头的出流参照信息。
在本实施例中,目标摄像头,可以是任一摄像头。
作为示例,该目标摄像头可以为监控摄像头。该目标摄像头中可以设置有PIR/雷达。当有人或物体靠近目标摄像头时,PIR/雷达可以唤醒目标摄像头。目标摄像头被唤醒后,可以拍摄视频,并将视频流以数据包的形式传输到基站或路由器等接收端,以及传输给服务端(例如云端)进行存储。此外,用户通过手机APP查看监控画面时,目标摄像头也可以启动、拍摄视频并出流。
上述出流参照信息,可以用于判断步骤102中所描述的目标摄像头的初始码率信息和初始分辨率信息。
作为示例,出流参照信息,可以包括以下至少一项:当前网络信息、历史网络信息、历史时延信息、历史初始码率、历史初始分辨率等等。
102、基于所述出流参照信息,确定所述目标摄像头的初始码率信息和初始分辨率信息,其中,所述初始码率信息表征所述目标摄像头开启后传输首个音视频数据包的初始码率,所述初始分辨率信息表征所述目标摄像头传输所述首个音视频数据包的初始分辨率。
在本实施例中,上述初始码率,可以是目标摄像头开启后传输首个音视频数据包的码率。
上述初始分辨率,可以是目标摄像头传输上述首个音视频数据包的分辨率。
作为示例,可以采用如下方式来执行上述步骤102:
第一步,基于出流参照信息,确定目标摄像头的初始码率信息。
例如,可以基于预先确定的第一关系表,从该第一关系表中确定出流参照信息关联的码率信息,从而获得目标摄像头的初始码率信息。其中,上述第一关系表存储有多个出流参照信息和多个码率信息之间的关联关系信息。
再例如,可以将出流参照信息输入至预先确定的码率确定模型,得到目标摄像头的初始码率信息。其中,码率确定模型可以是采用机器学习算法训练得到的神经网络模型。码率确定模型可以表征出流参照信息和目标摄像头的初始码率信息之间的对应关系。
第二步,基于出流参照信息,确定目标摄像头的初始分辨率信息。
例如,可以基于预先确定的第二关系表,从该第二关系表中确定出流参照信息关联的分辨率信息,从而获得目标摄像头的初始分辨率信息。其中,上述第二关系表存储有多个出流参照信息和多个分辨率信息之间的关联关系信息。
再例如,可以将出流参照信息输入至预先确定的第一分辨率确定模型,得到目标摄像头的初始分辨率信息。其中,第一分辨率确定模型可以是采用机器学习算法训练得到的神经网络模型。第一分辨率确定模型可以表征流参照信息和目标摄像头的初始分辨率信息之间的对应关系。
103、控制所述目标摄像头按照所述初始码率和所述初始分辨率传输所述首个音视频数据包。
在播放端(例如手机)接收到上述音视频数据包之后,可以按照上述初始码率和上述初始分辨率,播放音视频数据包对应的音视频。
本公开实施例提供的音视频数据包的传输方法,可以获取目标摄像头的出流参照信息,之后,基于所述出流参照信息,确定所述目标摄像头的初始码率信息和初始分辨率信息,其中,所述初始码率信息表征所述目标摄像头开启后传输首个音视频数据包的初始码率,所述初始分辨率信息表征所述目标摄像头传输所述首个音视频数据包的初始分辨率,然后,控制所述目标摄像头按照所述初始码率和所述初始分辨率传输所述首个音视频数据包。由此方法,可以基于出流参照信息,确定目标摄像头的初始码率信息和初始分辨率信息,在传输和播放上述初始码率和初始分辨率的音视频的场景下,可以提高所播放的音视频的速度和清晰度。
图2为本公开实施例提供的另一种音视频数据包的传输方法的流程示意图。如图2所示,该方法具体包括:
201、获取目标摄像头的出流参照信息。
在本实施例中,步骤201与图1对应实施例中的步骤101基本一致,这里不再赘述。
202、基于所述出流参照信息,确定所述目标摄像头的初始码率信息,其中,所述初始码率信息表征所述目标摄像头开启后传输首个音视频数据包的初始码率。
在本实施例中,上述初始码率,可以是目标摄像头开启后传输首个音视频数据包的码率。
作为示例,可以基于预先确定的第一关系表,从该第一关系表中确定出流参照信息关联的码率信息,从而获得目标摄像头的初始码率信息。其中,上述第一关系表存储有多个出流参照信息和多个码率信息之间的关联关系信息。
作为又一示例,可以将出流参照信息输入至预先确定的码率确定模型,得到目标摄像头的初始码率信息。其中,码率确定模型可以是采用机器学习算法训练得到的神经网络模型。码率确定模型可以表征出流参照信息和目标摄像头的初始码率信息之间的对应关系。
在本实施例的一些可选的实现方式中,所述出流参照信息包括历史码率信息、历史网络信息和当前网络信息。
在此基础上,还可以采用如下公式一,来确定所述目标摄像头的初始码率信息:
v1=v2×(k1÷k2)
公式一
其中,v1表征所述初始码率信息。v2表征所述历史码率信息。k1为针对所述当前网络信息表征的网络强度设置的第一系数。k2为针对所述历史网络信息表征的网络强度设置的第二系数。
第一系数,可以是针对当前网络信息表征的网络强度设置的系数。第一系数,可以经由预先确定的、表征网络强度和第一系数的对应关系的关系表或者公式来确定。
第二系数,可以是针对历史网络信息表征的网络强度设置的系数。第二系数,可以经由预先确定的、表征网络强度和第二系数的对应关系的关系表或者公式来确定。
网络强度可以采用数值或等级(例如强、中、弱)表征。
历史码率信息,可以表征目标摄像头在历史时间段内开启后,传输首个音视频数据包的码率。作为示例,历史码率信息,可以基于目标摄像头在历史时间段内开启后,传输首个音视频数据包的实际码率确定。例如,历史码率信息,可以是目标摄像头在历史时间段内开启后传输首个音视频数据包的码率。也即目标摄像头发送首个音视频数据包的实际码率。
首个音视频数据包,也即目标摄像头开启后,该目标摄像头传输的第一个音视频数据包。
实践中,目标摄像头可以被多次开启。每次开启后,其首先传输的音视频数据包为首个音视频数据包。
此外,历史网络信息、历史码率信息可以对应同一首个音视频数据包。历史网络信息与首个音视频数据包的对应关系为:目标摄像头在该历史网络信息表征的网络强度下,传输该首个音视频数据包。历史码率信息与首个音视频数据包的对应关系为:目标摄像头按照该历史码率信息表征的码率,传输该首个音视频数据包。
历史网络信息、历史码率信息可以对应的历史时期,可以随当前时间而改变。作为示例,历史网络信息、历史码率信息可以对应在当前时间之前的7天内的历史时期。历史网络信息、历史码率信息可以分别经由对上述历史时期内的多个网络强度、多个码率取平均值而获得;也可以首先分别剔除对上述历史时期内的多个网络强度、多个码率中的具有较大偏差的数据之后,再求平均值而获得。
可以理解,上述可选的实现方式中,可以采用历史码率信息、当前网络信息和历史网络信息,来确定初始码率信息,这样,结合历史数据和当前网络环境,可以更准确地确定出目标摄像头开启后传输首个音视频数据包的初始码率,在传输和播放上述初始码率和初始分辨率的音视频的场景下,进一步提高了所播放的音视频的速度和清晰度。
在上述可选的实现方式中的一些应用场景下,历史码率信息还可以采用如下方式确定:
首先,获取所述目标摄像头发送目标音视频数据包的历史时延信息和实际码率信息。
其中,目标音视频数据包,可以是任一音视频数据包。作为示例,音视频数据包可以是开启目标摄像头之后,该目标摄像头传输的首个音视频数据包。
历史时延信息,可以表征目标摄像头发送目标音视频数据包的时延。
实际码率信息,可以表征目标摄像头发送目标音视频数据包的码率。
之后,基于所述历史时延信息和所述实际码率信息,确定所述历史码率信息。
作为示例,可以将历史时延信息和实际码率信息输入至预先训练的历史码率确定模型,得到历史码率信息。其中,历史码率确定模型可以是采用机器学习算法训练得到的神经网络模型。历史码率确定模型可以表征历史时延信息和实际码率信息,以及历史码率信息之间的对应关系。
可以理解,上述应用场景中,基于历史时延信息和实际码率信息来确定历史码率信息,进而基于历史信息来确定目标摄像头的初始码率信息和初始分辨率信息,这样,可以结合历史时延信息和实际码率信息,更准确地确定出目标摄像头的初始码率和初始分辨率,在传输和播放上述初始码率和初始分辨率的音视频的场景下,进一步提高了所播放的音视频的速度和清晰度。
在上述应用场景中的一些情况下,可以采用如下方式,来基于所述历史时延信息和所述实际码率信息,确定所述历史码率信息:
首先,确定所述历史时延信息指示的目标时延时长。其中,目标时延时长,可以表征历史时延信息指示的时延时长。
之后,从预先确定的时延时长区间集合中,确定包括所述目标时延时长的目标时延时长区间。
其中,所述时延时长区间集合包括多个时延时长区间。所述时延时长区间集合中的每个时延时长区间对应一个预设系数。
这里,各个时延时长区间对应的各个预设系数,可以是大于0且小于或等于1的数值。
目标时延时长区间,可以是时延时长区间集合中,包括目标时延时长的时延时长区间。
然后,将所述目标时延时长区间对应的预设系数与所述实际码率信息表征的码率的乘积,确定为所述历史码率信息。
可以理解,上述情况下,基于预设系数和实际码率信息,来确定历史码率信息,可以更准确地确定出目标摄像头的初始码率和初始分辨率,在传输和播放上述初始码率和初始分辨率的音视频的场景下,进一步提高了所播放的音视频的速度和清晰度。
在上述应用场景中的一些情况下,所述历史时延信息通过如下方式确定:
首先,获取所述目标摄像头的目标唤醒时刻。
其中,所述目标唤醒时刻为:所述目标摄像头的各个历史唤醒时刻中,与所述目标摄像头发送所述目标音视频数据包的发送时刻最接近的历史唤醒时刻。所述各个历史唤醒时刻在所述发送时刻之前。
之后,获取所述目标摄像头接收到确认信息的目标接收时刻。
其中,所述确认信息经由所述目标音视频数据包的接收端发送至所述目标摄像头。
目标接收时刻,可以是目标摄像头接收到确认信息的时刻。
然后,计算所述目标接收时刻与所述目标唤醒时刻之间的目标时长。
其中,目标时长可以是目标接收时刻与目标唤醒时刻之间的时长。
最后,将所述目标时长与2的商,确定为所述历史时延信息。
可以理解,上述情况下,基于目标唤醒时刻和目标接收时刻,来确定历史时延信息,可以提高确定历史时延信息的准确度。
203、基于所述初始码率信息,确定所述目标摄像头的初始分辨率信息,其中,所述初始分辨率信息表征所述目标摄像头传输所述首个音视频数据包的初始分辨率。
在本实施例中,上述初始分辨率,可以是目标摄像头传输上述首个音视频数据包的分辨率。
作为示例,可以基于预先确定的第三关系表,从该第三关系表中确定初始码率信息关联的分辨率信息,从而获得目标摄像头的初始分辨率信息。其中,上述第三关系表存储有多个码率信息和多个分辨率信息之间的关联关系信息。
作为又一示例,可以将初始码率信息输入至预先确定的第二分辨率确定模型,得到目标摄像头的初始分辨率信息。其中,第二分辨率确定模型可以是采用机器学习算法训练得到的神经网络模型。上述第二分辨率确定模型可以表征初始码率信息和目标摄像头的初始分辨率信息之间对应关系。
204、控制所述目标摄像头按照所述初始码率和所述初始分辨率传输所述首个音视频数据包。
在本实施例中,步骤204与图1对应实施例中的步骤103基本一致,这里不再赘述。
需要说明的是,除以上所记载的内容之外,本实施例还可以包括与图1对应的实施例中所描述的技术特征,进而实现图1所示音视频数据包的传输方法的技术效果,具体请参照图1相关描述,为简洁描述,在此不作赘述。
本公开实施例提供的音视频数据包的传输方法,可以基于出流参照信息,确定目标摄像头的初始码率,进而基于初始码率,确定目标摄像头的初始分辨率,在传输和播放上述初始码率和初始分辨率的音视频的场景下,进一步提高了所播放的音视频的速度和清晰度。
图3为本公开实施例提供的又一种音视频数据包的传输方法的流程示意图。本方法可以应用于智能手机、笔记本电脑、台式电脑、便携式计算机、服务器等一个或多个电子设备上。此外,本方法的执行主体可以是硬件,也可以是软件。当上述执行主体为硬件时,该执行主体可以为上述电子设备中的一个或多个。例如,单个电子设备可以执行本方法,或者,多个电子设备可以彼此配合来执行本方法。当上述执行主体为软件时,本方法可以实现成多个软件或软件模块,也可以实现成单个软件或软件模块。在此不作具体限定。
具体而言,如图3所示,该方法具体包括:
301、获取目标摄像头的出流参照信息。
在本实施例中,步骤301与图1对应实施例中的步骤101基本一致,这里不再赘述。
302、基于所述出流参照信息,确定所述目标摄像头的初始码率信息,其中,所述初始码率信息表征所述目标摄像头开启后传输首个音视频数据包的初始码率。
在本实施例中,步骤302与图2对应实施例中的步骤202基本一致,这里不再赘述。
303、基于预先确定的码率和分辨率的对应关系,确定与所述初始码率信息表征的初始码率对应的至少一个分辨率。
在本实施例中,预先确定的码率和分辨率的对应关系中,一个码率可以对应一个或多个分辨率。
304、将所述至少一个分辨率中数值最大的分辨率,确定为所述目标摄像头的初始分辨率信息,其中,所述初始分辨率表征所述目标摄像头传输所述首个音视频数据包的分辨率。
305、控制所述目标摄像头按照所述初始码率和所述初始分辨率传输所述首个音视频数据包。
在本实施例中,步骤305与图1对应实施例中的步骤103基本一致,这里不再赘述。
下面对本公开实施例进行示例性说明,但需要注意的是,本公开实施例可以具有以下所描述的特征,但以下描述并不构成对本公开实施例保护范围的限定。
摄像头(也即上述目标摄像头)在出厂时,可以默认一个初始的分辨率和码率值。每次出流后,摄像头可以根据实际传输情况,对分辨率和码率进行调整,最终稳定在某一个值。
设备(例如上述目标摄像头,或者,与上述目标摄像头通信连接的电子设备)可以将每次出流后稳定下来的分辨率(也即上述历史分辨率信息)和码率值(也即上述历史码率信息)、网络强度,以及出流时延等数据记录下来。后面摄像头在出流时的初始分辨率(也即上述初始分辨率信息)和码率值(也即上述初始码率信息)基于该设备的历史出流的分辨率和码率值网络强度,以及出流时延进行系数化,最终确定出该摄像头的初始分辨率和码率值。系数化时,对应分辨率和时延有对应的权重,以达到该摄像头在用户的当前环境下能得到最佳的视频图像体验。同一款机型,不同设备在不同的场景下对应的初始码率值都是不一样。
其中,对应的系数(包括上述第一系数、第二系数),根据当前设备的网络信号强度值(包括上述历史网络信息表征的网络强度、当前网络信息表征的网络强度)来设定。作为示例,网络信号强度值可以分为-40以上、[-41,-50]、[-51,60]、[-61,-70]、[-71,-80]、-81以上等档位,每个档位的系数值分别为k1、k2、k3、k4、k5、k6,其中,1≥k1>k2>k3>k4>k5>k6>0。上述网络信号强度值的单位为dbm(decibel relative to one milliwatt,分贝毫瓦)。信号强度负得越小信号越强。
如果设备记录的历史出流对应稳定下来的分辨率和码率所对应的网络信号,与当前本次出流的网络信号都属于同一档位。那么,本次出流的系数为该档位所对应的系数,也即上述第一系数等于上述第二系数。如果网络信号不在同一个档位,例如本次出流所对应的信号强度档位比之前历史的出流档位要强(例如本次对应档位-40以上、历史对应档位[-41,-50]),那么,历史出流所对应的网络信号强度档位所对应的系数(也即上述第二系数)为k2,对应的码率值(也即上述历史码率信息)为v2,而本次所对应的为系数(也即上述第一系数)为k1,则本次出流的码率值(也即上述初始码率信息)v1=v2×(k1÷k2)。
之后,可以根据预先确定的对应关系表,来获得分辨率,也即上述初始分辨率信息。
这里,可以采用如下方式,来统计历史的出流分辨率(也即上述历史分辨率信息)和码率值(也即上述历史码率信息):
在统计周期里面(例如,7天内的出流数据作为一个统计周期,用户设备安装后前面的时间因为历史出流次数不够多,数据精度在平均后可能会有一定偏差,但随着用户的使用时间加长,出流次数增多后,对于出流的精度值会越来越准),在计算之前,需要排除掉明显有较大偏差的数值,排除掉离平均数偏差较大的大值和小值,然后再进行统计,随着用户使用时间加长,能达到设备记录的历史出流的平均分辨率和平均码率值,可以作为本次出流的分辨率和码率值的计算依据。由此,设备在首次出流时就能达到最清晰最流畅的视频效果。
另外,还有一个对出流时延的考虑。实践中,出流时延(也即上述历史时延信息)如果在0至4秒以内,则通常在用户可接受的范围内;4至6秒的时延,对用户的体验会有一些影响;6秒以上用户体验就会比较差。
设备启动出流后,音视频数据包发送到路由器或基站端等接收端后,路由器端或基站端再传输到服务端(例如云端),并且由服务端发送到手机APP端的时间是网络传输的时间,这段网络传输时间由网络状态确定,不受本方案技术实现影响,所以本方案中所说的出流时延定义为设备主控芯片开始唤醒的时间到路由器或基站端收到首个音视频数据包的时间,具体说明如下:
出流时延的时间计算为:设备PIR/雷达触发后开始唤醒主控芯片的时间点记为t0(也即上述目标唤醒时刻),摄像头开始往外发送音视频数据包时首个音视频数据包开始发送的时间记为t1(也即上述发送时刻),摄像头端收到发送到基站端或无线路由器端的音视频流数据包的首次回复确认信息的时间记为t2(也即上述目标接收时刻),那么出流时延T=[(t1-t0)+(t2-t1)]÷2。
因为设备每次出流的时延设备都会记录下来。当上述基于历史出流码率/分辨率和出流时的网络信号确定的分辨率和码率值在某一档位时,而对应历史出流的时间延时情况,在该档位值的出流时延在0至4秒以内,那么该档位对应的系数就不做系数化处理,直接进行出流;如果该档位的出流时延在4至6秒的范围,那么该档位就做一个系数化处理。
在上述示例中,设备通过记录历史出流后稳定下来的分辨率值和码率值,来对应给设备确定一个最佳体验的初始码率值,已达到视频流畅和清晰的最佳效果。而不是当前业界中同一款产品都是一致的初始码率值。另外,当前业界的做法是出流的分辨率和码率需要经过一段时间才能稳定下来,需要耗时较长,在这段时间里面用户体验不到流畅、清晰的视频,而以上方案可以让设备出流时即为最佳的体验。此外,上述方案可以基于设备实际安装环境,基于设备的历史出流情况(出流后稳定下来的码率、分辨率和出流时延等指标)来进行设置出流初始值,以达到在设备出流时就是设备在对应环境中的最佳用户体验效果。
需要说明的是,除以上所记载的内容之外,本实施例还可以包括与图1和/或图2对应的实施例中所描述的技术特征,进而实现图1和/或图2所示音视频数据包的传输方法的技术效果,具体请参照图1和/或图2相关描述,为简洁描述,在此不作赘述。
本公开实施例提供的音视频数据包的传输方法,在初始码率对应多个分辨率的情况下,将数值最大的分辨率确定为目标摄像头的初始分辨率信息,在播放上述初始分辨率的音视频的场景下,进一步提高了所播放的音视频的清晰度。
图4为本公开实施例提供的一种音视频数据包的传输装置的结构示意图。具体包括:
获取单元401,用于获取目标摄像头的出流参照信息;
确定单元402,用于基于所述出流参照信息,确定所述目标摄像头的初始码率信息和初始分辨率信息,其中,所述初始码率信息表征所述目标摄像头开启后传输首个音视频数据包的初始码率,所述初始分辨率信息表征所述目标摄像头传输所述首个音视频数据包的初始分辨率;
控制单元403,用于控制所述目标摄像头按照所述初始码率和所述初始分辨率传输所述首个音视频数据包。
在一个可能的实施方式中,所述基于所述出流参照信息,确定所述目标摄像头的初始码率信息和初始分辨率信息,包括:
基于所述出流参照信息,确定所述目标摄像头的初始码率信息;
基于所述初始码率信息,确定所述目标摄像头的初始分辨率信息。
在一个可能的实施方式中,所述出流参照信息包括历史码率信息、历史网络信息和当前网络信息;以及
所述基于所述出流参照信息,确定所述目标摄像头的初始码率信息,包括:
基于如下公式,确定所述目标摄像头的初始码率信息:v1=v2×(k1÷k2);其中,v1表征所述初始码率信息,v2表征所述历史码率信息,k1为针对所述当前网络信息表征的网络强度设置的第一系数,k2为针对所述历史网络信息表征的网络强度设置的第二系数。
在一个可能的实施方式中,所述历史码率信息采用如下方式确定:
获取所述目标摄像头发送目标音视频数据包的历史时延信息和实际码率信息;
基于所述历史时延信息和所述实际码率信息,确定所述历史码率信息。
在一个可能的实施方式中,所述基于所述历史时延信息和所述实际码率信息,确定所述历史码率信息,包括:
确定所述历史时延信息指示的目标时延时长;
从预先确定的时延时长区间集合中,确定包括所述目标时延时长的目标时延时长区间,其中,所述时延时长区间集合包括多个时延时长区间,所述时延时长区间集合中的每个时延时长区间对应一个预设系数;
将所述目标时延时长区间对应的预设系数与所述实际码率信息表征的码率的乘积,确定为所述历史码率信息。
在一个可能的实施方式中,所述历史时延信息通过如下方式确定:
获取所述目标摄像头的目标唤醒时刻;其中,所述目标唤醒时刻为:所述目标摄像头的各个历史唤醒时刻中,与所述目标摄像头发送所述目标音视频数据包的发送时刻最接近的历史唤醒时刻;所述各个历史唤醒时刻在所述发送时刻之前;
获取所述目标摄像头接收到确认信息的目标接收时刻,其中,所述确认信息经由所述目标音视频数据包的接收端发送至所述目标摄像头;
计算所述目标接收时刻与所述目标唤醒时刻之间的目标时长;
将所述目标时长与2的商,确定为所述历史时延信息。
在一个可能的实施方式中,所述基于所述初始码率信息,确定所述目标摄像头的初始分辨率信息,包括:
基于预先确定的码率和分辨率的对应关系,确定与所述初始码率信息表征的初始码率对应的至少一个分辨率;
将所述至少一个分辨率中数值最大的分辨率,确定为所述目标摄像头的初始分辨率信息。
本实施例提供的音视频数据包的传输装置可以是如图4中所示的音视频数据包的传输装置,可执行如图1-3中音视频数据包的传输方法的所有步骤,进而实现图1-3所示音视频数据包的传输方法的技术效果,具体请参照图1-3相关描述,为简洁描述,在此不作赘述。
图5为本公开实施例提供的一种电子设备的结构示意图,图5所示的电子设备500包括:至少一个处理器501、存储器502、至少一个网络接口504和其他用户接口503。电子设备500中的各个组件通过总线系统505耦合在一起。可理解,总线系统505用于实现这些组件之间的连接通信。总线系统505除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图5中将各种总线都标为总线系统505。
其中,用户接口503可以包括显示器、键盘或者点击设备(例如,鼠标,轨迹球(trackball)、触感板或者触摸屏等。
可以理解,本公开实施例中的存储器502可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM,SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM,DRRAM)。本文描述的存储器502旨在包括但不限于这些和任意其它适合类型的存储器。
在一些实施方式中,存储器502存储了如下的元素,可执行单元或者数据结构,或者他们的子集,或者他们的扩展集:操作系统5021和应用程序5022。
其中,操作系统5021,包含各种系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序5022,包含各种应用程序,例如媒体播放器(Media Player)、浏览器(Browser)等,用于实现各种应用业务。实现本公开实施例方法的程序可以包含在应用程序5022中。
在本实施例中,通过调用存储器502存储的程序或指令,具体的,可以是应用程序5022中存储的程序或指令,处理器501用于执行各方法实施例所提供的方法步骤,例如包括:
获取目标摄像头的出流参照信息;
基于所述出流参照信息,确定所述目标摄像头的初始码率信息和初始分辨率信息,其中,所述初始码率信息表征所述目标摄像头开启后传输首个音视频数据包的初始码率,所述初始分辨率信息表征所述目标摄像头传输所述首个音视频数据包的初始分辨率;
控制所述目标摄像头按照所述初始码率和所述初始分辨率传输所述首个音视频数据包。
上述本公开实施例揭示的方法可以应用于处理器501中,或者由处理器501实现。处理器501可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器501中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器501可以是通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(FieldProgrammable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本公开实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本公开实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件单元组合执行完成。软件单元可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器502,处理器501读取存储器502中的信息,结合其硬件完成上述方法的步骤。
可以理解的是,本文描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现,处理单元可以实现在一个或多个专用集成电路(ApplicationSpecific Integrated Circuits,ASIC)、数字信号处理器(Digital Signal Processing,DSP)、数字信号处理设备(DSPDevice,DSPD)、可编程逻辑设备(Programmable LogicDevice,PLD)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本公开的上述功能的其它电子单元或其组合中。
对于软件实现,可通过执行本文上述功能的单元来实现本文上述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
本实施例提供的电子设备可以是如图5中所示的电子设备,可执行如图1-3中音视频数据包的传输方法的所有步骤,进而实现图1-3所示音视频数据包的传输方法的技术效果,具体请参照图1-3相关描述,为简洁描述,在此不作赘述。
本公开实施例还提供了一种存储介质(计算机可读存储介质)。这里的存储介质存储有一个或者多个程序。其中,存储介质可以包括易失性存储器,例如随机存取存储器;存储器也可以包括非易失性存储器,例如只读存储器、快闪存储器、硬盘或固态硬盘;存储器还可以包括上述种类的存储器的组合。
当存储介质中一个或者多个程序可被一个或者多个处理器执行,以实现上述在电子设备侧执行的音视频数据包的传输方法。
上述处理器用于执行存储器中存储的音视频数据包的传输程序,以实现以下在电子设备侧执行的音视频数据包的传输方法的步骤:
获取目标摄像头的出流参照信息;
基于所述出流参照信息,确定所述目标摄像头的初始码率信息和初始分辨率信息,其中,所述初始码率信息表征所述目标摄像头开启后传输首个音视频数据包的初始码率,所述初始分辨率信息表征所述目标摄像头传输所述首个音视频数据包的初始分辨率;
控制所述目标摄像头按照所述初始码率和所述初始分辨率传输所述首个音视频数据包。
专业人员应该还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本公开的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上所述的具体实施方式,对本公开的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本公开的具体实施方式而已,并不用于限定本公开的保护范围,凡在本公开的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本公开的保护范围之内。

Claims (8)

1.一种音视频数据包的传输方法,其特征在于,所述方法包括:
获取目标摄像头的出流参照信息,其中,所述出流参照信息包括当前网络信息,以及所述目标摄像头历史时间出流后稳定下来的历史码率信息和历史网络信息;
基于如下公式,确定所述目标摄像头的初始码率信息:v1=v2×(k1÷k2);其中,v1表征所述初始码率信息,v2表征所述历史码率信息,k1为针对所述当前网络信息表征的网络强度设置的第一系数,k2为针对所述历史网络信息表征的网络强度设置的第二系数,所述初始码率信息表征所述目标摄像头开启后传输首个音视频数据包的初始码率,所述第一系数与所述当前网络信息表征的网络强度呈正相关,所述第二系数与所述历史网络信息表征的网络强度呈正相关;
基于所述初始码率信息,确定所述目标摄像头的初始分辨率信息,其中,所述初始分辨率信息表征所述目标摄像头传输所述首个音视频数据包的初始分辨率;
控制所述目标摄像头按照所述初始码率和所述初始分辨率传输所述首个音视频数据包。
2.根据权利要求1所述的方法,其特征在于,所述历史码率信息采用如下方式确定:
获取所述目标摄像头发送目标音视频数据包的历史时延信息和实际码率信息;
基于所述历史时延信息和所述实际码率信息,确定所述历史码率信息。
3.根据权利要求2所述的方法,其特征在于,所述基于所述历史时延信息和所述实际码率信息,确定所述历史码率信息,包括:
确定所述历史时延信息指示的目标时延时长;
从预先确定的时延时长区间集合中,确定包括所述目标时延时长的目标时延时长区间,其中,所述时延时长区间集合包括多个时延时长区间,所述时延时长区间集合中的每个时延时长区间对应一个预设系数;
将所述目标时延时长区间对应的预设系数与所述实际码率信息表征的码率的乘积,确定为所述历史码率信息。
4.根据权利要求3所述的方法,其特征在于,所述历史时延信息通过如下方式确定:
获取所述目标摄像头的目标唤醒时刻;其中,所述目标唤醒时刻为:所述目标摄像头的各个历史唤醒时刻中,与所述目标摄像头发送所述目标音视频数据包的发送时刻最接近的历史唤醒时刻;所述各个历史唤醒时刻在所述发送时刻之前;
获取所述目标摄像头接收到确认信息的目标接收时刻,其中,所述确认信息经由所述目标音视频数据包的接收端发送至所述目标摄像头;
计算所述目标接收时刻与所述目标唤醒时刻之间的目标时长;
将所述目标时长与2的商,确定为所述历史时延信息。
5.根据权利要求1-4之一所述的方法,其特征在于,所述基于所述初始码率信息,确定所述目标摄像头的初始分辨率信息,包括:
基于预先确定的码率和分辨率的对应关系,确定与所述初始码率信息表征的初始码率对应的至少一个分辨率;
将所述至少一个分辨率中数值最大的分辨率,确定为所述目标摄像头的初始分辨率信息。
6.一种音视频数据包的传输装置,其特征在于,所述装置包括:
获取单元,用于获取目标摄像头的出流参照信息,其中,所述出流参照信息包括当前网络信息,以及所述目标摄像头历史时间出流后稳定下来的历史码率信息和历史网络信息;
确定单元,用于基于如下公式,确定所述目标摄像头的初始码率信息:v1=v2×(k1÷k2);其中,v1表征所述初始码率信息,v2表征所述历史码率信息,k1为针对所述当前网络信息表征的网络强度设置的第一系数,k2为针对所述历史网络信息表征的网络强度设置的第二系数,所述初始码率信息表征所述目标摄像头开启后传输首个音视频数据包的初始码率,所述第一系数与所述当前网络信息表征的网络强度呈正相关,所述第二系数与所述历史网络信息表征的网络强度呈正相关;基于所述初始码率信息,确定所述目标摄像头的初始分辨率信息,其中,所述初始分辨率信息表征所述目标摄像头传输所述首个音视频数据包的初始分辨率;
控制单元,用于控制所述目标摄像头按照所述初始码率和所述初始分辨率传输所述首个音视频数据包。
7.一种电子设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述存储器中存储的计算机程序,且所述计算机程序被执行时,实现上述权利要求1-5任一所述的方法。
8.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时,实现上述权利要求1-5任一所述的方法。
CN202210964941.1A 2022-08-11 2022-08-11 音视频数据包的传输方法、装置、电子设备及存储介质 Active CN115396732B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210964941.1A CN115396732B (zh) 2022-08-11 2022-08-11 音视频数据包的传输方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210964941.1A CN115396732B (zh) 2022-08-11 2022-08-11 音视频数据包的传输方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN115396732A CN115396732A (zh) 2022-11-25
CN115396732B true CN115396732B (zh) 2024-02-02

Family

ID=84119102

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210964941.1A Active CN115396732B (zh) 2022-08-11 2022-08-11 音视频数据包的传输方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN115396732B (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109041024A (zh) * 2018-08-14 2018-12-18 Oppo广东移动通信有限公司 码率优化方法、装置、电子设备以及存储介质
CN109788316A (zh) * 2019-02-27 2019-05-21 腾讯科技(深圳)有限公司 码率控制、视频转码方法与装置、计算机设备及存储介质
CN110662093A (zh) * 2019-10-17 2020-01-07 北京达佳互联信息技术有限公司 一种初始码率确定方法、装置、电子设备及存储介质
CN110996125A (zh) * 2019-11-18 2020-04-10 腾讯科技(深圳)有限公司 一种视频流的生成方法、装置、电子设备及存储介质
CN111464817A (zh) * 2020-03-12 2020-07-28 视联动力信息技术股份有限公司 码率控制方法、装置及可读存储介质
WO2020155963A1 (zh) * 2019-01-30 2020-08-06 上海哔哩哔哩科技有限公司 视频清晰度确定方法、系统、计算机设备及存储介质
CN112291620A (zh) * 2020-09-22 2021-01-29 北京邮电大学 视频播放方法、装置、电子设备及存储介质
CN112543366A (zh) * 2020-12-02 2021-03-23 北京五八信息技术有限公司 一种视频的播放方法和装置
WO2021143386A1 (zh) * 2020-01-17 2021-07-22 北京达佳互联信息技术有限公司 资源传输方法及终端
CN113518250A (zh) * 2020-08-07 2021-10-19 腾讯科技(深圳)有限公司 一种多媒体数据处理方法、装置、设备及可读存储介质
CN113938682A (zh) * 2020-06-29 2022-01-14 北京金山云网络技术有限公司 视频编码方法、装置和电子设备
WO2022105798A1 (zh) * 2020-11-18 2022-05-27 花瓣云科技有限公司 音视频的处理方法、装置及存储介质

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109041024A (zh) * 2018-08-14 2018-12-18 Oppo广东移动通信有限公司 码率优化方法、装置、电子设备以及存储介质
WO2020155963A1 (zh) * 2019-01-30 2020-08-06 上海哔哩哔哩科技有限公司 视频清晰度确定方法、系统、计算机设备及存储介质
CN109788316A (zh) * 2019-02-27 2019-05-21 腾讯科技(深圳)有限公司 码率控制、视频转码方法与装置、计算机设备及存储介质
CN110662093A (zh) * 2019-10-17 2020-01-07 北京达佳互联信息技术有限公司 一种初始码率确定方法、装置、电子设备及存储介质
CN110996125A (zh) * 2019-11-18 2020-04-10 腾讯科技(深圳)有限公司 一种视频流的生成方法、装置、电子设备及存储介质
WO2021143386A1 (zh) * 2020-01-17 2021-07-22 北京达佳互联信息技术有限公司 资源传输方法及终端
CN111464817A (zh) * 2020-03-12 2020-07-28 视联动力信息技术股份有限公司 码率控制方法、装置及可读存储介质
CN113938682A (zh) * 2020-06-29 2022-01-14 北京金山云网络技术有限公司 视频编码方法、装置和电子设备
CN113518250A (zh) * 2020-08-07 2021-10-19 腾讯科技(深圳)有限公司 一种多媒体数据处理方法、装置、设备及可读存储介质
CN112291620A (zh) * 2020-09-22 2021-01-29 北京邮电大学 视频播放方法、装置、电子设备及存储介质
WO2022105798A1 (zh) * 2020-11-18 2022-05-27 花瓣云科技有限公司 音视频的处理方法、装置及存储介质
CN112543366A (zh) * 2020-12-02 2021-03-23 北京五八信息技术有限公司 一种视频的播放方法和装置

Also Published As

Publication number Publication date
CN115396732A (zh) 2022-11-25

Similar Documents

Publication Publication Date Title
US11423653B2 (en) Systems and methods for generating media content
US11844136B2 (en) Discontinuous reception (DRX) parameter configuration method and device
CN114449282B (zh) 视频传输控制方法及装置、设备、存储介质
CN107943409B (zh) 触摸屏控制方法及装置
CN110827253A (zh) 一种目标检测模型的训练方法、装置及电子设备
WO2016074473A1 (zh) 路由器信号强度调节方法及装置
CN107608561B (zh) 触摸屏控制方法及装置
US9319630B2 (en) Method and device for video processing
EP3382527B1 (en) Method and apparatus for managing a shared storage system
CN110611829A (zh) 视频预加载的方法、装置、电子设备及存储介质
CN111327865B (zh) 视频传输方法、装置及设备
CN110890092B (zh) 唤醒控制方法及装置、计算机存储介质
CN110848164B (zh) 一种转速调节方法及其相关产品
CN109327716A (zh) 延迟控制方法、延迟控制装置和计算机可读存储介质
CN107633172B (zh) 一种恶意网页监测方法及电子设备
US11388459B2 (en) Method and apparatus for determining bandwidth, and electronic device and storage medium
CN115396732B (zh) 音视频数据包的传输方法、装置、电子设备及存储介质
CN106375809B (zh) 一种音量调节方法、装置及存储介质
CN113965517B (zh) 网络传输方法、装置、电子设备及存储介质
CN105955821B (zh) 预读方法及装置
CN106095637B (zh) 一种智能终端的控制方法、装置及智能终端
CN110581918B (zh) 一种语音设备及其控制方法、服务器和计算机存储介质
CN115278047A (zh) 拍摄方法、装置、电子设备和存储介质
US20150350217A1 (en) Method and system for allowing access to electronic devices
US20140292998A1 (en) Managing Use of Resources in Mobile Devices

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant