CN118158429A - 视频故障转移记录 - Google Patents
视频故障转移记录 Download PDFInfo
- Publication number
- CN118158429A CN118158429A CN202311622148.4A CN202311622148A CN118158429A CN 118158429 A CN118158429 A CN 118158429A CN 202311622148 A CN202311622148 A CN 202311622148A CN 118158429 A CN118158429 A CN 118158429A
- Authority
- CN
- China
- Prior art keywords
- encoded video
- video streams
- video stream
- bit rate
- communication network
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004891 communication Methods 0.000 claims abstract description 70
- 238000000034 method Methods 0.000 claims abstract description 36
- 238000012545 processing Methods 0.000 claims description 13
- 230000007423 decrease Effects 0.000 claims description 7
- 238000004590 computer program Methods 0.000 claims description 5
- 230000009467 reduction Effects 0.000 claims description 4
- 230000004044 response Effects 0.000 claims 2
- 230000005540 biological transmission Effects 0.000 description 7
- 230000000694 effects Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000006835 compression Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 230000003247 decreasing effect Effects 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 101500019086 Ustilago maydis P6 virus KP6 killer toxin subunit alpha Proteins 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000003705 background correction Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002045 lasting effect Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000000725 suspension Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
- H04N21/23103—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion using load balancing strategies, e.g. by placing or distributing content on different disks, different memories or different servers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/752—Media network packet handling adapting media to network capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234381—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2365—Multiplexing of several video streams
- H04N21/23655—Statistical multiplexing, e.g. by controlling the encoder to alter its bitrate to optimize the bandwidth utilization
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2402—Monitoring of the downstream path of the transmission network, e.g. bandwidth available
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0654—Management of faults, events, alarms or notifications using network fault recovery
- H04L41/0663—Performing the actions predefined by failover planning, e.g. switching to standby network elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0876—Network utilisation, e.g. volume of load or congestion level
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/10—Architectures or entities
- H04L65/1059—End-user terminal functionalities specially adapted for real-time communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/40—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass for recovering from a failure of a protocol instance or entity, e.g. service redundancy protocols, protocol state redundancy or protocol service redirection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
- H04N21/64784—Data processing by the network
- H04N21/64792—Controlling the complexity of the content stream, e.g. by dropping packets
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明总体涉及视频故障转移记录。具体地,公开了对在通信网络(114)上能够连接到接收器装置(116,118)的相机(100)中的视频流进行故障转移记录的方法,该方法包括:检测(S102)通信网络上的连接的带宽不足以以预定义比特率传输视频流,生成(S104)具有不同比特率的多个并行编码视频流,将多个并行编码视频流存储(S106)在相机能够访问的储存存储器上,检测到(S108)储存存储器的储存存储器使用超过存储器阈值,中止(S110)多个编码视频流中的一个编码视频流的存储,该编码视频流是多个编码视频流之中提供最高比特率的编码视频流,以及从储存存储器丢弃(S112)多个编码视频流中的一个编码视频流。
Description
技术领域
本发明总体涉及相机监视领域,并且尤其涉及用于视频流的故障转移记录方法。本发明进一步涉及相应的控制单元、相机和计算机程序。
背景技术
在各种相机监视应用中,相机捕获和编码视频流并且通过具有给定带宽的通信网络将编码的视频流传输到服务器或远程存储器。编码的视频流通常被在通信网络上连续地推送到存储器或接口,使得用户可以从远离相机位置的位置接近实时地观察捕获的视频流。
然而,如果跨通信网络的连接丢失,或带宽暂时大幅减小,则相机无法跨网络推送以一些比特率编码的视频流。
丢失连接的解决方案是在相机本地缓冲编码的视频流。一旦连接恢复,缓冲的视频流跨通信网络传输。然而,这需要相机上的本地存储器,并且这种类型的存储器,通常是SD卡或RAM,具有有限的容量。
因此,仍然存在当相机的通信网络上的连接丢失或大幅减小时,在处理相机中产生的视频数据方面的改进空间。
发明内容
鉴于现有技术的上述和其他缺点,本发明的目的是提供改进的相机视频流故障转移记录方法,其至少减轻现有技术的部分缺点。
因此,根据本发明的第一方面,提供了对在通信网络上能够连接到接收器装置的相机中的视频流进行故障转移记录的方法,该方法包括:检测到通信网络上的连接的带宽不足以以预定义比特率传输视频流,生成具有不同比特率的多个并行编码视频流,将多个并行编码视频流存储在相机能够访问的储存存储器上,检测到储存存储器的储存存储器使用超过存储器阈值,中止多个编码视频流中的一个编码视频流的存储,该多个编码视频流中的一个编码视频流是多个编码视频流之中提供最高比特率的编码视频流,并且从储存存储器丢弃多个编码视频流中的一个编码视频流。
本发明基于以下认识,即,通过以降低的比特率存储编码视频流,可以缓冲更长时间段的视频,以便一旦连接恢复,仍然可以传输丢失或降低连接持续时间的记录。更具体地,发明人实现了以不同比特率生成和存储多个并行视频流。一旦储存存储器已满,或者根据存储器阈值接近满,并行视频流中的一个或多个并行视频流被中止并且不再被存储,并且随后从储存存储器装置中被丢弃,这在储存存储器装置上提供了空闲存储空间以继续存储其他视频流。因此,即使储存存储器装置具有有限的存储容量,故障转移视频也可以在丢失连接的相对较长的持续时间内被存储。
视频流单独可观看,或在一些些实施方式中,需要与另一视频流组合,其中,该组合是可观看的。在视频流本身可观看的情况下,视频流本身提供了最高的比特率。
另一种可能的实施方式是,视频流是需要与另一个或多个视频流组合的视频流,以形成完整的可观看视频流,其中,该组合提供了最高的比特率。在这种情况下,需要被组合的是被丢弃的视频流。
视频流通常是随时间捕获的一组连续图像帧。连续的图像帧共同形成视频流。
相机能够访问的储存存储器装置可以是这种储存存储器装置:相机的内部存储器,诸如非易失性闪存,诸如安全数字(SD)卡。另一种可能的内部存储器是随机存取存储器(RAM)。然而,在其他开发中,储存存储器可以在相机外部,但是在相机附近的位置,例如经由诸如USB或网络电缆等数据传输电缆连接。
通信网络的带宽可以被定义为通信网络每单位时间可以传输的比特形式的当前容量。如果带宽的当前容量小于当前产生的编码视频流的比特率,则通信网络的带宽不足以传输视频流。
比特率是从相机捕获的视频流的图像帧中生成的每单位时间的比特数。比特可以在编码器中生成,该编码器根据诸如MP4等编码协议对捕获的图像帧进行编码。比特率直接或间接地表示每单位时间产生的比特数。
根据实施例,该方法可以包括检测到通信网络已恢复,并在通信网络上传输多个并行编码视频流中的一个或多个并行编码视频流。有利地,一旦跨通信网络的连接已恢复,则恢复传输,并且传输所存储的编码视频流中优选的一个或多个。优选地,传输提供最高质量或分辨率的视频流。这通常是导致最高比特率的单个视频流或视频流的组合。
根据实施例,方法可以包括检测到通信网络已恢复,确定恢复的通信链路的当前带宽,以及传输仍然存储的比特率视频流中的一个或多个比特率视频流,该一个或多个比特率视频流的组合不超过已恢复的通信链路的当前带宽。优选地,传输的一个或多个视频流将通信链路的带宽利用率最大化。
根据实施例,以递减的流间比特率生成多个并行编码视频流。因此,编码视频流的比特率是利用第一比特率大于第二比特率的比特率编码的,第二比特率大于第三比特率,等。比特率的降低例如可以是比特率的缩放。
在一个可能的实施例中,比特率的降低可以是并行视频流之间的减半缩放。
根据实施例,中止存储可以是中止存储当前最高比特率的视频流,并且其中,当前最高比特率的视频流被丢弃。这有利地释放了储存存储器上的大部分容量。
根据实施例,可以使用不同的图像分辨率或帧率或压缩程度对多个并行编码视频流进行编码。通常,改变图像分辨率或帧率或压缩中的任何一个或全部都将影响比特率。
根据实施例,多个并行编码视频流可以包括基本编码视频流和可以与基本编码视频流组合以形成比单独的基本编码视频流分辨率更高的视频流的一组增强编码视频流。编码视频流可以是本身完整的低分辨率视频流,用于传输和显示。一个或多个增强视频流与基本编码视频流组合,以提供更高分辨率的视频流。增强视频流本身无法生成有效的视频,而是必须与基本编码视频流相结合。
根据实施例,中止存储可以是中止增强编码视频流中的一个或多个增强编码视频流的存储,并且其中,增强编码视频流中的该一个或多个增强编码视频流被丢弃。因此,以这种方式,当与基本编码视频流组合时,提供最高比特率的视频流被丢弃,以留出空闲存储,用于继续存储其他增强编码视频流和基本编码视频流。
在实施例中,储存存储器阈值可以是储存存储器已满。因此,一旦储存存储器指示它已经达到其最大容量,则运行视频流的中止存储和丢弃。
为同一场景生成多个并行编码视频流。
可以基于当前实施方式选择并行视频流的数量,但优选至少为两个。在可能的实施方式中,并行视频流的数量是五个或更多,或者大约八到十个。
根据本发明的第二方面,提供了控制装置,用于执行第一方面的方法及其实施例。
本发明第二方面的其他实施例和效果与本发明第一方面的上述内容非常相似。
根据本发明的第三方面,提供了相机,包括用于存储编码视频流的储存存储器和在通信网络上与接收器装置通信的输入/输出接口,以及根据第二方面的控制单元。
相机可以是监视网络相机。
本发明第三方面的其他实施例和效果与本发明第一方面和第二方面的上述内容非常相似。
根据本发明的第四方面,提供了计算机程序产品,包括程序代码,该程序代码用于当由控制单元运行时,执行本文所述实施例中任一实施例的方法。
本发明第四方面的其他实施例和效果与本发明其他方面的上述内容非常相似。
在研究所附权利要求和以下描述时,本发明的其他特征和优点将变得显而易见。本领域技术人员认识到,在不脱离本发明的范围的情况下,可以组合本发明的不同特征来创建除下文描述的实施例之外的实施例。
附图说明
从以下详细说明和附图中,可以容易理解本发明的各个方面,包括其特定特征和优点,其中:
图1从概念上示出了本发明实施例的示例应用;
图2是根据本发明实施例的方法步骤的流程图;
图3是根据本发明实施例的方法步骤的流程图;
图4示出了根据本发明实施例的存储数据量和视频流数量的两个时间演进图;
图5示意性示出了可缩放视频;以及
图6是根据本发明实施例的控制单元和数据流的框图。
具体实施方式
下文将参考附图对本发明进行更全面的描述,附图中示出了本发明的当前优选实施例。然而,本发明可以以多种不同的形式实施,并且不应当被解释为限于本文阐述的实施例;相反,提供这些实施例是为了彻底和完整,并且向本领域技术人员充分传达本发明的范围。相同的附图标记始终指代相同的元件。
现在转向附图,具体地,转向图1,其示出了由图像采集装置200监视的场景1,图像采集装置200例如是网络相机,或更具体地网络监视相机。在场景1中,存在一组对象104a、104b,例如可以是停车场中的车辆和人106a-c。
相机200可以安装在建筑物上、电线杆上或任何其他合适的位置,具体视特定应用而定。此外,相机200可以是固定的相机或可移动的相机,诸如摇摄、俯仰和变焦,或者甚至是身体佩戴的相机。此外,相机200可以是可见光相机、红外(IR)敏感相机或热(长波长红外(LWIR))相机。此外,采用激光雷达和雷达功能的图像采集装置也是可能的。
相机200通过捕获形成场景1的视频流的图像帧来连续地监视场景1。相机200的视场内的场景1在本文被例示为包括对象104a-b和人106a-c。相机200可以通过连接到通信网络114的通信链路112将视频流传输到客户端116或服务器118,通信网络114具有传输容量,即带宽,视频流可以在客户端116或服务器118被存储和/或被用户作为实况流观看。
相机200进一步包括图像捕获模块202、图像处理管线204、编码器206、储存存储器装置208和输入输出接口210,输入输出接口210配置成相机200和通信网络114之间经由通信链路112的通信接口。
图像捕获模块202包括各种部件,诸如透镜和图像传感器,其中,透镜适用于将图像投影到包括多个像素的图像传感器上。
图像处理管线204配置成对从图像传感器接收的图像帧执行各种操作。这种操作可以包括滤波、去马赛克、颜色校正、用于消除空间和/或时间噪声的噪声滤波、用于消除例如桶形失真的影响的失真校正、全局和/或局部色调映射(例如使得能够对包含宽范围强度的场景进行成像)、变换(例如旋转)、平场校正(例如用于去除渐晕的影响)、应用覆盖(例如隐私屏蔽)、说明性文本等。然而,应当注意,这些操作中的一些操作,例如变换操作,诸如桶形失真的校正、旋转等可以由布置在图像处理管线204外部的一个或多个模块、部件或电路来执行,例如在图像处理管线204和编码器206之间的一个或多个单元中。
在图像处理管线204之后,图像帧被转发至编码器206,在编码器206中,图像帧根据编码协议进行编码,并使用输入/输出接口210在通信网络114上转发至接收器,例如客户端116和/或服务器118。应当注意,图1所示的相机200还包括多种其他部件,诸如处理器、附加存储器等,这些部件在传统的相机系统中是常见的,并且其目的和操作对于本领域普通技术人员而言是众所周知的。为了清楚起见,已经从图1的图示和描述中省略了这些部件。
相机200还包括用于存储编码视频流的储存存储器装置208。储存存储器装置208可以是非易失性存储器,诸如SD卡。
存在多种常规视频编码格式。与本发明的各种实施例一起工作的一些常见视频编码格式包括:JPEG、运动JPEG(MJPEG)、高效视频编码(HEVC),也称为H.265和MPEG-H Part2;高级视频编码(AVC),也称为H.264和MPEG-4Part 10;通用视频编码(VVC),也称为H.266、MPEG-IPart 3和未来视频编码(FVC);VP9、VP10和AOMedia Video1(AV1),本文仅举几个示例。
图像处理管线204和编码器206可在控制单元212上操作。相机200优选地包括控制单元212,并且被提供为具有公共外壳的单个单元。然而,可以设想,控制单元212可以是单独的独立控制。
当监视场景1时,相机200使用图像捕获模块202连续地捕获共同形成视频流的图像帧,可选地在图像处理管道204中处理图像帧,在编码器206中对处理后的数据进行编码,并将编码后的图像帧存储在储存存储器装置208中和/或根据通信网络114中的当前可用带宽直接在通信网络114上传输编码后的图像帧。
然而,如果与通信网络114的连接丢失或减小,导致连接的带宽不足以传输视频流,则不会传输视频流。编码的视频流可以存储在储存存储器装置208上,但是该存储可能会很快填满。
为了缓解该问题,发明人提出了一种方法,在该方法中一旦连接丢失或不足以传输,则以不同的比特率生成并并行存储多个并行视频流。当储存存储器装置208填满时,视频流被逐个连续丢弃,而剩余的视频流继续。以这种方式,在丢失或不充分连接期间,可以确保视频流,其中视频质量随着时间而逐渐降低,而不是在连接中断持续超过特定时间的情况下完全没有视频。现在将参考附图更详细地描述本发明的实施例。
图2是根据本发明实施例的方法步骤的流程图,并且图6是控制单元212及其部件的框图。
本文提供了对在通信网络114上能够连接到接收器装置116、118的相机200中的视频流进行故障转移记录的方法。控制单元212从图像捕获模块202接收图像流形式的图像数据201。
在步骤S102中,控制单元212检测到通信网络114上的连接的带宽不足以以预定义比特率传输视频流。这可以包括检测到通信网络114的当前带宽低于或等于传输比特率方面的预定义阈值,即,表示为每秒比特数。控制单元212可以通过尝试使用输入/输出接口210在通信网络114上传输数据来检测带宽不足。
在步骤S104中,控制单元212生成具有不同比特率的多个并行编码视频流。控制单元212使用编码器206来生成并行编码视频流。视频流是并行的表示它们在相同的持续时间内捕获相同的场景。因此,除了它们的比特率不同之外,视频流包括相同的图像场景表示。
在步骤S106中,控制单元212将多个并行编码视频流存储在相机200能够访问的储存存储器装置208上。编码视频流的图像帧在生成时被存储。因此,一旦图像帧已经利用一组不同的比特率编码,则编码图像帧被存储在储存存储器装置208上。视频流可以是完整的视频流,或者在一些实施例中,可以指具有根据可伸缩视频格式(诸如有时被称为H.265的高效视频编码)的相关增强编码视频流的基本编码视频流。
在步骤S108中,控制单元212检测到储存存储器装置208的储存存储器使用超过存储器阈值。换句话说,存储在储存存储器装置208上的数据量超过了存储器阈值。阈值可以指示储存存储器装置208几乎已满,或者储存存储器装置208已满,并且没有更多容量来存储编码视频流的附加数据。
在步骤S110中,控制单元212控制多个编码视频流中的一个编码视频流的存储的中止。中止视频流的存储表示不再以各自的比特率对图像帧进行编码,或者一旦进行了编码,所得到的编码图像帧立即被丢弃。
中止编码的视频流是多个编码视频流之中提供最高比特率的编码视频流。如下面将更详细描述的,取决于编码方案,中止编码的视频流可以是不同的格式,但是通常是最终可观看视频的比特率最高的编码视频流,因此中止存储多个编码视频流中的一个编码视频流牺牲了最高比特率的视频流。通常,比特率至少取决于分辨率、视频压缩程度和帧率,因此为了释放储存存储器装置208上的容量,通常会牺牲这些之一。可以利用不同的图像分辨率和/或帧率对多个并行编码视频流进行编码。
在步骤S112中,控制单元212控制多个编码视频流中的一个编码视频流的丢弃,该多个编码视频流被中止从储存存储器装置208中存储。
结合图6,转向图3中的流程图,如果在通信网络114上的连接减小或丢失期间,控制单元212在步骤S114中检测到或以一些方式接收到通信网络114上的通信已恢复的信息或消息,则步骤S116中,控制单元配置成在跨通信网络114传输多个并行编码视频流209中的一个或多个。检测到通信网络已恢复可以包括确定跨通信网络114的连接的带宽超过指示稳定连接的一些预定义阈值。
此外,控制单元212可以通过尝试传输数据来确定已恢复的通信网络114的当前带宽。换句话说,控制单元212可以在一些时间间隔处尝试传输当前最高比特率的视频流,以估计当前带宽是否足以传输。由递增补偿定时器确定的间隔例如可以是每1、2、4、8、16、32、60、60、60…秒尝试传输数据。基于该初始估计,控制单元212可以选择并传输仍然存储的编码视频流中的一个或多个编码视频流,该一个或多个编码视频流的组合不超过已恢复的通信网络114的当前带宽,使得仍然存储的编码视频流中的一个或多个编码视频流可以跨通信网络114传输。
现在转向图4,其包括来自编码并行视频流的数据量作为时间的函数的第一图表402,以及说明存储的编码视频流的数量相应减小的第二图表404。
当最初存储所有并行编码视频流时,此处由X个流表示,存储的数据量增大,直至达到阈值T。如上所述,阈值T可以指示储存存储器装置208接近满,储存存储器装置208已达到其最大容量。当发生该情况时,在时间t1,编码视频流中的一个编码视频流从储存存储器装置208中被丢弃,因此视频流的数量减小1,如第二图表404所示,并且数据量减小到级别D。
继续存储剩余的视频流,直到储存存储器装置208在时间t2再次达到或接近其最大容量,从而丢弃比特率与在时间t1丢弃的第一编码视频流不同的第二编码视频流,存储的视频流的数量再次减小1,存储的数据量降至级别D。
重复上述操作,从而继续存储剩余的视频流,直到储存存储器装置208在时间t3再次达到或接近其全部容量,从而在时间t3丢弃比特率与其他编码视频流不同的第三编码视频流。所存储的视频流的数量再次减小1,并且所存储的数据量下降到级别D。重复这一过程,直到通信网络114已恢复,或者直到储存存储器装置208上不再有编码的视频流。
如图表402所示,斜率k1、k2、k3随着编码视频流数量的减小而降低。在该实施例中,多个并行编码视频流是以降低的流间比特率生成的。此外,优选地中止存储当前最高比特率的视频流,并丢弃当前最高比特率的视频流。换句话说,被丢弃的第一编码视频流是利用最高比特率编码的,被丢弃的第二编码视频流是利用次高比特率编码的,被丢弃的第三编码视频流是利用第三高比特率编码的,等。因此,相对较高比特率的视频流在相对较低比特率的视频流之前被丢弃。利用较低的比特率,生成与比特率较高时相同的数据量需要更长的时间。
在图表402和404中,并行视频流的数量例示为三个。优选地,并行编码视频流的数量至少为两个,诸如3、4、5、6、7、8、9或10个并行编码视频流。
在一个实施例中,比特率的降低是并行视频流之间的减半缩放。这样,当储存存储器装置208已满时,具有最高比特率的编码视频流将占据储存存储器装置208容量的50%,而所有其他视频流一起占据剩余的50%。丢弃第一编码视频流,并且剩余的编码视频流可以使用储存存储器208上的空闲空间。对于该实施例,数据量D是阈值T的50%。为了示意性地说明该实施例,编码可以针对六个视频流:
流1:具有全比特率。
流2:具有半比特率。
流3:具有四分之一比特率。
流4:具有1/8比特率。
流5:具有1/16比特率。
流6:具有1/32比特率。
然而,六个视频流是作为示例来说明本实施例。任何倍数的上述内容,或者具有进一步缩放的比特流的流。与仅保存全比特率流相比,储存存储器装置的容量需要是存储全比特率流的容量的两倍。但是,利用上述缩放,额外空间的数量将永远不会超过该数量,即使是无限数量的流,因为总的存储器可以表示为几何总和,1/2+1/4+1/8等。
图5示意性示出了包括一组图像帧502a的基本编码视频流502,其中仅示出了一个图像帧。基本编码视频流502以相对较低的分辨率编码。为了实现更高的分辨率,基本编码视频流502与包括帧504a、506a、508a的一个或多个增强编码视频流504、506、508交织或组合,其中每个增强编码视频流仅表示一个帧。本文中,作为示例示出了三个增强编码视频流,但是本发明同样适用于仅两个或者甚至一个增强编码视频流,或者三个以上增强编码视频流。
增强编码视频流,通常称为增强层,包括用于提高基本编码视频流质量的信息。这种信息例如可以是提高分辨率或帧率的数据。
哪个增强编码视频流504、506、508与基本编码视频流502组合或交织,取决于最终编码视频流的所需分辨率。通常,基本编码视频流502的第一图像帧被解码,然后增强编码视频流504的图像帧被解码并添加到解码的基本视频流图像中。更具体地,基础帧502a被解码并在分辨率上被放大。放大的基础帧502a用作一个或多个增强编码图像帧504a、506a、508a的参考。因此,为了充分利用并提供放大的基础帧502a的改进的图像质量,一个或多个增强编码图像帧504a、506a、508a的内容被添加到放大的基础帧502a。
要求的视频质量越高,需要将更多的增强编码视频流504、506、508与基本编码视频流502组合或交织。因此,所得到的视频流的比特率随着与基础编码视频流502组合的增强编码视频流504-508的数量而增大。
如果期望第二增强编码视频流508提供的分辨率,则第一增强编码视频流504、第二增强编码视频流506和第三增强编码视频流508可以全部与基本编码视频流502组合。通常,增强编码视频流仅包含增大或差异,以增强例如帧率或分辨率,并且在没有基本编码视频流502的情况下,它们本身是不可观看的。
鉴于图5的讨论和本发明的另一实施例,多个并行编码视频流可以包括基本编码视频流502和一组增强编码视频流504、506、508,可以与基本编码视频流502组合,以形成比单独的基本编码视频流502质量更高的视频流。在该实施例中,中止存储是中止增强编码视频流504、506、508中的一个或多个增强编码视频流的存储。此外,丢弃的是增强编码视频流504、506、508中的一个或多个增强编码视频流。
与基本编码视频流502和任何中间增强编码视频流504、506一起将产生最高组合比特率的增强编码视频流508是被丢弃的视频流。因此,在该示例中,当储存存储器装置208已满时,增强编码视频流508将首先被中止和丢弃。下一次储存存储器装置208已满时,增强编码视频流506被中止并丢弃。本文中,并行视频流502、504、506、508的总数是四个。然而,设想了进一步的增强视频流,例如3或4个增强编码视频流。
图6是根据本发明实施例的控制单元212和数据流的框图。
计算机程序233,包括指令,当该程序由控制单元212运行时,该指令使控制单元212执行本文方法中的任一方法。控制单元212包括处理电路230,处理电路230被布置成执行本文公开的方法的步骤。
控制单元从图像捕获模块202例如图1所示的202,接收图像流形式的图像数据201。通常,编码视频流通过连接到通信链路112的输入/输出接口210在通信网络上传输,通信链路112提供对通信网络114的访问。
当控制单元212检测到通信网络上的连接的带宽不足以传输视频流时,控制单元212启动多个并行编码视频流的生成,例如,n个具有不同比特率的并行编码视频流,存储在控制单元212能够访问的储存存储器装置208上。
随着视频流的更多图像帧存储在储存存储器装置208上,控制单元212可以检测到储存存储器装置208的储存存储器使用超过存储器阈值。当这种情况发生时,控制单元212中止多个编码视频流中的一个编码视频流的存储,并继续存储剩余的n-1个并行编码视频流。随后,控制单元212从储存存储器装置208丢弃中止的视频流,现在仅存储n-1个视频流。
一旦通信网络上的连接已恢复,控制单元212使用输入/输出接口和通信链路112传输多个并行编码视频流209中的一个或多个。
控制单元包括微处理器、微控制单元、可编程数字信号处理器或其他可编程装置。控制单元还可以包括或替代地包括专用集成电路、可编程门阵列或可编程阵列逻辑、可编程逻辑器件或数字信号处理器。在控制单元包括可编程装置的情况下,诸如上述微处理器、微控制单元或可编程数字信号处理器,处理器还可以包括控制可编程装置的操作的计算机可运行代码。
本公开的控制功能可以使用现有的计算机处理器实施,或由用于适当系统的专用计算机处理器实施,为此目的或另一目的而引入,或由硬连线系统实施。本公开范围内的实施例包括程序产品,该程序产品包括用于承载或其上存储有机器可运行指令或数据结构的机器可读介质。这种机器可读介质可以是可由通用或专用计算机或其他具有处理器的机器访问的任何可用介质。举例而言,这种机器可读介质可以包括RAM、ROM、EPROM、EEPROM、CD-ROM或其他光盘存储、磁盘存储或其他磁存储装置,或者可以用于以机器可运行指令或数据结构的形式携带或存储期望的程序代码并且可以由通用或专用计算机或其他具有处理器的机器访问的任何其他介质。当信息通过网络或另一通信连接(或硬连线,或无线,或硬连线或无线的组合)传输或提供给机器时,机器将该连接视为机器可读介质。因此,任何这样的连接都被合适地称为机器可读介质。上述的组合也包括在机器可读介质的范围内。机器可运行指令包括例如使通用计算机、专用计算机或专用处理机执行特定功能或一组功能的指令和数据。
虽然图中示出了顺序,但步骤顺序可能与图示不同。此外,两个或更多步骤可以同时或部分同时执行。这种变化将取决于所选择的软件和硬件系统以及设计者的选择。所有这些变化都在本公开的范围内。同样,软件实施方式可以利用标准编程技术来完成,该技术具有基于规则的逻辑和其他逻辑来完成各种连接步骤、处理步骤、比较步骤和决策步骤。此外,尽管已经参考本发明的具体示例性实施例描述了本发明,但是对于本领域技术人员而言,多种不同的变更、修改等将变得显而易见。
此外,通过研究附图、公开内容和所附权利要求,本领域技术人员在实施要求保护的发明时,可以理解和实现公开实施例的变化。此外,在权利要求中,词语“包括”不排除其他元件或步骤,并且不定冠词“一”不排除多个。
Claims (14)
1.一种对在通信网络上能够连接到接收器装置的相机中的视频流进行故障转移记录的方法,所述方法包括:
检测到与所述通信网络的连接丢失或减小,使得所述通信网络上的所述连接的当前带宽容量小于当前产生的编码视频流的比特率;
响应于所丢失或减小的所述连接,生成具有降低的比特率的多个并行编码视频流,所述降低的比特率是所述比特率的缩放;
将所述多个并行编码视频流存储在所述相机能够访问的储存存储器装置上;
检测到存储在所述储存存储器装置上的数据量超过存储器阈值;
当所述数据量超过所述存储器阈值时,中止所述多个编码视频流中的一个编码视频流的存储,所述编码视频流中的所述一个编码视频流是所述多个编码视频流之中的提供最高比特率的所述编码视频流;以及
从所述储存存储器装置丢弃所述多个编码视频流中的所述一个编码视频流;所述方法进一步包括:
检测到所述通信网络已恢复;以及
在所述通信网络上传输所存储的多个并行编码视频流中的一个或多个并行编码视频流。
2.根据权利要求1所述的方法,包括:
确定已恢复的通信网络的当前带宽,以及
传输仍然存储的比特率视频流中的一个或多个比特率视频流,该一个或多个比特率视频流的组合不超过所述已恢复的通信网络的所述当前带宽。
3.根据权利要求1所述的方法,其中,比特率的降低是所述并行视频流之间的减半缩放。
4.根据权利要求1所述的方法,其中,中止所述存储是中止当前最高比特率的视频流的存储,并且其中,所述当前最高比特率的视频流被丢弃。
5.根据权利要求1所述的方法,其中,所述多个并行编码视频流以不同的图像分辨率和/或帧率进行编码。
6.根据权利要求1所述的方法,其中,所述存储器阈值是所述储存存储器装置已满。
7.根据权利要求1所述的方法,其中,并行视频流的数量至少为两个。
8.一种控制单元,包括被布置成执行根据权利要求1所述的方法的处理电路。
9.一种相机,包括用于存储编码视频流的储存存储器和在通信线路上与接收器装置通信的输入/输出接口,以及根据权利要求8所述的控制单元。
10.一种非暂时性计算机可读记录介质,包括计算机程序产品,所述计算机程序产品包括程序代码,所述程序代码用于当由控制单元运行时,执行权利要求1所述的方法。
11.一种对在通信网络上能够连接到接收器装置的相机中的视频流进行故障转移记录的方法,所述方法包括:
检测到与所述通信网络的连接丢失或减小,使得所述通信网络上的所述连接的当前带宽容量小于当前产生的编码视频流的比特率;
响应于所丢失或减小的连接,生成具有不同比特率的多个并行编码视频流,其中,所述多个并行编码视频流包括基本编码视频流和与所述基本编码视频流可组合以形成比单独的所述基本编码视频流更高质量的视频流的一组增强编码视频流;
将所述多个并行编码视频流存储在所述相机能够访问的储存存储器装置上;
检测到存储在所述储存存储器装置上的数据量超过存储器阈值;
当所述数据量超过所述存储器阈值时,中止所述增强编码视频流中的一个或多个增强编码视频流的存储,所述增强编码视频流是所述多个编码视频流之中的提供最高比特率的所述编码视频流;以及
从所述储存存储器装置丢弃所述增强编码视频流中的所述一个或多个增强编码视频流;所述方法进一步包括:
检测到所述通信网络已恢复;以及
在所述通信网络上传输所存储的多个并行编码视频流中的一个或多个并行编码视频流,该一个或多个并行编码视频流的组合不超过已恢复的通信网络的所述当前带宽。
12.一种控制单元,包括被布置成执行根据权利要求11所述的方法的处理电路。
13.一种相机,包括用于存储编码视频流的储存存储器和在通信线路上与接收器装置通信的输入/输出接口,以及根据权利要求12所述的控制单元。
14.一种非暂时性计算机可读记录介质,包括计算机程序产品,所述计算机程序产品包括程序代码,所述程序代码用于当由控制单元运行时,执行根据权利要求11所述的方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP22212005.7 | 2022-12-07 | ||
EP22212005.7A EP4383729A1 (en) | 2022-12-07 | 2022-12-07 | Video failover recording |
Publications (1)
Publication Number | Publication Date |
---|---|
CN118158429A true CN118158429A (zh) | 2024-06-07 |
Family
ID=84439892
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311622148.4A Pending CN118158429A (zh) | 2022-12-07 | 2023-11-30 | 视频故障转移记录 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20240196035A1 (zh) |
EP (1) | EP4383729A1 (zh) |
KR (1) | KR20240085151A (zh) |
CN (1) | CN118158429A (zh) |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6763067B2 (en) * | 2000-10-10 | 2004-07-13 | Sarnoff Corporation | Rate control for bitstream re-encoding |
EP1725998B1 (en) * | 2004-03-11 | 2009-03-04 | Ultrawaves design holding B. V. | Transmitter and receiver for a surveillance system |
KR20110023081A (ko) * | 2009-08-28 | 2011-03-08 | 삼성전자주식회사 | 한정된 공간을 갖는 메모리를 구비하는 디지털 촬영 장치의 제어 방법, 상기 방법을 기록한 기록 매체, 상기 방법에 따라 동작하는 디지털 촬영 장치 |
WO2011139305A1 (en) * | 2010-05-04 | 2011-11-10 | Azuki Systems, Inc. | Method and apparatus for carrier controlled dynamic rate adaptation and client playout rate reduction |
US8863208B2 (en) * | 2012-06-18 | 2014-10-14 | Micropower Technologies, Inc. | Synchronizing the storing of streaming video |
US10616583B2 (en) * | 2016-06-30 | 2020-04-07 | Sony Interactive Entertainment Inc. | Encoding/decoding digital frames by down-sampling/up-sampling with enhancement information |
US10904591B2 (en) * | 2016-12-28 | 2021-01-26 | Google Llc | Scheme for zero-copy adaptive bitrate video streaming |
DE112018005254T5 (de) * | 2017-09-18 | 2020-06-18 | Intel IP Corporation | Vorrichtung, system und verfahren zur videocodierung |
US11272189B2 (en) * | 2018-02-20 | 2022-03-08 | Netgear, Inc. | Adaptive encoding in security camera applications |
EP3742739B1 (en) * | 2019-05-22 | 2021-04-14 | Axis AB | Method and devices for encoding and streaming a video sequence over a plurality of network connections |
-
2022
- 2022-12-07 EP EP22212005.7A patent/EP4383729A1/en active Pending
-
2023
- 2023-10-12 KR KR1020230135766A patent/KR20240085151A/ko unknown
- 2023-11-30 CN CN202311622148.4A patent/CN118158429A/zh active Pending
- 2023-12-06 US US18/530,479 patent/US20240196035A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
US20240196035A1 (en) | 2024-06-13 |
KR20240085151A (ko) | 2024-06-14 |
EP4383729A1 (en) | 2024-06-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10277901B2 (en) | Encoding a video stream having a privacy mask | |
US7760244B2 (en) | Image generating apparatus and image generating method | |
US20060193534A1 (en) | Image pickup apparatus and image distributing method | |
WO2014001381A2 (en) | System and method for encoding video content using virtual intra-frames | |
CN105991976A (zh) | 生成事件视频序列的方法和系统以及包括此系统的摄像机 | |
US10999577B2 (en) | Quantization parameter determination method and image capture apparatus | |
CN111988610B (zh) | 用于控制视频编码器的输出比特率的方法和比特率控制器 | |
CN111641804A (zh) | 视频数据处理方法和装置、终端、摄像头及视频会议系统 | |
US9948903B2 (en) | Method for configuration of video stream output from a digital video camera | |
US20150109436A1 (en) | Smart Dual-View High-Definition Video Surveillance System | |
WO2011024361A1 (ja) | ネットワークカメラ及び映像配信システム | |
CN114422798A (zh) | 用于对视频图像序列编码的图像处理装置、照相机和方法 | |
US7440629B2 (en) | Image encoding apparatus and image encoding method | |
EP3468188B1 (en) | Method and encoder for encoding video streams | |
US20030190154A1 (en) | Method and apparatus for data compression of multi-channel moving pictures | |
CN118158429A (zh) | 视频故障转移记录 | |
EP3070598B1 (en) | Image processing system and method | |
KR102546764B1 (ko) | 영상 제공 장치 및 방법 | |
CN112788364B (zh) | 码流动态调整装置、方法及计算机可读存储介质 | |
JP2018148379A (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
JP2001145091A (ja) | 画像伝送方式 | |
EP2495972A1 (en) | Monitoring device and method for monitoring a location | |
EP3989587A1 (en) | Image processing device and method of pre-processing images of a video stream before encoding | |
US20240296679A1 (en) | Transmission of a collage of detected objects in a video | |
KR102500837B1 (ko) | 영상 처리 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication |