CN113691879B - 视频数据处理方法、电子设备、计算机可读存储介质 - Google Patents

视频数据处理方法、电子设备、计算机可读存储介质 Download PDF

Info

Publication number
CN113691879B
CN113691879B CN202111241621.5A CN202111241621A CN113691879B CN 113691879 B CN113691879 B CN 113691879B CN 202111241621 A CN202111241621 A CN 202111241621A CN 113691879 B CN113691879 B CN 113691879B
Authority
CN
China
Prior art keywords
data processing
video data
processing request
service gateway
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111241621.5A
Other languages
English (en)
Other versions
CN113691879A (zh
Inventor
郭宇鹏
毛少将
王晓
刘刚
王博一
任峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CRSC Communication and Information Group Co Ltd CRSCIC
Original Assignee
CRSC Communication and Information Group Co Ltd CRSCIC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CRSC Communication and Information Group Co Ltd CRSCIC filed Critical CRSC Communication and Information Group Co Ltd CRSCIC
Priority to CN202111241621.5A priority Critical patent/CN113691879B/zh
Publication of CN113691879A publication Critical patent/CN113691879A/zh
Application granted granted Critical
Publication of CN113691879B publication Critical patent/CN113691879B/zh
Priority to PCT/CN2022/104180 priority patent/WO2023071283A1/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • H04N21/6437Real-time Transport Protocol [RTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64746Control signals issued by the network directed to the server or the client

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本公开提供了一种视频数据处理方法、电子设备、计算机可读存储介质,视频数据处理方法包括:接收第一视频数据处理请求,根据所述第一视频数据处理请求生成第二视频数据处理请求,将第二视频数据处理请求存储在存储装置的β表中;其中,所述第二视频数据处理请求包括:通用唯一识别码UUID、请求体和动作类型;从所述存储装置的γ表中获取分配给所述第一服务网关的第二视频数据处理请求,根据分配给所述第一服务网关的第二视频数据处理请求从相应的摄像头拉取视频流数据,将拉取的视频流数据发送给相应的算法装置。本公开实施例通过第一服务网关和第二服务网关统一实现对视频数据处理请求的处理、视频流数据的拉取,降低了对摄像头的拉流压力。

Description

视频数据处理方法、电子设备、计算机可读存储介质
技术领域
本公开实施例涉及计算机技术和数据处理技术领域,特别涉及视频数据处理方法、电子设备、计算机可读存储介质。
背景技术
在智能算法的实际部署中,一般会存在一个算法被多个摄像头调用的情况,并且会有每个摄像头配置多个算法的可能。在这种情况下,单个摄像头将面临被多个算法拉取视频流数据,同一个算法需要启动多次的问题,这两个问题的核心是视频流的拉取和算法的动态扩展。
业界对于这种情况的一般做法是在每一个算法前增加拉流程序,对于每一个算法和拉流程序打包成微服务。算法与拉流程序打包成的微服务虽然可以提高程序的高可用性以及易用性,但是无法解决程序对摄像头拉流的压力。
发明内容
本公开实施例提供一种视频数据处理方法、电子设备、计算机可读存储介质。
第一方面,本公开实施例提供一种视频数据处理方法,应用于第一服务网关,该方法包括:
接收第一视频数据处理请求,根据所述第一视频数据处理请求生成第二视频数据处理请求,将第二视频数据处理请求存储在存储装置的β表中;其中,所述第二视频数据处理请求包括:通用唯一识别码UUID、请求体和动作类型;
从所述存储装置的γ表中获取分配给所述第一服务网关的第二视频数据处理请求,根据分配给所述第一服务网关的第二视频数据处理请求从相应的摄像头拉取视频流数据,将拉取的视频流数据发送给相应的算法装置。
在一些示例性实施例中,该方法还包括:
将所述第一服务网关的设备信息存储在所述存储装置的设备信息表中;其中,设备信息包括:设备标识和以下至少之一:任务数量、线程数量、更新时间、表征是否在线的状态信息、可用资源信息、总资源信息。
在一些示例性实施例中,所述将拉取的视频流数据发送给相应的算法装置后,该方法还包括:
将所述算法装置返回的处理结果中的图像发送至图像数据库进行存储,将所述处理结果中的视频上传至视频存储服务器进行存储,将所述处理结果中的结构化数据上传至结构化数据库进行存储。
在一些示例性实施例中,所述根据所述第一视频数据处理请求生成第二视频数据处理请求后,该方法还包括:
将所述第二视频数据处理请求的状态信息存储在所述存储装置中的α表中;定时更新所述第二视频数据处理请求的状态信息;
在所述第二视频数据处理请求的状态信息为表征处理成功的信息的情况下,删除所述存储装置的β表中所述第二视频数据处理请求。
在一些示例性实施例中,所述根据所述第一视频数据处理请求生成第二视频数据处理请求包括:
为所述第一视频数据处理请求生成所述UUID,将所述UUID添加到所述第一视频数据处理请求中得到第二视频数据处理请求。
第二方面,本公开实施例提供一种视频数据处理方法,应用于第二服务网关,该方法包括:
从存储装置的β表中获取第二视频数据处理请求;
从所述存储装置的设备信息表中获取第一服务网关的设备信息;
根据所述第一服务网关的设备信息,将所述第二视频数据处理请求分配给对应的第一服务网关进行处理,将所述第二视频数据处理请求及对应的分配信息存储在所述存储装置中的γ表中。
在一些示例性实施例中,从所述存储装置的设备信息表中获取第一服务网关的设备信息包括:
在所述存储装置的γ表中的第三视频数据处理请求存在第四视频数据处理请求的情况下,从所述存储装置的γ表中获取所述第四视频数据处理请求的分配信息;其中,所述第四视频数据处理请求对应的摄像头与所述第二视频数据处理请求对应的摄像头相同;
根据所述第四视频数据处理请求的分配信息从所述存储装置的设备信息表中获取所述第四视频数据处理请求对应的第一服务网关的设备信息;
所述根据所述第一服务网关的设备信息,将所述第二视频数据处理请求分配给对应的第一服务网关进行处理包括:根据所述第四视频数据处理请求对应的第一服务网关的设备信息,将所述第二视频数据处理请求分配给对应的第一服务网关进行处理。
在一些示例性实施例中,所述根据所述第四视频数据处理请求对应的第一服务网关的设备信息,将所述第二视频数据处理请求分配给对应的第一服务网关进行处理包括:
根据所述第四视频数据处理请求对应的第一服务网关的设备信息,将所述第二视频数据处理请求分配给所述第四视频数据处理请求对应的第一服务网关进行处理。
第三方面,本公开实施例提供一种电子设备,其包括:
至少一个处理器;
存储器,其上存储有至少一个程序,当所述至少一个程序被所述至少一个处理器执行,使得所述至少一个处理器实现上述任意一种视频数据处理方法。
第四方面,本公开实施例提供一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现上述任意一种视频数据处理方法。
本公开实施例提供的视频数据处理方法,通过第一服务网关和第二服务网关统一实现对视频数据处理请求的处理、视频流数据的拉取,而不需要每一个算法与拉流程序打包成的微服务进行视频数据处理请求的处理、视频流数据的拉取,降低了对摄像头的拉流压力。本公开实施例提供一种视频数据处理方法、电子设备、计算机可读存储介质。
第一方面,本公开实施例提供一种视频数据处理方法,应用于第一服务网关,该方法包括:
接收第一视频数据处理请求,根据所述第一视频数据处理请求生成第二视频数据处理请求,将第二视频数据处理请求存储在存储装置的β表中;其中,所述第二视频数据处理请求包括:通用唯一识别码UUID、请求体和动作类型;
从所述存储装置的γ表中获取分配给所述第一服务网关的第二视频数据处理请求,根据分配给所述第一服务网关的第二视频数据处理请求从相应的摄像头拉取视频流数据,将拉取的视频流数据发送给相应的算法装置。
在一些示例性实施例中,该方法还包括:
将所述第一服务网关的设备信息存储在所述存储装置的设备信息表中;其中,设备信息包括:设备标识和以下至少之一:任务数量、线程数量、更新时间、表征是否在线的状态信息、可用资源信息、总资源信息。
在一些示例性实施例中,所述将拉取的视频流数据发送给相应的算法装置后,该方法还包括:
将所述算法装置返回的处理结果中的图像发送至图像数据库进行存储,将所述处理结果中的视频上传至视频存储服务器进行存储,将所述处理结果中的结构化数据上传至结构化数据库进行存储。
在一些示例性实施例中,所述根据所述第一视频数据处理请求生成第二视频数据处理请求后,该方法还包括:
将所述第二视频数据处理请求的状态信息存储在所述存储装置中的α表中;定时更新所述第二视频数据处理请求的状态信息;
在所述第二视频数据处理请求的状态信息为表征处理成功的信息的情况下,删除所述存储装置的β表中所述第二视频数据处理请求。
在一些示例性实施例中,所述根据所述第一视频数据处理请求生成第二视频数据处理请求包括:
为所述第一视频数据处理请求生成所述UUID,将所述UUID添加到所述第一视频数据处理请求中得到第二视频数据处理请求。
第二方面,本公开实施例提供一种视频数据处理方法,应用于第二服务网关,该方法包括:
从存储装置的β表中获取第二视频数据处理请求;
从所述存储装置的设备信息表中获取第一服务网关的设备信息;
根据所述第一服务网关的设备信息,将所述第二视频数据处理请求分配给对应的第一服务网关进行处理,将所述第二视频数据处理请求及对应的分配信息存储在所述存储装置中的γ表中。
在一些示例性实施例中,从所述存储装置的设备信息表中获取第一服务网关的设备信息包括:
在所述存储装置的γ表中的第三视频数据处理请求存在第四视频数据处理请求的情况下,从所述存储装置的γ表中获取所述第四视频数据处理请求的分配信息;其中,所述第四视频数据处理请求对应的摄像头与所述第二视频数据处理请求对应的摄像头相同;
根据所述第四视频数据处理请求的分配信息从所述存储装置的设备信息表中获取所述第四视频数据处理请求对应的第一服务网关的设备信息;
所述根据所述第一服务网关的设备信息,将所述第二视频数据处理请求分配给对应的第一服务网关进行处理包括:根据所述第四视频数据处理请求对应的第一服务网关的设备信息,将所述第二视频数据处理请求分配给对应的第一服务网关进行处理。
在一些示例性实施例中,所述根据所述第四视频数据处理请求对应的第一服务网关的设备信息,将所述第二视频数据处理请求分配给对应的第一服务网关进行处理包括:
根据所述第四视频数据处理请求对应的第一服务网关的设备信息,将所述第二视频数据处理请求分配给所述第四视频数据处理请求对应的第一服务网关进行处理。
第三方面,本公开实施例提供一种电子设备,其包括:
至少一个处理器;
存储器,其上存储有至少一个程序,当所述至少一个程序被所述至少一个处理器执行,使得所述至少一个处理器实现上述任意一种视频数据处理方法。
第四方面,本公开实施例提供一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现上述任意一种视频数据处理方法。
本公开实施例提供的视频数据处理方法,通过第一服务网关和第二服务网关统一实现对视频数据处理请求的处理、视频流数据的拉取,而不需要每一个算法与拉流程序打包成的微服务进行视频数据处理请求的处理、视频流数据的拉取,降低了对摄像头的拉流压力。
附图说明
附图用来提供对本公开实施例的进一步理解,并且构成说明书的一部分,与本公开的实施例一起用于解释本公开,并不构成对本公开的限制。通过参考附图对详细示例性实施例进行描述,在附图中:
图1为相关技术中算法与拉流程序打包成的微服务的架构示意图;
图2为本公开实施例提供的视频数据处理系统的组成框图;
图3为本公开一个实施例提供的应用于第一服务网关的视频数据处理方法的流程图;
图4为本公开另一个实施例提供的应用于第二服务网关的视频数据处理方法的流程图。
具体实施方式
为使本领域的技术人员更好地理解本公开的技术方案,下面结合附图对本公开提供的视频数据处理方法、电子设备、计算机可读存储介质进行详细描述。
在下文中将参考附图更充分地描述示例实施例,但是所述示例实施例可以以不同形式来体现且不应当被解释为限于本文阐述的实施例。反之,提供这些实施例的目的在于使本公开透彻和完整,并将使本领域技术人员充分理解本公开的范围。
在不冲突的情况下,本公开各实施例及实施例中的各特征可相互组合。
如本文所使用的,术语“和/或”包括至少一个相关列举条目的任何和所有组合。
本文所使用的术语仅用于描述特定实施例,且不意欲限制本公开。如本文所使用的,单数形式“一个”和“该”也意欲包括复数形式,除非上下文另外清楚指出。还将理解的是,当本说明书中使用术语“包括”和/或“由……制成”时,指定存在所述特征、整体、步骤、操作、元件和/或组件,但不排除存在或添加至少一个其它特征、整体、步骤、操作、元件、组件和/或其群组。
除非另外限定,否则本文所用的所有术语(包括技术和科学术语)的含义与本领域普通技术人员通常理解的含义相同。还将理解,诸如那些在常用字典中限定的那些术语应当被解释为具有与其在相关技术以及本公开的背景下的含义一致的含义,且将不解释为具有理想化或过度形式上的含义,除非本文明确如此限定。
图1为相关技术中算法与拉流程序打包成的微服务的架构示意图。如图1所示,请求解析模块对接收到的视频数据处理请求进行身份验证、检查,以及对视频数据处理请求进行格式转化;拉流及分发模块根据格式转化后的视频数据处理请求进行视频流数据的拉取,将拉取的视频流数据发送给算法模块;算法模块根据格式转化后的视频数据处理请求对应的算法对拉取的视频流数据进行处理,将处理结果发送给视频上传模块和后处理模块;视频上传模块将处理结果中的图像数据合成为视频数据,将视频数据上传至视频存储服务;后处理模块将处理结果中的图像及结构化数据进行结合、画图等操作后得到的关键帧和结构化数据发送给图像及结构化数据上传模块;图像及结构化上传模块将关键帧和结构化数据上传至图像存储服务和结构化数据存储服务。
算法与拉流程序打包成的微服务虽然可以提高程序的高可用性以及易用性,但是无法解决程序对摄像头拉流的压力。
图2为本公开实施例提供的视频数据处理系统的组成框图。如图2所示,本公开实施例提供的视频数据处理系统包括:至少一个第一服务网关201、第二服务网关202、存储装置203、至少一个算法装置2/4。
其中,第一服务网关201接收第一视频数据处理请求,为第一视频数据处理请求生成通用唯一识别码(UUID,Universally Unique Identifier),将UUID添加到第一视频数据处理请求中得到第二视频数据处理请求;将第二视频数据处理请求存储在存储装置203中的β表中,将第二视频数据处理请求的状态信息存储在存储装置203中的α表中;将第一服务网关201的设备信息存储在存储装置203中的设备信息表中;从存储装置203中的γ表中获取分配给第一服务网关201的第二视频数据处理请求,根据分配给第一服务网关201的第二视频数据处理请求从相应的摄像头拉取视频流数据,将拉取的视频流数据发送给相应的算法装置204;将算法装置204返回的处理结果中的图像发送至图像数据库进行存储,将处理结果中的视频上传至视频存储服务器进行存储,将处理结果中的结构化数据上传至结构化数据库进行存储。
其中,第二服务网关202将第二视频数据处理请求分配给对应的第一服务网关201进行处理,将第二视频数据处理请求的分配信息存储在存储装置203中的γ表中。
其中,存储装置203存储有α表、β表、γ表和设备信息表。存储装置203可以是独立的设备,也可以与第一服务网关201设置在同一设备中,也可以与第二服务网关202设置在同一设备中。不管存储装置203采用哪种部署方式,均需要保证存储装置203中存储的α表、β表、γ表和设备信息表能够被第一服务网关201和第二服务网关202访问,也就是说,第一服务网关201和第二服务网关202在需要时可以随时获取α表、β表、γ表和设备信息表中的信息。
其中,算法装置204中部署有对视频数据进行处理的智能算法,对拉取的视频流数据进行相应的处理得到处理结果。算法装置204可以与第一服务网关201设置在同一个设备中,也可以设置在不同的设备中。
下面详细描述第一服务网关201和第二服务网关202的具体实现过程。
图3为本公开一个实施例提供的应用于第一服务网关的视频数据处理方法的流程图。
第一方面,参照图3,本公开一个实施例提供一种视频数据处理方法,应用于第一服务网关,该方法包括:
步骤300、接收第一视频数据处理请求,根据第一视频数据处理请求生成第二视频数据处理请求,将第二视频数据处理请求存储在存储装置的β表中;其中,第二视频数据处理请求包括:UUID、请求体和动作类型。
在一些示例性实施例中,第一视频数据处理请求包括:请求体和动作类型。
在一些示例性实施例中,根据第一视频数据处理请求生成第二视频数据处理请求包括:
为第一视频数据处理请求生成UUID,将UUID添加到第一视频数据处理请求中得到第二视频数据处理请求。
在一些示例性实施例中,为第一视频数据处理请求生成UUID时,只要保证生成的UUID与第一视频数据处理请求一一对应即可,本申请实施例对生成UUID的具体方式不作限定,具体的生成UUID的具体方式也不用于限定本申请实施例的保护范围。
在一些示例性实施例中,请求体包括:时间、摄像头信息和算法信息;动作类型包括:启动算法或停止算法。其中,启动算法是指开始从摄像头拉取视频流数据,并开始对拉取的视频流数据采用算法进行处理;停止算法是指停止从摄像头拉取视频流数据,并停止对拉取的视频流数据采用算法进行处理。
其中,时间可以是指发起请求的时间。
在一些示例性实施例中,摄像头信息包括:摄像头标识、摄像头的实时流协议(RTSP,Real Time Streaming Protocol)地址。
在一些示例性实施例中,算法信息包括:算法名称。
在一些示例性实施例中,存储在存储装置的β表中的第二视频数据处理请求均是还没有处理的请求,第一服务网关接收到第一视频数据处理请求后,仅仅是生成第一视频数据处理请求对应的UUID,加入UUID的第一视频数据处理请求即为第二视频数据处理请求,这时的第二视频数据处理请求还没有进行任何其他的处理。
在一些示例性实施例中,可以采用以下方式将第二视频数据处理请求存储在存储装置的β表中:将第二视频数据处理请求中的UUID、请求体和动作类型之间的第一对应关系存储在存储装置的β表中,如表1所示。
表1
Figure 473075DEST_PATH_IMAGE001
步骤301、从存储装置的γ表中获取分配给第一服务网关的第二视频数据处理请求,根据分配给第一服务网关的第二视频数据处理请求从相应的摄像头拉取视频流数据,将拉取的视频流数据发送给相应的算法装置。
在一些示例性实施例中,如表3所示,可以根据存储装置的γ表中的分配信息确定哪些第二视频数据处理请求分配给第一服务网关。具体的,在存储装置的γ表中的分配信息中的设备标识为第一服务网关的设备标识的情况下,该分配信息对应的第二视频数据处理请求即是分配给第一服务网关的第二视频数据处理请求。
在一些示例性实施例中,可以根据第二视频数据处理请求中的请求体中的摄像头的RTSP地址从摄像头拉取视频流数据。
在一些示例性实施例中,可以依次从存储装置的γ表中获取分配给第一服务网关的第二视频数据处理请求。在另一些示例性实施例中,为了避免对重复的第二视频数据处理请求的处理,也可以从存储装置的γ表中获取所有分配给第一服务网关的第二视频数据处理请求中,摄像头信息相同,且算法信息相同,且发起时间最大的第二视频数据处理请求。
其中,发起时间是指接收到对应的第一视频数据处理请求的时间。
在一些示例性实施例中,该方法还包括:
将第一服务网关的设备信息存储在存储装置的设备信息表中;其中,设备信息包括:设备标识和以下至少之一:任务数量、线程数量、更新时间、表征是否在线的状态信息、可用资源信息、总资源信息。
其中,任务数量是指第一服务网关目前正在处理的第二视频数据处理请求的数量。
其中,线程数量是指第一服务网关目前正在处理第二视频数据处理请求时所采用的线程数量。
其中,更新时间是指设备信息上报的时间。
其中,表征是否在线的状态信息用于指示第一服务网关当前是否处于在线状态。
其中,可用资源信息用于表示第一服务网关当前可用的资源信息。
其中,总资源信息用于表示第一服务网关当前总的资源信息。
其中,资源可以是指CPU、内存、网络等中的至少一个。
例如,如表2所示,设备信息表中存储了各个第一服务网关的设备标识、任务数量、线程数量和更新时间。
表2
Figure 263176DEST_PATH_IMAGE002
在一些示例性实施例中,将拉取的视频流数据发送给相应的算法装置后,该方法还包括:
将算法装置返回的处理结果中的图像发送至图像数据库进行存储,将处理结果中的视频上传至视频存储服务器进行存储,将处理结果中的结构化数据上传至结构化数据库进行存储。
在一些示例性实施例中,根据第一视频数据处理请求生成第二视频数据处理请求后,该方法还包括:将第二视频数据处理请求的状态信息存储在存储装置中的α表中;定时更新第二视频数据处理请求的状态信息;在第二视频数据处理请求的状态信息为表征处理成功的信息的情况下,删除存储装置的β表中第二视频数据处理请求。
在一些示例性实施例中,状态信息包括:未处理、正在处理、处理成功、处理失败等中的至少一个。
在一些示例性实施例中,定时更新第二视频数据处理请求的状态信息包括:接收到第一视频数据处理请求时,将α表中对应的第二视频数据处理请求的状态信息更新为未处理;从γ表中获取分配给第一服务网关的第二视频数据处理请求时,将α表中对应的第二视频数据处理请求的状态信息更新为正在处理;将算法装置返回的处理结果中的图像发送至图像数据库进行存储,将处理结果中的视频上传至视频存储服务器进行存储,将处理结果中的结构化数据上传至结构化数据库进行存储成功后,将α表中对应的第二视频数据处理请求的状态信息更新为处理成功;将算法装置返回的处理结果中的图像发送至图像数据库进行存储,将处理结果中的视频上传至视频存储服务器进行存储,将处理结果中的结构化数据上传至结构化数据库进行存储失败后,将α表中对应的第二视频数据处理请求的状态信息更新为处理失败。
在一些示例性实施例中,可以将第二视频数据处理请求的UUID、发起时间、更新时间、状态信息之间的对应关系存储在α表中,如表3所示。
在一些示例性实施例中,对应关系中还包括:请求体和动作类型中的至少一个存储在α表中,如表3所示。
表3
Figure 486347DEST_PATH_IMAGE003
在一些示例性实施例中,接收第一视频数据处理请求后,在第一视频数据处理请求对应的发起时间小于α表中第一视频数据处理请求对应的第二视频数据处理请求对应的更新时间的情况下,向用户返回拒绝消息。
在一些示例性实施例中,α表中第一视频数据处理请求对应的第二视频数据处理请求是指α表中摄像头信息和算法信息均与第一视频数据处理请求相同的第二视频数据处理请求。
在一些示例性实施例中,该方法还包括:在α表中的第二视频数据处理请求对应的状态信息为正在处理的持续时间大于或等于预设阈值的情况下,将第二视频数据处理请求重新添加到β表中,以提高第一服务网关的可用能力。
在一些示例性实施例中,该方法还包括:每执行一个动作,将执行动作相关信息记录在日志中。例如,从存储装置的γ表中获取分配给第一服务网关的第二视频数据处理请求,记录第二视频数据处理请求是否获取成功;解析第二视频数据处理请求,记录第二视频数据处理请求的内容是否完整、RTSP地址是否读取成功;根据分配给第一服务网关的第二视频数据处理请求从相应的摄像头拉取视频流数据,记录当前拉流状态、视频流拉取是否成功等;将拉取的视频流数据发送给相应的算法装置,记录算法是否处理成功;将算法装置返回的处理结果中的图像发送至图像数据库进行存储,将处理结果中的视频上传至视频存储服务器进行存储,将处理结果中的结构化数据上传至结构化数据库进行存储,记录结构化数据是否上传成功、图像是否上传成功、视频是否上传成功。
本公开实施例提供的视频数据处理方法,通过第一服务网关和第二服务网关统一实现对视频数据处理请求的处理、视频流数据的拉取,而不需要每一个算法与拉流程序打包成的微服务进行视频数据处理请求的处理、视频流数据的拉取,降低了对摄像头的拉流压力。
图4为本公开另一个实施例提供的应用于第二服务网关的视频数据处理方法的流程图。
第二方面,参照图4,本公开另一个实施例提供一种视频数据处理方法,应用于第二服务网关,该方法包括:
步骤400、从存储装置的β表中获取第二视频数据处理请求。
在一些示例性实施例中,第一服务网关将第二视频数据处理请求中的UUID、请求体和动作类型之间的第一对应关系存储在存储装置的β表中,那么,第二服务网关从存储装置的β表中获取第二视频数据处理请求,也就是从存储装置的β表中获取第一对应关系。
步骤401、从存储装置的设备信息表中获取第一服务网关的设备信息。
在本申请实施例中,可以从存储装置的设备信息表中获取所有第一服务网关的设备信息,也可以从存储装置的设备信息表中获取部分第一服务网关的设备信息,可以根据实际需求来确定从存储装置的设备信息表中获取哪些第一服务网关的设备信息。
在一些示例性实施例中,为了进一步减少摄像头的拉流压力,使同一摄像头的视频流数据尽量由同一个第一服务网关来拉取,可以先根据存储装置的γ表中的分配信息确定γ表中的第二视频数据处理请求都分配给哪些第一服务网关进行处理,然后再将β表中的第二视频数据处理请求分配给相应的第一服务网关进行处理,并更新到γ表中。也就是说,从存储装置的设备信息表中获取第一服务网关的设备信息包括: 在存储装置的γ表中存在第三视频数据处理请求的情况下,从存储装置的γ表中获取第三视频数据处理请求的分配信息;其中,第三视频数据处理请求对应的摄像头与第二视频数据处理请求对应的摄像头相同;根据第三视频数据处理请求的分配信息从存储装置的设备信息表中获取第三视频数据处理请求对应的第一服务网关的设备信息。
在一些示例性实施例中,在存储装置的γ表中不存在第三视频数据处理请求的情况下,可以从存储装置的设备信息表中获取所有第一服务网关的设备信息,也可以从存储装置的设备信息表中获取部分第一服务网关的设备信息,可以根据实际需求来确定从存储装置的设备信息表中获取哪些第一服务网关的设备信息。
在一些示例性实施例中,第三视频数据处理请求对应的摄像头与第二视频数据处理请求对应的摄像头相同是指第三视频数据处理请求中的请求体的摄像头标识和第二视频数据处理请求中的请求体的摄像头标识相同,且第三视频数据处理请求中的请求体的RTSP地址和第二视频数据处理请求中的请求体的RTSP地址相同。
在一些示例性实施例中,第三视频数据处理请求的分配信息包括:处理第三视频数据处理请求的第一服务网关的设备标识。在一些示例性实施例中,第三视频数据处理请求的分配信息还包括:第三视频数据处理请求中的请求体的摄像头信息、第四视频数据处理请求中的UUID。
在一些示例性实施例中,第三视频数据处理请求对应的第一服务网关是指处理第三视频数据处理请求的第一服务网关。
处理第三视频数据处理请求的第一服务网关是指从第三视频数据处理请求对应的摄像头拉取视频流数据,将拉取的视频流数据发送给对应的算法装置,并接收算法装置返回的处理结果的第一服务网关。
步骤402、根据第一服务网关的设备信息,将第二视频数据处理请求分配给对应的第一服务网关进行处理,将第二视频数据处理请求及对应的分配信息存储在存储装置中的γ表中。
在一些示例性实施例中,根据第一服务网关的设备信息,将第二视频数据处理请求分配给对应的第一服务网关进行处理包括:根据第三视频数据处理请求对应的第一服务网关的设备信息,将第二视频数据处理请求分配给对应的第一服务网关进行处理。
在一些示例性实施例中,在第三视频数据处理请求对应的第一服务网关的可用资源信息能够满足处理第二视频数据处理请求所需要的资源信息的情况下,将第二视频数据处理请求分配给第三视频数据处理请求对应的第一服务网关进行处理。
在一些示例性实施例中,在第三视频数据处理请求对应的第一服务网关的可用资源信息不能满足处理第二视频数据处理请求所需要的资源信息的情况下,可以使第三视频数据处理请求对应的第一服务网关停止处理其他的第二视频数据处理请求,而将第二视频数据处理请求分配给第三视频数据处理请求对应的第一服务网关;也可以暂不将第二视频数据处理请求分配给第三视频数据处理请求对应的第一服务网关,待第三视频数据处理请求的可用资源信息满足处理第二视频数据处理请求所需要的资源信息时,再将第二视频数据处理请求分配给第三视频数据处理请求对应的第一服务网关。也可以采用其他的分配方式,分配的原则是尽量使同一摄像头的视频流数据由同一个第一服务网关拉取。
在一些示例性实施例中,第二视频数据处理请求的分配信息包括:处理第二视频数据处理请求的第一服务网关的设备标识。在一些示例性实施例中,第二视频数据处理请求的分配信息还包括:第二视频数据处理请求中的请求体的摄像头信息、第二视频数据处理请求中的UUID。在一些示例性实施例中,第二视频数据处理请求的分配信息还包括:发起时间。
其中,发起时间是指接收到对应的第一视频数据处理请求的时间。
在一些示例性实施例中,将第二视频数据处理请求及对应的分配信息存储在存储装置中的γ表中时,可以采用如表4所示的存储方式。
表4
Figure 595597DEST_PATH_IMAGE004
本公开实施例提供的视频数据处理方法,通过第一服务网关和第二服务网关统一实现对视频数据处理请求的处理、视频流数据的拉取,而不需要每一个算法与拉流程序打包成的微服务进行视频数据处理请求的处理、视频流数据的拉取,降低了对摄像头的拉流压力。
在一些示例性实施例中,基于第三视频数据处理请求对应的第一服务网关的可用资源信息为第二视频数据处理请求分配第一服务网关,也就是考虑了第一服务网关的负载,提高了第一服务网关的负载均衡能力。
第三方面,本公开另一个实施例提供一种电子设备,其包括:
至少一个处理器;
存储器,其上存储有至少一个程序,当至少一个程序被至少一个处理器执行,使得至少一个处理器实现上述任意一种视频数据处理方法。
其中,处理器为具有数据处理能力的器件,其包括但不限于中央处理器(CPU)等;存储器为具有数据存储能力的器件,其包括但不限于随机存取存储器(RAM,更具体如SDRAM、DDR等)、只读存储器(ROM)、带电可擦可编程只读存储器(EEPROM)、闪存(FLASH)。
在一些实施例中,处理器、存储器通过总线相互连接,进而与计算设备的其它组件连接。
第四方面,本公开另一个实施例提供一种计算机可读存储介质,其上存储有计算机程序,程序被处理器执行时实现上述任意一种视频数据处理方法。
本领域普通技术人员可以理解,上文中所公开方法中的全部或某些步骤、系统、装置中的功能模块/单元可以被实施为软件、固件、硬件及其适当的组合。在硬件实施方式中,在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分;例如,一个物理组件可以具有多个功能,或者一个功能或步骤可以由若干物理组件合作执行。某些物理组件或所有物理组件可以被实施为由处理器,如中央处理器、数字信号处理器或微处理器执行的软件,或者被实施为硬件,或者被实施为集成电路,如专用集成电路。这样的软件可以分布在计算机可读介质上,计算机可读介质可以包括计算机存储介质(或非暂时性介质)和通信介质(或暂时性介质)。如本领域普通技术人员公知的,术语计算机存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其它数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。计算机存储介质包括但不限于RAM、ROM、EEPROM、闪存或其它存储器技术、CD-ROM、数字多功能盘(DVD)或其它光盘存储、磁盒、磁带、磁盘存储或其它磁存储器、或者可以用于存储期望的信息并且可以被计算机访问的任何其它的介质。此外,本领域普通技术人员公知的是,通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其它传输机制之类的调制数据信号中的其它数据,并且可包括任何信息递送介质。
本文已经公开了示例实施例,并且虽然采用了具体术语,但它们仅用于并仅应当被解释为一般说明性含义,并且不用于限制的目的。在一些实例中,对本领域技术人员显而易见的是,除非另外明确指出,否则可单独使用与特定实施例相结合描述的特征、特性和/或元素,或可与其它实施例相结合描述的特征、特性和/或元件组合使用。因此,本领域技术人员将理解,在不脱离由所附的权利要求阐明的本公开的范围的情况下,可进行各种形式和细节上的改变。

Claims (10)

1.一种视频数据处理方法,应用于第一服务网关,该方法包括:
接收第一视频数据处理请求,根据所述第一视频数据处理请求生成第二视频数据处理请求,将第二视频数据处理请求存储在存储装置的β表中;其中,所述第二视频数据处理请求包括:通用唯一识别码UUID、请求体和动作类型;所述请求体包括:时间、摄像头信息和算法信息;所述动作类型包括:启动算法或停止算法;
根据所述存储装置的γ表中的分配信息确定分配给所述第一服务网关的第二视频数据处理请求;从所述存储装置的γ表中获取分配给所述第一服务网关的第二视频数据处理请求,根据分配给所述第一服务网关的第二视频数据处理请求从相应的摄像头拉取视频流数据,将拉取的视频流数据发送给相应的算法装置;其中,所述γ表中存储有所述第二视频数据处理请求及对应的分配信息;所述分配信息根据所述存储装置的设备信息表中的第一服务网关的设备信息确定;
其中,所述根据所述第一视频数据处理请求生成第二视频数据处理请求包括:
为所述第一视频数据处理请求生成所述UUID,将所述UUID添加到所述第一视频数据处理请求中得到第二视频数据处理请求。
2.根据权利要求1所述的视频数据处理方法,该方法还包括:
将所述第一服务网关的设备信息存储在所述存储装置的设备信息表中;其中,设备信息包括:设备标识和以下至少之一:任务数量、线程数量、更新时间、表征是否在线的状态信息、可用资源信息、总资源信息。
3.根据权利要求1所述的视频数据处理方法,所述将拉取的视频流数据发送给相应的算法装置后,该方法还包括:
将所述算法装置返回的处理结果中的图像发送至图像数据库进行存储,将所述处理结果中的视频上传至视频存储服务器进行存储,将所述处理结果中的结构化数据上传至结构化数据库进行存储。
4.根据权利要求1所述的视频数据处理方法,所述根据所述第一视频数据处理请求生成第二视频数据处理请求后,该方法还包括:
将所述第二视频数据处理请求的状态信息存储在所述存储装置中的α表中;定时更新所述第二视频数据处理请求的状态信息;
在所述第二视频数据处理请求的状态信息为表征处理成功的信息的情况下,删除所述存储装置的β表中所述第二视频数据处理请求。
5.根据权利要求1-4任意一项所述的视频数据处理方法,其中,所述摄像头信息包括:摄像头标识、摄像头的实时流协议RTSP地址;所述算法信息包括:算法名称。
6.一种视频数据处理方法,应用于第二服务网关,该方法包括:
从存储装置的β表中获取第二视频数据处理请求;其中,所述第二视频数据处理请求为将为第一视频数据处理请求生成的通用唯一识别码UUID添加到所述第一视频数据处理请求中得到;
从所述存储装置的设备信息表中获取第一服务网关的设备信息;其中,设备信息包括:设备标识和以下至少之一:任务数量、线程数量、更新时间、表征是否在线的状态信息、可用资源信息、总资源信息;任务数量是指第一服务网关目前正在处理的第二视频数据处理请求的数量;线程数量是指第一服务网关目前正在处理第二视频数据处理请求时所采用的线程数量;更新时间是指设备信息上报的时间;表征是否在线的状态信息用于指示第一服务网关当前是否处于在线状态;可用资源信息用于表示第一服务网关当前可用的资源信息;总资源信息用于表示第一服务网关当前总的资源信息;资源是指CPU、内存、网络中的至少一个;
根据所述第一服务网关的设备信息,将所述第二视频数据处理请求分配给对应的第一服务网关进行处理,将所述第二视频数据处理请求及对应的分配信息存储在所述存储装置中的γ表中。
7.根据权利要求6所述的视频数据处理方法,其中,从所述存储装置的设备信息表中获取第一服务网关的设备信息包括:
在所述存储装置的γ表中存在第三视频数据处理请求的情况下,从所述存储装置的γ表中获取所述第三视频数据处理请求的分配信息;其中,所述第三视频数据处理请求对应的摄像头与所述第二视频数据处理请求对应的摄像头相同;
根据所述第三视频数据处理请求的分配信息从所述存储装置的设备信息表中获取所述第三视频数据处理请求对应的第一服务网关的设备信息;
所述根据所述第一服务网关的设备信息,将所述第二视频数据处理请求分配给对应的第一服务网关进行处理包括:根据所述第三视频数据处理请求对应的第一服务网关的设备信息,将所述第二视频数据处理请求分配给对应的第一服务网关进行处理。
8.根据权利要求7所述的视频数据处理方法,其中,所述根据所述第三视频数据处理请求对应的第一服务网关的设备信息,将所述第二视频数据处理请求分配给对应的第一服务网关进行处理包括:
根据所述第三视频数据处理请求对应的第一服务网关的设备信息,将所述第二视频数据处理请求分配给所述第三视频数据处理请求对应的第一服务网关进行处理。
9.一种电子设备,其包括:
至少一个处理器;
存储器,其上存储有至少一个程序,当所述至少一个程序被所述至少一个处理器执行,使得所述至少一个处理器实现权利要求1-8任意一项所述的视频数据处理方法。
10.一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现权利要求1-8任意一项所述的视频数据处理方法。
CN202111241621.5A 2021-10-25 2021-10-25 视频数据处理方法、电子设备、计算机可读存储介质 Active CN113691879B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202111241621.5A CN113691879B (zh) 2021-10-25 2021-10-25 视频数据处理方法、电子设备、计算机可读存储介质
PCT/CN2022/104180 WO2023071283A1 (zh) 2021-10-25 2022-07-06 视频数据处理方法、电子设备、计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111241621.5A CN113691879B (zh) 2021-10-25 2021-10-25 视频数据处理方法、电子设备、计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN113691879A CN113691879A (zh) 2021-11-23
CN113691879B true CN113691879B (zh) 2022-03-15

Family

ID=78587810

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111241621.5A Active CN113691879B (zh) 2021-10-25 2021-10-25 视频数据处理方法、电子设备、计算机可读存储介质

Country Status (2)

Country Link
CN (1) CN113691879B (zh)
WO (1) WO2023071283A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113691879B (zh) * 2021-10-25 2022-03-15 通号通信信息集团有限公司 视频数据处理方法、电子设备、计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110445761A (zh) * 2019-07-10 2019-11-12 视联动力信息技术股份有限公司 一种视频拉流方法及装置
CN110830826A (zh) * 2018-08-08 2020-02-21 视联动力信息技术股份有限公司 视频转码设备调度方法及系统
EP3723379A1 (en) * 2017-12-04 2020-10-14 Tencent Technology (Shenzhen) Company Limited Media data processing method, computer device and storage medium
CN112714161A (zh) * 2020-12-22 2021-04-27 北京金山云网络技术有限公司 视频接入方法、装置及视频接入系统
CN113259375A (zh) * 2021-06-10 2021-08-13 长视科技股份有限公司 一种视频服务的响应方法及电子设备

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11294736B2 (en) * 2016-09-29 2022-04-05 Nec Corporation Distributed processing system, distributed processing method, and recording medium
CN109495929B (zh) * 2017-09-12 2021-08-03 华为技术有限公司 一种业务处理方法、移动边缘计算设备及网络设备
CN109617889A (zh) * 2018-12-24 2019-04-12 北京旷视科技有限公司 视频传输系统和视频传输方法、装置及存储介质
CN110445716B (zh) * 2019-07-15 2021-06-22 南京邮电大学 基于SDN网络多QoS负载均衡路由方法、存储介质和终端
CN112261353B (zh) * 2020-09-01 2022-10-28 浙江大华技术股份有限公司 一种视频监控分流方法、系统以及计算机可读存储介质
CN113691879B (zh) * 2021-10-25 2022-03-15 通号通信信息集团有限公司 视频数据处理方法、电子设备、计算机可读存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3723379A1 (en) * 2017-12-04 2020-10-14 Tencent Technology (Shenzhen) Company Limited Media data processing method, computer device and storage medium
CN110830826A (zh) * 2018-08-08 2020-02-21 视联动力信息技术股份有限公司 视频转码设备调度方法及系统
CN110445761A (zh) * 2019-07-10 2019-11-12 视联动力信息技术股份有限公司 一种视频拉流方法及装置
CN112714161A (zh) * 2020-12-22 2021-04-27 北京金山云网络技术有限公司 视频接入方法、装置及视频接入系统
CN113259375A (zh) * 2021-06-10 2021-08-13 长视科技股份有限公司 一种视频服务的响应方法及电子设备

Also Published As

Publication number Publication date
WO2023071283A1 (zh) 2023-05-04
CN113691879A (zh) 2021-11-23

Similar Documents

Publication Publication Date Title
US20190166192A1 (en) Method and Device for Storage Resource Allocation for Video Cloud Storage
CN109462726B (zh) 摄像头的控制方法和装置
CN110795244B (zh) 一种任务分配方法、装置、设备及介质
CN109120885B (zh) 视频数据获取方法及装置
CN113301299B (zh) 一种多通道视频传输方法、系统、终端以及存储介质
CN113691879B (zh) 视频数据处理方法、电子设备、计算机可读存储介质
CN105786539B (zh) 一种文件下载方法及装置
CN109144782B (zh) 一种数据恢复方法及装置
CN112214313A (zh) 内存分配方法及相关设备
CN110958132A (zh) 监控网卡设备的方法、基板管理控制器及网卡设备
CN110808881A (zh) 模型部署方法和装置、目标监测方法和装置、设备及系统
CN108230487A (zh) 共享摄像头资源的方法及设备
CN112532665A (zh) 一种服务器负载均衡的方法、装置及cdn节点
US20190124395A1 (en) Image processing apparatus and image data processing method cooperating with frame buffer
CN110049350B (zh) 视频转码处理方法、装置、计算机设备和存储介质
US20170005946A1 (en) Method of allocating processes on node devices, apparatus, and storage medium
CN110891033B (zh) 网络资源处理方法、装置、网关、控制器及存储介质
WO2021012974A1 (zh) 基于云平台的容器化应用网络流控方法、装置、设备及存储介质
CN110968406A (zh) 处理任务的方法、装置、存储介质和处理器
CN112100017B (zh) 一种内存资源监控方法及装置
CN115460300A (zh) 数据处理方法、toe硬件及计算机可读存储介质
CN110968409A (zh) 一种数据处理方法及装置
CN112218104A (zh) 一种数据传输方法、装置、终端设备和存储介质
CN111939562A (zh) 共享存储方法、电子设备及计算机可读存储介质
CN106257461B (zh) 数据存储方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant