CN106331642A - 一种视频云系统中的数据处理方法及装置 - Google Patents

一种视频云系统中的数据处理方法及装置 Download PDF

Info

Publication number
CN106331642A
CN106331642A CN201610799647.4A CN201610799647A CN106331642A CN 106331642 A CN106331642 A CN 106331642A CN 201610799647 A CN201610799647 A CN 201610799647A CN 106331642 A CN106331642 A CN 106331642A
Authority
CN
China
Prior art keywords
back end
video data
video
caching
newly
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610799647.4A
Other languages
English (en)
Other versions
CN106331642B (zh
Inventor
俞乐勤
钱浩东
周明伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN201610799647.4A priority Critical patent/CN106331642B/zh
Publication of CN106331642A publication Critical patent/CN106331642A/zh
Application granted granted Critical
Publication of CN106331642B publication Critical patent/CN106331642B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H04L41/0654—Management of faults, events, alarms or notifications using network fault recovery
    • H04L41/0663—Performing the actions predefined by failover planning, e.g. switching to standby network elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明公开了一种视频云系统中录像数据的处理方法及装置，确定第一数据节点和第二数据节点；控制所述第一数据节点作为主用数据节点从前端录像设备处获取录像数据；控制所述第二数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据，所述T时间为检测所述第一数据节点发生故障并将所述第一数据节点的通道任务迁移到所述第二数据节点上所用的时间；若检测到所述第一数据节点发生故障，控制所述第二数据节点接续所述第一数据节点的通道任务。通过本发明可以通过视频云系统中的数据节点避免录像数据的丢失。

Description

一种视频云系统中的数据处理方法及装置
技术领域
本发明涉及监控领域，尤其涉及一种视频云系统中的数据处理方法及装置。
背景技术
随着监控设备数量的不断增加以及监控需求的多样化，视频云系统的产生变得越来越重要。
视频云系统由一些管理节点、数据节点和通道设备组成。其中，管理节点控制所述通道设备的录制策略，数据节点依据所述录制策略控制所述通道设备的录制任务。为实现录像文件在视频云系统中的云存储，可将设置在集群网络中的前端录像设备(例如摄像机)以通道设备形式体现在视频云系统中，由管理节点对以通道设备形式体现的前端录像设备进行各种需求化的策略定制，并由数据节点依据所述录制策略实现对所述前端录像设备录制的录像数据的拉流，并将生成的录像文件保存到云存储。
目前应用视频云系统实现录像文件的云存储过程中，经常会出现录像数据丢失的情况。
发明内容
本发明实施例提供一种视频云系统中录像数据的处理方法，以在应用视频云系统实现录像文件的云存储过程中，保证录像数据不丢失。
第一方面，本发明实施例提供一种视频云系统中录像数据的处理方法，所述方法包括：
确定第一数据节点和第二数据节点，其中，所述第一数据节点和所述第二数据节点具备从前端录像设备获取录像数据的功能；
控制所述第一数据节点作为主用数据节点从前端录像设备处获取录像数据；
控制所述第二数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据，所述T时间为检测所述第一数据节点发生故障并将所述第一数据节点的通道任务迁移到所述第二数据节点上所用的时间；
若检测到所述第一数据节点发生故障，控制所述第二数据节点接续所述第一数据节点的通道任务，所述通道任务包括从前端录像设备获取录像数据的拉流服务和将获取的录像数据保存到云存储中的写流服务。
本发明实施例中，首先通过控制所述第二数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据，然后控制所述第二数据节点接续所述第一数据节点的通道任务，能够避免录像数据的丢失。
具体的，控制所述第二数据节点实时从所述前端录像设备处获取T时间内的最新录像数据，并以获取到的T时间内的最新录像数据实时更新已保存在缓存中的录像数据。
本发明实施例中，以获取到的T时间内的最新录像数据实时更新已保存在缓存中的录像数据，能够保证缓存中的T时间内的录像数据始终是最新的。
具体的，控制所述第二数据节点分别与所述前端录像设备和云存储建立通道任务连接，形成新拉流服务和新写流服务；
通过所述新拉流服务从所述前端录像设备处获取录像数据；
通过所述新写流服务将所述第二数据节点从所述前端录像设备处获取的录像数据，保存到云存储中。
本发明实施例中，通过所述新拉流服务和新写流服务，能够保证顺利的获得前端录像设备的录像数据，进而将前端录像设备的录像数据传递并保存到云存储中。
具体的，判断所述第二数据节点的缓存中是否保存有从所述前端录像设备处获取的录像数据；
若所述第二数据节点的缓存中保存有从所述前端录像设备处获取的录像数据，则控制所述新写流服务以大于正常写流速度的写流速度，将所述缓存中保存的录像数据保存到云存储中；
若所述第二数据节点的缓存中不存在从所述前端录像设备处获取的录像数据，则控制所述新写流服务以正常写流速度，将所述新拉流服务获取的录像数据保存到云存储中。
本发明实施例中，若判断出所述第二数据节点的缓存中保存有从所述前端录像设备处获取的录像数据，则控制所述新写流服务以大于正常写流速度的写流速度，将所述缓存中保存的录像数据保存到云存储中，能够保证写流服务的实时性。
其中，所述控制所述新写流服务以大于正常写流速度的写流速度，将所述缓存中保存的录像数据保存到云存储中，包括：
确定云存储中保存的录像文件中最后一个完整画面组GOP；
在所述缓存中查找所述完整GOP的下一GOP对应的录像数据；
控制所述新写流服务以大于正常写流速度的写流速度，将所述下一GOP以及所述下一GOP之后的录像数据保存到云存储中，直至将所述缓存中的录像数据清空。
本发明实施例中，首先通过确定云存储中保存的录像文件中最后一个完整画面组GOP，然后在所述缓存中查找所述完整GOP的下一GOP以及所述下一GOP之后的录像数据，直至将所述缓存中的录像数据清空，不仅能够保证录像数据不丢失，而且可以保证录像数据不重合。
进一步的，通过所述新拉流服务从所述前端录像设备处获取录像数据之后，所述方法还包括：
若所述第二数据节点的缓存中保存有从所述前端录像设备处获取的录像数据，则将通过所述新拉流服务从所述前端录像设备处获取录像数据保存到所述第二数据节点的缓存中。
进一步的，将所述缓存中的录像数据清空之后，所述方法还包括：
控制所述第二数据节点释放所述缓存。
进一步的，所述控制所述第二数据节点接续所述第一数据节点的通道任务之后，所述方法还包括：
确定第三数据节点，并控制所述第三数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据。
本发明实施例中，通过确定第三数据节点，并控制所述第三数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据，能够保证若所述第二数据节点发生故障，所述第三数据节点可以实时接替通道任务，进而保障录像数据不丢失。
第二方面，本发明实施例提供一种视频云系统中录像数据的处理装置，该装置包括确定单元和控制单元，其中：
确定单元，用于确定第一数据节点和第二数据节点，其中，所述第一数据节点和所述第二数据节点具备从前端录像设备获取录像数据的功能。
控制单元，用于控制所述确定单元确定出的所述第一数据节点作为主用数据节点从前端录像设备处获取录像数据；控制所述确定单元确定出的所述第二数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据，所述T时间为检测所述第一数据节点发生故障并将所述第一数据节点的通道任务迁移到所述第二数据节点上所用的时间；若检测到所述第一数据节点发生故障，控制所述第二数据节点接续所述第一数据节点的通道任务，所述通道任务包括从前端设备获取录像数据的拉流服务和将获取的录像数据保存到云存储中的写流服务。
进一步的，所述控制单元还用于：控制所述第二数据节点接续所述第一数据节点的通道任务之后，确定第三数据节点，并控制所述第三数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据。
较佳的，所述控制单元用于；控制所述第二数据节点实时从所述前端录像设备处获取T时间内的最新录像数据，并以获取到的T时间内的最新录像数据实时更新已保存在缓存中的录像数据。
具体的，所述控制单元具体用于：控制所述第二数据节点分别与所述前端录像设备和云存储建立通道任务连接，形成新拉流服务和新写流服务；通过所述新拉流服务从所述前端录像设备处获取录像数据；通过所述新写流服务将所述第二数据节点从所述前端录像设备处获取的录像数据，保存到云存储中。
进一步的，所述控制单元还用于：
通过所述新拉流服务从所述前端录像设备处获取录像数据之后，若所述第二数据节点的缓存中保存有从所述前端录像设备处获取的录像数据，则将通过所述新拉流服务从所述前端录像设备处获取录像数据保存到所述第二数据节点的缓存中。
具体的，所述控制单元具体用于：判断所述第二数据节点的缓存中是否保存有从所述前端录像设备处获取的录像数据；若所述第二数据节点的缓存中保存有从所述前端录像设备处获取的录像数据，则控制所述新写流服务以大于正常写流速度的写流速度，将所述缓存中保存的录像数据保存到云存储中；若所述第二数据节点的缓存中不存在从所述前端录像设备处获取的录像数据，则控制所述新写流服务以正常写流速度，将所述新拉流服务获取的录像数据保存到云存储中。
较佳的，所述控制单元具体用于：确定云存储中保存的录像文件中最后一个完整画面组GOP；在所述缓存中查找所述确定单元确定出的所述完整GOP的下一GOP对应的录像数据；控制所述新写流服务以大于正常写流速度的写流速度，将所述下一GOP以及所述下一GOP之后的录像数据保存到云存储中，直至将所述缓存中的录像数据清空。
进一步的，所述控制单元还用于：
将所述缓存中的录像数据清空之后，控制所述第二数据节点释放所述缓存。
附图说明
图1为本发明实施例提供的视频云系统中录像数据的处理方法一种实施流程图；
图2为本发明实施例提供的视频云系统中录像数据的处理方法另一种实施流程图；
图3为本发明实施例提供的第二数据节点接续所述第一数据节点的通道任务的实施流程图；
图4为本发明实施例提供的第二数据节点将所述前端录像设备的录像数据保存到云存储中的实施流程图；
图5为本发明实施例提供的将第二数据节点缓存中保存的录像数据保存到云存储中的实施流程图；
图6为本发明实施例提供的视频云系统中录像数据的处理装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，并不是全部的实施例。
本发明实施例提供一种视频云系统中录像数据的处理方法，一种实施方法中，确定第一数据节点和第二数据节点，其中，所述第一数据节点和所述第二数据节点具备从前端录像设备获取录像数据的功能；控制所述第一数据节点作为主用数据节点从前端录像设备处获取录像数据；控制所述第二数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据，所述T时间为检测所述第一数据节点发生故障并将所述第一数据节点的通道任务迁移到所述第二数据节点上所用的时间；若检测到所述第一数据节点发生故障，控制所述第二数据节点接续所述第一数据节点的通道任务，所述通道任务包括从前端录像设备获取录像数据的拉流服务和将获取的录像数据保存到云存储中的写流服务。
本发明实施例中，控制所述第二数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据，在第一数据节点出现故障时，控制所述第二数据节点接续所述第一数据节点的通道任务，能够通过视频云系统中的数据节点保存录像数据，避免录像数据的丢失。进一步的，本发明实施例中，是应用第二数据节点作为备用数据节点从前端录像设备处获取并保存录像数据，无需前端录像设备对录像数据进行存储，进而可减少前端录像设备存储数据的成本和压力。
图1为本发明实施例提供的一种视频云系统中录像数据的处理方法，可以包括以下步骤：
S11、确定第一数据节点和第二数据节点。
具体的，在视频云系统中进行录制任务时，管理节点需要对前端录像设备进行策略定制，定制的策略包括选取第一数据节点和第二数据节点。其中，所述第一数据节点和所述第二数据节点具备从前端录像设备获取录像数据的功能。
S12、控制所述第一数据节点作为主用数据节点从前端录像设备处获取录像数据。
具体的，在视频云系统中进行录制任务时，管理节点根据录制策略选取出第一数据节点作为主用数据节点，并将录制任务下发给主用数据节点，使得主用数据节点从前端录像设备处获取录像数据。
S13、控制所述第二数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据。
具体的，在视频云系统中进行录制任务时，可以给管理节点和所有的数据节点配置故障检测时间T。其中，第一数据节点根据管理节点下发的录制策略，正常的获取前端录像设备中的录像数据，第二数据节点根据录制策略，每次只获取当前T时间内的最新录像数据，故，当第一数据节点发生故障时，第二数据节点中保存有T时间内的录像数据。所述T时间为检测所述第一数据节点发生故障并将所述第一数据节点的通道任务迁移到所述第二数据节点上所用的时间。
S14、检测所述第一数据节点是否发生故障。
若是，则执行S15、控制所述第二数据节点接续所述第一数据节点的通道任务。
具体的，所述通道任务包括从前端录像设备获取录像数据的拉流服务和将获取的录像数据保存到云存储中的写流服务。
若否，则执行S16、控制所述第一数据节点继续执行从前端录像设备处获取录像数据并将录像数据保存到云存储中的通道任务。
本发明实施例中，通过控制所述第二数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据，在第一数据节点出现故障的情况下，控制所述第二数据节点接续所述第一数据节点的通道任务，能够避免录像数据的丢失。进一步的，本发明实施例中，是应用第二数据节点作为备用数据节点从前端录像设备处获取并保存录像数据，无需前端录像设备对录像数据进行存储，进而可减少前端录像设备存储数据的成本和压力。
进一步的，为保证录像数据不丢失，控制所述第二数据节点接续所述第一数据节点的通道任务之后，上述实施例中还包括步骤S17，如图2所示，步骤S17、确定第三数据节点，并控制所述第三数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据。
本发明实施例中，通过确定第三数据节点，并控制所述第三数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据，能够保证若所述第二数据节点发生故障，所述第三数据节点可以实时接替通道任务，进而保障录像数据不丢失。
可选的，本发明实施例中可在第二数据节点中设置专门用于保存从前端录像设备处获取的录像数据的缓存。
本发明实施例中可控制所述第二数据节点实时从所述前端录像设备处获取T时间内的最新录像数据，并以获取到的T时间内的最新录像数据实时更新已保存在所述缓存中的录像数据，以保证缓存中的T时间内的录像数据始终是最新的。
本发明实施例以下对第二数据节点接续所述第一数据节点的通道任务，从前端录像设备处获取录像数据，并将保存的录像数据存储到云存储的过程进行详细说明。
图3所示为本发明实施例中第二数据节点接续所述第一数据节点的通道任务的实施流程图，如图3所示，可以包括如下步骤：
S31、控制所述第二数据节点分别与所述前端录像设备和云存储建立通道任务连接，形成新拉流服务和新写流服务。
具体的，所述第一数据节点发生故障之后，第二数据节点会分别向所述前端录像设备和云存储的发送连接请求，所述前端录像设备和云存储收到所述连接请求后，会与所述第二数据节点重新建立通道任务连接，进而形成新拉流服务和新写流服务。
S32、通过所述新拉流服务从所述前端录像设备处获取录像数据。
S33、通过所述新写流服务将所述第二数据节点从所述前端录像设备处获取的录像数据，保存到云存储中。
需要说明的，所述拉流服务和写流服务可以部署在同一套系统的不同数据节点。也可以部署在同一个节点上。
本发明实施例中，通过控制所述第二数据节点分别与所述前端录像设备和云存储建立通道任务连接，形成新拉流服务和新写流服务，能够保证顺利的从前端录像设备获取录像数据，进而将前端录像设备的录像数据传递并保存到云存储中。
可选的，为保证第二数据节点形成的新写流服务能够将所述前端录像设备的录像数据完整的保存到云存储中，可采用如图4所示的实施方式。如图4所示，可以包括如下步骤：
S331、判断所述第二数据节点的缓存中是否保存有从所述前端录像设备处获取的录像数据。
若有，则执行S332、控制所述新写流服务以大于正常写流速度的写流速度，将所述缓存中保存的录像数据保存到云存储中。
具体的，在所述第二数据节点与所述前端录像设备和云存储重新建立连接之后，所述新写流服务会从第二数据节点的缓存中获取录像数据，以将第一数据节点故障切换到第二数据节点这个时间段内丢失的录像数据保存到云存储中。
若没有，则执行S333、控制所述新写流服务以正常写流速度，将所述新拉流服务获取的录像数据保存到云存储中。
具体的，为保证录像数据不重合，本发明实施例可采用如图5所示的方法，控制所述新写流服务以大于正常写流速度的写流速度，将所述缓存中保存的录像数据保存到云存储中，如图5所示，可以包括如下步骤：
S41、确定云存储中保存的录像文件中最后一个完整画面组(Group of Pictures，GOP)。
具体的，所述第二数据节点接续所述第一数据节点的通道任务之后，所述新写流服务会在云存储中查找当前最后一个录像文件，并确定云存储中保存的最后一个录像文件中的最后一个完整的GOP
S42、在所述缓存中查找所述完整GOP的下一GOP对应的录像数据。
S43、控制所述新写流服务以大于正常写流速度的写流速度，将所述下一GOP以及所述下一GOP之后的录像数据保存到云存储中，直至将所述缓存中的录像数据清空。
本发明实施例中，首先通过确定云存储中保存的录像文件中最后一个完整画面组GOP，然后在所述缓存中查找所述完整GOP的下一GOP以及所述下一GOP之后的录像数据，直至将所述缓存中的录像数据清空，不仅能够保证录像数据不丢失，而且可以保证录像数据不重合。
本发明实施例中，若判断出所述第二数据节点的缓存中保存有从所述前端录像设备处获取的录像数据，则控制所述新写流服务以大于正常写流速度的写流速度，一方面能够保证尽快将缓存中保存的录像数据保存到云存储中，另一方面可实现所述新拉流服务和所述新写流服务对所述前端录像设备的录像数据的并行处理。
具体的，本发明实施例中，所述新拉流服务可以按照正常的拉流速度将获取的录像数据保存到所述第二数据节点的缓存中，所述新写流服务以大于正常写流速度的写流速度，将所述缓存中保存的录像数据保存到云存储中，使得录像数据保存到云存储的速度高于录像数据保存到所述缓存中的速度，进而会出现所述缓存中保存的数据被清空的情况。
本发明实施例中，若所述缓存中的录像被清空后，所述新拉流服务可将获取的录像数据直接发送给新写流服务，即可按照原有的方式实现录像数据获取与存储。
故本发明实施例中一种可实施的方式中，所述新拉流服务从所述前端录像设备处获取录像数据之后，可判断所述第二数据节点的缓存中是否保存有从所述前端录像设备处获取的录像数据。若所述第二数据节点的缓存中保存有从所述前端录像设备处获取的录像数据，则将通过所述新拉流服务从所述前端录像设备处获取录像数据保存到所述第二数据节点的缓存中。若所述第二数据节点的缓存中所述前端录像设备处获取的录像数据被清空，则可将通过所述新拉流服务从所述前端录像设备处获取录像数据发送给所述新写流服务。
进一步的，本发明实施例中为了节约第二数据节点的存储资源，可在将所述缓存中的录像数据清空之后，控制所述第二数据节点释放所述缓存。
基于上述实施例提供的视频云系统中录像数据的处理方法，本发明实施例提供一种视频云系统中录像数据的处理装置，该装置可以应用于视频云系统中，图6所示为本发明实施例提供的视频云系统中录像数据的处理装置的结构示意图，如图6所示，该设备包括确定单元71和控制单元72，其中：
确定单元71，用于确定第一数据节点和第二数据节点，其中，所述第一数据节点和所述第二数据节点具备从前端录像设备获取录像数据的功能。
控制单元72，用于控制所述确定单元71确定出的所述第一数据节点作为主用数据节点从前端录像设备处获取录像数据；控制所述确定单元71确定出的所述第二数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据，所述T时间为检测所述第一数据节点发生故障并将所述第一数据节点的通道任务迁移到所述第二数据节点上所用的时间；若检测到所述第一数据节点发生故障，控制所述第二数据节点接续所述第一数据节点的通道任务，所述通道任务包括从前端设备获取录像数据的拉流服务和将获取的录像数据保存到云存储中的写流服务。
进一步的，所述控制单元72还用于：控制所述第二数据节点接续所述第一数据节点的通道任务之后，确定第三数据节点，并控制所述第三数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据。
较佳的，所述控制单元72用于；控制所述第二数据节点实时从所述前端录像设备处获取T时间内的最新录像数据，并以获取到的T时间内的最新录像数据实时更新已保存在缓存中的录像数据。
具体的，所述控制单元72具体用于：控制所述第二数据节点分别与所述前端录像设备和云存储建立通道任务连接，形成新拉流服务和新写流服务；通过所述新拉流服务从所述前端录像设备处获取录像数据；通过所述新写流服务将所述第二数据节点从所述前端录像设备处获取的录像数据，保存到云存储中。
进一步的，所述控制单元72还用于：
通过所述新拉流服务从所述前端录像设备处获取录像数据之后，若所述第二数据节点的缓存中保存有从所述前端录像设备处获取的录像数据，则将通过所述新拉流服务从所述前端录像设备处获取录像数据保存到所述第二数据节点的缓存中。
具体的，所述控制单元72具体用于：判断所述第二数据节点的缓存中是否保存有从所述前端录像设备处获取的录像数据；若所述第二数据节点的缓存中保存有从所述前端录像设备处获取的录像数据，则控制所述新写流服务以大于正常写流速度的写流速度，将所述缓存中保存的录像数据保存到云存储中；若所述第二数据节点的缓存中不存在从所述前端录像设备处获取的录像数据，则控制所述新写流服务以正常写流速度，将所述新拉流服务获取的录像数据保存到云存储中。
较佳的，所述控制单元72具体用于：确定云存储中保存的录像文件中最后一个完整画面组GOP；在所述缓存中查找所述确定单元71确定出的所述完整GOP的下一GOP对应的录像数据；控制所述新写流服务以大于正常写流速度的写流速度，将所述下一GOP以及所述下一GOP之后的录像数据保存到云存储中，直至将所述缓存中的录像数据清空。
进一步的，所述控制单元72还用于：
将所述缓存中的录像数据清空之后，控制所述第二数据节点释放所述缓存。
可以理解的是，本实施例的视频云系统中录像数据的处理装置可用于实现上述方法实施例中涉及的所有功能，其具体实现过程可以参照上述方法实施例的相关描述，此处不再赘述。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (16)

1.一种视频云系统中录像数据的处理方法，其特征在于，所述方法包括：
确定第一数据节点和第二数据节点，其中，所述第一数据节点和所述第二数据节点具备从前端录像设备获取录像数据的功能；
控制所述第一数据节点作为主用数据节点从前端录像设备处获取录像数据；
控制所述第二数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据，所述T时间为检测所述第一数据节点发生故障并将所述第一数据节点的通道任务迁移到所述第二数据节点上所用的时间；
若检测到所述第一数据节点发生故障，控制所述第二数据节点接续所述第一数据节点的通道任务，所述通道任务包括从前端录像设备获取录像数据的拉流服务和将获取的录像数据保存到云存储中的写流服务。
2.如权利要求1所述的方法，其特征在于，所述控制所述第二数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据，包括：
控制所述第二数据节点实时从所述前端录像设备处获取T时间内的最新录像数据，并以获取到的T时间内的最新录像数据实时更新已保存在缓存中的录像数据。
3.如权利要求1或2所述的方法，其特征在于，所述控制所述第二数据节点接续所述第一数据节点的通道任务，包括：
控制所述第二数据节点分别与所述前端录像设备和云存储建立通道任务连接，形成新拉流服务和新写流服务；
通过所述新拉流服务从所述前端录像设备处获取录像数据；
通过所述新写流服务将所述第二数据节点从所述前端录像设备处获取的录像数据，保存到云存储中。
4.如权利要求3所述的方法，其特征在于，通过所述新写流服务将所述第二数据节点从所述前端录像设备处获取的录像数据，保存到云存储中，包括：
判断所述第二数据节点的缓存中是否保存有从所述前端录像设备处获取的录像数据；
若所述第二数据节点的缓存中保存有从所述前端录像设备处获取的录像数据，则控制所述新写流服务以大于正常写流速度的写流速度，将所述缓存中保存的录像数据保存到云存储中；
若所述第二数据节点的缓存中不存在从所述前端录像设备处获取的录像数据，则控制所述新写流服务以正常写流速度，将所述新拉流服务获取的录像数据保存到云存储中。
5.如权利要求4所述的方法，其特征在于，所述控制所述新写流服务以大于正常写流速度的写流速度，将所述缓存中保存的录像数据保存到云存储中，包括：
确定云存储中保存的录像文件中最后一个完整画面组GOP；
在所述缓存中查找所述完整GOP的下一GOP对应的录像数据；
控制所述新写流服务以大于正常写流速度的写流速度，将所述下一GOP以及所述下一GOP之后的录像数据保存到云存储中，直至将所述缓存中的录像数据清空。
6.如权利要求3、4或5所述的方法，其特征在于，通过所述新拉流服务从所述前端录像设备处获取录像数据之后，所述方法还包括：
若所述第二数据节点的缓存中保存有从所述前端录像设备处获取的录像数据，则将通过所述新拉流服务从所述前端录像设备处获取录像数据保存到所述第二数据节点的缓存中。
7.如权利要求5所述的方法，其特征在于，将所述缓存中的录像数据清空之后，所述方法还包括：
控制所述第二数据节点释放所述缓存。
8.如权利要求1至7任一所述的方法，其特征在于，所述控制所述第二数据节点接续所述第一数据节点的通道任务之后，所述方法还包括：
确定第三数据节点，并控制所述第三数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据。
9.一种视频云系统中录像数据的处理装置，其特征在于，包括确定单元、控制单元：
所述确定单元，用于确定第一数据节点和第二数据节点，其中，所述第一数据节点和所述第二数据节点具备从前端录像设备获取录像数据的功能；
所述控制单元，用于控制所述确定单元确定出的所述第一数据节点作为主用数据节点从前端录像设备处获取录像数据，以及控制所述确定单元确定出的所述第二数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据，所述T时间为检测所述第一数据节点发生故障并将所述第一数据节点的通道任务迁移到所述第二数据节点上所用的时间，若检测到所述第一数据节点发生故障，控制所述第二数据节点接续所述第一数据节点的通道任务，所述通道任务包括从前端录像设备获取录像数据的拉流服务和将获取的录像数据保存到云存储中的写流服务。
10.如权利要求9所述的装置，其特征在于，所述控制单元具体用于按照如下方式控制所述第二数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据：
控制所述第二数据节点实时从所述前端录像设备处获取T时间内的最新录像数据，并以获取到的T时间内的最新录像数据实时更新已保存在缓存中的录像数据。
11.如权利要求9或10所述的装置，其特征在于，所述控制单元具体用于按照如下方式控制所述第二数据节点接续所述第一数据节点的通道任务：
控制所述第二数据节点分别与所述前端录像设备和云存储建立通道任务连接，形成新拉流服务和新写流服务；
通过所述新拉流服务从所述前端录像设备处获取录像数据；
通过所述新写流服务将所述第二数据节点从所述前端录像设备处获取的录像数据，保存到云存储中。
12.如权利要求11所述的装置，其特征在于，所述控制单元具体用于按照如下方式通过所述新写流服务将所述第二数据节点从所述前端录像设备处获取的录像数据，保存到云存储中：
判断所述第二数据节点的缓存中是否保存有从所述前端录像设备处获取的录像数据；
若所述第二数据节点的缓存中保存有从所述前端录像设备处获取的录像数据，则控制所述新写流服务以大于正常写流速度的写流速度，将所述缓存中保存的录像数据保存到云存储中；
若所述第二数据节点的缓存中不存在从所述前端录像设备处获取的录像数据，则控制所述新写流服务以正常写流速度，将所述新拉流服务获取的录像数据保存到云存储中。
13.如权利要求12所述的装置，其特征在于，所述控制单元具体用于按照如下方式控制所述新写流服务以大于正常写流速度的写流速度，将所述缓存中保存的录像数据保存到云存储中：
确定云存储中保存的录像文件中最后一个完整画面组GOP；
在所述缓存中查找所述确定单元确定出的所述完整GOP的下一GOP对应的录像数据；
控制所述新写流服务以大于正常写流速度的写流速度，将所述下一GOP以及所述下一GOP之后的录像数据保存到云存储中，直至将所述缓存中的录像数据清空。
14.如权利要求11、12或13所述的装置，其特征在于，所述控制单元还用于：
通过所述新拉流服务从所述前端录像设备处获取录像数据之后，若所述第二数据节点的缓存中保存有从所述前端录像设备处获取的录像数据，则将通过所述新拉流服务从所述前端录像设备处获取录像数据保存到所述第二数据节点的缓存中。
15.如权利要求13所述的装置，其特征在于，所述控制单元还用于：
将所述缓存中的录像数据清空之后，控制所述第二数据节点释放所述缓存。
16.如权利要求9至15任一所述的装置，其特征在于，所述控制单元还用于：
控制所述第二数据节点接续所述第一数据节点的通道任务之后，确定第三数据节点，并控制所述第三数据节点作为备用数据节点从所述前端录像设备处获取并保存T时间内的最新录像数据。
CN201610799647.4A 2016-08-31 2016-08-31 一种视频云系统中的数据处理方法及装置 Active CN106331642B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610799647.4A CN106331642B (zh) 2016-08-31 2016-08-31 一种视频云系统中的数据处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610799647.4A CN106331642B (zh) 2016-08-31 2016-08-31 一种视频云系统中的数据处理方法及装置

Publications (2)

Publication Number Publication Date
CN106331642A true CN106331642A (zh) 2017-01-11
CN106331642B CN106331642B (zh) 2020-05-26

Family

ID=57786286

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610799647.4A Active CN106331642B (zh) 2016-08-31 2016-08-31 一种视频云系统中的数据处理方法及装置

Country Status (1)

Country Link
CN (1) CN106331642B (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109688482A (zh) * 2019-01-10 2019-04-26 南京三宝弘正视觉科技有限公司 一种基于雾计算架构的视频管理的装置、系统及方法
CN109729314A (zh) * 2018-12-24 2019-05-07 浙江大华技术股份有限公司 一种视频处理方法、装置、电子设备及存储介质
CN110209537A (zh) * 2018-02-28 2019-09-06 杭州海康威视系统技术有限公司 一种视频数据处理方法、装置、系统及电子设备
CN110365936A (zh) * 2018-04-11 2019-10-22 杭州海康威视系统技术有限公司 码流获取方法、装置及系统
CN110460482A (zh) * 2019-09-20 2019-11-15 广州酷狗计算机科技有限公司 流量获取方法、装置、服务器及介质
CN111654671A (zh) * 2020-05-29 2020-09-11 杭州海康威视系统技术有限公司 视频数据的存储方法、装置、设备及存储介质
CN114157528A (zh) * 2021-11-28 2022-03-08 浙江中控技术股份有限公司 冗余通信方法、系统、电子装置和存储介质
CN114979153A (zh) * 2022-04-07 2022-08-30 浙江大华技术股份有限公司 负载均衡方法、计算机设备及存储装置
CN115002083A (zh) * 2022-05-23 2022-09-02 阿里巴巴（中国）有限公司 实时流媒体数据传输的方法、设备及存储介质
CN115086617A (zh) * 2022-06-17 2022-09-20 重庆紫光华山智安科技有限公司 视频流存储方法、装置、系统、设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102984501A (zh) * 2012-11-15 2013-03-20 杭州瑞网广通信息技术有限公司 一种网络视频录像集群系统
CN103354503A (zh) * 2013-05-23 2013-10-16 浙江闪龙科技有限公司 一种可自动检测及替换故障节点的云存储系统及其方法
CN104469310A (zh) * 2014-12-12 2015-03-25 浙江省公众信息产业有限公司 录像数据的网络存储方法和系统、视频监控平台
US9112887B2 (en) * 2010-11-19 2015-08-18 Toshiba Corporation Mirroring solution in cloud storage environment
CN105490847A (zh) * 2015-12-08 2016-04-13 天津市初志科技有限公司 一种私有云存储系统中节点故障实时检测及处理方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9112887B2 (en) * 2010-11-19 2015-08-18 Toshiba Corporation Mirroring solution in cloud storage environment
CN102984501A (zh) * 2012-11-15 2013-03-20 杭州瑞网广通信息技术有限公司 一种网络视频录像集群系统
CN103354503A (zh) * 2013-05-23 2013-10-16 浙江闪龙科技有限公司 一种可自动检测及替换故障节点的云存储系统及其方法
CN104469310A (zh) * 2014-12-12 2015-03-25 浙江省公众信息产业有限公司 录像数据的网络存储方法和系统、视频监控平台
CN105490847A (zh) * 2015-12-08 2016-04-13 天津市初志科技有限公司 一种私有云存储系统中节点故障实时检测及处理方法

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110209537A (zh) * 2018-02-28 2019-09-06 杭州海康威视系统技术有限公司 一种视频数据处理方法、装置、系统及电子设备
CN110209537B (zh) * 2018-02-28 2020-09-11 杭州海康威视系统技术有限公司 一种视频数据处理方法、装置、系统及电子设备
CN110365936B (zh) * 2018-04-11 2021-03-16 杭州海康威视系统技术有限公司 码流获取方法、装置及系统
CN110365936A (zh) * 2018-04-11 2019-10-22 杭州海康威视系统技术有限公司 码流获取方法、装置及系统
CN109729314A (zh) * 2018-12-24 2019-05-07 浙江大华技术股份有限公司 一种视频处理方法、装置、电子设备及存储介质
CN109688482A (zh) * 2019-01-10 2019-04-26 南京三宝弘正视觉科技有限公司 一种基于雾计算架构的视频管理的装置、系统及方法
CN109688482B (zh) * 2019-01-10 2021-12-24 南京三宝弘正视觉科技有限公司 一种基于雾计算架构的视频管理的装置、系统及方法
CN110460482B (zh) * 2019-09-20 2022-09-02 广州酷狗计算机科技有限公司 流量获取方法、装置、服务器及介质
CN110460482A (zh) * 2019-09-20 2019-11-15 广州酷狗计算机科技有限公司 流量获取方法、装置、服务器及介质
CN111654671B (zh) * 2020-05-29 2021-11-23 杭州海康威视系统技术有限公司 视频数据的存储方法、装置、设备及存储介质
CN111654671A (zh) * 2020-05-29 2020-09-11 杭州海康威视系统技术有限公司 视频数据的存储方法、装置、设备及存储介质
CN114157528A (zh) * 2021-11-28 2022-03-08 浙江中控技术股份有限公司 冗余通信方法、系统、电子装置和存储介质
CN114979153A (zh) * 2022-04-07 2022-08-30 浙江大华技术股份有限公司 负载均衡方法、计算机设备及存储装置
CN114979153B (zh) * 2022-04-07 2023-10-27 浙江大华技术股份有限公司 负载均衡方法、计算机设备及存储装置
CN115002083A (zh) * 2022-05-23 2022-09-02 阿里巴巴（中国）有限公司 实时流媒体数据传输的方法、设备及存储介质
WO2023226949A1 (zh) * 2022-05-23 2023-11-30 阿里巴巴（中国）有限公司 实时流媒体数据传输的方法、设备及存储介质
CN115002083B (zh) * 2022-05-23 2024-04-02 阿里巴巴（中国）有限公司 实时流媒体数据传输的方法、设备及存储介质
CN115086617A (zh) * 2022-06-17 2022-09-20 重庆紫光华山智安科技有限公司 视频流存储方法、装置、系统、设备及介质

Also Published As

Publication number Publication date
CN106331642B (zh) 2020-05-26

Similar Documents

Publication Publication Date Title
CN106331642A (zh) 一种视频云系统中的数据处理方法及装置
WO2017024975A1 (zh) 一种无人机便携式地面站处理方法及系统
US11539789B2 (en) Method and apparatus for recovering missing data in multi-source hybrid overlay network
CN104092717B (zh) 消息处理方法及系统、消息目的端设备
US9419890B2 (en) Streaming service load sharing method, streaming service processing method, and corresponding device and system
CN105653374B (zh) 分布式事务资源执行的方法、装置和系统
CN108347463B (zh) 一种终端文件上传方法
US10681314B2 (en) Moving image splitting device and monitoring method
US20120163163A1 (en) Apparatus and method for protection switching of multiple protection group
CN105450964B (zh) 对录像数据进行云存储的方法、系统及管理节点
CN104113735A (zh) 一种分布式视频监控存储系统及其方法
US20110228084A1 (en) Content management in a video surveillance system
CN106445414A (zh) 终端设备可用存储空间扩展方法和系统
EP3493587B1 (en) Apparatus and method for data delivery in delay-tolerant network (dtn)
JP2020527918A (ja) データフロー伝送
CN107820052A (zh) 基于评标业务数据和视频数据的融合方法及系统
US20150062344A1 (en) Monitoring Camera Device and Monitoring Camera System
US8423593B2 (en) Content distribution system
US20160037119A1 (en) Video recording apparatus, and video recording method when temporary network failure occurs
CN106993218A (zh) 截屏图片划分传输方法、电视及移动终端
CN116614843A (zh) 一种面向卫星通信的边缘计算数据缓存架构及其缓存方法
CN105338325A (zh) 一种监控视频传输方法及装置
CN108153855A (zh) 理赔影像数据存储的方法、装置、计算机设备及存储介质
CN103795810A (zh) 数据分发系统及方法以及该数据分发系统中的中心服务器
CN108353352B (zh) 一种网元选择方法及网元选择器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant