CN111935457B - 一种智能存储系统 - Google Patents

一种智能存储系统 Download PDF

Info

Publication number
CN111935457B
CN111935457B CN202010806964.0A CN202010806964A CN111935457B CN 111935457 B CN111935457 B CN 111935457B CN 202010806964 A CN202010806964 A CN 202010806964A CN 111935457 B CN111935457 B CN 111935457B
Authority
CN
China
Prior art keywords
server
storage
communicated
intelligent
central server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010806964.0A
Other languages
English (en)
Other versions
CN111935457A (zh
Inventor
周建军
周礼
周天友
隗波雷
王明祥
余帅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Creative Information Technology Co ltd
Original Assignee
Creative Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Creative Information Technology Co ltd filed Critical Creative Information Technology Co ltd
Priority to CN202010806964.0A priority Critical patent/CN111935457B/zh
Publication of CN111935457A publication Critical patent/CN111935457A/zh
Application granted granted Critical
Publication of CN111935457B publication Critical patent/CN111935457B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]

Abstract

本发明公开了一种智能存储系统，包括接入服务器、转码服务器、用户端、中心服务器、国际网关服务器和存储服务器；所述接入服务器通过私有协议和用户端及转码服务器通信，所述转码服务器通过通用协议和用户端通信，所述中心服务器通过HTTP协议和用户端通信，所述接入服务器通过HTTP协议和中心服务器通信，所述国际网关服务器通过私有协议和接入服务器通信。本发明通过跨异构存储实现统一透明的监控管理，根据应用水平协议动态配置存储资源，降低异构存储管理的复杂度，实现存储资源智能化和自动化管理，通过对硬件设备的监测和预警，实现对设备的智能化运维。同时，在跨异构存储智能化管理数据的基础上，实现数据资源共享，建立基于存储的数据分析平台，充分挖掘数据价值。

Description

一种智能存储系统
技术领域
本发明涉及信息存储技术领域，尤其涉及一种智能存储系统。
背景技术
随着物联网和云技术的高速发展，日常工作生活中产生的数据数呈现爆炸式增长，用户对数据存储不仅限于大容量、稳定性、安全性等基本诉求，还提出更高更多样性的要求。
在信息化的进程中，企业通常在不同的时期为不同的应用采购不同的存储设备，久而久之逐渐形成了一个个存储孤岛。孤岛之间数据无法打通，存储资源无法共享，运维管理日益复杂，同时还造成资源浪费，这成为在向数字化转型中实现全业务数字化的一大瓶颈。
发明内容
本发明的目的在于，针对上述问题，提出一种智能存储系统，通过跨异构存储实现统一透明的监控管理，根据应用水平协议动态配置存储资源，降低异构存储管理的复杂度，实现存储资源智能化和自动化管理，通过对硬件设备的监测和预警，实现对设备的智能化运维。同时，在跨异构存储智能化管理数据的基础上，实现数据资源共享，建立基于存储的数据分析平台，充分挖掘数据价值。
一种智能存储系统，包括接入服务器、转码服务器、用户端、中心服务器、国际网关服务器和存储服务器；所述接入服务器通过私有协议和用户端及转码服务器通信，所述转码服务器通过通用协议和用户端通信，所述中心服务器通过HTTP协议和用户端通信，所述接入服务器通过HTTP协议和中心服务器通信，所述国际网关服务器通过私有协议和接入服务器通信；
存储服务器从前端监控设备或者国标设备拉去摄像头音视频数据，并将音视频数据进行存储；
中心服务器承担所有基于HTTP协议的全部业务。
进一步的，存储服务器还提供前端设备音视频流给接入服务器。
进一步的，中心服务器还负责用户上下线、告警信息的实时消息推送。
进一步的，中心服务器还用于配置功能职责，中心服务器在WEB端还需对存储服务器和智能应用平台进行配置。
进一步的，还包括AI服务器，中心服务器向接入服务器和AI服务器提供告警相关接口，当通过接入服务器接入的物联设备、AI服务器开启事件检测的Smart摄像头或对接的智能应用平台发生告警时，调用中心服务器对应HTTP接口，将告警信息通知给中心服务器。
进一步的，存储服务器还上报性能状态以及运行状态给中心服务器。
进一步的，存储服务器包括多个存储管理节点，存储管理节点用于摄像头添加、删除，录像启动、停止，录像规则管理，录像周期管理。
本发明的有益效果：通过跨异构存储实现统一透明的监控管理，根据应用水平协议动态配置存储资源，降低异构存储管理的复杂度，实现存储资源智能化和自动化管理，通过对硬件设备的监测和预警，实现对设备的智能化运维。同时，在跨异构存储智能化管理数据的基础上，实现数据资源共享，建立基于存储的数据分析平台，充分挖掘数据价值。
附图说明
图1是本发明系统架构框图。
具体实施方式
为了对本发明的技术特征、目的和效果有更加清楚的理解，现对照附图说明本发明的具体实施方式。
一种智能存储系统，包括接入服务器、转码服务器、用户端、中心服务器、国际网关服务器和存储服务器；所述接入服务器通过私有协议和用户端及转码服务器通信，所述转码服务器通过通用协议和用户端通信，所述中心服务器通过HTTP协议和用户端通信，所述接入服务器通过HTTP协议和中心服务器通信，所述国际网关服务器通过私有协议和接入服务器通信；
存储服务器从前端监控设备或者国标设备拉去摄像头音视频数据，并将音视频数据进行存储；
中心服务器承担所有基于HTTP协议的全部业务。
存储服务器还提供前端设备音视频流给接入服务器。
中心服务器还负责用户上下线、告警信息的实时消息推送。
中心服务器还用于配置功能职责，中心服务器在WEB端还需对存储服务器和智能应用平台进行配置。
还包括AI服务器，中心服务器向接入服务器和AI服务器提供告警相关接口，当通过接入服务器接入的物联设备、AI服务器开启事件检测的Smart摄像头或对接的智能应用平台发生告警时，调用中心服务器对应HTTP接口，将告警信息通知给中心服务器。
存储服务器还上报性能状态以及运行状态给中心服务器。
存储服务器包括多个存储管理节点，存储管理节点用于摄像头添加、删除，录像启动、停止，录像规则管理，录像周期管理。
该智能存储系统具有以下特点：
1）支持多种存储设备或存储系统
支持包括IP SAN，NAS，NFS，SAMBA，本地文件系统等文件系统。
支持包括ceph在内的分布式云存储。
2）多种存储可以同时共存
存储系统采用多网关技术，每个网关可以对接一种存储设备，多网关同时存在。
3）支持按周期和定时录像
录像支持按照录像天数。
录像支持按周进行录像，可以指定周内某段时间录像，可以指定多段时间。
4）支持多存储节点部署
支持多存储节点部署，每个节点单独运行。不同的摄像头可以指定在具体某个节点。
5）支持状态预警
在运行过程中，定时想中心管理服务器上报运行状态，包括cpu、内存、数据库访问状态，文件写入状态统计等信息。中心管理服务器通过告警服务器通知具体的运维人员。
在本实施例中，智能存储系统在OSD列表中，利用CRUSH算法根据权重以及随机数Draw选择OSD，根据CRUSH映射包含的osd列表、用于将设备聚合到物理位置的“bucket”列表，以及规则列表，告诉CRUSH应该如何复制Ceph集群池中的数据。
基于crush算法的智能存储系统能够实现：
1.数据均匀分布，保证数据在均匀的分布在存储设备上，各存储设备使用率一致。
2.负载均衡，保证各个存储节点服务器负载均衡。
3.灵活支持集群的扩容和缩容，无论是添加或者删除存储设备，都能最小化数据迁移。
4.支持大规模集群，消除因几种存储元数据而可能的单点失败。
在本实施例中，提出的一种智能存储系统，通过跨异构存储实现统一透明的监控管理，根据应用水平协议动态配置存储资源，降低异构存储管理的复杂度，实现存储资源智能化和自动化管理，通过对硬件设备的监测和预警，实现对设备的智能化运维。同时，在跨异构存储智能化管理数据的基础上，实现数据资源共享，建立基于存储的数据分析平台，充分挖掘数据价值。
以上显示和描述了本发明的基本原理和主要特征和本发明的优点。本行业的技术人员应该了解，本发明不受上述实施例的限制，上述实施例和说明书中描述的只是说明本发明的原理，在不脱离本发明精神和范围的前提下，本发明还会有各种变化和改进，这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等效物界定。

Claims (6)

1.一种智能存储系统，其特征在于，包括接入服务器、转码服务器、用户端、中心服务器、国际网关服务器和存储服务器；所述接入服务器通过私有协议和用户端及转码服务器通信，所述转码服务器通过通用协议和用户端通信，所述中心服务器通过HTTP协议和用户端通信，所述接入服务器通过HTTP协议和中心服务器通信，所述国际网关服务器通过私有协议和接入服务器通信；
所述存储服务器从前端监控设备或者国标设备拉去摄像头音视频数据，并将音视频数据进行存储；
所述中心服务器承担所有基于HTTP协议的全部业务；
所述智能存储系统还包括AI服务器，中心服务器向接入服务器和AI服务器提供告警相关接口，当通过接入服务器接入的物联设备、AI服务器开启事件检测的Smart摄像头或对接的智能应用平台发生告警时，调用中心服务器对应HTTP接口，将告警信息通知给中心服务器；
所述智能存储系统在OSD列表中，利用CRUSH算法根据权重以及随机数Draw选择OSD，根据CRUSH映射包含的osd列表、用于将设备聚合到物理位置的“bucket”列表，以及规则列表，告诉CRUSH应该如何复制Ceph集群池中的数据。
2.根据权利要求1所述的一种智能存储系统，其特征在于，所述存储服务器还提供前端设备音视频流给接入服务器。
3.根据权利要求1所述的一种智能存储系统，其特征在于，所述中心服务器还负责用户上下线、告警信息的实时消息推送。
4.根据权利要求1所述的一种智能存储系统，其特征在于，所述中心服务器还用于配置功能职责，中心服务器在WEB端还需对存储服务器和智能应用平台进行配置。
5.根据权利要求1所述的一种智能存储系统，其特征在于，所述存储服务器还上报性能状态以及运行状态给中心服务器。
6.根据权利要求1所述的一种智能存储系统，其特征在于，所述存储服务器包括多个存储管理节点，存储管理节点用于摄像头添加、删除，录像启动、停止，录像规则管理，录像周期管理。
CN202010806964.0A 2020-08-12 2020-08-12 一种智能存储系统 Active CN111935457B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010806964.0A CN111935457B (zh) 2020-08-12 2020-08-12 一种智能存储系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010806964.0A CN111935457B (zh) 2020-08-12 2020-08-12 一种智能存储系统

Publications (2)

Publication Number Publication Date
CN111935457A CN111935457A (zh) 2020-11-13
CN111935457B true CN111935457B (zh) 2021-04-13

Family

ID=73311560

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010806964.0A Active CN111935457B (zh) 2020-08-12 2020-08-12 一种智能存储系统

Country Status (1)

Country Link
CN (1) CN111935457B (zh)

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101438256B (zh) * 2006-03-07 2011-12-21 索尼株式会社 信息处理设备、信息通信系统、信息处理方法
CN102075738A (zh) * 2011-03-01 2011-05-25 天津市天祥世联网络科技有限公司 视频监控系统
JP2015536610A (ja) * 2012-11-29 2015-12-21 オープン ジョイント ストック カンパニー ロングディスタンス アンド インターナショナル テレコミュニケーションズ “ロステレコム” （オージェイエスシー “ロステレコム”） 地理的に分散した同時開催イベントをモニタするビデオ伝送システム
CN103179387A (zh) * 2013-04-03 2013-06-26 昆明联诚科技有限公司 一种数字化视频联网监控管理控制方法
CN104503414B (zh) * 2014-12-29 2018-06-08 广州文冲船厂有限责任公司 一种智能船舶信息监控系统
KR102454920B1 (ko) * 2018-03-29 2022-10-14 한화테크윈 주식회사 감시 시스템 및 그 동작 방법

Also Published As

Publication number Publication date
CN111935457A (zh) 2020-11-13

Similar Documents

Publication Publication Date Title
US11061942B2 (en) Unstructured data fusion by content-aware concurrent data processing pipeline
CN108335075B (zh) 一种面向物流大数据的处理系统及方法
Chaczko et al. Availability and load balancing in cloud computing
CN108287905B (zh) 一种网络流特征的提取与存储方法
CN112084098A (zh) 资源监控系统及工作方法
WO2022127234A1 (zh) 一种基于云平台的线网综合监控方法及系统
CN103440244A (zh) 一种大数据存储优化方法
CN103475732A (zh) 一种基于虚拟地址池的分布式文件系统数据卷部署方法
CN103761309A (zh) 一种运营数据处理方法及系统
CN102413172B (zh) 一种基于集群技术的并行数据共享装置方法和装置
CN108600316B (zh) 云存储服务的数据管理方法、系统及设备
CN111885439B (zh) 一种光网络综合管理和值勤管理系统
CN112217847A (zh) 微服务平台及其实现方法、电子设备及存储介质
CN116166191A (zh) 湖仓一体系统
CN109733444B (zh) 数据库系统和列车监控管理设备
CN113127526A (zh) 一种基于Kubernetes的分布式数据存储和检索系统
CN202565318U (zh) 分布式虚拟化存储系统
Zamani et al. Submarine: A subscription‐based data streaming framework for integrating large facilities and advanced cyberinfrastructure
CN111935457B (zh) 一种智能存储系统
Zhang et al. Efficient online surveillance video processing based on spark framework
CN110019085A (zh) 一种基于HBase的分布式时序数据库
CN116366692A (zh) 一种高性能智能边缘终端系统
CN110099116B (zh) 一种基于大数据的子网安全性评估方法
CN103226572A (zh) 一种基于数据压缩的可扩展的监控方法及系统
EP3216175B1 (fr) Procédé de surveillance et de contrôle déportés d'un cluster utilisant un réseau de communication de type infiniband et programme d'ordinateur mettant en oeuvre ce procédé

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant