CN112948600B - 一种高性能多协议音视频存储系统 - Google Patents

一种高性能多协议音视频存储系统 Download PDF

Info

Publication number
CN112948600B
CN112948600B CN202110104522.6A CN202110104522A CN112948600B CN 112948600 B CN112948600 B CN 112948600B CN 202110104522 A CN202110104522 A CN 202110104522A CN 112948600 B CN112948600 B CN 112948600B
Authority
CN
China
Prior art keywords
audio
video
storage
module
file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110104522.6A
Other languages
English (en)
Other versions
CN112948600A (zh
Inventor
邓雄
罗想
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sichuan Tianyi Network Co ltd
Original Assignee
Sichuan Tianyi Network Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sichuan Tianyi Network Co ltd filed Critical Sichuan Tianyi Network Co ltd
Priority to CN202110104522.6A priority Critical patent/CN112948600B/zh
Publication of CN112948600A publication Critical patent/CN112948600A/zh
Application granted granted Critical
Publication of CN112948600B publication Critical patent/CN112948600B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/41—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/13—File access structures, e.g. distributed indices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/172—Caching, prefetching or hoarding of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/489—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using time information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/542—Event management; Broadcasting; Multicasting; Notifications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明公开了一种高性能多协议音视频存储系统，包括存储配置模块、音视频接入模块、音视频分析模块、音视频标注模块和音视频存储模块。存储配置模块用于配置音视频存储周期、音视频删除策略和音视频源类型；音视频接入模块用于管理音视频源地址和动态检测音视频源状态；音视频分析模块用于将获取到的音视频数据进行容器解析；音视频标注模块用于将容器解析后的音视频数据进行切片的同时生成切片对应的索引文件，并记录切片信息；音视频存储模块用于将音视频数据通过离线或者实时的方式传输到S3服务或者共享目录进行存储。本发明采用高效的IO内核事件触发机制，能定期进行重连和检测音视频源状态，从而达到音视频文件的可靠、高效的传输和存储。

Description

一种高性能多协议音视频存储系统
技术领域
本发明涉及音视频技术领域，尤其涉及一种高性能多协议音视频存储系统。
背景技术
目前，个人用户领域和公共领域音视频应用的发展相对独立。音视频技术想要更好的为我们服务，必然要实现各个领域应用的融合，而不是各个系统孤立的存在。比如在公安系统中，传统的视频监控系统具备在办公室的电脑上浏览视频的能力，但已经不能满足他们工作的需求。警务人员已经配备了高配置、高性能的移动终端，他们不仅需要在办公室中能查看视频整理案件，同时需要在外出办公时也能够浏览视频，为快速侦破案件提供帮助。在某些特定紧急场景下，对于视频摄像头没有覆盖的领域，能够通过手机摄像头摄取视频传送给后台的指挥中心，为处理紧急事件提供快捷方便的帮助。可以预见，智慧城市中音视频技术将向高清化，联网方向发展，各种视频终端能互联互通，大量基于音视频的应用将会出现。视频监控，视频会议，视频培训，远程监护，远程医疗，家庭视频聊天等视频应用将会逐渐普及，人们在视频基础之上创建各种应用，满足人们对交流，协作，娱乐的各项需求。
音视频技术的发展在给我们生活带来的便利的同时，也对音视频网络的架构和存储带来了挑战。视频高清化为我们提供了高质量的画面，但数据量也成倍的增长。监控前端在向高清的方向发展，目前已经有720P、1080P、5MP、8MP等高分辨率的IPC，手机摄像头也向千万像素方向发展。高清晰音视频数据存储主要存在的问题包括：1、音视频文件的需求越来越大，现有的存储系统对不同类型的音视频存储兼容性较差；2、同时，不同平台和终端又需要不同编码格式和码率的音视频文件，存储系统存储不同格式音视频文件时的传输效率不高。
发明内容
本发明的目的在于克服现有技术的不足，提供一种高性能多协议音视频存储系统，能定期进行重连和检测音视频源状态，从而达到音视频文件的可靠、高效的传输和存储。
本发明的目的是通过以下技术方案来实现的：
一种高性能多协议音视频存储系统，其特征在于，包括存储配置模块、音视频接入模块、音视频分析模块、音视频标注模块和音视频存储模块。其中，存储配置模块用于配置音视频存储周期、音视频删除策略和音视频源类型；
音视频接入模块用于管理音视频源地址和动态检测音视频源状态；
音视频分析模块用于将获取到的音视频数据进行容器解析，输出音视频分析完成的音视频数据；
音视频标注模块用于将音视频分析完成的音视频数据进行切片的同时生成音视频切片对应的索引文件，并记录切片信息；
音视频存储模块用于将音视频数据通过离线或者实时的方式传输到S3服务或者共享目录进行存储。
具体的，音视频接入模块还用于在添加一个音视频源同时系统开始实时请求音视频后，动态检测音视频源状态，当出现音视频中断时，则启动动态重连机制。
具体的，切片信息包括音视频文件的开始和结束时间、音视频编码方式和音视频的文件索引位置。
具体的，索引文件用于记录音视频文件切片的开始时间和结束时间，并保存音视频帧数据的文件位置和音视频帧长度。
具体的，音视频切片过程中音视频切片大小可以根据时间或者文件大小配置。
本发明的有益效果：本发明主要是将标准的音视频源进行采集、解析并存储成文件切片。并每一个存储的音视频切片都有一个对应的索引文件，索引文件记录音视频文件切片的开始时间和结束时间，并保存音视频帧数据的文件位置和音视频帧长度。并将音视频文件传输到S3存储服务或者存入smb共享目录。音视频源协议支持onvif、rtsp、rtmp和flv等，系统采用高效的IO内核事件触发机制，充分利用多核处理器。并采用本地缓存机制，采用离线或者实时传输到S3服务或者共享目录。当音视频源出现传输中断时，系统将保留音视频源资源，定期进行重连和检测音视频源状态。从而达到音视频文件的可靠、高效的传输和存储。
附图说明
图1是本发明的系统功能模块图。
图2是本发明的系统运行流程示意图。
具体实施方式
为了对本发明的技术特征、目的和效果有更加清楚的理解，现对照附图说明本发明的具体实施方式。
本实施例中，如图1和图2所示，一种高性能多协议音视频存储系统，其特征在于，包括存储配置模块、音视频接入模块、音视频分析模块、音视频标注模块和音视频存储模块。其中，存储配置模块功能包括存储配置和音视频配置。存储配置支持S3协议、smb共享目录以及本地磁盘系统等，另外需要配置音视频存储周期和音视频文件删除策略。音视频配置主要配置音视频源的类型，目前支持标准onvif、rtsp、rtmp、flv等音视频协议、以及H.264、H.265、MPEG4视频编码格式，G.711、G.722、G.723等音频编码格式。
音视频接入模块用于管理音视频源地址，如添加、修改、删除音视频源。当手动添加一个音视频源后，系统将开始实时请求音视频，动态检测音视频源状态，当出现音视频中断时，则启动动态重连机制。
音视频分析模块用于将获取到的音视频数据进行容器解析，如视频传输协议rtp、rtmp等，以及音视频编码数据ES解析，最后输出音视频分析完成的音视频数据。
音视频标注模块用于将音视频分析完成的音视频数据进行切片的同时生成音视频切片对应的索引文件，并记录切片信息。
音视频存储模块用于将音视频数据通过离线或者实时的方式传输到S3服务或者共享目录进行存储。该模块负责音视频文件存储，支持各种存储传输协议，如S3网络协议，也支持smb共享目录和本地磁盘存储系统。
具体的，切片信息包括音视频文件的开始和结束时间、音视频编码方式和音视频的文件索引位置。
具体的，索引文件用于记录音视频文件切片的开始时间和结束时间，并保存音视频帧数据的文件位置和音视频帧长度。
具体的，音视频切片过程中音视频切片大小可以根据时间或者文件大小配置，如一个小时或者1Gbytes。
本发明的工作原理如图2所示，具体运行流程包括：
1、启动系统，通过onvif、rtsp、rtmp、或者flv进行音视频源请求。
2、音视频源收到请求后，完成音视频源验证（如rtsp协议中的用户名和密码MD5摘要认证，rtmp握手验证等），开始音视频rtp、rtmp音视频传输。
3、将第二步中的数据包进行解析，去掉传输协议包头（rtp、rtmp数据头），并将剩下的数据组装成完整的音视频数据。
4、将完整的音视频数据进行文件记录，并在索引文件里面记录音视频帧数据的大小和时间戳，完成音视频分片的写入。
5、存储系统将音视频文件分片和索引文件上传到存储服务或者网络磁盘。
6、存储服务完成音视频文件分片和索引文件存储时，向存储系统回复确认消息。
以上显示和描述了本发明的基本原理、主要特征和本发明的优点。本行业的技术人员应该了解，本发明不受上述实施例的限制，上述实施例和说明书中描述的只是说明本发明的原理，在不脱离本发明精神和范围的前提下，本发明还会有各种变化和改进，这些变化和改进都落入要求保护的本发明范围内。本发明要求保护的范围由所附的权利要求书及其等效物界定。

Claims (4)

1.一种高性能多协议音视频存储系统，其特征在于，包括存储配置模块、音视频接入模块、音视频分析模块、音视频标注模块和音视频存储模块；
存储配置模块用于配置音视频存储周期、音视频删除策略和音视频源类型；
音视频接入模块用于管理音视频源地址和动态检测音视频源状态；
音视频接入模块还用于在添加一个音视频源同时系统开始实时请求音视频后，动态检测音视频源状态，当出现音视频中断时，则启动动态重连机制；
音视频分析模块用于将获取到的音视频数据进行容器解析，输出音视频分析完成的音视频数据；
音视频标注模块用于将音视频分析完成的音视频数据进行切片的同时生成音视频切片对应的索引文件，并记录切片信息；
音视频存储模块用于将音视频数据通过离线或者实时的方式传输到S3服务或者共享目录进行存储；
所述多协议音视频存储系统用于存储多协议音频的方法，包括以下步骤：
S1：启动系统，通过onvif、rtsp、rtmp、或者flv进行音视频源请求；
S2：音视频源收到请求后，完成音视频源验证，开始音视频rtp、rtmp音视频传输；
S3：将步骤S2中的数据包进行解析，去掉传输协议包头，并将剩下的数据组装成完整的音视频数据；
S4：将完整的音视频数据进行文件记录，并在索引文件里面记录音视频帧数据的大小和时间戳，完成音视频分片的写入；
S5：存储系统将音视频文件分片和索引文件上传到存储服务或者网络磁盘；
S6：存储服务完成音视频文件分片和索引文件存储时，向存储系统回复确认消息。
2.根据权利要求1所述的一种高性能多协议音视频存储系统，其特征在于，所述切片信息包括音视频文件的开始和结束时间、音视频编码方式和音视频的文件索引位置。
3.根据权利要求1所述的一种高性能多协议音视频存储系统，其特征在于，所述索引文件用于记录音视频文件切片的开始时间和结束时间，并保存音视频帧数据的文件位置和音视频帧长度。
4.根据权利要求1所述的一种高性能多协议音视频存储系统，其特征在于，所述音视频切片过程中音视频切片大小可以根据时间或者文件大小配置。
CN202110104522.6A 2021-01-26 2021-01-26 一种高性能多协议音视频存储系统 Active CN112948600B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110104522.6A CN112948600B (zh) 2021-01-26 2021-01-26 一种高性能多协议音视频存储系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110104522.6A CN112948600B (zh) 2021-01-26 2021-01-26 一种高性能多协议音视频存储系统

Publications (2)

Publication Number Publication Date
CN112948600A CN112948600A (zh) 2021-06-11
CN112948600B true CN112948600B (zh) 2023-06-02

Family

ID=76237115

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110104522.6A Active CN112948600B (zh) 2021-01-26 2021-01-26 一种高性能多协议音视频存储系统

Country Status (1)

Country Link
CN (1) CN112948600B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103297629A (zh) * 2013-06-21 2013-09-11 上海金牌软件开发有限公司 一种用于音频电话会议的掉线重连系统
CN104902311A (zh) * 2015-05-28 2015-09-09 青岛海信宽带多媒体技术有限公司 一种音视频资源共享的方法、共享网关及系统
CN106899894A (zh) * 2015-12-18 2017-06-27 中国电信股份有限公司 动态优化的自适应流媒体方法、装置和服务器
CN107707504A (zh) * 2016-08-08 2018-02-16 中国电信股份有限公司 一种流媒体的播放方法、系统以及服务器和客户端
CN111263191A (zh) * 2018-11-30 2020-06-09 中兴通讯股份有限公司 视频数据的处理方法、装置、相关设备及存储介质

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101917388A (zh) * 2009-12-17 2010-12-15 新奥特（北京）视频技术有限公司 一种流媒体数据存储方法及装置
CN102123303B (zh) * 2011-03-25 2012-10-24 天脉聚源(北京)传媒科技有限公司 一种音视频文件播放方法、系统及传输控制装置
KR20170083641A (ko) * 2012-07-10 2017-07-18 브이아이디 스케일, 인크. 품질 주도형 스트리밍
CN104660992B (zh) * 2015-02-04 2018-01-19 江苏中科羿链通信技术有限公司 视频掉线重连系统和方法
CN108717458A (zh) * 2018-05-24 2018-10-30 昆明联诚科技股份有限公司 一种用于监控行业的历史视频文件格式存储方法及系统
CN110493194A (zh) * 2019-07-19 2019-11-22 视联动力信息技术股份有限公司 一种网络视频断线重连方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103297629A (zh) * 2013-06-21 2013-09-11 上海金牌软件开发有限公司 一种用于音频电话会议的掉线重连系统
CN104902311A (zh) * 2015-05-28 2015-09-09 青岛海信宽带多媒体技术有限公司 一种音视频资源共享的方法、共享网关及系统
CN106899894A (zh) * 2015-12-18 2017-06-27 中国电信股份有限公司 动态优化的自适应流媒体方法、装置和服务器
CN107707504A (zh) * 2016-08-08 2018-02-16 中国电信股份有限公司 一种流媒体的播放方法、系统以及服务器和客户端
CN111263191A (zh) * 2018-11-30 2020-06-09 中兴通讯股份有限公司 视频数据的处理方法、装置、相关设备及存储介质

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Modeling and evaluation of a metadata-based adaptive p2p video-streaming system;R. Iqbal 等;《in The Computer Journal》;第56卷(第5期);554-572 *
基于Android的机载音视频实时传输方案设计与实现;于瀚博;《中国优秀硕士学位论文全文数据库信息科技辑》(第（2016）03期);I138-4553 *
基于ARM9 的MPEG-4 视频解码播放系统设计;李锋垚;《中国优秀硕士学位论文全文数据库信息科技辑》(第（2005）04期);I136-101 *

Also Published As

Publication number Publication date
CN112948600A (zh) 2021-06-11

Similar Documents

Publication Publication Date Title
US9247110B2 (en) System and method for remotely monitoring and/or viewing images from a camera or video device
US20050015765A1 (en) System for doing service location management taking into account the node and network characteristics
US20060170778A1 (en) Systems and methods that facilitate audio/video data transfer and editing
CN110489484B (zh) 数据同步方法、装置、可读存储介质及电子设备
JP2009542124A (ja) マルチメディアを取り込むための組み込み機器
CN100574432C (zh) 一种监控系统中的视频编码的存储方法及设备
CN1596404A (zh) 交互式宽带服务器系统
WO2006097937A2 (en) A method for a clustered centralized streaming system
CN105144673A (zh) 延迟减少的服务器干预式音频-视频通信
EP3468179B1 (en) Moving image splitting device and monitoring method
WO2012012924A1 (zh) 一种网络存储中保证数据完整性的方法
CN104079633A (zh) 终端采集数据同步保存到云端服务器的方法及系统
CN110545405A (zh) 一种基于视联网的视频传输方法及系统
EP2882193B1 (en) Uploading and transcoding media files
WO2008012273A1 (fr) Procede de synchronisation entre un equipement mobile et une carte a puce
CN112948600B (zh) 一种高性能多协议音视频存储系统
US20040237097A1 (en) Method for adapting service location placement based on recent data received from service nodes and actions of the service location manager
CN102438182B (zh) 一种视频流分析方法及装置
CN111314350A (zh) 图像存储系统、存储方法、调用系统和调用方法
EP1430401B1 (en) Extended content storage method and apparatus
CN106603977B (zh) 基于Linux多核环境的视频采集方法及装置
CN115174844A (zh) 基于视频监控和视频会议融合的智能系统
CN110381022B (zh) 一种应用于视联网的数据获取方法及系统
TWI602432B (zh) 視頻推流系統
US20240007523A1 (en) Video Surveillance Systems Using Out of Band Key Exchange

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Third floor, No.10, Jiuxing Avenue, high tech Zone, Chengdu, Sichuan 610041

Applicant after: Sichuan Tianyi Network Co.,Ltd.

Address before: Third floor, No.10, Jiuxing Avenue, high tech Zone, Chengdu, Sichuan 610041

Applicant before: SICHUAN TIANYI NETWORK SERVICE Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant