CN113766160A - 视频处理方法及装置 - Google Patents
视频处理方法及装置 Download PDFInfo
- Publication number
- CN113766160A CN113766160A CN202111070114.XA CN202111070114A CN113766160A CN 113766160 A CN113766160 A CN 113766160A CN 202111070114 A CN202111070114 A CN 202111070114A CN 113766160 A CN113766160 A CN 113766160A
- Authority
- CN
- China
- Prior art keywords
- video
- packet
- vehicle
- stream
- video stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 68
- 238000000034 method Methods 0.000 claims abstract description 69
- 230000009467 reduction Effects 0.000 claims description 4
- 238000012545 processing Methods 0.000 abstract description 32
- 230000008569 process Effects 0.000 abstract description 29
- 238000010586 diagram Methods 0.000 description 22
- 238000004590 computer program Methods 0.000 description 12
- 230000009471 action Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 6
- 230000003993 interaction Effects 0.000 description 6
- 230000007423 decrease Effects 0.000 description 4
- 238000004806 packaging method and process Methods 0.000 description 4
- 230000000712 assembly Effects 0.000 description 3
- 238000000429 assembly Methods 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 238000012856 packing Methods 0.000 description 3
- 238000011084 recovery Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000000994 depressogenic effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
- H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/71—Indexing; Data structures therefor; Storage structures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C5/00—Registering or indicating the working of vehicles
- G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
- G07C5/0841—Registering performance data
- G07C5/085—Registering performance data using electronic data carriers
- G07C5/0866—Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
- H04N21/4334—Recording operations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
Abstract
本申请实施例提供一种视频处理方法及装置,该方法包括:接收摄像组件采集的视频流;将视频流转换为至少一第一数据包,第一数据包独立编码或解码;将第一上报周期内获取的第一数据包作为第一视频片段保存。本申请实施例提供的视频处理方法,由于将采集到的视频流转化为可以独立编码或解码的至少一第一数据包,当视频录制过程中出现故障时,保存的第一数据包组成的第一视频片段也可以独自完成视频的解码,从而无需在录制视频时写入索引,节省了录制视频占用的存储空间,从而可以保存更长时间的视频。
Description
技术领域
本申请实施例涉及信息技术信领域,尤其涉及一种视频处理方法及装置。
背景技术
随着经济水平的不断发展,私家车变得越来越普及。车主通常会给私家车加装各种摄像组件,例如,可以在车辆尾部加装摄像头来辅助倒车,在车辆上可以加装行车记录仪来记录行车过程。
现有技术中,车辆上加装的摄像组件(如行车记录仪)通常独自完成视频的预览、录制、保存和播放。在视频录制过程中,为了提供视频故障恢复能力,摄像组件在写入视频数据的同时,通常需要写入索引数据。当前有两种索引数据的实现方式,第一种是根据分辨率和帧率计算索引空间并预写入索引,再将视频数据不断写入存储器。由于预先写入索引通常和实际索引空间的大小和实际索引位置存在误差,造成索引空间浪费。
另一种是在录制视频的过程中不断的写出索引到存储器,然而,录制视频的过程中不断的写出索引会占用较多的存储空间,由此造成录制视频占用的存储空间较大。
发明内容
本申请实施例提供一种视频处理方法及装置,以解决现有技术中录制视频占用的存储空间较大的问题。
第一方面,本申请实施例提供一种视频处理方法,该方法可以应用于视频处理装置、也可以应用于视频处理装置中的芯片,视频处理装置可例如车载终端。下面以应用于车载终端为例对该方法进行描述。该方法中,车载终端接收摄像组件采集的视频流,并将视频流转换为至少一第一数据包,其中的第一数据包独立编码或解码。随后,车载终端将第一上报周期内获取的第一数据包合成为第一视频片段,并将第一视频片段保存。其中,第一上报周期小于或等于最大允许丢失视频时长,最大允许丢失视频时长为发生故障时用户允许丢失的摄像组件拍摄的视频的最长时间。
通过第一方面提供的视频处理方法,由于将采集到的视频流转化为可以独立编码或解码的至少一第一数据包,当视频录制过程中出现故障时,车载终端保存的第一数据包组成的第一视频片段也可以独自完成视频的解码,从而无需在录制视频时写入索引,节省了录制视频占用的存储空间,从而可以保存更长时间的视频。
在一种可实施的方式中,第一数据包为传输流TS包。
在一种可实施的方式中,若视频流包含有TS包,车载终端可以去除视频流中的协议头后,从视频流中获取至少一TS包。
通过该可实施方式提供的视频处理方法,当视频流包含有TS包时,车载终端直接去除协议头从视频流中获取至少一TS包,并将至少一TS包合成第一视频片段保存。由于以TS包合成的第一视频片段可独立编码或解码,进而节省了录制视频占用的存储空间,使得存储空间中可以保存更长时间的视频。
在一种可实施的方式中,若视频流包含有ES包,车载终端去除视频流中的协议头后,从视频流中获取至少一ES包,再将至少一ES包封装为至少一TS包。
通过该可实施方式提供的视频处理方法,当视频流包含有ES包时,车载终端通过去除协议头从视频流中获取至少一ES包,并将ES包封装为TS包,最后将至少一TS包合成第一视频片段保存。由于以TS包合成的第一视频片段可独立编码或解码,进而节省了录制视频占用的存储空间,使得存储空间中可以保存更长时间的视频。
在一种可实施的方式中,若视频流为裸码流,车载终端去除视频流中的协议头后,从视频流中获取视频流对应的裸码流,并将裸码流进行编码,生成至少一ES包。最后,车载终端将至少一ES包封装为至少一TS包。
通过该可实施方式提供的视频处理方法,当视频流为裸码流时,车载终端通过去除协议头从视频流中获取视频流对应的裸码流,将裸码流进行编码生成ES包,再将ES包包封装为至TS包,最后将至少一TS包合成第一视频片段保存。由于以TS包合成的第一视频片段可独立编码或解码,进而节省了录制视频占用的存储空间,使得存储空间中可以保存更长时间的视频。
在一种可实施的方式中,协议头为实时流传输协议RTSP头。
在一种可实施的方式中,每个第一数据包的数据量相同。
在一种可实施的方式中,车载终端还可以根据视频文件的标准数据量,将至少一第一视频片段合并成至少一视频文件,并根据第一视频格式,保存至少一视频文件。
通过该可实施方式提供的视频处理方法,避免了视频以大量第一视频片段的形式进行保存,使得用户查阅视频时更加方便。同时,可以根据视频播放组件的播放格式存储视频文件,有利于快速在视频播放组件上进行播放。
在一种可实施的方式中,车载终端还可以获取摄像组件所在车辆的速度,若车辆的速度在第一时间段内的降幅度超过第一阈值,则将第二时间段内的第一视频片段保存至独立存储区域。
其中,所述第一时间段的起始时间点为所述车辆的行车踏板被踩下的时间点,所述第一时间段的时长为第一预设时长;所述第二时间段的中间时间点为所述车辆的行车踏板被踩下的时间点,所述第二时间段的时长为第二预设时长。
通过该可实施方式提供的视频处理方法,可以在车辆刹车或撞击时紧急记录视频,车载终端可以在独立存储区域快速提取关键事件视频。
在一种可实施的方式中,车载终端还可以根据第一视频片段的时间戳定位第二时间段内的第一视频片段,第一视频片段的时间戳用于标识第一视频片段录制开始时刻的时间。
第二方面,本申请实施例提供一种视频处理装置,视频处理装置包括:接收模块,用于接收摄像组件采集的视频流;处理模块,用于将视频流转换为至少一第一数据包,第一数据包独立编码或解码;将第一上报周期内获取的第一数据包合成为第一视频片段,并将第一视频片段保存,第一上报周期小于或等于最大允许丢失视频时长,最大允许丢失视频时长为发生故障时用户允许丢失的摄像组件拍摄的视频的最长时间。
在一种可实施的方式中,若视频流包含有TS包,处理模块具体用于去除视频流中的协议头,从视频流中获取至少一TS包。
在一种可实施的方式中,若视频流包含有ES包,处理模块具体用于去除视频流中的协议头,从视频流中获取至少一ES包;将至少一ES包封装为至少一TS包。
在一种可实施的方式中,若视频流为裸码流,处理模块,具体用于去除视频流中的协议头,从视频流中获取视频流对应的裸码流;将裸码流进行编码,生成至少一ES包;将至少一ES包封装为至少一TS包。
在一种可实施的方式中,协议头为实时流传输协议RTSP头。
在一种可实施的方式中,每个第一数据包的数据量相同。
在一种可实施的方式中,处理模块,还用于根据视频文件的标准数据量,将至少一第一视频片段合并成至少一视频文件;根据第一视频格式,保存至少一视频文件。
在一种可实施的方式中,接收模块,还用于获取摄像组件所在车辆的速度;
处理模块,还用于若车辆的速度在第一时间段内的降幅度超过第一阈值,则将第二时间段内的第一视频片段保存至独立存储区域
其中,第一时间段的起始时间点为车辆的行车踏板被踩下的时间点,第一时间段的时长为第一预设时长;第二时间段的中间时间点为车辆的行车踏板被踩下的时间点,第二时间段的时长为第二预设时长。
在一种可实施的方式中,处理模块,还用于根据第一视频片段的时间戳定位第二时间段内的第一视频片段,第一视频片段的时间戳用于标识第一视频片段录制开始时刻的时间。
第三方面,本申请实施例提供一种车载终端,车载终端包括:处理器、存储器、发送器和接收器;发送器和接收器耦合至处理器,处理器控制发送器的发送动作,处理器控制接收器的接收动作;
其中,存储器用于存储计算机可执行程序代码,程序代码包括信息;当处理器执行信息时,信息使网络设备执行如第一方面的各可能的实施方式所提供的视频处理方法。
第四方面,本申请实施例提供一种芯片,包括:处理器,用于从存储器中调用并运行计算机程序,使得安装有芯片的设备执行如第一方面的实施方式所提供的视频处理方法。
第五方面,本申请实施例提供一种计算机可读存储介质,用于存储计算机程序,计算机程序使得计算机执行如第一方面的实施方式所提供的视频处理方法。
第六方面,本申请实施例提供一种计算机程序产品,包括计算机程序信息,该计算机程序信息使得计算机执行如第一方面的实施方式所提供的视频处理方法。
第七方面,本申请实施例提供一种计算机程序,计算机程序使得计算机执行如第一方面的实施方式所提供的视频处理方法。
第八方面,本申请实施例提供一种存储介质,其上存储有计算机程序,包括:该程序被处理器执行时上述第一方面或第一方面的各种实施方式的视频处理方法。
本申请实施例提供的视频处理方法及装置,通过接收摄像组件采集的视频流,并将视频流转换为至少一第一数据包,第一数据包独立编码或解码,随后,再将第一上报周期内获取的第一数据包作为第一视频片段保存。通过该方式,由于将采集到的视频流转化为可以独立编码或解码的至少一第一数据包,当视频录制过程中出现故障时,保存的第一数据包组成的第一视频片段也可以独自完成视频的解码,从而无需在录制视频时写入索引,节省了录制视频占用的存储空间,从而可以保存更长时间的视频。
附图说明
图1为现有技术中的一种视频处理方法的示意图;
图2为本申请实施例提供的一种视频处理方法的系统架构图;
图3为本申请实施例提供的一种视频处理方法的流程示意图;
图4为本申请实施例提供的一种第一视频片段的合成示意图;
图5为本申请实施例提供的一种视频处理方法的交互示意图;
图6为本申请实施例提供的另一种视频处理方法的流程示意图;
图7为本申请实施例提供的另一种视频处理方法的交互示意图;
图8为本申请实施例提供的再一种视频处理方法的流程示意图;
图9为本申请实施例提供的又一种视频处理方法的流程示意图;
图10为本申请实施例提供的又一种视频处理方法的交互示意图;
图11为本申请实施例提供的又一种视频处理方法的流程示意图;
图12为本申请实施例提供的又一种视频处理方法的流程示意图;
图13为本申请实施例提供的又一种视频处理方法的交互示意图;
图14为本申请实施例提供的又一种视频处理方法的流程示意图;
图15为本申请实施例提供的又一种视频处理方法的流程示意图;
图16为本申请实施例提供的一种视频片段合成示意图;
图17为本申请实施例提供的一种车载终端的结构示意图;
图18为本申请实施例提供的一种第一时间段和第二时间段的示意图;
图19为本申请实施例提供的一种车辆突发事件时视频存储的示意图;
图20为本申请实施例提供的一种视频处理装置的结构示意图;
图21为本申请实施例提供的一种车载终端的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
随着经济水平的不断发展,私家车变得越来越普及。车主通常会给私家车加装各种摄像组件,例如,可以在车辆尾部加装摄像头来辅助倒车,在车辆上可以加装行车记录仪来记录行车过程。
现有技术中,车辆上加装的摄像组件通常独自完成视频的预览、录制、保存和播放。图1为现有技术中的一种视频处理方法的示意图,如图1所示,示例性的,行车记录仪自带的摄像头在拍摄视频流后,将视频流发送给行车记录仪自行完成视频预览和播放,并将视频存入行车记录仪自带的安全数码卡(Secure Digital Memory Card,SD card)中。
在视频录制过程中,为了提供视频故障恢复能力,摄像组件在写入视频数据的同时,通常需要写入索引数据。该索引数据包含有视频的帧率和分辨率等信息,用于播放视频时对视频数据进行解码。当前有两种索引数据的实现方式,第一种是根据分辨率和帧率计算索引空间并预写入索引,再将视频数据不断写入存储器。由于预先写入索引通常也和实际索引空间的大小和实际索引位置存在误差,造成索引空间浪费,通常不采用第一种方式。
另一种是在录制视频的过程中不断的写出索引到存储器,然而,录制视频的过程中不断的写出索引会占用较多的存储空间,由此造成录制视频占用的存储空间较大。
考虑到上述问题,本申请实施例提供了一种视频处理方法,以减少录制视频占用的存储空间。本申请实施例中,接收到的视频流以可直接解码的形式保存,从而无需在录制视频时写入索引,节省了录制视频占用的存储空间,从而可以保存更长时间的视频。
本申请实施例提供的视频处理方法,不但可以适用于处理车辆的摄像组件拍摄的视频流,例如行车记录仪等,还可以运用于其他非车辆上的视频组件拍摄的视频流,例如,监控摄像头、摄像机等。
图2为本申请实施例提供的一种视频处理方法的系统架构图。如图2所示,包括有摄像组件11、处理器12、存储器13和视频播放组件14。当车载的摄像组件11拍摄视频时,可以将拍摄到的视频流传输给处理器12,处理器12将视频流转换成至少一独立编码或解码的第一数据包。随后,处理器12根据上报周期将多个第一数据包合成第一视频片段保存在存储器13中。当需要进行播放时,视频播放组件14可以从存储器13中提取第一视频片段进行播放。
其中,本申请实施例对于摄像组件11的类型不做限制,示例性的,可以为行车记录仪、摄像机等。本申请实施例对于存储器13的类型也不做限制,示例性的,可以为硬盘、SD卡等。
示例性的,处理器12可以为车载终端的处理器。视频播放组件14,可以为车载终端上的视频播放模块、车辆上的手机等。
可以理解,本申请实施例提供的视频处理方法的执行主体为视频处理装置,该视频处理装置可以由任意的软件和/或硬件实现,可以是车载终端的部分或全部,例如可以是车载终端中的处理器。
下面以集成或安装有相关执行代码的车载终端为例,以具体地实施例对本申请实施例的技术方案进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例不再赘述。
图3为本申请实施例提供的一种视频处理方法的流程示意图,本实施例涉及的是车载终端如何将接收到的视频流进行保存的具体过程。如图3所示,该视频处理方法,包括:
S201、车载终端接收摄像组件采集的视频流。
本步骤中,摄像组件在采集到视频后,可以将视频流传输给车载终端。
其中,本申请实施例对于摄像组件的类型不做限制,例如可以为行车记录仪、摄像机等。本申请实施例对于摄像组件的数量不做限制,可以一个,也可以为多个,相应的,车载终端可以接收一个摄像组件发送的视频流,也可以接收多个摄像组件发送的视频流。
本申请实施例对于视频流的类型也不做限制,可以根据传输协议具体设置,示例性的,视频流可以为实时流传输协议(real time streaming protocol,RTSP)流。RTSP是传输控制协议/网际协议(transmission control protocol/internet protocol,TCP/IP)体系中的一个应用层协议,RTSP流中的打包格式可以为多种,示例性的,可以为传输流(Transport stream,TS)格式,可以为基本码流(Elementary Stream,ES)格式,还可以为裸码流格式。
其中,裸码流可以编码为ES流,ES流可以打包为TS流。裸码流是未经过编码的数据流,裸码流中同时包含有音频数据和视频数据。ES流为只包含一种内容的数据流,由若干个ES包组成,例如只包含视频数据的ES流或只包含音频数据的ES流。在对裸码流进行编码时,可以首先将视频数据和音频数据进行划分,将裸码流编码为只包含视频数据的ES流和只包含音频数据的ES流。ES流中的ES包可以进一步封装为TS包,从而组成TS流,TS包可独立编码或解码。
在一些实施例中,上述视频流还包括有协议头,终端设备在处理视频流时需要先去除视频流中的协议头。示例性的,若视频流为RTSP流,则相应的,视频流包含有RTSP头。
在一些实施例中,若视频流为RTSP流,则相应的,车载终端可以扩展RTSP指令,扩展的RTSP指令用于增加视频流类型查询和设置能力。车载终端在接收到视频流后,可以基于RTSP指令确定视频流的打包格式。
S202、车载终端将视频流转换为至少一第一数据包,第一数据包独立编码或解码。
在本步骤中,车载终端在接收到视频流后,需要首先去除视频流的协议头,随后,再根据视频流的打包类型将视频流转化为至少一第一数据包。其中,车载终端可以采用上述扩展的RTSP指令查询视频流的打包格式。
其中,第一数据包可以为TS包。
示例性的,图4为本申请实施例提供的一种视频流存储示意图。如图4所示,摄像组件获取视频采集数据后,向车载终端的批量数据收集器(Manufacturing DataCollection,MDC)发送视频流,MDC将视频流发送给车载终端的解析器,以使解析器去除视频流的RTSP头。其中,摄像头采集的视频流可以为TS流、ES流或裸码流,具体视频流格式可由RTSP中指定的打包格式确定。
示例性的,若视频流为TS流,则解析器去除RTSP头后可以获取至少一TS包,随后,解析器将至少一TS包发送给车载终端的输出器。若视频流为ES流,则解析器去除RTSP头后可以获取至少一ES包,随后,解析器将至少一ES包发送给车载终端的打包器以使打包器将至少一ES包封装为至少一TS包后发送给输出器。若视频流为裸码流,则解析器去除RTSP头后可以将裸码流发送给车载终端的编码器进行编码,获取至少一ES包,随后,编码器将至少一ES包发送给车载终端的打包器,以使打包器将至少一ES包封装为至少一TS包后发送给输出器。
S203、车载终端将第一上报周期内获取的至少一第一数据包合成为第一视频片段,并保存第一视频片段。
在本步骤中,车载终端将视频流转换为至少一第一数据包之后,可以将第一上报周期内获取的至少一第一数据包合成为第一视频片段,并保存第一视频片段。其中,第一视频片段可以为TS视频片段。
上述上报周期可以为1秒,可以为0.5秒等,本申请实施例对于第一上报周期的时长不做限制,上述上报周期可以小于或等于最大允许丢失视频时长,其中,最大允许丢失视频时长为发生故障时用户允许丢失的摄像组件拍摄视频的最长时间。示例性的,若最大允许丢失视频时长为1秒,则相应的,上报周期可以为1秒,也可以为0.5秒。
在一些实施例中,若上报周期为0.5秒,则相应的,车载终端每隔0.5秒将该上报周期内缓存的至少第一数据包合成为第一视频片段,并将第一视频片段输出到存储器。由于存储器每隔0.5秒存储一次视频片段,即使发生断电故障,最多只丢失0.5秒的视频数据。
本申请中,车载终端可以根据视频的分辨率和第一上报周期的时长,确定第一上报周期内第一数据包的数量。示例性的,若第一上报周期是0.5秒,视频的分辨率为1080P,按照1080P计算0.5秒约产生1MB的第一数据包缓存。当第一数据包为TS包时,由于每个TS包固定包含有188字节,则第一上报周期可产生5577个TS包。随后,车载终端的输出器可以将5577个TS包合成的第一视频片段输出给存储器。
需要说明的是,本申请实施例对于如何将至少一第一数据包合成第一视频片段不做限制,可以简单地将每个数据包按照时间顺序进行首尾相接,合成第一视频片段。
下面参见图4,以一个上报周期内有6个TS包为例,对如何存储视频流进行说明。在将视频流转换为至少一TS包后,可以将至少一TS包发送给输出器。在输出器中,一个上报周期内等待写出TS包队列,并将TS包合成为第一视频片段。若一个上报周期内有6个TS包,则将6个TS包首尾相接组成第一视频片段。随后,输出器将第一视频片段输出至存储器。
图5为本申请实施例提供的一种视频处理方法的交互示意图。如图5所示,以视频流为TS流为例,对采集到的视频的处理方式进行说明。在车机摄像头采集到视频流后,车机摄像头将视频流发送给车载终端的MDC,随后,MDC将视频流发送给车载终端的解析器,以使解析器去除RTSP头,获取至少一TS包。解析器将至少一TS包发送给车载终端的输出器,以使输出器将第一上报周期内的至少一TS包组成第一视频片段后,将第一视频片段发送给SD卡保存。当用户需要播放第一视频片段时,可以由视频播放组件从SD卡中提取第一视频片段进行播放。此外,在用户需要通过车记录仪或视频播放组件进行视频预览时,解析器可以将至少一TS包转化为可以直接进行预览播放的裸码流,并将裸码流发送给行车记录仪或视频播放组件进行视频预览。
本申请实施例提供的视频处理方法,通过接收摄像组件采集的视频流,并将视频流转换为至少一第一数据包,第一数据包可以独立编码或解码。随后,再将第一上报周期内获取的第一数据包作为第一视频片段保存。通过该方式,由于将采集到的视频流转化为可以独立编码或解码的至少一第一数据包,当视频录制过程中出现故障时,保存的第一数据包组成的第一视频片段也可以独自完成视频的解码,从而无需在录制视频时写入索引,节省了录制视频占用的存储空间,从而可以保存更长时间的视频。
基于此,本申请中存储视频时无索引空间浪费,能保存更长时间、更高帧率和更高分辨率的视频,能提供更灵活的保存策略。并且,通过视频流格式自适应转换,对于不同封装格式的数据包均可以转换成可自动编解码的视频数据进行保存。
在上述实施例的基础上,车载终端接收的摄像组件发送的视频流可以为多种不同形式,在一些实施例中,视频流包含有TS包,在一些实施例中,视频流包含有ES包,在另一些实施例中,视频流可以为裸码流。针对不同打包格式的视频流,可以采用不同方式将视频流转换为至少一第一数据包,再将至少一第一数据包组合成至少一第一视频片段。
下面对视频流包含有TS包时如何将视频流转换为至少一第一视频片段进行说明。图6为本申请实施例提供的另一种视频处理方法的流程示意图,图7为本申请实施例提供的另一种视频处理方法的交互示意图,图7与图6中视频处理方法相对应。在上述实施例的基础上,该视频处理方法,包括:
S301、车载终端接收摄像组件采集的视频流。
本实施例中,步骤S301的具体实现过程和实现原理与图3中步骤S201的类似,此处不再赘述。具体的,车机摄像头采集到视频流后,车机摄像头将视频流发送给车载终端的MDC,随后,MDC将视频流发送给车载终端的解析器。
S302、车载终端去除视频流中的协议头,从视频流中获取至少一TS包。
在本步骤中,车载终端接收摄像组件采集的视频流之后,由于视频流包含有TS包,车载终端在去除视频流中的协议头之后,可以直接从视频流中获取至少一TS包。
具体的,如图7所示,以视频流为TS流为例,解析器获取到包含有TS包的视频流后,可以去除视频流的RTSP头,获取至少一TS包。随后,解析器将至少一TS包发送给车载终端的输出器。
S303、车载终端将第一上报周期内获取的至少一TS包合成为第一视频片段,并将第一视频片段保存。
本实施例中,步骤S303的具体实现过程和实现原理与实施例一中步骤S203的类似,此处不再赘述。具体的,如图7所示,输出器将第一上报周期内的至少一TS合成为TS视频片段后,将TS视频片段保存在存储器中。
在上述实施例中,车载终端接收到摄像组件采集到的包含有TS包的视频流后,可以将视频流转换为至少一第一视频片段保存到存储器中。此外,车载终端在接收到摄像组件采集的包含有TS包的视频流后,还可以将视频流处理后发送给视频播放组件直接进行预览播放。参见图8,该方法还包括:
S401、车载终端接收摄像组件采集的视频流。
S402、车载终端去除视频流中的协议头,从视频流中获取至少一TS包。
本实施例中,步骤S401-S402的具体实现过程和实现原理与图6中步骤S301-S302的类似,此处不再赘述。
具体的,参见图7,在解析器从视频流中获取至少一TS包后,可以将至少一TS包发送给车载终端的解包器。
S403、车载终端对至少一个TS包进行解包,获取至少一基本码流ES包。
在步骤中,车载终端在去除视频流中的协议头从视频流中获取至少一TS包之后,可以将至少一TS包转换成至少一ES包。具体的,参见图7,在解包器获得解析器发送的至少一TS包后,可以对至少一个TS包进行解包,从而获取至少一ES包。其中,每个TS包对应有多个ES包。然后解包器可将解包得到的ES包发送给解码器。本申请实施例对于解包器如何对TS包进行解包不做限制,可以根据现有的TS包解包方式进行,从而获取至少一ES包。
S404、车载终端对至少一个ES包进行解码,获取视频流对应的待预览的裸码流。
具体的,参见图7,在解码器获取至少一ES包后,可以对至少一个ES包进行解码,获取视频流对应的待预览的裸码流。
其中,本申请实施例对于如何解码器对ES包进行解码进行限制,可以根据现有的ES包解码方式进行,从而获取视频流对应的待预览的裸码流。
S405、车载终端将待预览的裸码流发送给视频播放组件。
具体的,参见图7,在解码器获取视频流对应的待预览的裸码流之后,解码器可以将待预览的裸码流发送给视频播放组件。随后,视频播放组件的渲染器可以基于裸码流渲染视频进行预览。
本申请实施例提供的视频处理方法,通过接收摄像组件采集的视频流,去除视频流中的协议头,从视频流中获取至少一TS包,并将第一上报周期内获取的第一数据包作为第一视频片段保存。通过该方式,由于将采集到的视频流转化为可以独立编码或解码的至少一第一数据包,当视频录制过程中出现故障时,保存的第一数据包组成的第一视频片段也可以独自完成视频的解码,从而无需在录制视频时写入索引,节省了录制视频占用的存储空间,从而可以保存更长时间的视频。
下面对视频流包含有ES包时如何将视频流转换为至少一第一视频片段进行说明。图9为本申请实施例提供的又一种视频处理方法的流程示意图,图10为本申请实施例提供的再一种视频处理方法的交互示意图,图10与图9中视频处理方法对应,该视频处理方法,包括:
S501、车载终端接收摄像组件采集的视频流。
本实施例中,步骤S401的具体实现过程和实现原理与实施例一中步骤S201的类似,此处不再赘述。具体的,车机摄像头采集到视频流后,车机摄像头将视频流发送给车载终端的MDC,随后,MDC将视频流发送给车载终端的解析器。
S502、车载终端去除视频流中的协议头,从视频流中获取至少一ES包。
在本步骤中,车载终端接收摄像组件采集的视频流之后,由于视频流包含有ES包,车载终端在去除视频流中的协议头之后,可以从视频流中获取至少一ES包。
具体的,如图10所示,以视频流为ES流为例,车载终端的解析器获取到包含有ES包的视频流后,可以去除视频流的RTSP头,获取至少一ES包。随后,解析器将至少一ES包发送给车载终端的打包器。
S503、车载终端将至少一ES包封装为至少一TS包。
在本步骤中,在去除视频流中的协议头从视频流中获取至少一ES包之后,车载终端可以将至少一ES包封装为至少一TS包。
具体的,如图10所示,打包器在接收到至少一ES包之后,可以将至少一ES包封装为至少一TS包,再将至少一TS包发送给车载终端的输出器。
S504、车载终端将第一上报周期内获取的至少一TS包合成为第一视频片段,并将第一视频片段保存。
本实施例中,步骤S504的具体实现过程和实现原理与图3中步骤S203的类似,此处不再赘述。具体的,如图10所示,输出器将第一上报周期内的至少一TS包合成为TS视频片段后,将TS视频片段保存在存储器中。
在上述实施例的基础上,车载终端接收到摄像组件采集到的包含有ES包的视频流后,可以将视频流转换为至少一第一视频片段保存到存储器中。此外,车载终端在接收到摄像组件采集的视频流后,还可以将视频流处理后发送给视频播放组件直接进行预览播放。参见图11,该方法还包括:
S601、车载终端接收摄像组件采集的视频流。
S602、车载终端去除视频流中的协议头,从视频流中获取至少一ES包。
本实施例中,步骤S601-S602的具体实现过程和实现原理与图5中步骤S501-S502的类似,此处不再赘述。
具体的,参见图10,在解析器从视频流中获取至少一ES包后,可以将至少一ES包发送给车载终端的解码器。
S603、车载终端对至少一个ES包进行解码,获取视频流对应的待预览的裸码流。
具体的,参见图10,在解码器接收到解析器发送的至少一ES包后,可以对至少一ES包进行解码,从而获取视频流对应的待预览的裸码流。
S604、车载终端将待预览的裸码流传输给视频播放组件。
本实施例中,步骤S603-S604的具体实现过程和实现原理与图7中步骤S404-S405的类似,此处不再赘述。
具体的,参见图10,在解码器获取视频流对应的待预览的裸码流之后,解码器可以将待预览的裸码流发送给视频播放组件。随后,视频播放组件的渲染器可以基于裸码流渲染视频进行预览。
本申请实施例提供的视频处理方法,通过接收摄像组件采集的视频流,去除视频流中的协议头,从视频流中获取至少一ES包,将至少一ES包封装为至少一TS包。通过该方式,由于将采集到的视频流转化为可以独立编码或解码的至少一第一数据包,当视频录制过程中出现故障时,保存的第一数据包组成的第一视频片段也可以独自完成视频的解码,从而无需在录制视频时写入索引,节省了录制视频占用的存储空间,从而可以保存更长时间的视频。
下面对视频流为裸码流时如何将视频流转换为至少一第一视频片段进行说明。图12为本申请实施例提供的又一种视频处理方法的流程示意图,图13为本申请实施例提供的另一种视频处理方法的交互示意图,图13与图12中视频处理方法对应。该视频处理方法,包括:
S701、车载终端接收摄像组件采集的视频流。
本实施例中,步骤S701的具体实现过程和实现原理与图3中步骤S201的类似,此处不再赘述。具体的,车机摄像头采集到视频流后,车机摄像头将视频流发送给车载终端的MDC,随后,MDC将视频流发送给车载终端的解析器。
S702、车载终端去除视频流中的协议头,从视频流中获取视频流对应的裸码流。
具体的,如图13所示,以视频流为裸码流为例,解析器获取到视频流后,可以去除视频流的RTSP头,获取裸码流。随后,解析器将裸码流发送给车载终端的编码器。
S703、车载终端将裸码流进行编码,生成至少一ES包。
本申请实施例对于如何将将裸码流进行编码生成ES包进行限制,可以采用现有的裸码流编码方式进行。具体的,如图13所示,编码器对裸码流进行编码,生成至少一ES包,并将至少一ES包发送给车载终端的打包器。
S704、车载终端将至少一ES包封装为至少一TS包。
具体的,如图13所示,包器在将至少一ES包封装为至少一TS包后,再将至少一TS包发送给车载终端的输出器。
S705、车载终端将第一上报周期内获取的至少一TS包合成为第一视频片段,并将第一视频片段保存。
具体的,如图13所示,输出器将第一上报周期内的至少一TS合成为TS视频片段后,将TS视频片段保存在存储器中。
在上述实施例的基础上,车载终端接收到摄像组件采集到的裸码流后,可以将视频流转换为至少一第一视频片段保存到存储器中。此外,车载终端在接收到摄像组件采集的视频流后,还可以将视频流处理后发送给视频播放组件直接进行预览播放。参见图14,该方法还包括:
S801、车载终端接收摄像组件采集的视频流。
S802、车载终端去除视频流中的协议头,从视频流中获取视频流对应的裸码流。
S803、车载终端将视频流对应的裸码流传输给视频播放组件。
本实施例中,步骤S803的具体实现过程和实现原理与图7中步骤S405的类似,此处不再赘述。
具体的,参见图13,车载终端中的解析器可以去除视频流中的协议头,从视频流中获取视频流对应的裸码流,并将待预览的裸码流发送给视频播放组件。随后,视频播放组件的渲染器可以基于裸码流渲染视频进行预览。
本申请实施例提供的视频处理方法,通过接收摄像组件采集的视频流,去除视频流中的协议头,从视频流中获取视频流对应的裸码流,随后,将裸码流进行编码,生成至少一ES包,并将至少一ES包封装为至少一TS包。通过该方式,由于将采集到的视频流转化为可以独立编码或解码的至少一第一数据包,当视频录制过程中出现故障时,保存的第一数据包组成的第一视频片段也可以独自完成视频的解码,从而无需在录制视频时写入索引,节省了录制视频占用的存储空间,从而可以保存更长时间的视频。
在上述实施例的基础上,第一视频片段在进行存储时还可以合并成视频文件后再进行存储。下面对车载终端如何将多个第一视频片段组合成一个视频文件进行说明。图15为本申请实施例提供的又一种视频处理方法的流程示意图,在上述实施例的基础上,该视频处理方法,包括:
S901、车载终端接收摄像组件采集的视频流。
S902、车载终端将视频流转换为至少一第一数据包,第一数据包独立编码或解码。
S903、车载终端将第一上报周期内获取的至少一第一数据包合成为第一视频片段,并保存第一视频片段。
本实施例中,步骤S901-S903的具体实现过程和实现原理与图3中步骤S201-S203的类似,此处不再赘述。
S904、车载终端根据视频文件的标准数据量,将至少一个视频片段合并成至少一个视频文件。
在本步骤中,车载终端将视频流转换为至少一第一数据包后,可以根据视频文件的标准数据量,将至少一个视频片段合并成至少一个视频文件。
其中,第一数据包可以为TS包,由于每个TS包都自带元数据,TS包无附加元数据信息,合并时不需要解析数据包,通过文件追加方式可以简单的首尾相接快速将多个视频片段合并为一个视频文件。
本申请实施例对于视频文件的标准数据量不做限制,可以根据实际情况具体设置。
示例性的,若每个视频文件的标准数据量为10M,一个视频片段为1M,则相应的可以将10个视频片段合成为一个视频文件。
图16为本申请实施例提供的一种视频片段合成示意图,具体的,参见图16,车载终端的合成器从车载终端的输出器接收TS视频片段Video1、Video2和Video3。若TS视频片段Video1、Video2和Video3总的视频数据量符合预设的标准数据量,则合成器将TS视频片段Video1、Video2和Video3合并为一个视频文件,并将视频文件发送给车载终端的转换器。
S905、车载终端根据第一视频格式,保存至少一个视频文件。
在本步骤中,车载终端可以预设有视频文件的视频格式。示例性的,TS视频文件本身可以播放,也可以通过转换器将TS视频文件转换为更通用的MP4文件。若第一视频格式为TS,则相应的,车载终端输出的TS视频文件不进行转换直接进行保存,若第一视频格式为MP4,则相应的,车载终端输出的TS视频文件需要转换为MP4格式保存。
具体的,如图16所示,车载终端的转换器可以根据用户设置的视频格式对合成器发送的视频文件的格式进行转换,并将转换后的视频文件发送给存储器进行保存。若预设的视频格式为MP4格式,则将视频文件的格式转换为MP4格式。其中,MP4格式可以更适用于车载终端的播放格式。
本申请实施例提供的视频处理方法,根据视频文件的标准数据量,将至少一个视频片段合并成至少一个视频文件,并根据第一视频格式,保存至少一个视频文件。通过该方式,利用TS的自带元数据的特性,可通过文件追加方式合并TS视频片段,实现快速视频恢复,此外,还可以根据用户的需求,将视频流封装为多种视频格式。
下面对紧急情况下如何保存视频进行说明。图17为本申请实施例提供的又一种视频处理方法的流程示意图,在上述实施例的基础上,该视频处理方法,包括:
S1101、车载终端获取摄像组件所在车辆的速度。
在本步骤中,车载终端可以实时检测摄像组件所在车辆的速度。
本申请实施例对于如何获取车辆的速度不做限制,在一些实施例中,摄像组件所在的车辆可以设置有速度传感器,通过速度传感器可以确定车辆的实时速度。在另一些实施例中,车载终端可以获取车辆的实时卫星定位,从而计算出车辆的速度。
S1102、若车辆的速度在第一时间段内的降幅超过第一阈值,车载终端则将第二时间段内的第一视频片段保存至独立存储区域。
其中,第一时间段的起始时间点为车辆的行车踏板被踩下的时间点,第一时间段的时长为第一预设时长;第二时间段的中间时间点为车辆的行车踏板被踩下的时间点,第二时间段的时长为第二预设时长。
在本步骤中,车辆的速度在第一时间段内的降幅度超过第一阈值,则可以确定车辆发生事故,此时可以将第二时间段内的第一视频片段保存至独立存储区域。需要说明的是,本申请实施例对于第一预设时长和第二预设时长不做限制,可以根据实际情况具体设置。图18为本申请实施例提供的一种第一时间段和第二时间段的示意图。其中的第一预设时长可以为150ms,第二预设时长可以为300ms。如图18所示,对于第一时间段,可以将车辆的行车踏板被踩下的时间点t1作为第一时间段的起始时间点,将t1之后与t1相差150ms的时间点t2作为第一时间段的结束时间点,则t1至t2之间的时间段则为第一时间段。对于第二时间段,可以将驾驶员踩下车辆的行车踏板的时间点t1作为第二时间段的中间时间点,将t1之前与t1相差150ms的时间点t0作为第二时间段的起始时间点,将t1之后与t1相差150ms的时间点t2作为第一时间段的结束时间点,则t0至t2之间的时间段则为第二时间段。
本申请实施例对于车载终端如何确定第二时间段内的第一视频片段也不做限制,在一种可选的实施方式中,车载终端可以根据第一视频片段的时间戳定位第二时间段内的第一视频片段。具体的,由于第二时间段可能会对应多个第一视频片段,每个第一视频片段都有相应时间戳与其相对应。因此,车载终端可以使用第一视频片段的时间戳来定位第一视频片段。
其中,第一视频片段的时间戳可以用于标识第一视频片段录制开始时刻的时间,并由车载终端记录和生成。示例性的,如图4所示,第一视频段是由多个TS包组成的,第一视频片段录制开始时刻的时间可以是第一个TS包录制开始的时间。后续,车载终端在保存该第一视频片段时,可以将第一视频片段与该第一视频片段的时间戳一同保存。当车载终端发生事故时,可通过第一视频片段的时间戳,快速定位刹车前后15秒时间段内的关键视频。
在一种可能的实现方式中,在步骤1102中,若车辆的速度在第一时间段内的降幅超过第一阈值,车载终端除了将第二时间段内的第一视频片段保存至独立存储区域,还可以将第一视频片段的时间戳也一同保存至独立存储区域。
图19为本申请实施例提供的一种车辆突发事件时视频存储的示意图,如图19所示,车辆上的传感器检测到车辆的速度后,可以将车辆的速度传输给车载终端中的整车控制器(VCU),VCU检测到车辆的速度在第一时间段内的降幅超过第一阈值,则判断车辆发生紧急事件。若发送紧急事件,VCU可以向车载终端的扫描器发送指示信息,该指示信息用于指示扫描器从存储器中过滤出第二时间段内保存的第一视频片段。若扫描器接收到指示信息时存储器中保存有第一视频片段Video1、Video2和Video3,其中的Video1和Video2是在第二时间段内保存的,则扫描器可以通过扫描第一视频片的时间戳,过滤出Video1和Video2。随后,扫描器将Video1和Video2发送给车载终端的合成器,由合成器将Video1和Video2合成为视频文件,并发送给车载终端的转换器。最后,转化器将视频文件转换为MP4格式并发送至存储器进行独立存储。
示例性的,VCU可以通过判断刹车幅度识别并上报急刹车事件,若VCU检测到第一时间段150ms内速度下降幅度大于25km/h,则可以判断发生事故,此时VCU定义和上报紧急事件,向扫描器发送指示信息,来指示扫描器通过时间戳快速定位到刹车前后15秒时间段内的关键视频,并将关键视频移动到专用存储区域。
本申请实施例提供的视频处理方法,车载终端获取摄像组件所在车辆的速度,并根据第一视频片段的时间戳定位第二时间段内的第一视频片段,若车辆的速度在第一时间段内的降幅度超过第一阈值,则将第二时间段内的第一视频片段保存至独立存储区域。通过该方式,在事故发生时可以通时间戳快速将关键事件视频移动至独立存储区域,在事故后可以在独立存储区域进行关键事件视频的快速提取,从而更快获取更有价值的视频。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序信息相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
图20为本申请实施例提供的一种视频处理装置的结构示意图。该视频处理装置可以通过软件、硬件或者两者的结合实现,以执行上述视频处理方法。如图20所示,该视频处理装置200包括:接收模块201和处理模块202。
接收模块201,用于接收摄像组件采集的视频流;
处理模块202,用于将视频流转换为至少一第一数据包,第一数据包独立编码或解码;将第一上报周期内获取的第一数据包合成为第一视频片段,并将第一视频片段保存,第一上报周期小于或等于最大允许丢失视频时长,最大允许丢失视频时长为发生故障时用户允许丢失的摄像组件拍摄的视频的最长时间。
一种可选的实施方式中,第一数据包为传输流TS包。
一种可选的实施方式中,若视频流包含有TS包,处理模块202具体用于去除视频流中的协议头,从视频流中获取至少一TS包。
一种可选的实施方式中,若视频流包含有ES包,处理模块202具体用于去除视频流中的协议头,从视频流中获取至少一ES包;将至少一ES包封装为至少一TS包。
一种可选的实施方式中,若视频流为裸码流,处理模块202,具体用于去除视频流中的协议头,从视频流中获取视频流对应的裸码流;将裸码流进行编码,生成至少一ES包;将至少一ES包封装为至少一TS包。
一种可选的实施方式中,协议头为实时流传输协议RTSP头。
一种可选的实施方式中,每个第一数据包的数据量相同。
一种可选的实施方式中,处理模块202,还用于根据视频文件的标准数据量,将至少一第一视频片段合并成至少一视频文件;根据第一视频格式,保存至少一视频文件。
一种可选的实施方式中,接收模块201,还用于获取摄像组件所在车辆的速度;
处理模块202,还用于若车辆的速度在第一时间段内的降幅度超过第一阈值,则将第二时间段内的第一视频片段保存至独立存储区域
其中,第一时间段的起始时间点为车辆的行车踏板被踩下的时间点,第一时间段的时长为第一预设时长;第二时间段的中间时间点为车辆的行车踏板被踩下的时间点,第二时间段的时长为第二预设时长。
一种可选的实施方式中,处理模块202,还用于根据第一视频片段的时间戳定位第二时间段内的第一视频片段,第一视频片段的时间戳用于标识第一视频片段录制开始时刻的时间。
本申请实施例提供的视频处理装置,可以执行上述方法实施例中视频处理方法的动作,其实现原理和技术效果类似,在此不再赘述。
图21为本申请实施例提供的一种车载终端的结构示意图。如图21所示,该车载终端可以包括:处理器211(例如CPU)、存储器212、接收器213和发送器214;接收器213和发送器214耦合至处理器211,处理器211控制接收器213的接收动作、处理器211控制发送器214的发送动作。存储器212可能包含高速RAM存储器,也可能还包括非易失性存储器NVM,例如至少一个磁盘存储器,存储器212中可以存储各种信息,以用于完成各种处理功能以及实现本申请实施例的方法步骤。可选的,本申请实施例涉及的车载终端还可以包括:电源215、通信总线216以及通信端口219。接收器213和发送器214可以集成在车载终端的收发信机中,也可以为车载终端上独立的收发天线。通信总线216用于实现元件之间的通信连接。上述通信端口219用于实现车载终端与其他外设之间进行连接通信。
在本申请实施例中,上述存储器212用于存储计算机可执行程序代码,程序代码包括信息;当处理器211执行信息时,信息使处理器211执行上述方法实施例中车载终端的处理动作,使发送器214执行上述方法实施例中车载终端的发送动作,使接收器213执行上述方法实施例中车载终端的接收动作,其实现原理和技术效果类似,在此不再赘述。
本申请实施例还提供了一种芯片,包括处理器和接口。其中接口用于输入输出处理器所处理的数据或指令。处理器用于执行以上方法实施例中提供的方法。该芯片可以应用于车载终端中。
本申请实施例还提供一种程序,该程序在被处理器执行时用于执行以上方法实施例提供的方法。
本申请实施例还提供一种程序产品,例如计算机可读存储介质,该程序产品中存储有指令,当其在计算机上运行时,使得计算机执行上述方法实施例提供的方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时,全部或部分地产生按照本发明实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
Claims (10)
1.一种视频处理方法,其特征在于,包括:
接收摄像组件采集的视频流;
将所述视频流转换为至少一个第一数据包,所述第一数据包独立编码或解码;
将第一上报周期内获取的第一数据包合成为第一视频片段,并将所述第一视频片段保存预设时长。
2.根据权利要求1所述的方法,其特征在于,所述第一数据包为传输流TS包。
3.根据权利要求2所述的方法,其特征在于,若所述视频流包含有TS包,所述将所述视频流转换为至少一个第一数据包,包括:
去除所述视频流中的协议头,从所述视频流中获取至少一个TS包。
4.根据权利要求2所述的方法,其特征在于,若所述视频流包含有ES包,所述将所述视频流转换为至少一个数据包,包括:
去除所述视频流中的协议头,从所述视频流中获取至少一个ES包;
将所述至少一个ES包封装为至少一个TS包。
5.根据权利要求2所述的方法,其特征在于,若所述视频流为裸码流,所述将所述视频流转换为至少一个第一数据包,包括:
去除所述视频流中的协议头,从所述视频流中获取所述视频流对应的裸码流;
将所述裸码流进行编码,生成至少一个ES包;
将所述至少一个ES包封装为至少一个TS包。
6.根据权利要求3-5任一项所述的方法,其特征在于,所述协议头为实时流传输协议RTSP头,和/或,每个第一数据包的数据量相同。
7.根据权利要求2所述的方法,其特征在于,所述方法还包括:
根据视频文件的标准数据量,将至少一个第一视频片段合并成至少一个视频文件;
根据第一视频格式,保存所述至少一个视频文件。
8.根据权利要求2所述的方法,其特征在于,所述方法还包括:
获取所述摄像组件所在车辆的速度;
若所述车辆的速度在第一时间段内的降幅度超过第一阈值,则将第二时间段内的第一视频片段保存至独立存储区域;其中,所述第一时间段的起始时间点为所述车辆的行车踏板被踩下的时间点,所述第一时间段的时长为第一预设时长;所述第二时间段的中间时间点为所述车辆的行车踏板被踩下的时间点,所述第二时间段的时长为第二预设时长。
9.根据权利要求8所述的方法,其特征在于,所述将第二时间段内的第一视频片段保存至独立存储区域之前,所述方法还包括:
根据所述第一视频片段的时间戳定位所述第二时间段内的第一视频片段,所述第一视频片段的时间戳用于标识所述第一视频片段录制开始时刻的时间。
10.一种车载终端,其特征在于,包括:一个或多个处理器,存储器,以及,一个或多个程序;其中,所述一个或多个程序被存储在所述存储器中,所述一个或多个程序包括指令,当所述指令被所述车载终端执行时,使得所述车载终端执行如权利要求1~9中任意一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111070114.XA CN113766160A (zh) | 2020-04-24 | 2020-04-24 | 视频处理方法及装置 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010331493.2A CN113553467A (zh) | 2020-04-24 | 2020-04-24 | 视频处理方法及装置 |
CN202111070114.XA CN113766160A (zh) | 2020-04-24 | 2020-04-24 | 视频处理方法及装置 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010331493.2A Division CN113553467A (zh) | 2020-04-24 | 2020-04-24 | 视频处理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113766160A true CN113766160A (zh) | 2021-12-07 |
Family
ID=78129581
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111070114.XA Pending CN113766160A (zh) | 2020-04-24 | 2020-04-24 | 视频处理方法及装置 |
CN202010331493.2A Pending CN113553467A (zh) | 2020-04-24 | 2020-04-24 | 视频处理方法及装置 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010331493.2A Pending CN113553467A (zh) | 2020-04-24 | 2020-04-24 | 视频处理方法及装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11856321B1 (zh) |
EP (1) | EP4131979A4 (zh) |
JP (1) | JP2023522429A (zh) |
CN (2) | CN113766160A (zh) |
WO (1) | WO2021213181A1 (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103002353A (zh) * | 2011-09-16 | 2013-03-27 | 杭州海康威视数字技术股份有限公司 | 对多媒体文件进行封装的方法及装置 |
CN105049920A (zh) * | 2015-07-27 | 2015-11-11 | 青岛海信移动通信技术股份有限公司 | 一种多媒体文件的录制方法和装置 |
CN105141868A (zh) * | 2015-07-28 | 2015-12-09 | 北京奇虎科技有限公司 | 视频数据保护系统及其所涉各端的安全保护、传输方法 |
CN106060571A (zh) * | 2016-05-30 | 2016-10-26 | 湖南纽思曼导航定位科技有限公司 | 一种行车记录仪及视频直播方法 |
CN106899880A (zh) * | 2015-12-19 | 2017-06-27 | 联芯科技有限公司 | 将多媒体数据分段保存的方法及系统 |
CN107566768A (zh) * | 2017-07-25 | 2018-01-09 | 深圳市沃特沃德股份有限公司 | 视频录制方法和装置 |
CN110324549A (zh) * | 2018-03-28 | 2019-10-11 | 沈阳美行科技有限公司 | 一种录像方法、装置和设备 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7295752B1 (en) * | 1997-08-14 | 2007-11-13 | Virage, Inc. | Video cataloger system with audio track extraction |
WO2001075885A2 (en) * | 2000-04-05 | 2001-10-11 | Sony United Kingdom Limited | Identifying, recording and reproducing information |
JP5082209B2 (ja) * | 2005-06-27 | 2012-11-28 | 株式会社日立製作所 | 送信装置、受信装置、及び映像信号送受信システム |
WO2015073827A1 (en) * | 2013-11-14 | 2015-05-21 | Ksi Data Sciences, Llc | A system and method for managing and analyzing multimedia information |
US10067813B2 (en) * | 2014-11-21 | 2018-09-04 | Samsung Electronics Co., Ltd. | Method of analyzing a fault of an electronic system |
US9871994B1 (en) * | 2016-01-19 | 2018-01-16 | Gopro, Inc. | Apparatus and methods for providing content context using session metadata |
CN105872428A (zh) * | 2016-04-12 | 2016-08-17 | 北京奇虎科技有限公司 | 视频数据保护方法及装置 |
US20230209071A1 (en) * | 2020-05-25 | 2023-06-29 | Lg Electronics Inc. | Multilayer-based image coding device and method |
WO2021246840A1 (ko) * | 2020-06-06 | 2021-12-09 | 엘지전자 주식회사 | 스케일러빌리티를 위한 서브-비트스트림 추출 기반 영상 코딩 장치 및 방법 |
-
2020
- 2020-04-24 CN CN202111070114.XA patent/CN113766160A/zh active Pending
- 2020-04-24 CN CN202010331493.2A patent/CN113553467A/zh active Pending
-
2021
- 2021-04-06 WO PCT/CN2021/085707 patent/WO2021213181A1/zh unknown
- 2021-04-06 EP EP21791660.0A patent/EP4131979A4/en active Pending
- 2021-04-06 JP JP2022564352A patent/JP2023522429A/ja active Pending
-
2022
- 2022-10-21 US US17/970,930 patent/US11856321B1/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103002353A (zh) * | 2011-09-16 | 2013-03-27 | 杭州海康威视数字技术股份有限公司 | 对多媒体文件进行封装的方法及装置 |
CN105049920A (zh) * | 2015-07-27 | 2015-11-11 | 青岛海信移动通信技术股份有限公司 | 一种多媒体文件的录制方法和装置 |
CN105141868A (zh) * | 2015-07-28 | 2015-12-09 | 北京奇虎科技有限公司 | 视频数据保护系统及其所涉各端的安全保护、传输方法 |
CN106899880A (zh) * | 2015-12-19 | 2017-06-27 | 联芯科技有限公司 | 将多媒体数据分段保存的方法及系统 |
CN106060571A (zh) * | 2016-05-30 | 2016-10-26 | 湖南纽思曼导航定位科技有限公司 | 一种行车记录仪及视频直播方法 |
CN107566768A (zh) * | 2017-07-25 | 2018-01-09 | 深圳市沃特沃德股份有限公司 | 视频录制方法和装置 |
CN110324549A (zh) * | 2018-03-28 | 2019-10-11 | 沈阳美行科技有限公司 | 一种录像方法、装置和设备 |
Also Published As
Publication number | Publication date |
---|---|
CN113553467A (zh) | 2021-10-26 |
WO2021213181A1 (zh) | 2021-10-28 |
JP2023522429A (ja) | 2023-05-30 |
EP4131979A1 (en) | 2023-02-08 |
US11856321B1 (en) | 2023-12-26 |
EP4131979A4 (en) | 2023-07-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7091421B2 (ja) | 送信装置、及び、受信装置 | |
CN105230006B (zh) | 保存方法、再现方法、保存装置及再现装置 | |
US20060013123A1 (en) | Method and apparatus for processing transmission error in DMB system | |
CN110784740A (zh) | 视频处理方法、装置、服务器及可读存储介质 | |
JP2004534484A5 (zh) | ||
CN107093436B (zh) | 预录的音视频数据的存储方法及装置、移动终端 | |
KR102104409B1 (ko) | 영상저장시스템 및 오픈플랫폼기반 영상저장시스템에서 프로토콜 변환 방법 | |
JP7338075B2 (ja) | ビデオブロック化方法、伝送方法、サーバー、アダプタ及び記憶媒体 | |
KR101036768B1 (ko) | 파일포맷 생성장치, 그 생성장치를 포함한 멀티미디어 장치, 및 그 생성장치를 이용한 파일 복구방법 | |
JP4552802B2 (ja) | 記録装置、記録方法、記録方法のプログラム及び記録方法のプログラムを記録した記録媒体 | |
CN113766160A (zh) | 视频处理方法及装置 | |
KR101051063B1 (ko) | 영상 수록 재생 장치, 영상 수록 방법, 영상 재생 방법 및 영상 수록 재생 방법 | |
CN109302574B (zh) | 一种处理视频流的方法和装置 | |
CN104639892B (zh) | 视频记录系统以及用于处理主系统中的图像的方法和设备 | |
TWI415432B (zh) | 從資料源器到資料檔器之資料流程轉移方法及進行此方法所用之資料檔器裝置和資料源器裝置 | |
US20190149793A1 (en) | Apparatus and method for recording and storing video | |
KR20110046219A (ko) | 차량용 복합정보 기록장치 및 이를 이용한 복합정보 처리시스템 | |
CN115734004A (zh) | 视频处理方法、装置、系统和设备 | |
CN112381400A (zh) | 用于线下服务抽查的装置、方法、电子设备和存储介质 | |
CN100518312C (zh) | 流媒体数据处理系统及方法 | |
CN104869357B (zh) | 一种传输车载视频数据的方法及系统 | |
CN117294690B (zh) | 一种评估QoE的方法及电子设备 | |
JP2005197839A (ja) | トランスポートストリームの特殊再生方法及びトランスポートストリームの記録再生装置 | |
US20120094713A1 (en) | Mobile phone including a streaming server providing a method of copying a distance of the image on the screen | |
CN111356003B (zh) | 一种数据写入的方法、系统及终端设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |