CN114584839A - 拍摄车载视频的剪辑方法、装置、电子设备及存储介质 - Google Patents

拍摄车载视频的剪辑方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN114584839A
CN114584839A CN202210178397.8A CN202210178397A CN114584839A CN 114584839 A CN114584839 A CN 114584839A CN 202210178397 A CN202210178397 A CN 202210178397A CN 114584839 A CN114584839 A CN 114584839A
Authority
CN
China
Prior art keywords
video
clip
material information
clipping
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202210178397.8A
Other languages
English (en)
Inventor
周子韧
李微萌
崔巍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhiji Automobile Technology Co Ltd
Original Assignee
Zhiji Automobile Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhiji Automobile Technology Co Ltd filed Critical Zhiji Automobile Technology Co Ltd
Priority to CN202210178397.8A priority Critical patent/CN114584839A/zh
Publication of CN114584839A publication Critical patent/CN114584839A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440245—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording

Abstract

本发明公开了一种拍摄车载视频的剪辑方法，包括：当启动相机拍摄视频时，向车载的传感器、控制器广播启动记录功能；所述传感器、所述控制器与所述相机同步记录拍摄过程中有关的第一剪辑素材信息；将所述相机拍摄的视频与所述第一剪辑素材信息存储，响应于视频剪辑的控制指令，基于所述第一剪辑素材信息及所述视频提取出剪辑特征，利用所述剪辑特征进行自动视频剪辑，其中所述自动视频剪辑包括视频片段剪辑、配乐、字幕。

Description

拍摄车载视频的剪辑方法、装置、电子设备及存储介质
技术领域
本发明涉及视频处理技术领域，尤其涉及一种拍摄车载视频的剪辑方法、装置、电子设备及存储介质。
背景技术
随着短视频和流媒体内容在移动互联网时代的兴起，越来越高规格的摄像设备开始出现，目前常见的拍摄设备无论是手机、无人机还是运动相机，都仅负责视频录制。
传统录像设备往往只负责记录视频画面与声音，拍摄与剪辑设备完全分开。但随着设备更新换代，人们的信息记录需求越来越多，开始希望一次记录更多、更准确的信息，并希望能够快速的进行剪辑分享。
目前少数产品配备了内置模版可以直接在拍摄完成后进行剪辑，但往往需要用户事先选定模版或输入大量信息。虽然极大提升了便利性，但仍不够灵活且无法适应用户高度客制化的需求和审美偏好。
发明内容
针对上述技术问题，本发明提供了一种拍摄车载视频的剪辑方法、装置、电子设备及存储介质，可以根据记录的富内容信息自动剪辑视频。
本发明的第一方面，提供一种拍摄车载视频的剪辑方法，包括：
当启动相机拍摄视频时，向车载的传感器、控制器广播启动记录功能；
所述传感器、所述控制器与所述相机同步记录拍摄过程中有关的第一剪辑素材信息；
将所述相机拍摄的视频与所述第一剪辑素材信息存储，响应于视频剪辑的控制指令，基于所述第一剪辑素材信息及所述视频提取出剪辑特征，利用所述剪辑特征进行自动视频剪辑，其中所述自动视频剪辑包括视频片段剪辑、配乐、字幕。
可选地，所述第一剪辑素材信息包括螺仪信息、指南针方位、海拔、经纬度信息、地图POI信息、环境光亮度、车路转向角、驾驶员信息、车身外观配置、前方车辆识别信息中的一种或多种。
可选地，所述传感器、所述控制器与所述相机利用时间戳编码同步记录拍摄过程中有关的第一剪辑素材信息。
可选地，所述传感器、所述控制器按照预设的采集频率采集所述第一剪辑素材信息。
可选地，所述方法还包括：从相机拍摄的视频中抽取画面帧用于分析该画面帧对应时间的画面关键元素，将所述画面关键元素记录为第二剪辑素材信息。
可选地，所述方法还包括：识别出所述相机拍摄的视频中的语音对应的文字、情绪，将所述文字内容、情绪记录为第二剪辑素材信息。
可选地，所述基于所述第一剪辑素材信息及所述视频提取出剪辑特征，包括：
将第一剪辑素材信息存储为第一标签文件，基于时间戳编码将视频中包含的第二剪辑素材信息，与所述第一剪辑素材信息融合存储为第二标签文件。
可选地，所述利用所述剪辑特征进行自动视频剪辑，包括：利用所述剪辑特征将相机拍摄的视频的内容分为多个视频片段，将所述多个视频片段进行拼合，并配置相应的配乐、字幕和/或剪辑特效，用以形成视频剪辑文件，所述视频剪辑文件至少包含所述第一剪辑素材信息或至少关联所述第一剪辑素材信息。
本发明的第二方面，提供一种拍摄车载视频的剪辑装置，包括：
控制模块，用于当启动相机拍摄视频时，向车载的传感器、控制器广播启动记录功能；
记录模块，用于同步记录所述传感器、所述控制器与所述相机拍摄过程中有关的第一剪辑素材信息；
剪辑模块，用于将所述相机拍摄的视频与所述第一剪辑素材信息存储，响应于视频剪辑的控制指令，基于所述第一剪辑素材信息及所述视频提取出剪辑特征，利用所述剪辑特征进行自动视频剪辑，其中所述自动视频剪辑包括视频片段剪辑、配乐、字幕。
可选地，所述第一剪辑素材信息包括螺仪信息、指南针方位、海拔、经纬度信息、地图POI信息、环境光亮度、车路转向角、驾驶员信息、车身外观配置、前方车辆识别信息中的一种或多种。
可选地，所述记录模块还用于：利用时间戳编码同步记录所述传感器、所述控制器与所述相机拍摄过程中有关的第一剪辑素材信息。
可选地，所述传感器、所述控制器按照预设的采集频率采集所述第一剪辑素材信息。
可选地，所述剪辑模块还包括抽取单元，用于从相机拍摄的视频中抽取画面帧用于分析该画面帧对应时间的画面关键元素，将所述画面关键元素记录为第二剪辑素材信息。
可选地，所述剪辑模块还包括识别单元，用于识别出所述相机拍摄的视频中的语音对应的文字、情绪，将所述文字内容、情绪记录为第二剪辑素材信息。
可选地，所述剪辑模块还包括记录单元，用于将第一剪辑素材信息存储为第一标签文件，基于时间戳编码将视频中包含的第二剪辑素材信息，与所述第一剪辑素材信息融合存储为第二标签文件。
可选地，所述剪辑模块包括拼合单元，所述拼合单元利用所述剪辑特征将相机拍摄的视频的内容分为多个视频片段，将所述多个视频片段进行拼合，并配置相应的配乐、字幕和/或剪辑特效，用以形成视频剪辑文件，所述视频剪辑文件至少包含所述第一剪辑素材信息或至少关联所述第一剪辑素材信息。
本发明的第三方面，提供一种带有相机拍摄功能的电子设备，包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上述的拍摄车载视频的剪辑方法的步骤。
本发明的第四方面，提供一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如上述的拍摄车载视频的剪辑方法的步骤。
本发明提供的技术方案中，通过传感器、控制器收集第一剪辑素材信息，将所述第一剪辑素材信息作为富内容参与视频剪辑，可以灵活自动剪辑且可以提供客户高度客制化的需求，提升了视频剪辑的智能化以及视频内容的丰富度。
附图说明
图1为本发明实施例中一种拍摄车载视频的剪辑方法的流程示意图；
图2为本发明实施例中另一种拍摄车载视频的剪辑方法的流程示意图；
图3为本发明实施例中一种拍摄车载视频的剪辑装置的模块示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参阅图1，图1为本发明实施例中一种拍摄车载视频的剪辑方法的流程示意图。所述拍摄车载视频的剪辑方法，包括以下步骤：
步骤S100：当启动相机拍摄视频时，向车载的传感器、控制器广播启动记录功能。
用户控制相机拍摄，会进入相机拍摄取景界面，界面显示相应地画面，当用户启用相机拍摄时，自动向多个车载传感器、控制器广播启动记录功能。当然，在进入相机拍摄取景界面时，也可以直接启动车载传感器、控制器，提前记录相关的富内容信息。
步骤S200：所述传感器、所述控制器与所述相机同步记录拍摄过程中有关的第一剪辑素材信息。
不同电子设备上会有不同的传感器，例如汽车上有雷达传感器、摄像头、光传感器、激光雷达等。所述控制器在汽车上可以是域控制器、协处理器等。例如激光雷达可以探测汽车周边环境，在控制器中构建周围环境的车辆模型予以显示。这些周围环境的车辆模型可以作为所述第一剪辑素材信息。除此之外，汽车本身系统或安装的软件里还会带有很多其他信息，比如海拔、经纬度信息、地图等，也可以作为第一剪辑素材信息。其他电子设备也可利用这样的方式记录富内容信息。
步骤S300：将所述相机拍摄的视频与所述第一剪辑素材信息存储，响应于视频剪辑的控制指令，基于所述第一剪辑素材信息及所述视频提取出剪辑特征，利用所述剪辑特征进行自动视频剪辑，其中所述自动视频剪辑包括视频片段剪辑、配乐、字幕。
用户操作结束拍摄后，拍摄的视频及采集的第一剪辑素材信息存储后可供用户查阅，例如在界面中显示视频内容而隐藏第一剪辑素材信息，在用户选择一个或多个视频文件，并操作确认视频自动剪辑的控制指令后，利用所述第一剪辑素材信息及所述视频提取出适合视频剪辑规则的剪辑特征，例如快速识别出拍摄视频的适用的风格、内容主体、拍摄路径并进行总结归类，基于归类记过完成视频的自动剪辑。
在本发明的实施例中，所述自动剪辑即直接完成剪辑成品，视频剪辑成品会有相应的配乐、字幕等，当然用户最终可以选择修改。例如修改是否显示字幕，是否更换音乐等等。当然也可以加入一些视频特效增加视频的美感。
在本实施方式中，在相机拍摄视频时，通过传感器、控制器收集第一剪辑素材信息，然后将所述第一剪辑素材信息作为富内容参与视频剪辑，基于所述第一剪辑素材信息、视频的剪辑特征自动实现AI视频剪辑，输出视频剪辑成品，使得视频剪辑自动化程度得到提升，可以为客户提供高度客制化的需求，提升了视频剪辑的智能化以及视频内容的丰富度。
请参阅图2，结合图2所示的另一个实施方式对本发明做进一步地说明，以汽车为例。
步骤S201：启动视频拍摄，同步记录第一剪辑素材信息，并与拍摄视频存储。
在一实施例中，所述第一剪辑素材信息包括螺仪信息、指南针方位、海拔、经纬度信息、地图POI（Point of Interest，兴趣点）信息、环境光亮度、车路转向角、驾驶员信息、车身外观配置、前方车辆识别信息中的一种或多种。
比如，陀螺仪信息可以作为视频转场、抖动、翻转等的效果信息。所述海拔、经纬度信息可以作为特效文字或转场文字，地图POI信息可以用于制作路径信息，作为视频背景等。所述车路转向角包括车辆的驾驶转向角度以及道路的转向角度，可以用于生成驾驶状态展示信息。所述驾驶员信息、车身外观配置、前方车辆识别信息可以作为参考信息或视频剪辑要素加入到视频文件中，成为剪辑视频的一部分。应当理解的是，上述各第一剪辑素材信息的应用并不唯一或固定，在一些其他的实施例中，可以制作更多地的应用。
步骤S202：将所述第一视频剪辑素材信息与所述相机拍摄的视频利用时间戳编码同步记录。
所述传感器、所述控制器用时间戳编码同步记录与相机拍摄过程中有关的第一剪辑素材信息，将第一剪辑素材信息存储为第一标签文件（例如json tag）。用户操作相机拍摄后，在进入相机相应取景页面（或系统自发进入准备拍摄状态）后，系统会广播通知各传感器、域控制器进行记录准备或预启动。所述传感器、所述控制器按照预设的采集频率采集所述第一剪辑素材信息。
例如，发起拍摄/录制行为，系统会广播各相关模块，对信息增加时间戳编码，并按预先设定的采集频率进行采集。由于传感器、域控制器等采集的数据以较短时间内可能属于重复度较高，采用这种方式可以减少数据的处理，提取有效的信息。
步骤S203：对视频信息进行识别，提取出第二剪辑素材信息。
在一种实施方式中，从相机拍摄的视频中抽取画面帧用于分析该画面帧对应时间的画面关键元素，将所述画面关键元素记录为第二剪辑素材信息。例如，当前画面拍摄的是城市街景，在拍摄过程中，汽车的协处理器会从画面中抽取指定的帧数，比如作为一种实施例，每30fps抽取一帧画面，并进行实时的画面关键元素分析，画面风格打分等。结合以上形成第二标签文件（json tag），用于区分画面主体物为街区，识别当前画面帧中街区的风格，如果是普通街区则打分中规中矩，如果是具有梧桐树及满地梧桐叶的场景，则打分较高，归类为小清新风格。
另外，还可以结合视频中用户的操作与语音、面部情绪进行识别，该部分的识别可以放在云端执行，也可以在汽车内执行。比如识别出所述相机拍摄的视频中的语音对应的文字、情绪，将所述文字内容、情绪记录为第二剪辑素材信息。在一种实施方式中，视频中有用户的自拍，例如利用汽车外置摄像头拍摄风景以后，再调用汽车内的摄像头拍摄自己，过程中用户会对此次拍摄做一些情绪表达，语音讲解等等；基于此可以利用人工智能模型识别视频中用户的面部情绪、语音情绪、语音对应的识别文字作为提取信息，以便于增加视频的趣味性。其中语音文字可以作为字幕的形式展示，此处字幕也应包含有弹幕的含义。而所述的用户的面部情绪、语音情绪表达了用于拍摄时的情绪，可以利用情绪进行归类拍摄风格，例如用户情绪为开心，则归类的拍摄风格为明亮、开朗，用以调节视频内容亮度等。
此外，在另一些实施例中，在拍摄过程中，用户手动操控的数码缩放和裁剪，将被以标签文件json形式记录，此步骤系统不会对原始全景影像内容进行裁剪，而是将在后期AI剪辑过程参考用户的主观意图构图。
步骤S204：将第二剪辑素材信息与所述第一剪辑素材信息融合存储为第二标签文件。
基于时间戳编码将视频中包含的第二剪辑素材信息，可以根据时间戳编码按时间顺序截取关键帧进行识别，编辑故事线发展内容，然后与所述第一剪辑素材信息融合存储为第二标签文件。应当理解的是虽然本发明中提到了第一标签文件、第二标签文件，但这两个文件可以是同一个文件，为便于理解的、在不同的步骤中给予分别命名。在具体执行记录过程中，可以将所述第一剪辑素材信息、第二剪辑素材信息经分析后共同存入一个标记文件中。
需注意的是，若传感器、域控制器记录的第一剪辑素材信息较早于视频拍摄，则单独使用时间戳编码记录，在视频拍摄开始时再利用一时间戳编码同步记录。
步骤S205：基于所述第二标签文件提取出剪辑特征，利用所述剪辑特征进行自动视频剪辑。
所述剪辑特征可以是第二标签中记录的所有内容信息，也可以是部分信息，被提取出的该部分信息作为剪辑特征丰富剪辑视频内容。
例如，利用所述剪辑特征将相机拍摄的视频的内容分为多个视频片段，将所述多个视频片段进行拼合，并配置相应的配乐、字幕和/或剪辑特效，用以形成视频剪辑文件。
在一种场景中，拍摄完成后，系统会自动将来源于多传感器、视频图像识别内容、用户主观操作等多方的数据汇总，合并成统一的与视频文件唯一对应的json文件。并将视频录音压缩后进行本地/云端的语音识别，把判断出的文字、情绪等信息合并入json文件。在用户发起单条/多条视频的AI剪辑时，系统会调取其相应的json文件，进行快速的风格、主体物归纳总结，并选取综合画面质量较好的片段按照其内容发展和配乐节奏进行拼合预览。此步骤往往提供若干种选择供用户选取。在用户完成选择并确认后，后台开始基于json文件和视频素材进行剪辑渲染导出。导出的视频剪辑文件至少包含所述第一剪辑素材信息或至少关联所述第一剪辑素材信息。
如图3所示，本发明还提供一种拍摄车载视频的剪辑装置，包括：
控制模块31，用于当启动相机拍摄视频时，向车载的传感器、控制器广播启动记录功能；
记录模块32，用于同步记录所述传感器、所述控制器与所述相机拍摄过程中有关的第一剪辑素材信息；
剪辑模块33，用于将所述相机拍摄的视频与所述第一剪辑素材信息存储，响应于视频剪辑的控制指令，基于所述第一剪辑素材信息及所述视频提取出剪辑特征，利用所述剪辑特征进行自动视频剪辑，其中所述自动视频剪辑包括视频片段剪辑、配乐、字幕。
可选地，所述第一剪辑素材信息包括螺仪信息、指南针方位、海拔、经纬度信息、地图POI信息、环境光亮度、车路转向角、驾驶员信息、车身外观配置、前方车辆识别信息中的一种或多种。
可选地，所述记录模块32还用于：利用时间戳编码同步记录所述传感器、所述控制器与所述相机拍摄过程中有关的第一剪辑素材信息。
可选地，所述传感器、所述控制器按照预设的采集频率采集所述第一剪辑素材信息。
可选地，所述剪辑模块33还包括抽取单元，用于从相机拍摄的视频中抽取画面帧用于分析该画面帧对应时间的画面关键元素，将所述画面关键元素记录为第二剪辑素材信息。
可选地，所述剪辑模块33还包括识别单元，用于识别出所述相机拍摄的视频中的语音对应的文字、情绪，将所述文字内容、情绪记录为第二剪辑素材信息。
可选地，所述剪辑模块33还包括记录单元，用于将第一剪辑素材信息存储为第一标签文件，基于时间戳编码将视频中包含的第二剪辑素材信息，与所述第一剪辑素材信息融合存储为第二标签文件。
可选地，所述剪辑模块33包括拼合单元，所述拼合单元利用所述剪辑特征将相机拍摄的视频的内容分为多个视频片段，将所述多个视频片段进行拼合，并配置相应的配乐、字幕和/或剪辑特效，用以形成视频剪辑文件，所述视频剪辑文件至少包含所述第一剪辑素材信息或至少关联所述第一剪辑素材信息。
在一种场景中，拍摄完成后，系统会自动将来源于多传感器、视频图像识别内容、用户主观操作等多方的数据汇总，合并成统一的与视频文件唯一对应的json文件。并将视频录音压缩后进行本地/云端的语音识别，把判断出的文字、情绪等信息合并入json文件。在用户发起单条/多条视频的AI剪辑时，系统会调取其相应的json文件，进行快速的风格、主体物归纳总结。例如，视频识别场景为暴风雨天气，路边大树摇曳，风雨飘摇，则会推荐郑智化的“水手”作为配乐。并选取综合画面质量较好的片段按照其内容发展和配乐节奏进行拼合预览。在该过程中还可以提供若干种选择供用户选取，例如多个选项的配乐，多个选项的剪辑内容、或视频排列顺序。在用户完成选择并确认后，后台开始基于json文件和视频素材进行剪辑渲染导出。导出的视频剪辑文件至少包含所述第一剪辑素材信息或至少关联所述第一剪辑素材信息。
具体实现过程可以参照图1、图2所示的各实施方式内容，在此不再赘述。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
本发明还提供一种带有相机拍摄功能的电子设备，其包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上述的拍摄车载视频的剪辑方法的步骤。所述电子设备包括但不局限于智能车载摄像系统、移动电话、飞行器、水下相机、单反相机、全景相机、运动相机、无人机等。
本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如上述的拍摄车载视频的剪辑方法的步骤。
可以理解，计算机可读存储介质可以包括：能够携带计算机程序的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器 (ROM ，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、以及软件分发介质等。计算机程序包括计算机程序代码。计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读存储介质可以包括：能够携带计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、以及软件分发介质等。
在本发明的某些实施方式中，自动泊车装置可以包括控制器，控制器是一个单片机芯片，集成了处理器、存储器，通讯模块等。处理器可以是指控制器包含的处理器。处理器可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application SpecificIntegrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable GateArray，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理模块的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。
以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (18)

1.一种拍摄车载视频的剪辑方法，其特征在于，包括：
当启动相机拍摄视频时，向车载的传感器、控制器广播启动记录功能；
所述传感器、所述控制器与所述相机同步记录拍摄过程中有关的第一剪辑素材信息；
将所述相机拍摄的视频与所述第一剪辑素材信息存储，响应于视频剪辑的控制指令，基于所述第一剪辑素材信息及所述视频提取出剪辑特征，利用所述剪辑特征进行自动视频剪辑，其中所述自动视频剪辑包括视频片段剪辑、配乐、字幕。
2.根据权利要求1所述的方法，其特征在于，所述第一剪辑素材信息包括螺仪信息、指南针方位、海拔、经纬度信息、地图POI信息、环境光亮度、车路转向角、驾驶员信息、车身外观配置、前方车辆识别信息中的一种或多种。
3.根据权利要求1所述的方法，其特征在于，所述传感器、所述控制器与所述相机利用时间戳编码同步记录拍摄过程中有关的第一剪辑素材信息。
4.根据权利要求3所述的方法，其特征在于，所述传感器、所述控制器按照预设的采集频率采集所述第一剪辑素材信息。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：从相机拍摄的视频中抽取画面帧用于分析该画面帧对应时间的画面关键元素，将所述画面关键元素记录为第二剪辑素材信息。
6.根据权利要求5所述的方法，其特征在于，所述方法还包括：识别出所述相机拍摄的视频中的语音对应的文字、情绪，将所述文字内容、情绪记录为第二剪辑素材信息。
7.根据权利要求6所述的方法，其特征在于，所述基于所述第一剪辑素材信息及所述视频提取出剪辑特征，包括：
将第一剪辑素材信息存储为第一标签文件，基于时间戳编码将视频中包含的第二剪辑素材信息，与所述第一剪辑素材信息融合存储为第二标签文件。
8.根据权利要求1所述的方法，其特征在于，所述利用所述剪辑特征进行自动视频剪辑，包括：利用所述剪辑特征将相机拍摄的视频的内容分为多个视频片段，将所述多个视频片段进行拼合，并配置相应的配乐、字幕和/或剪辑特效，用以形成视频剪辑文件，所述视频剪辑文件至少包含所述第一剪辑素材信息或至少关联所述第一剪辑素材信息。
9.一种拍摄车载视频的剪辑装置，其特征在于，包括：
控制模块，用于当启动相机拍摄视频时，向车载的传感器、控制器广播启动记录功能；
记录模块，用于同步记录所述传感器、所述控制器与所述相机拍摄过程中有关的第一剪辑素材信息；
剪辑模块，用于将所述相机拍摄的视频与所述第一剪辑素材信息存储，响应于视频剪辑的控制指令，基于所述第一剪辑素材信息及所述视频提取出剪辑特征，利用所述剪辑特征进行自动视频剪辑，其中所述自动视频剪辑包括视频片段剪辑、配乐、字幕。
10.根据权利要求9所述的装置，其特征在于，所述第一剪辑素材信息包括螺仪信息、指南针方位、海拔、经纬度信息、地图POI信息、环境光亮度、车路转向角、驾驶员信息、车身外观配置、前方车辆识别信息中的一种或多种。
11.根据权利要求9所述的装置，其特征在于，所述记录模块还用于：利用时间戳编码同步记录所述传感器、所述控制器与所述相机拍摄过程中有关的第一剪辑素材信息。
12.根据权利要求11所述的装置，其特征在于，所述传感器、所述控制器按照预设的采集频率采集所述第一剪辑素材信息。
13.根据权利要求9所述的装置，其特征在于，所述剪辑模块还包括抽取单元，用于从相机拍摄的视频中抽取画面帧用于分析该画面帧对应时间的画面关键元素，将所述画面关键元素记录为第二剪辑素材信息。
14.根据权利要求13所述的装置，其特征在于，所述剪辑模块还包括识别单元，用于识别出所述相机拍摄的视频中的语音对应的文字、情绪，将所述文字内容、情绪记录为第二剪辑素材信息。
15.根据权利要求14所述的装置，其特征在于，所述剪辑模块还包括记录单元，用于将第一剪辑素材信息存储为第一标签文件，基于时间戳编码将视频中包含的第二剪辑素材信息，与所述第一剪辑素材信息融合存储为第二标签文件。
16.根据权利要求9所述的装置，其特征在于，所述剪辑模块包括拼合单元，所述拼合单元利用所述剪辑特征将相机拍摄的视频的内容分为多个视频片段，将所述多个视频片段进行拼合，并配置相应的配乐、字幕和/或剪辑特效，用以形成视频剪辑文件，所述视频剪辑文件至少包含所述第一剪辑素材信息或至少关联所述第一剪辑素材信息。
17.一种带有相机拍摄功能的电子设备，其特征在于，包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至8中任一项所述的拍摄车载视频的剪辑方法的步骤。
18.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求1至8中任一项所述的拍摄车载视频的剪辑方法的步骤。
CN202210178397.8A 2022-02-25 2022-02-25 拍摄车载视频的剪辑方法、装置、电子设备及存储介质 Withdrawn CN114584839A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210178397.8A CN114584839A (zh) 2022-02-25 2022-02-25 拍摄车载视频的剪辑方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210178397.8A CN114584839A (zh) 2022-02-25 2022-02-25 拍摄车载视频的剪辑方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN114584839A true CN114584839A (zh) 2022-06-03

Family

ID=81775341

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210178397.8A Withdrawn CN114584839A (zh) 2022-02-25 2022-02-25 拍摄车载视频的剪辑方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN114584839A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115442524A (zh) * 2022-08-23 2022-12-06 西安微电子技术研究所 一种摄像方法及系统、装置和一种计算机可读存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102201115A (zh) * 2011-04-07 2011-09-28 湖南天幕智能科技有限公司 无人机航拍视频实时全景图拼接方法
US20160155475A1 (en) * 2012-12-12 2016-06-02 Crowdflik, Inc. Method And System For Capturing Video From A Plurality Of Devices And Organizing Them For Editing, Viewing, And Dissemination Based On One Or More Criteria
CN105681713A (zh) * 2016-01-04 2016-06-15 努比亚技术有限公司 视频录制方法、装置及移动终端
CN105933666A (zh) * 2016-06-19 2016-09-07 罗轶 多镜头行程记录仪
CN107911405A (zh) * 2017-09-30 2018-04-13 惠州市德赛西威汽车电子股份有限公司 一种可自动生成路书的智能车载系统
CN109218646A (zh) * 2018-10-11 2019-01-15 惠州市德赛西威智能交通技术研究院有限公司 车载电子相册控制方法、装置、车载终端及存储介质
CN109690607A (zh) * 2016-10-25 2019-04-26 猫头鹰照相机股份有限公司 基于视频的数据收集、图像捕获以及分析配置
US20200273492A1 (en) * 2018-02-20 2020-08-27 Bayerische Motoren Werke Aktiengesellschaft System and Method for Automatically Creating a Video of a Journey
CN112699257A (zh) * 2020-06-04 2021-04-23 华人运通(上海)新能源驱动技术有限公司 作品生成和编辑方法、装置、终端、服务器和系统
CN113452927A (zh) * 2020-03-26 2021-09-28 英特尔公司 用于自主交通工具用户的增强的社交媒体体验

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102201115A (zh) * 2011-04-07 2011-09-28 湖南天幕智能科技有限公司 无人机航拍视频实时全景图拼接方法
US20160155475A1 (en) * 2012-12-12 2016-06-02 Crowdflik, Inc. Method And System For Capturing Video From A Plurality Of Devices And Organizing Them For Editing, Viewing, And Dissemination Based On One Or More Criteria
CN105681713A (zh) * 2016-01-04 2016-06-15 努比亚技术有限公司 视频录制方法、装置及移动终端
CN105933666A (zh) * 2016-06-19 2016-09-07 罗轶 多镜头行程记录仪
CN109690607A (zh) * 2016-10-25 2019-04-26 猫头鹰照相机股份有限公司 基于视频的数据收集、图像捕获以及分析配置
CN107911405A (zh) * 2017-09-30 2018-04-13 惠州市德赛西威汽车电子股份有限公司 一种可自动生成路书的智能车载系统
US20200273492A1 (en) * 2018-02-20 2020-08-27 Bayerische Motoren Werke Aktiengesellschaft System and Method for Automatically Creating a Video of a Journey
CN109218646A (zh) * 2018-10-11 2019-01-15 惠州市德赛西威智能交通技术研究院有限公司 车载电子相册控制方法、装置、车载终端及存储介质
CN113452927A (zh) * 2020-03-26 2021-09-28 英特尔公司 用于自主交通工具用户的增强的社交媒体体验
CN112699257A (zh) * 2020-06-04 2021-04-23 华人运通(上海)新能源驱动技术有限公司 作品生成和编辑方法、装置、终端、服务器和系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115442524A (zh) * 2022-08-23 2022-12-06 西安微电子技术研究所 一种摄像方法及系统、装置和一种计算机可读存储介质
CN115442524B (zh) * 2022-08-23 2023-11-03 西安微电子技术研究所 一种摄像方法及系统、终端设备和计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN110139159B (zh) 视频素材的处理方法、装置及存储介质
WO2022174750A1 (zh) 一种寻车指引方法、装置、终端设备、电子设备及计算机可读存储介质、程序产品
CN108347482B (zh) 信息采集方法及装置
WO2021031733A1 (zh) 视频特效生成方法及终端
WO2023138556A1 (zh) 基于车载多摄像头的视频生成方法、装置及车载设备
CN107084740B (zh) 一种导航方法和装置
CN112423021B (zh) 视频的处理方法、装置、可读介质和电子设备
CN111783729A (zh) 视频分类方法、装置、设备及存储介质
CN110929070A (zh) 图像处理方法、装置、电子设备及存储介质
CN111787354A (zh) 一种视频生成方法及其装置
CN114584839A (zh) 拍摄车载视频的剪辑方法、装置、电子设备及存储介质
CN114677517A (zh) 一种无人机用语义分割网络模型及图像分割识别方法
CN115529378A (zh) 一种视频处理方法及相关装置
CN112911149B (zh) 图像输出方法、装置、电子设备及可读存储介质
CN112306601A (zh) 一种应用交互方法、装置、电子设备及存储介质
CN115103206A (zh) 视频数据的处理方法、装置、设备、系统及存储介质
CN115565155A (zh) 神经网络模型的训练方法、车辆视图的生成方法和车辆
CN115567660A (zh) 一种视频处理方法和电子设备
CN114332798A (zh) 网约车环境信息的处理方法及相关装置
CN107945201B (zh) 基于自适应阈值分割的视频风景处理方法及装置
CN113383292A (zh) 演示文件生成方法
CN112306602A (zh) 一种计时方法、装置、电子设备及存储介质
CN111698563A (zh) 基于ai虚拟主播的内容发送方法、装置和存储介质
JPWO2018179695A1 (ja) 制御装置、撮像装置、制御方法及びプログラム
CN115119050B (zh) 一种视频剪辑方法和装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20220603