CN118097928A - 预警视频的生成方法和装置、存储介质及电子装置 - Google Patents

预警视频的生成方法和装置、存储介质及电子装置 Download PDF

Info

Publication number
CN118097928A
CN118097928A CN202410329083.2A CN202410329083A CN118097928A CN 118097928 A CN118097928 A CN 118097928A CN 202410329083 A CN202410329083 A CN 202410329083A CN 118097928 A CN118097928 A CN 118097928A
Authority
CN
China
Prior art keywords
vehicles
group
video
target
scene
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202410329083.2A
Other languages
English (en)
Inventor
曹之轩
廉吉鹏
陈月
赵坤鹏
刘中威
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanchuan Online Hangzhou Information Technology Co ltd
Original Assignee
Sanchuan Online Hangzhou Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanchuan Online Hangzhou Information Technology Co ltd filed Critical Sanchuan Online Hangzhou Information Technology Co ltd
Priority to CN202410329083.2A priority Critical patent/CN118097928A/zh
Publication of CN118097928A publication Critical patent/CN118097928A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/20—Monitoring the location of vehicles belonging to a group, e.g. fleet of vehicles, countable or determined number of vehicles
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0108—Measuring and analyzing of parameters relative to traffic conditions based on the source of data
    • G08G1/0112—Measuring and analyzing of parameters relative to traffic conditions based on the source of data from the vehicle, e.g. floating car data [FCD]
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0125—Traffic data processing
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23412—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Analytical Chemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Atmospheric Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Marketing (AREA)
  • Traffic Control Systems (AREA)

Abstract

本申请公开了一种预警视频的生成方法和装置、存储介质及电子装置，其中，方法包括：根据一组车辆所在路段的路段特征，确定所述一组车辆所处的当前场景，并确定与所述当前场景匹配的目标采集视角；对所述一组车辆中与所述目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频；将所述目标视频作为预警视频发送至所述一组车辆。通过本申请，可以达到提高车队行驶的安全性的技术效果，进而解决了相关技术中的车队行驶方法存在车队行驶的安全性较低的问题。

Description

预警视频的生成方法和装置、存储介质及电子装置
技术领域
本申请涉及预警视频的生成领域，具体而言，涉及一种预警视频的生成方法和装置、存储介质及电子装置。
背景技术
传统的车队主要依靠人的视觉和经验驾驶，存在视野受限、周边的交通态势难以全面掌握的情况。同时，车队中各个车的速度和距离需要依靠司机的经验把握。
由此可见，相关技术中的车队行驶方法，存在车队行驶的安全性较低的问题。
发明内容
本申请实施例提供了一种预警视频的生成方法和装置、存储介质及电子装置，以至少解决相关技术中的车队行驶方法存在车队行驶的安全性较低的问题。
根据本申请实施例的一个方面，提供了一种预警视频的生成方法，包括：根据一组车辆所在路段的路段特征，确定所述一组车辆所处的当前场景，并确定与所述当前场景匹配的目标采集视角；对所述一组车辆中与所述目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频；将所述目标视频作为预警视频发送至所述一组车辆。
根据本申请实施例的另一个方面，还提供了一种预警视频的生成装置，包括：确定单元，用于根据一组车辆所在路段的路段特征，确定所述一组车辆所处的当前场景，并确定与所述当前场景匹配的目标采集视角；融合单元，用于对所述一组车辆中与所述目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频；发送单元，用于将所述目标视频作为预警视频发送至所述一组车辆。
根据本申请实施例的又一方面，还提供了一种计算机可读的存储介质，该计算机可读的存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述预警视频的生成方法。
根据本申请实施例的又一方面，还提供了一种电子装置，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，上述处理器通过计算机程序执行上述的预警视频的生成方法。
在本申请实施例中，采用基于一组车辆中视频采集视角与场景对应的车辆所采集到的视频，融合生成预警视频的方式，根据一组车辆所在路段的路段特征，确定一组车辆所处的当前场景，并确定与当前场景匹配的目标采集视角；对一组车辆中与目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频；将目标视频作为预警视频发送至一组车辆，由于在车队行驶过程中，基于当前车队所处的场景确定需要关注的视角画面，并从车队中选择对应视角的车辆上传的视频帧以生成需要反馈给车队的预警视频，可以实现基于当前车队所处路况场景生成关联度较高的预警视频的目的，从而达到提高车队行驶的安全性的技术效果，进而解决了相关技术中的车队行驶方法存在车队行驶的安全性较低的问题。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是根据本申请实施例的一种可选的预警视频的生成方法的硬件环境的示意图；
图2是根据本申请实施例的一种可选的预警视频的生成方法的流程示意图；
图3是根据本申请实施例的一种可选的预警视频的生成方法的示意图；
图4是根据本申请实施例的一种可选的预警视频的生成装置的结构框图；
图5是根据本申请实施例的一种可选的电子装置的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。
需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本申请实施例的一个方面，提供了一种预警视频的生成方法。可选地，在本实施例中，上述预警视频的生成方法可以应用于如图1所示的包括的硬件环境中。如图1所示，服务器104通过网络与车载终端102进行连接，可用于基于车载终端102的点云数据进行预警视频的生成，可在服务器上或独立于服务器设置数据库，用于为服务器104提供数据存储服务。车载终端102可以包括车辆上安装用于检测车辆及其周围环境的相关信息的设备。
上述网络可以包括但不限于以下至少之一：有线网络，无线网络。上述有线网络可以包括但不限于以下至少之一：广域网，城域网，局域网，上述无线网络可以包括但不限于以下至少之一：WIFI(Wireless Fidelity，无线保真)，蓝牙。
本申请实施例的预警视频的生成方法可以由服务器104来执行，还可以是由服务器104和车载终端102共同执行。以由服务器104来执行本实施例中的预警视频的生成方法为例，图2是根据本申请实施例的一种可选的预警视频的生成方法的流程示意图，如图2所示，该方法的流程可以包括以下步骤：
步骤S202，根据一组车辆所在路段的路段特征，确定一组车辆所处的当前场景，并确定与当前场景匹配的目标采集视角；
步骤S204，对一组车辆中与目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频；
步骤S206，将目标视频作为预警视频发送至一组车辆。
本实施例中的预警视频的生成方法可以应用到车队行驶的场景中。在车队行驶过程中，容易遇到突发场景及路况，比如急弯、窄桥、隧道、落石等，进而造成行车危险。这里的车队可以由一组车辆组成，车队中可以至少包括两个车辆，包含两种车辆角色，主车或称领航车、从车或称跟随车。
为了至少解决上述部分问题，在本实施例中，可以在车队中的各个车辆安装有车载终端，车载终端上可以包含图像采集模块、网络模块、显示屏模块。图像采集模块用于完成行车图像的采集，网络模块提供网络传输能力，显示屏模块，提供视频显示。在车队的行驶过程中，可以基于一组车辆所处路况的当前场景，确定需要关注的视角，如在车队行驶在傍山路段时，需要关注靠山一侧的路面视角，急弯等视线受限制的弯道，以及头车尾车视角。并基于所确定出的视角，从对应车辆上获取到车辆的图像采集模块上传的视频帧，并对视频帧进行融合，生成与当前场景对应的预警视频。
在车队行驶过程中，可以基于采集到的一组车辆所在路段的路段特征，来确定当前一组车辆所处的当前场景。这里的路段特征，可以包括道路的宽度、车道数量、交通标志和标线、路面状况、交通信号灯、路口和转弯处的设计等等特征。
可选地，与目标采集视角匹配的车辆可以是采集到的全部或者部分视频帧所对应的采集视角为目标采集视角，其可以是一组车辆中的全部或者部分。这里，车辆对应的采集视角可以随着车辆的移动或者图像采集模块的转动等发生变化，因此，可以基于目标采集视角先筛选出采集视角与目标采集视角一致的车辆，再对筛选出的车辆所采集到的视频帧进行融合，也可以从所有车辆采集到的所有视频帧中筛选出对应的采集视角为目标采集视角的视频帧，再对筛选出的视频帧的全部或者部分进行融合。在对一组车辆中与目标采集视角匹配的车辆采集到的视频帧进行融合时，可以基于视频帧采集的时间顺序以及各个车辆的前后顺序进行融合。
需要说明的是，本实施例中的预警视频中可以包括有用于提示各个车辆行驶行为的信息，例如，用于提示各个车辆需要注意避让的物体信息，用于提示各个车辆可能遇到的事件信息，以及用于提示各个车辆行驶的最佳速度和方向的相关信息等。
生成的作为预警视频的目标视频，可以存储在对应的存储模块，根据一组车辆中的车辆ID(Identity Document，身份标识号)推送到各车辆终端，各车辆也可以主导从存储模块中拉取预警视频。
需要说明的是，上述预警视频的生成方法可以是由服务器端、云处理中心等执行的，也可以是由一组车辆中的某一指定车辆(可以为主车或者其他从车，只要其计算处理能力能够符合要求即可)执行的，指定车辆下发预警视频可以下发给包括自车在内的所有车辆。
通过上述步骤S202至步骤S206，根据一组车辆所在路段的路段特征，确定一组车辆所处的当前场景，并确定与当前场景匹配的目标采集视角；对一组车辆中与目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频；将目标视频作为预警视频发送至一组车辆，可以解决相关技术中的车队行驶方法存在车队行驶的安全性较低的问题。
在一个示例性实施例中，根据一组车辆所在路段的路段特征，确定一组车辆所处的当前场景，包括：
S11，获取一组车辆采集到的第一组视频帧；
S12，对第一组视频帧进行特征提取，得到一组车辆所在路段的路段特征；
S13，根据特征点预设表，确定与一组车辆所在路段的路段特征对应的场景，得到一组车辆所处的当前场景，其中，特征点预设表用于记录路段特征点与场景之间的对应关系。
在车队行驶过程中，可以基于一组车辆中各个车辆上传的视频帧，由环境特征识别模块从各个视频帧中进行特征提取。在本实施例中，可以预先设置有特征点预设表，以用于记录路段特征与场景之间的对应关系。不同场景可以对应有不同的路段特征。
例如，对于傍山路段的场景，可以对应有上陡坡标志、傍山险路标志等路段特征。
需要说明的是，本实施例中的一组车辆中各个车辆的采集视角可以不完全相同，以便车队的行驶过程中，采集到的视频帧所覆盖的范围更大。
可选地，在从视频帧中提取路段特征之前，也可以先基于一组车辆中各个车辆所在的实际位置，进行路段初判断。
通过本实施例，通过对一组车辆采集到的视频进行路段特征的提取，可以减少车队周围环境的采集盲区的范围，从而提高确定当前场景的准确性。
在一个示例性实施例中，确定与当前场景匹配的目标采集视角，包括：
S21，根据预设关系表，确定与当前场景匹配的目标采集视角，其中，预设关系表中记录有场景与采集视角之间的对应关系。
在本实施例中，可以预先设置有场景与采集视角的对应关系的预设关系表，一个场景可以对应有至少一个采集视角。在确定当前场景之后，可以基于预设关系表中记录的对应关系，查找与当前场景匹配的目标采集视角。
可选地，对一组车辆中与目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频，包括：
从一组车辆中选择采集视角为目标采集视角的目标车辆；
获取目标车辆在预设时长内采集到的第二组视频帧；
对第二组视频帧进行融合，得到融合后的目标视频。
在本实施例中，上述一组车辆中各个车辆的采集视角，可以是根据各个车辆上传的初始视频帧所显示的画面确定的。每个车辆的采集视角可以是固定的。在基于当前场景确定目标采集视角之后，可以从一组车辆中选择采集视角为目标采集视角的目标车辆，以用于进行预警视频的生成。这里的目标车辆，可以是一个或者多个车辆。
为了使得作为预警视频的目标视频中的预警信息更准确和丰富，从而提高车队行驶的安全性，在本实施例中，可以设定获取目标车辆采集到的一定时间段(即，预设时长)的视频帧，以进行目标视频的生成。
通过本实施例，基于与场景对应的采集视角所采集到的视频帧，生成作为预警视频的目标视频，可以针对性的生成与当前场景对应的预警视频，从而提高车队行驶的安全性。
在一个示例性实施例中，对第二组视频帧进行融合，得到融合后的目标视频，包括：
S31，在目标车辆的数量为N个的情况下，对每个目标车辆在预设时长内采集到的视频帧中的首帧和尾帧进行融合，得到目标视频，其中，第二组视频帧包括N个目标车辆在预设时长内采集到的视频帧。
为了提高目标视频的生成效率，在本实施例中，可以仅使用目标车辆在预设时长内采集到的每段视频中的首帧画面和尾帧画面，进行融合。在目标车辆的数量为N个的情况下，可以对N个车辆所上传的视频的首帧画面和尾帧画面，按照对应时间的先后顺序，进行视频融合。
需要说明的是，本实施例中的视频是由多个视频帧组成的。进行融合的视频帧也可以是目标车辆在预设时长内采集到的每段视频中的所有视频帧，或者，采用其他的筛选方式筛选出的特定视频帧，例如，按照预设时间间隔挑选出的一些中间帧。
为了避免生成的目标视频过短，无法起到预警作用，在本实施例中，还可以预先设定目标视频的时长。由于不同场景所对应的视角不完全相同，不同场景所对应的用于生成目标视频的车辆的数量也不一定相同，可以基于预设的目标视频的时长，确定需要获取到的首帧和尾帧的数量，在确定当前场景之后、进行视频帧融合之前，可以先等待一定时间以获取到足够的首帧和尾帧的数量。或者，还可以对每个目标车辆在预设时长内采集到的视频帧中的首帧和尾帧以及至少部分中间帧进行融合，得到目标视频，生成的目标视频的时长满足设定的时长条件，中间帧的筛选规则可以根据需要进行设置，本实施例中对此不做限定。
通过本实施例，选择目标车辆采集到的预设时长内的首帧和尾帧进行融合以得到目标视频，可以提高目标视频的生成效率。
在一个示例性实施例中，根据一组车辆所在路段的路段特征，确定一组车辆所处的当前场景，包括：
S41，根据一组车辆所在路段的路段特征，从预设的一组场景中选取出多个候选场景；
S42，将多个候选场景的场景信息发送至一组车辆中的指定车辆，以由指定车辆内的指定对象进行场景选取；
S43，响应于指定车辆返回的场景指示信息，将场景指示信息所指示的候选场景，确定为一组车辆所处的当前场景。
为了提高预警视频的预警准确性，在本实施例中，在基于路段特征，确定出对应的场景之后，可以将确定出的场景发送至指定车辆，由指定车辆内的指定对象进行场景确认。
在根据一组车辆所在路段的路段特征，从预设的一组场景中选取出多个候选场景的情况下，可以将全部的多个候选场景发送至指定车辆，基于指定车辆返回的场景指示信息，确定一组车辆所处的当前场景。
可选地，在根据一组车辆所在路段的路段特征，从预设的一组场景中选取出一个候选场景的情况下，可以将该候选场景发送至指定车辆，若基于指定车辆返回的场景指示信息，确定该候选场景不是当前一组车辆所处的场景时，可以重新获取一组车辆采集到的相关信息，重新进行路段特征的提取和场景识别。
上述指定车辆可以指一组车辆中的主车，其位置可以是位于行驶方向最前方，也可以是其他位置，本实施例在此不做限定。需要说明的是，在本实施例中，车载终端可以有可执行触摸操作的显示屏模块，指定车辆的车载终端收到场景确认通知后，操作员通过现场观察，可以在车载终端通过对显示屏的触摸操作进行场景确认。
通过本实施例，基于指定对象的场景选取结果，确定当前场景，可以避免场景识别错误所导致的采集视角选择错误，从而提高预警视频与一组车辆当前所处路况场景的关联度。
在一个示例性实施例中，在将目标视频作为预警视频发送至一组车辆之后，上述方法还包括：
S51，在场景切换条件满足的情况下，获取一组车辆采集到的第三组视频帧，其中，场景切换条件包括以下至少之一：一组车辆中存在位置异常的车辆，以一组车辆为中心的预设范围内存在与当前场景不匹配的路段特征，目标视频发送完成之后达到预设时长；
S52，根据第三组视频帧对当前场景进行更新，得到更新后的当前场景；
S53，基于更新后的当前场景，重新生成预警视频，并将重新生成的预警视频发送至一组车辆。
在本实施例中，一组车辆中各个车辆除了上传采集到的视频帧以外，还可以上传GPS(Global Positioning System，全球定位系统)位置信息，通过分析各个车辆上传的GPS位置点位信息，确定各个车辆的实际位置。
在检测到一组车辆中存在位置异常的车辆，或者以一组车辆为中心的预设范围内存在与当前场景不匹配的路段特征的情况下，可以重新进行场景识别。这里，位置异常的车辆，可以是指一组车辆中与其他车辆的间隔位置大于第一预设阈值或者小于等于第二预设阈值的车辆。与当前场景不匹配的路段特征，可以是与当前场景不具有对应关系的路段特征，可以是从一组车辆上传的GPS位置信息确定出的路段特征(如，在当前场景为盘山公路场景时，根据车辆上传的位置点位，在该位置点位附件存在隧道标识)，也可以是从一组车辆上传的视频确定出的路段特征。
此外，在目标视频发送完成之后达到预设时长之后，也可以重新进行场景识别。场景识别方式与前述实施例中的描述类似，本实施例在此不做赘述。
通过本实施例，基于预设的场景切换条件，及时重新进行场景识别，可以提高预警视频的预警准确性，从而提高车队的行驶安全性。
下面结合可选示例对本申请实施例中的预警视频的生成方法进行解释说明。
本可选示例中提供了一种车队行驶环境的全域画面监控系统，包括车载终端和对应的云处理中心。车队中的各个车辆上可以安装有车载终端，车载终端可以图像采集模块、GPS模块、网络模块、显示屏模块。图像采集模块完成行车图像采集；GPS模块完成实时采集位置信息；网络模块提供网络传输能力；显示屏模块，提供视频显示，可被触摸操作来进行场景选择。云处理中心，包含存储模块、网络模块、车辆信息采集处理模块、视角划分及场景感知系统、环境特征识别模块。存储模块完成车辆采集原始信息的存储；网络模块提供网络传输能力；车辆信息采集处理模块完成读取并处理车辆采集原始信息后得出预警视频并存储，云处理中心将预警视频推送至各车辆；视角划分及场景感知系统完成各车辆画面收集划分视角并根据当前场景筛选有效视角，基于车辆采集信息处理系统感知到新场景并下发至主车确认；环境特征识别模块提供行驶中环境信息的特征提取及识别来进行上述视角的筛选，环境特征识别模块包含特征点预设表。
例如，以场景为盘山公路场景为例，如图3所示，车队行驶中，主车(可以以第一辆车为主车，其他为从车)采集的画面信息、GPS信息上传至云处理中心，云处理中心的车辆采集信息处理系统根据特定间隔分析其GPS信息(地理信息系统POI(Point of Interest，即兴趣点)信息点)，检索到POI信息点出现盘山公路相关标识后，再根据上传的画面信息进行图像特征提取，确定画面中是否包含盘山公路相关特征，确认包含对应特征后即向主车下发场景切换通知，主车车载终端收到通知后，经显示屏模块显示，主车经观察后确认场景正确，云处理中心的视角划分及场景感知系统基于该场景根据各车当下实时画面完成视角划分，并筛选出有效视角。
车队行驶在盘山公路场景中时，GPS数据采集模块、画面采集模块负责以一定的频率上传GPS实时点位数据和实时画面至云处理中心，然后云处理中心以一定频率对上传的数据进行筛选过滤并保存至存储模块中，车辆采集信息处理系统完成读取和处理，生成预警视频并进行存储，再由云处理中心将预警视频推送至各车辆，通过各车载终端显示屏模块播放当前场景下的预警视频来提高行车安全。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请并不受所描述的动作顺序的限制，因为依据本申请，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本申请所必须的。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM(Read-Only Memory，只读存储器)/RAM(Random Access Memory，随机存取存储器)、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例的方法。
根据本申请实施例的另一个方面，还提供了一种用于实施上述预警视频的生成方法的预警视频的生成装置。如图4所示，该预警视频的生成装置可以包括：
确定单元402，用于根据一组车辆所在路段的路段特征，确定一组车辆所处的当前场景，并确定与当前场景匹配的目标采集视角；
融合单元404，用于对一组车辆中与目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频；
发送单元406，用于将目标视频作为预警视频发送至一组车辆。
通过上述预警视频的生成装置，根据一组车辆所在路段的路段特征，确定一组车辆所处的当前场景，并确定与当前场景匹配的目标采集视角；对一组车辆中与目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频；将目标视频作为预警视频发送至一组车辆，可以解决相关技术中的车队行驶方法存在车队行驶的安全性较低的问题。
在一个示例性实施例中，确定单元包括：
第一获取模块，用于获取一组车辆采集到的第一组视频帧；
提取模块，用于对第一组视频帧进行特征提取，得到一组车辆所在路段的路段特征；
第一确定模块，用于根据特征点预设表，确定与一组车辆所在路段的路段特征对应的场景，得到一组车辆所处的当前场景，其中，特征点预设表用于记录路段特征点与场景之间的对应关系。
在一个示例性实施例中，确定单元包括：
第二确定模块，用于根据预设关系表，确定与当前场景匹配的目标采集视角，其中，预设关系表中记录有场景与采集视角之间的对应关系。
在一个示例性实施例中，融合单元包括：
选择模块，用于从一组车辆中选择采集视角为目标采集视角的目标车辆；
第二获取模块，用于获取目标车辆在预设时长内采集到的第二组视频帧；
融合模块，用于对第二组视频帧进行融合，得到融合后的目标视频。
在一个示例性实施例中，融合模块包括：
融合子模块，用于在目标车辆的数量为N个的情况下，对每个目标车辆在预设时长内采集到的视频帧中的首帧和尾帧进行融合，得到目标视频，其中，第二组视频帧包括N个目标车辆在预设时长内采集到的视频帧。
在一个示例性实施例中，确定单元包括：
选取模块，用于根据一组车辆所在路段的路段特征，从预设的一组场景中选取出多个候选场景；
发送模块，用于将多个候选场景的场景信息发送至一组车辆中的指定车辆，以由指定车辆内的指定对象进行场景选取；
第三确定模块，用于响应于指定车辆返回的场景指示信息，将场景指示信息所指示的候选场景，确定为一组车辆所处的当前场景。
在一个示例性实施例中，上述装置还包括：
获取单元，用于在将目标视频作为预警视频发送至一组车辆之后，在场景切换条件满足的情况下，获取一组车辆采集到的第三组视频帧，其中，场景切换条件包括以下至少之一：一组车辆中存在位置异常的车辆，以一组车辆为中心的预设范围内存在与当前场景不匹配的路段特征，目标视频发送完成之后达到预设时长；
更新单元，用于根据第三组视频帧对当前场景进行更新，得到更新后的当前场景；
执行单元，用于基于更新后的当前场景，重新生成预警视频，并将重新生成的预警视频发送至一组车辆。
此处需要说明的是，上述模块与对应的步骤所实现的示例和应用场景相同，但不限于上述实施例所公开的内容。需要说明的是，上述系统可以运行在如图1所示的硬件环境中，可以通过软件实现，也可以通过硬件实现，其中，硬件环境包括网络环境。
根据本申请实施例的又一个方面，还提供了一种存储介质。可选地，在本实施例中，上述存储介质可以用于执行本申请实施例中上述任一项预警视频的生成方法的程序代码。
可选地，在本实施例中，上述存储介质可以位于上述实施例所示的网络中的多个网络设备中的至少一个网络设备上。
可选地，在本实施例中，存储介质被设置为存储用于执行以下步骤的程序代码：
S1，根据一组车辆所在路段的路段特征，确定一组车辆所处的当前场景，并确定与当前场景匹配的目标采集视角；
S2，对一组车辆中与目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频；
S3，将目标视频作为预警视频发送至一组车辆。
可选地，本实施例中的具体示例可以参考上述实施例中所描述的示例，本实施例中对此不再赘述。
可选地，在本实施例中，上述存储介质可以包括但不限于：U盘、ROM、RAM、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
根据本申请实施例的又一个方面，还提供了一种用于实施上述预警视频的生成方法的电子装置，该电子装置可以是服务器、终端、或者其组合。
图5是根据本申请实施例的一种可选的电子装置的结构框图，如图5所示，包括处理器502、通信接口504、存储器506和通信总线508，其中，处理器502、通信接口504和存储器506通过通信总线508完成相互间的通信，其中，
存储器506，用于存储计算机程序；
处理器502，用于执行存储器506上所存放的计算机程序时，实现如下步骤：
S1，根据一组车辆所在路段的路段特征，确定一组车辆所处的当前场景，并确定与当前场景匹配的目标采集视角；
S2，对一组车辆中与目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频；
S3，将目标视频作为预警视频发送至一组车辆。
可选地，通信总线可以是PCI(Peripheral Component Interconnect，外设部件互连标准)总线、或EISA(Extended Industry Standard Architecture，扩展工业标准结构)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图5中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。通信接口用于上述电子装置与其他设备之间的通信。
存储器可以包括RAM，也可以包括非易失性存储器(non-volatile memory)，例如，至少一个磁盘存储器。可选地，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述处理器可以是通用处理器，可以包含但不限于：CPU(Central ProcessingUnit，中央处理器)、NP(Network Processor，网络处理器)等；还可以是DSP(DigitalSignal Processing，数字信号处理器)、ASIC(Application Specific IntegratedCircuit，专用集成电路)、FPGA(Field－Programmable Gate Array，现场可编程门阵列)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
可选地，本实施例中的具体示例可以参考上述实施例中所描述的示例，本实施例在此不再赘述。
本领域普通技术人员可以理解，图5所示的结构仅为示意，实施上述预警视频的生成方法的设备可以是终端设备，该终端设备可以是智能手机(如Android手机、iOS手机等)、平板电脑、掌上电脑以及移动互联网设备(Mobile Internet Devices，MID)、PAD等终端设备。图5其并不对上述电子装置的结构造成限定。例如，电子装置还可包括比图5中所示更多或者更少的组件(如网络接口、显示装置等)，或者具有与图5所示的不同的配置。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、ROM、RAM、磁盘或光盘等。
上述本申请实施例序号仅仅为了描述，不代表实施例的优劣。
上述实施例中的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在上述计算机可读取的存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在存储介质中，包括若干指令用以使得一台或多台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。
在本申请的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中，应该理解到，所揭露的客户端，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例中所提供的方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以至少两个单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
以上仅是本申请的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (10)

1.一种预警视频的生成方法，其特征在于，包括：
根据一组车辆所在路段的路段特征，确定所述一组车辆所处的当前场景，并确定与所述当前场景匹配的目标采集视角；
对所述一组车辆中与所述目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频；
将所述目标视频作为预警视频发送至所述一组车辆。
2.根据权利要求1所述的方法，其特征在于，所述根据一组车辆所在路段的路段特征，确定所述一组车辆所处的当前场景，包括：
获取所述一组车辆采集到的第一组视频帧；
对所述第一组视频帧进行特征提取，得到所述一组车辆所在路段的路段特征；
根据特征点预设表，确定与所述一组车辆所在路段的路段特征对应的场景，得到所述一组车辆所处的当前场景，其中，所述特征点预设表用于记录路段特征点与场景之间的对应关系。
3.根据权利要求1所述的方法，其特征在于，所述确定与所述当前场景匹配的目标采集视角，包括：
根据预设关系表，确定与所述当前场景匹配的所述目标采集视角，其中，所述预设关系表中记录有场景与采集视角之间的对应关系。
4.根据权利要求1所述的方法，其特征在于，所述对所述一组车辆中与所述目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频，包括：
从所述一组车辆中选择采集视角为所述目标采集视角的目标车辆；
获取所述目标车辆在预设时长内采集到的第二组视频帧；
对所述第二组视频帧进行融合，得到融合后的所述目标视频。
5.根据权利要求4所述的方法，其特征在于，所述对所述第二组视频帧进行融合，得到融合后的所述目标视频，包括：
在所述目标车辆的数量为N个的情况下，对每个所述目标车辆在所述预设时长内采集到的视频帧中的首帧和尾帧进行融合，得到所述目标视频，其中，所述第二组视频帧包括N个所述目标车辆在所述预设时长内采集到的视频帧。
6.根据权利要求1所述的方法，其特征在于，所述根据一组车辆所在路段的路段特征，确定所述一组车辆所处的当前场景，包括：
根据一组车辆所在路段的路段特征，从预设的一组场景中选取出多个候选场景；
将所述多个候选场景的场景信息发送至所述一组车辆中的指定车辆，以由所述指定车辆内的指定对象进行场景选取；
响应于所述指定车辆返回的场景指示信息，将所述场景指示信息所指示的候选场景，确定为所述一组车辆所处的所述当前场景。
7.根据权利要求1至6中任一项所述的方法，其特征在于，在所述将所述目标视频作为预警视频发送至所述一组车辆之后，所述方法还包括：
在场景切换条件满足的情况下，获取所述一组车辆采集到的第三组视频帧，其中，所述场景切换条件包括以下至少之一：所述一组车辆中存在位置异常的车辆，以所述一组车辆为中心的预设范围内存在与所述当前场景不匹配的路段特征，所述目标视频发送完成之后达到预设时长；
根据所述第三组视频帧对所述当前场景进行更新，得到更新后的所述当前场景；
基于更新后的所述当前场景，重新生成预警视频，并将重新生成的预警视频发送至所述一组车辆。
8.一种预警视频的生成装置，其特征在于，包括：
确定单元，用于根据一组车辆所在路段的路段特征，确定所述一组车辆所处的当前场景，并确定与所述当前场景匹配的目标采集视角；
融合单元，用于对所述一组车辆中与所述目标采集视角匹配的车辆采集到的视频帧进行融合，得到融合后的目标视频；
发送单元，用于将所述目标视频作为预警视频发送至所述一组车辆。
9.一种计算机可读的存储介质，其特征在于，所述计算机可读的存储介质包括存储的程序，其中，所述程序运行时执行权利要求1至7中任一项所述的方法。
10.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为通过所述计算机程序执行权利要求1至7中任一项所述的方法。
CN202410329083.2A 2024-03-21 2024-03-21 预警视频的生成方法和装置、存储介质及电子装置 Pending CN118097928A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202410329083.2A CN118097928A (zh) 2024-03-21 2024-03-21 预警视频的生成方法和装置、存储介质及电子装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202410329083.2A CN118097928A (zh) 2024-03-21 2024-03-21 预警视频的生成方法和装置、存储介质及电子装置

Publications (1)

Publication Number Publication Date
CN118097928A true CN118097928A (zh) 2024-05-28

Family

ID=91161566

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202410329083.2A Pending CN118097928A (zh) 2024-03-21 2024-03-21 预警视频的生成方法和装置、存储介质及电子装置

Country Status (1)

Country Link
CN (1) CN118097928A (zh)

Similar Documents

Publication Publication Date Title
CN105849790B (zh) 一种路况信息获取方法
US10399438B2 (en) Data processing apparatus
JP5888164B2 (ja) 車両周辺監視装置、車両周辺監視システム
CN108871369B (zh) 车用导航地图显示方法、电子设备、服务器及存储介质
WO2015129045A1 (ja) 画像取得システム、端末、画像取得方法および画像取得プログラム
JP2020061079A (ja) 交通違反車両識別システム、サーバ、及び車両制御プログラム
JP6083752B2 (ja) 運転支援方法、センタ装置、運転支援システム
CN103606291B (zh) 一种信息处理方法、装置及系统
WO2021039319A1 (ja) 危険車両表示システム、危険車両表示装置、危険車両表示プログラム及びコンピュータで読み取り可能な記録媒体並びに記録した機器
JP6728897B2 (ja) 画像収集装置、画像収集システム、画像収集方法及びプログラム
KR102029128B1 (ko) 운전자간 블랙박스 사고영상을 상호교환하기 위한 iot 플랫폼 및 그 구현 방법
JP2016151887A (ja) 路上監視装置、路上監視システム、方法及びプログラム
Orhan et al. Road hazard detection and sharing with multimodal sensor analysis on smartphones
JPWO2021039319A5 (zh)
CN112543956A (zh) 提供道路拥堵原因的方法和装置
JP2018189457A (ja) 情報処理装置
CN109637147A (zh) 进行取证的车辆电子设备、服务器、方法
JP2023171455A (ja) 経路予測装置、それを備えた車載装置、経路予測システム、経路予測方法、及びコンピュータプログラム
JP2019215785A (ja) 情報提供装置、情報提供方法及びコンピュータプログラム
JP2015210713A (ja) ドライブレコーダおよびこれを用いたクラウド型道路情報等運用システム
JP2013239087A (ja) 情報処理システム及び移動体
JP2020060932A (ja) 車載装置
KR102418630B1 (ko) 사고 정보 수집 장치 및 그 제어 방법
JP2017188164A (ja) 画像取得装置、端末および画像取得システム
CN118097928A (zh) 预警视频的生成方法和装置、存储介质及电子装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication