CN112040144A - 一种车辆受损视频生成方法、装置和设备 - Google Patents

一种车辆受损视频生成方法、装置和设备 Download PDF

Info

Publication number
CN112040144A
CN112040144A CN202010771422.4A CN202010771422A CN112040144A CN 112040144 A CN112040144 A CN 112040144A CN 202010771422 A CN202010771422 A CN 202010771422A CN 112040144 A CN112040144 A CN 112040144A
Authority
CN
China
Prior art keywords
historical
video
frame
shooting
new video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010771422.4A
Other languages
English (en)
Other versions
CN112040144B (zh
Inventor
蒋晨
程远
郭昕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alipay Hangzhou Information Technology Co Ltd
Original Assignee
Alipay Hangzhou Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alipay Hangzhou Information Technology Co Ltd filed Critical Alipay Hangzhou Information Technology Co Ltd
Priority to CN202010771422.4A priority Critical patent/CN112040144B/zh
Publication of CN112040144A publication Critical patent/CN112040144A/zh
Application granted granted Critical
Publication of CN112040144B publication Critical patent/CN112040144B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)
  • Traffic Control Systems (AREA)

Abstract

本说明书实施例公开了一种车辆受损视频生成方法、装置和设备，其中，所述方法在获取车辆受损的历史视频和历史照片后，基于预设规则确定所述历史视频的拍摄路径；基于所述历史照片确定待生成的新视频的起始拍摄位置和终止拍摄位置；基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径；并基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频。

Description

一种车辆受损视频生成方法、装置和设备
技术领域
本文件涉及计算机技术领域，尤其涉及一种车辆受损视频生成方法、装置和设备。
背景技术
在传统的车险理赔场景中，保险公司需要派出专业的查勘定损人员到事故现场进行查勘定损，然后基于查勘定损结果，给出车辆的维修方案和赔偿金额，并对事故车辆进行拍照留档，以供后台核查人员核损核价。这种人工查勘定损的方式，需要保险公司投入大量的人力和专业知识培训成本，并且从用户的角度来说，由于需要经历人工查勘定损、拍摄现场照片留档以及核损人员在后台核损等环节，导致理赔周期较长，用户等待时间也相应较长，用户体验较差。
针对上述问题，目前提出了基于AI算法的自动定损方案，并且从基于受损车辆图片的定损发展到了基于车辆受损视频的定损。其中，对于基于车辆受损视频的自动定损方案，在其AI算法的开发过程中，需要大量的视频数据供算法使用。但是，目前缺乏一种能够提供大量车辆受损视频的有效方案。
发明内容
本说明书实施例提供了一种车辆受损视频生成方法、装置和设备，以提供一种能够提供大量车辆受损视频的有效方案。
为解决上述技术问题，本说明书实施例是这样实现的：
第一方面，提出了一种车辆受损视频生成方法，包括：
获取车辆受损的历史视频和历史照片；
基于预设规则确定所述历史视频的拍摄路径；
基于所述历史照片确定待生成的新视频的起始拍摄位置和终止拍摄位置；
基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径；
基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频。
第二方面，提出了一种车辆受损视频生成装置，包括：
数据获取模块，获取车辆受损的历史视频和历史照片；
第一确定模块，基于预设规则确定所述历史视频的拍摄路径；
第二确定模块，基于所述历史照片确定待生成的新视频的起始拍摄位置和终止拍摄位置；
第三确定模块，基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径；
视频生成模块，基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频。
第三方面，提出了一种电子设备，包括：
处理器；以及
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行以下操作：
获取车辆受损的历史视频和历史照片；
基于预设规则确定所述历史视频的拍摄路径；
基于所述历史照片确定待生成的新视频的起始拍摄位置和终止拍摄位置；
基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径；
基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频。
第四方面，提出了一种计算机可读存储介质，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被包括多个应用程序的电子设备执行时，使得所述电子设备执行以下操作：
获取车辆受损的历史视频和历史照片；
基于预设规则确定所述历史视频的拍摄路径；
基于所述历史照片确定待生成的新视频的起始拍摄位置和终止拍摄位置；
基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径；
基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频。
由以上本说明书实施例提供的至少一个技术方案，在获取车辆受损的历史视频和历史照片后，可自动提取历史视频的拍摄路径获得丰富的拍摄方式，自动在历史照片中定位出待生成的新视频的起始拍摄位置和终止拍摄位置，并自动将历史视频的拍摄路径迁移到待生成的新视频中，然后基于历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径生成新视频，整个过程不受人力成本的限制，可以自动产生大量的车辆受损的视频数据，且当历史照片中的内容(部件和损伤类型)足够丰富时，可以生成足够丰富的视频数据，而且可以全天候不间断地生成，视频生成速度远远高于人工采集的速度，是一种非常快速有效的车辆受损视频生成方案。
附图说明
此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：
图1是本说明书实施例提供的一种车辆受损视频生成方法的流程示意图。
图2是本说明书实施例提供的二维图像仿射变换原理示意图。
图3是本说明书实施例提供的一个仿射变换实例。
图4是本说明书实施例提供的拍摄路径模拟原理示意图。
图5是本说明书实施例提供的一段历史视频的拍摄路径的可视化样例。
图6是图1中的步骤108的一种详细的实现流程示意图。
图7是图1中的步骤110的一种详细的实现流程示意图。
图8是本说明书实施例提供的待生成的新视频的拍摄路径的可视化样例。
图9是本说明书实施例提供的新视频的生成过程示意图。
图10是本说明书实施例提供的一种电子设备的结构示意图。
图11是本说明书实施例提供的一种车辆受损视频生成装置的结构示意图。
图12是图11中的第三确定模块1104的一种详细的结构示意图。
图13是图11中的视频生成模块1105的一种详细的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚，下面将结合本申请具体实施例及相应的附图对本申请技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本文件保护的范围。
为了能够快速有效地为基于车辆受损视频的自动定损方案的AI算法提供大量的车辆受损视频，本说明书实施例提供一种车辆受损视频生成方法和装置，下面分别进行说明。
首先对本说明书实施例提供的一种车辆受损视频生成方法进行说明。如图1所示，本说明书的一个实施例提供了一种车辆受损视频生成方法，该方法可以包括：
步骤102、获取车辆受损的历史视频和历史照片。
车辆受损的历史视频和历史照片可以是人工实地采集的，例如，由定损勘察人员在车辆受损现场实地拍摄的车辆受损视频和照片，或者由用户在车辆受损现场实地拍摄并上传给车险理赔平台的车辆受损视频和照片。
上述历史视频的拍摄方式可以是任何形式的，如由远及近、由近到远、出现抖动、从左到右、从右到左、从上到下和从下到上等拍摄方式中的一种或多种。上述历史照片中包含的车辆部件、受损类型、受损区域及受损程度等也可以尽可能的丰富多样，这样一来，基于历史视频和历史照片生成的新的视频也可以足够丰富，这对AI算法的开发或训练来说更为有利。
上述历史视频和上述历史照片是同一受损车辆的，或者，上述历史视频和上述历史照片是不同受损车辆的。可以理解，当上述历史视频和上述历史照片是不同受损车辆的时候，可以生成更丰富多样的新视频。
可选地，为了使得后面生成的新视频更清晰、质量更好，上述历史照片一般是高清照片，具体是分辨率在预设阈值以上的照片，例如分辨率在1280*720以上的照片。
步骤104、基于预设规则确定所述历史视频的拍摄路径。
一段视频的拍摄路径是指该视频中帧与帧之间的运动轨迹，一般用视频中帧与帧之间的一个或多个关键点(对应的拍摄对象)的运动轨迹来表征，也可以用帧与帧中像素(pixel)与像素之间的运动轨迹表征，但是由于一帧图像中像素点的数量比较庞大，会导致计算量过大，因此，常常从视频的起始帧的所有像素点中选取部分关键点来计算运动轨迹。
一段视频的拍摄路径可以反映该视频的拍摄方式。也就是说，上述历史视频的拍摄路径可以反映上述历史视频的拍摄方式，因此通过确定历史视频的拍摄路径，可以获取历史视频的拍摄方式。如前文所述，一段视频的拍摄方式可以包括限不限于由远及近、由近到远、出现抖动、从左到右、从右到左、从上到下和从下到上等方式中的一种或多种。
在本说明书实施例中，对于一段视频，按照其包含的帧的播放顺序，可以将其中的某一帧记为第i帧，i＝0,1,2，…，n，其中，第0帧为该视频最首的帧，也称为起始帧，第n帧为最后一帧，也称为终止帧。
在本说明书的一个例子中，步骤104可以包括：基于仿射变换原理，确定上述历史视频的拍摄路径。下面先结合图2和图3对仿射变换原理进行说明。
如图2所示，由图像成像原理可知，对于拍摄场景中存在的拍摄对象(图2中所示的三个关键点)，其在图像21和图像22中的位置可以分别用如下两个线性公式表示：λ1X1＝K(R1X1+T1)、λ2X2＝K(R2X2+T2)，进一步地，在图像处理过程中，可应用仿射变换(AffineTransformation)(见下述公式(1))对二维图像进行平移、缩放、旋转等操作。
Figure BDA0002616754620000061
其中，X1表示上述拍摄对象在图像21中的位置，X2表示上述拍摄对象在图像22中的位置，H表示上述拍摄对象在图像21和图像22之间的变换矩阵。由于在已知X1的情况下，可以基于H计算出X2，因此，H可以用于表征上述拍摄对象在图像21和图像22之间的运动轨迹。也就是说，H可以用于表征包含图像21和图像22的两帧图像的视频的拍摄路径。
图3示出了一个仿射变换实例。如图3所示，经仿射变换后，图像31中的三角形的三个顶点(关键点)：顶点1、顶点2和顶点3，在图像32中依然构成三角形，其顶点分别为：顶点1′、顶点2′和顶点2′，但三角形的形状已发生变化。
基于上述对仿射变换原理的介绍可知，将仿射变换原理应用于视频的前后帧映射，可以推出：若X1表示某一关键点在该视频的第i帧中的位置(x1，y1，z1)，X2表示该关键点在该视频的第i+1帧中的位置(x2，y2，z2)，从X1到X2的位置变换可通过一个仿射变换矩阵H映射获得。如果将该结论应用视频的连续n+1帧，则如图4所示，从第0帧到第3帧，可通过下述公式(2)计算得到指定关键点(图4中车辆后保险杠最边缘的一个关键点)在第3帧中的位置X3。
X3＝H3H2H1X0 (2)
推而广之：Xi＝HiXi-1＝HiHi-1Xi-2＝…，i＝1，2，…，n (3)
进一步地，如图4所示，从左往右，第0帧图像是一个车辆后保险杠(简称后保)的远景图，能够看到车辆后保的全部区域，第1至第3帧是车辆后保的三张相对逐渐走近图，第2帧中后保最边缘的关键点位置对应于第1帧图中的后保最边缘关键点，这个后保边缘关键点的位置在第1帧和第2帧图中的位置是已知的，也就是公式(3)中X1和X2是已知的，那么根据X2＝H2X1，直接根据线性代数计算矩阵求逆就能获得变换矩阵H2，这个变换矩阵就表示了历史视频中第1帧到第2帧的运动轨迹。
需要说明的是，在本说明书实施例中，Xi可以不仅仅表示一个关键点在第i帧图像中的位置，可以表示多个关键点(例如m个)在第i帧图像中的位置，那么，Xi＝[xi1，xi2，…，xim]。
在此基础上，上述基于仿射变换原理，确定所述历史视频的拍摄路径，可以包括：在所述历史视频的起始帧中选取多个第一关键点(代表历史视频中的一个或多个拍摄对象)；确定这多个第一关键点在历史视频中起始帧至终止帧中的位置；基于仿射变换原理和这多个第一关键点在历史视频中起始帧至终止帧中的位置，确定历史视频的下一帧中所述多个第一关键点的位置相对于上一帧中所述多个第一关键点的位置的仿射变换矩阵，得到多个第一仿射变换矩阵；使用所述多个第一仿射变换矩阵表征所述历史视频的拍摄路径。
例如，假设历史视频包含0至n共n+1帧图像，然后在第0帧中选取该帧图像的四个顶点作为上述多个第一关键点，由于在已知的历史视频中，这四个顶点在各帧图像中的位置是已知的，那么在获取历史视频后，可以直接确定出这四个顶点代表的拍摄对象在各帧图像中的位置，也即确定出这四个顶点在历史视频的起始帧(第0帧)至终止帧(第n帧)中的位置，那么基于上述公式(3)可以反推出起始帧(第0帧)至终止帧(第n帧)之间的一系列仿射变换矩阵：H1，H2，…，Hn，并可以使用H1，H2，…，Hn表征历史视频的拍摄路径。
图5示出了历史视频的拍摄路径的可视化样例。如图5所示，将历史视频的四个顶点在第0帧至第n帧中位置标识在该视频的第0帧图像中，可以得到这四个点在第0帧至第n帧中的运动轨迹，其中，左上顶点的运动轨迹如曲线51所示，左下顶点的运动轨迹如曲线52所示，右下顶点的运动轨迹如曲线53所示，右上顶点的运动轨迹如曲线54所示，在第n帧中，这四个顶点分别终止于四边形50的四个顶点。
上述多个第一关键点在所述历史视频的起始帧(第0帧)中的位置，可以看作是该历史视频的起始拍摄位置；上述多个第一关键点在该历史视频的终止帧(第n帧)中的位置，可以看作是该历史视频的终止拍摄位置。
步骤106、基于所述历史照片确定待生成的新视频的起始拍摄位置和终止拍摄位置。
作为一个例子，当在步骤104中，使用上述历史视频的起始帧中的多个第一关键点在历史视频的起始帧至终止帧中的运动轨迹表示历史视频的拍摄路径时，具体是当使用上述多个第一仿射矩阵表征上述历史视频的拍摄路径时，上述步骤106可以包括：在所述历史照片中选取多个第二关键点，将所述多个第二关键点在所述历史照片中的位置，确定为所述新视频的起始拍摄位置；在所述历史照片中选定一块目标区域，将所述目标区域的多个边界点确定为待生成视频的终止拍摄位置；其中，上述多个第一关键点、上述多个第二关键点数量以及上述多个边界点的数量对应一致。
其中，目标区域可以包括但不限于下述区域中的一种：
(1)所述历史照片中的车辆损伤区域，该车辆损伤区域可以是人工在历史照片中标注的，也可以是基于损伤框标注的方式自动标注的，或者是基于损伤点标注的方式自动标注的，如果历史照片中标注有多个车辆损伤区域，可以在下述步骤110中对应生成多个新视频。
(2)所述历史照片中车辆的预设部件所在的区域，该区域可以是利用部件框标注得到的区域。
(3)所述历史照片中的指定区域，例如固定的默认矩形区域，比如历史照片中心指定大小的区域。
(4)所述历史照片中人工或自动标注的其他有含义的区域，具体依据实际业务确定。
可以理解，不管以何种方式确定目标区域，当历史照片中的目标区域的数量为多个时，可以对应生成多个新视频。
举例来说，在步骤106中，假设历史照片为图8所示的照片，可以将图8所示的照片的四个顶点作为多个第二关键点，并将这四个顶点(这四个顶点对应的拍摄对象)在图8中的位置，确定待生成的新视频的起始拍摄位置；将图8中四边形区域(该区域是一个损伤区域)80作为目标区域，并将四边形区域80的四个顶点确定为待生成的新视频的终止拍摄位置，具体而言，可以将四边形区域80的顶点801作为图8的左上顶点的拍摄终止位置，将四边形区域80的顶点802作为图8的左下顶点的拍摄终止位置，将四边形区域80的顶点803作为图8的右下顶点的拍摄终止位置，将四边形区域80的顶点804作为图8的右上顶点的拍摄终止位置。
需要说明的是，上述多个第一关键点的选取方式包括但不限于上文所述的历史视频的起始帧的四个顶点的选取方式，还可以是其他选取方式，如三角形的顶点、其他多边形的顶点、其他任意形状的顶点的选取，等等。上述多个第二关键点的选取的方式与上述多个第一关键点的选取方式类似，也可以有多种方式，但一般与上述多个第一关键点的选取方式相对应。相应的，上述目标区域的选取，也可以包括但不限于四边形区域，还可以是三角形区域及其他多边形区域，等等。
通过上面的例子可知，在一种实施方式中，上述多个第一关键点包括所述历史视频的起始帧的四个顶点；上述多个第二关键点包括所述历史照片的四个顶点，或者，上述多个第二关键点包括将所述历史照片的四个顶点平移预设距离后得到的四个点；上述目标区域为四边形区域，上述多个边界点包括所述四边形区域的四个顶点。
需要说明的是，上述多个第二关键点的选取方式与上述多个第一关键点的选取方式相对应，通常是指上述多个第二关键点的选取方式与上述多个第一关键点的选取方式一致(第一种方式)，例如，同将历史视频的起始帧的四个顶点作为上述多个第一关键点一样，可以将上述历史照片的四个顶点作为多个第二关键点。但也有一种例外(第二种方式)，在基于上述多个第一关键点的选取方式从历史照片中选取多个第二关键之后，往历史照片内部区域进行一定的平移，作为最终的多个第二关键点，例如，在历史照片的四个顶点的基础上，往历史照片内部区域进行一定的平移，比如原来的四个顶点是(0,0),(0,w-1),(h-1,0),(h-1,w-1)，那么，上述多个第二关键点往往会是(0+gap,0+gap),(0+gap,w-1-gap),(h-1-gap,0+gap),(h-1-gap,w-1-gap),其中，gap表示平移的距离。需要说明的是四个顶点的平移距离可以相同也可以不同，具体根据实际情况确定。采用第二种方式的目的是，解决拍摄路径变换过于剧烈导致迁移路径超出历史照片的显示范围，而导致生成的新视频出现畸形的问题。
步骤108、基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径。
本说明书实施例的目的在于，基于一段历史视频和一张历史照片，合成一个或多个新视频，并使得合成的新视频，一方面与历史视频有类似的拍摄路径，另一方面与历史照片有相同的拍摄内容，例如相同的损伤区域等。为了实现此目的，需要确定一条与历史视频的拍摄路径相似的路径作为新视频的拍摄路径，并据此拍摄路径和历史照片生成新视频。
基于历史视频的起始拍摄位置与待生成的新视频的起始拍摄位置的关系，以及历史视频的终止拍摄位置与待生成的新视频的终止拍摄位置的关系，至少可以分两种情况来考虑。其中，所述历史视频的起始拍摄位置为上述多个第一关键点在所述历史视频的起始帧中的位置，所述历史视频的终止拍摄位置为上述多个第一关键点在所述历史视频的终止帧中的位置。
一般而言，不管是下述第一种情况还是上述第二种情况，通过步骤108确定出的多个第二仿射矩阵的数量与上述多个第一仿射矩阵的数量一致，相应的，通过下述步骤110生成的新视频的帧数与历史视频的帧数对应一致。
第一种情况
若所述历史视频的起始拍摄位置X0与所述新视频的起始拍摄位置X′0一致，且所述历史视频的终止拍摄位置Xn与所述新视频的终止拍摄位置X′n一致，即X0＝X′0，且Xn＝X′n，则将所述历史视频的拍摄路径确定为所述新视频的拍摄路径，即使用上述多个第一仿射矩阵(H1，H2，…，Hn)表征新视频的拍摄路径。
第二种情况
若所述历史视频的起始拍摄位置X0与所述新视频的起始拍摄位置X′0不一致，且所述历史视频的终止拍摄位置Xn与所述新视频的终止拍摄位置X′n不一致，即，X0≠X′0，且Xn≠X′n，则基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定一条与所述历史视频的拍摄路径相似的路径作为所述新视频的拍摄路径。当用上述多个第一仿射矩阵(H1，H2，…，Hn)表征历史视频的拍摄路径时，可用下述多个第二仿射矩阵(H′1，H′2，…，H′n)表征新视频的拍摄路径(上述相似的路径)。
上述第二种情况可以理解为是，在基于上述多个第一关键点的选取方式，从历史照片中选取多个第二关键之后，往历史照片内部区域进行一定的平移，作为最终的多个第二关键点导致的情况。
在上述第二种情况的一种实施方式中，如图6所示，可通过下述过程确定上述相似的路径：
步骤602、基于所述多个第二关键点在所述历史照片中的位置，在所述历史视频的起始帧中重新确定多个第一关键点，记为多个第三关键点。
例如，当多个第二关键点在历史照片中的位置是对历史照片的四个顶点往历史照片内部平移一定距离后的点时，上述多个第三关键点可以是对历史视频的起始帧的四个顶点平移相应距离后得到的。也就是说，多个第三关键点在历史视频的起始帧中的位置与上述多个第二关键点在历史照片中的位置一致。
步骤604、基于所述多个第一仿射变换矩阵和所述多个第三关键点在所述历史视频的起始帧中的位置，确定所述多个第三关键点在所述历史视频的中间帧和终止中的位置，其中，所述历史视频的中间帧包括所述历史视频的起始帧和终止帧之间的帧。
如前文所述，假如上述历史视频按时间顺序包括0至n帧，则起始帧为第0帧，终止帧为第n帧，那么中间帧则包括第1帧至第n-1帧。
上述多个第一仿射变换矩阵可以表示为：H1，H2，…，Hn，上述多个第三关键点在历史视频的起始帧中的位置可以表示为：X0，则可以根据上述公式(3)计算上述多个第三关键点在第1帧至第n-1帧中的位置，且从第1帧至第n-1帧，上述多个第三关键点的位置可以表示为：X1，X2，…，Xn-1。
步骤606、基于所述多个第三关键点在所述历史视频的起始帧、中间帧和终止帧中的位置，以及第一预设约束条件和第二预设约束条件，对应确定所述多个第二关键点在所述新视频的起始帧、中间帧和终止帧中的位置，其中，所述第一预设约束条件包括第一路径增量和第二路径增量的平方差最小，所述第一路径增量是所述第三关键点在所述历史视频中的相邻两帧之间的路径增量，所述第二路径增量是所述第二关键点在所述新视频的所述相邻两帧之间的路径增量，所述第二预设条件包括所述多个第二关键点在所述新视频的终止帧中的位置为所述多个边界点所在的位置。
举例来说，假设上述多个第三关键点为历史视频的起始帧中的四个顶点平移一定距离后的四个点，这四个点的坐标可以表示为8个元素的位置坐标组合(x1，y1，x2，y2，x3，y3，x4，y4)，下面以x1为例进行说明，其他7个元素的计算原理类似。
已知：历史视频中x1对应的第一关键点在第0帧至第n帧中的位置：
Figure BDA0002616754620000141
待生成的新视频中x1对应的第二关键点在第0帧和第n帧中的位置：
Figure BDA0002616754620000142
其中，目标值即待生成的新视频中x1对应的第二关键点在第n帧中的坐标值，在确定目标区域时已确定。
计算：x1对应的第二关键点在新视频的中间帧(第1帧至第n帧)的位置：
Figure BDA0002616754620000143
第一预设约束条件：待生成的新视频的拍摄路径与历史视频的拍摄路径尽可能的相似，例如，每一帧的路径增量的平方差最小，具体的，第一路径增量和第二路径增量的平方差最小，其中，第一路径增量是第三关键点在历史视频中的相邻两帧之间的路径增量，第二路径增量是第二关键点在新视频的相应相邻两帧之间的路径增量，可以表示为：
Figure BDA0002616754620000144
第二预设约束条件：一个第二关键点在新视频的终止帧中的位置为目标区域中的一个边界点所在的位置。
我们假设上述求解
Figure BDA0002616754620000151
的问题是解如下线性方程的问题：
Figure BDA0002616754620000152
其中：ε＝0.001，λ＝1000000，λ取得值很大表明这是个强限制，ε取值很小说明这些条件基本不是限制；
Figure BDA0002616754620000153
Figure BDA0002616754620000154
具体来说，路径增量是用相邻两帧中的关键点位置的差值表征的，比如，历史视频中第0帧到第1帧的路径增量是
Figure BDA0002616754620000155
也就是Y的第一个变量，Y中的一个变量表示历史视频中一个帧的路径增量，而历史视频中的第一关键点的位置
Figure BDA0002616754620000156
和
Figure BDA0002616754620000157
是已知的，也就是Y是已知的；上述公式(4)中的X′是需要求解的第二关键点在新视频中各帧中的位置；上述公式(4)中的矩阵大小为(2n-1)*n，n为历史视频的帧数。在求解公式(4)中的线性方程时，有两个限制条件(第一预设约束条件和第二预设约束条件)；第一个限制条件是历史视频的拍摄路径与待生成的新视频的拍摄路径之间逐帧的路径增量的平方差最小，可以理解，在公式(4)中，等号左边的矩阵的第一行为[-1,1,0,0,0,....]，根据线性代数矩阵计算规则，该行与X′相乘，第一行结果也就变成了
Figure BDA0002616754620000161
也就是新视频中第0帧到第1帧的路径增量，与Y中(历史视频中)的第1个变量(路径增量对应)，也就是，
Figure BDA0002616754620000162
尽量接近
Figure BDA0002616754620000163
以此类推，变换矩阵第2行是[0,-1,1,0,0,....,0]与X′相乘就是
Figure BDA0002616754620000164
同样是路径增量，与Y中第二行元素相对应,
Figure BDA0002616754620000165
尽量接近
Figure BDA0002616754620000166
公式(4)中变换矩阵的上半部分设计就是为了满足该限制条件；第二个限制条件(矩阵的下半部分)，就是限制边界条件，使得
Figure BDA0002616754620000167
问题就变成了在上述两个限制条件下用最小二乘法求解
Figure BDA0002616754620000168
的值。
步骤608、基于仿射变换原理和所述多个第二关键点在所述新视频的起始帧、中间帧和终止帧中的位置，确定所述新视频的下一帧中所述多个第二关键点的位置相对于上一帧中所述多个第二关键点的位置的仿射变换矩阵，得到多个第二仿射变换矩阵。
步骤610、使用所述多个第二仿射变换矩阵表征与所述历史视频的拍摄路径相似的路径，并将所述相似的路径确定为所述新视频的拍摄路径。
在步骤606中得到多个第二关键点在新视频的中间帧的位置以后，可以基于仿射变换原理(上述公式(3))和这多个第二关键点在新视频的起始帧、中间帧和终止帧中的位置，计算得到多个第二仿射变换矩阵：H′1，H′2，…，H′n。然后用这多个第二仿射变换矩阵表征与历史视频的拍摄路径相似的路径，并将该相似的路径确定为所述新视频的拍摄路径。
图8示出了将图5所示历史视频的拍摄路径进行迁移，得到的新视频的拍摄路径在历史照片中的可视化样例。在图8中，将历史照片的四个顶点在新视频的第0帧至第n帧中位置标识在该历史照片中，可以得到这四个点在第0帧至第n帧中的运动轨迹(拍摄路径)，其中，左上顶点的运动轨迹如曲线81所示，左下顶点的运动轨迹如曲线82所示，右下顶点的运动轨迹如曲线83所示，右上顶点的运动轨迹如曲线84所示，在第n帧中，这四个顶点分别终止于四边形80的四个顶点。
上述介绍了一种确定与历史视频相似的拍摄路径的方法(路径增量的平方差最小)，可以理解，在实际应用中还可以用其他方式确定与历史视频的拍摄路径相似的路径，例如路径增量的标准差最小等，本说明书对此不做限制。
上述步骤108可以看作是一个将历史视频的拍摄路径进行迁移得到新视频的拍摄路径的过程。具体的，将视频拍摄路径的迁移问题，用数据推导转化为一个解线性方程的问题，可快速实现拍摄路径迁移的目的，从而实现快速生成丰富的车辆受损视频数据的目的。
步骤110、基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频。
本步骤的目的在于，以历史照片显示的内容为基础，以步骤108确定出的待生成的新视频的拍摄路径作为拍摄轨迹，从待生成的新视频的起始拍摄位置开始至终止拍摄位置结束，生成新视频。下面也分两种情况对该步骤的具体实现过程进行介绍。
第一种情况
如果在步骤108中，将历史视频的拍摄路径确定为新视频的拍摄路径，即使用上述多个第一仿射矩阵(H1，H2，…，Hn)表征新视频的拍摄路径，则如图7所示，步骤110可包括：
步骤702、基于所述多个第一仿射变换矩阵和所述多个第二关键点在所述历史照片中的位置，确定所述多个第二关键点在所述新视频的中间帧中的位置，所述新视频的中间帧包括所述新视频的起始帧和终止帧之间的帧。
由于多个第二关键点在新视频的起始帧(历史照片)中的位置是已知的，那么根据上述公式(3)，即可计算出多个关键点在新视频的中间帧中的位置。
步骤704、基于所述多个第二关键点在所述新视频的起始帧、中间帧和终止帧中的位置，分别对应确定所述新视频的起始帧、中间帧和终止帧在所述历史照片中的对应区域，其中，所述多个第二关键点在所述新视频的起始帧的位置为所述多个第二关键点在所述历史照片中的位置，所述多个第二关键点在所述新视频的终止帧的位置为所述多个边界点在所述历史照片中的位置。
可以理解，确定出上述多个第二关键点在待生成的新视频的起始帧、中间帧和终止帧中的位置，相当于确定出了这些帧在历史照片中的边界，被该边界包围的区域即这些真在历史照片中的对应区域。
步骤706、基于所述新视频的起始帧、中间帧和终止帧在所述历史照片中的对应区域以及所述多个第一仿射变换矩阵，对所述历史照片进行裁剪和尺寸调整，得到所述新视频的起始帧、中间帧和终止帧。
具体而言，基于多个第一仿射变换矩阵和上述公式(3)计算出新视频的起始帧、中间帧和终止帧在所述历史照片中的对应区域的内部点的位置，然后，根据这些点的位置对历史照片进行裁剪得到相应的帧，由于裁剪得到的帧的大小通常是不一致的，再通过尺寸调整调整成统一大小，可以得到能够拼接得到新视频的全部帧。
步骤708、对所述新视频的起始帧、中间帧和终止帧按时序进行拼接，得到所述新视频。
第二种情况
如果在步骤108中，将一条与所述历史视频的拍摄路径相似的路径作为所述新视频的拍摄路径，也即将与上述多个第一仿射矩阵(H1，H2，…，Hn)相似的多个第二仿射矩阵(H′1，H′2，…，H′n)作为新视频的拍摄路径，步骤110可包括：基于所述多个第二关键点在所述新视频的起始帧、中间帧和终止帧中的位置，分别对应确定所述新视频的起始帧、中间帧和终止帧在所述历史照片中的对应区域；基于所述新视频的起始帧、中间帧和终止帧在所述历史照片中的对应区域以及所述多个第二仿射变换矩阵，对所述历史照片进行裁剪和尺寸调整，得到所述新视频的起始帧、中间帧和终止帧；对所述新视频的起始帧、中间帧和终止帧按时序进行拼接，得到所述新视频。
其中，基于多个第二仿射变换矩阵，对所述历史照片进行裁剪和尺寸调整的方式，与上述第一种情况中基于多个第一仿射变换矩阵，对所述历史照片进行裁剪和尺寸调整的方式类似，此处不再赘述。
如图9所示，本说明书实施例提供的一种车辆受损视频生成方法，相当于是基于历史视频和历史照片合成得到新的车辆受损视频。在应用本方法时，输入车辆受损的历史视频和历史照片，即可生成新的车辆受损视频，不受人力成本的限制。
具体来说，本说明书实施例提供的一种车辆受损视频生成方法，在获取车辆受损的历史视频和历史照片后，可自动提取历史视频的拍摄路径获得丰富的拍摄方式，自动在历史照片中定位出待生成的新视频的起始拍摄位置和终止拍摄位置，并自动将历史视频的拍摄路径迁移到待生成的新视频中，然后基于历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径生成新视频。也就是说，通过提取历史视频的拍摄路径获得丰富的拍摄方式，通过历史照片获得丰富的损伤部位和损伤程度，通过自动路径迁移的方式将历史拍摄方式迁移到聚焦各类损伤部位上，并通过迁移得到的路径重建视频，达到生成视频的目标。整个过程不受人力成本的限制，可以自动产生大量的车辆受损的视频数据，且当历史照片中的内容(部件和损伤类型)足够丰富时，可以生成足够丰富的视频数据，而且可以全天候不间断地生成，视频生成速度远远高于人工采集的速度，是一种非常快速有效的车辆受损视频生成方案。
以上是对本说明书提供的方法实施例的说明，下面对本说明书提供的电子设备进行介绍。
图10是本说明书的一个实施例提供的电子设备的结构示意图。请参考图5，在硬件层面，该电子设备包括处理器，可选地还包括内部总线、网络接口、存储器。其中，存储器可能包含内存，例如高速随机存取存储器(Random-Access Memory，RAM)，也可能还包括非易失性存储器(non-volatile memory)，例如至少1个磁盘存储器等。当然，该电子设备还可能包括其他业务所需要的硬件。
处理器、网络接口和存储器可以通过内部总线相互连接，该内部总线可以是ISA(Industry Standard Architecture，工业标准体系结构)总线、PCI(PeripheralComponent Interconnect，外设部件互连标准)总线或EISA(Extended Industry StandardArchitecture，扩展工业标准结构)总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示，图10中仅用一个双向箭头表示，但并不表示仅有一根总线或一种类型的总线。
存储器，存放程序。具体地，程序可以包括程序代码，所述程序代码包括计算机操作指令。存储器可以包括内存和非易失性存储器，并向处理器提供指令和数据。
处理器从非易失性存储器中读取对应的计算机程序到内存中然后运行，在逻辑层面上形成车辆受损视频生成装置。处理器，执行存储器所存放的程序，并具体用于执行以下操作：
获取车辆受损的历史视频和历史照片；
基于预设规则确定所述历史视频的拍摄路径；
基于所述历史照片确定待生成的新视频的起始拍摄位置和终止拍摄位置；
基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径；
基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频。
上述如本说明书图1所示实施例揭示的车辆受损视频生成方法可以应用于处理器中，或者由处理器实现。处理器可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，CPU)、网络处理器(Network Processor，NP)等；还可以是数字信号处理器(Digital SignalProcessor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本说明书一个或多个实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本说明书一个或多个实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器，处理器读取存储器中的信息，结合其硬件完成上述方法的步骤。
该电子设备还可执行图1所示的实施例提供的车辆受损视频生成方法，本说明书在此不再赘述。
当然，除了软件实现方式之外，本说明书的电子设备并不排除其他实现方式，比如逻辑器件抑或软硬件结合的方式等等，也就是说以下处理流程的执行主体并不限定于各个逻辑单元，也可以是硬件或逻辑器件。
本说明书实施例还提出了一种计算机可读存储介质，该计算机可读存储介质存储一个或多个程序，该一个或多个程序包括指令，该指令当被包括多个应用程序的便携式电子设备执行时，能够使该便携式电子设备执行图1所示实施例的方法，并具体用于执行以下操作：
获取车辆受损的历史视频和历史照片；
基于预设规则确定所述历史视频的拍摄路径；
基于所述历史照片确定待生成的新视频的起始拍摄位置和终止拍摄位置；
基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径；
基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频。
下面对本说明书提供的装置进行说明。
如图11所示，本说明书的一个实施例提供了一种车辆受损视频生成装置1100，在一种软件实施方式中，装置1100可包括：数据获取模块1101、第一确定模块1102、第二确定模块1103、第三确定模块1104和视频生成模块1105。
数据获取模块1101，获取车辆受损的历史视频和历史照片。
第一确定模块1102，基于预设规则确定所述历史视频的拍摄路径。
在本说明书的一个例子中，第一确定模块1102可用于：基于仿射变换原理，确定上述历史视频的拍摄路径。具体的，可以在所述历史视频的起始帧中选取多个第一关键点(代表历史视频中的一个或多个拍摄对象)；确定这多个第一关键点在历史视频中起始帧至终止帧中的位置；基于仿射变换原理和这多个第一关键点在历史视频中起始帧至终止帧中的位置，确定历史视频的下一帧中所述多个第一关键点的位置相对于上一帧中所述多个第一关键点的位置的仿射变换矩阵，得到多个第一仿射变换矩阵；使用所述多个第一仿射变换矩阵表征所述历史视频的拍摄路径。
第二确定模块1103，基于所述历史照片确定待生成的新视频的起始拍摄位置和终止拍摄位置。
作为一个例子，第二确定模块1103，具体可以在所述历史照片中选取多个第二关键点，将所述多个第二关键点在所述历史照片中的位置，确定为所述新视频的起始拍摄位置；在所述历史照片中选定一块目标区域，将所述目标区域的多个边界点确定为待生成视频的终止拍摄位置；其中，上述多个第一关键点、上述多个第二关键点数量以及上述多个边界点的数量对应一致。
第三确定模块1104，基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径。
基于历史视频的起始拍摄位置与待生成的新视频的起始拍摄位置的关系，以及历史视频的终止拍摄位置与待生成的新视频的终止拍摄位置的关系，至少可以分两种情况来考虑。
第一种情况
若所述历史视频的起始拍摄位置X0与所述新视频的起始拍摄位置X′0一致，且所述历史视频的终止拍摄位置Xn与所述新视频的终止拍摄位置X′n一致，即X0＝X′0，且Xn＝X′n，则第三确定模块1104可将所述历史视频的拍摄路径确定为所述新视频的拍摄路径，即使用上述多个第一仿射矩阵(H1，H2，…，Hn)表征新视频的拍摄路径。
第二种情况
若所述历史视频的起始拍摄位置X0与所述新视频的起始拍摄位置X′0不一致，且所述历史视频的终止拍摄位置Xn与所述新视频的终止拍摄位置X′n不一致，即，X0≠X′0，且Xn≠X′n，则第三确定模块1104可基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定一条与所述历史视频的拍摄路径相似的路径作为所述新视频的拍摄路径。当用上述多个第一仿射矩阵(H1，H2，…，Hn)表征历史视频的拍摄路径时，可用下述多个第二仿射矩阵(H′1，H′2，…，H′n)表征新视频的拍摄路径(上述相似的路径)。
在上述第二种情况的一种实施方式中，如图12所示，第三确定模块1104可包括：重新确定子模块1201、第一位置确定子模块1202、第二位置确定子模块1203、矩阵生成子模块1204和相似路径表征子模块1205。
重新确定子模块1201，基于所述多个第二关键点在所述历史照片中的位置，在所述历史视频的起始帧中重新确定多个第一关键点，记为多个第三关键点。
第一位置确定子模块1202，基于所述多个第一仿射变换矩阵和所述多个第三关键点在所述历史视频的起始帧中的位置，确定所述多个第三关键点在所述历史视频的中间帧和终止中的位置，其中，所述历史视频的中间帧包括所述历史视频的起始帧和终止帧之间的帧。
第二位置确定子模块1203，基于所述多个第三关键点在所述历史视频的起始帧、中间帧和终止帧中的位置，以及第一预设约束条件和第二预设约束条件，对应确定所述多个第二关键点在所述新视频的起始帧、中间帧和终止帧中的位置，其中，所述第一预设约束条件包括第一路径增量和第二路径增量的平方差最小，所述第一路径增量是所述第三关键点在所述历史视频中的相邻两帧之间的路径增量，所述第二路径增量是所述第二关键点在所述新视频的所述相邻两帧之间的路径增量，所述第二预设条件包括所述多个第二关键点在所述新视频的终止帧中的位置为所述多个边界点所在的位置。
矩阵生成子模块1204，基于仿射变换原理和所述多个第二关键点在所述新视频的起始帧、中间帧和终止帧中的位置，确定所述新视频的下一帧中所述多个第二关键点的位置相对于上一帧中所述多个第二关键点的位置的仿射变换矩阵，得到多个第二仿射变换矩阵。
相似路径表征子模块1205，使用所述多个第二仿射变换矩阵表征与所述历史视频的拍摄路径相似的路径，并将所述相似的路径确定为所述新视频的拍摄路径。
上述介绍了一种确定与历史视频相似的拍摄路径的方法(路径增量的平方差最小)，可以理解，在实际应用中还可以用其他方式确定与历史视频的拍摄路径相似的路径，例如路径增量的标准差最小等，本说明书对此不做限制。
视频生成模块1105，基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频。
在上述第一种情况下，如图13所示，视频生成模块1105可包括：位置确定子模块1301、区域确定子模块1302、视频帧生成子模块1303和视频生成子模块1304。
位置确定子模块1301，基于所述多个第一仿射变换矩阵和所述多个第二关键点在所述历史照片中的位置，确定所述多个第二关键点在所述新视频的中间帧中的位置，所述新视频的中间帧包括所述新视频的起始帧和终止帧之间的帧。
区域确定子模块1302，基于所述多个第二关键点在所述新视频的起始帧、中间帧和终止帧中的位置，分别对应确定所述新视频的起始帧、中间帧和终止帧在所述历史照片中的对应区域，其中，所述多个第二关键点在所述新视频的起始帧的位置为所述多个第二关键点在所述历史照片中的位置，所述多个第二关键点在所述新视频的终止帧的位置为所述多个边界点在所述历史照片中的位置。
视频帧生成子模块1303，基于所述新视频的起始帧、中间帧和终止帧在所述历史照片中的对应区域以及所述多个第一仿射变换矩阵，对所述历史照片进行裁剪和尺寸调整，得到所述新视频的起始帧、中间帧和终止帧。
视频生成子模块1304，对所述新视频的起始帧、中间帧和终止帧按时序进行拼接，得到所述新视频。
在上述第二种情况下，视频生成模块1105，可基于所述多个第二关键点在所述新视频的起始帧、中间帧和终止帧中的位置，分别对应确定所述新视频的起始帧、中间帧和终止帧在所述历史照片中的对应区域；基于所述新视频的起始帧、中间帧和终止帧在所述历史照片中的对应区域以及所述多个第二仿射变换矩阵，对所述历史照片进行裁剪和尺寸调整，得到所述新视频的起始帧、中间帧和终止帧；对所述新视频的起始帧、中间帧和终止帧按时序进行拼接，得到所述新视频。
本说明书实施例提供的一种车辆受损视频生成装置，相当于是基于历史视频和历史照片合成得到新的车辆受损视频。在应用本方法时，输入车辆受损的历史视频和历史照片，即可生成新的车辆受损视频，不受人力成本的限制。
需要说明的是，车辆受损视频生成装置1100能够实现图1的方法，并能取得相同的技术效果，详细内容可参考图1所示的方法，不再赘述。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
总之，以上所述仅为本说明书的较佳实施例而已，并非用于限定本说明书的保护范围。凡在本说明书一个或多个实施例的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本说明书一个或多个实施例的保护范围之内。
上述实施例阐明的系统、装置、模块或单元，具体可以由计算机芯片或实体实现，或者由具有某种功能的产品来实现。一种典型的实现设备为计算机。具体的，计算机例如可以为个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任何设备的组合。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制时，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

Claims (18)

1.一种车辆受损视频生成方法，包括：
获取车辆受损的历史视频和历史照片；
基于预设规则确定所述历史视频的拍摄路径；
基于所述历史照片确定待生成的新视频的起始拍摄位置和终止拍摄位置；
基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径；
基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频。
2.根据权利要求1所述的方法，其中，所述基于预设规则确定所述历史视频的拍摄路径，包括：
基于仿射变换原理，确定所述历史视频的拍摄路径。
3.根据权利要求2所述的方法，其中，基于仿射变换原理，确定所述历史视频的拍摄路径，包括：
在所述历史视频的起始帧中选取多个第一关键点；
确定所述多个第一关键点在所述历史视频中起始帧至终止帧中的位置；
基于仿射变换原理和所述多个第一关键点在所述历史视频中起始帧至终止帧中的位置，确定所述历史视频的下一帧中所述多个第一关键点的位置相对于上一帧中所述多个第一关键点的位置的仿射变换矩阵，得到多个第一仿射变换矩阵；
使用所述多个第一仿射变换矩阵表征所述历史视频的拍摄路径。
4.根据权利要求3所述的方法，其中，所述基于所述历史照片，确定待生成视频的起始拍摄位置和终止拍摄位置，包括：
在所述历史照片中选取多个第二关键点，将所述多个第二关键点在所述历史照片中的位置，确定为所述新视频的起始拍摄位置；
在所述历史照片中选定一块目标区域，将所述目标区域的多个边界点确定为所述新视频的终止拍摄位置；
其中，所述多个第一关键点、所述多个第二关键点数量以及所述多个边界点的数量对应一致。
5.根据权利要求4所述的方法，其中，所述基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径，包括：
若所述历史视频的起始拍摄位置与所述新视频的起始拍摄位置一致，且所述历史视频的终止拍摄位置与所述新视频的终止拍摄位置一致，则将所述历史视频的拍摄路径确定为所述新视频的拍摄路径；
其中，所述历史视频的起始拍摄位置为所述多个第一关键点在所述历史视频的起始帧中的位置，所述历史视频的终止拍摄位置为所述多个第一关键点在所述历史视频的终止帧中的位置。
6.根据权利要求5所述的方法，其中，所述基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频，包括：
基于所述多个第一仿射变换矩阵和所述多个第二关键点在所述历史照片中的位置，确定所述多个第二关键点在所述新视频的中间帧中的位置，所述新视频的中间帧包括所述新视频的起始帧和终止帧之间的帧；
基于所述多个第二关键点在所述新视频的起始帧、中间帧和终止帧中的位置，分别对应确定所述新视频的起始帧、中间帧和终止帧在所述历史照片中的对应区域，其中，所述多个第二关键点在所述新视频的起始帧的位置为所述多个第二关键点在所述历史照片中的位置，所述多个第二关键点在所述新视频的终止帧的位置为所述多个边界点在所述历史照片中的位置；
基于所述新视频的起始帧、中间帧和终止帧在所述历史照片中的对应区域以及所述多个第一仿射变换矩阵，对所述历史照片进行裁剪和尺寸调整，得到所述新视频的起始帧、中间帧和终止帧；
对所述新视频的起始帧、中间帧和终止帧按时序进行拼接，得到所述新视频。
7.根据权利要求4所述的方法，其中，所述基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径，包括：
若所述历史视频的起始拍摄位置与所述新视频的起始拍摄位置不一致，且所述历史视频的终止拍摄位置与所述新视频的终止拍摄位置不一致，则基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定一条与所述历史视频的拍摄路径相似的路径作为所述新视频的拍摄路径；
其中，所述历史视频的起始拍摄位置为所述多个第一关键点在所述历史视频的起始帧中的位置，所述历史视频的终止拍摄位置为所述多个第一关键点在所述历史视频的终止帧中的位置。
8.根据权利要求7所述的方法，其中，所述基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定一条与所述历史视频的拍摄路径相似的路径作为所述新视频的拍摄路径，包括：
基于所述多个第二关键点在所述历史照片中的位置，在所述历史视频的起始帧中重新确定多个第一关键点，记为多个第三关键点；
基于所述多个第一仿射变换矩阵和所述多个第三关键点在所述历史视频的起始帧中的位置，确定所述多个第三关键点在所述历史视频的中间帧和终止中的位置，其中，所述历史视频的中间帧包括所述历史视频的起始帧和终止帧之间的帧；
基于所述多个第三关键点在所述历史视频的起始帧、中间帧和终止帧中的位置，以及第一预设约束条件和第二预设约束条件，对应确定所述多个第二关键点在所述新视频的中间帧中的位置，其中，所述第一预设约束条件包括第一路径增量和第二路径增量的平方差最小，所述第一路径增量是所述第三关键点在所述历史视频中的相邻两帧之间的路径增量，所述第二路径增量是所述第二关键点在所述新视频的所述相邻两帧之间的路径增量，所述第二预设条件包括所述多个第二关键点在所述新视频的终止帧中的位置为所述多个边界点所在的位置；
基于仿射变换原理和所述多个第二关键点在所述新视频的起始帧、中间帧和终止帧中的位置，确定所述新视频的下一帧中所述多个第二关键点的位置相对于上一帧中所述多个第二关键点的位置的仿射变换矩阵，得到多个第二仿射变换矩阵；
使用所述多个第二仿射变换矩阵表征与所述历史视频的拍摄路径相似的路径，并将所述相似的路径确定为所述新视频的拍摄路径。
9.根据权利要求8所述的方法，其中，所述基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频，包括：
基于所述多个第二关键点在所述新视频的起始帧、中间帧和终止帧中的位置，分别对应确定所述新视频的起始帧、中间帧和终止帧在所述历史照片中的对应区域；
基于所述新视频的起始帧、中间帧和终止帧在所述历史照片中的对应区域以及所述多个第二仿射变换矩阵，对所述历史照片进行裁剪和尺寸调整，得到所述新视频的起始帧、中间帧和终止帧；
对所述新视频的起始帧、中间帧和终止帧按时序进行拼接，得到所述新视频。
10.根据权利要求4所述的方法，
所述多个第一关键点包括所述历史视频的起始帧的四个顶点；
所述多个第二关键点包括所述历史照片的四个顶点，或者，所述多个第二关键点包括将所述历史照片的四个顶点平移预设距离后得到的四个点；
所述目标区域为四边形区域，所述多个边界点包括所述四边形区域的四个顶点。
11.根据权利要求4所述的方法，
其中，所述目标区域为下述区域中的一种：
所述历史照片中的车辆损伤区域；
所述历史照片中车辆的预设部件所在的区域；
所述历史照片中的指定区域。
12.根据权利要求4-11任一项所述的方法，
当所述目标区域的数量为多个时，生成的所述新视频的数量为多个。
13.根据权利要求1-11任一项所述的方法，
所述历史照片的分辨率在预设阈值以上。
14.根据权利要求1-11任一项所述的方法，
所述历史视频和所述历史照片是同一受损车辆的；
或者，所述历史视频和所述历史照片是不同受损车辆的。
15.根据权利要求1-11任一项所述的方法，
所述历史视频的拍摄路径反映了所述历史视频的拍摄方式，其中，所述拍摄方式包括下述方式中的一种或多种：由远及近、由近到远、出现抖动、从左到右、从右到左、从上到下和从下到上。
16.一种车辆受损视频生成装置，包括：
数据获取模块，获取车辆受损的历史视频和历史照片；
第一确定模块，基于预设规则确定所述历史视频的拍摄路径；
第二确定模块，基于所述历史照片确定待生成的新视频的起始拍摄位置和终止拍摄位置；
第三确定模块，基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径；
视频生成模块，基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频。
17.一种电子设备，包括：
处理器；以及
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行以下操作：
获取车辆受损的历史视频和历史照片；
基于预设规则确定所述历史视频的拍摄路径；
基于所述历史照片确定待生成的新视频的起始拍摄位置和终止拍摄位置；
基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径；
基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频。
18.一种计算机可读存储介质，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被包括多个应用程序的电子设备执行时，使得所述电子设备执行以下操作：
获取车辆受损的历史视频和历史照片；
基于预设规则确定所述历史视频的拍摄路径；
基于所述历史照片确定待生成的新视频的起始拍摄位置和终止拍摄位置；
基于所述新视频的起始拍摄位置和终止拍摄位置，以及所述历史视频的拍摄路径，确定所述新视频的拍摄路径；
基于所述历史照片以及所述新视频的起始拍摄位置、终止拍摄位置和拍摄路径，生成所述新视频。
CN202010771422.4A 2020-08-04 2020-08-04 一种车辆受损视频生成方法、装置和设备 Active CN112040144B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010771422.4A CN112040144B (zh) 2020-08-04 2020-08-04 一种车辆受损视频生成方法、装置和设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010771422.4A CN112040144B (zh) 2020-08-04 2020-08-04 一种车辆受损视频生成方法、装置和设备

Publications (2)

Publication Number Publication Date
CN112040144A true CN112040144A (zh) 2020-12-04
CN112040144B CN112040144B (zh) 2022-09-06

Family

ID=73582298

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010771422.4A Active CN112040144B (zh) 2020-08-04 2020-08-04 一种车辆受损视频生成方法、装置和设备

Country Status (1)

Country Link
CN (1) CN112040144B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010212772A (ja) * 2009-03-06 2010-09-24 Panasonic Corp 映像データ送信装置、映像データ受信装置およびそれらを備えた映像伝送システム
US20160173740A1 (en) * 2014-12-12 2016-06-16 Cox Automotive, Inc. Systems and methods for automatic vehicle imaging
CN110430364A (zh) * 2019-08-26 2019-11-08 武汉众果科技有限公司 一种摄影拍照抠图局部动态图合成方法
CN110751646A (zh) * 2019-10-28 2020-02-04 支付宝(杭州)信息技术有限公司 利用车辆视频中的多个图像帧进行损伤识别的方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010212772A (ja) * 2009-03-06 2010-09-24 Panasonic Corp 映像データ送信装置、映像データ受信装置およびそれらを備えた映像伝送システム
US20160173740A1 (en) * 2014-12-12 2016-06-16 Cox Automotive, Inc. Systems and methods for automatic vehicle imaging
CN107211111A (zh) * 2014-12-12 2017-09-26 考科斯汽车有限公司 用于自动车辆成像的系统和方法
CN110430364A (zh) * 2019-08-26 2019-11-08 武汉众果科技有限公司 一种摄影拍照抠图局部动态图合成方法
CN110751646A (zh) * 2019-10-28 2020-02-04 支付宝(杭州)信息技术有限公司 利用车辆视频中的多个图像帧进行损伤识别的方法及装置

Also Published As

Publication number Publication date
CN112040144B (zh) 2022-09-06

Similar Documents

Publication Publication Date Title
US10410397B2 (en) Picture presentation method and apparatus
US10692197B2 (en) Systems and techniques for automatic image haze removal across multiple video frames
US20130063571A1 (en) Image processing apparatus and image processing method
US8619098B2 (en) Methods and apparatuses for generating co-salient thumbnails for digital images
CN106991649A (zh) 对摄像装置所捕获的文档图像进行校正的方法和装置
WO2019056527A1 (zh) 一种拍摄方法及装置
KR20130018330A (ko) 촬상 장치, 화상 처리 방법 및 프로그램을 기록하기 위한 기록 매체
CN112511767B (zh) 一种视频拼接方法及设备、存储介质
US20190355104A1 (en) Image Correction Method and Apparatus
CN111353965B (zh) 图像修复方法、装置、终端及存储介质
CN114418861B (zh) 一种摄像头图像拼接处理方法和系统
US20110038509A1 (en) Determining main objects using range information
CN114119373A (zh) 图像裁剪方法、装置及电子设备
CN112040144B (zh) 一种车辆受损视频生成方法、装置和设备
CN109600667A (zh) 一种基于网格与帧分组的视频重定向的方法
CN113344789A (zh) 图像拼接方法及装置、电子设备、计算机可读存储介质
CN113011432A (zh) 一种二维码的分层显示及识别的方法及设备
CN111246203A (zh) 相机模糊检测方法及装置
JP2008042256A (ja) 画像表示方法、画像表示装置及びプログラム
EP2595393B1 (en) Rectified stereoscopic 3d panoramic picture
CN109587396A (zh) 拍摄方法和拍摄装置
CN114007056A (zh) 一种立体全景图像的生成方法和装置
CN113014820A (zh) 一种处理方法、装置及电子设备
CN112950468A (zh) 图像拼接方法、电子设备及可读存储介质
CN112911152A (zh) 预览图像生成方法、装置、设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant