CN110427810B - 视频定损方法、装置、拍摄端及机器可读存储介质 - Google Patents

Abstract

本发明涉及计算机技术领域，公开了一种视频定损方法、装置、拍摄端及机器可读存储介质，该方法包括：在对定损物拍摄视频时，从该视频中每秒取m帧图像；将单帧图像输入至损伤分割模型中，输出损伤分割结果；在损伤分割结果指示当前视频拍摄画面中出现疑似损伤区域的情况下，输出第一提示，第一提示用于提示用户将疑似损伤区域调整至视频拍摄画面的中心位置并停留至少n秒后结束视频拍摄；以及将拍摄的定损物的视频发送至服务器。本发明可以更好的分析车辆受损部位和损伤程度，提升财险汽车出险理赔流程运营效率，将大幅消减保险公司的成本，预防保险欺诈，同时也可以运用在汽车租赁等领域。

Description

视频定损方法、装置、拍摄端及机器可读存储介质

技术领域

本发明涉及汽车技术领域，尤其涉及一种视频定损方法、装置、拍摄端及机器可读存储介质。

背景技术

目前，对于车辆的损伤区域和损伤程度的判断，现在的方案主要有：

1、依赖人工进行肉眼观测估计。

a)查勘员在车辆事故现场进行现场查勘判断。

b)车主在现场收集事故影像资料，由查勘员利用计算机查看在事故现场拍摄的事故图进行判断。

2、依赖受损区域照片进行分析。

在车辆事故现场拍摄车辆受训区域的照片，使用计算机视觉技术训练自动定损模型，先通过全景照片来定位受损部件，然后用细节照片来分析损伤程度。

现有方案中，查勘员在车辆事故现场进行现场查勘判断，作业流程时间长，车主需要在事故现场等待查勘人员到现场作业，车辆需要停留在现场，容易形成交通堵塞，需要投入大量人工成本，人工定损存在主观因素，容易引入主观偏差。

查勘员利用计算机查看在事故现场拍摄的事故图进行判断的方案，查勘人员需要和车主进行沟通开展定损流程，车主沟通不畅容易引起定损质量下降。需要投入大量人工成本，同时人工定损存在主观因素，容易引入主观偏差。

使用计算机视觉技术根据受损照片分析损伤，一定程度上可以节约人力成本，提升运营效率，但对用户要求较高，可交互性较差，同时容易出现保险欺诈。

发明内容

针对上述现有技术中存在的不足，本发明提供了一种视频定损方法、装置及机器可读存储介质，可解决现有技术中根据受损照片定损对用户要求较高、可交互性差、同时容易出现保险欺诈的技术问题。

本发明第一方面提供了一种视频定损方法，该方法包括：

在对定损物拍摄视频时，从该视频中每秒取m帧图像，其中，m为正整数；

将单帧图像输入至损伤分割模型中，输出损伤分割结果；

在所述损伤分割结果指示当前所述视频拍摄画面中出现疑似损伤区域的情况下，输出第一提示，所述第一提示用于提示用户将所述疑似损伤区域调整至所述视频拍摄画面的中心位置并停留至少n秒后结束视频拍摄，其中，n大于0；以及

将拍摄的所述定损物的视频发送至服务器。

可选的，输出损伤分割结果的步骤包括：

对所述疑似损伤区域进行图像和/或文字标注。

可选的，所述方法还包括：

将所述单帧图像输入至部件分割模型中，以得到所述单帧图像中的部件归类；

将所述部件归类与所述损伤分割结果进行匹配；

输出损伤分割结果的步骤包括：

对所述疑似损伤区域进行图像和文字标注，所述文字标注包括以文字标注所述部件归类。

可选的，所述方法还包括在得到所述单帧图像中的部件归类之后执行以下步骤：

判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第一预设范围内，若是，则输出第二提示，所述第二提示用于提示用户对准所述定损物进行视频拍摄；

判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第二预设范围内，若是，则输出第三提示，所述第三提示用于提示用户靠近所述定损物至预设距离进行视频拍摄；

判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第三预设范围内，若是，则输出第四提示，所述第四提示用于提示用户远离所述定损物至所述预设距离进行视频拍摄；

判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第四预设范围内，若是，则输出第五提示，所述第五提示用于提示用户停止移动以对所述定损物进行视频拍摄。

可选的，输出损伤分割结果的步骤之前包括：

判断所述单帧图像中是否出现模糊图像，若是，则输出第六提示，所述第六提示用于提示用户降低移动速度或者提示图像模糊。

可选的，将拍摄的所述定损物的视频发送至服务器的步骤包括：

从拍摄的所述定损物的视频中提取损伤关键帧；

将所述损伤关键帧发送至所述服务器；

所述方法还包括：

接收所述服务器根据所述损伤关键帧发送的理赔结果；

输出所述理赔结果。

可选的，所述损伤关键帧根据以下步骤确定：

计算拍摄的所述定损物的视频中相邻单帧图像的帧间相似度；

若连续k帧图像的帧间相似度小于相似度范围，则确定所述连续k帧图像为损伤暂停帧，其中，k为正整数；

若所述损伤暂停帧中具有所述疑似损伤区域，则确定具有所述疑似损伤区域的所述损伤暂停帧为所述损伤关键帧。

可选的，将拍摄的所述定损物的视频发送至服务器的步骤还包括：

从拍摄的所述定损物的视频中提取关包含所述定损物的身份信息的帧；

将所述包含所述定损物的身份信息的帧发送至所述服务器。

本发明第二方面提供了一种视频定损装置，该装置包括：

取帧模块，用于在对定损物拍摄视频时，从该视频中每秒取m帧图像，其中，m为正整数；

输出模块，用于将单帧图像输入至损伤分割模型中，输出损伤分割结果；

提示模块，用于在所述损伤分割结果指示当前所述视频拍摄画面中出现疑似损伤区域的情况下，输出第一提示，所述第一提示用于提示用户将所述疑似损伤区域调整至所述视频拍摄画面的中心位置并停留至少n秒后结束视频拍摄，其中，n大于0；以及

发送模块，用于将拍摄的所述定损物的视频发送至服务器。

可选的，所述输出模块还用于对所述疑似损伤区域进行图像和/或文字标注。

可选的，该装置还包括：

部件归类模块，用于将所述单帧图像输入至部件分割模型中，以得到所述单帧图像中的部件归类；

匹配模块，用于将所述部件归类与所述损伤分割结果进行匹配；

所述输出模块还用于对所述疑似损伤区域进行图像和/或文字标注，所述文字标注包括以文字标注所述部件归类。

可选的，该装置在所述部件归类模块得到所述单帧图像中的部件归类之后还包括：

判断模块，用于判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第一预设范围内，若是，则所述提示模块输出第二提示，所述第二提示用于提示用户对准所述定损物进行视频拍摄；

所述判断模块还用于判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第二预设范围内，若是，则所述提示模块输出第三提示，所述第三提示用于提示用户靠近所述定损物至预设距离进行视频拍摄；

所述判断模块还用于判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第三预设范围内，若是，则所述提示模块输出第四提示，所述第四提示用于提示用户远离所述定损物至所述预设距离进行视频拍摄；

所述判断模块还用于判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第四预设范围内，若是，则所述提示模块输出第五提示，所述第五提示用于提示用户停止移动以对所述定损物进行视频拍摄。

可选的，所述判断模块还用于按照预设规则判断所述单帧图像中是否出现模糊图像，若是，则所述提示模块输出第六提示，所述第六提示用于提示用户降低移动速度或者提示图像模糊。

可选的，所述发送模块包括：

帧提取模块，用于从拍摄的所述定损物的视频中提取损伤关键帧；

所述发送模块还用于将所述损伤关键帧发送至所述服务器；

该装置还包括：

理赔结果接收模块，用于接收所述服务器根据所述损伤关键帧发送的理赔结果；

所述输出模块还用于输出所述理赔结果。

可选的，所述帧提取模块包括：

相似度计算模块，用于通过直方图、光流估计或者移动侦测计算相邻所述单帧图像的帧间相似度；

损伤暂停帧确定模块，用于若连续k帧图像的帧间相似度小于相似度范围，则确定所述连续k帧图像为损伤暂停帧，其中，k为正整数；

损伤关键帧确定模块，用于若所述损伤暂停帧中具有所述疑似损伤区域，则确定具有所述疑似损伤区域的所述损伤暂停帧为所述损伤关键帧。

可选的，所述帧提取模块还用于从拍摄的所述定损物的视频中提取关包含所述定损物的身份信息的帧；

所述发送模块还用于将所述包含所述定损物的身份信息的帧发送至所述服务器。

本发明第三方面提供了一种拍摄端，用于对定损物拍摄视频以进行定损，该拍摄端包括上述所述的视频定损装置。

本发明第四方面提供了一种机器可读存储介质，所述机器可读存储介质上存储有指令，所述指令用于使得所述机器可读存储介质能够执行上述所述的视频定损方法。

本发明提供的视频定损方法、装置及机器可读存储介质可以更好的分析车辆受损部位和损伤程度，提升财险汽车出险理赔流程运营效率。将大幅消减保险公司的成本，预防保险欺诈，同时也可以运用在汽车租赁等领域。

附图说明

为了更清楚地说明本发明实施方式或现有技术中的技术方案，下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施方式，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施方式一提供的视频定损方法的流程示意图；

图2为本发明实施方式二提供的视频定损方法的流程示意图；

图3为本发明实施方式三提供的视频定损装置的结构示意图；

图4为本发明实施方式四提供的视频定损装置的结构示意图。

具体实施方式

为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施方式中的附图，对本发明实施方式中的技术方案进行清楚、完整地描述，显然，所描述的实施方式仅仅是本发明一部分实施方式，而非全部实施方式。基于本发明中的实施方式，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施方式，都属于本发明保护的范围。

为方便说明，本发明实施方式中的定损物为车辆，定损物的身份信息为车牌号，通过车牌号就可以从定损数据库中确定定损物的用户信息以及定损物的投保信息，从而通过本发明提供的视频定损方法快速得到定损物的疑似损伤区域、损伤程度以及理赔结果。当定损物没有身份信息或者无法识别身份信息时，即无法确定定损物的用户信息，则通过本发明提供的视频定损方法依然可以快速得到定损物的疑似损伤区域和损伤程度，但是无法得到理赔结果。

可以理解的是，用户对定损物拍摄视频以进行定损的操作拍摄端的方法包括：

S110、从可获取到定损物的身份信息的位置开始拍摄视频。

当定损物没有身份信息或者无法识别身份信息时，则跳过步骤S110，直接进入步骤S120，此时只能得到定损物的损伤结果等信息，但是无法得到理赔结果。

S120、移动到定损物的疑似损伤区域。

较佳的，当用户未寻找到定损物的疑似损伤区域时，则提示用户是否结束视频拍摄，若是，则结束视频拍摄且不执行下一步骤。若否，则继续视频拍摄直到用户在定损物上找到疑似损伤区域。

S130、将疑似损伤区域调整至视频拍摄画面的中心位置并停留至少n秒后结束视频拍摄，其中，n大于0。较佳的，n可取为0.5-5。

通过移动和旋转拍摄端使得视频拍摄画面的中心位置对准疑似损伤区域，较佳的，为了便于说明，视频拍摄画面通常为大矩形，其中心位置可取为长和宽均为该大矩形长和宽的2/3的小矩形，且小矩形的两个长边或短边分别到大矩形的两个长边或短边的距离均为大矩形长边或短边的1/6。

S140、根据拍摄的定损物的视频得到理赔结果。

当检测到定损物的疑似损伤区域没有损伤时，则理赔结果为无。

较佳的，还可根据拍摄的定损物的视频得到定损物的损伤结果等信息。

请参阅图1，图1为本发明实施方式一提供的视频定损方法的流程示意图。

如图1所示，本发明第一方面提供了一种视频定损方法，该方法包括：

S210、在对定损物拍摄视频时，从该视频中每秒取m帧图像，其中，m为正整数。较佳的，m可取为5-15。

S220、将单帧图像输入至损伤分割模型中，输出损伤分割结果。损伤分割结果包括单帧图像中有疑似损伤区域和没有疑似损伤区域。较佳的，将损伤分割结果以图像和/或文字显示在视频拍摄画面中。在单帧图像中有疑似损伤区域时，可以图像覆盖或者图形圈出疑似损伤区域。不论有损还是无损，均可使用文字在视频拍摄画面中作相应提示。

S230、在损伤分割结果指示当前视频拍摄画面中出现疑似损伤区域的情况下，输出第一提示，第一提示用于提示用户将疑似损伤区域调整至视频拍摄画面的中心位置并停留至少n秒后结束视频拍摄，其中，n大于0。较佳的，n可取为0-5。较佳的，n的取值为0-1.5，当n取0时，即只需要将疑似损伤区域调整至视频拍摄画面的中心即可。

为了便于说明，输出的所有提示均包括语音、图像、文字、符号等提示。

较佳的，当损伤分割结果指示当前视频拍摄画面中未出现疑似损伤区域时，则提示用户是否结束视频拍摄，若是，则结束视频拍摄且不执行下一步骤。若否，则继续拍摄视频直到损伤分割结果指示当前视频拍摄画面出现疑似损伤区域。

S240、将拍摄的定损物的视频发送至服务器。较佳的，由于视频数据量太大，拍摄端和服务器传输和处理视频数据耗时长且困难，则可根据拍摄的定损物的视频得到定损物的损伤结果等关键信息，并将该关键信息发送至服务器，从而快速对定损物进行定损并得到理赔结果。

进一步地，S220中输出损伤分割结果的步骤包括：

S221、对疑似损伤区域进行图像和/或文字标注。

较佳的，以特征图像覆盖当前视频拍摄画面中的疑似损伤区域，并以文字标注特征图像，其中，特征图像的形状与疑似损伤区域的形状相同，特征图像的颜色与疑似损伤区域的颜色不同，文字标注为该区域为疑似损伤区域。

请参阅图2，图2为本发明实施方式二提供的视频定损方法的流程示意图。

进一步地，如图2所示，该方法还包括：

S250、将单帧图像输入至部件分割模型中，以得到单帧图像中的部件归类。例如，单帧图像中出现左前门或右前门，只需要得到部件归类为前门即可。

S260、将部件归类与损伤分割结果进行匹配。若单帧图像中同时出现多个部件归类，则将损伤分割结果中的疑似损伤区域匹配到部件归类的位置。例如，单帧图像中同时出现了部件归类前门和后门，而损伤分割结果中的疑似损伤区域在前门，即通过部件归类与损伤分割结果的位置匹配，可确定单帧图像中的前门出现了疑似损伤区域。

S220中输出损伤分割结果的步骤包括：

S222、对疑似损伤区域进行图像和文字标注，文字标注包括以文字标注部件归类。

较佳的，以特征图像覆盖当前视频拍摄画面中的疑似损伤区域，并以文字标注特征图像，其中，文字标注为部件归类为疑似损伤区域。

进一步地，方法还包括在S250中得到单帧图像中的部件归类之后执行以下步骤S270：

S271、判断单帧图像中的所有部件的所有像素与单帧图像的总像素的比例是否位于第一预设范围内，若是，则输出第二提示，第二提示用于提示用户对准定损物进行视频拍摄。

S272、判断单帧图像中的所有部件的所有像素与单帧图像的总像素的比例是否位于第二预设范围内，若是，则输出第三提示，第三提示用于提示用户靠近定损物至预设距离进行视频拍摄。

S273、判断单帧图像中的所有部件的所有像素与单帧图像的总像素的比例是否位于第三预设范围内，若是，则输出第四提示，第四提示用于提示用户远离定损物至预设距离进行视频拍摄。

S274、判断单帧图像中的所有部件的所有像素与单帧图像的总像素的比例是否位于第四预设范围内，若是，则输出第五提示，第五提示用于提示用户停止移动以对定损物进行视频拍摄。

进一步地，S220中输出损伤分割结果的步骤之前包括：

S280、判断单帧图像中是否出现模糊图像，若是，则输出第六提示，第六提示用于提示用户降低移动速度或者提示图像模糊。

进一步地，如图2所示，S240中将拍摄的定损物的视频发送至服务器的步骤包括：

S241、从拍摄的定损物的视频中提取损伤关键帧。

S242、将损伤关键帧发送至服务器。

该方法还包括步骤S290：

S291、接收服务器根据损伤关键帧发送的理赔结果。

S292、输出理赔结果。

进一步地，S241中损伤关键帧根据以下步骤确定：

S2411、通过直方图、光流估计或者移动侦测计算拍摄的定损物的视频中相邻单帧图像的帧间相似度。

S2412、若连续k帧图像的帧间相似度小于相似度范围，则确定连续k帧图像为损伤暂停帧，其中，k为正整数。

若连续k帧图像的帧间相似度大于或等于相似度范围，则执行S280中若是，则输出第六提示，第六提示用于提示用户降低移动速度或者提示图像模糊的步骤。

S2413、若损伤暂停帧中具有疑似损伤区域，则确定具有疑似损伤区域的损伤暂停帧为损伤关键帧。

进一步地，如图2所示，S220中将拍摄的定损物的视频发送至服务器的步骤还包括：

S243、从拍摄的定损物的视频中提取关包含定损物的身份信息的帧。

S244、将包含定损物的身份信息的帧发送至服务器，服务器获取身份信息从而确定车主身份，避免骗保现象的发生。

可以理解的是，本发明还可提供一种服务器的视频定损方法，该方法包括：

S310、获取拍摄端上传的定损物的关键帧。

S320、根据关键帧得到理赔结果。

S330、将理赔结果输出到拍摄端或者移动端。

较佳的，还可定损物的损伤结果等信息输出到拍摄端或者移动端。

其中，拍摄端包括移动端、摄像机以及具有摄像和显示视频拍摄画面的产品，移动端包括手机、笔记本电脑、平板电脑、销售点情报管理系统和车载电脑等可移动且具有显示屏的产品。

进一步地，S320中关键帧包括包含身份信息的帧，则根据关键帧得到理赔结果的步骤包括：

S321、使用图像文字识别技术对包含身份信息的帧进行识别，从而得到定损物的身份信息。

进一步地，S320中关键帧包括损伤关键帧，则根据关键帧得到理赔结果的步骤还包括：

S322、通过部件分割模型对损伤关键帧中疑似损伤区域的部件进行识别并得到分割部件。

S323、获取并将损伤关键帧中预设位置的画面通过重量级损伤分割模型进行损伤分割和类型识别并得到损伤结果。

为了便于说明，视频拍摄画面通常为大矩形，其预设位置可取为长和宽均为该大矩形长和宽的2/3的小矩形，且小矩形的两个长边或短边分别到大矩形的两个长边或短边的距离均为大矩形长边或短边的1/6。

S324、将分割部件与损伤结果融合，得到受损部件和受损类型。

进一步地，S324中得到受损部件和受损类型的步骤之后还包括：

S325、与保险公司的定损数据库连接。

S326、根据受损部件和受损类型从定损数据库中匹配理赔结果并输出到拍摄端或移动端。

本发明提供的视频定损方法、拍摄端、服务器及机器可读存储介质可以更好的分析车辆受损部位和损伤程度，提升财险汽车出险理赔流程运营效率。将大幅消减保险公司的成本，预防保险欺诈，同时也可以运用在汽车租赁等领域。

本发明的创新之处在于用户按照要求对受损车辆拍摄视频，拍摄过程中实时显示损伤判断结果，给用户更好的交互体验，同时通过判断提取所需要的关键帧，拍摄结束后将关键帧输入后台进行损伤部件和损伤程度判断，通过车险匹配最终反馈理赔结果。

本发明提供的视频定损方法的详细介绍如下：

1、视频拍摄要求

用户从车头或者车尾处(可拍摄到车牌信息)开始拍摄，移动到车辆疑似损伤区域，将疑似损伤区域调整至画面中心，暂停一秒，点击结束即可。

2、实时损伤分割

用户在拍摄视频时，每秒取10帧图像输入至损伤分割模型(例如shufflenetv2)中，输出损伤分割结果显示在视频拍摄画面中，并提示用户将疑似损伤区域调整至画面中心，从而给用户更好的交互体验，普通用户(非保险公司工作人员)也可进行定损工作。

3、关键帧提取

由于视频信息量过大，消耗流量过多，因此我们按照一定的规则提取部分帧上传至后台进行精确定损。主要提取的关键帧有：包含车牌信息的帧，损伤关键帧(通过直方图、光流估计或者移动侦测判断帧间相似性，结合实时损伤分割结果，得到所需要的的损伤关键帧)等。

4、车牌识别

使用OCR(OpticalCharacterRecognition，光学字符识别)图像文字识别技术对包含车牌信息的帧进行识别，从而得到受损车辆的车牌信息，防止保险欺诈行为。

5、损伤结果判断

将提取的损伤关键帧上传至服务器，通过部件分割模型对部件进行识别，并取中间2/3处通过更为准确的损伤分割模型进行损伤分割和类型识别，最后将部件分割与损伤结果融合，得到受损部件和类型。

6、匹配理赔结果

根据受损部件和类型，与保险公司连接，匹配理赔结果并输出。

本发明提供的视频定损方法的关键点如下：

视频交互——轻量分割模型：无需额外数据，使用图片精确定损中所使用的部件分割数据和损伤分割数据完成轻量分割模型，包括部件分割模型和损伤分割模型(可使用的模型有shufflnet系列，mobilenet系列等)，拍摄者在拍摄视频时，每秒取10帧图像分别输入两个轻量模型中：

对于损伤分割模型来说，每秒取10帧图像输入至轻量级损伤分割模型(相比于后台服务器精确模型多类损伤分割，该模型仅做两类即有损和无损判断)中，与用户的交互：输出损伤分割结果显示在视频拍摄画面中，并提示用户将损伤区域调整至画面中心。

对于部件分割模型来说，由于轻量模型解释能力有限，为了使得分割结果更加准确可信，相比于后台服务器中的精确定损中有至少大于30个部件的分割判断，可适当对部件进行结合处理，例如“左前门”和“右前门”结合归为一类“前门”，经过结合之后进行十类以内的部件分割判断，对于部件分割的结果，我们可以做如下应用：

a、判断是否有车，通过判断部件所有像素与图片总像素的比例，若比例过小，例如<0.5％，则可以认为图片当中没有车，此时视频交互端提醒用户“请对准车辆”。

b、判断距离远近，同样通过判断部件所有像素与图片总像素的比例ratio，例如0.5％<ratio<40％，则认为车辆距离拍摄者较远，视频交互端提醒用户“请靠近车辆”，40％<ratio<90％认为距离适中，提醒用户适当暂停，大于90％则认为距离过近，提醒用户远离车辆。由此，通过部件分割轻量模型可以同时解决两件事情，检测(是否有车)和分类(远、中、近)，减少了视频端模型压力，同时给用户更好的交互体验，除此之外，还可与损伤分割结果相结合，实时显示初步的损伤判断，即提示用户哪个部件有损伤。

视频交互——帧间判断：视频拍摄者若移动较快则图片容易出现移动模糊，导致我们后期模型的判断不准确，因为在与用户的交互过程中，要采取一定的策略提醒用户，如之前所述我们使用一定的帧间判断规则提取中暂停帧，同样为了节约手机端计算消耗，我们可使用同样的策略，例如直方图，较相邻帧直方图之间的相似性(巴式距离，相关性比较，卡方比较均可)，设定阈值(根据实际实验设定阈值)，若连续几帧(根据实际实验设定)大于该阈值，则认为此时用户移动太快，容易出现模糊图片，因此提醒用户移动太快或图片模糊。不增加额外计算消耗的情况下和用户有更多交互，也保证了后期精确分割的准确性。

可以理解的是，当使用机器人来执行拍摄端操作时，本发明还可以提供一种视频定损的拍摄端操作装置，用于对定损物拍摄视频以进行定损，该装置包括：

开始拍摄模块110，用于从可获取到定损物的身份信息的位置开始拍摄视频。

移动模块120，用于移动到定损物的疑似损伤区域。

调整停留模块130，用于将疑似损伤区域调整至视频拍摄画面的中心位置并停留至少n秒后结束视频拍摄。

理赔结果获取模块140，用于根据拍摄的定损物的视频得到理赔结果。

请参阅图3，图3为本发明实施方式三提供的视频定损装置的结构示意图。

如图3所示，本发明第二方面提供了一种视频定损装置，该装置包括：

取帧模块210，用于在对定损物拍摄视频时，从该视频中每秒取m帧图像，其中，m为正整数。

输出模块220，用于将单帧图像输入至损伤分割模型中，输出损伤分割结果。

提示模块230，用于在损伤分割结果指示当前视频拍摄画面中出现疑似损伤区域的情况下，输出第一提示，第一提示用于提示用户将疑似损伤区域调整至视频拍摄画面的中心位置并停留至少n秒后结束视频拍摄，其中，n大于0。以及

发送模块240，用于将拍摄的定损物的视频发送至服务器。

较佳的，提示模块230与输出模块220可为同一模块，均可用于显示图像、文字、符号等在视频拍摄画面中以提示用户。

进一步地，输出模块220还用于对疑似损伤区域进行图像和/或文字标注。

请参阅图4，图4为本发明实施方式四提供的视频定损装置的结构示意图。

进一步地，如图4所示，该装置还包括：

部件归类模块250，用于将单帧图像输入至部件分割模型中，以得到单帧图像中的部件归类。

匹配模块260，用于将部件归类与损伤分割结果进行匹配。

输出模块220还用于对疑似损伤区域进行图像和/或文字标注，文字标注包括以文字标注部件归类。较佳的，由于拍摄端对每帧图像均进行分割判断，因此，图像和/或文字标注可看做一直显示在视频拍摄画面中。

进一步地，该装置在部件归类模块250得到单帧图像中的部件归类之后还包括：

判断模块270，用于判断单帧图像中的所有部件的所有像素与单帧图像的总像素的比例是否位于第一预设范围内，若是，则提示模块230输出第二提示，第二提示用于提示用户对准定损物进行视频拍摄。

判断模块270还用于判断单帧图像中的所有部件的所有像素与单帧图像的总像素的比例是否位于第二预设范围内，若是，则提示模块230输出第三提示，第三提示用于提示用户靠近定损物至预设距离进行视频拍摄。

判断模块270还用于判断单帧图像中的所有部件的所有像素与单帧图像的总像素的比例是否位于第三预设范围内，若是，则提示模块230输出第四提示，第四提示用于提示用户远离定损物至预设距离进行视频拍摄。

判断模块270还用于判断单帧图像中的所有部件的所有像素与单帧图像的总像素的比例是否位于第四预设范围内，若是，则提示模块230输出第五提示，第五提示用于提示用户停止移动以对定损物进行视频拍摄。

进一步地，判断模块270还用于按照预设规则判断单帧图像中是否出现模糊图像，若是，则提示模块230输出第六提示，第六提示用于提示用户降低移动速度或者提示图像模糊。

进一步地，发送模块240包括：

帧提取模块241，用于从拍摄的定损物的视频中提取损伤关键帧。

发送模块240还用于将损伤关键帧发送至服务器。

该装置还包括：

理赔结果接收模块280，用于接收服务器根据损伤关键帧发送的理赔结果。

输出模块220还用于输出理赔结果。

进一步地，帧提取模块241包括：

相似度计算模块2411，用于通过直方图、光流估计或者移动侦测计算相邻单帧图像的帧间相似度。

损伤暂停帧确定模块2412，用于若连续k帧图像的帧间相似度小于相似度范围，则确定连续k帧图像为损伤暂停帧，其中，k为正整数。

损伤关键帧确定模块2413，用于若损伤暂停帧中具有疑似损伤区域，则确定具有疑似损伤区域的损伤暂停帧为损伤关键帧。

进一步地，帧提取模块241还用于从拍摄的定损物的视频中提取关包含定损物的身份信息的帧。

发送模块22还用于将包含定损物的身份信息的帧发送至服务器。

可以理解的是，本发明还可提供一种服务器的视频定损装置，该装置包括：

关键帧获取模块310，用于获取拍摄端上传的定损物的关键帧。

理赔结果计算模块320，用于根据关键帧得到理赔结果。

理赔结果输出模块330，用于将理赔结果输出到拍摄端或者移动端。

进一步地，关键帧包括包含身份信息的帧，则理赔结果计算模块320包括：

身份信息提取模块321，用于使用图像文字识别技术对包含身份信息的帧进行识别，从而得到定损物的身份信息。

进一步地，关键帧包括损伤关键帧，则理赔结果计算模块320还包括：

部件分割模块322，用于通过部件分割模型对损伤关键帧中疑似损伤区域的部件进行识别并得到分割部件。

损伤结果计算模块323，用于获取并将损伤关键帧中预设位置的画面通过重量级损伤分割模型进行损伤分割和类型识别并得到损伤结果。

融合模块324，用于将分割部件与损伤结果融合，得到受损部件和受损类型。

进一步地，融合模块324之后还包括：

连接模块325，用于与保险公司的定损数据库连接。

理赔结果匹配模块326，用于根据受损部件和受损类型从定损数据库中匹配理赔结果并输出。

本发明第三方面还提供了一种拍摄端，用于对定损物拍摄视频以进行定损，该拍摄端包括上述所述视频定损装置。

本发明第四方面还提供了一种机器可读存储介质，所述机器可读存储介质上存储有指令，所述指令用于使得所述机器可读存储介质能够执行上述所述视频定损方法。

本发明提供的视频定损方法、装置、拍摄端及机器可读存储介质可以更好的分析车辆受损部位和损伤程度，提升财险汽车出险理赔流程运营效率。将大幅消减保险公司的成本，预防保险欺诈，同时也可以运用在汽车租赁等领域。

在上述实施方式中，对各个实施方式的描述都各有侧重，某个实施方式中没有详述的部分，可以参见其它实施方式的相关描述。以上为对本发明所提供的视频定损方法、装置、拍摄端及机器可读存储介质的描述，对于本领域的一般技术人员，依据本发明实施方式的思想，在具体实施方式及应用范围上均会有改变之处，综上，本说明书内容不应理解为对本发明的限制。

所述视频定损装置包括处理器和存储器，上述取帧模块210、输出模块220、提示模块230、发送模块240等均作为程序单元存储在存储器中，由处理器执行存储在存储器中的上述程序单元来实现相应的功能。

处理器中包含内核，由内核去存储器中调取相应的程序单元。内核可以设置一个或以上，通过调整内核参数来同时处理多个图像。

存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)，存储器包括至少一个存储芯片。

本发明实施例提供了一种存储介质，其上存储有程序，该程序被处理器执行时实现所述本发明提供的视频定损方法。

本发明实施例提供了一种设备，设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序，处理器执行程序时实现以下步骤：上述本发明提供的所述视频定损方法。本文中的设备可以是服务器、PC、PAD、手机等。

本申请还提供了一种计算机程序产品，当在数据处理设备上执行时，适于执行初始化有如上述本发明提供的视频定损方法步骤的程序。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。

存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。

还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。

本领域技术人员应明白，本申请的实施例可提供为方法、系统或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (12)

1.一种视频定损方法，其特征在于，该方法包括：

从可获取到定损物的身份信息的位置开始拍摄视频；

在对定损物拍摄视频时，从该视频中每秒取m帧图像，其中，m为正整数；

将单帧图像输入至损伤分割模型中，输出损伤分割结果；在所述损伤分割结果指示当前所述视频拍摄画面中出现疑似损伤区域的情况下，输出第一提示，所述第一提示用于提示用户将所述疑似损伤区域调整至所述视频拍摄画面的中心位置并停留至少n秒后结束视频拍摄，其中，n大于0；以及

将拍摄的所述定损物的视频发送至服务器；

将所述单帧图像输入至部件分割模型中，以得到所述单帧图像中的部件归类；

将所述部件归类与所述损伤分割结果进行匹配，若所述单帧图像中同时出现多个部件归类，则将所述损伤分割结果中的疑似损伤区域匹配到所述部件归类的位置；

接收所述服务器根据所述损伤关键帧发送的理赔结果；以及

输出所述理赔结果，其中输出损伤分割结果的步骤包括：

对所述疑似损伤区域进行图像和文字标注，所述文字标注包括以文字标注所述部件归类；以及

将拍摄的所述定损物的视频发送至服务器的步骤包括：

从拍摄的所述定损物的视频中提取损伤关键帧；

将所述损伤关键帧发送至所述服务器；其中

所述损伤关键帧根据以下步骤确定：

计算拍摄的所述定损物的视频中相邻单帧图像的帧间相似度；

若连续k帧图像的帧间相似度小于相似度范围，则确定所述连续k帧图像为损伤暂停帧，其中，k为正整数；

若所述损伤暂停帧中具有所述疑似损伤区域，则确定具有所述疑似损伤区域的所述损伤暂停帧为所述损伤关键帧；

若连续k帧图像的帧间相似度大于或等于相似度范围，则输出第六提示，第六提示用于提示用户降低移动速度或者提示图像模糊的步骤。

2.根据权利要求1所述的方法，其特征在于，输出损伤分割结果的步骤包括：

对所述疑似损伤区域进行图像和/或文字标注。

3.根据权利要求1所述的方法，其特征在于，所述方法还包括在得到所述单帧图像中的部件归类之后执行以下步骤：

判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第一预设范围内，若是，则输出第二提示，所述第二提示用于提示用户对准所述定损物进行视频拍摄；

判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第二预设范围内，若是，则输出第三提示，所述第三提示用于提示用户靠近所述定损物至预设距离进行视频拍摄；

判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第三预设范围内，若是，则输出第四提示，所述第四提示用于提示用户远离所述定损物至所述预设距离进行视频拍摄；

判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第四预设范围内，若是，则输出第五提示，所述第五提示用于提示用户停止移动以对所述定损物进行视频拍摄。

4.根据权利要求3所述的方法，其特征在于，输出损伤分割结果的步骤之前包括：

判断所述单帧图像中是否出现模糊图像，若是，则输出第六提示，所述第六提示用于提示用户降低移动速度或者提示图像模糊。

5.根据权利要求1所述的方法，其特征在于，将拍摄的所述定损物的视频发送至服务器的步骤还包括：

从拍摄的所述定损物的视频中提取关包含所述定损物的身份信息的帧；

将所述包含所述定损物的身份信息的帧发送至所述服务器。

6.一种视频定损装置，其特征在于，该装置包括：

取帧模块，用于从可获取到定损物的身份信息的位置开始拍摄视频，在对定损物拍摄视频时，从该视频中每秒取m帧图像，其中，m为正整数；

输出模块，用于将单帧图像输入至损伤分割模型中，输出损伤分割结果；

提示模块，用于在所述损伤分割结果指示当前所述视频拍摄画面中出现疑似损伤区域的情况下，输出第一提示，所述第一提示用于提示用户将所述疑似损伤区域调整至所述视频拍摄画面的中心位置并停留至少n秒后结束视频拍摄，其中，n大于0；以及

发送模块，用于将拍摄的所述定损物的视频发送至服务器；

部件归类模块，用于将所述单帧图像输入至部件分割模型中，以得到所述单帧图像中的部件归类；

匹配模块，用于将所述部件归类与所述损伤分割结果进行匹配，若所述单帧图像中同时出现多个部件归类，则将所述损伤分割结果中的疑似损伤区域匹配到所述部件归类的位置；

理赔结果接收模块，用于接收所述服务器根据所述损伤关键帧发送的理赔结果，其中

所述输出模块还用于输出所述理赔结果；

所述输出模块还用于对所述疑似损伤区域进行图像和/或文字标注，所述文字标注包括以文字标注所述部件归类；以及

所述发送模块包括：

帧提取模块，用于从拍摄的所述定损物的视频中提取损伤关键帧；

所述发送模块还用于将所述损伤关键帧发送至所述服务器；其中

所述帧提取模块包括：

相似度计算模块，用于通过直方图、光流估计或者移动侦测计算相邻所述单帧图像的帧间相似度；

损伤暂停帧确定模块，用于若连续k帧图像的帧间相似度小于相似度范围，则确定所述连续k帧图像为损伤暂停帧，其中，k为正整数；若连续k帧图像的帧间相似度大于或等于相似度范围，则输出第六提示，第六提示用于提示用户降低移动速度或者提示图像模糊的步骤；

损伤关键帧确定模块，用于若所述损伤暂停帧中具有所述疑似损伤区域，则确定具有所述疑似损伤区域的所述损伤暂停帧为所述损伤关键帧。

7.根据权利要求6所述的装置，其特征在于，所述输出模块还用于对所述疑似损伤区域进行图像和/或文字标注。

8.根据权利要求7所述的装置，其特征在于，该装置在所述部件归类模块得到所述单帧图像中的部件归类之后还包括：

判断模块，用于判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第一预设范围内，若是，则所述提示模块输出第二提示，所述第二提示用于提示用户对准所述定损物进行视频拍摄；

所述判断模块还用于判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第二预设范围内，若是，则所述提示模块输出第三提示，所述第三提示用于提示用户靠近所述定损物至预设距离进行视频拍摄；

所述判断模块还用于判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第三预设范围内，若是，则所述提示模块输出第四提示，所述第四提示用于提示用户远离所述定损物至所述预设距离进行视频拍摄；

所述判断模块还用于判断单帧图像中的所有部件的所有像素与所述单帧图像的总像素的比例是否位于第四预设范围内，若是，则所述提示模块输出第五提示，所述第五提示用于提示用户停止移动以对所述定损物进行视频拍摄。

9.根据权利要求8所述的装置，其特征在于，所述判断模块还用于按照预设规则判断所述单帧图像中是否出现模糊图像，若是，则所述提示模块输出第六提示，所述第六提示用于提示用户降低移动速度或者提示图像模糊。

10.根据权利要求6所述的装置，其特征在于，所述帧提取模块还用于从拍摄的所述定损物的视频中提取关包含所述定损物的身份信息的帧；

所述发送模块还用于将所述包含所述定损物的身份信息的帧发送至所述服务器。

11.一种拍摄端，其特征在于，用于对定损物拍摄视频以进行定损，该拍摄端包括如权利要求6至10中任一项所述的视频定损装置。

12.一种机器可读存储介质，其特征在于，所述机器可读存储介质上存储有指令，所述指令用于使得所述机器可读存储介质能够执行根据权利要求1至5中任一项所述的视频定损方法。

Images