CN109145903A - 一种图像处理方法和装置 - Google Patents

一种图像处理方法和装置 Download PDF

Info

Publication number
CN109145903A
CN109145903A CN201810961701.XA CN201810961701A CN109145903A CN 109145903 A CN109145903 A CN 109145903A CN 201810961701 A CN201810961701 A CN 201810961701A CN 109145903 A CN109145903 A CN 109145903A
Authority
CN
China
Prior art keywords
image
target
user
image processing
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810961701.XA
Other languages
English (en)
Inventor
郭昕
程远
蒋晨
鲁志红
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Advanced New Technologies Co Ltd
Advantageous New Technologies Co Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201810961701.XA priority Critical patent/CN109145903A/zh
Publication of CN109145903A publication Critical patent/CN109145903A/zh
Priority to TW108119114A priority patent/TWI709091B/zh
Priority to SG11202011405YA priority patent/SG11202011405YA/en
Priority to EP19763143.5A priority patent/EP3777122B1/en
Priority to PCT/US2019/047389 priority patent/WO2020041399A1/en
Priority to US16/547,735 priority patent/US20200065632A1/en
Priority to US16/776,545 priority patent/US10984293B2/en
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/08—Insurance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/17—Image acquisition using hand-held instruments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/98—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G06V10/993—Evaluation of the quality of the acquired pattern
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/08—Detecting or categorising vehicles

Abstract

本说明书实施例公开了一种图像处理方法和装置，所述方法在移动设备端执行，所述移动设备包括摄像头，所述方法包括：根据用户指令，通过所述摄像头采集事故车辆的视频流；获取所述视频流中的当前帧的图像；通过将所述图像输入预定分类模型，确定所述图像是否满足预定标准；在所述图像满足所述预定标准的情况下，通过将所述图像输入目标检测及分割模型，在所述图像中添加目标框和/或目标分割信息，其中所述目标框和目标分割信息都与所述车辆的车辆部件和车辆损伤中的至少之一相对应；以及向所述用户示出所述目标框和/或目标分割信息。

Description

一种图像处理方法和装置
技术领域
本说明书实施例涉及图像处理技术领域，更具体地，涉及用于引导用户拍摄车辆定损照片的图片处理方法和装置。
背景技术
在常规的车险理赔场景中,保险公司需要派出专业的查勘定损人员到事故现场进行现场查勘定损，给出车辆的维修方案和赔偿金额，拍摄现场照片，并将定损照片留档以供核查人员核损核价。由于需要人工查勘定损，保险公司需要投入大量的人力成本，和专业知识的培训成本。从普通用户的体验来说，理赔流程由于等待人工查勘员现场拍照、定损员在维修地点定损、核损人员在后台核损，理赔周期较长。
随着互联网的发展，出现一种理赔方案，其中，通过用户在现场拍摄车损照片，并将所述照片上传至服务器，从而通过算法或人工基于所述车损照片进行定损和理赔。然而，在该方案中，通常对拍摄的车损照片有一定的要求。例如，通常需要用户由远及近地对车辆损伤进行拍摄，另外，对照片的清晰度、亮度、拍摄角度等都有一定要求。针对这样的需求，在现有技术中，由保险公司客服通过电话、网络等方式，远程指导用户拍摄用于定损的照片。
因此，需要一种更有效的引导用户拍摄车辆定损照片的方案。
发明内容
本说明书实施例旨在提供一种更有效的图像处理方法和装置，以解决现有技术中的不足。
为实现上述目的，本说明书一个方面提供一种图像处理方法，所述方法在移动设备端执行，所述移动设备包括摄像头，所述方法包括：
根据用户指令，通过所述摄像头采集事故车辆的视频流；
获取所述视频流中的当前帧的图像；
通过将所述图像输入预定分类模型，确定所述图像是否满足预定标准，其中，所述预定分类模型包括用于移动设备端的卷积神经网络；
在所述图像满足所述预定标准的情况下，通过将所述图像输入目标检测及分割模型，在所述图像中添加目标框和/或目标分割信息，其中所述目标框和目标分割信息都与所述车辆的车辆部件和车辆损伤中的至少之一相对应，其中，所述目标检测及分割模型包括用于移动设备端的卷积神经网络；以及
向所述用户示出所述目标框和/或目标分割信息。
在一个实施例中，所述图像处理方法还包括，在所述图像不满足所述预定标准的情况下，基于所述模型的分类结果，对所述用户进行相应的提示。
在一个实施例中，在所述图像处理方法中，所述预定分类模型进行以下至少一种关于所述图像的分类：是否模糊、是否包括车辆损伤、是否光照充足、拍摄角度是否偏斜、以及拍摄距离是否合适。
在一个实施例中，所述图像处理方法还包括，在通过所述摄像头采集事故车辆的视频流之前，向用户展示拍摄流程。
在一个实施例中，所述图像处理方法还包括，在添加目标框和/或目标分割信息之后，基于所述目标框和/或目标分割信息，对所述用户进行相应的提示。
在一个实施例中，在所述图像处理方法中，基于所述目标框和/或目标分割信息，对所述用户进行相应的提示包括，基于所述目标框和/或目标分割信息，提示用户前进或后退。
在一个实施例中，在所述图像处理方法中，基于所述目标框和/或目标分割信息，对所述用户进行相应的提示包括，基于所述目标框和/或目标分割信息，提示用户进行拍摄，以获取与所述当前帧的图像对应的定损照片。
在一个实施例中，所述图像处理方法还包括，在获取与所述当前帧的图像对应的定损照片之后，将所述定损照片上传给服务器。
在一个实施例中，所述图像处理方法还包括，在获取与所述当前帧的图像对应的定损照片之后，基于所述视频流，获取所述当前帧的图像与第一图像的关联关系，所述第一图像为所述视频流中的在所述当前帧之前帧的经用户拍摄的图像。
在一个实施例中，在所述图像处理方法中，所述关联关系包括所述当前帧的图像与所述第一图像之间的以下至少一项关系：光流、映射矩阵、以及位置角度变换关系。
在一个实施例中，所述图像处理方法还包括，在获取所述当前帧的图像与第一图像的关联关系之后，将所述关联关系上传给服务器。
在一个实施例中，所述图像处理方法中，所述预定分类模型和所述目标检测及分割模型包括共用的用于移动设备端的卷积神经网络。
本说明书另一方面提供一种图像处理装置，所述装置在移动设备端实施，所述移动设备包括摄像头，所述装置包括：
采集单元，配置为，根据用户指令，通过所述摄像头采集事故车辆的视频流；
第一获取单元，配置为，获取所述视频流中的当前帧的图像；
确定单元，配置为，通过将所述图像输入预定分类模型，确定所述图像是否满足预定标准，其中，所述预定分类模型包括用于移动设备端的卷积神经网络；
添加单元，配置为，在所述图像满足所述预定标准的情况下，通过将所述图像输入目标检测及分割模型，在所述图像中添加目标框和/或目标分割信息，其中所述目标框和目标分割信息都与所述车辆的车辆部件和车辆损伤中的至少之一相对应，其中，所述目标检测及分割模型包括用于移动设备端的卷积神经网络；以及
示出单元，配置为，向所述用户示出所述目标框和/或目标分割信息。
在一个实施例中，所述图像处理装置还包括第一提示单元，配置为，在所述图像不满足所述预定标准的情况下，基于所述模型的分类结果，对所述用户进行相应的提示。
在一个实施例中，所述图像处理装置还包括展示单元，配置为，在通过所述摄像头采集事故车辆的视频流之前，向用户展示拍摄流程。
在一个实施例中，所述图像处理装置还包括第二提示单元，配置为，在添加目标框和/或目标分割信息之后，基于所述目标框和/或目标分割信息，对所述用户进行相应的提示。
在一个实施例中，在所述图像处理装置中，所述第二提示单元还配置为，基于所述目标框和/或目标分割信息，提示用户前进或后退。
在一个实施例中，在所述图像处理装置中，所述第二提示单元还配置为，基于所述目标框和/或目标分割信息，提示用户进行拍摄，以获取与所述当前帧的图像对应的定损照片。
在一个实施例中，所述图像处理装置还包括第一上传单元，配置为，在获取与所述当前帧的图像对应的定损照片之后，将所述定损照片上传给服务器。
在一个实施例中，所述图像处理装置还包括第二获取单元，配置为，在获取与所述当前帧的图像对应的定损照片之后，基于所述视频流，获取所述当前帧的图像与第一图像的关联关系，所述第一图像为所述视频流中的在所述当前帧之前帧的经用户拍摄的图像。
在一个实施例中，所述图像处理装置还包括第二上传单元，配置为，在获取所述当前帧的图像与第一图像的关联关系之后，将所述关联关系上传给服务器。
本说明书另一方面提供一种计算设备，包括存储器和处理器，其特征在于，所述存储器中存储有可执行代码，所述处理器执行所述可执行代码时，实现上述任一项图像处理方法。
在根据本说明书实施例的图像处理方案中，通过低计算量的图像分类算法，可以有效过滤实际视频流中模糊、光线较差、非车损图等图片，帮助用户确认哪些图是可以拍摄的；通过图像检测和分割算法可以帮助用户认知哪些图片是算法可以识别的，并且给出前进或者后退提示，以最终达到实际可用的程度；同时利用视频流的特点，通过多种算法计算用户拍摄的图之间的关联关系，提供更为丰富可靠的信息给后台算法引擎，得到更为精准鲁棒的效果。
附图说明
通过结合附图描述本说明书实施例，可以使得本说明书实施例更加清楚：
图1示出了根据本说明书实施例的图像处理系统100的示意图；
图2示出根据本说明书实施例的一种图像处理方法的流程图；
图3示出了根据模型分类结果在手机显示屏上进行文字提示的示意图；
图4示意示出了在显示屏上示出所述目标框和/或目标分割信息的效果图；
图5示出映射矩阵的映射效果；以及
图6示出根据本说明书实施例的一种图像处理装置600。
具体实施方式
下面将结合附图描述本说明书实施例。
图1示出了根据本说明书实施例的图像处理系统100的示意图。如图1所示，系统100包括移动设备11和服务器12。移动设备11例如为手机、可通信的智能设备等。服务器12例如为保险公司用于处理定损照片的服务器。移动设备11包括摄像头111和显示器113，另外，移动设备11中部署有移动端的算法模型112。其中，算法模型112中包括分类模型1121、目标检测及分割模型1122。该系统用于引导用户拍摄车辆定损照片以上传给服务器进行处理。例如在车辆事故现场中，将不需要保险公司的定损人员到达现场，只需要出险的车主使用移动设备11按照用于理赔的APP的提示进行拍摄，即可获取合格的定损照片上传给服务器12。
在用户进行拍摄的过程中，首先，用户例如通过显示器113(例如触屏显示屏)上的按钮打开用于车险理赔的APP中的拍摄界面(即向摄像头发出指令)。在拍摄界面下，APP调用摄像头111采集视频流，将该视频流输入算法模型112进行处理，同时在显示器113上显示该视频流。算法模型112中包括分类模型1121、目标检测及分割模型1122。分类模型1121用于对输入的图像帧进行基本分类，例如是否模糊，光线是否充足等。目标检测及分割模型1122用于在输入的图像帧上添加目标框和/或分割信息，所述分割信息示出目标像素级分割结果。在将视频流中的当前帧输入算法模型112之后，首先通过分类模型1121对当前帧图像进行分类，并基于分类结果在显示器113上提示用户进行相应操作，如稳定相机等。在分类模型1121对当前帧图像的分类结果符合预定标准时，通过目标检测及分割模型1122对该图像添加目标框和/或分割信息，在显示器113上同时显示的该帧图像上显示该目标框和/或分割信息，并相应地提示用户，例如提示用户前进或后退等。当目标检测及分割模型1122的结果符合预定标准时，在显示器113上提示用户进行拍摄。用户通过点击显示器113上的拍摄按钮进行拍摄，从而获取合格的定损照片。当用户结束拍摄之后，将拍摄的全部定损照片上传给服务器12。在服务器12中，通过训练好的定损算法模型对用户上传的定损照片进行处理，从而获取定损结果。
图1所示系统100的结构仅是示意性的，根据本说明书实施例的系统不限于图1所示的结构。例如，显示器可以不是触屏的、在服务器12中不一定通过算法获取定损结果，也可以基于定损照片，人工确定定损结果。另外，所述算法模型112中还可以包括用于获取视频流中各帧之间的关联关系的各种算法，以获取拍摄的多张定损照片之间的关联关系。
图2示出根据本说明书实施例的一种图像处理方法的流程图。所述方法在移动设备端执行，所述移动设备包括摄像头，所述方法包括：
在步骤S202，根据用户指令，通过所述摄像头采集事故车辆的视频流；
在步骤S204，获取所述视频流中的当前帧的图像；
在步骤S206，通过将所述图像输入预定分类模型，确定所述图像是否满足预定标准，其中，所述预定分类模型包括用于移动设备端的卷积神经网络；
在步骤S208，在所述图像满足所述预定标准的情况下，通过将所述图像输入目标检测及分割模型，在所述图像中添加目标框和/或目标分割信息，其中所述目标框和目标分割信息都与所述车辆的车辆部件和车辆损伤中的至少之一相对应，其中，所述目标检测及分割模型包括用于移动设备端的卷积神经网络；以及
在步骤S210，向所述用户示出所述目标框和/或目标分割信息。
首先，在步骤S202，根据用户指令，通过所述摄像头采集事故车辆的视频流。如上文所述，上述移动设备例如为手机。用户例如通过手机中安装的车险理赔APP进行事故车辆的定损照片的拍摄。用户例如通过所述APP中的相机图标打开拍摄界面，并同时将摄像头对准事故车辆。在打开拍摄界面之后，与手机的相机拍摄界面类似，手机屏幕上显示的是摄像头采集到的图像，并且还显示拍摄照片的按钮，而通过摄像头连续采集的图像形成视频流。APP当如上所述在手机屏幕上显示视频流的同时，还实时将该视频流输入手机端APP中部署的各个算法模型。该摄像头可设定为每隔预定时段(例如125ms)采集一帧图像，以预留出算法模型的运算时间。
在一个实施例中，在用户进入拍摄界面之后，APP首先在显示屏上向用户展示拍摄的大致流程，帮助用户建立起对整个流程步骤的了解，然后再在屏幕上显示通过摄像头采集的视频流。例如，可通过画面、文字、声音等形式展示几个过程：根据APP提示进行操作，根据APP提示拍摄照片，上传照片等。
在步骤S204，获取所述视频流中的当前帧的图像。所述视频流中的当前帧即摄像头当前采集到的图像，也即手机显示屏上当前显示的图像。APP在通过摄像头采集车辆的视频流之后，可根据模型处理时间确定获取所述视频流中的哪些帧用于输入模型，例如，可获取视频流中的每帧图像进行模型分析，也可在视频流中每隔几帧获取一帧图像用于输入模型进行分析。
在步骤S206，通过将所述图像输入预定分类模型，确定所述图像是否满足预定标准，其中，所述预定分类模型包括用于移动设备端的卷积神经网络。
如上文参考图1所述，可在手机端部署轻量级的图像分类模型，以对视频流中的车辆的图像快速进行本地处理。例如，所述预定分类模型例如是使用MobileNet v2、ShuffleNet、SqueezeNet等包括卷积神经网络的移动端模型训练的多任务分类模型。例如，可通过使用大量的带标签的车损照片训练该分类模型，其中，车损照片可包含与是否模糊、是否包括车辆损伤、是否光照充足、拍摄角度是否偏斜、拍摄距离是否合适等分别相关的多个标签，以进行多任务学习。在上述例如MobileNet v2的移动端模型中，通过对传统的二维卷积网络进行优化，可以有效地减少模型参数、加快运算效率，从而可以在移动端部署这类算法。所述优化例如包括，通过使用多个小卷积核的叠加来达到和大卷积核相同的效果，而使得所使用的参数以指数倍率下降；通过使用深度可分离卷积(depth-wise separableconvolution)来替代一般的二维卷积操作，以减少参数数量，等等。
通过如上所述训练的分类模型例如可进行以下至少一种关于所述图像的分类：是否模糊、是否包括车辆损伤、是否光照充足、以及拍摄角度是否偏斜(如拍摄角度是否是俯拍、斜拍等偏斜角度)、以及拍摄距离是否合适，等等。从而，基于该分类模型的分类结果，分析图像是否满足预定的车辆定损照片的基本要求。可以理解，所述分类模型执行的对图像的分类不限于上述列出的几种，可根据需要增加相应的分类。
在所述图像不满足所述预定标准的情况下，APP可基于所述模型的分类结果，对所述用户进行相应的提示。
例如，当通过分类模型判断所述图像模糊时，可对用户提示：图像模糊，请稳定相机。当通过所述分类模型判断所述图像不包括车辆损伤时，可提醒用户将摄像头对准损伤位置。当通过所述分类模型判断所述图像光照不足时，可提醒用户光照不足。当通过所述分类模型判断所述图像的拍摄角度太偏时，可提醒用户正对损伤位置进行拍摄。当拍摄距离太远时，可提醒用户靠近车辆，等等。
上述提示可通过在显示屏上用文字显示出来进行提示，也可通过语音的形式进行提示，或者可同时显示文字并播放相应的语音进行提示。图3示出了根据模型分类结果在手机显示屏上进行文字提示的示意图。如图3所示，在打开拍摄界面之后，通过分类模型检测获得当前帧图像中拍摄距离较远，并基于该检测结果，在显示屏下方进行提示“距离太远，请靠近车辆”。
在步骤S208，在所述图像满足所述预定标准的情况下，通过将所述图像输入目标检测及分割模型，在所述图像中添加目标框和/或目标分割信息，其中所述目标框和目标分割信息都与所述车辆的车辆部件和车辆损伤中的至少之一相对应，其中，所述目标检测及分割模型包括用于移动设备端的卷积神经网络。
如上文参考图1所述，可在手机端部署目标检测及分割模型，以用于在手机端对视频流中的车辆的部件和损伤进行检测，并在手机显示屏上示出目标框和目标分割信息。所述目标检测及分割模型是用于移动端的轻量化的卷积神经网络模型，其例如通过MobileNet v2+SSDLite而实现，或者还可以通过MobileNet v2+DeepLab v3、MaskRCNN等实现。在一个实施例中，所述目标检测及分割模型与上述分类模型包括共用的底层的卷积神经网络。在一个实施例中，所述目标检测及分割模型可通过大量加标注(目标框或分割信息)的车辆损伤图像进行训练获得。其中，在所述训练样本中针对车辆的部件、或损伤区域进行标注，从而可训练出用于针对车辆部件和车辆损伤的目标检测及分割模型。
在所述图像满足上述车辆定损照片的基本标准之后，通过将该图像输入例如如上所述训练的目标检测及分割模型，该目标检测及分割模型可自动检测出所述图像中的车辆部件和/或车辆损伤，并在目标位置添加目标框和/或目标分割信息。
在步骤S210，向所述用户示出所述目标框和/或目标分割信息。
当在模型中对所述图像添加了目标框和/或目标分割信息之后，可通过手机显示屏在当前显示的图像上示出所述目标框和/或目标分割信息。例如，可通过不同颜色示出不同部件(或不同损伤)的目标框，可通过不同颜色显示不同部件(或不同损伤)，以示出不同部件(或不同损伤)的分割信息。图4示意示出了在显示屏上示出所述目标框和/或目标分割信息的效果图。如图4中所示，不同灰度表示不同的颜色，例如，在左前轮和左前灯分别添加不同颜色的目标框。还例如，以不同颜色分别填充左前翼子板和左前门(所述不同颜色即目标分割信息)。在本说明书实施例中，可以对各个车辆部件(或损伤)同时进行目标检测和目标分割，也可以例如对各个车辆部件进行目标检测，对各个损伤进行目标分割等，以对部件和损伤区分显示。
通过使用手机端的目标检测及分割模型，直接在手机端对上述当前帧的图像的车辆损伤以及部件进行检测，并在手机显示屏上进行可视化，有助于用户建立直观的感受，知道目前拍摄的照片在服务器端会被大致检测出什么结果，知道哪些图可以通过算法准确获取部件信息，哪些图可以通过算法准确获取损伤信息。用户可根据显示屏上显示的目标框和目标分割信息对拍摄进行适当调整，例如通过移动手机位置，使得在显示屏上显示损伤对应的目标框，从而进行定损照片的拍摄。
在一个实施例中，在对所述图像添加目标框和/或目标分割信息之后，基于所述目标框和/或目标分割信息，对所述用户进行相应的提示。例如，根据图像上是否包括损伤的目标框和/或目标分割信息、以及检测的部件、损伤数目等信息，提示用户前进或后退。当APP基于目标检测及分割模型对图像的处理结果，确定该图像符合定损照片的预定要求时，可提示用户进行拍摄。从而，用户通过点击拍摄界面的拍摄按钮，可获取与当前帧图像对应的车辆定损照片。在用户点击了拍摄按钮之后，APP可将用户拍摄的定损照片保存到手机相册中、或APP中。APP在获取所述定损照片之后，可将该定损照片自动上传给服务器，以可以基于用户的操作上传给服务器。用户在拍摄界面下可移动手机对准车辆上多个车损位置，并可如上所述基于APP的提示进行多次拍摄，从而获取多张定损照片。APP可以在用户拍摄完全部定损照片之后，将这些多张定损照片一起上传，也可以在每次拍摄一张定损照片之后，上传该单张定损照片。
在一个实施例中，图2所示的方法还包括，在获取与所述当前帧的图像对应的定损照片之后，基于所述视频流，获取所述当前帧的图像与第一图像的关联关系，所述第一图像为所述视频流中的在所述当前帧之前帧的经用户拍摄的图像。也就是说，APP可基于视频流获取基于该视频流拍摄的多张定损照片之间的关联关系。如上文参考图1所述，可在手机端部署用于获取所述关联关系的各种算法。
如上文所述，用户在拍摄界面可进行多次拍摄，以获取多张定损照片。由于视频流的信息非常丰富，可用于建立各张定损照片之间的关联关系。例如，对于上述与当前帧图像对应的定损照片，可获取其与之前拍摄的各张定损照片之间的关联关系。
在一个实施例中，所述关联关系包括通过多个FlowNet构建的帧与帧之间的动态信息。例如，通过FlowNet1处理与当前帧对应的第一定损图像(照片)，通过FlowNet2处理第二定损图像(例如，在当前帧之前的图像帧)，通过融合FlowNet1与FlowNet2的输出，从而获得第一定损图像与第二定损图像之间的光流。
在一个实施例中，所述关联关系包括帧与帧之间的映射矩阵。在一种用于获取帧与帧之间的映射矩阵的算法中，首先计算图像1与图像2之间的图像梯度和图像差值，然后，通过最小二乘优化和Cholesky分解，获取图像1与图像2之间的映射矩阵。图像1和图像2例如为上述第一定损图像和第二定损图像。图5示出映射矩阵的映射效果。如图5所示，(a)为图像1，(c)为图像2，(b)为使用映射矩阵变换图像1所获得的图像1’，该映射矩阵为图像1到图像2的映射矩阵。可见经过映射矩阵的变换的图像1’与图像2基本一致。
在一个实施例中，所述关联关系包括通过SLAM技术计算获得的帧与帧之间的拍摄位置角度变换关系。
在如上所述获取拍摄的多个定损图像(照片)之间的关联关系之后，可将所述关联关系作为相关信息上传给服务器。服务器基于定损照片和定损照片之间的关联关系进行定损，从而可获得更加精准可靠的定损结果。
图6示出根据本说明书实施例的一种图像处理装置600。所述装置在移动设备端执行，所述移动设备包括摄像头，所述装置包括：
采集单元601，配置为，根据用户指令，通过所述摄像头采集事故车辆的视频流；
第一获取单元602，配置为，获取所述视频流中的当前帧的图像；
确定单元603，配置为，通过将所述图像输入预定分类模型，确定所述图像是否满足预定标准，其中，所述预定分类模型包括用于移动设备端的卷积神经网络；
添加单元604，配置为，在所述图像满足所述预定标准的情况下，通过将所述图像输入目标检测及分割模型，在所述图像中添加目标框和/或目标分割信息，其中所述目标框和目标分割信息都与所述车辆的车辆部件和车辆损伤中的至少之一相对应，其中，所述目标检测及分割模型包括用于移动设备端的卷积神经网络；以及
示出单元605，配置为，向所述用户示出所述目标框和/或目标分割信息。
在一个实施例中，所述图像处理装置600还包括第一提示单元606，配置为，在所述图像不满足所述预定标准的情况下，基于所述模型的分类结果，对所述用户进行相应的提示。
在一个实施例中，所述图像处理装置600还包括展示单元607，配置为，在通过所述摄像头采集事故车辆的视频流之前，向用户展示拍摄流程。
在一个实施例中，所述图像处理装置600还包括第二提示单元608，配置为，在添加目标框和/或目标分割信息之后，基于所述目标框和/或目标分割信息，对所述用户进行相应的提示。
在一个实施例中，在所述图像处理装置600中，所述第二提示单元608还配置为，基于所述目标框和/或目标分割信息，提示用户前进或后退。
在一个实施例中，在所述图像处理装置中，所述第二提示单元608还配置为，基于所述目标框和/或目标分割信息，提示用户进行拍摄，以获取与所述当前帧的图像对应的定损照片。
在一个实施例中，所述图像处理装置600还包括第一上传单元609，配置为，在获取与所述当前帧的图像对应的定损照片之后，将所述定损照片上传给服务器。
在一个实施例中，所述图像处理装置600还包括第二获取单元610，配置为，在获取与所述当前帧的图像对应的定损照片之后，基于所述视频流，获取所述当前帧的图像与第一图像的关联关系，所述第一图像为所述视频流中的在所述当前帧之前帧的经用户拍摄的图像。
在一个实施例中，所述图像处理装置还包括第二上传单元611，配置为，在获取所述当前帧的图像与第一图像的关联关系之后，将所述关联关系上传给服务器。
本说明书另一方面提供一种计算设备，包括存储器和处理器，其特征在于，所述存储器中存储有可执行代码，所述处理器执行所述可执行代码时，实现上述任一项图像处理方法。
在根据本说明书实施例的图像处理方案中，通过低计算量的图像分类算法，可以有效过滤实际视频流中模糊、光线较差、非车损图等图片，帮助用户确认哪些图是可以拍摄的；通过图像检测和分割算法可以帮助用户认知哪些图片是算法可以识别的，并且给出前进或者后退提示，以最终达到实际可用的程度；同时利用视频流的特点，通过多种算法计算用户拍摄的图之间的关联关系，提供更为丰富可靠的信息给后台算法引擎，得到更为精准鲁棒的效果。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。
本领域普通技术人员应该还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执轨道，取决于技术方案的特定应用和设计约束条件。本领域普通技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以用硬件、处理器执轨道的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上所述的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (25)

1.一种图像处理方法，所述方法在移动设备端执行，所述移动设备包括摄像头，所述方法包括：
根据用户指令，通过所述摄像头采集事故车辆的视频流；
获取所述视频流中的当前帧的图像；
通过将所述图像输入预定分类模型，确定所述图像是否满足预定标准，其中，所述预定分类模型包括用于移动设备端的卷积神经网络；
在所述图像满足所述预定标准的情况下，通过将所述图像输入目标检测及分割模型，在所述图像中添加目标框和/或目标分割信息，其中所述目标框和目标分割信息都与所述车辆的车辆部件和车辆损伤中的至少之一相对应，其中，所述目标检测及分割模型包括用于移动设备端的卷积神经网络；以及
向所述用户示出所述目标框和/或目标分割信息。
2.根据权利要求1所述的图像处理方法，还包括，在所述图像不满足所述预定标准的情况下，基于所述模型的分类结果，对所述用户进行相应的提示。
3.根据权利要求1所述的图像处理方法，其中，所述预定分类模型进行以下至少一种关于所述图像的分类：是否模糊、是否包括车辆损伤、是否光照充足、拍摄角度是否偏斜、以及拍摄距离是否合适。
4.根据权利要求1所述的图像处理方法，还包括，在通过所述摄像头采集事故车辆的视频流之前，向用户展示拍摄流程。
5.根据权利要求1所述的图像处理方法，还包括，在添加目标框和/或目标分割信息之后，基于所述目标框和/或目标分割信息，对所述用户进行相应的提示。
6.根据权利要求5所述的图像处理方法，其中，基于所述目标框和/或目标分割信息，对所述用户进行相应的提示包括，基于所述目标框和/或目标分割信息，提示用户前进或后退。
7.根据权利要求5所述的图像处理方法，其中，基于所述目标框和/或目标分割信息，对所述用户进行相应的提示包括，基于所述目标框和/或目标分割信息，提示用户进行拍摄，以获取与所述当前帧的图像对应的定损照片。
8.根据权利要求7所述的图像处理方法，还包括，在获取与所述当前帧的图像对应的定损照片之后，将所述定损照片上传给服务器。
9.根据权利要求7所述的图像处理方法，还包括，在获取与所述当前帧的图像对应的定损照片之后，基于所述视频流，获取所述当前帧的图像与第一图像的关联关系，所述第一图像为所述视频流中的在所述当前帧之前帧的经用户拍摄的图像。
10.根据权利要求9所述的图像处理方法，其中，所述关联关系包括所述当前帧的图像与所述第一图像之间的以下至少一项关系：光流、映射矩阵、以及位置角度变换关系。
11.根据权利要求9所述的图像处理方法，还包括，在获取所述当前帧的图像与第一图像的关联关系之后，将所述关联关系上传给服务器。
12.根据权利要求1所述的图像处理方法，其中所述预定分类模型和所述目标检测及分割模型包括共用的用于移动设备端的卷积神经网络。
13.一种图像处理装置，所述装置在移动设备端实施，所述移动设备包括摄像头，所述装置包括：
采集单元，配置为，根据用户指令，通过所述摄像头采集事故车辆的视频流；
第一获取单元，配置为，获取所述视频流中的当前帧的图像；
确定单元，配置为，通过将所述图像输入预定分类模型，确定所述图像是否满足预定标准，其中，所述预定分类模型包括用于移动设备端的卷积神经网络；
添加单元，配置为，在所述图像满足所述预定标准的情况下，通过将所述图像输入目标检测及分割模型，在所述图像中添加目标框和/或目标分割信息，其中所述目标框和目标分割信息都与所述车辆的车辆部件和车辆损伤中的至少之一相对应，其中，所述目标检测及分割模型包括用于移动设备端的卷积神经网络；以及
示出单元，配置为，向所述用户示出所述目标框和/或目标分割信息。
14.根据权利要求13所述的图像处理装置，还包括第一提示单元，配置为，在所述图像不满足所述预定标准的情况下，基于所述模型的分类结果，对所述用户进行相应的提示。
15.根据权利要求13所述的图像处理装置，其中，所述预定分类模型进行以下至少一种关于所述图像的分类：是否模糊、是否包括车辆损伤、是否光照充足、拍摄角度是否偏斜、以及拍摄距离是否合适。
16.根据权利要求13所述的图像处理装置，还包括展示单元，配置为，在通过所述摄像头采集事故车辆的视频流之前，向用户展示拍摄流程。
17.根据权利要求13所述的图像处理装置，还包括第二提示单元，配置为，在添加目标框和/或目标分割信息之后，基于所述目标框和/或目标分割信息，对所述用户进行相应的提示。
18.根据权利要求17所述的图像处理装置，其中，所述第二提示单元还配置为，基于所述目标框和/或目标分割信息，提示用户前进或后退。
19.根据权利要求17所述的图像处理装置，其中，所述第二提示单元还配置为，基于所述目标框和/或目标分割信息，提示用户进行拍摄，以获取与所述当前帧的图像对应的定损照片。
20.根据权利要求19所述的图像处理装置，还包括第一上传单元，配置为，在获取与所述当前帧的图像对应的定损照片之后，将所述定损照片上传给服务器。
21.根据权利要求19所述的图像处理装置，还包括第二获取单元，配置为，在获取与所述当前帧的图像对应的定损照片之后，基于所述视频流，获取所述当前帧的图像与第一图像的关联关系，所述第一图像为所述视频流中的在所述当前帧之前帧的经用户拍摄的图像。
22.根据权利要求21所述的图像处理装置，其中，所述关联关系包括所述当前帧的图像与所述第一图像之间的以下至少一项关系：光流、映射矩阵、以及位置角度变换关系。
23.根据权利要求21所述的图像处理装置，还包括第二上传单元，配置为，在获取所述当前帧的图像与第一图像的关联关系之后，将所述关联关系上传给服务器。
24.根据权利要求13所述的图像处理装置，其中所述预定分类模型和所述目标检测及分割模型包括共用的用于移动设备端的卷积神经网络。
25.一种计算设备，包括存储器和处理器，其特征在于，所述存储器中存储有可执行代码，所述处理器执行所述可执行代码时，实现权利要求1-12中任一项所述的方法。
CN201810961701.XA 2018-08-22 2018-08-22 一种图像处理方法和装置 Pending CN109145903A (zh)

Priority Applications (7)

Application Number Priority Date Filing Date Title
CN201810961701.XA CN109145903A (zh) 2018-08-22 2018-08-22 一种图像处理方法和装置
TW108119114A TWI709091B (zh) 2018-08-22 2019-06-03 圖像處理方法和裝置
SG11202011405YA SG11202011405YA (en) 2018-08-22 2019-08-21 Image processing method and apparatus
EP19763143.5A EP3777122B1 (en) 2018-08-22 2019-08-21 Image processing method and apparatus
PCT/US2019/047389 WO2020041399A1 (en) 2018-08-22 2019-08-21 Image processing method and apparatus
US16/547,735 US20200065632A1 (en) 2018-08-22 2019-08-22 Image processing method and apparatus
US16/776,545 US10984293B2 (en) 2018-08-22 2020-01-30 Image processing method and apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810961701.XA CN109145903A (zh) 2018-08-22 2018-08-22 一种图像处理方法和装置

Publications (1)

Publication Number Publication Date
CN109145903A true CN109145903A (zh) 2019-01-04

Family

ID=64790872

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810961701.XA Pending CN109145903A (zh) 2018-08-22 2018-08-22 一种图像处理方法和装置

Country Status (6)

Country Link
US (2) US20200065632A1 (zh)
EP (1) EP3777122B1 (zh)
CN (1) CN109145903A (zh)
SG (1) SG11202011405YA (zh)
TW (1) TWI709091B (zh)
WO (1) WO2020041399A1 (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110084806A (zh) * 2019-05-06 2019-08-02 深源恒际科技有限公司 一种界面交互方法及装置
CN110570318A (zh) * 2019-04-18 2019-12-13 阿里巴巴集团控股有限公司 计算机执行的基于视频流的车辆定损方法及装置
CN110650292A (zh) * 2019-10-30 2020-01-03 支付宝(杭州)信息技术有限公司 辅助用户拍摄车辆视频的方法及装置
CN110852211A (zh) * 2019-10-29 2020-02-28 北京影谱科技股份有限公司 基于神经网络的slam中障碍物过滤方法和装置
US10783643B1 (en) 2019-05-27 2020-09-22 Alibaba Group Holding Limited Segmentation-based damage detection
WO2020192985A1 (de) * 2019-03-28 2020-10-01 Volkswagen Aktiengesellschaft Verfahren und system zum überprüfen einer optischen beanstandung an einem kraftfahrzeug
WO2020238256A1 (zh) * 2019-05-27 2020-12-03 创新先进技术有限公司 基于弱分割的损伤检测方法及装置
CN112465018A (zh) * 2020-11-26 2021-03-09 深源恒际科技有限公司 一种基于深度学习的车辆视频定损系统的智能截图方法及系统
US20210117025A1 (en) * 2019-10-18 2021-04-22 Acer Incorporated Electronic apparatus and object information recognition method by using touch data thereof
CN112862702A (zh) * 2021-01-18 2021-05-28 平安科技（深圳）有限公司 图像增强方法、装置、设备及存储介质
CN113538293A (zh) * 2021-08-20 2021-10-22 爱保科技有限公司 一种车损伤图像的增强方法和装置
TWI750498B (zh) * 2019-02-14 2021-12-21 開曼群島商創新先進技術有限公司 視訊流的處理方法和裝置
WO2023284464A1 (zh) * 2021-07-12 2023-01-19 北京字跳网络技术有限公司 一种图像处理方法、装置、设备及存储介质

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10580075B1 (en) 2012-08-16 2020-03-03 Allstate Insurance Company Application facilitated claims damage estimation
US11455691B2 (en) * 2012-08-16 2022-09-27 Allstate Insurance Company Processing insured items holistically with mobile damage assessment and claims processing
US8510196B1 (en) 2012-08-16 2013-08-13 Allstate Insurance Company Feedback loop in mobile damage assessment and claims processing
US8712893B1 (en) 2012-08-16 2014-04-29 Allstate Insurance Company Enhanced claims damage estimation using aggregate display
US10783585B1 (en) 2012-08-16 2020-09-22 Allstate Insurance Company Agent-facilitated claims damage estimation
US11532048B2 (en) 2012-08-16 2022-12-20 Allstate Insurance Company User interactions in mobile damage assessment and claims processing
US10430885B1 (en) 2012-08-16 2019-10-01 Allstate Insurance Company Processing insured items holistically with mobile damage assessment and claims processing
CN110569864A (zh) * 2018-09-04 2019-12-13 阿里巴巴集团控股有限公司 基于gan网络的车损图像生成方法和装置
US11341379B1 (en) 2019-10-31 2022-05-24 Ccc Intelligent Solutions Inc. Smart image tagging and selection on mobile devices
WO2021136947A1 (en) 2020-01-03 2021-07-08 Tractable Ltd Vehicle damage state determination method
CN112055172B (zh) * 2020-08-19 2022-04-19 浙江大华技术股份有限公司 一种监控视频的处理方法、装置以及存储介质
CN113408345B (zh) * 2021-05-13 2022-06-10 南京领行科技股份有限公司 车辆外观清洁度判断方法、装置、服务器及存储介质
WO2023150910A1 (en) * 2022-02-08 2023-08-17 Nvidia Corporation Image generation using a neural network
CN116579965B (zh) * 2023-05-22 2024-01-19 北京拙河科技有限公司 一种多图像融合方法及装置
CN117455466B (zh) * 2023-12-22 2024-03-08 南京三百云信息科技有限公司 一种汽车远程评估的方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106780048A (zh) * 2016-11-28 2017-05-31 中国平安财产保险股份有限公司 一种智能车险的自助理赔方法、自助理赔装置及系统
CN107194323A (zh) * 2017-04-28 2017-09-22 阿里巴巴集团控股有限公司 车辆定损图像获取方法、装置、服务器和终端设备
CN107368776A (zh) * 2017-04-28 2017-11-21 阿里巴巴集团控股有限公司 车辆定损图像获取方法、装置、服务器和终端设备
CN108090838A (zh) * 2017-11-21 2018-05-29 阿里巴巴集团控股有限公司 识别车辆受损部件的方法、装置、服务器、客户端及系统
CN108109033A (zh) * 2017-12-04 2018-06-01 阿里巴巴集团控股有限公司 识别对象损伤的处理方法、装置、服务器、客户端

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI384408B (zh) * 2009-04-30 2013-02-01 Ind Tech Res Inst 影像辨識以及輸出方法與其系統
US9654679B1 (en) * 2013-03-13 2017-05-16 Liberty Mutual Insurance Company Imagery quantification of damage
TWI502558B (zh) * 2013-09-25 2015-10-01 Chunghwa Telecom Co Ltd Traffic Accident Monitoring and Tracking System
CN106372651B (zh) * 2016-08-22 2018-03-06 平安科技（深圳）有限公司 图片品质的检测方法及装置
US10223812B2 (en) * 2016-09-30 2019-03-05 Amazon Technologies, Inc. Image validation
CN106600421A (zh) * 2016-11-21 2017-04-26 中国平安财产保险股份有限公司 一种基于图片识别的车险智能定损方法及系统
WO2018117619A1 (en) * 2016-12-21 2018-06-28 Samsung Electronics Co., Ltd. Display apparatus, content recognizing method thereof, and non-transitory computer readable recording medium
CN112435215B (zh) * 2017-04-11 2024-02-13 创新先进技术有限公司 一种基于图像的车辆定损方法、移动终端、服务器
CN107909113B (zh) * 2017-11-29 2021-11-16 北京小米移动软件有限公司 交通事故图像处理方法、装置及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106780048A (zh) * 2016-11-28 2017-05-31 中国平安财产保险股份有限公司 一种智能车险的自助理赔方法、自助理赔装置及系统
CN107194323A (zh) * 2017-04-28 2017-09-22 阿里巴巴集团控股有限公司 车辆定损图像获取方法、装置、服务器和终端设备
CN107368776A (zh) * 2017-04-28 2017-11-21 阿里巴巴集团控股有限公司 车辆定损图像获取方法、装置、服务器和终端设备
CN108090838A (zh) * 2017-11-21 2018-05-29 阿里巴巴集团控股有限公司 识别车辆受损部件的方法、装置、服务器、客户端及系统
CN108109033A (zh) * 2017-12-04 2018-06-01 阿里巴巴集团控股有限公司 识别对象损伤的处理方法、装置、服务器、客户端

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI750498B (zh) * 2019-02-14 2021-12-21 開曼群島商創新先進技術有限公司 視訊流的處理方法和裝置
CN113490960A (zh) * 2019-03-28 2021-10-08 大众汽车股份公司 用于检查机动车上的视觉缺陷的方法和系统
WO2020192985A1 (de) * 2019-03-28 2020-10-01 Volkswagen Aktiengesellschaft Verfahren und system zum überprüfen einer optischen beanstandung an einem kraftfahrzeug
CN110570318A (zh) * 2019-04-18 2019-12-13 阿里巴巴集团控股有限公司 计算机执行的基于视频流的车辆定损方法及装置
CN110570318B (zh) * 2019-04-18 2023-01-31 创新先进技术有限公司 计算机执行的基于视频流的车辆定损方法及装置
CN110084806A (zh) * 2019-05-06 2019-08-02 深源恒际科技有限公司 一种界面交互方法及装置
US10783643B1 (en) 2019-05-27 2020-09-22 Alibaba Group Holding Limited Segmentation-based damage detection
WO2020238256A1 (zh) * 2019-05-27 2020-12-03 创新先进技术有限公司 基于弱分割的损伤检测方法及装置
US11004204B2 (en) 2019-05-27 2021-05-11 Advanced New Technologies Co., Ltd. Segmentation-based damage detection
US11494045B2 (en) * 2019-10-18 2022-11-08 Acer Incorporated Electronic apparatus and object information recognition method by using touch data thereof
US20210117025A1 (en) * 2019-10-18 2021-04-22 Acer Incorporated Electronic apparatus and object information recognition method by using touch data thereof
CN110852211A (zh) * 2019-10-29 2020-02-28 北京影谱科技股份有限公司 基于神经网络的slam中障碍物过滤方法和装置
WO2021082662A1 (zh) * 2019-10-30 2021-05-06 支付宝(杭州)信息技术有限公司 辅助用户拍摄车辆视频的方法及装置
CN113038018A (zh) * 2019-10-30 2021-06-25 支付宝(杭州)信息技术有限公司 辅助用户拍摄车辆视频的方法及装置
CN110650292B (zh) * 2019-10-30 2021-03-02 支付宝(杭州)信息技术有限公司 辅助用户拍摄车辆视频的方法及装置
CN110650292A (zh) * 2019-10-30 2020-01-03 支付宝(杭州)信息技术有限公司 辅助用户拍摄车辆视频的方法及装置
CN112465018A (zh) * 2020-11-26 2021-03-09 深源恒际科技有限公司 一种基于深度学习的车辆视频定损系统的智能截图方法及系统
CN112465018B (zh) * 2020-11-26 2024-02-02 深源恒际科技有限公司 一种基于深度学习的车辆视频定损系统的智能截图方法及系统
CN112862702A (zh) * 2021-01-18 2021-05-28 平安科技（深圳）有限公司 图像增强方法、装置、设备及存储介质
WO2022151589A1 (zh) * 2021-01-18 2022-07-21 平安科技（深圳）有限公司 图像增强方法、装置、设备及存储介质
CN112862702B (zh) * 2021-01-18 2023-10-31 平安科技（深圳）有限公司 图像增强方法、装置、设备及存储介质
WO2023284464A1 (zh) * 2021-07-12 2023-01-19 北京字跳网络技术有限公司 一种图像处理方法、装置、设备及存储介质
CN113538293A (zh) * 2021-08-20 2021-10-22 爱保科技有限公司 一种车损伤图像的增强方法和装置

Also Published As

Publication number Publication date
WO2020041399A1 (en) 2020-02-27
SG11202011405YA (en) 2020-12-30
US10984293B2 (en) 2021-04-20
US20200167612A1 (en) 2020-05-28
TWI709091B (zh) 2020-11-01
TW202009805A (zh) 2020-03-01
US20200065632A1 (en) 2020-02-27
EP3777122A1 (en) 2021-02-17
EP3777122B1 (en) 2023-10-04

Similar Documents

Publication Publication Date Title
CN109145903A (zh) 一种图像处理方法和装置
CN110569695B (zh) 基于定损图像判定模型的图像处理方法和装置
KR102418446B1 (ko) 픽쳐 기반의 차량 손해 평가 방법 및 장치, 및 전자 디바이스
US7809587B2 (en) Rapid business support of insured property using image analysis
CN106203498B (zh) 一种城市场景垃圾检测方法及系统
CN103076877B (zh) 使用姿势与车辆内的移动装置进行交互
US8553941B2 (en) Methods, circuits, devices, apparatuses and systems for providing image composition rules, analysis and improvement
CN107392218A (zh) 一种基于图像的车辆定损方法、装置及电子设备
CN113038018B (zh) 辅助用户拍摄车辆视频的方法及装置
CN109664820A (zh) 基于行车记录仪的驾驶提示方法、装置、设备和存储介质
CN109034036A (zh) 一种视频分析方法、教学质量评估方法及系统、计算机可读存储介质
CN109325429A (zh) 一种关联特征数据的方法、装置、存储介质及终端
CN110674788A (zh) 车辆定损方法和装置
US20120185260A1 (en) System and method for inspecting equipment and estimating refurbishment costs thereof
CN109377494A (zh) 一种用于图像的语义分割方法和装置
JP6720876B2 (ja) 画像処理方法及び画像処理装置
CN110738576A (zh) 为受损车辆生成定损文件的方法及装置
US9898676B2 (en) Method for determining the level of degradation of a road marking
CN110084235A (zh) 基于兴趣点的信息采集方法、装置和采集设备
CN113706513A (zh) 基于图像检测的车损图像的分析方法、装置、设备及介质
Tai et al. RTAIS: road traffic accident information system
CN110427998A (zh) 模型训练、目标检测方法及装置、电子设备、存储介质
CN110059617A (zh) 一种目标物体的识别方法及装置
CN109900702A (zh) 车辆损伤检测的处理方法、装置、设备、服务器和系统
CN105976429B (zh) 刑侦画像计算机辅助系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40002575

Country of ref document: HK

TA01 Transfer of patent application right

Effective date of registration: 20201009

Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Applicant after: Innovative advanced technology Co.,Ltd.

Address before: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Applicant before: Advanced innovation technology Co.,Ltd.

Effective date of registration: 20201009

Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands

Applicant after: Advanced innovation technology Co.,Ltd.

Address before: A four-storey 847 mailbox in Grand Cayman Capital Building, British Cayman Islands

Applicant before: Alibaba Group Holding Ltd.

TA01 Transfer of patent application right
RJ01 Rejection of invention patent application after publication

Application publication date: 20190104

RJ01 Rejection of invention patent application after publication