TW202011263A - 基於定損圖像判定模型的圖像處理方法和裝置 - Google Patents
基於定損圖像判定模型的圖像處理方法和裝置 Download PDFInfo
- Publication number
- TW202011263A TW202011263A TW108119500A TW108119500A TW202011263A TW 202011263 A TW202011263 A TW 202011263A TW 108119500 A TW108119500 A TW 108119500A TW 108119500 A TW108119500 A TW 108119500A TW 202011263 A TW202011263 A TW 202011263A
- Authority
- TW
- Taiwan
- Prior art keywords
- image
- images
- model
- loss
- fixed
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/211—Selection of the most significant subset of features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/217—Validation; Performance evaluation; Active pattern learning techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/28—Determining representative reference patterns, e.g. by averaging or distorting; Generating dictionaries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/044—Recurrent networks, e.g. Hopfield networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
- G06N3/084—Backpropagation, e.g. using gradient descent
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/08—Insurance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/98—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
- G06V10/993—Evaluation of the quality of the acquired pattern
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/49—Segmenting video sequences, i.e. computational techniques such as parsing or cutting the sequence, low-level clustering or determining units such as shots or scenes
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Business, Economics & Management (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computing Systems (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computational Linguistics (AREA)
- Mathematical Physics (AREA)
- Molecular Biology (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Quality & Reliability (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Strategic Management (AREA)
- Technology Law (AREA)
- General Business, Economics & Management (AREA)
- Marketing (AREA)
- Economics (AREA)
- Development Economics (AREA)
- Databases & Information Systems (AREA)
- Medical Informatics (AREA)
- Image Analysis (AREA)
Abstract
本說明書實施例提供了一種訓練定損圖像判定模型的方法、裝置以及一種圖像處理方法和裝置,該圖像處理方法包括:獲取事故車輛的視頻流;從該視頻流先後獲取以第一順序排列的多個圖像;獲取該多個圖像各自的特徵資訊;以及透過以該第一順序將該多個圖像各自的特徵資訊先後輸入透過該模型訓練方法訓練的定損圖像判定模型,分別確定該多個圖像是否為定損圖像,其中該定損圖像為用於對該事故車輛進行定損的圖像。
Description
本說明書實施例涉及圖像處理技術領域,更具體地,涉及一種訓練定損圖像判定模型的方法和裝置、以及一種圖像處理方法和裝置。
在常規的車險理賠場景中,保險公司需要派出專業的查勘定損人員到事故現場進行現場查勘定損,給出車輛的維修方案和賠償金額,拍攝現場照片,並將定損照片留檔以供核查人員核損核價。由於需要人工查勘定損,保險公司需要投入大量的人力成本,和專業知識的培訓成本。從普通用戶的體驗來說,理賠流程由於等待人工查勘員現場拍照、定損員在維修地點定損、核損人員在後台核損,理賠週期較長。
隨著互聯網的發展,出現一種理賠方案,其中,透過用戶在現場拍攝車損照片,並將該照片上傳至伺服器,從而透過演算法或人工基於該車損照片進行定損和理賠。然而,在該方案中,通常對拍攝的照片有一定的要求,而用戶通常很難做到符合這些要求。針對這樣的需求,在現有技術中,由保險公司客服透過手機視頻共享功能,實時查看用戶的拍攝全過程,並透過語音等方式與用戶溝通以確定將要截取的用於定損的圖像。
因此,需要一種更有效的獲取車輛定損圖像的方案。
本說明書實施例旨在提供一種更有效的訓練定損圖像判定模型的方法和裝置、以及圖像處理方法和裝置,以解決現有技術中的不足。
為實現上述目的,本說明書一個方面提供一種訓練定損圖像判定模型的方法,該模型包括循環神經網路,該方法包括:
獲取以第一順序排列的多個樣本,該多個樣本與多個圖像分別對應,其中,該多個圖像先後取自於事故車輛的視頻流,其中,每個樣本包括對應圖像的特徵資訊、以及對應圖像的標籤值,該標籤值指示對應圖像是否為定損圖像,其中,該定損圖像為用於對該事故車輛進行定損的圖像;以及
使用該多個樣本訓練該模型,以使得相比於訓練前,訓練後的該模型的與該多個樣本對應的預測損失函數減小。
在一個實施例中,在該訓練定損圖像判定模型的方法中,該循環神經網路為以下一種:LSTM、RNN、GRU。
在一個實施例中,在該訓練定損圖像判定模型的方法中,該特徵資訊包括以下至少一種特徵:屬性特徵、語義特徵、以及光流特徵。
本說明書另一方面提供一種圖像處理方法,包括:
獲取事故車輛的視頻流;
從該視頻流先後獲取以第一順序排列的多個圖像;
獲取該多個圖像各自的特徵資訊;以及
透過以該第一順序將該多個圖像各自的特徵資訊先後輸入透過上述模型訓練方法訓練的定損圖像判定模型,分別確定該多個圖像是否為定損圖像,其中該定損圖像為用於對該事故車輛進行定損的圖像。
在一個實施例中,在該圖像處理方法中,該方法在移動設備端執行,該移動設備包括攝影鏡頭,其中,獲取事故車輛的視頻流包括,根據用戶指令,透過該攝影鏡頭採集事故車輛的視頻流。
在一個實施例中,在該圖像處理方法中,獲取該多個圖像各自的特徵資訊包括,透過以該第一順序將該多個圖像先後輸入預定分類模型,獲取該多個圖像各自的屬性特徵。
在一個實施例中,在該圖像處理方法中,該預定分類模型進行以下至少一種關於圖像的分類:是否模糊、是否包括車輛損傷、是否光照充足、拍攝角度是否偏斜、以及拍攝距離是否合適。
在一個實施例中,在該圖像處理方法中,獲取該多個圖像各自的特徵資訊包括,透過以該第一順序將該多個圖像先後輸入目標檢測及分割模型,獲取該多個圖像各自的語義特徵。
在一個實施例中,在該圖像處理方法中,該語義特徵包括以下至少一項:目標框個數、分割類別數、最大目標框的圖像占比、以及最大分割類別的圖像占比。
在一個實施例中,在該圖像處理方法中,獲取該多個圖像各自的特徵資訊包括,透過以該第一順序將該多個圖像先後輸入光流模型,獲取該多個圖像各自的光流特徵。
在一個實施例中,在該圖像處理方法中,該多個圖像中包括第一圖像,其中,分別確定該多個圖像是否為定損圖像包括,確定該第一圖像是否為定損圖像,該方法還包括,在確定該第一圖像為定損圖像的情況中,將該第一圖像上傳給伺服器。
本說明書另一方面提供一種訓練定損圖像判定模型的裝置,該模型包括循環神經網路,該裝置包括:
獲取單元,配置為,獲取以第一順序排列的多個樣本,該多個樣本與多個圖像分別對應,其中,該多個圖像先後取自於事故車輛的視頻流,其中,每個樣本包括對應圖像的特徵資訊、以及對應圖像的標籤值,該標籤值指示對應圖像是否為定損圖像,其中,該定損圖像為用於對該事故車輛進行定損的圖像;以及
訓練單元,配置為,使用該多個樣本訓練該模型,以使得相比於訓練前,訓練後的該模型的與該多個樣本對應的預測損失函數減小。
本說明書另一方面提供一種圖像處理裝置,包括:
視頻流獲取單元,配置為,獲取事故車輛的視頻流;
圖像獲取單元,配置為,從該視頻流先後獲取以第一順序排列的多個圖像;
特徵獲取單元,配置為,獲取該多個圖像各自的特徵資訊;以及
確定單元,配置為,透過以該第一順序將該多個圖像各自的特徵資訊先後輸入透過上述模型訓練裝置訓練的定損圖像判定模型,分別確定該多個圖像是否為定損圖像,其中該定損圖像為用於對該事故車輛進行定損的圖像。
在一個實施例中,在該圖像處理裝置中,該裝置在移動設備端實施,該移動設備包括攝影鏡頭,其中,該視頻流獲取單元還配置為,根據用戶指令,透過該攝影鏡頭採集事故車輛的視頻流。
在一個實施例中,在該圖像處理裝置中,該特徵獲取單元還配置為,透過以該第一順序將該多個圖像先後輸入預定分類模型,獲取該多個圖像各自的屬性特徵。
在一個實施例中,在該圖像處理裝置中,該預定分類模型進行以下至少一種關於圖像的分類:是否模糊、是否包括車輛損傷、是否光照充足、拍攝角度是否偏斜、以及拍攝距離是否合適。
在一個實施例中,在該圖像處理裝置中,該特徵獲取單元還配置為,透過以該第一順序將該多個圖像先後輸入目標檢測及分割模型,獲取該多個圖像各自的語義特徵。
在一個實施例中,在該圖像處理裝置中,該語義特徵包括以下至少一項:目標框個數、分割類別數、最大目標框的圖像占比、以及最大分割類別的圖像占比。
在一個實施例中,在該圖像處理裝置中,該特徵獲取單元還配置為,透過以該第一順序將該多個圖像先後輸入光流模型,獲取該多個圖像各自的光流特徵。
在一個實施例中,在該圖像處理裝置中,該多個圖像中包括第一圖像,其中,該確定單元還配置為,確定該第一圖像是否為定損圖像,該裝置還包括上傳單元,配置為,在確定該第一圖像為定損圖像的情況中,將該第一圖像上傳給伺服器。
本說明書另一方面還提供一種計算設備,包括記憶體和處理器,其特徵在於,該記憶體中儲存有可執行代碼,該處理器執行該可執行代碼時,實現上述任一項模型訓練方法和圖像處理方法。
透過根據本說明書實施例的圖像處理方案,透過在手機端上部署多個特徵提取模型,對來自攝影鏡頭的圖像提取相應的圖像特徵,將這些特徵送入時序模型,以檢測該圖像是否是可用於定損的關鍵幀。透過這樣的演算法流程,可以幫助用戶免去拍照的步驟,同時可以獲得高質量的魯邦的定損幀,提供給伺服器端的演算法以用於定損。從而提升了用戶體驗,提高了演算法精度。
下面將結合圖式描述本說明書實施例。
圖1示出了根據本說明書實施例的圖像處理系統100的示意圖。如圖1所示,系統100包括移動設備11和伺服器12。移動設備11例如為手機、可通信的智能設備等。伺服器12例如為保險公司用於處理定損照片的伺服器。移動設備11包括攝影鏡頭111、特徵提取模組112、和圖像判定模組113。其中,特徵提取模組112中部署有分類模型1121、目標檢測及分割模型1122以及光流模型1123。圖像判定模組113中部署有例如lstm神經網路模型,以用於確定是否將圖像用作定損圖像。該系統用於從用戶拍攝車輛的視頻流中自動獲取用於定損的關鍵幀,免去用戶拍照的步驟。例如在車輛事故現場中,將不需要保險公司的定損人員到達現場,只需要出險的車主使用移動設備11打開用於理賠的APP中的拍攝介面,調用攝影鏡頭採集車輛的視頻流,即可由APP自動獲取可用的定損圖像上傳給伺服器12。
具體是,在用戶打開拍攝介面以透過攝影鏡頭採集車輛的視頻流之後,APP獲取該視頻流,並將該視頻流輸入特徵提取模組112。特徵提取模組對視頻流中的每幀或多幀進行處理,例如,每間隔預定幀處理一幀。在特徵提取模組112中,透過分類模型1121獲取圖像幀的一些基本屬性特徵,如是否模糊、光線是否充足等,透過目標檢測及分割模型1122獲取圖像幀的語義特徵,如目標框的個數、分割類別的個數等,另外,還透過光流模型1123獲取圖像幀與其它圖像幀(如上一輸入幀)的光流特徵。在獲取上述多個特徵之後,特徵提取模組112將上述特徵傳送給圖像判斷模組113。圖像判定模組113為透過使用多個標定視頻流進行訓練所獲得的定損圖像判定模型,透過基於上述特徵進行判定,可確定對應的圖像是否為定損圖像,即是否為可用於定損的圖像。當確定該圖像是定損圖像之後,移動設備11將該圖像發送給伺服器12,以用於確定定損結果。在伺服器12中,透過訓練好的定損演算法模型對用戶上傳的定損圖像進行處理,從而獲取定損結果。
圖2示出根據本說明書實施例的一種訓練定損圖像判定模型的方法的流程圖。該模型包括循環神經網路。該方法包括:
在步驟S202,獲取以第一順序排列的多個樣本,該多個樣本與多個圖像分別對應,其中,該多個圖像先後取自於事故車輛的視頻流,其中,每個樣本包括對應圖像的特徵資訊、以及對應圖像的標籤值,該標籤值指示對應圖像是否為定損圖像,其中,該定損圖像為用於對該事故車輛進行定損的圖像;以及
在步驟S204,使用該多個樣本訓練該模型,以使得相比於訓練前,訓練後的該模型的與該多個樣本對應的預測損失函數減小。
首先,在步驟S202,獲取以第一順序排列的多個樣本,該多個樣本與多個圖像分別對應,其中,該多個圖像先後取自於事故車輛的視頻流,其中,每個樣本包括對應圖像的特徵資訊、以及對應圖像的標籤值,該標籤值指示對應圖像是否為定損圖像,其中,該定損圖像為用於對該事故車輛進行定損的圖像。
該定損圖像判定模型為時序模型,其包括的循環神經網路例如為LSTM、RNN、GRU等等。這些循環神經網路的共性是,透過順序輸入一組向量,獲得與該一組向量對應的輸出值。其中,對在某個時間點輸入的向量的計算與在該時間點之前輸入的一個或多個向量相關。即,循環神經網路針對當前輸入的輸出與之前的計算資訊相關。因此,該模型針對有時序性的多個輸入圖像進行計算。例如,對於多個順序排列的車損圖像,在確定第一圖像為車損圖像之後,在對第二圖像進行判定時,如果第二圖像與第一圖像比較接近,模型將考慮第一圖像的輸出結果,將第二圖像判定為不是車損圖像。
從而,可透過從多個(如幾萬個)事故車輛的視頻流分別獲取多組樣本,以進行對該模型的訓練。該視頻流是用戶(車主或者保險公司業務人員)針對多起事故車輛拍攝的視頻。例如,從一起事故車輛可拍攝多個視頻流,而從每個視頻流可獲取多組樣本。在獲取一組樣本的過程中,針對一個視頻流,首先,從該視頻流中以時間前後順序抽取多個圖像,例如每隔半分鐘抽取一幀圖像,從該多個圖像獲取各自的特徵資訊或特徵向量,並獲取各個圖像的是否為定損圖像的標籤值,從而以順序排列的多個(特徵資訊,標籤值)對構成一組樣本。這裡,一組樣本中的多個樣本與上述多個圖像一一對應,並且,一組樣本中各個樣本的排列順序也與多個圖像的排列順序相對應。該順序體現了視頻流的前後時序,從而,可由上述模型對該組樣本進行預測,以預測其中哪些圖像可用作定損圖像。
在上述一組樣本中,圖像的特徵資訊包括但不限於以下至少一種特徵::屬性特徵、語義特徵、以及光流特徵。屬性特徵為圖像的一些基本屬性特徵,例如,圖像是否模糊、圖像是否包括車損、圖像光照是否充足、圖像的拍攝角度是否合適、圖像的拍攝距離是否合適等等。這些基本特徵都可透過將圖像輸入訓練好的分類模型而獲取,這將在下文詳細說明。語義特徵為與圖像像素對應的物體類別相關的特徵,圖像上的物體類別可透過目標框或物體分割示出,語義特徵例如可以為目標框個數、物體類別數目等等。光流特徵例如為當前輸入圖像與上一輸入圖像的光流變化,從而可體現各個圖像之間的關聯關係。
另外,該圖像的標籤值可透過演算法模型進行標識,也可以透過人工標識。
在步驟S204,使用該多個樣本訓練該模型,以使得相比於訓練前,訓練後的該模型的與該多個樣本對應的預測損失函數減小。
如本領域技術人員所知,基於該各個樣本包括的特徵向量和標籤值,可透過例如梯度下降法調整該模型的參數。具體是,首先,將該特徵向量和標籤值代入模型損失函數,這裡的損失函數例如為上述多個樣本的各自的預測函數與標籤值之差的平方和、或者為多個樣本的各自的預測函數與標籤值之差的絕對值之和,等等。其中,透過對多個樣本各自的預測函數輸入特徵向量,可最後計算出與各個樣本對應的模型預測值,該預測值預測對應的圖像是否可用作定損圖像。由於該模型例如為lstm模型,其對多個樣本中各個樣本的預測函數各不相同,其中各個樣本的預測函數與該各個樣本的排列順序相對應,例如,排在後面樣本的預測函數中還包括排在前面的樣本的預測函數結果。然後,在損失函數中對模型參數求梯度,並向梯度的反方向調整參數的值,從而使得訓練後的模型的損失函數的值減小。
這裡,模型訓練方法不限於上述梯度下降法,而是可以採用本領域技術人員可獲得的其它各種模型優化方法,如隨機梯度下降法、批量梯度下降法(BGD)、適應性動量估計法(Adam)、RMSprop等。
圖3示出根據本說明書實施例的一種圖像處理方法的流程圖。該方法包括:
在步驟S302,獲取事故車輛的視頻流;
在步驟S304,從該視頻流先後獲取以第一順序排列的多個圖像;
在步驟S306,獲取該多個圖像各自的特徵資訊;以及
在步驟S308,透過以該第一順序將該多個圖像各自的特徵資訊先後輸入透過圖2所示方法訓練的定損圖像判定模型,分別確定該多個圖像是否為定損圖像,其中該定損圖像為用於對該事故車輛進行定損的圖像。
首先,在步驟S302,獲取事故車輛的視頻流。
在一個實施例中,圖3所示方法在移動設備端執行,該移動設備包括攝影鏡頭,其中,獲取事故車輛的視頻流包括,根據用戶指令,透過該攝影鏡頭採集事故車輛的視頻流。下文中將以移動設備端為例說明圖3所示方法。可以理解,圖3所示方法不限於僅在移動設備端執行,例如,透過從事故車輛的車主獲取其拍攝的事故車輛的視頻流,可以在保險公司的伺服器端執行圖3所示的方法,以從該視頻流獲取定損圖像。
如上文所述,上述移動設備例如為手機。用戶例如透過手機中安裝的車險理賠APP進行事故車輛的定損照片的獲取。用戶例如透過該APP中的相機圖標打開拍攝介面,並將攝影鏡頭對準事故車輛。在打開拍攝介面之後,APP透過攝影鏡頭連續採集該車輛的圖像,從而獲取該車輛的視頻流,同時,在手機螢幕上實時顯示攝影鏡頭採集到的圖像。APP當如上所述採集車輛視頻流的同時,還實時將該視頻流輸入手機端APP中部署的各個演算法模型。該攝影鏡頭可設定為每隔預定時段(例如125ms)採集一幀圖像。
在步驟S304,從該視頻流先後獲取以第一順序排列的多個圖像。
由於,在本說明書實施例中,使用例如lstm的時序模型對多個圖像是否可用作定損圖像進行預測,因此,透過從視頻流中先後獲取多個圖像,從而獲取順序排列的多個圖像,以用於準備該時序模型的輸入。在該說明書實施例中,希望達到的效果是,用戶在用攝影鏡頭採集視頻流的同時(或者等待時間非常短),APP可在手機端確定與該視頻流對應的定損照片,將該定損照片上傳伺服器,並從伺服器接收透過伺服器端演算法獲取的車輛定損結果。因此,APP在透過攝影鏡頭採集車輛的視頻流之後,可根據模型處理時間確定獲取該視頻流中的哪些幀,例如,可獲取視頻流中的每幀圖像用於模型預測,也可在視頻流中每隔幾幀抽取一幀圖像用於模型預測。
在步驟S306,獲取該多個圖像各自的特徵資訊。
在一個實施例中,可在手機端部署輕量級的圖像分類模型,以對視頻流中的車輛的圖像快速進行本地處理。例如,該預定分類模型例如是使用MobileNet v2、ShuffleNet、SqueezeNet等移動端模型訓練的多任務分類模型。例如,可透過使用大量的帶標籤的車損照片訓練該分類模型,其中,車損照片可包含與是否模糊、是否包括車輛損傷、是否光照充足、拍攝角度是否偏斜、拍攝距離是否合適等分別相關的多個標籤,以進行多任務學習。在上述例如MobileNet v2的移動端模型中,透過對傳統的二維卷積網路進行優化,可以有效地減少模型參數、加快運算效率,從而可以在移動端部署這類演算法。該優化例如包括,透過使用多個小卷積核的疊加來達到和大卷積核相同的效果,而使得所使用的參數以指數倍率下降,透過使用深度可分離卷積(depth-wise separable convolution)來替代一般的二維卷積操作,以減少參數數量,等等。
透過如上所述訓練的該預定分類模型例如可進行以下至少一種關於該圖像的分類:是否模糊、是否包括車輛損傷、是否光照充足、以及拍攝角度是否偏斜(如拍攝角度是否是俯拍、斜拍等偏斜角度)、以及拍攝距離是否合適,等等。從而,基於該分類模型的分類結果,可獲取圖像多個基本屬性特徵,該屬性特徵示出該圖像是否滿足預定的車輛定損照片的基本要求。可以理解,該分類模型執行的對圖像的分類不限於上述列出的幾種,可根據需要增加相應的分類。
在一個實施例中,可在手機端部署目標檢測及分割模型,以用於在手機端對視頻流中的車輛的零件和損傷進行檢測和分割,從而獲取圖像的與目標框和目標分割資訊相關的語義特徵。該目標檢測及分割模型是用於移動端的輕量化的模型,其例如透過MobileNet v2+SSDLite而實現,或者還可以透過MobileNet v2+DeepLab v3、MaskRCNN等實現。在一個實施例中,該目標檢測及分割模型與上述分類模型包括共用的底層的卷積神經網路。在一個實施例中,該目標檢測及分割模型可透過大量加標註(目標框或分割資訊)的車輛損傷圖像進行訓練獲得。其中,在該訓練樣本中針對車輛的零件、或損傷區域進行標註,從而可訓練出用於針對車輛零件和車輛損傷的目標檢測及分割模型。
透過將車輛圖像輸入例如如上所述訓練的目標檢測及分割模型,該目標檢測及分割模型可自動檢測出該圖像中的車輛零件和/或車輛損傷,並在目標位置添加目標框和/或目標分割資訊。從而可基於該目標框和/或目標分割資訊,獲取圖像的語義特徵。該語義特徵即與圖像各部分對應的目標或內容相關的特徵,更具體地,是與目標框和/或目標分割資訊相關的特徵。例如,該語義特徵包括但不限於以下至少一項:目標框個數、分割類別數、最大目標框的圖像占比、以及最大分割類別的圖像占比等等。
在一個實施例中,可在手機端部署光流模型,從而透過多個FlowNet構建幀與幀之間的光流資訊。例如,透過FlowNet1處理第一定損圖像(當前輸入的圖像,例如第t幀圖像),透過FlowNet2處理第二定損圖像(前一次輸入的圖像,例如第t-1幀圖像),透過融合FlowNet1與FlowNet2的輸出,從而獲得第一定損圖像與第二定損圖像之間的光流。對於非第一幀的每個當前幀圖像,都可以獲取與上一幀圖像之間的光流,作為當前幀圖像的光流特徵,對於第一幀圖像,可將其與自身的光流作為光流特徵。
可將透過如上所述獲取的屬性特徵、語義特徵和光流特徵中的至少一個特徵用於構成圖像的特徵資訊,該特徵資訊例如為特徵向量的形式,從而獲取對上述定損圖像判定模型的輸入。然而,可以理解,圖像的特徵資訊不限於上述多個特徵,還可以根據具體業務需要包括其它各種特徵,如圖像的拍攝位置轉換特徵等等。
在獲取該多個圖像各自的特徵資訊過程中,為了節省時間,對於每幀從視頻流中抽取的圖像,可單獨地進行:在抽取圖像之後緊接著將圖像輸入上述各個模型,以基本實時地獲取該圖像的特徵資訊。從而依據APP從視頻流獲取該多個圖像的先後順序,先後地獲取該多個圖像各自的特徵資訊。
在步驟S308,透過以該第一順序將該多個圖像各自的特徵資訊先後輸入透過圖2所示方法訓練的定損圖像判定模型,分別確定該多個圖像是否為定損圖像,其中該定損圖像為用於對該事故車輛進行定損的圖像。
當將如上所述準備的多個特徵資訊(即特徵向量)以第一順序輸入訓練好的定損圖像判定模型之後,該模型根據特徵向量本身以及特徵向量輸入的順序,獲取輸出值,即預測值,以預測對應的圖像是否可用作定損圖像。在該計算中,針對排在後面的特徵向量的預測結果除了基於該特徵向量本身、還基於針對排在前面的特徵向量的預測結果計算獲得。即,透過該模型輸出的與各個特徵向量分別對應的多個預測值是有關聯性的,而不是獨立獲取的。
在該說明書實施例中,為了節省模型計算時間,對於每幀從視頻流中抽取的圖像,可單獨進行:在抽取圖像之後,緊接著獲取該圖像的特徵資訊,並且,在獲取特徵資訊之後,緊接著將該圖像的特徵資訊輸入定損圖像判定模型。從而依據APP從視頻流獲取該多個圖像的先後順序,先後地獲取該多個圖像各自的特徵資訊,並先後地將各個特徵資訊輸入定損圖像判定模型,從而先後地確定該多個圖像各自是否為定損圖像。
例如,該多個圖像中包括第一圖像,當確定第一圖像為定損圖像之後,APP將該第一圖像上傳給伺服器,以用於伺服器端對該事故車輛的定損結果的確定。APP可以在透過如上所述獲取該視頻流的全部定損圖像之後,將這些多個定損圖像一起上傳,也可以在每次確定一個定損圖像之後,上傳該單個定損圖像。
圖4示出根據本說明書實施例的一種訓練定損圖像判定模型的裝置400。該模型包括循環神經網路,該裝置包括:
獲取單元41,配置為,獲取以第一順序排列的多個樣本,該多個樣本與多個圖像分別對應,其中,該多個圖像先後取自於事故車輛的視頻流,其中,每個樣本包括對應圖像的特徵資訊、以及對應圖像的標籤值,該標籤值指示對應圖像是否為定損圖像,其中,該定損圖像為用於對該事故車輛進行定損的圖像;以及
訓練單元42,配置為,使用該多個樣本訓練該模型,以使得相比於訓練前,訓練後的該模型的與該多個樣本對應的預測損失函數減小。
圖5示出根據本說明書實施例的一種圖像處理裝置500。該裝置包括:
視頻流獲取單元51,配置為,獲取事故車輛的視頻流;
圖像獲取單元52,配置為,從該視頻流先後獲取以第一順序排列的多個圖像;
特徵獲取單元53,配置為,獲取該多個圖像各自的特徵資訊;以及
確定單元54,配置為,透過以該第一順序將該多個圖像各自的特徵資訊先後輸入透過上述模型訓練裝置訓練的定損圖像判定模型,分別確定該多個圖像是否為定損圖像,其中該定損圖像為用於對該事故車輛進行定損的圖像。
在一個實施例中,該裝置500在移動設備端實施,該移動設備包括攝影鏡頭,其中,該視頻流獲取單元51還配置為,根據用戶指令,透過該攝影鏡頭採集事故車輛的視頻流。
在一個實施例中,在該圖像處理裝置中,該特徵獲取單元53還配置為,透過以該第一順序將該多個圖像先後輸入預定分類模型,獲取該多個圖像各自的屬性特徵。
在一個實施例中,在該圖像處理裝置中,該預定分類模型進行以下至少一種關於圖像的分類:是否模糊、是否包括車輛損傷、是否光照充足、拍攝角度是否偏斜、以及拍攝距離是否合適。
在一個實施例中,在該圖像處理裝置中,該特徵獲取單元53還配置為,透過以該第一順序將該多個圖像先後輸入目標檢測及分割模型,獲取該多個圖像各自的語義特徵。
在一個實施例中,在該圖像處理裝置中,該語義特徵包括以下至少一項:目標框個數、分割類別數、最大目標框的圖像占比、以及最大分割類別的圖像占比。
在一個實施例中,在該圖像處理裝置中,該特徵獲取單元53還配置為,透過以該第一順序將該多個圖像先後輸入光流模型,獲取該多個圖像各自的光流特徵。
在一個實施例中,在該圖像處理裝置中,該多個圖像中包括第一圖像,其中,該確定單元54還配置為,確定該第一圖像是否為定損圖像,該裝置還包括上傳單元55,配置為,在確定該第一圖像為定損圖像的情況中,將該第一圖像上傳給伺服器。
本說明書另一方面還提供一種計算設備,包括記憶體和處理器,其特徵在於,該記憶體中儲存有可執行代碼,該處理器執行該可執行代碼時,實現上述任一項模型訓練方法和圖像處理方法。
透過根據本說明書實施例的圖像處理方案,透過在手機端上部署多個特徵提取模型,對來自攝影鏡頭的圖像提取相應的圖像特徵,將這些特徵送入時序模型,以檢測該圖像是否是可用於定損的關鍵幀。透過這樣的演算法流程,可以幫助用戶免去拍照的步驟,同時可以獲得高質量的魯邦的定損幀,提供給伺服器端的演算法以用於定損。從而提升了用戶體驗,提高了演算法精度。
本說明書中的各個實施例均採用遞進的方式描述,各個實施例之間相同相似的部分互相參見即可,每個實施例重點說明的都是與其他實施例的不同之處。尤其,對於系統實施例而言,由於其基本相似於方法實施例,所以描述的比較簡單,相關之處參見方法實施例的部分說明即可。
上述對本說明書特定實施例進行了描述。其它實施例在所附申請專利範圍的範圍內。在一些情況下,在申請專利範圍中記載的動作或步驟可以按照不同於實施例中的順序來執行並且仍然可以實現期望的結果。另外,在圖式中描繪的過程不一定要求示出的特定順序或者連續順序才能實現期望的結果。在某些實施方式中,多任務處理和並行處理也是可以的或者可能是有利的。
本領域普通技術人員應該還可以進一步意識到,結合本文中所公開的實施例描述的各示例的單元及演算法步驟,能夠以電子硬體、電腦軟體或者二者的結合來實現,為了清楚地說明硬體和軟體的可互換性,在上述說明中已經按照功能一般性地描述了各示例的組成及步驟。這些功能究竟以硬體還是軟體方式來執軌道,取決於技術方案的特定應用和設計約束條件。本領域普通技術人員可以對每個特定的應用來使用不同方法來實現所描述的功能,但是這種實現不應認為超出本發明的範圍。
結合本文中所公開的實施例描述的方法或演算法的步驟可以用硬體、處理器執軌道的軟體模組,或者二者的結合來實施。軟體模組可以置於隨機記憶體(RAM)、內部記憶體、唯讀記憶體(ROM)、電可程式化ROM、電可抹除可程式化ROM、暫存器、硬碟、可移動磁碟、CD-ROM、或技術領域內所公知的任意其它形式的儲存介質中。
以上所述的具體實施方式,對本發明的目的、技術方案和有益效果進行了進一步詳細說明,所應理解的是,以上所述僅為本發明的具體實施方式而已,並不用於限定本發明的保護範圍,凡在本發明的精神和原則之內,所做的任何修改、等同替換、改進等,均應包含在本發明的保護範圍之內。
202、204:步驟
302~308:步驟
100:圖像處理系統
11:移動設備
12:伺服器
111:攝影鏡頭
112:特徵提取模組
113:圖像判定模組
1121:分類模型
1122:目標檢測及分割模型
1123:光流模型
400:訓練定損圖像判定模型的裝置
41:獲取單元
42:訓練單元
500:圖像處理裝置
51:視頻流獲取單元
52:圖像獲取單元
53:特徵獲取單元
54:確定單元
55:上傳單元
透過結合圖式描述本說明書實施例,可以使得本說明書實施例更加清楚:
圖1示出了根據本說明書實施例的圖像處理系統100的示意圖;
圖2示出根據本說明書實施例的一種訓練定損圖像判定模型的方法的流程圖;
圖3示出根據本說明書實施例的一種圖像處理方法的流程圖;
圖4示出根據本說明書實施例的一種訓練定損圖像判定模型的裝置400;以及
圖5示出根據本說明書實施例的一種圖像處理裝置500。
Claims (23)
- 一種訓練定損圖像判定模型的方法,該模型包括循環神經網路,該方法包括: 獲取以第一順序排列的多個樣本,該多個樣本與多個圖像分別對應,其中,該多個圖像先後取自於事故車輛的視頻流,其中,每個樣本包括對應圖像的特徵資訊、以及對應圖像的標籤值,該標籤值指示對應圖像是否為定損圖像,其中,該定損圖像為用於對該事故車輛進行定損的圖像;以及 使用該多個樣本訓練該模型,以使得相比於訓練前,訓練後的該模型的與該多個樣本對應的預測損失函數減小。
- 根據請求項1所述的訓練定損圖像判定模型的方法,其中,該循環神經網路為以下一種:LSTM、RNN、GRU。
- 根據請求項1所述的訓練定損圖像判定模型的方法,其中,該特徵資訊包括以下至少一種特徵:屬性特徵、語義特徵、以及光流特徵。
- 一種圖像處理方法,包括: 獲取事故車輛的視頻流; 從該視頻流先後獲取以第一順序排列的多個圖像; 獲取該多個圖像各自的特徵資訊;以及 透過以該第一順序將該多個圖像各自的特徵資訊先後輸入透過請求項1-3中任一項所述的方法訓練的定損圖像判定模型,分別確定該多個圖像是否為定損圖像,其中該定損圖像為用於對該事故車輛進行定損的圖像。
- 根據請求項4所述的圖像處理方法,其中,該方法在移動設備端執行,該移動設備包括攝影鏡頭,其中,獲取事故車輛的視頻流包括,根據用戶指令,透過該攝影鏡頭採集事故車輛的視頻流。
- 根據請求項4所述的圖像處理方法,其中,獲取該多個圖像各自的特徵資訊包括,透過以該第一順序將該多個圖像先後輸入預定分類模型,獲取該多個圖像各自的屬性特徵。
- 根據請求項6所述的圖像處理方法,其中,該預定分類模型進行以下至少一種關於圖像的分類:是否模糊、是否包括車輛損傷、是否光照充足、拍攝角度是否偏斜、以及拍攝距離是否合適。
- 根據請求項4所述的圖像處理方法,其中,獲取該多個圖像各自的特徵資訊包括,透過以該第一順序將該多個圖像先後輸入目標檢測及分割模型,獲取該多個圖像各自的語義特徵。
- 根據請求項8所述的圖像處理方法,其中,該語義特徵包括以下至少一項:目標框個數、分割類別數、最大目標框的圖像占比、以及最大分割類別的圖像占比。
- 根據請求項4所述的圖像處理方法,其中,獲取該多個圖像各自的特徵資訊包括,透過以該第一順序將該多個圖像先後輸入光流模型,獲取該多個圖像各自的光流特徵。
- 根據請求項5所述的圖像處理方法,其中,該多個圖像中包括第一圖像,其中,分別確定該多個圖像是否為定損圖像包括,確定該第一圖像是否為定損圖像,該方法還包括,在確定該第一圖像為定損圖像的情況中,將該第一圖像上傳給伺服器。
- 一種訓練定損圖像判定模型的裝置,該模型包括循環神經網路,該裝置包括: 獲取單元,配置為,獲取以第一順序排列的多個樣本,該多個樣本與多個圖像分別對應,其中,該多個圖像先後取自於事故車輛的視頻流,其中,每個樣本包括對應圖像的特徵資訊、以及對應圖像的標籤值,該標籤值指示對應圖像是否為定損圖像,其中,該定損圖像為用於對該事故車輛進行定損的圖像;以及 訓練單元,配置為,使用該多個樣本訓練該模型,以使得相比於訓練前,訓練後的該模型的與該多個樣本對應的預測損失函數減小。
- 根據請求項12所述的訓練定損圖像判定模型的裝置,其中,該循環神經網路為以下一種:LSTM、RNN、GRU。
- 根據請求項12所述的訓練定損圖像判定模型的裝置,其中,該特徵資訊包括以下至少一種特徵:屬性特徵、語義特徵、以及光流特徵。
- 一種圖像處理裝置,包括: 視頻流獲取單元,配置為,獲取事故車輛的視頻流; 圖像獲取單元,配置為,從該視頻流先後獲取以第一順序排列的多個圖像; 特徵獲取單元,配置為,獲取該多個圖像各自的特徵資訊;以及 確定單元,配置為,透過以該第一順序將該多個圖像各自的特徵資訊先後輸入透過請求項12-14中任一項所述的裝置訓練的定損圖像判定模型,分別確定該多個圖像是否為定損圖像,其中該定損圖像為用於對該事故車輛進行定損的圖像。
- 根據請求項15所述的圖像處理裝置,其中,該裝置在移動設備端實施,該移動設備包括攝影鏡頭,其中,該視頻流獲取單元還配置為,根據用戶指令,透過該攝影鏡頭採集事故車輛的視頻流。
- 根據請求項15所述的圖像處理裝置,其中,該特徵獲取單元還配置為,透過以該第一順序將該多個圖像先後輸入預定分類模型,獲取該多個圖像各自的屬性特徵。
- 根據請求項17所述的圖像處理裝置,其中,該預定分類模型進行以下至少一種關於圖像的分類:是否模糊、是否包括車輛損傷、是否光照充足、拍攝角度是否偏斜、以及拍攝距離是否合適。
- 根據請求項15所述的圖像處理裝置,其中,該特徵獲取單元還配置為,透過以該第一順序將該多個圖像先後輸入目標檢測及分割模型,獲取該多個圖像各自的語義特徵。
- 根據請求項19所述的圖像處理裝置,其中,該語義特徵包括以下至少一項:目標框個數、分割類別數、最大目標框的圖像占比、以及最大分割類別的圖像占比。
- 根據請求項15所述的圖像處理裝置,其中,該特徵獲取單元還配置為,透過以該第一順序將該多個圖像先後輸入光流模型,獲取該多個圖像各自的光流特徵。
- 根據請求項16所述的圖像處理裝置,其中,該多個圖像中包括第一圖像,其中,該確定單元還配置為,確定該第一圖像是否為定損圖像,該裝置還包括上傳單元,配置為,在確定該第一圖像為定損圖像的情況中,將該第一圖像上傳給伺服器。
- 一種計算設備,包括記憶體和處理器,其特徵在於,該記憶體中儲存有可執行代碼,該處理器執行該可執行代碼時,實現請求項1-11中任一項所述的方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811014364.XA CN110569695B (zh) | 2018-08-31 | 2018-08-31 | 基于定损图像判定模型的图像处理方法和装置 |
CN201811014364.X | 2018-08-31 |
Publications (1)
Publication Number | Publication Date |
---|---|
TW202011263A true TW202011263A (zh) | 2020-03-16 |
Family
ID=68772396
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW108119500A TW202011263A (zh) | 2018-08-31 | 2019-06-05 | 基於定損圖像判定模型的圖像處理方法和裝置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11216690B2 (zh) |
CN (1) | CN110569695B (zh) |
TW (1) | TW202011263A (zh) |
WO (1) | WO2020047440A1 (zh) |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110569864A (zh) * | 2018-09-04 | 2019-12-13 | 阿里巴巴集团控股有限公司 | 基于gan网络的车损图像生成方法和装置 |
US11568983B2 (en) * | 2019-09-19 | 2023-01-31 | International Business Machines Corporation | Triage via machine learning of individuals associated with an event |
US10762540B1 (en) * | 2019-10-22 | 2020-09-01 | Capital One Services, Llc | Systems and methods for automated trade-in with limited human interaction |
US10783792B1 (en) | 2019-10-22 | 2020-09-22 | Capital One Services, Llc | Systems and methods for automated vehicle tracking for readiness with limited human interaction |
CN111178403B (zh) * | 2019-12-16 | 2023-10-17 | 北京迈格威科技有限公司 | 训练属性识别模型的方法、装置、电子设备及存储介质 |
US10970835B1 (en) * | 2020-01-13 | 2021-04-06 | Capital One Services, Llc | Visualization of damage on images |
CN111274892B (zh) * | 2020-01-14 | 2020-12-18 | 北京科技大学 | 一种鲁棒的遥感影像变化检测方法及系统 |
CN113283269A (zh) * | 2020-02-20 | 2021-08-20 | 上海博泰悦臻电子设备制造有限公司 | 用于标识地图的方法、电子设备和计算机存储介质 |
CN111368752B (zh) * | 2020-03-06 | 2023-06-02 | 德联易控科技(北京)有限公司 | 车辆损伤的分析方法和装置 |
CN111461211B (zh) * | 2020-03-31 | 2023-07-21 | 中国科学院计算技术研究所 | 一种用于轻量级目标检测的特征提取方法及相应检测方法 |
CN111627041B (zh) * | 2020-04-15 | 2023-10-10 | 北京迈格威科技有限公司 | 多帧数据的处理方法、装置及电子设备 |
US11587180B2 (en) * | 2020-05-14 | 2023-02-21 | Ccc Information Services Inc. | Image processing system |
CN111666995B (zh) * | 2020-05-29 | 2024-04-09 | 平安科技(深圳)有限公司 | 基于深度学习模型的车辆定损方法、装置、设备及介质 |
CN114120260A (zh) * | 2020-09-01 | 2022-03-01 | 广州汽车集团股份有限公司 | 可行驶区域识别方法及其系统、计算机设备、存储介质 |
CN112132750B (zh) * | 2020-09-25 | 2024-04-09 | 北京猿力未来科技有限公司 | 一种视频处理方法与装置 |
CN112329863B (zh) * | 2020-11-09 | 2022-04-22 | 西南交通大学 | 一种牵引变电所内隔离开关状态识别方法 |
CN112508457B (zh) * | 2020-12-25 | 2024-05-31 | 树根互联股份有限公司 | 数据处理方法和装置、工业设备及存储介质 |
CN112668481A (zh) * | 2020-12-29 | 2021-04-16 | 中国电子科技集团公司第五十四研究所 | 一种遥感图像语义抽取方法 |
CN115482020A (zh) * | 2021-05-31 | 2022-12-16 | 英业达科技有限公司 | 车行纪录路况情资收集反馈之奖励系统及其方法 |
US11875496B2 (en) * | 2021-08-25 | 2024-01-16 | Genpact Luxembourg S.à r.l. II | Dimension estimation using duplicate instance identification in a multiview and multiscale system |
CN115774992A (zh) * | 2021-09-07 | 2023-03-10 | 北京三星通信技术研究有限公司 | 信息处理方法、装置、电子设备、存储介质及程序产品 |
CN114266977B (zh) * | 2021-12-27 | 2023-04-07 | 青岛澎湃海洋探索技术有限公司 | 基于超分辨可选择网络的多auv的水下目标识别方法 |
CN115171198B (zh) * | 2022-09-02 | 2022-11-25 | 腾讯科技(深圳)有限公司 | 模型质量评估方法、装置、设备及存储介质 |
WO2024050552A1 (en) * | 2022-09-03 | 2024-03-07 | San Diego State University Research Foundation | Image processing methods and systems for detecting change in infrastructure assets |
CN117292120B (zh) * | 2023-11-27 | 2024-02-09 | 南昌工程学院 | 一种轻量化可见光绝缘子目标检测方法及系统 |
Family Cites Families (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6644973B2 (en) | 2000-05-16 | 2003-11-11 | William Oster | System for improving reading and speaking |
JP4624594B2 (ja) * | 2000-06-28 | 2011-02-02 | パナソニック株式会社 | 物体認識方法および物体認識装置 |
US7536304B2 (en) | 2005-05-27 | 2009-05-19 | Porticus, Inc. | Method and system for bio-metric voice print authentication |
US9298979B2 (en) | 2008-01-18 | 2016-03-29 | Mitek Systems, Inc. | Systems and methods for mobile image capture and content processing of driver's licenses |
US8180629B2 (en) | 2008-07-10 | 2012-05-15 | Trigent Softward Ltd. | Automatic pattern generation in natural language processing |
US9082235B2 (en) | 2011-07-12 | 2015-07-14 | Microsoft Technology Licensing, Llc | Using facial data for device authentication or subject identification |
US20140229207A1 (en) * | 2011-09-29 | 2014-08-14 | Tata Consultancy Services Limited | Damage assessment of an object |
US9066125B2 (en) | 2012-02-10 | 2015-06-23 | Advanced Biometric Controls, Llc | Secure display |
US8705836B2 (en) | 2012-08-06 | 2014-04-22 | A2iA S.A. | Systems and methods for recognizing information in objects using a mobile device |
US9147127B2 (en) | 2013-03-15 | 2015-09-29 | Facebook, Inc. | Verification of user photo IDs |
US9202119B2 (en) | 2013-10-18 | 2015-12-01 | Daon Holdings Limited | Methods and systems for determining user liveness |
JP6287047B2 (ja) | 2013-10-22 | 2018-03-07 | 富士通株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
US9607138B1 (en) | 2013-12-18 | 2017-03-28 | Amazon Technologies, Inc. | User authentication and verification through video analysis |
CA2883010A1 (en) | 2014-02-25 | 2015-08-25 | Sal Khan | Systems and methods relating to the authenticity and verification of photographic identity documents |
US20160012539A1 (en) * | 2014-07-10 | 2016-01-14 | Audatex North America, Inc. | Mobile total loss vehicle evaluation system |
US9646227B2 (en) | 2014-07-29 | 2017-05-09 | Microsoft Technology Licensing, Llc | Computerized machine learning of interesting video sections |
CA2902093C (en) | 2014-08-28 | 2023-03-07 | Kevin Alan Tussy | Facial recognition authentication system including path parameters |
US9619696B2 (en) | 2015-04-15 | 2017-04-11 | Cisco Technology, Inc. | Duplicate reduction for face detection |
US9794260B2 (en) | 2015-08-10 | 2017-10-17 | Yoti Ltd | Liveness detection |
US20170060867A1 (en) | 2015-08-31 | 2017-03-02 | Adfamilies Publicidade, SA | Video and image match searching |
US10065441B2 (en) | 2015-09-01 | 2018-09-04 | Digimarc Corporation | Counterfeiting detection using machine readable indicia |
WO2017059576A1 (en) | 2015-10-09 | 2017-04-13 | Beijing Sensetime Technology Development Co., Ltd | Apparatus and method for pedestrian detection |
US10049286B2 (en) * | 2015-12-15 | 2018-08-14 | International Business Machines Corporation | Image-based risk estimation |
CN105701460B (zh) * | 2016-01-07 | 2019-01-29 | 王跃明 | 一种基于视频的篮球进球检测方法和装置 |
CN105719188B (zh) * | 2016-01-22 | 2017-12-26 | 平安科技(深圳)有限公司 | 基于多张图片一致性实现保险理赔反欺诈的方法及服务器 |
US9886771B1 (en) * | 2016-05-20 | 2018-02-06 | Ccc Information Services Inc. | Heat map of vehicle damage |
GB2554361B8 (en) | 2016-09-21 | 2022-07-06 | Emergent Network Intelligence Ltd | Automatic image based object damage assessment |
CN106934396A (zh) * | 2017-03-09 | 2017-07-07 | 深圳市捷顺科技实业股份有限公司 | 一种车牌检索方法及系统 |
CN107358596B (zh) * | 2017-04-11 | 2020-09-18 | 阿里巴巴集团控股有限公司 | 一种基于图像的车辆定损方法、装置、电子设备及系统 |
CN111914692B (zh) * | 2017-04-28 | 2023-07-14 | 创新先进技术有限公司 | 车辆定损图像获取方法及装置 |
CN111797689B (zh) * | 2017-04-28 | 2024-04-16 | 创新先进技术有限公司 | 车辆定损图像获取方法、装置、服务器和客户端 |
US11087292B2 (en) * | 2017-09-01 | 2021-08-10 | Allstate Insurance Company | Analyzing images and videos of damaged vehicles to determine damaged vehicle parts and vehicle asymmetries |
CN108229338B (zh) * | 2017-12-14 | 2021-12-21 | 华南理工大学 | 一种基于深度卷积特征的视频行为识别方法 |
US10997413B2 (en) * | 2018-03-23 | 2021-05-04 | NthGen Software Inc. | Method and system for obtaining vehicle target views from a video stream |
-
2018
- 2018-08-31 CN CN201811014364.XA patent/CN110569695B/zh active Active
-
2019
- 2019-06-05 TW TW108119500A patent/TW202011263A/zh unknown
- 2019-08-29 US US16/555,425 patent/US11216690B2/en active Active
- 2019-08-30 WO PCT/US2019/049111 patent/WO2020047440A1/en active Application Filing
Also Published As
Publication number | Publication date |
---|---|
CN110569695A (zh) | 2019-12-13 |
CN110569695B (zh) | 2021-07-09 |
WO2020047440A1 (en) | 2020-03-05 |
US11216690B2 (en) | 2022-01-04 |
US20200074222A1 (en) | 2020-03-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TW202011263A (zh) | 基於定損圖像判定模型的圖像處理方法和裝置 | |
TWI709091B (zh) | 圖像處理方法和裝置 | |
US11069052B2 (en) | Damage identification result optimization method and apparatus | |
CN113038018B (zh) | 辅助用户拍摄车辆视频的方法及装置 | |
JP2020504358A (ja) | 画像ベースの車両損害評価方法、装置、およびシステム、ならびに電子デバイス | |
CN108875821A (zh) | 分类模型的训练方法和装置、移动终端、可读存储介质 | |
US11461995B2 (en) | Method and apparatus for inspecting burrs of electrode slice | |
CN108337505B (zh) | 信息获取方法和装置 | |
WO2019176235A1 (ja) | 画像生成方法、画像生成装置及び画像生成システム | |
CN110163041A (zh) | 视频行人再识别方法、装置及存储介质 | |
CN109325429A (zh) | 一种关联特征数据的方法、装置、存储介质及终端 | |
CN110366043A (zh) | 视频处理方法、装置、电子设备及可读介质 | |
WO2021184754A1 (zh) | 视频对比方法、装置、计算机设备和存储介质 | |
CN114926766A (zh) | 识别方法及装置、设备、计算机可读存储介质 | |
CN114663871A (zh) | 图像识别方法、训练方法、装置、系统及存储介质 | |
CN110334590B (zh) | 图像采集引导方法以及装置 | |
CN116612347A (zh) | 基于考场违规的深度学习模型训练方法 | |
CN110309821A (zh) | 图像采集检测方法以及装置 | |
CN112700396A (zh) | 一种人脸图片光照评价方法、装置、计算设备和存储介质 | |
CN116246200A (zh) | 一种基于视觉识别的屏显信息偷拍检测方法及系统 | |
CN112668504A (zh) | 动作识别方法、装置及电子设备 | |
Tiwari et al. | Development of Algorithm for Object Detection & Tracking Using RGB Model | |
CN109583471A (zh) | 用于智能手机识别的方法及装置 | |
KR102608199B1 (ko) | 해외 이미지 및 영상 제공 시스템 | |
CN114239630B (zh) | 翻拍二维码检测方法、装置及可读介质 |