JP6916895B2 - 顔画像重複削除方法及び装置、電子機器、記憶媒体、プログラム - Google Patents

顔画像重複削除方法及び装置、電子機器、記憶媒体、プログラム Download PDF

Info

Publication number
JP6916895B2
JP6916895B2 JP2019553912A JP2019553912A JP6916895B2 JP 6916895 B2 JP6916895 B2 JP 6916895B2 JP 2019553912 A JP2019553912 A JP 2019553912A JP 2019553912 A JP2019553912 A JP 2019553912A JP 6916895 B2 JP6916895 B2 JP 6916895B2
Authority
JP
Japan
Prior art keywords
face
image
face image
queue
facial
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019553912A
Other languages
English (en)
Other versions
JP2020516188A (ja
Inventor
ウェンジエン ミアオ
ウェンジエン ミアオ
チエン チェン
チエン チェン
ドワングアン シー
ドワングアン シー
Original Assignee
ベイジン センスタイム テクノロジー デベロップメント カンパニー, リミテッド
ベイジン センスタイム テクノロジー デベロップメント カンパニー, リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ベイジン センスタイム テクノロジー デベロップメント カンパニー, リミテッド, ベイジン センスタイム テクノロジー デベロップメント カンパニー, リミテッド filed Critical ベイジン センスタイム テクノロジー デベロップメント カンパニー, リミテッド
Publication of JP2020516188A publication Critical patent/JP2020516188A/ja
Application granted granted Critical
Publication of JP6916895B2 publication Critical patent/JP6916895B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • G06V40/173Classification, e.g. identification face re-identification, e.g. recognising unknown faces across different face tracks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/51Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/174Redundancy elimination performed by the file system
    • G06F16/1748De-duplication implemented within the file system, e.g. based on file segments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53Querying
    • G06F16/535Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5854Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/761Proximity, similarity or dissimilarity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/98Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G06V10/993Evaluation of the quality of the acquired pattern
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/50Maintenance of biometric data or enrolment thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Library & Information Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Quality & Reliability (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Computing Systems (AREA)
  • Medical Informatics (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Image Analysis (AREA)
  • Collating Specific Patterns (AREA)
  • Studio Devices (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

(関連出願の相互参照)
本願は、2017年7月21日に中国特許局に出願された、出願番号201710605539.3、発明の名称「顔画像をデータベースに格納する方法、装置、電子機器及びコンピュータ記憶媒体」、及び2018年1月16日に中国特許局に出願された、出願番号201810041797.8、発明の名称「顔画像重複削除方法及び装置、電子機器、記憶媒体、プログラム」の中国特許出願の優先権を主張し、その開示の全てが参照によって本願に組み込まれる。
本願は、コンピュータビジョンの技術に関し、特に顔画像重複削除方法及び装置、電子機器、記憶媒体、プログラムに関する。
画像には豊富且つ直感的な情報が含まれており、現在、インターネットのソーシャル、買い物、旅行等の分野において、ユーザのために情報を伝達するのに大量の画像が必要になっている。画像数量が継続的に増加するにつれて、重複画像の数量も多くなっている。従って、重複画像によってユーザエクスペリエンスに影響を及ぼし、画像の保守量が増加することを回避するために、画像情報の提供側は、画像情報を利用する前に、画像に対して重複削除を行う必要がある。インターネットが急速に発展するに伴い、画像提供側は、毎日ユーザによるアップロード、クローラによるダウンロード等の多くの手段により、大量の画像情報を取得し、その数量が人工での確認の限度をはるかに上回っている。
本願の実施形態は、顔画像重複削除技術を提供する。
本願の実施形態の一態様によれば、
取得された複数の第1の顔画像に対してフィルタリング操作を実行し、画像品質が第1の設定条件に到達した少なくとも1つの第2の顔画像を取得する工程と、
前記第2の顔画像を画像キュー内の少なくとも1つの第3の顔画像とマッチングし、マッチング結果を取得する工程と、
前記マッチング結果に基づいて前記第2の顔画像に対して重複削除操作を実行するか否かを確定する工程と、を含む顔画像重複削除方法が提供される。
任意選択的に、前記画像キューは、異なる人にそれぞれ対応する少なくとも1つの第3の顔画像を含む。
任意選択的に、取得された複数の第1の顔画像に対してフィルタリング操作を実行する前記工程は、
前記第1の顔画像における顔の表示品質を表すための、前記第1の顔画像に対応する顔属性に基づいて、取得された複数の第1の顔画像をフィルタリングする工程と、
及び/又は、
前記第1の顔画像における顔の振れ角度を表すための、前記第1の顔画像における顔の角度に基づいて、取得された複数の第1の顔画像をフィルタリングする工程と、を含む。
前記顔属性は顔角度、顔幅高値、顔ボケ度のいずれか一つ又は複数を含み、
前記第1の顔画像に対応する顔属性に基づいて、取得された複数の第1の顔画像をフィルタリングする前記工程は、
前記顔角度が第1の所定範囲にあること、前記顔幅高値が第2の所定閾値より大きいこと、前記顔ボケ度が第3の所定閾値より小さいことの少なくとも1つを含む第1の条件を満たすことに応じて、前記第1の顔画像の画像品質が第1の設定条件に到達したことを確定する工程を含む。
任意選択的に、取得された複数の第1の顔画像に対してフィルタリング操作を実行し、画像品質が第1の設定条件に到達した少なくとも1つの第2の顔画像を取得する前記工程は、
複数の第1の顔画像から同一人に対応する少なくとも1つの第1の顔画像を識別する工程と、
前記同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、前記少なくとも1つの第1の顔画像のうち、品質が第1の設定条件に到達した第2の顔画像を取得する工程と、を含む。
任意選択的に、前記同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、前記少なくとも1つの第1の顔画像のうち、品質が第1の設定条件に到達した第2の顔画像を取得する前記工程は、
前記第1の顔画像に対応する顔角度に基づいて前記同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得する工程を含む。
任意選択的に、前記顔角度は、顔水平振れ角度、顔俯仰角度、顔傾斜角度のいずれか1つ又は複数を含む。
任意選択的に、前記第1の顔画像に対応する顔角度に基づいて前記同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得する前記工程は、
前記第1の顔画像に対応する顔水平振れ角度、顔俯仰角度及び顔傾斜角度を3次元ベクトルに変換する工程と、
前記3次元ベクトルから基準点までの距離に基づいて、前記同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得する工程であって、前記基準点は値が全て0となる3次元ベクトルである工程と、を含む。
任意選択的に、複数の第1の顔画像から同一人に対応する少なくとも1つの第1の顔画像を識別する前記工程は、
複数の第1の顔画像から、第1の所定の時間内に同一人に対応する少なくとも1つの第1の顔画像を識別する工程を含み、
前記3次元ベクトルから基準点までの距離に基づいて、前記同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得する前記工程は、
前記少なくとも1つの第1の顔画像のうち、3次元ベクトルから前記基準点までの距離が最も小さい第1の顔画像を前記第2の顔画像として確定する工程を含む。
任意選択的に、前記第2の顔画像を画像キュー内の少なくとも1つの第3の顔画像とマッチングし、マッチング結果を取得する工程は、
前記第2の顔画像に対応する第2の顔特徴、及び前記画像キュー内の少なくとも1つの第3の顔画像に対応する第3の顔特徴に基づいて、前記第2の顔画像と前記画像キュー内の前記少なくとも1つの第3の顔画像との類似度を取得する工程と、
前記第2の顔画像と前記画像キュー内の少なくとも1つの第3の顔画像との類似度に基づいて、マッチング結果を取得する工程と、を含む。
任意選択的に、前記第2の顔画像と前記画像キュー内の少なくとも1つの第3の顔画像との類似度に基づいて、マッチング結果を取得する前記工程は、
前記画像キューに、前記第2の顔画像との類似度が予め設定された類似度と同じ、又はそれより大きい第3の顔画像が存在することに応じて、前記画像キューに前記第2の顔画像とマッチングする画像が存在することを表すマッチング結果を取得する工程、及び/又は
前記画像キューに、前記第2の顔画像との類似度が前記予め設定された類似度と同じ、又はそれより大きい第3の顔画像が存在しないことに応じて、前記画像キューに前記第2の顔画像とマッチングする画像が存在しないことを表すマッチング結果を取得する工程を含む。
任意選択的に、前記少なくとも1つの第2の顔画像に対応する第2の顔特徴、及び前記画像キュー内の少なくとも1つの第3の顔画像に対応する予め保存された顔特徴に基づいて、前記第2の顔画像と前記画像キュー内の前記少なくとも1つの第3の顔画像との類似度を取得する前記工程は、
前記少なくとも1つの第2の顔画像に対応する第2の顔特徴と前記画像キュー内の少なくとも1つの第3の顔画像のうちの各第3の顔画像に対応する第3の顔特徴との距離をそれぞれ確定する工程と、
前記距離に基づいて前記第2の顔画像と前記画像キュー内の少なくとも1つの第3の顔画像のうちの各第3の顔画像との類似度を取得する工程と、を含む。
任意選択的に、マッチング結果に基づいて前記第2の顔画像に対して重複削除操作を実行するか否かを確定する前記工程は、
前記画像キューに前記第2の顔画像とマッチングする画像が存在することを表す前記マッチング結果に応じて、前記第2の顔画像が重複している画像であることを確定し、及び/又は、前記第2の顔画像を前記画像キューに格納しない工程を含む。
任意選択的に、前記マッチング結果に基づいて前記第2の顔画像に対して重複削除操作を実行するか否かを確定する工程は、
前記画像キューに前記第2の顔画像とマッチングする画像が存在しないことを表す前記マッチング結果に応じて、前記第2の顔画像が重複している画像ではないことを確定し、及び/又は、前記第2の顔画像を前記画像キューに格納する工程を含む。
任意選択的に、取得された複数の第1の顔画像に対してフィルタリング操作を実行する前記工程の前は、更に、
少なくとも1フレームのビデオ画像に基づいて前記複数の第1の顔画像を取得する工程を含む。
任意選択的に、前記少なくとも1フレームのビデオ画像に基づいて前記複数の第1の顔画像を取得する工程は、
ビデオストリームから顔画像を含む少なくとも1フレームのビデオ画像を取得する工程と、
前記少なくとも1フレームのビデオ画像に対して顔識別処理を行い、前記複数の第1の顔画像を取得する程と、を含む。
任意選択的に、前記少なくとも1フレームのビデオ画像に対して顔識別処理を行う前記工程の前に、更に、
前記ビデオ画像内の所定の大きさを有する少なくとも1つの顔画像を取得する工程を含む。
任意選択的に、更に、
前記取得された複数の第1の顔画像に基づいて、少なくとも1つの顔軌跡を確立する工程であって、各々顔軌跡が一人に対応する、工程を含み、
取得された複数の第1の顔画像に対してフィルタリング操作を実行し、画像品質が第1の設定条件に到達した少なくとも1つの第2の顔画像を取得する前記工程は、
前記少なくとも1つの顔軌跡のうちの各顔軌跡に含まれる少なくとも1つの第1の顔画像に対してフィルタリング操作を行い、前記各顔軌跡における画像品質が第1の設定条件に到達した1つの第2の顔画像を取得する工程を含む。
任意選択的に、前記方法はクライアント端末に適用され、
前記方法は、更に、
前記重複削除操作により取得された目標顔画像又は画像キューをサーバに送信する工程を含む。
本願の別の実施形態によれば、
取得された複数の第1の顔画像に対してフィルタリング操作を実行し、画像品質が第1の設定条件に到達した少なくとも1つの第2の顔画像を取得するために用いられるフィルタリングユニットと、
前記第2の顔画像を画像キュー内の少なくとも1つの第3の顔画像とマッチングし、マッチング結果を取得するために用いられるマッチングユニットと、
前記マッチング結果に基づいて前記第2の顔画像に対して重複削除操作を実行するか否かを確定するために用いられる重複削除ユニットと、を含む顔画像重複削除装置が提供される。
任意選択的に、前記画像キューは、異なる人にそれぞれ対応する少なくとも1つの第3の顔画像を含む。
任意選択的に、前記フィルタリングユニットは、
前記第1の顔画像における顔の表示品質を表すための、前記第1の顔画像に対応する顔属性に基づいて、取得された複数の第1の顔画像をフィルタリングするために用いられる属性フィルタリングモジュールと、
及び/又は、
前記第1の顔画像における顔の振れ角度を表すための、前記第1の顔画像における顔の角度に基づいて、取得された複数の第1の顔画像をフィルタリングするために用いられる角度フィルタリングモジュールと、を含む。
任意選択的に、前記顔属性は顔角度、顔幅高値、顔ボケ度のいずれか一つ又は複数を含み、
前記マッチングユニットは、具体的には、第1の条件を満たすことに応じて、前記顔角度が第1の所定範囲にあること、前記顔幅高値が第2の所定閾値より大きいこと、及び/又は前記顔ボケ度が第3の所定閾値より小さいことの少なくとも1つを含む前記第1の条件について前記第1の顔画像の画像品質が到達したことを確定するために用いられる。
任意選択的に、前記フィルタリングユニットは、複数の第1の顔画像から同一人に対応する少なくとも1つの第1の顔画像を識別し、前記同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、前記少なくとも1つの第1の顔画像のうち、品質が第1の設定条件に到達した第2の顔画像を取得するために用いられる。
任意選択的に、前記フィルタリングユニットは前記同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、前記少なくとも1つの第1の顔画像のうち、品質が第1の設定条件に到達した第2の顔画像を取得する時に、前記第1の顔画像に対応する顔角度に基づいて前記同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得するために用いられる。
任意選択的に、前記顔角度は、顔水平振れ角度、顔俯仰角度、顔傾斜角度のいずれか1つ又は複数を含む。
任意選択的に、前記フィルタリングユニットは、
前記第1の顔画像に対応する顔水平振れ角度、顔俯仰角度及び顔傾斜角度を3次元ベクトルに変換するために用いられる角度変換モジュールと、
前記3次元ベクトルから基準点までの距離に基づいて、前記同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得するために用いられるベクトルフィルタリングモジュールであって、前記基準点は値が全て0となる3次元ベクトルであるベクトルフィルタリングモジュールと、を含む。
任意選択的に、前記フィルタリングユニットは複数の第1の顔画像から同一人に対応する少なくとも1つの第1の顔画像を識別する時に、複数の第1の顔画像から、第1の所定の時間内に同一人に対応する少なくとも1つの第1の顔画像を識別するために用いられ、
前記ベクトルフィルタリングモジュールは、前記少なくとも1つの第1の顔画像のうち、3次元ベクトルから前記基準点までの距離が最も小さい第1の顔画像を前記第2の顔画像として確定するために用いられる。
任意選択的に、前記マッチングユニットは、
前記第2の顔画像に対応する第2の顔特徴、及び前記画像キュー内の少なくとも1つの第3の顔画像に対応する第3の顔特徴に基づいて、前記第2の顔画像と前記画像キュー内の前記少なくとも1つの第3の顔画像との類似度を取得するために用いられる類似度モジュールと、
前記第2の顔画像と前記画像キュー内の少なくとも1つの第3の顔画像との類似度に基づいて、マッチング結果を取得するために用いられる結果マッチングモジュールと、を含む。
任意選択的に、前記結果マッチングモジュールは、前記画像キューに、前記第2の顔画像との類似度が予め設定された類似度と同じ、又はそれより大きい第3の顔画像が存在することに応じて、前記画像キューに前記第2の顔画像とマッチングする画像が存在することを表すマッチング結果を取得し、及び/又は
前記画像キューに、前記第2の顔画像との類似度が前記予め設定された類似度と同じ、又はそれより大きい第3の顔画像が存在しないことに応じて、前記画像キューに前記第2の顔画像とマッチングする画像が存在しないことを表すマッチング結果を取得するために用いられる。
任意選択的に、前記類似度モジュールは、具体的には、前記少なくとも1つの第2の顔画像に対応する第2の顔特徴と前記画像キュー内の少なくとも1つの第3の顔画像のうちの各第3の顔画像に対応する予め保存された顔特徴との距離をそれぞれ確定し、前記距離に基づいて前記第2の顔画像と前記画像キュー内の少なくとも1つの第3の顔画像のうちの各第3の顔画像との類似度を取得するために用いられる。
任意選択的に、前記重複削除ユニットは、前記画像キューに前記第2の顔画像とマッチングする画像が存在することを表す前記マッチング結果に応じて、前記第2の顔画像が重複している画像であることを確定し、及び/又は、前記第2の顔画像を前記画像キューに格納しないために用いられる。
任意選択的に、前記重複削除ユニットは、更に、前記画像キューに前記第2の顔画像とマッチングする画像が存在しないことを表す前記マッチング結果に応じて、前記第2の顔画像が重複している画像ではないことを確定し、及び/又は、前記第2の顔画像を前記画像キューに格納するために用いられる。
任意選択的には、更に、
少なくとも1フレームのビデオ画像に基づいて前記複数の第1の顔画像を取得するために用いられる画像取得ユニットを含む。
任意選択的に、前記画像取得ユニットは、
ビデオストリームから顔画像を含む少なくとも1フレームのビデオ画像を取得するために用いられるフレーム抽出モジュールと、
前記少なくとも1フレームのビデオ画像に対して顔識別処理を行い、前記複数の第1の顔画像を取得するために用いられる識別分割モジュールと、を含む。
任意選択的に、前記画像取得ユニットは、更に、
前記ビデオ画像内の所定の大きさを有する少なくとも1つの顔画像を取得するために用いられる顔取得モジュール含む。
任意選択的に、前記画像取得ユニットは、更に、
前記取得された複数の第1の顔画像に基づいて、少なくとも1つの顔軌跡を確立するために用いられる軌跡確立モジュールであって、各々顔軌跡が一人に対応する、軌跡確立モジュールと、
前記少なくとも1つの顔軌跡のうちの各顔軌跡に含まれる少なくとも1つの第1の顔画像に対してフィルタリング操作を行い、前記各顔軌跡における画像品質が第1の設定条件に到達した1つの第2の顔画像を取得するために用いられる前記フィルタリングユニットと、を含む。
任意選択的に、前記装置はクライアント端末に適用され、
前記装置は更に、
前記重複削除操作により取得された目標顔画像又は画像キューをサーバに送信するために用いられる送信ユニットを含む。
本願の別の実施形態によれば、上記の顔画像重複削除装置を備えるプロセッサーを含む電子機器が提供される。
本願の別の実施形態によれば、実行可能命令を記憶するために用いられるメモリーと、
前記メモリーと通信して前記実行可能命令を実行して上記の顔画像重複削除方法を実施するために用いられるプロセッサーと、を含む電子機器が提供される。
本願の別の実施形態によれば、コンピュータ読み取り可能命令を記憶するために用いられるコンピュータ記憶媒体において、
前記命令が実行される時に上記の顔画像重複削除方法を実行するコンピュータ記憶媒体が提供される。
本願の別の実施形態によれば、コンピュータ読み取り可能コードを含むコンピュータプログラムにおいて、
前記コンピュータ読み取り可能コードを機器上で動作する時に、前記機器内のプロセッサーが上記の顔画像重複削除方法を実現するための命令を実行するコンピュータプログラムが提供される。
本願の上記実施形態に基づいて提供される顔画像重複削除方法及び装置、電子機器、記憶媒体、プログラムは、取得された複数の第1の顔画像に対してフィルタリング操作を実行して、画像品質が第1の設定条件に到達した少なくとも1つの第2の顔画像が取得され、品質に基づくフィルタリングが実現され、顔画像の数量が低減され、取得された顔画像の品質が後続の顔画像に対する処理要求を満たすことができ、また、大量の顔画像を重複して処理する問題が回避され、更に、前記第2の顔画像を画像キュー内の少なくとも1つの第3の顔画像とマッチングしてマッチング結果を取得し、前記マッチング結果に基づいて前記第2の顔画像に対して重複削除操作を実行するか否かを確定し、既知の画像キューに基づいて該顔画像を記憶したか否かを判断し、速い重複顔識別を実現する。
以下、図面及び実施形態により本願の技術手段を更に詳細に記載する。
本願の顔画像重複削除方法の一実施形態のフローチャートである。 本願の顔画像重複削除装置の一実施形態の構造模式図である。 本願の実施形態の端末装置又はサーバを実現するための電子機器の構造模式図である。
明細書の一部を構成する図面は、本願の実施形態を記載しており、その記載と共に本願の原理を解釈するために用いられる。
図面を参照し、以下の詳細な記載によれば、本願をより明らかに理解できる。
ここで、図面を参照しながら本願の様々な例示的実施形態を詳細に説明する。なお、特に断らない限り、これらの実施形態で記述した部材及びステップの相対的配置、数式及び数値は本願の範囲を限定するものではないことに注意すべきである。
同時に、説明の便宜上、図面に示した各部の寸法は実際の比例関係に従って描いたものではないことを理解すべきである。
以下の少なくとも一つの例示的実施形態に対する説明は実際に説明的なものに過ぎず、本願及びその適用又は使用へのなんらの制限にもならない。
関連分野の当業者に既知の技術、方法及び機器については、詳細に説明しない場合があるが、場合によって、前記技術、方法及び機器は明細書の一部と見なすべきである。
なお、類似する符号及び英文字は以下の図面において類似項目を表し、従って、ある一項が一つの図面において定義されれば、以降の図面においてそれをさらに説明する必要がないことに注意すべきである。
本願の実施形態はコンピュータシステム/サーバなどに適用可能であり、それは他の様々な共通又は専用計算システム環境又は構成と共に動作可能である。コンピュータシステム/サーバとの併用に適する公知の計算システム、環境及び/又は構成の例は、パーソナルコンピュータシステム、サーバコンピュータシステム、シンクライアント、ファットクライアント、手持ち又はラップトップデバイス、マイクロプロセッサーに基づくシステム、セットトップボックス、プログラマブル消費者用電子機器、ネットワークパソコン、小型コンピュータシステム、大型コンピュータシステム及び前記あらゆるシステムを含む分散型クラウドコンピューティング技術環境などを含むが、これらに限定されない。
コンピュータシステム/サーバはコンピュータシステムにより実行されるコンピュータシステム実行可能命令(例えば、プログラムモジュール)の一般的な言語環境において記載できる。通常、プログラムモジュールはルーチン、プログラム、目的プログラム、コンポーネント、ロジック、データ構造などを含んでもよく、それらは特定のタスクを実行するか又は特定の抽象データ型を実現する。コンピュータシステム/サーバは分散型クラウドコンピューティング環境において実施でき、分散型クラウドコンピューティング環境において、タスクは通信ネットワークにわたってリンクされた遠隔処理機器により実行される。分散型クラウドコンピューティング環境において、プログラムモジュールは記憶機器を含むローカル又は遠隔計算システムの記憶媒体に存在してもよい。
図1は本願の顔画像重複削除方法の一実施形態のフローチャートである。該方法は、例えば端末装置、サーバなどの顔画像重複削除装置により実行可能であり、本願の実施形態は該顔画像重複削除装置の具体的な実現を限定しない。図1に示すように、該実施形態の方法は、
取得された複数の第1の顔画像に対してフィルタリング操作を実行し、画像品質が第1の設定条件に到達した少なくとも1つの第2の顔画像を取得するステップ101を含む。
任意選択的に、顔角度、顔幅高及び顔ボケ度等により顔画像の表示品質を評価可能であるが、本実施形態は具体的に何の指標に基づいて顔画像の表示品質を評価するかについて制限を加えなく、表示品質が基準に達した第2の顔画像を取得した後更に同一人に対応する複数の第2の顔画像に対して重複削除を行ってもよく、1つのビデオセグメントに基づいて複数の表示品質が基準に達した同一人の複数の第2の顔画像を取得した場合に、すべて後続の操作機器に伝送すれば、大きい負担になり、そして大量の資源を無駄に消耗する。
1つの選択可能な例において、このステップ101はプロセッサーによりメモリーに記憶された対応する命令を呼び出して実行されてもよいし、プロセッサーで動作するフィルタリングユニット21により実行されてもよい。
ステップ102において、第2の顔画像を画像キュー内の少なくとも1つの第3の顔画像とマッチングし、マッチング結果を取得する。
1つ又は複数の選択可能な実施形態において、画像キューは、異なる人にそれぞれ対応する少なくとも1つの第3の顔画像を含み、任意選択的に、画像キューは、更に異なる人に対応する少なくとも1つの第3の顔画像に対応する顔特徴を含んでもよく、画像キューにおいて、顔画像及び/又は顔画像に対応する顔特徴が異なる人にそれぞれ対応してもよく(例えば、それぞれの顔画像が一人に対応する)、又は画像キューに異なる人にそれぞれ対応する一部の画像を含んでもよく、任意選択的に、2つの顔画像がマッチングするか否かを識別するには、顔画像に対応する顔特徴の間の距離に基づいて実現することができ、顔特徴の間の距離は、コサイン距離、ユークリッド距離等を含むが、これらに限定されず、本実施形態は具体的な特徴の間の距離の計算方法について制限を加えない。
任意選択的に、第2の顔画像を画像キュー内の第3の顔画像とマッチングする時に、第2の顔画像の特徴に基づいて画像キュー内の第3の顔画像の顔特徴とマッチングし、特徴マッチング結果に基づいて第2の顔画像が重複している画像であるか否かを確定することができる。
1つの選択可能な例において、このステップ102はプロセッサーによりメモリーに記憶された対応する命令を呼び出して実行されてもよいし、プロセッサーで動作するマッチングユニット22により実行されてもよい。
ステップ103、マッチング結果に基づいて第2の顔画像に対して重複削除操作を実行か否かを確定する。
任意選択的に、フィルタリングした後取得された顔画像が予め保存された顔画像と同一人に対応する場合に、該顔画像が重複画像となり、この人に対応する顔画像がフィルタリング・重複削除処理を行われたことを示し、この時に、該顔画像を廃棄すること又は該顔画像を採用してこの人の画像キューでの対応する顔画像を交換することのどちらにしてもよく、フィルタリングした後取得された顔画像が予め保存された顔画像と同一人に対応しない場合に、該顔画像が重複画像ではなく、この顔画像に対応する人が新たに現れたものであることを示し、後で識別するためにキューに格納する必要がある。
1つの選択可能な例において、このステップ103はプロセッサーによりメモリーに記憶された対応する命令を呼び出して実行されてもよいし、プロセッサーで動作する重複削除ユニット23により実行されてもよい。
本願の上記実施形態に基づいて提供される顔画像重複削除方法は、取得された複数の第1の顔画像に対してフィルタリング操作を実行して、画像品質が第1の設定条件に到達した少なくとも1つの第2の顔画像が取得され、品質に基づくフィルタリングが実現され、顔画像の数量が低減され、取得された顔画像の品質が後続の顔画像に対する処理要求を満たすことができ、また、大量の顔画像を重複して処理する問題が回避され、更に、前記第2の顔画像を画像キュー内の少なくとも1つの第3の顔画像とマッチングしてマッチング結果を取得し、前記マッチング結果に基づいて前記第2の顔画像に対して重複削除操作を実行するか否かを確定し、既知の画像キューに基づいて該顔画像を記憶したか否かを判断し、速い重複顔識別を実現する。
本願の顔画像重複削除方法の別の実施形態において、上記実施形態に基づいて、取得された複数の第1の顔画像に対してフィルタリング操作を実行する工程は、
第1の顔画像に対応する顔属性に基づいて、取得された複数の第1の顔画像をフィルタリングする工程を含む。
ここで、顔属性は顔画像における顔の表示品質を表すためのものであり、第1の顔画像に対応する顔属性は第1の顔画像における顔の表示品質を表すためのものである。
任意選択的に、顔属性は、顔角度、顔幅高値、顔ボケ度のいずれか1つ又は複数を含むが、これらに限定されるものではなく、任意選択的に、顔角度は、顔の水平方向での振れ角度を表すために用いられる水平振れ角度(yaw)、顔の垂直方向での転動角度を表すために用いられる俯仰角度(pitch)、顔の垂直方向での振れ角度を表すために用いられる傾斜角度(roll)を含むが、これらに限定されるものではない。
1つ又は複数の選択可能な実施形態において、第1の顔画像に対応する顔属性に基づいて、取得された複数の第1の顔画像をフィルタリングする工程は、
第1の条件を満たすことに応じて、第1の顔画像の画像品質が第1の設定条件に到達したことを確定する工程を含む。
ここで、第1の条件は、顔角度が第1の所定範囲にあること、顔幅高値が第2の所定閾値より大きいこと、顔ボケ度が第3の所定閾値より小さいことの少なくとも1つを含むが、それらに限定されない。
又は、顔画像における顔に対応する顔属性を取得し、顔属性を判断し、
少なくとも1つの顔画像を画像キューに予め保存された顔画像とマッチングする工程は、
顔角度が第1の所定範囲にあること、顔幅高値が第2の所定閾値より大きいこと、顔ボケ度が第3の所定閾値より小さいことの少なくとも1つの条件を満たすことに応じて、
少なくとも1つの顔画像のうちの各顔画像を画像キューに予め保存された顔画像とマッチングする工程を含む。
更に、
顔角度が第1の所定範囲に存在しないこと、顔幅高値が第2の所定閾値と同等以下であること、顔ボケ度が第3の所定閾値と同等以上であることの少なくとも1つの条件を満たすことに応じて、
該顔画像を削除する工程を含む。
例えば、第1の所定範囲は±20°に設定してもよく(具体的な値を具体的な場合に応じて設定してもよい)、即ち、顔角度のうちの水平振れ角度(yaw)、俯仰角度(pitch)及び傾斜角度(roll)が共に±20°の範囲にあり(3つの角度を同様な範囲又は異なる範囲に設定してもよい)、顔幅高は、顔の幅、顔の高さ(一般的には検出(detect)により返却し、設定することによってフィルタリングしてもよく、例えば、50画素に設定し、幅及び高さが50画素より小さい顔画像が条件に合致しないものと見なされ、幅及び高さを異なる値又は同一値に設定してもよい)を含んでもよく、顔属性が顔ボケ度(一般的にはキューツールキット(SDK−alignment)により返却し、異なる値に設定してもよく、例えば、0.7に設定し、ボケ度が0.7より大きい場合に品質が悪い顔画像と見なす)を含んでもよい。ここで±20°、50画素、0.7という値は設定閾値であり、実際に応じて設定してもよい。
取得された複数の第1の顔画像に対してフィルタリング操作を実行する工程は、更に、顔画像における顔の振れ角度を表すために用いられる、第1の顔画像における顔の角度に基づいて、取得された複数の第1の顔画像をフィルタリングする工程を含んでもよく、本実施形態において、第1の顔画像における顔の角度は第1の顔画像における顔の振れ角度を表すために用いられる。振れ角度は基準的な前向きの顔に対するものであり、基準的な前向きの顔とは顔の水平、垂直及び傾斜方向での角度が全て0である顔を意味し、この顔を原点として顔の振れ角度を計算することができる。
更に、ビデオストリームから取得された複数のフレームの顔画像に対してフィルタリング操作を実行する工程を含んでもよい。ビデオストリームにおける複数のフレームの顔画像に対してフィルタリングを実行することにより、顔画像に基づいてビデオストリームからフレームを選択するという目的を実現することができ、フレーム選択により取得されたビデオフレーム中の顔画像が全て第1の設定条件に合致するものである。
1つ又は複数の選択可能な実施形態において、操作101には、
複数の第1の顔画像から同一人に対応する少なくとも1つの第1の顔画像を識別する工程と、
同一人に対応する少なくとも1つの第1の顔画像をフィルタリングして、少なくとも1つの第1の顔画像のうち、品質が第1の設定条件に到達した第2の顔画像を取得する工程と、を含む。
同一人の顔画像をフィルタリングすることにより、第1の顔画像のみをフィルタリングして品質問題のため一部の人の顔が採取されないことを回避し、取得された第2の顔画像の全面性を高めた。
任意選択的に、フィルタリング過程は顔軌跡を確立することにより実現可能であり、それは、同一人に対応する少なくとも1つの顔画像に基づいて顔軌跡を取得する工程と、
顔画像に対応する顔角度に基づいて顔軌跡における顔画像をフィルタリングし、顔軌跡における品質が第1の設定条件に到達した顔画像を取得する工程と、を含む。
本実施形態では、顔軌跡における顔画像をフィルタリングすることにより、少なくとも一人に対してそれぞれ品質の高い1枚の画像を取得する(例えば、それぞれの人に対して品質の高い1枚の画像を取得する)ことが実現され、顔角度により該顔画像の品質が第1の設定条件に到達したか否かを判断してもよく、この第1の設定条件はユーザの設定に基づいて調整可能であり、設定された角度範囲値であってもよいし、顔品質の高い1枚の画像を取るように設定してもよい。
任意選択的に、同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、少なくとも1つの第1の顔画像のうち、品質が第1の設定条件に到達した第2の顔画像を取得する工程は、
第1の顔画像に対応する顔角度に基づいて同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得する工程を含む。
顔角度をフィルタリングすることにより、大きい角度で振れた顔を除去し、角度が設定範囲にある第2の顔画像を取得することができる。
1つ又は複数の選択可能な実施形態において、顔角度は、顔水平振れ角度、顔俯仰角度、顔傾斜角度のいずれか1つ又は複数を含むが、それらに限定さらない。
任意選択的に、第1の顔画像に対応する顔角度に基づいて同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得する工程は、
第1の顔画像に対応する顔水平振れ角度、顔俯仰角度及び顔傾斜角度を1つの3次元ベクトルに変換する工程と、
3次元ベクトルから基準点までの距離に基づいて同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得する工程を含む。ここで、基準点は値が全て0である3次元ベクトルである。
任意選択的に、3次元ベクトルから基準点までの距離に基づいて顔軌跡における顔画像をフィルタリングし、基準点は値が全て0である3次元ベクトルである。
本実施形態において、顔水平振れ角度、顔俯仰角度及び顔傾斜角度を変換して取得された3次元ベクトルの二乗差を計算することにより距離値を取得することができ、この距離値により顔画像の品質を評価し、距離が小さいほど顔画像の品質が高いことを示し、即ち顔画像における顔が前向きの顔に似ており、ただし、本実施形態は、二乗差を計算することにより距離値を取得することに限定されず、更に他の方法により取得してもよく、また、速くフィルタリングするために、設定された時間期間内(例えば、5秒以内、10秒以内等)に顔軌跡における顔画像をフィルタリングするようにしてもよい。
任意選択的に、複数の第1の顔画像から同一人に対応する少なくとも1つの第1の顔画像を識別する工程は、複数の第1の顔画像から、第1の所定の時間内に同一人に対応する少なくとも1つの第1の顔画像を識別する工程を含み、
3次元ベクトルから基準点までの距離に基づいて同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得する工程は、
少なくとも1つの第1の顔画像のうち、3次元のベクトルの基準点までの距離が最も小さい第1の顔画像を第2の顔画像として確定することを含む。
所定の時間内に、同一人の該所定の時間内での少なくとも1つの第1の顔画像をフィルタリングすることにより、毎回識別する第1の顔画像の数量を効果的に制御し、識別結果をより正確にすることができる。基準点までの距離が最も小さい第1の顔画像は顔画像における顔角度が最も小さい顔、即ち最も前向きの顔に似ている顔を示す。
1つ又は複数の選択可能な実施形態において、顔軌跡は更に、顔画像に対するフィルタリング操作の実行を開始する時間に対応する、顔画像に対応するタイムスタンプを含み、
3次元ベクトルから基準点までの距離に基づいて顔軌跡における顔画像をフィルタリングする工程は、
3次元ベクトルから基準点までの距離に基づいて、第1の所定の時間内での顔軌跡における少なくとも1つの顔画像のうち、対応する距離が所定閾値より小さい顔画像を取得し、対応する距離が所定閾値より小さい顔画像を保存する工程、又は
3次元ベクトルから基準点までの距離に基づいて、第1の所定の時間内での顔軌跡における少なくとも1つの顔画像のうち、対応する距離が最も小さい顔画像を取得し、対応する距離が最も小さい顔画像を保存する工程を含む。
本実施形態では設定時間内に顔画像をフィルタリングすることにより、該時間内の顔軌跡における品質の高い顔画像が取得され、即ち、品質が高い顔画像を取得し、処理速度を加速し、後で複数の所定の時間に取得された品質の高い顔画像に基づいて新たな顔軌跡を確立することが可能になり、新たな顔軌跡に基づいて更に品質フィルタリングにより、複数の所定の時間内の全ての顔画像のうちの優れた品質の顔画像を取得することを実現する。
本願の顔画像重複削除方法の更に別の実施形態において、上記実施形態に基づいて、操作102には、
第2の顔画像に対応する第2の顔特徴、及び画像キュー内の少なくとも1つの第3の顔画像に対応する第3の顔特徴に基づいて、第2の顔画像と画像キュー内の少なくとも1つの第3の顔画像との類似度を取得する工程と、
第2の顔画像と画像キュー内の少なくとも1つの第3の顔画像との類似度に基づいて、マッチング結果を取得する工程とを含む。
任意選択的に、画像キューには第2の顔画像との類似度が予め設定された類似度と同じ、又はそれより大きい第3の顔画像が存在することに応じて、画像キューに第2の顔画像とマッチングする画像が存在することを表すマッチング結果を取得する工程、及び/又は
画像キューに、第2の顔画像との類似度が予め設定された類似度と同じ、又はそれより大きい第3の顔画像が存在しないことに応じて、画像キューに第2の顔画像とマッチングする画像が存在しないマッチング結果を取得する工程を含む。
本実施形態は、顔重複削除を実現し、取得された品質が高い顔画像と保存された画像キュー内の顔画像との類似度照合を行い、顔特徴に基づいて行ってもよく、顔画像の顔特徴の取得はニューラルネットワークにより行ってもよく、また、画像キューに顔画像を記憶してもよいし、顔画像及びそれに対応する顔特徴を記憶してもよく、顔画像を記憶した場合に、類似度照合を行うことが必要とされる時に、まずニューラルネットワークにより予め保存された顔画像に対応する顔特徴を取得する。
本願の顔画像重複削除方法の上記各実施形態の1つの具体的な例において、少なくとも1つの第2の顔画像に対応する第2の顔特徴、及び画像キュー内の少なくとも1つの第3の顔画像に対応する予め保存された顔特徴に基づいて、第2の顔画像と画像キュー内の少なくとも1つの第3の顔画像との類似度を取得する工程は、
少なくとも1つの第2の顔画像に対応する第2の顔特徴と画像キュー内の少なくとも1つの第3の顔画像のうちの各第3の顔画像に対応する第3の顔特徴との距離をそれぞれ確定する工程と、
距離に基づいて第2の顔画像と画像キュー内の少なくとも1つの第3の顔画像のうちの各第3の顔画像との類似度を取得する工程とを含む。
任意選択的に、顔特徴の間の距離を計算することにより対応する顔画像の間の類似度を確定することができ、距離は具体的には、コサイン距離、ユークリッド距離、マハラノビス距離等を含むが、これらに限定されず、顔特徴の間の距離が近いほど対応する顔画像の間の類似度が大きいことを示し、同一人の顔画像であるか否かについて閾値(例えば、類似度0.86、0.88等)を設定することにより判断でき、設定される閾値の大きさは実際に応じて調整可能である。
任意選択的に、類似度識別の速度を加速するために、設定時間期間(例えば、300秒、400秒等)内に、該時間期間内に取得された顔画像と画像キューとの類似度を比較してもよく、設定時間期間に到達すると、該時間期間内に取得された顔画像と画像キューとの類似度を比較する。
本願の顔画像重複削除方法の上記各実施形態の1つの具体的な例において、操作103には、
画像キューに第2の顔画像とマッチングする画像が存在することを表すマッチング結果に応じて、第2の顔画像が重複している画像であることを確定し、及び/又は、第2の顔画像を画像キューに格納しない工程を含む。
任意選択的に、操作103には、画像キューに第2の顔画像とマッチングする画像が存在しないことを表すマッチング結果に応じて、第2の顔画像が重複している画像ではないことを確定し、及び/又は、第2の顔画像を画像キューに格納する工程を含む。
任意選択的に、顔画像と画像キュー内のある顔画像との類似度が所定閾値より大きい場合に、これらの2つの顔画像が同一人に対応する可能性があることを示し、後続処理の圧力を低減するために、同一人に対して1つのみの顔画像を保留すればよく、この時に、新たに受信した顔画像を直接削除してもよいし、該顔画像の品質を第3の顔画像と比較し、新たに受信した顔画像の品質がより高い時に、新たに受信した顔画像を採用して画像キューに予め保存された顔画像を取り替えるようにしてもよく、重複画像であると識別した時に、統計の後続処理に情報を提供するように、該顔画像の対応する出現回数を累計し記録するようにしてもよく、顔画像が重複画像ではないと判断した時に、後で他の新たに受信した顔画像に対して類似度マッチングを行う時に正確に識別できるように、該顔画像を画像キューに加える。
本願の顔画像重複削除方法のまた1つの実施形態において、上記実施形態に基づいて、操作101の前に、更に、
少なくとも1フレームのビデオ画像に基づいて複数の第1の顔画像を取得する工程を含んでもよい。
実際の適用において、顔画像重複削除方法を実行する必要がある顔画像の数量が必ず多く、例えば、1つのビデオセグメントから抽出された複数のビデオ画像から取得された顔画像、又はネットワークから直接取り込まれた大量の顔画像等の数量が多く、本実施形態はビデオストリームから取得されたビデオ画像に対して、1つのビデオストリームセグメントを処理する時に、任意選択的に、
ビデオストリームから顔画像を含む少なくとも1フレームのビデオ画像を取得する工程と、
少なくとも1フレームのビデオ画像に対して顔識別処理を行い、複数の第1の顔画像を取得する工程と、を含んでもよい。
任意選択的に、フレーム抽出によりビデオストリームにおけるビデオ画像を取得し、ニューラルネットワークによりビデオ画像における顔を識別し分割してもよいし、ニューラルネットワークにより顔識別を行い、更に他の分割技術又は他の分割ネットワークにより顔画像をビデオから分割してもよく、本実施形態では具体的な顔識別及び分割の技術が限定されず、本実施形態の目的を実現すればよい。
例えば、設置されたカメラ等の画像取得装置によりビデオストリームを取得し、ビデオストリームを分解し、ビデオ画像を取得し、ビデオ画像に対して顔識別技術(例えば、畳み込みニューラルネットワーク、Convolutional Neural Network、CNN)により顔画像を有するビデオ画像を識別し、画像分割技術により該顔画像をビデオ画像から分割し、それにより顔画像が取得され、1フレームのビデオ画像に少なくとも1つの顔画像を含む可能性があり、顔画像を有さない可能性もあり、顔画像を有さないビデオ画像に対して、本願の実施形態では取得しなく、更に、分解して取得されたビデオ画像に対して顔画像切り抜きを行い、ソフトウェア開発キット検出(Software Development Kit、SDK−detect)を行うようにしてもよく、同一の切り抜き画像から複数枚の顔を検出(detect)した場合に一枚目のものを採取し、顔がない場合にフィルタリングして除去する。
1つ又は複数の選択可能な実施形態において、それぞれビデオフレームに対して顔識別及び分割を行う工程の前に、更に、
ビデオ画像内の所定の大きさを有する少なくとも1つの顔画像を取得する工程を含んでもよい。
顔画像の大きさに基づいて選別することにより、顔画像のない又は顔画像が小さくて識別できないビデオ画像をフィルタリングして除去し、識別可能な顔画像を含むビデオ画像を保留し、更にフィルタリングされた後のビデオ画像に対して顔識別及び分割を行うことができ、任意選択的に、顔画像の大きさの選別はニューラルネットワークに基づいて行ってもよいし、他の選別方法に基づいて行ってもよい。
本願の顔画像重複削除方法の上記各実施形態の1つの具体的な例において、更に、
取得された複数の第1の顔画像に基づいて、例えば、それぞれ一人に対応する少なくとも1つの顔軌跡を確立する工程を含む。
任意選択的に、ステップ101は、
少なくとも1つの顔軌跡のうちの各顔軌跡に含まれる少なくとも1つの第1の顔画像に対してフィルタリング操作を行い、各顔軌跡における画像品質が第1の設定条件に到達した1つの第2の顔画像を取得する工程を含んでもよい。
本実施形態は、画像を切り抜いて顔画像を取得した後、まず顔画像に基づいて顔軌跡を確立し、後続の操作で同一人の顔画像に対して重複削除を行うために基礎を提供することができ、顔軌跡の具体的な確立方式は本願では限定されない。
本願の顔画像重複削除方法は、スマートビデオ分析、スマートビジネス、セキュリティ監視等の分野に適用可能であり、例えば、ビデオストリームの処理に関するいかなる場合にも本願の実施形態の顔画像重複削除方法を適用可能であり、多くのフレームの画像を処理するために選別する必要があるいかなる場合にも本願の実施形態の顔画像重複削除方法を適用可能であり、多くのフレームの画像をクラウドにアップロードする必要があるいかなる場合にも本願の実施形態の顔画像重複削除方法を適用可能である。
本願の顔画像重複削除方法の上記各実施形態の1つの具体的な例においては、更に、
顔軌跡における顔画像に基づいてフィルタリング操作及び/又は重複削除操作を行って顔軌跡に対応する目標顔画像を取得し、目標顔画像に基づいて属性検出及び顔照合を行う工程を含む。
任意選択的に、例として、クライアント端末にはリアルタイムで採取されるビデオにおける顔に対して属性検出及び顔照合を行う必要がある場合に、属性検出及び顔照合をより好適に行うには、同一の顔を含む連続した複数のフレームの画像から1フレームの処理に最適なものを選択する必要があるようなシーン1に適用可能である。この時に要求に合致する顔画像を選択するには、本実施形態が必要とされる。
本願の顔画像重複削除方法の上記各実施形態の1つの具体的な例において、該実施形態の方法はクライアント端末に適用され、
該実施形態の方法は、更に、
重複削除操作により取得された目標顔画像又は画像キューをサーバに送信する工程を含む。
任意選択的に、サーバはローカルサーバ及び/又はクラウドサーバを含んでもよい。
フィルタリング操作及び/又は重複削除操作により取得された顔画像又は画像キューをサーバ及び/又はクラウドサーバに送信し、サーバ及び/又はクラウドサーバにより、クライアント端末からフィルタリング操作及び/又は重複削除操作を行った顔画像又は画像キューを受信し、該顔画像又は画像キューの顔画像を画像データベースに保存された顔画像と照合し、採取された顔画像又は画像キュー内の顔画像が画像データベースに対応する顔画像を有するか否かを判断し、判断結果に基づいて該顔画像又は画像キューを該画像データベースに格納したり格納しない。
ここで、画像データベースは、判断して格納された、採取により取得された顔画像を保存するためのものであり、初期状態の画像データベースは空のもの又は顔画像を記憶したものであり、顔画像を絶えずサーバ及び/又はクラウドサーバに送信することにより、要求に合致する多くの顔画像が自動的に画像データベースに格納され、画像データベースの構築が実現される。
任意選択的に、例として、クライアント端末でビデオストリームを処理し、要求に合致する顔画像をクラウドに送信する場合に、全ての顔画像をクラウドに直接送信すれば、クラウドの圧力が大き過ぎ、更に重複した品質の低い顔画像の意義が大きくないため、クライアント端末で画像をクラウドにアップロードする前に重複削除・フィルタリングを行う必要があるというようなシーン2に適用可能である。この時に品質がより高い顔画像を選択するには、本実施形態が必要とされる。
上記方法の実施形態のステップの全部又は一部を実現するには、プログラム命令に関するハードウェアにより完成することができ、前述したプログラムを、ROM、RAM、磁気ディスク又は光ディスク等のプログラムコードを記憶することができる様々のコンピュータ読み取り可能記憶媒体に記憶してよく、該プログラムを実行する時に、上記方法の実施形態を含むステップが実行されることは当業者に理解可能である。
図2は本願の顔画像重複削除装置の1つの実施形態の構造模式図である。該実施形態の装置は本願の上記の各方法の実施形態を実現するために利用可能である。図2に示すように、該実施形態の装置は、
取得された複数の第1の顔画像に対してフィルタリング操作を実行し、画像品質が第1の設定条件に到達した少なくとも1つの第2の顔画像を取得するために用いられるフィルタリングユニット21と、
第2の顔画像を画像キュー内の少なくとも1つの第3の顔画像とマッチングし、マッチング結果を取得するために用いられるマッチングユニット22と、を含む。
1つ又は複数の選択可能な実施形態において、画像キューは、異なる人にそれぞれ対応する少なくとも1つの第3の顔画像を含み、画像キューにおいて各第3の顔画像が異なる人にそれぞれ対応してもよいし、画像キューに異なる人にそれぞれ対応する一部の画像を含んでもよく、任意選択的に、2つの顔画像がマッチングするか否かを識別するには、顔画像に対応する顔特徴の間の距離に基づいて実現することができ、顔特徴の間の距離は、コサイン距離、ユークリッド距離等を含むが、本実施形態は具体的な特徴の間の距離の計算方法に制限を加えない。
マッチング結果に基づいて第2の顔画像に対して重複削除操作を実行するか否かを確定するために用いられる重複削除ユニット23を含む。
フィルタリングした後取得された顔画像が予め保存された顔画像と同一人に対応する場合に、該顔画像が重複画像となり、この人に対応する顔画像がフィルタリング・重複削除処理を行われたことを示し、この時に、該顔画像を廃棄すること又は該顔画像を採用してこの人の画像キューでの対応する顔画像を交換することのどちらにしてもよく、フィルタリングした後取得された顔画像が予め保存された顔画像と同一人に対応しない場合に、該顔画像が重複画像ではなく、この顔画像に対応する人が新たに現れたものであることを示し、後で識別するためにキューに格納する必要がある。
本願の上記実施形態に基づいて提供される顔画像重複削除装置は、品質に基づくフィルタリングを実現し、顔画像の数量を大幅に低減し、取得された顔画像の品質が後続の顔画像に対する処理要求を満たすことができ、大量の顔画像を重複して処理する問題を回避し、既知の画像キューに基づいて該顔画像を記憶したか否かを判断し、より速い重複顔識別を実現する。
本願の顔画像重複削除装置の更に1つの実施形態において、上記実施形態に基づいて、フィルタリングユニット21は、
第1の顔画像に対応する顔属性に基づいて、取得された複数の第1の顔画像をフィルタリングするために用いられる属性フィルタリングモジュールを含む。
ここで、顔属性は顔画像における顔の表示品質を表すためのものであり、本実施形態において、第1の顔画像に対応する顔属性は第1の顔画像における顔の表示品質を表すために用いられ、任意選択的に、顔属性は、顔角度は、顔の水平方向での振れ角度を表すために用いられる水平振れ角度(yaw)、顔の垂直方向での転動角度を表すために用いられる俯仰角度(pitch)、顔の垂直方向での振れ角度を表すために用いられる傾斜角度(roll)を含むが、これらに限定されるものではない。
及び/又は、第1の顔画像における顔の角度に基づいて、取得された複数の第1の顔画像をフィルタリングするために用いられる角度フィルタリングモジュールを含む。ここで、顔角度は顔画像における顔の振れ角度を表すために用いられ、本実施形態において、第1の顔画像における顔の角度は第1の顔画像における顔の振れ角度を表すために用いられ、振れ角度は基準的な前向きの顔に対するものであり、基準的な前向きの顔とは顔の水平、垂直及び傾斜方向での角度が全て0である顔を意味し、この顔を原点として顔の振れ角度を計算することができる。
任意選択的に、更に、ビデオストリームから取得された複数のフレームの顔画像に対してフィルタリング操作を実行するために用いられるフレーム選択モジュールを含んでもよい。ビデオストリームにおける複数のフレームの顔画像に対してフィルタリングを実行することにより、顔画像に基づいてビデオストリームからフレームを選択する目的を実現することができ、フレーム選択により取得されたビデオフレーム中の顔画像が全て第1の設定条件に合致するものである。
1つ又は複数の選択可能な実施形態において、顔属性は、顔角度、顔幅高値、顔ボケ度の1つ又は複数を含むが、それらに限定されなく、
マッチングユニット22は、顔角度が第1の所定範囲内にあること、顔幅高値が第2の所定閾値より大きいこと、顔ボケ度が第3の所定閾値より小さいことの少なくとも1つを含む第1の条件を満たすことに応じて、第1の顔画像の画像品質が第1の設定条件に到達したことを確定するために利用可能である。
本願の顔画像重複削除装置の上記各実施形態の1つの具体的な例において、属性フィルタリングモジュールは、更に、顔角度が第1の所定範囲内に存在しないこと、顔幅高値が第2の所定閾値と同等以下であること、及び/又は顔ボケ度が第3の所定閾値と同等以上であることに応じて、顔画像を削除するために利用可能である。
本願の顔画像重複削除装置の上記各実施形態の1つの具体的な例において、フィルタリングユニットは、複数の第1の顔画像から同一人に対応する少なくとも1つの第1の顔画像を識別し、同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、少なくとも1つの第1の顔画像のうち、品質が第1の設定条件に到達した第2の顔画像を取得するために利用可能である。
任意選択的に、同一人に対応する少なくとも1つの顔画像に基づいて顔軌跡を取得し、
顔画像に対応する顔角度に基づいて顔軌跡における顔画像をフィルタリングし、顔軌跡における品質が第1の設定条件に到達した顔画像を取得する。
任意選択的に、フィルタリングユニットは、同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、少なくとも1つの第1の顔画像のうち、品質が第1の設定条件に到達した第2の顔画像を取得する時に、第1の顔画像に対応する顔角度に基づいて同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得するために用いられる。
本願の顔画像重複削除装置の上記各実施形態の1つの具体的な例において、顔角度は、顔水平振れ角度、顔俯仰角度、顔傾斜角度を含むが、それらに限定されない。
任意選択的に、フィルタリングユニットは、
第1の顔画像に対応する顔水平振れ角度、顔俯仰角度及び顔傾斜角度を1つの3次元ベクトルに変換するために用いられる角度変換モジュールと、
3次元ベクトルから基準点までの距離に基づいて同一人に対応する少なくとも1つの第1の顔軌跡における顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得するために用いられるベクトルフィルタリングモジュールであって、前記基準点は値が全て0となる3次元ベクトルである、ベクトルフィルタリングモジュールと、を含む。
任意選択的に、フィルタリングユニットは、複数の第1の顔画像から同一人に対応する少なくとも1つの第1の顔画像を識別する時に、複数の第1の顔画像から、第1の所定の時間内に同一人に対応する少なくとも1つの第1の顔画像を識別するために用いられ、
ベクトルフィルタリングモジュールは、少なくとも1つの第1の顔画像のうち、3次元ベクトルから基準点までの距離が最も小さい第1の顔画像を第2の顔画像として確定するために用いられる。
本願の顔画像重複削除装置の上記各実施形態の1つの具体的な例において、顔軌跡は更に、顔画像に対するフィルタリング操作の実行を開始する時間に対応する、顔画像に対応するタイムスタンプを含み、
ベクトルフィルタリングモジュールは、3次元ベクトルから基準点までの距離に基づいて、第1の所定の時間内での顔軌跡における少なくとも1つの顔画像のうち、対応する距離が所定閾値より小さい顔画像を取得し、対応する距離が所定閾値より小さい顔画像を保存するために用いられる。
又は、3次元ベクトルから基準点までの距離に基づいて、第1の所定の時間での顔軌跡における少なくとも1つの顔画像のうち、対応する距離が最も小さい顔画像を取得し、対応する距離が最も小さい顔画像を保存するために用いられる。
本願の顔画像重複削除装置の更に別の実施形態において、上記実施形態に基づいて、マッチングユニット22は、
第2の顔画像に対応する第2の顔特徴、及び画像キュー内の少なくとも1つの第3の顔画像に対応する第3の顔特徴に基づいて、第3の顔画像と画像キュー内の少なくとも1つの第3の顔画像との類似度を取得するために用いられる類似度モジュールと、
第2の顔画像と画像キュー内の少なくとも1つの第3の顔画像との類似度に基づいて、マッチング結果を取得するために用いられる結果マッチングモジュールと、を含む。
任意選択的に、結果マッチングモジュールは、画像キューには第2の顔画像との類似度が予め設定された類似度と同じ、又はそれより大きい第3の顔画像が存在することに応じて、画像キューに第2の顔画像とマッチングする画像が存在するマッチング結果を取得するために用いられ、及び/又は
画像キューに、第2の顔画像との類似度が予め設定された類似度と同じ、又はそれより大きい第3の顔画像が存在しないことに応じて、画像キューに第2の顔画像とマッチングする画像が存在しないことを表すマッチング結果を取得するために用いられる。
本実施形態は、顔重複削除を実現し、取得された品質が高い顔画像と保存された画像キュー内の顔画像との類似度照合を行い、顔特徴に基づいて行ってもよく、顔画像の顔特徴の取得はニューラルネットワークにより行ってもよく、画像キューに顔画像を記憶してもよいし、顔画像及びそれに対応する顔特徴を記憶してもよく、顔画像を記憶した場合に、類似度照合を行うことが必要とされる時に、まずニューラルネットワークにより予め保存された顔画像に対応する顔特徴を取得する。
本願の顔画像重複削除装置の上記各実施形態の1つの具体的な例において、類似度モジュールは、少なくとも1つの第2の顔画像に対応する第2の顔特徴と画像キュー内の少なくとも1つの第3の顔画像のうちの各第3の顔画像に対応する予め保存された顔特徴との距離をそれぞれ確定し、距離に基づいて第2の顔画像と画像キュー内の少なくとも1つの第3の顔画像のうちの各第3の顔画像との類似度を取得するために用いられる。
本願の顔画像重複削除装置の上記各実施形態の1つの具体的な例において、重複削除ユニット23は、画像キューに第2の顔画像とマッチングする画像が存在することを表すマッチング結果に応じて、第2の顔画像が重複している画像であることを確定し、及び/又は、第2の顔画像を画像キューに格納しないために用いられる。
任意選択的に、重複削除ユニット23は、更に、画像キューに第2の顔画像とマッチングする画像が存在しないことを表すマッチング結果に応じて、第2の顔画像が重複している画像ではないことを確定し、及び/又は、第2の顔画像を画像キューに格納するために用いられる。
本願の顔画像重複削除装置のまた1つの実施形態において、上記実施形態に基づいて、更に、
少なくとも1フレームのビデオ画像に基づいて複数の第1の顔画像を取得するために用いられる画像取得ユニットを含む。
実際の適用において、顔画像重複削除方法を実行する必要がある顔画像の数量が必ず多く、例えば、1つのビデオセグメントから抽出された複数のビデオ画像から取得された顔画像、又はネットワークから直接取り込まれた大量の顔画像等の数量が多く、本実施形態はビデオストリームから取得されたビデオフレームに対して、1つのビデオストリームセグメントを処理する時に、任意選択的に、画像取得ユニットは、
ビデオストリームから顔画像を含む少なくとも1フレームのビデオ画像を取得するために用いられるフレーム抽出モジュールと、
少なくとも1フレームのビデオ画像に対して顔識別処理を行い、複数の第1の顔画像を取得するために用いられる識別分割モジュールと、を含んでもよい。
1つ又は複数の選択可能な実施形態において、画像取得ユニットは、更に、
ビデオ画像内の所定の大きさを有する少なくとも1つの顔画像を取得するために用いられる顔取得モジュールを含む。
本願の顔画像重複削除装置の上記各実施形態の1つの具体的な例において、画像取得ユニットは、更に、
取得された複数の第1の顔画像に基づいて少なくとも1つの顔軌跡を確立するために用いられる軌跡確立モジュールであって、各々顔軌跡が一人に対応する、軌跡確立モジュールと、
取得された複数の第1の顔画像に基づいて少なくとも1つの顔軌跡を確立するフィルタリングユニットであって、各々顔軌跡が一人に対応する、フィルタリングユニットと、を含む。
本願の顔画像重複削除装置の上記各実施形態の1つの具体的な例において、画像取得ユニットは、更に、
顔軌跡における各顔画像に基づいてフィルタリング操作及び/又は重複削除操作を行って顔軌跡に対応する目標顔画像を取得し、目標顔画像に基づいて属性検出及び顔照合を行うために利用可能である。
本願の顔画像重複削除装置の上記各実施形態の1つの具体的な例において、本実施形態の装置はクライアント端末に適用され、
本実施形態の装置は、更に、
重複削除操作により取得された目標顔画像又は画像キューをサーバに送信するために用いられる送信ユニットを含む。
ここで、サーバはローカルサーバ及び/又はクラウドサーバを含んでもよい。
本願の実施形態の一態様によれば、提供される電子機器は、本願の上記のいずれか1つの実施形態の顔画像重複削除装置を備えるプロセッサーを含む。
本願の実施形態の一態様によれば、提供される電子機器は、実行可能命令を記憶するために用いられるメモリーと、
メモリーと通信して実行可能命令を実行して本願の顔画像重複削除方法の上記のいずれか1つの実施形態の操作を完成するために用いられるプロセッサーと、を含む。
本願の実施形態の一態様によれば、提供されるコンピュータ記憶媒体は、コンピュータ読み取り可能命令を記憶するために用いられ、命令が実行される時に本願の顔画像重複削除方法の上記のいずれか1つの実施形態の操作を実行する。
本願の実施形態の一態様によれば、提供されるコンピュータプログラムは、コンピュータ読み取り可能コードを含み、コンピュータ読み取り可能コードを機器上で動作する時に、該機器内のプロセッサーにより本願の顔画像重複削除方法のいずれか1つの実施形態を実現するための命令を実行する。
本願の実施形態は更に携帯端末、パーソナルコンピュータ(PC)、タブレットコンピュータ、サーバ等であってよい電子機器を提供した。以下、本願の実施形態の端末装置又はサーバを実現することに適する電子機器300の構造模式図を示す図3に示すように、電子機器300は、例えば、1つ又は複数の中央処理装置(CPU)301及び/又は1つ又は複数の画像処理装置(GPU)313等であり、読み出し専用メモリー(ROM)302に記憶された実行可能命令又は記憶部308からランダムアクセスメモリー(RAM)303にロードされた実行可能命令に基づいて様々の適宜な動作及び処理を実行することができる1つ又は複数のプロセッサー、及び通信部等を含む。通信部312はネットワークカードを含むが、それに限定されなく、前記ネットワークカードはIB(Infiniband)ネットワークカードを含むが、それに限定されない。
プロセッサーは読み出し専用メモリー302及び/又はランダムアクセスメモリー303と通信して実行可能命令を実行することができ、バス304により通信部312に接続され、通信部312を介して他の目的機器と通信し、それにより本願の実施形態で提供されるいずれか1つの方法に対応する操作を完成し、例えば、取得された複数の顔画像に対してフィルタリング操作を実行し、画像品質が第1の設定条件に到達した少なくとも1つの顔画像を取得し、少なくとも1つの顔画像のうちの各顔画像を画像キューに予め保存された少なくとも1つの顔画像とマッチングし、マッチング結果を取得し、マッチング結果に基づいて顔画像に対して重複削除操作を実行するか否かを確定する。
なお、RAM 303には更に装置操作に必要な様々のプログラム及びデータが記憶されていてもよい。CPU301、ROM302及びRAM303はバス304により相互に接続される。RAM303が存在する場合に、ROM302は選択可能なモジュールである。RAM303は、中央処理装置(CPU)301に上記通信方法に対応する操作を実行させる実行可能命令を記憶したり、動作する時にROM302に実行可能命令を読み込む。入力/出力(I/O)インターフェース305をもバス304に接続する。通信部312は集積設置されてもよいし、複数のサブモジュール(例えば、複数のIBネットワークカード)を有し且つバスリンクにあるように設置されてもよい。
I/Oインターフェース305には、キーボード、マウス等を含む入力部306と、例えば陰極線管(CRT)、液晶表示装置(LCD)等及びスピーカ等を含む出力部307と、ハードディスク等を含む記憶部308と、例えばLANカード、モデム等のネットワークインターフェースカードを含む通信部309とが接続される。通信部309は例えばインターネットのネットワークを介して通信処理を実行する。ドライバー310は必要に応じてI/Oインターフェース305にも接続される。例えば、磁気ディスク、光ディスク、光磁気ディスク、半導体記憶装置等のようなリムーバブルメディア311は、必要に応じてドライバー310に実装され、それによりその中から読み出すコンピュータプログラムを必要に応じて記憶部308にインストールする。
図3に示す構造が選択可能な実現方式に過ぎず、具体的な実現過程で、実際の要求に応じて上記図3の部材の数量及び種類を選択し、削減し、増加し、取り替えるようにしてもよく、異なる機能の部材の設置について、分離設置又は集積設置等の実現方式を採用可能であり、例えば、GPU313及びCPU301を分離して設置してもよいし、GPU313をCPU301に集積してもよく、通信部を分離して設置してもよいし、CPU301又はGPU313に集積設置してもよいことを説明すべきである。これらの取り替え可能な実施態様は全て本願の開示する保護範囲に含まれる。
特に、本願の実施形態によれば、以上でフローチャートを参照して記載した過程はコンピュータソフトウェアプログラムとして実現可能である。例えば、本願の実施形態は、機器読み取り可能媒体に有形的に含まれるコンピュータプログラムを備えるコンピュータプログラム製品を含み、コンピュータプログラムはフローチャートに示す方法を実行するためのプログラムコードを含み、プログラムコードは本願の実施形態で提供される方法のステップを対応して実行するための対応する命令を含んでもよく、例えば、取得された複数の顔画像に対してフィルタリング操作を実行し、画像品質が第1の設定条件に到達した少なくとも1つの顔画像を取得し、少なくとも1つの顔画像のうちの各顔画像を画像キューに予め保存された少なくとも1つの顔画像とマッチングし、マッチング結果を取得し、マッチング結果に基づいて顔画像に対して重複削除操作を実行するか否かを確定する。このような実施形態において、該コンピュータプログラムは通信部309によりネットワークからダウンロードされインストールされ、及び/又はリムーバブルメディア311からインストールされることが可能である。このコンピュータプログラムが中央処理装置(CPU)301により実行される時に、本願の方法で限定される上記機能が実行される。
本明細書において、各実施形態は全て漸進する方式を用いて記載したものであり、各実施形態で重点として説明したのは全て他の実施形態との相違点であり、各実施形態の間の同様又は類似的な部分については相互に参照すればよい。システムの実施形態に関しては、方法の実施形態に基本的に対応するので、簡単に記載し、関連するところについては方法の実施形態の一部の説明を参照すればよい。
多くの方式により本願の方法及び装置を実現することができる。例えば、ソフトウェア、ハードウェア、ファームウエア又はソフトウェア、ハードウェア、ファームウエアのいかなる組合せにより本願の方法及び装置を実現することができる。前記方法のステップのための上記手順は説明するためのものに過ぎず、本願の方法のステップは、特に他の方式により説明しない限り、以上で具体的に記載した手順に限定されない。なお、いくつかの実施形態において、更に本願は記録媒体に記録されるプログラムとして実施可能であり、これらのプログラムは本願に係る方法を実現するための機器読み取り可能命令を含む。従って、本願は更に本願に係る方法を実行するためのプログラムを記憶する記録媒体を含む。
本願に対する記載は例を挙げ説明するためのものであり、漏れることなく、又は本願を開示された形式に限定するものではない。多くの修正及び変化は当業者にとって明らかなことである。実施形態を選択し説明する目的は本願の原理及び実際の適用をより好適に説明し、当業者に本願を理解させて特定の用途に適する様々の修正を行った各種の実施形態を設計させることにある。

Claims (18)

  1. 取得された複数の第1の顔画像に対してフィルタリング操作を実行し、画像品質が第1の設定条件に到達した少なくとも1つの第2の顔画像を取得する工程と、
    前記第2の顔画像を画像キュー内の少なくとも1つの第3の顔画像とマッチングし、マッチング結果を取得する工程と、
    前記マッチング結果に基づいて前記第2の顔画像に対して重複削除操作を実行するか否かを確定する工程と、を含み、
    取得された複数の第1の顔画像に対してフィルタリング操作を実行し、画像品質が第1の設定条件に到達した少なくとも1つの第2の顔画像を取得する前記工程は、
    複数の第1の顔画像から同一人に対応する少なくとも1つの第1の顔画像を識別する工程と、
    前記第1の顔画像に対応する顔水平振れ角度、顔俯仰角度及び顔傾斜角度を3次元ベクトルに変換する工程と、
    前記3次元ベクトルから基準点までの距離に基づいて、前記同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得する工程であって、前記基準点は値が全て0となる3次元ベクトルである、工程と、を含む、ことを特徴とする顔画像重複削除方法。
  2. 前記画像キューは、異なる人にそれぞれ対応する少なくとも1つの第3の顔画像を含むことを特徴とする請求項1に記載の方法。
  3. 取得された複数の第1の顔画像に対してフィルタリング操作を実行する前記工程は、
    前記第1の顔画像における顔の表示品質を表すための、前記第1の顔画像に対応する顔属性に基づいて、取得された複数の第1の顔画像をフィルタリングする工程と、
    及び/又は、
    前記第1の顔画像における顔の振れ角度を表すための、前記第1の顔画像における顔の角度に基づいて、取得された複数の第1の顔画像をフィルタリングする工程と、を含むことを特徴とする請求項1又は2に記載の方法。
  4. 前記顔属性は顔角度、顔幅高値、顔ボケ度のいずれか一つ又は複数を含み、
    前記第1の顔画像に対応する顔属性に基づいて、取得された複数の第1の顔画像をフィルタリングする前記工程は、
    第1の条件を満たすことに応じて、前記第1の顔画像の画像品質が第1の設定条件に到達したことを確定する工程であって、前記第1の条件は、前記顔角度が第1の所定範囲にあること、前記顔幅高値が第2の所定閾値より大きいこと、前記顔ボケ度が第3の所定閾値より小さいことの少なくとも1つを含む工程を含むことを特徴とする請求項3に記載の方法。
  5. 前記複数の第1の顔画像から同一人に対応する少なくとも1つの第1の顔画像を識別する工程は、
    複数の第1の顔画像から、第1の所定の時間内に同一人に対応する少なくとも1つの第1の顔画像を識別する工程を含み、
    前記3次元ベクトルから基準点までの距離に基づいて、前記同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得する前記工程は、
    前記少なくとも1つの第1の顔画像のうち、3次元ベクトルから前記基準点までの距離が最も小さい第1の顔画像を前記第2の顔画像として確定する工程を含むことを特徴とする請求項に記載の方法。
  6. 前記第2の顔画像を画像キュー内の少なくとも1つの第3の顔画像とマッチングし、マッチング結果を取得する前記工程は、
    前記第2の顔画像に対応する第2の顔特徴、及び前記画像キュー内の少なくとも1つの第3の顔画像に対応する第3の顔特徴に基づいて、前記第2の顔画像と前記画像キュー内の前記少なくとも1つの第3の顔画像との類似度を取得する工程と、
    前記第2の顔画像と前記画像キュー内の少なくとも1つの第3の顔画像との類似度に基づいて、マッチング結果を取得する工程と、を含むことを特徴とする請求項1〜のいずれか一項に記載の方法。
  7. 前記第2の顔画像と前記画像キュー内の少なくとも1つの第3の顔画像との類似度に基づいて、マッチング結果を取得する前記工程は、
    前記画像キューに、前記第2の顔画像との類似度が予め設定された類似度と同じ、又はそれより大きい第3の顔画像が存在することに応じて、前記画像キューに前記第2の顔画像とマッチングする画像が存在することを表すマッチング結果を取得する工程、及び/又は
    前記画像キューに、前記第2の顔画像との類似度が前記予め設定された類似度と同じ、又はそれより大きい第3の顔画像が存在しないことに応じて、前記画像キューに前記第2の顔画像とマッチングする画像が存在しないことを表すマッチング結果を取得する工程を含むことを特徴とする請求項に記載の方法。
  8. 前記少なくとも1つの第2の顔画像に対応する第2の顔特徴、及び前記画像キュー内の少なくとも1つの第3の顔画像に対応する予め保存された顔特徴に基づいて、前記第2の顔画像と前記画像キュー内の前記少なくとも1つの第3の顔画像との類似度を取得する前記工程は、
    前記少なくとも1つの第2の顔画像に対応する第2の顔特徴と前記画像キュー内の少なくとも1つの第3の顔画像のうちの各第3の顔画像に対応する第3の顔特徴との距離をそれぞれ確定する工程と、
    前記距離に基づいて前記第2の顔画像と前記画像キュー内の少なくとも1つの第3の顔画像のうちの各第3の顔画像との類似度を取得する工程と、を含むことを特徴とする請求項に記載の方法。
  9. 前記マッチング結果に基づいて前記第2の顔画像に対して重複削除操作を実行するか否かを確定する前記工程は、
    前記画像キューに前記第2の顔画像とマッチングする画像が存在することを表す前記マッチング結果に応じて、前記第2の顔画像が重複している画像であることを確定し、及び/又は、前記第2の顔画像を前記画像キューに格納しない工程を含むことを特徴とする請求項1〜のいずれか一項に記載の方法。
  10. 前記マッチング結果に基づいて前記第2の顔画像に対して重複削除操作を実行するか否かを確定する前記工程は、
    前記画像キューに前記第2の顔画像とマッチングする画像が存在しないことを表す前記マッチング結果に応じて、前記第2の顔画像が重複している画像ではないことを確定し、及び/又は、前記第2の顔画像を前記画像キューに格納する工程を含むことを特徴とする請求項1〜のいずれか一項に記載の方法。
  11. 取得された複数の第1の顔画像に対してフィルタリング操作を実行する前記工程の前に、更に、
    少なくとも1フレームのビデオ画像に基づいて前記複数の第1の顔画像を取得する工程を含むことを特徴とする請求項1〜10のいずれか一項に記載の方法。
  12. 少なくとも1フレームのビデオ画像に基づいて前記複数の第1の顔画像を取得する前記工程は、
    ビデオストリームから顔画像を含む少なくとも1フレームのビデオ画像を取得する工程と、
    前記少なくとも1フレームのビデオ画像に対して顔識別処理を行い、前記複数の第1の顔画像を取得する工程と、を含むことを特徴とする請求項11に記載の方法。
  13. 前記少なくとも1フレームのビデオ画像に対して顔識別処理を行う前記工程の前に、更に、
    前記ビデオ画像内の所定の大きさを有する少なくとも1つの顔画像を取得する工程を含むことを特徴とする請求項12に記載の方法。
  14. 更に、
    前記取得された複数の第1の顔画像に基づいて、少なくとも1つの顔軌跡を確立する工程であって、各々顔軌跡が一人に対応する、工程を含み、
    取得された複数の第1の顔画像に対してフィルタリング操作を実行し、画像品質が第1の設定条件に到達した少なくとも1つの第2の顔画像を取得する前記工程は、
    前記少なくとも1つの顔軌跡のうちの各顔軌跡に含まれる少なくとも1つの第1の顔画像に対してフィルタリング操作を行い、前記各顔軌跡における画像品質が第1の設定条件に到達した1つの第2の顔画像を取得する工程を含むことを特徴とする請求項11〜13のいずれか一項に記載の方法。
  15. クライアント端末に適用され、
    前記重複削除操作により取得された目標顔画像又は画像キューをサーバに送信する工程を更に含むことを特徴とする請求項1〜14のいずれか一項に記載の方法。
  16. 取得された複数の第1の顔画像に対してフィルタリング操作を実行し、画像品質が第1の設定条件に到達した少なくとも1つの第2の顔画像を取得するために用いられるフィルタリングユニットと、
    前記第2の顔画像を画像キュー内の少なくとも1つの第3の顔画像とマッチングし、マッチング結果を取得するために用いられるマッチングユニットと、
    前記マッチング結果に基づいて前記第2の顔画像に対して重複削除操作を実行するか否かを確定するために用いられる重複削除ユニットと、を含み、
    前記フィルタリングユニットは、複数の第1の顔画像から同一人に対応する少なくとも1つの第1の顔画像を識別するためにさらに用いられ、
    前記フィルタリングユニットは、
    前記第1の顔画像に対応する顔水平振れ角度、顔俯仰角度及び顔傾斜角度を3次元ベクトルに変換するために用いられる角度変換モジュールと、
    前記3次元ベクトルから基準点までの距離に基づいて、前記同一人に対応する少なくとも1つの第1の顔画像をフィルタリングし、品質が第1の設定条件に到達した第2の顔画像を取得するために用いられるベクトルフィルタリングモジュールであって、前記基準点は値が全て0となる3次元ベクトルである、ベクトルフィルタリングモジュールと、を含むことを特徴とする顔画像重複削除装置。
  17. コンピュータ読み取り可能命令を記憶するために用いられるコンピュータ記憶媒体であって、
    前記命令が実行される時に請求項1〜15のいずれか一項に記載の顔画像重複削除方法の操作を実行することを特徴とするコンピュータ記憶媒体。
  18. コンピュータ読み取り可能コードを含むコンピュータプログラムであって、
    前記コンピュータ読み取り可能コードを機器上で動作する時に、前記機器内のプロセッサーが請求項1〜15のいずれか一項に記載の顔画像重複削除方法を実現するための命令を実行することを特徴とするコンピュータプログラム。
JP2019553912A 2017-07-21 2018-07-20 顔画像重複削除方法及び装置、電子機器、記憶媒体、プログラム Active JP6916895B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
CN201710605539 2017-07-21
CN201710605539.3 2017-07-21
CN201810041797.8A CN108228872A (zh) 2017-07-21 2018-01-16 人脸图像去重方法和装置、电子设备、存储介质、程序
CN201810041797.8 2018-01-16
PCT/CN2018/096542 WO2019015684A1 (zh) 2017-07-21 2018-07-20 人脸图像去重方法和装置、电子设备、存储介质、程序

Publications (2)

Publication Number Publication Date
JP2020516188A JP2020516188A (ja) 2020-05-28
JP6916895B2 true JP6916895B2 (ja) 2021-08-11

Family

ID=62640576

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2019553920A Active JP6896882B2 (ja) 2017-07-21 2018-07-20 顔画像を動的にデータベースに追加する方法及び装置、電子機器、媒体、プログラム
JP2019553912A Active JP6916895B2 (ja) 2017-07-21 2018-07-20 顔画像重複削除方法及び装置、電子機器、記憶媒体、プログラム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2019553920A Active JP6896882B2 (ja) 2017-07-21 2018-07-20 顔画像を動的にデータベースに追加する方法及び装置、電子機器、媒体、プログラム

Country Status (6)

Country Link
US (2) US11132581B2 (ja)
JP (2) JP6896882B2 (ja)
KR (1) KR102349980B1 (ja)
CN (4) CN108228871A (ja)
SG (2) SG11201909068XA (ja)
WO (2) WO2019015684A1 (ja)

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108228871A (zh) 2017-07-21 2018-06-29 北京市商汤科技开发有限公司 人脸图像动态入库方法和装置、电子设备、介质、程序
CN108491822B (zh) * 2018-04-02 2020-09-08 杭州高创电子科技有限公司 一种基于嵌入式设备有限缓存的人脸检测去重方法
CN109241310B (zh) * 2018-07-25 2020-05-01 南京甄视智能科技有限公司 人脸图像数据库的数据去重方法与系统
CN109190532A (zh) * 2018-08-21 2019-01-11 北京深瞐科技有限公司 一种基于云边融合的人脸识别方法、装置及系统
CN109271923A (zh) * 2018-09-14 2019-01-25 曜科智能科技(上海)有限公司 人脸姿态检测方法、系统、电子终端及存储介质
CN109902550A (zh) * 2018-11-08 2019-06-18 阿里巴巴集团控股有限公司 行人属性的识别方法和装置
CN109635142B (zh) * 2018-11-15 2022-05-03 北京市商汤科技开发有限公司 图像选择方法及装置、电子设备和存储介质
CN109711287B (zh) * 2018-12-12 2020-11-24 深圳云天励飞技术有限公司 人脸采集方法及相关产品
CN109658572B (zh) * 2018-12-21 2020-09-15 上海商汤智能科技有限公司 图像处理方法及装置、电子设备和存储介质
CN109858371B (zh) * 2018-12-29 2021-03-05 深圳云天励飞技术有限公司 人脸识别的方法及装置
CN111582894A (zh) * 2019-02-15 2020-08-25 普罗文化股份有限公司 人群空间行为分析系统
CN109977823B (zh) * 2019-03-15 2021-05-14 百度在线网络技术(北京)有限公司 行人识别跟踪方法、装置、计算机设备和存储介质
CN110084130B (zh) * 2019-04-03 2023-07-25 深圳鲲云信息科技有限公司 基于多目标跟踪的人脸筛选方法、装置、设备及存储介质
CN110263830B (zh) * 2019-06-06 2021-06-08 北京旷视科技有限公司 图像处理方法、装置和系统及存储介质
CN110321843B (zh) * 2019-07-04 2021-11-09 杭州视洞科技有限公司 一种基于深度学习的人脸择优方法
CN110929605A (zh) * 2019-11-11 2020-03-27 中国建设银行股份有限公司 视频关键帧的保存方法、装置、设备及存储介质
KR102114223B1 (ko) 2019-12-10 2020-05-22 셀렉트스타 주식회사 딥러닝 기반 유사 이미지를 필터링하는 방법 및 그를 이용한 장치
KR102114267B1 (ko) * 2019-12-10 2020-05-22 셀렉트스타 주식회사 딥러닝 기반 유사 텍스트를 필터링하는 방법 및 그를 이용한 장치
CN113095110B (zh) * 2019-12-23 2024-03-08 浙江宇视科技有限公司 人脸数据动态入库的方法、装置、介质及电子设备
CN111160200B (zh) * 2019-12-23 2023-06-16 浙江大华技术股份有限公司 一种路人库的建立方法及装置
CN113128293A (zh) * 2019-12-31 2021-07-16 杭州海康威视数字技术股份有限公司 一种图像处理方法、装置、电子设备及存储介质
US11687778B2 (en) 2020-01-06 2023-06-27 The Research Foundation For The State University Of New York Fakecatcher: detection of synthetic portrait videos using biological signals
CN111476105A (zh) * 2020-03-17 2020-07-31 深圳力维智联技术有限公司 人脸数据清洗方法、装置及设备
CN111488476B (zh) * 2020-04-03 2023-06-27 北京爱芯科技有限公司 图像推送方法、模型训练方法及对应装置
CN111625745B (zh) * 2020-05-27 2023-12-26 抖音视界有限公司 推荐方法、装置、电子设备和计算机可读介质
CN111695643B (zh) * 2020-06-24 2023-07-25 北京金山云网络技术有限公司 图像处理方法、装置和电子设备
CN111985348B (zh) * 2020-07-29 2024-05-10 深思考人工智能科技(上海)有限公司 人脸识别方法和系统
CN112036957B (zh) * 2020-09-08 2023-11-28 广州图普网络科技有限公司 一种访客留存数确定方法、装置、电子设备和存储介质
CN112052347B (zh) * 2020-10-09 2024-06-04 北京百度网讯科技有限公司 图像存储方法、装置以及电子设备
CN112148907A (zh) * 2020-10-23 2020-12-29 北京百度网讯科技有限公司 图像数据库的更新方法、装置、电子设备和介质
CN112836660B (zh) * 2021-02-08 2024-05-28 上海卓繁信息技术股份有限公司 一种用于监控领域的人脸库生成方法、装置和电子设备
US11921831B2 (en) * 2021-03-12 2024-03-05 Intellivision Technologies Corp Enrollment system with continuous learning and confirmation
CN113297420A (zh) * 2021-04-30 2021-08-24 百果园技术(新加坡)有限公司 视频图像处理方法、装置、存储介质及电子设备
CN113344132A (zh) * 2021-06-30 2021-09-03 成都商汤科技有限公司 身份识别方法、系统、装置、计算机设备及存储介质
CN113591620A (zh) * 2021-07-15 2021-11-02 北京广亿兴业科技发展有限公司 一种基于一体式移动采集设备的预警方法、装置及系统
CN114140861A (zh) * 2021-12-13 2022-03-04 中电云数智科技有限公司 人脸检测去重的方法与装置
CN114639143B (zh) * 2022-03-07 2024-04-16 北京百度网讯科技有限公司 基于人工智能的人像归档方法、设备及存储介质
CN116521046A (zh) * 2023-04-23 2023-08-01 西北核技术研究所 一种交通态势系统态势回溯功能的控制方法及系统

Family Cites Families (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6549914B1 (en) * 2000-05-17 2003-04-15 Dell Products, L.P. System and method for statistical file preload for factory installed software in a computer
JP2007102342A (ja) * 2005-09-30 2007-04-19 Fujifilm Corp 自動計数装置
JP2007102341A (ja) * 2005-09-30 2007-04-19 Fujifilm Corp 自動計数装置
US7751597B2 (en) 2006-11-14 2010-07-06 Lctank Llc Apparatus and method for identifying a name corresponding to a face or voice using a database
JP5010905B2 (ja) * 2006-12-13 2012-08-29 パナソニック株式会社 顔認証装置
JP4577410B2 (ja) * 2008-06-18 2010-11-10 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
JP4753193B2 (ja) * 2008-07-31 2011-08-24 九州日本電気ソフトウェア株式会社 動線管理システムおよびプログラム
JP4636190B2 (ja) * 2009-03-13 2011-02-23 オムロン株式会社 顔照合装置、電子機器、顔照合装置の制御方法、および顔照合装置制御プログラム
US8705813B2 (en) * 2010-06-21 2014-04-22 Canon Kabushiki Kaisha Identification device, identification method, and storage medium
KR101180471B1 (ko) * 2011-09-27 2012-09-07 (주)올라웍스 한정된 메모리 환경 하에서 얼굴 인식 성능 향상을 위한 참조 얼굴 데이터베이스 관리 방법, 장치 및 컴퓨터 판독 가능한 기록 매체
CA2804468C (en) * 2012-01-30 2016-03-29 Accenture Global Services Limited System and method for face capture and matching
WO2013113974A1 (en) 2012-01-30 2013-08-08 Nokia Corporation A method, an apparatus and a computer program for promoting the apparatus
CN102629940A (zh) * 2012-03-19 2012-08-08 天津书生投资有限公司 一种存储方法、系统和装置
US20140075193A1 (en) 2012-03-19 2014-03-13 Donglin Wang Storage method
US9384518B2 (en) * 2012-03-26 2016-07-05 Amerasia International Technology, Inc. Biometric registration and verification system and method
ITVI20120104A1 (it) * 2012-05-03 2013-11-04 St Microelectronics Srl Metodo e apparato per generare in tempo reale uno storyboard visuale
CN103514432B (zh) * 2012-06-25 2017-09-01 诺基亚技术有限公司 人脸特征提取方法、设备和计算机程序产品
CN102799877A (zh) * 2012-09-11 2012-11-28 上海中原电子技术工程有限公司 人脸图像筛选方法及系统
CN102880726B (zh) * 2012-10-23 2015-08-05 深圳市宜搜科技发展有限公司 一种图像过滤方法及系统
US9116924B2 (en) 2013-01-14 2015-08-25 Xerox Corporation System and method for image selection using multivariate time series analysis
JP6568476B2 (ja) 2013-09-13 2019-08-28 エヌイーシー ホンコン リミテッド 情報処理装置、情報処理方法およびプログラム
US10083368B2 (en) * 2014-01-28 2018-09-25 Qualcomm Incorporated Incremental learning for dynamic feature database management in an object recognition system
CN103824053B (zh) * 2014-02-17 2018-02-02 北京旷视科技有限公司 一种人脸图像的性别标注方法及人脸性别检测方法
CN103793697B (zh) * 2014-02-17 2018-05-01 北京旷视科技有限公司 一种人脸图像的身份标注方法及人脸身份识别方法
CN103984738B (zh) * 2014-05-22 2017-05-24 中国科学院自动化研究所 一种基于搜索匹配的角色标注方法
CN104166694B (zh) * 2014-07-31 2018-12-14 联想(北京)有限公司 一种图像分类存储方法和电子设备
CN104679913B (zh) * 2015-03-25 2018-05-29 广东欧珀移动通信有限公司 图像存储方法及装置
CN104915114B (zh) * 2015-05-29 2018-10-19 小米科技有限责任公司 信息记录方法和装置、智能终端
CN106326816A (zh) 2015-06-30 2017-01-11 芋头科技(杭州)有限公司 一种面部识别系统及面部识别方法
JP6006841B2 (ja) * 2015-07-08 2016-10-12 オリンパス株式会社 画像取扱装置、画像取扱方法、およびプログラム
CN105138962A (zh) * 2015-07-28 2015-12-09 小米科技有限责任公司 图像显示方法及装置
CN105243373B (zh) * 2015-10-27 2019-06-07 北京奇虎科技有限公司 人脸图像滤重抓拍方法、服务器、智能监控设备及系统
CN105513101B (zh) * 2015-12-03 2018-08-07 小米科技有限责任公司 图片处理方法及装置
CN105701466A (zh) * 2016-01-13 2016-06-22 杭州奇客科技有限公司 快速的全角度人脸跟踪方法
CN105760461A (zh) * 2016-02-04 2016-07-13 上海卓易科技股份有限公司 相册的自动建立方法及其装置
CN106204779B (zh) * 2016-06-30 2018-08-31 陕西师范大学 基于多人脸数据采集策略和深度学习的课堂考勤方法
CN106203333A (zh) * 2016-07-08 2016-12-07 乐视控股(北京)有限公司 人脸识别方法及系统
CN106407916A (zh) * 2016-08-31 2017-02-15 北京维盛视通科技有限公司 分布式人脸识别方法、装置及系统
CN106570110B (zh) 2016-10-25 2020-09-08 北京小米移动软件有限公司 图像去重方法及装置
CN106570465B (zh) * 2016-10-31 2018-04-20 深圳云天励飞技术有限公司 一种基于图像识别的人流量统计方法及装置
CN106657069A (zh) * 2016-12-24 2017-05-10 深圳云天励飞技术有限公司 一种图像数据处理系统
CN106803067B (zh) * 2016-12-28 2020-12-08 浙江大华技术股份有限公司 一种人脸图像质量评估方法及装置
CN108228871A (zh) * 2017-07-21 2018-06-29 北京市商汤科技开发有限公司 人脸图像动态入库方法和装置、电子设备、介质、程序

Also Published As

Publication number Publication date
CN108228871A (zh) 2018-06-29
JP2020516188A (ja) 2020-05-28
WO2019015682A1 (zh) 2019-01-24
US11132581B2 (en) 2021-09-28
KR20190125428A (ko) 2019-11-06
SG11201909069QA (en) 2019-10-30
JP6896882B2 (ja) 2021-06-30
KR102349980B1 (ko) 2022-01-11
JP2020512648A (ja) 2020-04-23
CN108228872A (zh) 2018-06-29
CN110799972A (zh) 2020-02-14
US11409983B2 (en) 2022-08-09
CN110869937A (zh) 2020-03-06
US20190272415A1 (en) 2019-09-05
SG11201909068XA (en) 2019-10-30
WO2019015684A1 (zh) 2019-01-24
US20190266441A1 (en) 2019-08-29

Similar Documents

Publication Publication Date Title
JP6916895B2 (ja) 顔画像重複削除方法及び装置、電子機器、記憶媒体、プログラム
CN108229321B (zh) 人脸识别模型及其训练方法和装置、设备、程序和介质
CN108229297B (zh) 人脸识别方法和装置、电子设备、计算机存储介质
US10891465B2 (en) Methods and apparatuses for searching for target person, devices, and media
US10643667B2 (en) Bounding box doubling as redaction boundary
WO2017054442A1 (zh) 一种图像信息识别处理方法及装置、计算机存储介质
JP6932254B2 (ja) キーフレームスケジューリング方法及び装置、電子機器、プログラム並びに媒体
CN112633313B (zh) 一种网络终端的不良信息识别方法及局域网终端设备
CN109783680B (zh) 图像推送方法、图像获取方法、装置及图像处理系统
CN113688839B (zh) 视频处理方法及装置、电子设备、计算机可读存储介质
CN113297416A (zh) 视频数据存储方法、装置、电子设备和可读存储介质
WO2022057773A1 (zh) 图像存储的方法、装置、计算机设备和存储介质
CN114238223A (zh) 图片移除方法、装置、计算机设备及计算机可读存储介质
CN112487943B (zh) 关键帧去重的方法、装置和电子设备
CN114969089A (zh) 数据获得方法、装置、电子设备及存储介质
CN113642519A (zh) 一种人脸识别系统和人脸识别方法
CN112991419A (zh) 视差数据生成方法、装置、计算机设备及存储介质
CN111797921A (zh) 一种图像数据对比方法及装置
CN110619734A (zh) 信息推送方法和装置
US10453179B1 (en) Scaled image generation
KR102599525B1 (ko) 관심 이미지의 시인성을 개선한 화면 표출 방법, 장치 및 시스템
US20130311461A1 (en) System and method for searching raster data in the cloud
CN117079287A (zh) 一种任务挖掘场景下的文字识别方法、装置、设备及存储介质
CN113986096A (zh) 一种交互方法、装置、电子设备和存储介质
CN114064957A (zh) 一种图片隐私分级方法、装置、电子设备与存储介质

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190930

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190930

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201110

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210120

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210622

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210716

R150 Certificate of patent or registration of utility model

Ref document number: 6916895

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250