JP2021064043A - 画像処理装置、画像処理システム、画像処理方法及び画像処理プログラム - Google Patents
画像処理装置、画像処理システム、画像処理方法及び画像処理プログラム Download PDFInfo
- Publication number
- JP2021064043A JP2021064043A JP2019186945A JP2019186945A JP2021064043A JP 2021064043 A JP2021064043 A JP 2021064043A JP 2019186945 A JP2019186945 A JP 2019186945A JP 2019186945 A JP2019186945 A JP 2019186945A JP 2021064043 A JP2021064043 A JP 2021064043A
- Authority
- JP
- Japan
- Prior art keywords
- face
- image
- size
- range
- enlarged
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 9
- 238000001514 detection method Methods 0.000 claims abstract description 165
- 238000000034 method Methods 0.000 claims description 44
- 230000001815 facial effect Effects 0.000 claims description 2
- 210000000887 face Anatomy 0.000 description 17
- 230000006870 function Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 9
- 238000010801 machine learning Methods 0.000 description 5
- 238000013135 deep learning Methods 0.000 description 4
- 238000013527 convolutional neural network Methods 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 208000029152 Small face Diseases 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000002542 deteriorative effect Effects 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 235000001892 vitamin D2 Nutrition 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
Description
まず、実施形態1における顔検出の手法の概要について説明する。本実施形態では、機械学習された推論モデルから構成される顔検出器(顔検出エンジン)にて検出可能な顔の大きさの所定範囲(例えば目間距離が8〜200画素)と、検出したい顔の大きさとして利用者が設定した設定範囲(任意の設定値、例えば目間距離が10〜400画素)に応じて、入力画像のサイズを変更(拡大又は縮小、例えば200/400にサイズを圧縮)した画像である拡大縮小画像を生成し、拡大縮小画像に基づき顔検出する。これにより、顔検出器のみでは対応できない大きさ(目間距離)の顔であっても拡大縮小画像から検出することが可能となる。以下、図1を用いて、より詳しく説明する。
次に、図2を用いて、実施形態1に係る画像処理装置を含むシステムの全体構成について説明する。図2に示すように、このシステムは、屋内外の所定エリア(例えば屋外の通路や店舗内)等を対象にして構築されるものであり、画像取得部として機能するカメラ1と、画像記録部として機能するレコーダ(画像記録装置)2と、顔検出部及び顔認証部として機能する画像処理装置3と、を備えている。所定エリアは、用途に応じて適宜設定可能である。
次に、図3を用いて、画像処理装置3の構成について説明する。画像処理装置3は、一般的なパーソナルコンピュータ相当の機能を有し、図3に示すように、制御部10及び記憶部20を備えている。
(Min2×X/100)<Min1 (1)
次に、図8及び9を用いて、画像処理装置3で行われる画像処理の手順、主に顔検出に係る処理の手順について説明する。ここでは、目間距離の所定範囲が8〜200画素である場合、すなわち目間距離が8〜200画素の大きさの顔を顔検出部15(各顔検出器)が検出可能な場合について説明する。
2:レコーダ
3:画像処理装置
4:モニタ
5:入力デバイス
10:制御部
11:映像入力部
12:設定部
13:解像度変更部
14:画像サイズ調整部
15:顔検出部
16:顔認証部
20:記憶部
21:推論モデル
101:カメラ
102:パーソナルコンピュータ
103:クラウドサーバ
Claims (16)
- 画像から、大きさが所定範囲の顔を検出可能な顔検出部と、
入力画像から検出すべき顔の大きさの範囲として設定された設定範囲を記憶する記憶部と、
前記所定範囲及び前記設定範囲に基づいて、前記入力画像の解像度を変更した画像である拡大縮小画像を生成する解像度変更部と、
を備え、
前記顔検出部は、前記拡大縮小画像に対して顔検出する
ことを特徴とする画像処理装置。 - 前記解像度変更部は、前記設定範囲の最大値に係る大きさの顔と、前記設定範囲の最小値に係る大きさの顔との少なくとも一方を前記顔検出部が検出可能となるように、前記入力画像の前記解像度を変更して前記拡大縮小画像を生成する
ことを特徴とする請求項1記載の画像処理装置。 - 前記解像度変更部は、少なくとも前記設定範囲の最大値に係る大きさの顔を前記顔検出部が検出可能となるように、前記入力画像の前記解像度を低くすることによって前記拡大縮小画像を生成する
ことを特徴とする請求項2記載の画像処理装置。 - 前記顔検出部は、前記設定範囲の最小値によっては、前記入力画像に対しても更に顔検出する
ことを特徴とする請求項1〜3のいずれかに記載の画像処理装置。 - 前記入力画像に対する前記拡大縮小画像の拡大/縮小率をX%とし、前記所定範囲の最小値をMin1とし、前記設定範囲の最小値をMin2としたとき、(Min2×X/100)<Min1の関係を満たす場合、前記顔検出部は、前記入力画像に対しても更に顔検出する
ことを特徴とする請求項4記載の画像処理装置。 - 前記拡大縮小画像にて検出された顔の領域に対応する前記入力画像中の第1の領域が、前記入力画像にて検出された顔の領域である第2の領域と重なる場合、前記顔検出部は、前記第1の領域及び前記第2の領域の重なり具合に応じて、いずれか一方の顔に係る情報を検出結果として出力する
ことを特徴とする請求項4又は5記載の画像処理装置。 - 前記顔検出部は、検出した顔の顔らしさに係るスコアを更に出力するものであり、前記第1の領域が前記第2の領域と重なり、かついずれか一方の顔に係る情報を出力する場合、顔らしさに係るスコアがより高い方の顔に係る情報を検出結果として出力する
ことを特徴とする請求項6記載の画像処理装置。 - 前記顔検出部の検出結果に基づき認証処理を行う顔認証部を更に備え、
前記第1の領域が前記第2の領域と重なり、かつ前記顔検出部が前記拡大縮小画像にて検出した前記顔に係る情報を検出結果として出力する場合、前記顔認証部は、前記拡大縮小画像にて検出された前記顔の座標に対応する前記入力画像の座標から特定される前記入力画像の画像領域に基づいて認証処理を行う
ことを特徴とする請求項6又は7記載の画像処理装置。 - 前記顔検出部の検出結果に基づき認証処理を行う顔認証部を更に備える
ことを特徴とする請求項1〜7のいずれかに記載の画像処理装置。 - 前記所定範囲の少なくとも一部が前記設定範囲を超えており、かつ前記顔検出部によって前記設定範囲外の大きさの顔が検出された場合、前記顔検出部は、当該設定範囲外の大きさの顔に係る情報を検出結果として出力しない
ことを特徴とする請求項1〜9のいずれかに記載の画像処理装置。 - 前記顔検出部は、画像に含まれる顔の複数の特徴点を検出し、かつ前記複数の特徴点に基づいて当該顔の大きさを算出する
ことを特徴とする請求項1〜10のいずれかに記載の画像処理装置。 - 前記顔検出部は、メモリ容量が互いに異なる複数の顔検出器を有し、
前記複数の顔検出器のメモリ容量は、複数の画像サイズに応じて設定されたものである
ことを特徴とする請求項1〜11のいずれかに記載の画像処理装置。 - 前記拡大縮小画像のサイズが前記複数の画像サイズのうちの最も近い画像サイズに一致するように、前記拡大縮小画像の周囲の少なくとも一部に背景画像を追加する画像サイズ調整部を更に備え、
前記顔検出部は、前記背景画像が追加された前記拡大縮小画像に対して顔検出する
ことを特徴とする請求項12記載の画像処理装置。 - 画像から、大きさが所定範囲の顔を検出可能な顔検出部と、
入力画像から検出すべき顔の大きさの範囲として設定された設定範囲を記憶する記憶部と、
前記所定範囲及び前記設定範囲に基づいて、前記入力画像の解像度を変更した画像である拡大縮小画像を生成する解像度変更部と、
を備え、
前記顔検出部は、前記拡大縮小画像に対して顔検出する
を備えることを特徴とする画像処理システム。 - 画像から顔を検出する画像処理方法であって、
入力画像から検出すべき顔の大きさの範囲として設定された設定範囲を記憶するステップと、
検出可能な顔の大きさの範囲である所定範囲と、前記設定範囲とに基づいて、前記入力画像の解像度を変更した画像である拡大縮小画像を生成するステップと、
前記拡大縮小画像に対して顔検出するステップと、
を含むことを特徴とする画像処理方法。 - 画像から顔を検出するためにコンピュータを、
検出可能な顔の大きさの範囲である所定範囲と、入力画像から検出すべき顔の大きさの範囲として設定された設定範囲とに基づいて、前記入力画像の解像度を変更した画像である拡大縮小画像を生成する手段、及び
前記拡大縮小画像に対して顔検出する手段、
として機能させることを特徴とする画像処理プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019186945A JP7385416B2 (ja) | 2019-10-10 | 2019-10-10 | 画像処理装置、画像処理システム、画像処理方法及び画像処理プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019186945A JP7385416B2 (ja) | 2019-10-10 | 2019-10-10 | 画像処理装置、画像処理システム、画像処理方法及び画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021064043A true JP2021064043A (ja) | 2021-04-22 |
JP7385416B2 JP7385416B2 (ja) | 2023-11-22 |
Family
ID=75487967
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019186945A Active JP7385416B2 (ja) | 2019-10-10 | 2019-10-10 | 画像処理装置、画像処理システム、画像処理方法及び画像処理プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7385416B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2023086698A (ja) * | 2021-12-10 | 2023-06-22 | ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド | 画像処理方法、装置、機器、媒体およびプログラム |
JP2023127389A (ja) * | 2022-03-01 | 2023-09-13 | ソフトバンク株式会社 | 情報処理装置、情報処理方法及び情報処理プログラム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007072606A (ja) * | 2005-09-05 | 2007-03-22 | Canon Inc | 画像処理装置及び方法 |
JP2008027058A (ja) * | 2006-07-19 | 2008-02-07 | Sony Corp | 画像検出装置及び画像検出方法 |
JP2008191760A (ja) * | 2007-02-01 | 2008-08-21 | Toyota Central R&D Labs Inc | 対象物検出装置、対象物検出方法、及びプログラム |
JP2010027035A (ja) * | 2008-06-16 | 2010-02-04 | Canon Inc | 個人認証装置及び個人認証方法 |
JP2011053915A (ja) * | 2009-09-02 | 2011-03-17 | Sony Corp | 画像処理装置、画像処理方法、プログラム及び電子機器 |
-
2019
- 2019-10-10 JP JP2019186945A patent/JP7385416B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007072606A (ja) * | 2005-09-05 | 2007-03-22 | Canon Inc | 画像処理装置及び方法 |
JP2008027058A (ja) * | 2006-07-19 | 2008-02-07 | Sony Corp | 画像検出装置及び画像検出方法 |
JP2008191760A (ja) * | 2007-02-01 | 2008-08-21 | Toyota Central R&D Labs Inc | 対象物検出装置、対象物検出方法、及びプログラム |
JP2010027035A (ja) * | 2008-06-16 | 2010-02-04 | Canon Inc | 個人認証装置及び個人認証方法 |
JP2011053915A (ja) * | 2009-09-02 | 2011-03-17 | Sony Corp | 画像処理装置、画像処理方法、プログラム及び電子機器 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2023086698A (ja) * | 2021-12-10 | 2023-06-22 | ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド | 画像処理方法、装置、機器、媒体およびプログラム |
JP2023127389A (ja) * | 2022-03-01 | 2023-09-13 | ソフトバンク株式会社 | 情報処理装置、情報処理方法及び情報処理プログラム |
JP7405379B2 (ja) | 2022-03-01 | 2023-12-26 | ソフトバンク株式会社 | 情報処理装置、情報処理方法及び情報処理プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP7385416B2 (ja) | 2023-11-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9639914B2 (en) | Portrait deformation method and apparatus | |
CN109325437B (zh) | 图像处理方法、装置和系统 | |
JP6636154B2 (ja) | 顔画像処理方法および装置、ならびに記憶媒体 | |
EP3992919B1 (en) | Three-dimensional facial model generation method and apparatus, device, and medium | |
WO2017193906A1 (zh) | 一种图像处理方法及处理系统 | |
US10559062B2 (en) | Method for automatic facial impression transformation, recording medium and device for performing the method | |
JP4799105B2 (ja) | 情報処理装置及びその制御方法、コンピュータプログラム、記憶媒体 | |
CN106682632B (zh) | 用于处理人脸图像的方法和装置 | |
US11176355B2 (en) | Facial image processing method and apparatus, electronic device and computer readable storage medium | |
US8976182B2 (en) | Facial sketch creation device, configuration information generation device, configuration information generation method, and storage medium | |
CN111369428B (zh) | 虚拟头像生成方法和装置 | |
US20210334998A1 (en) | Image processing method, apparatus, device and medium for locating center of target object region | |
JP2007087345A (ja) | 情報処理装置及びその制御方法、コンピュータプログラム、記憶媒体 | |
JP2020102012A (ja) | 画像処理装置、画像処理方法およびプログラム | |
US10162997B2 (en) | Electronic device, computer readable storage medium and face image display method | |
JPWO2018078857A1 (ja) | 視線推定装置、視線推定方法及びプログラム記録媒体 | |
US20230237777A1 (en) | Information processing apparatus, learning apparatus, image recognition apparatus, information processing method, learning method, image recognition method, and non-transitory-computer-readable storage medium | |
JP7385416B2 (ja) | 画像処理装置、画像処理システム、画像処理方法及び画像処理プログラム | |
JP2010250419A (ja) | 目の様態を検出する画像処理装置 | |
EP3699865B1 (en) | Three-dimensional face shape derivation device, three-dimensional face shape deriving method, and non-transitory computer readable medium | |
CN115689882A (zh) | 一种图像处理方法、装置和计算机可读存储介质 | |
JP6098133B2 (ja) | 顔構成部抽出装置、顔構成部抽出方法及びプログラム | |
CN113487670A (zh) | 一种化妆镜及状态调整方法 | |
US20220005266A1 (en) | Method for processing two-dimensional image and device for executing method | |
WO2022024274A1 (ja) | 画像処理装置、画像処理方法、及び、記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220801 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230613 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230620 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230807 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230912 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231010 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231031 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231110 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7385416 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |