JP4919297B2 - 画像評価装置および方法並びにプログラム - Google Patents
画像評価装置および方法並びにプログラム Download PDFInfo
- Publication number
- JP4919297B2 JP4919297B2 JP2008063442A JP2008063442A JP4919297B2 JP 4919297 B2 JP4919297 B2 JP 4919297B2 JP 2008063442 A JP2008063442 A JP 2008063442A JP 2008063442 A JP2008063442 A JP 2008063442A JP 4919297 B2 JP4919297 B2 JP 4919297B2
- Authority
- JP
- Japan
- Prior art keywords
- face
- evaluation
- image
- evaluation value
- calculating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000011156 evaluation Methods 0.000 title claims description 230
- 238000000034 method Methods 0.000 title claims description 35
- 238000004364 calculation method Methods 0.000 claims description 51
- 230000008921 facial expression Effects 0.000 claims description 31
- 230000014509 gene expression Effects 0.000 claims description 27
- 238000001514 detection method Methods 0.000 claims description 11
- 238000012545 processing Methods 0.000 claims description 11
- 210000000887 face Anatomy 0.000 description 12
- 230000001815 facial effect Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 7
- 230000006835 compression Effects 0.000 description 5
- 238000007906 compression Methods 0.000 description 5
- 238000007781 pre-processing Methods 0.000 description 5
- 230000006837 decompression Effects 0.000 description 3
- 206010011469 Crying Diseases 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 210000000056 organ Anatomy 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000011496 digital image analysis Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
- G06V40/175—Static expression
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Description
前記各顔についての特徴を表す複数の特徴情報を取得する特徴情報取得手段と、
前記各顔が特定の表情である程度を表す表情度を算出する表情度算出手段と、
前記各顔についての前記特徴情報および前記表情度に基づいて、前記画像の表情に基づく評価値を算出する評価値算出手段とを備えたことを特徴とするものである。
前記評価値算出手段を、前記入力された算出基準により前記評価値を算出する手段としてもよい。
前記入力手段を、前記ポイント用重み係数の変更指示を受け付けることにより前記算出基準の入力を受け付ける手段とし、
前記評価値算出手段を、前記変更されたポイント用重み係数により前記重み係数を算出して前記評価値を算出する手段としてもよい。
前記各顔についての特徴を表す複数の特徴情報を取得し、
前記各顔が特定の表情である程度を表す表情度を算出し、
前記各顔についての前記特徴情報および前記表情度に基づいて、前記画像の表情に基づく評価値を算出することを特徴とするものである。
ここで、iは評価対象画像に含まれる顔の数であり、Siは評価対象画像に含まれるi番目の顔についての笑顔度、Piはi番目の顔についての特徴情報Cに基づいて決定される重み係数である。以下、重み係数Piの算出について説明する。
式(2)において、R1〜R4はそれぞれ顔の位置、サイズ、向きおよび傾きについてあらかじめ定められたルールにしたがって決定される評価用のポイント、W1〜W4は、それぞれ顔の位置、サイズ、向きおよび傾きのポイントを重みづけるための重み係数(ポイント用重み係数)である。
2 画像入力部
3 圧縮/伸長部
4 表示部
5 入力部
6 顔検出部
7 特徴情報取得部
8 表情度算出部
9 評価値算出部
10 制御部
11 記憶部
30,40,50 評価画面
Claims (6)
- 顔を含む画像からすべての該顔を検出する顔検出手段と、
前記各顔についての特徴を表す複数の特徴情報を取得する特徴情報取得手段と、
前記各顔が特定の表情である程度を表す表情度を算出する表情度算出手段と、
前記各顔に対応する前記特徴情報に基づいて決定された重み係数によって、前記各顔の表情度を重みづけ加算することにより、前記画像の表情に基づく評価値を算出する評価値算出手段と、
前記評価値の算出基準の入力を受け付ける入力手段とを備え、
前記重み係数が、前記各顔についての前記複数の特徴情報に基づいて決定された評価用ポイントを、該評価用ポイントを重みづけるためのポイント用重み係数によって重みづけ加算することにより算出されてなる場合、
前記入力手段は、前記ポイント用重み係数の変更指示を受け付けることにより前記評価値の算出基準の入力を受け付ける手段であり、
前記評価値算出手段は、前記変更されたポイント用重み係数により前記重み係数を算出して前記評価値を算出する手段であることを特徴とする画像評価装置。 - 複数の前記画像についての評価値を算出するに際し、前記各画像についての評価値の大きさに応じた評価結果を表す評価画面を表示する表示手段をさらに備えたことを特徴とする請求項1記載の画像評価装置。
- 複数の前記画像についての評価値を算出するに際し、前記入力された算出基準により算出された前記各画像についての評価値の大きさに応じた評価結果を表す評価画面を表示する表示手段をさらに備えたことを特徴とする請求項1記載の画像評価装置。
- 前記特徴情報取得手段は、前記各顔の位置、該各顔のサイズ、該各顔の向きおよび該各顔の傾きを前記特徴情報として取得する手段であることを特徴とする請求項1から3のいずれか1項記載の画像評価装置。
- 顔を含む画像からすべての該顔を検出し、
前記各顔についての特徴を表す複数の特徴情報を取得し、
前記各顔が特定の表情である程度を表す表情度を算出し、
前記各顔に対応する前記特徴情報に基づいて決定された重み係数によって、前記各顔の表情度を重みづけ加算することにより、前記画像の表情に基づく評価値を算出するに際し、
前記重み係数が、前記各顔についての前記複数の特徴情報に基づいて決定された評価用ポイントを、該評価用ポイントを重みづけるためのポイント用重み係数によって重みづけ加算することにより算出されてなる場合、
前記ポイント用重み係数の変更指示を受け付けることにより前記評価値の算出基準の入力を受け付け、
前記変更されたポイント用重み係数により前記重み係数を算出して前記評価値を算出することを特徴とする画像評価方法。 - 顔を含む画像からすべての該顔を検出する手順と、
前記各顔についての特徴を表す複数の特徴情報を取得する手順と、
前記各顔が特定の表情である程度を表す表情度を算出する手順と、
前記各顔に対応する前記特徴情報に基づいて決定された重み係数によって、前記各顔の表情度を重みづけ加算することにより、前記画像の表情に基づく評価値を算出する手順と、
前記評価値の算出基準の入力を受け付ける手順とを有し、
前記重み係数が、前記各顔についての前記複数の特徴情報に基づいて決定された評価用ポイントを、該評価用ポイントを重みづけるためのポイント用重み係数によって重みづけ加算することにより算出されてなる場合、
前記評価値の算出基準の入力を受け付ける手順は、前記ポイント用重み係数の変更指示を受け付けることにより前記評価値の算出基準の入力を受け付ける手順であり、
前記評価値を算出する手順は、前記変更されたポイント用重み係数により前記重み係数を算出して前記評価値を算出する手順であることを特徴とする画像評価方法をコンピュータに実行させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008063442A JP4919297B2 (ja) | 2008-03-13 | 2008-03-13 | 画像評価装置および方法並びにプログラム |
US12/402,973 US20090232400A1 (en) | 2008-03-13 | 2009-03-12 | Image evaluation apparatus, method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008063442A JP4919297B2 (ja) | 2008-03-13 | 2008-03-13 | 画像評価装置および方法並びにプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009217758A JP2009217758A (ja) | 2009-09-24 |
JP4919297B2 true JP4919297B2 (ja) | 2012-04-18 |
Family
ID=41063096
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008063442A Active JP4919297B2 (ja) | 2008-03-13 | 2008-03-13 | 画像評価装置および方法並びにプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US20090232400A1 (ja) |
JP (1) | JP4919297B2 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8326002B2 (en) * | 2009-08-13 | 2012-12-04 | Sensory Logic, Inc. | Methods of facial coding scoring for optimally identifying consumers' responses to arrive at effective, incisive, actionable conclusions |
JP2012068948A (ja) * | 2010-09-24 | 2012-04-05 | Renesas Electronics Corp | 顔属性推定装置およびその方法 |
JP5776187B2 (ja) * | 2011-01-27 | 2015-09-09 | 富士通株式会社 | 表情判定プログラムおよび表情判定装置 |
US9449411B2 (en) * | 2011-04-29 | 2016-09-20 | Kodak Alaris Inc. | Ranking image importance with a photo-collage |
JP2013186512A (ja) | 2012-03-06 | 2013-09-19 | Sony Corp | 画像処理装置および方法、並びにプログラム |
JP6098133B2 (ja) * | 2012-11-21 | 2017-03-22 | カシオ計算機株式会社 | 顔構成部抽出装置、顔構成部抽出方法及びプログラム |
US20140153900A1 (en) * | 2012-12-05 | 2014-06-05 | Samsung Electronics Co., Ltd. | Video processing apparatus and method |
CN109447276B (zh) * | 2018-09-17 | 2021-11-02 | 烽火通信科技股份有限公司 | 一种机器学习系统、设备及应用方法 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5887069A (en) * | 1992-03-10 | 1999-03-23 | Hitachi, Ltd. | Sign recognition apparatus and method and sign translation system using same |
US7155036B2 (en) * | 2000-12-04 | 2006-12-26 | Sony Corporation | Face detection under varying rotation |
US7480864B2 (en) * | 2001-10-12 | 2009-01-20 | Canon Kabushiki Kaisha | Zoom editor |
US7319780B2 (en) * | 2002-11-25 | 2008-01-15 | Eastman Kodak Company | Imaging method and system for health monitoring and personal security |
JP2004336343A (ja) * | 2003-05-07 | 2004-11-25 | Canon Inc | 画像処理システム |
EP3358501B1 (en) * | 2003-07-18 | 2020-01-01 | Canon Kabushiki Kaisha | Image processing device, imaging device, image processing method |
JP2005044330A (ja) * | 2003-07-24 | 2005-02-17 | Univ Of California San Diego | 弱仮説生成装置及び方法、学習装置及び方法、検出装置及び方法、表情学習装置及び方法、表情認識装置及び方法、並びにロボット装置 |
JP4307301B2 (ja) * | 2003-07-31 | 2009-08-05 | キヤノン株式会社 | 画像処理装置およびその方法 |
JP2005056175A (ja) * | 2003-08-05 | 2005-03-03 | Konica Minolta Photo Imaging Inc | 画像評価装置 |
US7102839B2 (en) * | 2003-10-31 | 2006-09-05 | International Business Machines Corporation | Magnetic recording channel utilizing control fields for timing recovery, equalization, amplitude and amplitude asymmetry |
JP2005227957A (ja) * | 2004-02-12 | 2005-08-25 | Mitsubishi Electric Corp | 最適顔画像記録装置及び最適顔画像記録方法 |
CA2568633C (en) * | 2004-10-15 | 2008-04-01 | Oren Halpern | A system and a method for improving the captured images of digital still cameras |
JP2007041987A (ja) * | 2005-08-05 | 2007-02-15 | Sony Corp | 画像処理装置および方法、並びにプログラム |
KR100714724B1 (ko) * | 2005-08-17 | 2007-05-07 | 삼성전자주식회사 | 얼굴 포즈 추정 장치와 추정 방법 그리고 상기 방법에 의한얼굴 인식 시스템 |
JP2007097090A (ja) * | 2005-09-30 | 2007-04-12 | Fujifilm Corp | 画像表示装置および方法ならびにプログラム、さらに写真プリント注文受付装置 |
JP4466585B2 (ja) * | 2006-02-21 | 2010-05-26 | セイコーエプソン株式会社 | 対象物が表現された画像の数の算出 |
JP4507281B2 (ja) * | 2006-03-30 | 2010-07-21 | 富士フイルム株式会社 | 画像表示装置、撮像装置および画像表示方法 |
US20070274609A1 (en) * | 2006-05-23 | 2007-11-29 | Hitachi High-Technologies Corporation | Image Search Apparatus, Image Search System, Image Search Method, and Program for Executing Image Search Method |
JP4274233B2 (ja) * | 2006-11-30 | 2009-06-03 | ソニー株式会社 | 撮影装置、画像処理装置、および、これらにおける画像処理方法ならびに当該方法をコンピュータに実行させるプログラム |
JP4845755B2 (ja) * | 2007-01-30 | 2011-12-28 | キヤノン株式会社 | 画像処理装置、画像処理方法、プログラム及び記憶媒体 |
US8064653B2 (en) * | 2007-11-29 | 2011-11-22 | Viewdle, Inc. | Method and system of person identification by facial image |
US8750578B2 (en) * | 2008-01-29 | 2014-06-10 | DigitalOptics Corporation Europe Limited | Detecting facial expressions in digital images |
-
2008
- 2008-03-13 JP JP2008063442A patent/JP4919297B2/ja active Active
-
2009
- 2009-03-12 US US12/402,973 patent/US20090232400A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
JP2009217758A (ja) | 2009-09-24 |
US20090232400A1 (en) | 2009-09-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4919297B2 (ja) | 画像評価装置および方法並びにプログラム | |
CN110532984B (zh) | 关键点检测方法、手势识别方法、装置及系统 | |
KR101150097B1 (ko) | 얼굴 화상 작성장치 및 방법 | |
US8542928B2 (en) | Information processing apparatus and control method therefor | |
US20060029276A1 (en) | Object image detecting apparatus, face image detecting program and face image detecting method | |
US20120294496A1 (en) | Face recognition apparatus, control method thereof, and face recognition method | |
TWI254891B (en) | Face image detection method, face image detection system, and face image detection program | |
JP2011138388A (ja) | データ補正装置及び方法 | |
JP2003525504A (ja) | モデルを使用して画像内のオブジェクトの位置を特定するシステム及び方法 | |
JP2011090466A (ja) | 情報処理装置及び方法、並びにプログラム | |
JP2016170542A (ja) | 画像処理装置、画像処理方法及びプログラム | |
WO2000055811A1 (fr) | Processeur de donnees, procede de traitement de donnees, et support d'enregistrement | |
JP4881199B2 (ja) | 画像評価装置および方法並びにプログラム | |
US20210158593A1 (en) | Pose selection and animation of characters using video data and training techniques | |
JP2007233517A (ja) | 顔検出装置および方法並びにプログラム | |
JP2005071344A (ja) | 画像処理方法、画像処理装置及び画像処理プログラムを記録した記録媒体 | |
US7856124B2 (en) | Image evaluation device, method and program | |
JP2001250121A (ja) | 画像認識装置および記録媒体 | |
CN113283372A (zh) | 用于处理人物图像的方法和设备 | |
JP4881185B2 (ja) | 画像ソート装置および方法並びにプログラム | |
JP2007026308A (ja) | 画像処理方法、画像処理装置 | |
CN116229236A (zh) | 一种基于改进YOLO v5模型的结核杆菌检测方法 | |
JP2013152543A (ja) | 画像蓄積プログラム、方法および装置 | |
JP4854957B2 (ja) | 代表画像選択装置および方法並びにプログラム | |
JP2003168113A (ja) | 画像認識システム、画像認識方法および画像認識プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100707 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110407 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110419 |
|
RD15 | Notification of revocation of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7435 Effective date: 20110418 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110620 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110712 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110902 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120117 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120125 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4919297 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150210 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |