JP6362085B2 - 画像認識システム、画像認識方法およびプログラム - Google Patents
画像認識システム、画像認識方法およびプログラム Download PDFInfo
- Publication number
- JP6362085B2 JP6362085B2 JP2014105506A JP2014105506A JP6362085B2 JP 6362085 B2 JP6362085 B2 JP 6362085B2 JP 2014105506 A JP2014105506 A JP 2014105506A JP 2014105506 A JP2014105506 A JP 2014105506A JP 6362085 B2 JP6362085 B2 JP 6362085B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- recognition
- detection
- face
- processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/178—Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/179—Human faces, e.g. facial parts, sketches or expressions metadata assisted face recognition
Description
画像認識システムを構築した場合、死角ができないように複数台のネットワークカメラを配置することが一般的である。PCを使って画像認識処理を行うのであれば、少ない機器でより多くのネットワークカメラに対応できることが望ましい。
図1は、ネットワークシステム(画像認識システム)の構成の一例を示す図である。
図1において、ネットワークカメラ100、ネットワークストレージ装置200、画像認識サーバ装置300、および画像表示装置400は、ネットワーク回線の一例であるLAN500を介して相互に接続される。
ネットワークストレージ装置200は、記録装置の一例である。ネットワークストレージ装置200は、ネットワークカメラ100で撮影された画像データや、ネットワークカメラ100内で行われた画像認識処理の結果を、LAN500を介して受信して記録する。
本実施形態では、具体的には、顔が映っているか、上半身が写っているか、全身が写っているか、といった物体の撮像範囲を確認することにより物体の写り具合を判定する。
そこで、画像認識前提条件算出部130は、ステップS302において足元の検出を行い、ステップS304において人体の検出を行い、ステップS305において顔の検出を行う。顔が写っているかどうかは、例えば、顔の検出ができたか否かにより判断される。上半身が写っているかどうかは、例えば、顔の検出と人体の検出とができたか否かにより判断される。全身が写っているかどうかは、例えば、顔の検出と、人体の検出と、足元の検出とができたか否かにより判断される。そこで、図3に示す例では、ステップS308において、画像認識前提条件算出部130は、物体の写っている領域を検出する。
尚、スコアは、物体の各部位または全体の検出結果や認識結果の信頼度の一例である。具体的に説明すると、例えば、予め登録されている物体の各部位または全体の情報(ライブラリ)と、検出結果・認識結果との類似度をスコアとすることができる。ライブラリとの比較をせずに、既に検出・認識されている内容と、今回の検出・認識した結果との比較を行い、これらの類似度をスコアとして算出してもよい。
以上の処理により、第1の画像取得部110で取得された画像に写し出される各物体(各ID)の属性が得られる。
一方、未比較の認識前提条件の項目がある場合には、ステップS502に進む。ステップS502に進むと、再処理推奨領域算出部140は、未選択の認識前提条件の1つを選択する。
ステップS505に進むと、再処理推奨領域算出部140は、ステップS502で選択した認識前提条件の項目の内容を、今回第1の画像取得部110で取得された画像の内容に変更して更新する。そして、ステップS501の処理に戻る。
以上の処理により、各IDにおける認識前提条件の項目の内容が得られる。
前記指示が行われると、画像認識サーバ装置300は、過去の画像に対する再認識処理を実行する。
再処理推奨領域参照部310、第2の画像取得部320、および認識処理部330は、物体追尾部120で付与されたID毎に繰り返し行うことで過去の画像に対する再認識処理を効率よく行うことができる。
その後、過去の画像に対する再認識処理を行う場合には、ユーザにより指定された認識対象に対応する項目(考慮事項)を導出し、導出した項目に対応する画像と当該画像における推奨処理領域とを抽出する。そして、抽出した画像の推奨処理領域に対して画像認識処理を行う。このように、再認識処理では、認識対象に見合う画像の推奨処理領域を抽出し、当該推奨処理領域に対して画像認識処理を行う。
本発明は、前述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (8)
- 画像を取得する画像取得手段と、
前記画像に写し出されている物体の検出の結果に対する信頼度を前記物体ごとに導出する導出手段と、
複数の画像における同一の物体に対する前記信頼度を比較し、比較した結果に基づいて、画像の再認識処理に用いる画像を登録する登録手段と、
を有することを特徴とする画像認識システム。 - 前記導出手段は、画像における物体の写り方により定められる複数の項目ごとに、前記画像に写し出されている物体の、当該項目に応じた検出の結果に対する信頼度を導出し、
前記登録手段は、複数の画像における同一の物体の同一の項目に対する前記信頼度を比較し、比較した結果に基づいて、画像の再認識処理に用いる画像を示す情報と、当該画像における処理領域を示す情報とを、前記項目ごとに登録することを特徴とする請求項1に記載の画像認識システム。 - 画像の再認識処理の実行を受け付ける受け付け手段と、
前記受け付け手段により受け付けられた再認識処理の内容に応じた前記項目から、前記再認識処理に用いる画像の処理領域を抽出する抽出手段と、
前記処理領域に対して、前記再認識処理を行う再認識処理手段と、
を更に有することを特徴とする請求項2に記載の画像認識システム。 - 前記項目は、物体の向きを特定する少なくとも1つの方向と、物体の写っている領域を特定する少なくとも1つの領域とを含むことを特徴とする請求項2または3に記載の画像認識システム。
- 物体が移動する方向の検出、人体の足元の検出、人体が向いている方向の検出、人体の検出、顔の検出、顔を構成する器官の検出、および顔が向いている方向の検出のうち、少なくとも1つを行う検出手段を更に有し、
前記導出手段は、前記検出手段により検出された結果に基づいて、前記信頼度を導出することを特徴とする請求項1〜4の何れか1項に記載の画像認識システム。 - 前記導出手段は、人体の検出の結果に基づく前記信頼度、顔の検出の結果に基づく前記信頼度、顔を構成する器官の検出の結果に基づく前記信頼度、顔認識の結果に基づく前記信頼度、人体の検出領域の画素数に基づく前記信頼度、および顔の検出領域の画素数に基づく前記信頼度のうち、少なくとも1つを導出することを特徴とする請求項1〜5の何れか1項に記載の画像認識システム。
- 画像を取得する画像取得工程と、
前記画像に写し出されている物体の検出の結果に対する信頼度を前記物体ごとに導出する導出工程と、
複数の画像における同一の物体に対する前記信頼度を比較し、比較した結果に基づいて、画像の再認識処理に用いる画像を登録する登録工程と、
を有することを特徴とする画像認識方法。 - 請求項1〜6の何れか1項に記載の画像認識システムの各手段としてコンピュータを機能させることを特徴とするプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014105506A JP6362085B2 (ja) | 2014-05-21 | 2014-05-21 | 画像認識システム、画像認識方法およびプログラム |
US14/709,589 US9721153B2 (en) | 2014-05-21 | 2015-05-12 | Image processing apparatus, image processing method, and storage medium that recognize an image based on a designated object type |
CN201510254139.3A CN105095853B (zh) | 2014-05-21 | 2015-05-19 | 图像处理装置及图像处理方法 |
US15/631,728 US10146992B2 (en) | 2014-05-21 | 2017-06-23 | Image processing apparatus, image processing method, and storage medium that recognize an image based on a designated object type |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014105506A JP6362085B2 (ja) | 2014-05-21 | 2014-05-21 | 画像認識システム、画像認識方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015219879A JP2015219879A (ja) | 2015-12-07 |
JP6362085B2 true JP6362085B2 (ja) | 2018-07-25 |
Family
ID=54556280
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014105506A Active JP6362085B2 (ja) | 2014-05-21 | 2014-05-21 | 画像認識システム、画像認識方法およびプログラム |
Country Status (3)
Country | Link |
---|---|
US (2) | US9721153B2 (ja) |
JP (1) | JP6362085B2 (ja) |
CN (1) | CN105095853B (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6735592B2 (ja) * | 2016-04-08 | 2020-08-05 | キヤノン株式会社 | 画像処理装置及びその制御方法、画像処理システム |
US11026634B2 (en) * | 2017-04-05 | 2021-06-08 | doc.ai incorporated | Image-based system and method for predicting physiological parameters |
US11145421B2 (en) * | 2017-04-05 | 2021-10-12 | Sharecare AI, Inc. | System and method for remote medical information exchange |
WO2019171542A1 (ja) * | 2018-03-08 | 2019-09-12 | 三菱電機株式会社 | 顔画像生成装置および顔画像生成プログラム |
WO2020185973A1 (en) | 2019-03-11 | 2020-09-17 | doc.ai incorporated | System and method with federated learning model for medical research applications |
US11915802B2 (en) | 2019-08-05 | 2024-02-27 | Sharecare AI, Inc. | Accelerated processing of genomic data and streamlined visualization of genomic insights |
CN113518474A (zh) * | 2020-03-27 | 2021-10-19 | 阿里巴巴集团控股有限公司 | 检测方法、装置、设备、存储介质和系统 |
US11256801B2 (en) | 2020-04-21 | 2022-02-22 | doc.ai, Inc. | Artificial intelligence-based generation of anthropomorphic signatures and use thereof |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4467838B2 (ja) | 2001-06-15 | 2010-05-26 | パナソニック株式会社 | 画像認識装置および画像認識方法 |
JP4775306B2 (ja) * | 2007-04-23 | 2011-09-21 | ソニー株式会社 | 画像処理装置、撮像装置、および画像表示制御方法、並びにコンピュータ・プログラム |
JP5329940B2 (ja) * | 2008-12-19 | 2013-10-30 | キヤノン株式会社 | 画像処理装置、その制御方法、及び撮像装置 |
JP5193944B2 (ja) * | 2009-05-20 | 2013-05-08 | 株式会社日立国際電気 | 画像処理方法 |
JP2011027847A (ja) * | 2009-07-22 | 2011-02-10 | Fujifilm Corp | Af枠自動追尾システム |
JP5567853B2 (ja) * | 2010-02-10 | 2014-08-06 | キヤノン株式会社 | 画像認識装置および方法 |
JP2011253374A (ja) * | 2010-06-02 | 2011-12-15 | Sony Corp | 情報処理装置、および情報処理方法、並びにプログラム |
CN103403762A (zh) * | 2011-03-04 | 2013-11-20 | 株式会社尼康 | 图像处理装置及图像处理程序 |
CN102170563A (zh) * | 2011-03-24 | 2011-08-31 | 杭州海康威视软件有限公司 | 智能人员卡口系统及人员监控管理方法 |
JP5923723B2 (ja) * | 2011-06-02 | 2016-05-25 | パナソニックIpマネジメント株式会社 | 人物属性推定システム、人物属性推定装置、及び人物属性推定方法 |
KR101381439B1 (ko) * | 2011-09-15 | 2014-04-04 | 가부시끼가이샤 도시바 | 얼굴 인식 장치 및 얼굴 인식 방법 |
US8994558B2 (en) * | 2012-02-01 | 2015-03-31 | Electronics And Telecommunications Research Institute | Automotive augmented reality head-up display apparatus and method |
US9135273B2 (en) * | 2012-05-24 | 2015-09-15 | Hitachi Kokusai Electric Inc. | Similar image search system |
KR102205229B1 (ko) * | 2013-01-11 | 2021-01-19 | 선 페이턴트 트러스트 | 데이터 처리방법, 프리코딩 방법, 통신장치 |
-
2014
- 2014-05-21 JP JP2014105506A patent/JP6362085B2/ja active Active
-
2015
- 2015-05-12 US US14/709,589 patent/US9721153B2/en active Active
- 2015-05-19 CN CN201510254139.3A patent/CN105095853B/zh active Active
-
2017
- 2017-06-23 US US15/631,728 patent/US10146992B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US9721153B2 (en) | 2017-08-01 |
US10146992B2 (en) | 2018-12-04 |
CN105095853A (zh) | 2015-11-25 |
US20150339523A1 (en) | 2015-11-26 |
CN105095853B (zh) | 2020-10-30 |
US20170286758A1 (en) | 2017-10-05 |
JP2015219879A (ja) | 2015-12-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6362085B2 (ja) | 画像認識システム、画像認識方法およびプログラム | |
AU2022252799B2 (en) | System and method for appearance search | |
JP6942488B2 (ja) | 画像処理装置、画像処理システム、画像処理方法、及びプログラム | |
JP4594945B2 (ja) | 人物検索装置および人物検索方法 | |
JP7282851B2 (ja) | 装置、方法及びプログラム | |
JP6655878B2 (ja) | 画像認識方法及び装置、プログラム | |
KR101603017B1 (ko) | 제스처 인식 장치 및 제스처 인식 장치의 제어 방법 | |
WO2020017190A1 (ja) | 映像解析装置、人物検索システムおよび人物検索方法 | |
JPWO2006025272A1 (ja) | 映像分類装置、映像分類プログラム、映像検索装置、および映像検索プログラム | |
JP2021503139A (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
JP6349448B1 (ja) | 情報処理装置、情報処理プログラム、及び、情報処理方法 | |
US20240104769A1 (en) | Information processing apparatus, control method, and non-transitory storage medium | |
EP3699865B1 (en) | Three-dimensional face shape derivation device, three-dimensional face shape deriving method, and non-transitory computer readable medium | |
US11527090B2 (en) | Information processing apparatus, control method, and non-transitory storage medium | |
JP2019040592A (ja) | 情報処理装置、情報処理プログラム、及び、情報処理方法 | |
US20220207261A1 (en) | Method and apparatus for detecting associated objects | |
JP6762754B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
CN116433939B (zh) | 样本图像生成方法、训练方法、识别方法以及装置 | |
JP5582924B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2019103029A (ja) | 情報処理装置、色補正方法、及びコンピュータプログラム | |
JP2017033390A (ja) | 画像解析装置及びプログラム | |
JP2021125048A (ja) | 情報処理装置、情報処理方法、画像処理装置、及びプログラム | |
JP2017102748A (ja) | 瞳画像学習装置、瞳位置検出装置及びそのプログラム | |
JP2017045423A (ja) | 映像処理装置、映像処理方法、映像処理システム、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170512 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180516 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180522 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180619 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6362085 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |