JP2007164720A - 頭部検出装置、頭部検出方法および頭部検出プログラム - Google Patents
頭部検出装置、頭部検出方法および頭部検出プログラム Download PDFInfo
- Publication number
- JP2007164720A JP2007164720A JP2005363851A JP2005363851A JP2007164720A JP 2007164720 A JP2007164720 A JP 2007164720A JP 2005363851 A JP2005363851 A JP 2005363851A JP 2005363851 A JP2005363851 A JP 2005363851A JP 2007164720 A JP2007164720 A JP 2007164720A
- Authority
- JP
- Japan
- Prior art keywords
- head
- region
- foreground
- axis
- ellipse
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/164—Detection; Localisation; Normalisation using holistic features
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
【解決手段】入力画像から人物が撮像された前景領域を抽出する前景抽出部と、前景領域の重心の周りのモーメントを算出する第1モーメント算出部を有し、前景領域の重心の周りのモーメントに基づいて前記前景領域の主軸を算出する第1主軸算出部と、前景領域の主軸および前景領域の形状に基づいて、前景領域の一部として含まれる頭部領域を算出する頭部算出部と、頭部領域の形状に基づいて、人物の頭部に当てはめる楕円を決定する楕円決定部とを備える頭部検出装置を提供する。
【選択図】図1
Description
ただし、第1直交軸算出部32は、M20=M02の場合は、一方の軸の角度θを下記式(3)のように算出する。
21 入力部
22 前景抽出部
23 第1主軸算出部
24 頭部算出部
25 楕円決定部
26 検出部
27 記憶部
28 異常検出部
31 第1モーメント算出部
32 第1直交軸算出部
33 第1主軸選択部
41 探索部
42 円算出部
51 第2主軸算出部
52 肌色抽出部
53 短軸決定部
54 長軸決定部
61 第2モーメント算出部
62 第2直交軸算出部
63 第2主軸選択部
101 入力画像
102 人物画像
103 前景領域
104 重心
105 直交軸
106 主軸
111 初期頭頂点
112 頭頂点
113 中心線
114 中心
115 円
116 頭部エリア円
121 頭部領域
122 楕円中心
124 長軸
125 短軸
126 顔部
131 楕円
301 カメラ
302 店舗
303 天井
1900 コンピュータ
2000 CPU
2010 ROM
2020 RAM
2030 通信インターフェイス
2040 ハードディスクドライブ
2050 フレキシブルディスク・ドライブ
2060 CD−ROMドライブ
2070 入出力チップ
2075 グラフィック・コントローラ
2080 表示装置
2082 ホスト・コントローラ
2084 入出力コントローラ
2090 フレキシブルディスク
2095 CD−ROM
Claims (18)
- 入力画像から人物が撮像された前景領域を抽出する前景抽出部と、
前記前景領域の主軸を算出する第1主軸算出部と、
前記前景領域の主軸および前記前景領域の形状に基づいて、前記前景領域の一部として含まれる頭部領域を算出する頭部算出部と、
前記頭部領域の形状に基づいて、前記入力画像における人物の頭部に当てはめる楕円を決定する楕円決定部と
を備える頭部検出装置。 - 前記第1主軸算出部は、
前記前景領域の重心の周りのモーメントを算出する第1モーメント算出部を有し、
前記前景領域の重心の周りのモーメントに基づいて、前記前景領域の主軸を算出する
請求項1に記載の頭部検出装置。 - 動画を構成する複数のフレーム画像を複数の前記入力画像として入力する入力部を更に備え、
前記第1主軸算出部は、
前記前景領域の重心の周りのモーメントに基づいて、前記前景領域について直交する2つの軸を算出する第1直交軸算出部と、
前記第1直交軸算出部により算出された直交する2つの軸のうち、直前および直後の少なくとも一方の前記フレーム画像について算出された前記前景領域の主軸との間の角度がより小さい軸を、前記前景領域の主軸として選択する第1主軸選択部と
を有する請求項2に記載の頭部検出装置。 - 前記頭部算出部は、
前記前景領域の輪郭と前記主軸との交点のうち撮像対象空間内においてより上側に位置すると判断した交点を始点とし、前記前景領域の輪郭上の画素をたどって前記人物の頭頂点を探索する探索部と、
前記頭頂点と前記前景領域の重心とを結ぶ中心線上の点を中心とし、前記頭頂点を通る円のうち、円内に含まれる前記前景領域の画素の割合が予め定められた基準割合となる円を、頭部を囲む円として算出する円算出部と
を有し、
前記頭部を囲む円内に含まれる前記前景領域を前記頭部領域として算出する
請求項1に記載の頭部検出装置。 - 前記探索部は、前記始点から開始して前記前景領域の輪郭を前記前景領域の重心から離れる方向にたどっていき、前記重心との距離が極大となる点を前記頭頂点とする請求項4に記載の頭部検出装置。
- 前記探索部は、前記頭頂点と前記前景領域の重心とを結ぶ中心線と前記前景領域の主軸との間の角度が予め定められた基準角度以下となることを条件として、前記頭頂点を決定する請求項4に記載の頭部検出装置。
- 前記探索部は、前記始点から前記頭頂点までの間の前記輪郭の長さが予め定められた基準値以下となることを条件として、前記頭頂点を決定する請求項4に記載の頭部検出装置。
- 前記円算出部は、円内に含まれる前記前景領域の画素の割合が予め定められた基準割合以上となるように算出した前記頭部を囲む円が、前記前景領域の肌色領域を横切ることを条件として、前記肌色領域全体を円内に含むように前記頭部を囲む円をより大きく補正する請求項4に記載の頭部検出装置。
- 前記楕円決定部は、前記頭部領域の主軸を算出する第2主軸算出部を有し、前記主軸を長軸とする前記楕円を決定する請求項1に記載の頭部検出装置。
- 前記第2主軸算出部は、
前記頭部領域の重心の周りのモーメントを算出する第2モーメント算出部と、
前記頭部領域の重心の周りのモーメントに基づいて、前記頭部領域について直交する2つの軸を算出する第2直交軸算出部と、
直交する2つの軸のうち、前記前景領域の主軸と交差する角度が小さい軸を前記頭部領域の主軸として選択する第2主軸選択部と
を有する請求項9に記載の頭部検出装置。 - 前記楕円決定部は、前記頭部領域の主軸と前記頭部領域内の画素との最大距離に応じて前記楕円の短軸の長さを決定する請求項9に記載の頭部検出装置。
- 前記楕円決定部は、
前記頭部領域内の最大の肌色領域を抽出する肌色抽出部と、
前記頭部領域の主軸と前記肌色領域内の画素との最大距離に応じて前記楕円の短軸の長さを決定する短軸決定部と
を有する請求項9に記載の頭部検出装置。 - 前記楕円決定部は、前記短軸長決定部が決定した前記楕円の短軸の長さに予め定められた1を超える値を乗じた値を前記楕円の長軸の長さとする長軸決定部を更に有する請求項12に記載の頭部検出装置。
- 動画を構成する複数のフレーム画像を複数の前記入力画像として入力する入力部と、
前記複数のフレーム画像に応じて決定された前記楕円の変化に基づいて、前記人物の頭部の位置および向きの変化を検出する検出部と
を更に備える請求項1に記載の頭部検出装置。 - 前記検出部は、前記複数のフレーム画像に応じて決定された前記楕円内の肌色領域の面積および分布の少なくとも一方の変化に基づいて、前記人物の頭部の回転量を検出する請求項14に記載の頭部検出装置。
- 前記入力部は、監視目的で撮像装置により撮像された動画を構成する前記複数のフレーム画像を入力し、
複数の人物のそれぞれについて、前記人物の頭部の位置および向きの変化の履歴を記憶する記憶部と、
一の前記人物の頭部の位置および向きの変化量と、前記記憶部に記憶された他の前記人物の頭部の位置および変化に基づく基準変化量との差が予め定められたしきい値以上大きいことを条件として、当該人物が異常な動作をしていることを検出する異常検出部と
を更に備える請求項14に記載の頭部検出装置。 - 入力画像から人物が撮像された前景領域を抽出する前景抽出段階と、
前記前景領域の主軸を算出する第1主軸算出段階と、
前記前景領域の主軸および前記前景領域の形状に基づいて、前記前景領域の一部として含まれる頭部領域を算出する頭部算出段階と、
前記頭部領域の形状に基づいて、前記入力画像における人物の頭部に当てはめる楕円を決定する楕円決定段階と
を備える頭部検出方法。 - コンピュータを、
入力画像から人物が撮像された前景領域を抽出する前景抽出部と、
前記前景領域の主軸を算出する第1主軸算出部と、
前記前景領域の主軸および前記前景領域の形状に基づいて、前記前景領域の一部として含まれる頭部領域を算出する頭部算出部と、
前記頭部領域の形状に基づいて、前記入力画像における人物の頭部に当てはめる楕円を決定する楕円決定部と
して機能させる頭部検出プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005363851A JP3962803B2 (ja) | 2005-12-16 | 2005-12-16 | 頭部検出装置、頭部検出方法および頭部検出プログラム |
US11/640,473 US7450737B2 (en) | 2005-12-16 | 2006-12-15 | Head detecting apparatus, head detecting method, and head detecting program |
US12/212,954 US7720285B2 (en) | 2005-12-16 | 2008-09-18 | Head detecting apparatus, head detecting method, and head detecting program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005363851A JP3962803B2 (ja) | 2005-12-16 | 2005-12-16 | 頭部検出装置、頭部検出方法および頭部検出プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007164720A true JP2007164720A (ja) | 2007-06-28 |
JP3962803B2 JP3962803B2 (ja) | 2007-08-22 |
Family
ID=38232809
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005363851A Expired - Fee Related JP3962803B2 (ja) | 2005-12-16 | 2005-12-16 | 頭部検出装置、頭部検出方法および頭部検出プログラム |
Country Status (2)
Country | Link |
---|---|
US (2) | US7450737B2 (ja) |
JP (1) | JP3962803B2 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013516013A (ja) * | 2009-12-28 | 2013-05-09 | ソフトキネティック ソフトウェア | 頭部認識方法 |
US8571274B2 (en) | 2008-12-22 | 2013-10-29 | Nec Corporation | Person-judging device, method, and program |
US8577151B2 (en) | 2008-04-04 | 2013-11-05 | Fujifilm Corporation | Method, apparatus, and program for detecting object |
US8837773B2 (en) | 2010-09-02 | 2014-09-16 | Canon Kabushiki Kaisha | Apparatus which detects moving object from image and method thereof |
KR101501487B1 (ko) * | 2013-07-18 | 2015-03-12 | 전자부품연구원 | 깊이 영상 기반 머리 검출방법 및 장치 |
WO2017221644A1 (ja) * | 2016-06-22 | 2017-12-28 | ソニー株式会社 | 画像処理装置、画像処理システム、および画像処理方法、並びにプログラム |
CN109313805A (zh) * | 2016-06-22 | 2019-02-05 | 索尼公司 | 图像处理装置、图像处理系统、图像处理方法和程序 |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7630006B2 (en) | 1997-10-09 | 2009-12-08 | Fotonation Ireland Limited | Detecting red eye filter and apparatus using meta-data |
US8675059B2 (en) * | 2010-07-29 | 2014-03-18 | Careview Communications, Inc. | System and method for using a video monitoring system to prevent and manage decubitus ulcers in patients |
US9311540B2 (en) * | 2003-12-12 | 2016-04-12 | Careview Communications, Inc. | System and method for predicting patient falls |
US20110102643A1 (en) * | 2004-02-04 | 2011-05-05 | Tessera Technologies Ireland Limited | Partial Face Detector Red-Eye Filter Method and Apparatus |
JP2008197722A (ja) * | 2007-02-08 | 2008-08-28 | Denso Corp | 顔追跡装置 |
US9579047B2 (en) | 2013-03-15 | 2017-02-28 | Careview Communications, Inc. | Systems and methods for dynamically identifying a patient support surface and patient monitoring |
US10645346B2 (en) | 2013-01-18 | 2020-05-05 | Careview Communications, Inc. | Patient video monitoring systems and methods having detection algorithm recovery from changes in illumination |
US9959471B2 (en) | 2008-05-06 | 2018-05-01 | Careview Communications, Inc. | Patient video monitoring systems and methods for thermal detection of liquids |
US9866797B2 (en) | 2012-09-28 | 2018-01-09 | Careview Communications, Inc. | System and method for monitoring a fall state of a patient while minimizing false alarms |
US9794523B2 (en) | 2011-12-19 | 2017-10-17 | Careview Communications, Inc. | Electronic patient sitter management system and method for implementing |
US8471899B2 (en) | 2008-12-02 | 2013-06-25 | Careview Communications, Inc. | System and method for documenting patient procedures |
CN102122343A (zh) * | 2010-01-07 | 2011-07-13 | 索尼公司 | 躯干倾斜角度确定及姿势估计方法和装置 |
US9251854B2 (en) * | 2011-02-18 | 2016-02-02 | Google Inc. | Facial detection, recognition and bookmarking in videos |
US9236024B2 (en) | 2011-12-06 | 2016-01-12 | Glasses.Com Inc. | Systems and methods for obtaining a pupillary distance measurement using a mobile computing device |
US9286715B2 (en) | 2012-05-23 | 2016-03-15 | Glasses.Com Inc. | Systems and methods for adjusting a virtual try-on |
US9311746B2 (en) | 2012-05-23 | 2016-04-12 | Glasses.Com Inc. | Systems and methods for generating a 3-D model of a virtual try-on product |
US9483853B2 (en) | 2012-05-23 | 2016-11-01 | Glasses.Com Inc. | Systems and methods to display rendered images |
US9437011B2 (en) * | 2012-06-11 | 2016-09-06 | Samsung Electronics Co., Ltd. | Method and apparatus for estimating a pose of a head for a person |
US20140357369A1 (en) * | 2013-06-04 | 2014-12-04 | Microsoft Corporation | Group inputs via image sensor system |
TWI492193B (zh) * | 2013-06-14 | 2015-07-11 | Utechzone Co Ltd | 觸發訊號的方法及車用電子裝置 |
US10867376B2 (en) * | 2015-08-28 | 2020-12-15 | Nec Corporation | Analysis apparatus, analysis method, and storage medium |
FR3057692A1 (fr) * | 2016-10-13 | 2018-04-20 | Parrot Drones | Procede et systeme electronique de detection d'une cible, programme d'ordinateur associe |
WO2018123413A1 (ja) * | 2016-12-27 | 2018-07-05 | シャープ株式会社 | 画像処理装置、画像印刷装置、撮像装置、および画像処理プログラム |
CA3074445A1 (en) | 2019-03-08 | 2020-09-08 | Waddington North America, Inc. | Cup lid with roll and spill limiting rim |
CN111723610B (zh) * | 2019-03-20 | 2024-03-08 | 北京沃东天骏信息技术有限公司 | 图像识别方法、装置及设备 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6400374B2 (en) * | 1996-09-18 | 2002-06-04 | Eyematic Interfaces, Inc. | Video superposition system and method |
US6184926B1 (en) * | 1996-11-26 | 2001-02-06 | Ncr Corporation | System and method for detecting a human face in uncontrolled environments |
US6674485B2 (en) * | 1998-08-31 | 2004-01-06 | Hitachi Software Engineering Co., Ltd. | Apparatus and method for image compositing |
US6567116B1 (en) * | 1998-11-20 | 2003-05-20 | James A. Aman | Multiple object tracking system |
US7103211B1 (en) * | 2001-09-04 | 2006-09-05 | Geometrix, Inc. | Method and apparatus for generating 3D face models from one camera |
US7310442B2 (en) * | 2003-07-02 | 2007-12-18 | Lockheed Martin Corporation | Scene analysis surveillance system |
JP2005196519A (ja) | 2004-01-08 | 2005-07-21 | Sony Corp | 画像処理装置および方法、記録媒体、並びにプログラム |
-
2005
- 2005-12-16 JP JP2005363851A patent/JP3962803B2/ja not_active Expired - Fee Related
-
2006
- 2006-12-15 US US11/640,473 patent/US7450737B2/en not_active Expired - Fee Related
-
2008
- 2008-09-18 US US12/212,954 patent/US7720285B2/en not_active Expired - Fee Related
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8577151B2 (en) | 2008-04-04 | 2013-11-05 | Fujifilm Corporation | Method, apparatus, and program for detecting object |
US8571274B2 (en) | 2008-12-22 | 2013-10-29 | Nec Corporation | Person-judging device, method, and program |
JP2013516013A (ja) * | 2009-12-28 | 2013-05-09 | ソフトキネティック ソフトウェア | 頭部認識方法 |
US9081999B2 (en) | 2009-12-28 | 2015-07-14 | Softkinetic Software | Head recognition from depth image |
US8837773B2 (en) | 2010-09-02 | 2014-09-16 | Canon Kabushiki Kaisha | Apparatus which detects moving object from image and method thereof |
KR101501487B1 (ko) * | 2013-07-18 | 2015-03-12 | 전자부품연구원 | 깊이 영상 기반 머리 검출방법 및 장치 |
WO2017221644A1 (ja) * | 2016-06-22 | 2017-12-28 | ソニー株式会社 | 画像処理装置、画像処理システム、および画像処理方法、並びにプログラム |
CN109313806A (zh) * | 2016-06-22 | 2019-02-05 | 索尼公司 | 图像处理装置、图像处理系统、图像处理方法和程序 |
CN109313805A (zh) * | 2016-06-22 | 2019-02-05 | 索尼公司 | 图像处理装置、图像处理系统、图像处理方法和程序 |
JPWO2017221644A1 (ja) * | 2016-06-22 | 2019-04-11 | ソニー株式会社 | 画像処理装置、画像処理システム、および画像処理方法、並びにプログラム |
JPWO2017221643A1 (ja) * | 2016-06-22 | 2019-04-11 | ソニー株式会社 | 画像処理装置、画像処理システム、および画像処理方法、並びにプログラム |
US10867166B2 (en) | 2016-06-22 | 2020-12-15 | Sony Corporation | Image processing apparatus, image processing system, and image processing method |
US11132538B2 (en) | 2016-06-22 | 2021-09-28 | Sony Corporation | Image processing apparatus, image processing system, and image processing method |
JP7014161B2 (ja) | 2016-06-22 | 2022-02-15 | ソニーグループ株式会社 | 画像処理装置、画像処理システム、および画像処理方法、並びにプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP3962803B2 (ja) | 2007-08-22 |
US7450737B2 (en) | 2008-11-11 |
US20090022398A1 (en) | 2009-01-22 |
US7720285B2 (en) | 2010-05-18 |
US20070160293A1 (en) | 2007-07-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3962803B2 (ja) | 頭部検出装置、頭部検出方法および頭部検出プログラム | |
US8107688B2 (en) | Gaze detection apparatus and the method of the same | |
KR101169533B1 (ko) | 얼굴 자세 추정 장치, 얼굴 자세 추정 방법 및 얼굴 자세 추정 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체 | |
JP4625074B2 (ja) | サインに基づく人間−機械相互作用 | |
JP4921486B2 (ja) | 視覚的に頭と目を追跡するシステムにおける眼鏡の視覚的追跡 | |
JP4950787B2 (ja) | 画像処理装置及びその方法 | |
EP2400370B1 (en) | Information processing device and information processing method | |
CN102043943B (zh) | 人脸姿态参数获取方法及装置 | |
KR101612605B1 (ko) | 얼굴 특징점 추출 방법 및 이를 수행하는 장치 | |
US20220148333A1 (en) | Method and system for estimating eye-related geometric parameters of a user | |
CN105809144A (zh) | 一种采用动作切分的手势识别系统和方法 | |
KR20080073933A (ko) | 객체 트래킹 방법 및 장치, 그리고 객체 포즈 정보 산출방법 및 장치 | |
JP2007004767A (ja) | 画像認識装置、方法およびプログラム | |
JP2016099982A (ja) | 行動認識装置、行動学習装置、方法、及びプログラム | |
JP6487642B2 (ja) | 手指形状の検出方法、そのプログラム、そのプログラムの記憶媒体、及び、手指の形状を検出するシステム。 | |
JP2001101429A (ja) | 顔面の観測方法および顔観測装置ならびに顔観測処理用の記録媒体 | |
CN111709269B (zh) | 一种深度图像中基于二维关节信息的人手分割方法和装置 | |
JP2014229012A (ja) | 人物属性推定装置、人物属性推定方法及びプログラム | |
Wlodarczyk et al. | Evaluation of head pose estimation methods for a non-cooperative biometric system | |
KR101844367B1 (ko) | 부분 포즈 추정에 의하여 개략적인 전체 초기설정을 사용하는 머리 포즈 추정 방법 및 장치 | |
Tang et al. | Face pose estimation based on integral slice features of single depth images | |
JP5688514B2 (ja) | 視線計測システム、方法およびプログラム | |
Batista | Locating facial features using an anthropometric face model for determining the gaze of faces in image sequences | |
Aleksandrova et al. | Approach for Creating a 3D Model of a Face from its 2D Image | |
JP7103443B2 (ja) | 情報処理装置、情報処理方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070417 |
|
RD14 | Notification of resignation of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7434 Effective date: 20070417 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110601 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120601 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120601 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130601 Year of fee payment: 6 |
|
LAPS | Cancellation because of no payment of annual fees |