JP4792514B2 - 物体端の位置決め方法及びシステム - Google Patents
物体端の位置決め方法及びシステム Download PDFInfo
- Publication number
- JP4792514B2 JP4792514B2 JP2009147752A JP2009147752A JP4792514B2 JP 4792514 B2 JP4792514 B2 JP 4792514B2 JP 2009147752 A JP2009147752 A JP 2009147752A JP 2009147752 A JP2009147752 A JP 2009147752A JP 4792514 B2 JP4792514 B2 JP 4792514B2
- Authority
- JP
- Japan
- Prior art keywords
- points
- original image
- point
- tracking
- concave
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- Position Input By Displaying (AREA)
Description
まず、ステップS110において、物体に対応した画像情報を含む原画像を取得する。次に、ステップS120において、この原画像に前景(foreground)処理を施して前景画像を取得する。この前景画像は、物体の輪郭に対応したものである。
図2及び図3〜図7を同時に参照すると、システム200は、図3に示すように、人体の両脚Fの下端Ftを位置決めすることができる。この物体端の位置決めシステム200は、取得部210、処理部220、適合部230、位置決め部240、及び追跡部250を備える。
処理部220は、原画像Im1に前景処理を施して前景画像を取得するためのものである。例えば、処理部220が原画像Im1に前景処理を施す場合は、原画像Im1のエッジ検出を実施する。これにより処理部は、原画像Im1のエッジ情報を含む前景画像Im2を取得する。この前景画像Im2は、図4に示すように、両脚の輪郭F2を含む。
そして、処理部220は、各変向点c1〜cnを隣接する2つの変向点に接続する2本の線分の挟角に基づいて前記変向点が凸点又は凹点のいずれであるかを判定する。
その後、適合部230は、選定された凸点a1〜a4のうちの2つをそれぞれ仮端部t1,t2として選択する。これら選択した2つの仮端部t1,t2と両仮端部t1,t2間に位置する選定された凹点の接続は、原画像Im1における両脚Fに対応した三角形を形成する。図7に示すように、選定された2つの凸点a1,a2と両点間に位置する選定された凹点は三角形を形成し、この三角形は、人体の両脚Fを実質的に位置決めする。
適合部230は、三角形特有の適合条件を判定する際、選定された凸点a1〜a4のうちの2つを結ぶ接続線の傾きが所定方向D1に垂直なベクトルに係る所定の傾きよりも小さいか否かを判定する。さらに、適合部230は、選定された凹点b1,b2のうちの1つを前記ベクトルに投射した位置が、選定された凸点a1〜a4のうちの2つを前記ベクトルに投射した両位置の間に位置するか否かを判定する。
第2の実施例において、追跡部250は、2つの追跡端部t1’,t2’を取得する場合、先行原画像及び原画像における2つの先行端部の周囲画素の色変化に基づいて2つの追跡端部t1’,t2’を決定する。
これらの実施例は、本発明を詳細に説明するためのものであって、本発明を限定するものではない。選定された凸点a1〜a4及び選定された凹点b1,b2が三角形特有の適合条件を満たさないものと適合部230が判定する場合、追跡部250を用いて実際の2つの位置決め端部の近くに2つの追跡端部t1’,t2’を生成する限り、前記のような選択肢は本発明の範囲を逸脱しない。
以上、本発明を実施例及び好適な実施形態に基づいて説明したが、当然のことながら本発明はこれらに限定されず、様々な改良ならびに類似の構成及び手順を網羅するものである。したがって、そのような改良ならびに類似の構成及び手順をすべて包含するように、添付した請求の範囲は最大限に広く解釈されるべきである。
210 取得部
220 処理部
230 適合部
240 位置決め部
250 追跡部
Claims (20)
- コンピュータのマン・マシン・インターフェース機能及び演算機能を用いて物体の2本のリムの下端を位置決めするための物体端の位置決め方法であって、
(a)前記物体の画像情報に対応した原画像を取得する工程と、
(b)前記原画像に前景処理を施して前記物体の輪郭に対応した前景画像を取得する工程と、
(c)変向点の接続が前記原画像における前記物体の輪郭と実質的に近似する折線を形成するように、前記前景画像に係る複数の前記変向点を取得する工程と、
(d)前記各変向点と、当該変向点に隣接する2つの変向点とに接続する2本の線分の挟角に基づいて前記変向点が凸点又は凹点のいずれであるかを判定し、選定された複数の凸点及び選定された複数の凹点を、前記原画像における前記物体の2本の各リムの下端から上端に向かう所定方向に沿って選択する工程と、
(e)2つの仮端部と当該両仮端部間に位置する選定された凹点の接続が前記原画像における前記物体の2本のリムに対応した三角形を形成するように、前記選定された凸点のうちの2つをそれぞれ前記仮端部として選択する工程と、
(f)前記2つの仮端部に基づいて前記物体の2本のリムの下端を位置決めするための2つの位置決め端部を決定する工程と、
を含む方法。 - 前記所定方向は、前記原画像において、一様な方向を示す請求項1に記載の方法。
- 前記選定された凸点のうちの2つをそれぞれ仮端部として選択する工程(e)の前に、
(g)前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たすか否かを判定する工程と、
(h)前記選定された凸点のうちの2つ及び前記選定された凹点のうちの1つが前記三角形特有の適合条件を満たす場合、前記選定された凸点のうちの2つをそれぞれ仮端部として決定する工程と、
をさらに含む請求項1又は請求項2に記載の方法。 - 前記選定された凸点のうちの2つをそれぞれ仮端部として決定する工程(e)は、
前記選定された凸点のうちの2つ及び前記選定された凹点のうちの1つが前記三角形特有の適合条件を満たす場合であって、前記選定された凸点のうちの別の2つ及び前記選定された凹点のうちの別の1つも前記三角形特有の適合条件を満たす場合、前記選定された凸点のうちの2つ及び前記選定された凹点のうちの1つによって形成される領域が前記選定された凸点のうちの別の2つ及び前記選定された凹点のうちの別の1つによって形成される領域よりも大きいか否かを判定し、大きい場合は、前記選定された凸点のうちの2つをそれぞれ仮端部として決定する工程をさらに含む請求項3に記載の方法。 - 前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たすか否かを判定する工程(g)は、
前記選定された凸点のうちの2つを結ぶ接続線の傾きが前記所定方向に垂直なベクトルに係る所定の傾きよりも小さいか否かを判定し、前記選定された凹点のうちの1つを前記ベクトルに投射した位置が前記選定された凸点のうちの2つを前記ベクトルに投射した両位置の間に位置するか否かを判定する工程を含む請求項3に記載の方法。 - 前記物体の2本のリムの下端に近い側が下側と定義される場合、前記所定方向が下側から上側に向かう方向であり、
前記選定された凸点のうちの2つをそれぞれ仮端部として決定する工程(e)は、
前記選定された凸点のうちの2つが前記選定された凹点のうちの1つよりも下側に近いか否かを判定し、近い場合は、前記選定された凸点のうちの2つをそれぞれ仮端部として決定する工程を含む請求項3に記載の方法。 - 前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たすか否かを判定する工程(g)の後に、
前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たさない場合、2つの先行端部が先行原画像で位置決めされた前記物体の2本のリムの下端であるように、前記2つの先行端部に係る2つの追跡端部を取得する工程(i)をさらに含み、
前記2つの位置決め端部を決定する工程(f)は、前記2つの追跡端部に基づいて前記2つの位置決め端部を決定する工程をさらに含む請求項3に記載の方法。 - 前記2つの追跡端部を取得する工程(i)は、
前記先行原画像及び前記原画像における前記2つの先行端部の周囲画素の輝度変化に基づいて前記2つの追跡端部を決定する工程をさらに含む請求項7に記載の方法。 - 前記2つの追跡端部を取得する工程(i)は、
前記先行原画像及び前記原画像における前記2つの先行端部の周囲画素の色変化に基づいて前記2つの追跡端部を決定する工程をさらに含む請求項7に記載の方法。 - 前記2つの追跡端部を取得する工程(i)は、
前記2つの先行端部及び別の2つの先行端部の位置に基づいて予測法又は確率法により前記2つの追跡端部を決定する工程をさらに含み、
前記別の2つの先行端部が別の先行原画像で位置決めされた前記物体の2本のリムの下端であり、前記原画像、前記先行原画像、及び前記別の先行原画像が連続的に取得される請求項7に記載の方法。 - 物体の2本のリムの下端を位置決めするための物体端の位置決めシステムであって、
前記物体の画像情報に対応した原画像を取得する取得部と、
前記原画像に前景処理を施して前記物体の輪郭に対応した前景画像を取得する処理部であって、前記前景画像に係る複数の変向点を取得し、前記変向点を接続して前記原画像における前記物体の輪郭に実質的に近似する折線を形成し、前記各変向点を隣接する2つの変向点に接続する2本の線分の挟角に基づいて前記変向点が凸点又は凹点のいずれであるかを判定し、選定された複数の凸点及び選定された複数の凹点を、前記原画像における前記物体の2本の各リムの下端から上端に向かう所定方向に沿って選択する処理部と、
前記選定された凸点のうちの2つをそれぞれ仮端部として選択する適合部であって、前記2つの仮端部と両仮端部間に位置する選定された凹点の接続が前記原画像における前記物体の2本のリムに対応した三角形を形成する適合部と、
前記2つの仮端部に基づいて前記物体の2本のリムの下端を位置決めするための2つの位置決め端部を決定する位置決め部と、
を備えるシステム。 - 前記所定方向は、前記原画像において、一様な方向を示す請求項11に記載のシステム。
- 前記適合部は、前記選定された凸点のうちの2つをそれぞれ仮端部として選択する際、前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たすか否かを判定し、前記選定された凸点のうちの2つ及び前記選定された凹点のうちの1つが前記三角形特有の適合条件を満たすと判定した場合は、前記選定された凸点のうちの2つをそれぞれ仮端部として選択することを決定する請求項11又は請求項12に記載のシステム。
- 前記適合部は、前記選定された凸点のうちの2つ及び前記凹点のうちの1つが前記三角形特有の適合条件を満たす場合であって、前記選定された凸点のうちの別の2つ及び前記選定された凹点のうちの別の1つも前記三角形特有の適合条件を満たす場合、前記選定された凸点のうちの2つ及び前記選定された凹点のうちの1つによって形成される領域が前記選定された凸点のうちの別の2つ及び前記選定された凹点のうちの別の1つによって形成される領域よりも大きいか否かをさらに判定し、大きい場合は、前記選定された凸点のうちの2つをそれぞれ仮端部として決定する請求項13に記載のシステム。
- 前記適合部は、前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たすか否かを判定する際、前記選定された凸点のうちの2つを結ぶ接続線の傾きが前記所定方向に垂直なベクトルに係る所定の傾きよりも小さいか否かを判定し、前記選定された凹点のうちの1つを前記ベクトルに投射した位置が前記選定された凸点のうちの2つを前記ベクトルに投射した両位置の間に位置するか否かを判定する請求項13に記載のシステム。
- 前記物体の2本のリムの下端に近い側が下側と定義される場合、前記所定方向が下側から上側に向かう方向であって、前記選定された凸点のうちの2つが前記選定された凹点のうちの1つよりも下側に近い請求項13に記載のシステム。
- 前記適合部は、
2つの先行端部が先行原画像で位置決めされた前記物体の2本のリムの下端である場合の前記2つの先行端部に係る2つの追跡端部を取得する追跡部をさらに備え、
前記位置決め部は、前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たさない場合、前記2つの追跡端部に基づいて前記2つの位置決め端部を決定する請求項13に記載のシステム。 - 前記追跡部は、前記2つの追跡端部を取得する際、前記先行原画像及び前記原画像における前記2つの先行端部の周囲画素の輝度変化に基づいて前記2つの追跡端部を決定する請求項17に記載のシステム。
- 前記追跡部は、前記2つの追跡端部を取得する際、前記先行原画像及び前記原画像における前記2つの先行端部の周囲画素の色変化に基づいて前記2つの追跡端部を決定する請求項17に記載のシステム。
- 前記追跡部は、前記2つの追跡端部を取得する際、前記2つの先行端部及び別の2つの先行端部の位置に基づいて予測法又は確率法により前記2つの追跡端部を決定し、
前記別の2つの先行端部は、前記位置決め部により別の先行原画像で位置決めされた前記物体の2本のリムの下端であり、前記原画像、前記先行原画像、及び前記別の先行原画像が前記取得部により連続的に取得される請求項17に記載のシステム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| TW097147736A TWI405149B (zh) | 2008-12-08 | 2008-12-08 | 物體端點定位方法及應用其之系統 |
| TW097147736 | 2008-12-08 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2010134901A JP2010134901A (ja) | 2010-06-17 |
| JP4792514B2 true JP4792514B2 (ja) | 2011-10-12 |
Family
ID=42231134
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009147752A Expired - Fee Related JP4792514B2 (ja) | 2008-12-08 | 2009-06-22 | 物体端の位置決め方法及びシステム |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US8396300B2 (ja) |
| JP (1) | JP4792514B2 (ja) |
| TW (1) | TWI405149B (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5708305B2 (ja) * | 2011-06-30 | 2015-04-30 | 富士通株式会社 | 画像認識装置、画像認識方法及び画像認識用コンピュータプログラム |
Family Cites Families (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5524637A (en) * | 1994-06-29 | 1996-06-11 | Erickson; Jon W. | Interactive system for measuring physiological exertion |
| US6308565B1 (en) * | 1995-11-06 | 2001-10-30 | Impulse Technology Ltd. | System and method for tracking and assessing movement skills in multidimensional space |
| JP3200663B2 (ja) * | 1996-03-29 | 2001-08-20 | 技研トラステム株式会社 | 移動体検出方法,移動体検出装置,及び移動体計数装置 |
| JP2000082148A (ja) | 1998-07-09 | 2000-03-21 | Ricoh Co Ltd | 物体画像の形状特徴抽出方式,画像物体認識方式及び装置 |
| JP3960711B2 (ja) * | 1999-05-24 | 2007-08-15 | セコム株式会社 | 複合型監視装置 |
| JP3863809B2 (ja) | 2002-05-28 | 2006-12-27 | 独立行政法人科学技術振興機構 | 手の画像認識による入力システム |
| JP4318465B2 (ja) * | 2002-11-08 | 2009-08-26 | コニカミノルタホールディングス株式会社 | 人物検出装置および人物検出方法 |
| JP4140402B2 (ja) * | 2003-03-03 | 2008-08-27 | 松下電工株式会社 | 画像処理装置 |
| JP4239635B2 (ja) | 2003-03-20 | 2009-03-18 | ソニー株式会社 | ロボット装置、その動作制御方法、及びプログラム |
| JP2005339363A (ja) | 2004-05-28 | 2005-12-08 | Canon Inc | 人体パーツ自動分割装置及び人体パーツ自動分割方法 |
| US7440615B2 (en) * | 2005-10-27 | 2008-10-21 | Nec Laboratories America, Inc. | Video foreground segmentation method |
| JP2007134913A (ja) | 2005-11-09 | 2007-05-31 | Matsushita Electric Ind Co Ltd | 映像選択方法および映像選択装置 |
| EP1916538A3 (en) | 2006-10-27 | 2011-02-16 | Panasonic Electric Works Co., Ltd. | Target moving object tracking device |
| TWI369899B (en) * | 2008-07-21 | 2012-08-01 | Ind Tech Res Inst | Method and system for tracking human extremity positions |
-
2008
- 2008-12-08 TW TW097147736A patent/TWI405149B/zh not_active IP Right Cessation
-
2009
- 2009-05-11 US US12/463,508 patent/US8396300B2/en not_active Expired - Fee Related
- 2009-06-22 JP JP2009147752A patent/JP4792514B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| US8396300B2 (en) | 2013-03-12 |
| US20100142831A1 (en) | 2010-06-10 |
| TWI405149B (zh) | 2013-08-11 |
| JP2010134901A (ja) | 2010-06-17 |
| TW201023100A (en) | 2010-06-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10469829B2 (en) | Information processor and information processing method | |
| KR101606628B1 (ko) | 포인팅 방향 검출 장치 및 그 방법과, 프로그램 및 컴퓨터 판독가능한 매체 | |
| AU2017288933B2 (en) | Systems and methods for dynamic occlusion handling | |
| US9898651B2 (en) | Upper-body skeleton extraction from depth maps | |
| US10082879B2 (en) | Head mounted display device and control method | |
| US9542003B2 (en) | Image processing device, image processing method, and a computer-readable non-transitory medium | |
| JP5898014B2 (ja) | 姿勢推定装置、姿勢推定方法、および姿勢推定プログラム | |
| US20150310617A1 (en) | Display control device and display control method | |
| JP4938748B2 (ja) | 画像認識装置及びプログラム | |
| US20160349925A1 (en) | Information processing apparatus for recognizing user operation based on an image | |
| JP2018119833A (ja) | 情報処理装置、システム、推定方法、コンピュータプログラム、及び記憶媒体 | |
| JP2014215735A (ja) | 爪画像合成装置、爪画像合成方法および爪画像合成プログラム | |
| JP2015049776A (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
| US9158381B2 (en) | Multi-resolution gesture recognition | |
| Pires et al. | Unwrapping the eye for visible-spectrum gaze tracking on wearable devices | |
| JP6922410B2 (ja) | 姿勢判定プログラム、姿勢判定装置及び姿勢判定方法 | |
| JP4792514B2 (ja) | 物体端の位置決め方法及びシステム | |
| JP7024876B2 (ja) | 検出装置、処理装置、検出方法、及び処理プログラム | |
| CN118509566A (zh) | 投影机控制参数分析方法、装置及设备 | |
| JP2017068437A (ja) | 物体検出装置、物体検出方法、及び物体検出プログラム | |
| Käs et al. | Systematic comparison of projection methods for monocular 3D human pose estimation on fisheye images | |
| CN101751118B (zh) | 物体端点定位方法及应用的系统 | |
| CN117351074B (zh) | 基于头戴式眼动仪和深度相机的视点位置检测方法及装置 | |
| TWI431512B (zh) | 三維控制端點之辨識方法及應用其之電腦可讀取媒體 | |
| JP2006227739A (ja) | 画像処理装置及び画像処理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20100621 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110217 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110224 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20110524 |
|
| A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20110527 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110614 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110707 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110725 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140729 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4792514 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |