JP4792514B2 - 物体端の位置決め方法及びシステム - Google Patents

物体端の位置決め方法及びシステム Download PDF

Info

Publication number
JP4792514B2
JP4792514B2 JP2009147752A JP2009147752A JP4792514B2 JP 4792514 B2 JP4792514 B2 JP 4792514B2 JP 2009147752 A JP2009147752 A JP 2009147752A JP 2009147752 A JP2009147752 A JP 2009147752A JP 4792514 B2 JP4792514 B2 JP 4792514B2
Authority
JP
Japan
Prior art keywords
points
original image
point
tracking
concave
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009147752A
Other languages
English (en)
Other versions
JP2010134901A (ja
Inventor
ワン コ−シャン
チェン ポ−ルン
リ ジア−チャン
クオ チエン−チュン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Industrial Technology Research Institute ITRI
Original Assignee
Industrial Technology Research Institute ITRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Industrial Technology Research Institute ITRI filed Critical Industrial Technology Research Institute ITRI
Publication of JP2010134901A publication Critical patent/JP2010134901A/ja
Application granted granted Critical
Publication of JP4792514B2 publication Critical patent/JP4792514B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/46Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Position Input By Displaying (AREA)

Description

本発明は、一般に物体端の位置決め方法及びシステムに関し、より詳細には物体の2本のリムの下端を位置決めするための物体端の位置決め方法及びシステムに関するものである。
マン・マシン対話型インターフェースは、コンピュータと情報のやり取りを行う人のためのインターフェースである。通常、マン・マシン・インターフェースは、キーボード、マウス、又はタッチパネルを具備する。このインターフェースを利用する人は、ユーザと呼ばれる。ユーザは、マン・マシン・インターフェースを介して、コンピュータの制御又はコンピュータとの情報のやり取りといった目的を達成することができる。
米国特許第5,524,637号は、「生理的活動を測定するための対話型システム(Interactive system for measuring physiological exertion)」という名称の発明を開示している。この特許の開示内容によれば、ユーザは、両脚に加速度計を装着して圧力センサの上に立ち、両脚から加わる圧力及び両脚の移動速度を測定する。ユーザはこのようにして、両脚の圧力及び移動速度により、対話型システムと情報のやり取りを行うことができる。
また、近年では、画像処理技術を用いてユーザとコンピュータ間の対話性を向上している研究グループもある。米国特許第6,308,565号は、多次元空間において運動能力を追跡・評価するシステム及び方法を開示している。本特許の開示内容によれば、アクティブマーカ又はパッシブマーカをユーザの両脚に取り付け、画像処理法によりマーカの動きを検出することによって、両脚の空間的な座標位置及び動きの状態を測定する。ユーザはこのようにして、両脚の動きにより対話型システムと情報のやり取りを行うことができる。
米国特許第5,524,637号明細書 米国特許第6,308,565号明細書
これまで、数多くのマン・マシン・インターフェースが提供されているが、上述の実施形態では、マン・マシン・インターフェースによる両脚の下端の位置決めを可能とするため、ユーザが特殊な機器又は衣服(上述の加速度計やマーカ等)を装着する必要があり、ユーザにとっては不便であるとともにインターフェースの利用意欲を削ぐ要因となっている。したがって、ユーザの不便を生じることなく両脚の下端を位置決めする方法は、依然として産業活動上の取り組むべき課題である。
本発明は、物体の2本のリムの下端を位置決めするための方法及びその方法を用いたシステムに関する。物体の2本のリムは、人体の両脚又は2本の指と考えることもできる。ユーザは、この方法によって、特殊な機器又は衣服を装着することなく物体の端部を位置決めすることができるため、ユーザの利便性が向上する。
本発明の第1の態様によれば、物体の2本のリムの下端を位置決めするための物体端の位置決め方法が提供される。この方法は、以下の工程を含む。まず、物体の画像情報に対応した原画像を取得する。次に、この原画像に前景処理を施して物体の輪郭に対応した前景画像を取得する。そして、この前景画像に係る複数の変向点を取得する。これら変向点の接続は、前記原画像における物体の輪郭と実質的に近似する折線を形成する。その後、各変向点を隣接する2つの変向点に接続する2本の線分の挟角に基づいて前記変向点が凸点又は凹点のいずれであるかを判定し、選定された複数の凸点及び選定された複数の凹点を所定方向に沿って選択する。それから、前記選定された凸点のうちの2つをそれぞれ仮端部として選択する。これら2つの仮端部と両仮端部間に位置する選定された凹点の接続は、前記原画像における物体の2本のリムに対応した三角形を形成する。最後に、前記2つの仮端部に基づいて物体の2本のリムの下端を位置決めするための2つの位置決め端部を決定する。
本発明の第2の態様によれば、物体の2本のリムの下端を位置決めするための物体端の位置決めシステムが提供される。このシステムは、取得部、処理部、適合部、及び位置決め部を備える。取得部は、物体の画像情報に対応した原画像を取得するためのものである。処理部は、この原画像に前景処理を施して物体の輪郭に対応した前景画像を取得するためのものであって、この前景画像に係る複数の変向点を取得する。これら変向点の接続は、前記原画像における物体の輪郭と実質的に近似する折線を形成する。また、処理部は、各変向点を隣接する2つの変向点に接続する2本の線分の挟角に基づいて前記変向点が凸点又は凹点のいずれであるかを判定し、選定された複数の凸点及び選定された複数の凹点を所定方向に沿って選択する。適合部は、前記選定された凸点のうちの2つをそれぞれ仮端部として選択するためのものである。これら2つの仮端部と両仮端部間に位置する選定された凹点の接続は、前記原画像における物体の2本のリムに対応した三角形を形成する。位置決め部は、前記2つの仮端部に基づいて物体の2本のリムの下端を位置決めする2つの位置決め端部を決定するためのものである。
本発明は、後述する好適な実施形態の詳細な説明により明らかとなる。ただし、本発明は、これらの実施形態に限定されるものではない。以下、添付図面を参照しつつ実施形態を説明する。
図1は、本発明の好適な実施形態に係る物体端の位置決め方法のフローチャートである。 図2は、図1の方法を用いた物体端の位置決めシステムのブロック図である。 図3は、人体の両足に対応した画像(原画像)を例示したものである。 図4は、原画像のエッジを検出した前景画像である。 図5は、前景画像において、多数の変向点を取得したものである。 図6は、判定された凸点及び凹点、ならびに所定方向D1を示す画像である。 図7は、2つの凸点と両点間に位置する三角形を示す画像である。
図1を参照して、本発明の好適な実施形態に係る物体端の位置決め方法を説明するためのフローチャートを示す。この方法は、物体の2本のリムの下端を位置決めする際に使用されるものである。この方法は以下の工程を含む。
まず、ステップS110において、物体に対応した画像情報を含む原画像を取得する。次に、ステップS120において、この原画像に前景(foreground)処理を施して前景画像を取得する。この前景画像は、物体の輪郭に対応したものである。
その後、ステップS130において、この前景画像に係る多数の変向点(turning points)を取得する。これら変向点どうしの接続は、前記原画像における物体の輪郭と実質的に近似する折線を形成することができる。そして、ステップS140において、各変向点を隣接する2つの変向点に接続する2本の線分の挟角に基づいて前記変向点が凸点又は凹点のいずれであるかを判定し、選定された多数の凸点及び選定された多数の凹点を所定方向に沿って選択する。
その後、ステップS150において、前記選定された凸点のうちの2つをそれぞれ仮端部として選択する。これら選択した2つの仮端部と両仮端部の間に位置する選定された凹点の接続は、前記原画像における物体の2本のリムに対応した三角形を形成する。最後に、ステップS160においては、前記2つの仮端部に基づいて物体の2本のリムの下端を位置決めするための2つの位置決め端部を決定する。
以下では、図1の方法を用いた物体端の位置決めシステムを一例として説明する。図2は、図1の方法を用いた物体端の位置決めシステム200のブロック図である。図3〜図7は、物体端の位置決めシステム200が物体端の位置決め方法を実施した際に生成される多数の画像を例示したものである。
図2及び図3〜図7を同時に参照すると、システム200は、図3に示すように、人体の両脚Fの下端Ftを位置決めすることができる。この物体端の位置決めシステム200は、取得部210、処理部220、適合部230、位置決め部240、及び追跡部250を備える。
取得部210は、原画像Im1を取得するためのものである。原画像Im1は、図3に示すように、人体の両脚Fに対応した画像情報を含む。
処理部220は、原画像Im1に前景処理を施して前景画像を取得するためのものである。例えば、処理部220が原画像Im1に前景処理を施す場合は、原画像Im1のエッジ検出を実施する。これにより処理部は、原画像Im1のエッジ情報を含む前景画像Im2を取得する。この前景画像Im2は、図4に示すように、両脚の輪郭F2を含む。
原画像Im1に対する前景処理を行った場合、得られた前景画像Im2は通常、両脚の輪郭F2や他の物体の輪郭A,B等のように、その場面に現れている物体の輪郭を含む。このため、処理部220は、前景画像Im2のフィルタリングにより両脚の輪郭F2のみを残すことができるようになっている。実際のところ、両脚の輪郭F2が通常は最大の面積を有する1つのブロックであることから、処理部220は、輪郭F2,A,及びBのブロック面積を計算することによって、両脚の輪郭F2を把握・抽出することができる。
その後、図5に示すように、処理部220は、前景画像Im2に係る多数の変向点c1〜cnを取得する。この実施形態で変向点c1〜cnとは、前景画像Im2における画素座標をいう。これら変向点c1〜cnの接続は、折線F3を形成する。折線F3は、両脚の輪郭F2と実質的に近似した形状を有する。
そして、処理部220は、各変向点c1〜cnを隣接する2つの変向点に接続する2本の線分の挟角に基づいて前記変向点が凸点又は凹点のいずれであるかを判定する。
凸点及び凹点は、例えば以下のように定義することができるが、これには限定されない。すなわち、変向点を隣接する2つの変向点に接続する2本の線分の挟角が0〜120°の範囲である場合、その変向点は凸点と定義される。一方、変向点を隣接する2つの変向点に接続する2本の線分の挟角が240°より大きい場合、その変向点は凹点と定義される。この定義において、挟角とは折線F3の内角である。したがって、図5に示すように、変向点c2を隣接する2つの変向点c1,c3に接続する2本の線分の挟角によって変向点c2は凸点と定義される。一方、変向点c3を隣接する2つの変向点c2,c4に接続する2本の線分の挟角によって変向点c3は凹点と定義される。
処理部220は、変向点c1〜cnの凸点及び凹点を判定した後、例えば選定された4つの凸点a1〜a4及び選定された2つの凹点b1,b2を所定方向に沿って選択する。この所定方向は、図6に示すように、例えば両脚の下端から上端に向かう方向D1である。
その後、適合部230は、選定された凸点a1〜a4のうちの2つをそれぞれ仮端部t1,t2として選択する。これら選択した2つの仮端部t1,t2と両仮端部t1,t2間に位置する選定された凹点の接続は、原画像Im1における両脚Fに対応した三角形を形成する。図7に示すように、選定された2つの凸点a1,a2と両点間に位置する選定された凹点は三角形を形成し、この三角形は、人体の両脚Fを実質的に位置決めする。
詳細に説明すると、適合部230は、選定された凸点a1〜a4のうちの2つをそれぞれ仮端部t1,t2として選択する際、選定された凸点a1〜a4及び選定された凹点b1,b2が三角形特有の適合条件を満たすか否かを判定する。
適合部230は、三角形特有の適合条件を判定する際、選定された凸点a1〜a4のうちの2つを結ぶ接続線の傾きが所定方向D1に垂直なベクトルに係る所定の傾きよりも小さいか否かを判定する。さらに、適合部230は、選定された凹点b1,b2のうちの1つを前記ベクトルに投射した位置が、選定された凸点a1〜a4のうちの2つを前記ベクトルに投射した両位置の間に位置するか否かを判定する。

図7において、前記「所定の傾き」は、例えば45°である。選定された凸点a1,a2を結ぶ接続線の傾きS1は、この所定の傾きよりも小さい。選定された凹点b1をベクトルD2に投射した位置d1は、選定された凸点a1,a2をベクトルD2に投射した位置d2,d3の間に位置する。これにより、適合部230は、選定された凸点a1,a2及び選定された凹点b1が三角形特有の適合条件を満たすものと判定する。
さらに、図6に示すように、両脚Fの下端Ftに近い側が下側と定義される場合、所定方向D1は下側から上側に向かう方向である。適合部230は、選定された凸点a1,a2及び選定された凹点b1が三角形特有の適合条件を満たすものと判定した後、選定された凸点a1,a2が選定された凹点b1よりも下側に近いか否かをさらに判定する。適合部230は、図7に示すように、選定された凸点a1,a2が選定された凹点b1よりも下側に近いものと判定する。
適合部230は、選定された凸点a1〜a4及び選定された凹点b1,b2が三角形特有の適合条件を満たすか否かを判定する際、選定された凸点a1,a2及び選定された凹点b1のほかに、選定された凸点のうちの別の2つ及び選定された凹点のうちの対応する1つも三角形特有の適合条件を満たすか否かを判定する場合、選定された凸点a1,a2及び選定された凹点b1によって形成される領域が、前記選定された凸点のうちの別の2つ及び選定された凹点のうちの対応する1つによって形成される領域よりも大きいか否かを判定する。
図7においては、適合部230が、選定された凸点a1,a2及び選定された凹点b1が三角形特有の適合条件を満たすものと判定し、選定された凸点a1,a2が選定された凹点b1よりも下側に近いものと判定し、さらに、選定された凸点a1,a2及び選定された凹点b1によって形成される領域が最大であるものと判定している。したがって、適合部230は、選定された2つの凸点a1,a2をそれぞれ仮端部t1,t2として選択することを決定する。
図2を参照すると、適合部230が選定された凸点a1,a2をそれぞれ仮端部t1,t2として選択した後は、位置決め部240により、2つの仮端部t1,t2に基づいて2つの位置決め端部Px、Pyを決定する。図7からは、適合部230が決定した選定された凸点a1,a2の位置が、実質的に両脚Fの下端Ftの位置であることが分かる。したがって、位置決め部240が決定した2つの位置決め端部Px、Pyにより、人体の両脚Fの下端Ftを位置決めすることができる。
上述の説明では、画像処理及び画像情報判定によって、物体端の位置決めシステム200が人体の両脚の下端を位置決めした。このため、両脚の位置決めのためにユーザが特殊な機器又は衣服を装着する必要がある従来技術の位置決めシステムと比較して、物体端の位置決めシステム200では、ユーザが特殊な機器や衣服を装着する必要がないため、ユーザの利便性が向上するとともに、システムの利用意欲が減退する問題を回避することができる。
さらに、適合部230は、選定された凸点a1〜a4及び選定された凹点b1,b2が三角形特有の適合条件を満たさないものと判定する場合は、追跡部250を有効にする。有効となった追跡部250は、2つの先行端部に係る2つの追跡端部t1’,t2’を取得する。この2つの先行端部は、位置決め部240により先行原画像で位置決めされた物体の2本のリムの下端である。
より詳細に説明すると、追跡部250は、先行原画像で位置決めされた両脚の下端を追跡して、実際の2つの位置決め端部の近くに2つの追跡端部t1’,t2’を生成することができる。したがって、位置決め部240は、適合部230を介して2つの位置決め端部Px、Pyを正確に決定できなくても、実際の2つの位置決め端部の近くに2つの位置決め端部Px、Pyを決定することができるため、物体端の位置決めシステム200の動作の安定性が向上する。
取得部210が多数の原画像を連続して取得する場合、物体(例えば、人体の両脚F)の動きは特定の範囲を有するため、位置決め部240が位置決めする2本のリムの下端の変位(例えば、両脚Fの下端Ftの変位)も特定の範囲内となる。したがって、位置決め部240が人体の両脚Fの下端Ftを特定の原画像で位置決めできない場合は、追跡部250によって、先行原画像で位置決めされた両脚Fの下端Ftを追跡することができ、実際の2つの位置決め端部の近くに2つの追跡端部t1’,t2’を見出すことができる。追跡部250による2つの追跡端部t1’,t2’の取得方法を説明するため、多数の実施例を以下に例示する。
第1の実施例において、追跡部250は、2つの追跡端部t1’,t2’を取得する場合、先行原画像及び原画像における2つの先行端部の周囲画素の輝度変化に基づいて2つの追跡端部t1’,t2’を決定する。
第2の実施例において、追跡部250は、2つの追跡端部t1’,t2’を取得する場合、先行原画像及び原画像における2つの先行端部の周囲画素の色変化に基づいて2つの追跡端部t1’,t2’を決定する。
第3の実施例において、追跡部250は、2つの追跡端部t1’,t2’を取得する場合、2つの先行端部及び別の2つの先行端部の位置に基づいて予測法又は確率法により2つの追跡端部t1’,t2’を決定する。前記別の2つの先行端部は、別の先行原画像で位置決めされた物体の2本のリムの下端であり、前記原画像、先行原画像、及び前記別の先行原画像が連続的に取得される。
上述した第1及び第2の実施例では、2つの追跡端部t1’,t2’がそれぞれ、原画像及び先行原画像の輝度変化及び色変化に基づいて決定される。第3の実施例では、2つの追跡端部t1’,t2’が予測法又は確率法によって決定される。
これらの実施例は、本発明を詳細に説明するためのものであって、本発明を限定するものではない。選定された凸点a1〜a4及び選定された凹点b1,b2が三角形特有の適合条件を満たさないものと適合部230が判定する場合、追跡部250を用いて実際の2つの位置決め端部の近くに2つの追跡端部t1’,t2’を生成する限り、前記のような選択肢は本発明の範囲を逸脱しない。
本発明の物体の端位置決めシステム200は、原画像を取得した後に、人体の両脚Fの下端Ftを位置決めするための2つの位置決め端部Px,Pyを決定することができる。 さらに、物体端の位置決めシステム200は、所定時間内に多数の原画像を連続して取得可能な場合、これら原画像における人体の両脚の下端を連続して位置決めすることができる。したがって、物体端の位置決めシステム200は、位置情報をさらに解析して、前記時間内の両脚Fの移動方向、移動速度、又は移動状態を決定することができる。
また、上述の説明では、人体の両脚Fの下端Ftを位置決めするものとして物体端の位置決めシステム200を例示したが、本発明はこれに限定されない。物体端の位置決めシステム200は、人体の2本の指の下端を位置決めすることもできる。この場合、前記所定方向は、人の手の指の下端から上端に向かう方向となる。すなわち、物体端の位置決めシステム200は、指の下端から上端に向かう方向に沿って、選定された凸点及び選定された凹点を選択する。したがって、物体端の位置決めシステム200は、選定された2つの凸点をそれぞれ仮端部として選択することもできる。これら2つの仮端部と両仮端部間に位置する選定された凹点の接続は、2本の指に対応した三角形を形成する。
本発明の前記実施形態により開示された物体端の位置決め方法及びシステムは、物体の2本のリムの下端を位置決めすることができる。物体の2本のリムは、人体の両脚又は2本の指と考えることもできる。この物体端の位置決め方法及びシステムによって、ユーザが特殊な機器又は衣服を装着することが必要となる事象を回避できるため、ユーザの利便性が向上するとともに、システムの利用意欲が減退する問題を回避することができる。
本願は、2008年12月8日出願の台湾特許出願第97147736号に基づく優先権を主張するものであり、その開示内容は、参照により本明細書中に組み込まれる。
以上、本発明を実施例及び好適な実施形態に基づいて説明したが、当然のことながら本発明はこれらに限定されず、様々な改良ならびに類似の構成及び手順を網羅するものである。したがって、そのような改良ならびに類似の構成及び手順をすべて包含するように、添付した請求の範囲は最大限に広く解釈されるべきである。
200 物体端の位置決めシステム
210 取得部
220 処理部
230 適合部
240 位置決め部
250 追跡部

Claims (20)

  1. コンピュータのマン・マシン・インターフェース機能及び演算機能を用いて物体の2本のリムの下端を位置決めするための物体端の位置決め方法であって、
    (a)前記物体の画像情報に対応した原画像を取得する工程と、
    (b)前記原画像に前景処理を施して前記物体の輪郭に対応した前景画像を取得する工程と、
    (c)変向点の接続が前記原画像における前記物体の輪郭と実質的に近似する折線を形成するように、前記前景画像に係る複数の前記変向点を取得する工程と、
    (d)前記各変向点と、当該変向点に隣接する2つの変向点とに接続する2本の線分の挟角に基づいて前記変向点が凸点又は凹点のいずれであるかを判定し、選定された複数の凸点及び選定された複数の凹点を、前記原画像における前記物体の2本の各リムの下端から上端に向かう所定方向に沿って選択する工程と、
    (e)2つの仮端部と当該両仮端部間に位置する選定された凹点の接続が前記原画像における前記物体の2本のリムに対応した三角形を形成するように、前記選定された凸点のうちの2つをそれぞれ前記仮端部として選択する工程と、
    (f)前記2つの仮端部に基づいて前記物体の2本のリムの下端を位置決めするための2つの位置決め端部を決定する工程と、
    を含む方法。
  2. 前記所定方向は、前記原画像において、一様な方向を示す請求項1に記載の方法。
  3. 前記選定された凸点のうちの2つをそれぞれ仮端部として選択する工程(e)の前に、
    (g)前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たすか否かを判定する工程と、
    (h)前記選定された凸点のうちの2つ及び前記選定された凹点のうちの1つが前記三角形特有の適合条件を満たす場合、前記選定された凸点のうちの2つをそれぞれ仮端部として決定する工程と、
    をさらに含む請求項1又は請求項2に記載の方法。
  4. 前記選定された凸点のうちの2つをそれぞれ仮端部として決定する工程(e)は、
    前記選定された凸点のうちの2つ及び前記選定された凹点のうちの1つが前記三角形特有の適合条件を満たす場合であって、前記選定された凸点のうちの別の2つ及び前記選定された凹点のうちの別の1つも前記三角形特有の適合条件を満たす場合、前記選定された凸点のうちの2つ及び前記選定された凹点のうちの1つによって形成される領域が前記選定された凸点のうちの別の2つ及び前記選定された凹点のうちの別の1つによって形成される領域よりも大きいか否かを判定し、大きい場合は、前記選定された凸点のうちの2つをそれぞれ仮端部として決定する工程をさらに含む請求項3に記載の方法。
  5. 前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たすか否かを判定する工程(g)は、
    前記選定された凸点のうちの2つを結ぶ接続線の傾きが前記所定方向に垂直なベクトルに係る所定の傾きよりも小さいか否かを判定し、前記選定された凹点のうちの1つを前記ベクトルに投射した位置が前記選定された凸点のうちの2つを前記ベクトルに投射した両位置の間に位置するか否かを判定する工程を含む請求項3に記載の方法。
  6. 前記物体の2本のリムの下端に近い側が下側と定義される場合、前記所定方向が下側から上側に向かう方向であり、
    前記選定された凸点のうちの2つをそれぞれ仮端部として決定する工程(e)は、
    前記選定された凸点のうちの2つが前記選定された凹点のうちの1つよりも下側に近いか否かを判定し、近い場合は、前記選定された凸点のうちの2つをそれぞれ仮端部として決定する工程を含む請求項3に記載の方法。
  7. 前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たすか否かを判定する工程(g)の後に、
    前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たさない場合、2つの先行端部が先行原画像で位置決めされた前記物体の2本のリムの下端であるように、前記2つの先行端部に係る2つの追跡端部を取得する工程(i)をさらに含み、
    前記2つの位置決め端部を決定する工程(f)は、前記2つの追跡端部に基づいて前記2つの位置決め端部を決定する工程をさらに含む請求項3に記載の方法。
  8. 前記2つの追跡端部を取得する工程(i)は、
    前記先行原画像及び前記原画像における前記2つの先行端部の周囲画素の輝度変化に基づいて前記2つの追跡端部を決定する工程をさらに含む請求項7に記載の方法。
  9. 前記2つの追跡端部を取得する工程(i)は、
    前記先行原画像及び前記原画像における前記2つの先行端部の周囲画素の色変化に基づいて前記2つの追跡端部を決定する工程をさらに含む請求項7に記載の方法。
  10. 前記2つの追跡端部を取得する工程(i)は、
    前記2つの先行端部及び別の2つの先行端部の位置に基づいて予測法又は確率法により前記2つの追跡端部を決定する工程をさらに含み、
    前記別の2つの先行端部が別の先行原画像で位置決めされた前記物体の2本のリムの下端であり、前記原画像、前記先行原画像、及び前記別の先行原画像が連続的に取得される請求項7に記載の方法。
  11. 物体の2本のリムの下端を位置決めするための物体端の位置決めシステムであって、
    前記物体の画像情報に対応した原画像を取得する取得部と、
    前記原画像に前景処理を施して前記物体の輪郭に対応した前景画像を取得する処理部であって、前記前景画像に係る複数の変向点を取得し、前記変向点接続して前記原画像における前記物体の輪郭実質的に近似する折線を形成、前記各変向点を隣接する2つの変向点に接続する2本の線分の挟角に基づいて前記変向点が凸点又は凹点のいずれであるかを判定し、選定された複数の凸点及び選定された複数の凹点を、前記原画像における前記物体の2本の各リムの下端から上端に向かう所定方向に沿って選択する処理部と、
    前記選定された凸点のうちの2つをそれぞれ仮端部として選択する適合部であって、前記2つの仮端部と両仮端部間に位置する選定された凹点の接続が前記原画像における前記物体の2本のリムに対応した三角形を形成する適合部と、
    前記2つの仮端部に基づいて前記物体の2本のリムの下端を位置決めするための2つの位置決め端部を決定する位置決め部と、
    を備えるシステム。
  12. 前記所定方向は、前記原画像において、一様な方向を示す請求項11に記載のシステム。
  13. 前記適合部は、前記選定された凸点のうちの2つをそれぞれ仮端部として選択する際、前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たすか否かを判定し、前記選定された凸点のうちの2つ及び前記選定された凹点のうちの1つが前記三角形特有の適合条件を満たすと判定した場合は、前記選定された凸点のうちの2つをそれぞれ仮端部として選択することを決定する請求項11又は請求項12に記載のシステム。
  14. 前記適合部は、前記選定された凸点のうちの2つ及び前記凹点のうちの1つが前記三角形特有の適合条件を満たす場合であって、前記選定された凸点のうちの別の2つ及び前記選定された凹点のうちの別の1つも前記三角形特有の適合条件を満たす場合、前記選定された凸点のうちの2つ及び前記選定された凹点のうちの1つによって形成される領域が前記選定された凸点のうちの別の2つ及び前記選定された凹点のうちの別の1つによって形成される領域よりも大きいか否かをさらに判定し、大きい場合は、前記選定された凸点のうちの2つをそれぞれ仮端部として決定する請求項13に記載のシステム。
  15. 前記適合部は、前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たすか否かを判定する際、前記選定された凸点のうちの2つを結ぶ接続線の傾きが前記所定方向に垂直なベクトルに係る所定の傾きよりも小さいか否かを判定し、前記選定された凹点のうちの1つを前記ベクトルに投射した位置が前記選定された凸点のうちの2つを前記ベクトルに投射した両位置の間に位置するか否かを判定する請求項13に記載のシステム。
  16. 前記物体の2本のリムの下端に近い側が下側と定義される場合、前記所定方向が下側から上側に向かう方向であって、前記選定された凸点のうちの2つが前記選定された凹点のうちの1つよりも下側に近い請求項13に記載のシステム。
  17. 前記適合部は、
    2つの先行端部が先行原画像で位置決めされた前記物体の2本のリムの下端である場合の前記2つの先行端部に係る2つの追跡端部を取得する追跡部をさらに備え、
    前記位置決め部は、前記選定された凸点及び前記選定された凹点が三角形特有の適合条件を満たさない場合、前記2つの追跡端部に基づいて前記2つの位置決め端部を決定する請求項13に記載のシステム。
  18. 前記追跡部は、前記2つの追跡端部を取得する際、前記先行原画像及び前記原画像における前記2つの先行端部の周囲画素の輝度変化に基づいて前記2つの追跡端部を決定する請求項17に記載のシステム。
  19. 前記追跡部は、前記2つの追跡端部を取得する際、前記先行原画像及び前記原画像における前記2つの先行端部の周囲画素の色変化に基づいて前記2つの追跡端部を決定する請求項17に記載のシステム。
  20. 前記追跡部は、前記2つの追跡端部を取得する際、前記2つの先行端部及び別の2つの先行端部の位置に基づいて予測法又は確率法により前記2つの追跡端部を決定し、
    前記別の2つの先行端部は、前記位置決め部により別の先行原画像で位置決めされた前記物体の2本のリムの下端であり、前記原画像、前記先行原画像、及び前記別の先行原画像が前記取得部により連続的に取得される請求項17に記載のシステム。
JP2009147752A 2008-12-08 2009-06-22 物体端の位置決め方法及びシステム Expired - Fee Related JP4792514B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW097147736A TWI405149B (zh) 2008-12-08 2008-12-08 物體端點定位方法及應用其之系統
TW097147736 2008-12-08

Publications (2)

Publication Number Publication Date
JP2010134901A JP2010134901A (ja) 2010-06-17
JP4792514B2 true JP4792514B2 (ja) 2011-10-12

Family

ID=42231134

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009147752A Expired - Fee Related JP4792514B2 (ja) 2008-12-08 2009-06-22 物体端の位置決め方法及びシステム

Country Status (3)

Country Link
US (1) US8396300B2 (ja)
JP (1) JP4792514B2 (ja)
TW (1) TWI405149B (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5708305B2 (ja) * 2011-06-30 2015-04-30 富士通株式会社 画像認識装置、画像認識方法及び画像認識用コンピュータプログラム

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5524637A (en) * 1994-06-29 1996-06-11 Erickson; Jon W. Interactive system for measuring physiological exertion
US6308565B1 (en) * 1995-11-06 2001-10-30 Impulse Technology Ltd. System and method for tracking and assessing movement skills in multidimensional space
JP3200663B2 (ja) * 1996-03-29 2001-08-20 技研トラステム株式会社 移動体検出方法,移動体検出装置,及び移動体計数装置
JP2000082148A (ja) 1998-07-09 2000-03-21 Ricoh Co Ltd 物体画像の形状特徴抽出方式,画像物体認識方式及び装置
JP3960711B2 (ja) * 1999-05-24 2007-08-15 セコム株式会社 複合型監視装置
JP3863809B2 (ja) 2002-05-28 2006-12-27 独立行政法人科学技術振興機構 手の画像認識による入力システム
JP4318465B2 (ja) * 2002-11-08 2009-08-26 コニカミノルタホールディングス株式会社 人物検出装置および人物検出方法
JP4140402B2 (ja) * 2003-03-03 2008-08-27 松下電工株式会社 画像処理装置
JP4239635B2 (ja) 2003-03-20 2009-03-18 ソニー株式会社 ロボット装置、その動作制御方法、及びプログラム
JP2005339363A (ja) 2004-05-28 2005-12-08 Canon Inc 人体パーツ自動分割装置及び人体パーツ自動分割方法
US7440615B2 (en) * 2005-10-27 2008-10-21 Nec Laboratories America, Inc. Video foreground segmentation method
JP2007134913A (ja) 2005-11-09 2007-05-31 Matsushita Electric Ind Co Ltd 映像選択方法および映像選択装置
EP1916538A3 (en) 2006-10-27 2011-02-16 Panasonic Electric Works Co., Ltd. Target moving object tracking device
TWI369899B (en) * 2008-07-21 2012-08-01 Ind Tech Res Inst Method and system for tracking human extremity positions

Also Published As

Publication number Publication date
US8396300B2 (en) 2013-03-12
US20100142831A1 (en) 2010-06-10
TWI405149B (zh) 2013-08-11
JP2010134901A (ja) 2010-06-17
TW201023100A (en) 2010-06-16

Similar Documents

Publication Publication Date Title
US10469829B2 (en) Information processor and information processing method
KR101606628B1 (ko) 포인팅 방향 검출 장치 및 그 방법과, 프로그램 및 컴퓨터 판독가능한 매체
AU2017288933B2 (en) Systems and methods for dynamic occlusion handling
US9898651B2 (en) Upper-body skeleton extraction from depth maps
US10082879B2 (en) Head mounted display device and control method
US9542003B2 (en) Image processing device, image processing method, and a computer-readable non-transitory medium
JP5898014B2 (ja) 姿勢推定装置、姿勢推定方法、および姿勢推定プログラム
US20150310617A1 (en) Display control device and display control method
JP4938748B2 (ja) 画像認識装置及びプログラム
US20160349925A1 (en) Information processing apparatus for recognizing user operation based on an image
JP2018119833A (ja) 情報処理装置、システム、推定方法、コンピュータプログラム、及び記憶媒体
JP2014215735A (ja) 爪画像合成装置、爪画像合成方法および爪画像合成プログラム
JP2015049776A (ja) 画像処理装置、画像処理方法及び画像処理プログラム
US9158381B2 (en) Multi-resolution gesture recognition
Pires et al. Unwrapping the eye for visible-spectrum gaze tracking on wearable devices
JP6922410B2 (ja) 姿勢判定プログラム、姿勢判定装置及び姿勢判定方法
JP4792514B2 (ja) 物体端の位置決め方法及びシステム
JP7024876B2 (ja) 検出装置、処理装置、検出方法、及び処理プログラム
CN118509566A (zh) 投影机控制参数分析方法、装置及设备
JP2017068437A (ja) 物体検出装置、物体検出方法、及び物体検出プログラム
Käs et al. Systematic comparison of projection methods for monocular 3D human pose estimation on fisheye images
CN101751118B (zh) 物体端点定位方法及应用的系统
CN117351074B (zh) 基于头戴式眼动仪和深度相机的视点位置检测方法及装置
TWI431512B (zh) 三維控制端點之辨識方法及應用其之電腦可讀取媒體
JP2006227739A (ja) 画像処理装置及び画像処理方法

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20100621

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110217

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110224

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20110524

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20110527

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110614

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110707

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110725

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140729

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4792514

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees