JP2015184743A - 画像処理装置および物体認識方法 - Google Patents

画像処理装置および物体認識方法 Download PDF

Info

Publication number
JP2015184743A
JP2015184743A JP2014058194A JP2014058194A JP2015184743A JP 2015184743 A JP2015184743 A JP 2015184743A JP 2014058194 A JP2014058194 A JP 2014058194A JP 2014058194 A JP2014058194 A JP 2014058194A JP 2015184743 A JP2015184743 A JP 2015184743A
Authority
JP
Japan
Prior art keywords
image
feature amount
comparison
unit
pixel position
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014058194A
Other languages
English (en)
Other versions
JP6393495B2 (ja
Inventor
宏将 武井
Hiromasa Takei
宏将 武井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nihon Unisys Ltd
Original Assignee
Nihon Unisys Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nihon Unisys Ltd filed Critical Nihon Unisys Ltd
Priority to JP2014058194A priority Critical patent/JP6393495B2/ja
Publication of JP2015184743A publication Critical patent/JP2015184743A/ja
Application granted granted Critical
Publication of JP6393495B2 publication Critical patent/JP6393495B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)

Abstract

【課題】撮影画像内に写る対象物体の形状や姿勢をより正しく認識できるようにする。
【解決手段】撮影画像から対象物体を抽出した対象画像について、物体の境界の各ピクセル位置および当該各ピクセル位置における各特徴量を算出する特徴量算出部16と、当該算出した各ピクセル位置および各特徴量と、複数の比較画像についてあらかじめ比較データ記憶部20に記憶しておいた各ピクセル位置および各特徴量とに基づいて、ピクセル位置毎に特徴量の比較を行うことによって最も一致度の高い比較画像を検索し、当該検索した比較画像に関する物体の形状または姿勢を対象物体の形状または姿勢として特定する画像マッチング部19とを備え、物体上の代表点のみの特徴量に基づき比較を行う場合や、物体の全体の形状等から計算した1つの特徴量に基づき比較を行う場合に比べて精度の高い比較を行うことができるようにする。
【選択図】図1

Description

本発明は、画像処理装置および物体認識方法に関し、特に、ある物体が写った2次元画像からその物体の形状や姿勢を認識する技術に関するものである。
従来、カメラにより撮影された2次元画像の中から所定の物体を検出あるいは認識する技術が広く用いられている。例えば、特定の人物をトラッキングする監視カメラ、車両周囲の障害物を検出して警告する走行支援システム、人の身振りや手振りなどの動作によってコンピュータを制御するジェスチャ入力など、その応用範囲は広い。これら種々の応用技術の中には、物体の形状や位置に加えて、物体の姿勢を検出することが必要なものも多くある。
従来、手のジェスチャによって手ぶらで対象機器を操作できるようにするために、手先の形状、位置、姿勢を画像認識するようにした技術が提案されている(例えば、特許文献1参照)。この特許文献1に記載の情報入力装置では、ユーザを含む環境の観測データをもとに、ユーザを含む前景と、前景以外の環境からなる背景とを分離して、3次元モデルを学習し、既にモデル化された個別の前景モデルが環境中のどこに配置されているか、その位置と姿勢を推定する。
特開2013−205983号公報
上記特許文献1に記載された技術のように、撮影画像内から抽出した対象物体の画像(以下、対象画像という)とモデル化された複数の物体画像(以下、比較画像という)とを比較して、対象物体の形状や姿勢を認識する場合、特徴量に基づく認識方法が多用されている。この手法は、対象画像および比較画像のそれぞれから計算により抽出した特徴量を比較し、対象画像と最も特徴量が近い比較画像から対象物体の形状や姿勢を認識するというものである。
しかしながら、画像から計算される1つあるいは数点の特徴量のみで比較を行った場合、誤認識が多くなるという問題があった。例えば、物体上に設定した1〜数個の代表点のみの特徴量を用いて比較を行った場合、代表点に関する画像の類似度が高ければ特徴量は互いに近い値を示すため、代表点以外の部分の類似度が低くても、本来は不正解の比較画像が対象画像に最も近い画像として選ばれてしまうことがある。
特に、1つの物体に関して様々な姿勢の比較画像を生成しておき、これらと対象画像とを比較することによって対象物体の姿勢を認識する場合、生成された複数の比較画像の形状自体は互いに似たものとなる。そのため、物体上の代表点のみについて計算した特徴量や、物体の全体の形状等から計算した1つの特徴量を用いた単純な比較では、本来は不正解の比較画像が対象画像に最も近い画像として選ばれてしまい、正しい姿勢を認識できないことが多くなるという問題があった。
本発明は、このような問題を解決するために成されたものであり、対象画像およびあらかじめ用意された比較画像のそれぞれから計算した物体の特徴量の比較によって、撮影画像内に写る対象物体の形状や姿勢をより正しく認識できるようにすることを目的とする。
上記した課題を解決するために、本発明では、撮影画像から対象物体を抽出して大きさを正規化した対象画像について、物体の境界の各ピクセル位置および当該各ピクセル位置における各特徴量を算出する。そして、当該算出した各ピクセル位置および各特徴量と、複数の比較画像について同様にしてあらかじめ算出しておいた各ピクセル位置および各特徴量とに基づいて、最も一致度の高い比較画像を検索し、当該検索した比較画像に関する物体の形状または姿勢を、撮影画像に写る物体の形状または姿勢として特定するようにしている。
上記のように構成した本発明によれば、対象物体の境界を構成するそれぞれのピクセル位置毎に、撮影画像から抽出された対象画像と比較画像との間で特徴量の比較が行われる。そして、最も一致度の高い比較画像が対象画像に最も近い画像として検索され、検索された比較画像により対象物体の形状または姿勢が特定されることとなる。これにより、物体上の代表点のみの特徴量に基づき比較を行う場合や、物体の全体の形状等から計算した1つの特徴量に基づき比較を行う場合に比べて精度の高い比較を行うことができ、撮影画像内に写る対象物体の形状や姿勢をより正しく認識することができる。
本実施形態による画像処理装置の機能構成例を示すブロック図である。 本実施形態の主成分分析部により分析される主成分方向を説明するための図である。 本実施形態によるバイナリ特徴量の算出方法を説明するための図である。 本実施形態による画像マッチング部の処理例を説明するための図である。 本実施形態による画像処理装置の動作例で、比較データを生成して記憶させる処理の手順を示すフローチャートである。 本実施形態による画像処理装置の動作例で、撮影画像から対象物体の形状または姿勢を認識する処理の手順を示すフローチャートである。
以下、本発明の一実施形態を図面に基づいて説明する。図1は、本実施形態による画像処理装置100の機能構成例を示すブロック図である。図1に示すように、本実施形態の画像処理装置100は、その機能構成として、撮影画像取得部11、物体抽出部12、主成分分析部13、正規化処理部14、境界抽出部15、特徴量算出部16、比較画像取得部17、比較データ生成部18、画像マッチング部19および比較データ記憶部20を備えている。
上記各機能ブロック11〜19は、ハードウェア、DSP(Digital Signal Processor)、ソフトウェアの何れによっても構成することが可能である。例えばソフトウェアによって構成する場合、上記各機能ブロック11〜19は、実際にはコンピュータのCPU、RAM、ROMなどを備えて構成され、RAMやROM、ハードディスクまたは半導体メモリ等の記録媒体に記憶されたプログラムが動作することによって実現される。
撮影画像取得部11は、単眼カメラ200を用いて実空間を撮影することにより生成される2次元画像を取得する。なお、図1の例では、パーソナルコンピュータ等の画像処理装置100に単眼カメラ200を接続しておき、単眼カメラ200で撮影された2次元画像を撮影画像取得部11がリアルタイムに取得する例を示しているが、本発明はこれに限定されない。例えば、単眼カメラ200で撮影した2次元画像をメモリに記憶させ、このメモリに記憶された2次元画像を撮影画像取得部11が後から取り込むようにしてもよい。
物体抽出部12は、撮影画像取得部11により取得された撮影画像から背景を除去して対象物体の画像である対象画像を抽出する。例えば、物体抽出部12は、撮影画像に対して前景抽出処理を行うことにより、撮影画像内に写っている認識対象物体の画像を抽出する。前景抽出処理には公知の手法を採用することが可能である。例えば、グラフカットを用いた前景抽出処理を適用することが可能である。また、対象物体の画像および背景の画像を教師データとして用い、当該教師データから生成した学習データを用いて前景抽出処理を行うようにしてもよい。
主成分分析部13は、物体画像(物体抽出部12により抽出された対象画像および後述する比較画像取得部17により取得された比較画像)に対して主成分分析を行い、第1主成分方向および第2主成分方向を定める。主成分分析とは、元の多数の説明変数で表わされる情報を数個の主成分に要約して表現するための公知の処理である。本実施形態では、物体画像の各ピクセル値を説明変数として、これらの説明変数に座標変換を行って、総合指標となる2つの変数(第1主成分方向および第2主成分方向)を生成する。図2に示すように、第1主成分方向は物体のおよその長尺方向であり、第2主成分方向は物体のおよその短尺方向である。
正規化処理部14は、物体画像が正規化された大きさとなるように、物体画像を正規化する。具体的には、正規化処理部14は、主成分分析部13により特定された第1主成分方向および第2主成分方向により物体画像を正規化する。ここで言う正規化とは、第1主成分方向および第2主成分方向に対する特徴ベクトルの大きさが1となるように、物体画像の大きさを拡大または縮小する処理のことである。これにより、同じ対象物体を撮影した場合には、例えば撮影距離の違いによって撮影画像内に写る物体画像の大きさが異なっても、正規化処理後は略同じ大きさの物体画像に整えることができる。
境界抽出部15は、正規化処理部14により正規化された物体画像から、物体の境界(シルエット)を抽出する。境界の抽出は、例えば、いわゆるエッジ検出処理(画像の輝度や色などが鋭敏に(不連続に)変化している箇所を特定する処理)によって行うことが可能である。
特徴量算出部16は、境界抽出部15により抽出された境界の各ピクセル位置および当該各ピクセル位置における各特徴量を算出する。境界のピクセル位置ごとに特徴量が求まるのであれば、その算出方法は任意である。例えば、特徴量算出部16は、以下に説明するバイナリ特徴量を境界のピクセル位置毎に算出する。図3は、バイナリ特徴量の算出方法を説明するための図である。
まず、特徴量算出部16は、図3(a)に示すように、物体のシルエット画像の注目するピクセル31を中心として、一辺の大きさをn(nは2以上の任意の整数)とするn×nのボクセル32を設定する。図3(a)の例は、n=5としてボクセル32を設定した場合を示している。注目ピクセル31は、シルエット画像において物体の境界線33があるピクセルの中の1つである。
次に、特徴量算出部16は、図3(b)に示すように、各ボクセル32の符号化を行う。具体的には、特徴量算出部16は、境界線33のピクセルを含むボクセル32は値を1とし、含まないボクセル32は値を0とする。なお、0と1の符号化は逆パターンとしてもよい。すなわち、境界線33のピクセルを含むボクセル32は値を0、含まないボクセル32は値を1としてもよい。
さらに、特徴量算出部16は、図3(c)に示すように、符号化された各ボクセル32の値を横方向、縦方向、斜め2方向の4方向に取得し、それらを順に配列して20次元のバイナリ列を生成する。これが求めるバイナリ特徴量である。なお、ここに挙げた4方向およびその配列の順番は一例であって、これに限定されるものではない。特徴量算出部16は、物体の境界線33に沿って注目ピクセル31を1つずつ移動させ、境界線33上のピクセル位置ごとにバイナリ特徴量を算出する。
比較画像取得部17は、撮影画像から認識したい対象物体と同じ画像を比較画像として取得する。例えば、比較画像取得部17は、パーソナルコンピュータ等で生成された物体のCG画像を取得する。取得の形態は任意である。例えば、画像処理装置100にパーソナルコンピュータを接続し、比較画像取得部17がパーソナルコンピュータからダイレクトに比較画像を取得する。あるいは、パーソナルコンピュータ等で生成された比較画像をメモリに記憶させ、このメモリに記憶された比較画像を比較画像取得部17が取り込むようにしてもよい。
撮影画像から対象物体の形状を認識したい場合、比較画像取得部17は、形状の異なる様々な物体に関する比較画像を取得する。また、撮影画像から対象物体の姿勢(対象物体が向いている方向)を認識したい場合、比較画像取得部17は、同じ物体に関して姿勢の異なる様々な比較画像を取得する。撮影画像から対象物体の形状および姿勢の両方を認識したい場合、比較画像取得部17は、形状の異なる様々な物体のそれぞれに関して、姿勢の異なる様々な比較画像を取得する。ここで、比較画像取得部17は、各種の比較画像を、当該比較画像が表す物体の形状または姿勢の少なくとも何れか一方を示す情報と共に取得する。
上述した主成分分析部13、正規化処理部14、境界抽出部15および特徴量算出部16は、比較画像取得部17により取得された比較画像についても同様の処理を行う。これは、認識したい対象物体を単眼カメラ200で撮影する前に、あらかじめ行っておく。この場合、主成分分析部13は、比較画像取得部17により取得された比較画像に対して主成分分析を行い、第1主成分方向および第2主成分方向を定める。
正規化処理部14は、比較画像取得部17により取得された比較画像が正規化された大きさとなるように、比較画像を正規化する。これにより、正規化された比較画像により表される物体画像の大きさと、撮影画像から抽出され正規化される物体画像の大きさとを略同じ大きさに整えることができる。境界抽出部15は、正規化処理部14により正規化された比較画像から物体の境界(シルエット)を抽出する。特徴量算出部16は、境界抽出部15により抽出された境界の各ピクセル位置および当該各ピクセル位置における各バイナリ特徴量を算出する。
比較データ生成部18は、物体に関する複数の比較画像について主成分分析部13、正規化処理部14、境界抽出部15および特徴量算出部16の各処理を行うことによってあらかじめ生成された各ピクセル位置および各バイナリ特徴量のセットを、複数の比較画像毎に、当該比較画像が表す物体の形状または姿勢の少なくとも何れか一方を示す情報と合わせて比較データを生成する。そして、生成した比較データを比較データ記憶部20に記憶させる。
画像マッチング部19は、特徴量算出部16により対象画像について算出された各ピクセル位置および各バイナリ特徴量と、比較データ記憶部20に複数の比較画像毎にあらかじめ記憶されている各ピクセル位置および各バイナリ特徴量とに基づいて、最も一致度の高い比較画像を検索する。そして、当該検索した比較画像に関する物体の形状または姿勢を、撮影画像に写る対象物体の形状または姿勢として特定する。
具体的には、画像マッチング部19は、特徴量算出部16により対象画像について算出された各ピクセル位置と比較画像について算出された各ピクセル位置との差、および、特徴量算出部16により対象画像について算出された各バイナリ特徴量と比較画像について算出された各バイナリ特徴量との差に基づいて、各ピクセル位置でのバイナリ特徴量の差の大きさが全体として最も小さくなる比較画像を、最も一致度の高い比較画像として検索する。
図4は、画像マッチング部19の処理例を説明するための図である。図4(a)は、撮影画像から抽出された対象物体のシルエット画像を示す。また、図4(b)〜(d)は、複数の比較画像から抽出された比較物体のシルエット画像を示す。
まず、画像マッチング部19は、図4(a)に示すように、特徴量算出部16により対象画像について算出されたピクセル位置(x1,y1)と、そのピクセル位置において算出されたバイナリ特徴量P11とを取得する。次に、画像マッチング部19は、図4(b)〜(d)に示す複数の比較画像を対象として、ピクセル位置(x1,y1)から所定の距離以内(符号41で示す範囲)のピクセル位置に、バイナリ特徴量P11とのハミング距離が所定の閾値以下となるバイナリ特徴量を持つ比較画像があるか否かを検索する。
ハミング距離とは、対象画像および比較画像のそれぞれから算出された20ビットから成るバイナリ特徴量の対応ビットどうしを比較して、異なる値を示すビットの数をカウントした値のことである。画像マッチング部19は、ハミング距離が所定の閾値以下となる比較画像が検索された場合、その比較画像に対してスコアを加算する。
図4(b)に示す比較画像は、図4(a)の対象画像と略同形同大(大きさは正規化されている)であり、ピクセル位置(x1,y1)から所定の距離以内のピクセル位置に、バイナリ特徴量P11とのハミング距離が所定の閾値以下となるバイナリ特徴量を持つ。よって、この比較画像に対してスコアを加算する。一方、図4(c)、(d)に示す比較画像は、図4(a)の対象画像と形状が異なるため、ピクセル位置(x1,y1)から所定の距離以内のピクセル位置に、バイナリ特徴量P11とのハミング距離が所定の閾値以下となるバイナリ特徴量を持たない。よって、これらの比較画像に対してはスコアを加算しない。
画像マッチング部19は、以上のような処理を、図4(a)に示す対象物体の境界線上の各ピクセル位置について順次行う。そして、その結果としてスコアが最も大きくなった比較画像を、対象画像と最も一致度の高い比較画像として抽出する。そして、当該抽出した比較画像に関する物体の形状または姿勢(比較データ記憶部20に記憶されている)を、撮影画像に写る対象物体の形状または姿勢として特定する。
図5および図6は、上記のように構成した本実施形態による画像処理装置100の動作例を示すフローチャートである。図5は、あらかじめ比較データを生成して記憶させる処理の手順を示す。図6は、撮影画像から対象物体の形状または姿勢を認識する処理の手順を示す。
図5において、まず、比較画像取得部17は、パーソナルコンピュータ等で生成された物体のCG画像を比較画像として取得する(ステップS1)。例えば、比較画像取得部17は、形状の異なる様々な物体に関して、姿勢の異なる様々な比較画像を、当該比較画像が表す物体の形状および姿勢を示す情報と共に取得する。次に、主成分分析部13は、比較画像取得部17により取得された比較画像に対して主成分分析を行い、第1主成分方向および第2主成分方向を定める(ステップS2)。
さらに、正規化処理部14は、比較画像取得部17により取得された比較画像が正規化された大きさとなるように、比較画像を正規化する(ステップS3)。続いて、境界抽出部15は、正規化処理部14により正規化された比較画像から物体の境界(シルエット)を抽出する(ステップS4)。そして、特徴量算出部16は、境界抽出部15により抽出された境界の各ピクセル位置および当該各ピクセル位置における各バイナリ特徴量を算出する(ステップS5)。
最後に、比較データ生成部18は、特徴量算出部16により複数の比較画像について生成された各ピクセル位置および各バイナリ特徴量のセットを、当該複数の比較画像毎に、当該比較画像が表す物体の形状および姿勢を示す情報と共に比較データ記憶部20に記憶させる(ステップS6)。以上により、撮影画像から対象物体の形状および姿勢を認識するための前準備が完了する。
図6において、撮影画像取得部11は、単眼カメラ200を用いて実空間を撮影することにより生成される2次元画像を取得する(ステップS11)。また、物体抽出部12は、撮影画像取得部11により取得された撮影画像から背景を除去して物体の対象画像を抽出する(ステップS12)。次に、主成分分析部13は、物体抽出部12により抽出された対象画像に対して主成分分析を行い、第1主成分方向および第2主成分方向を定める(ステップS13)。
さらに、正規化処理部14は、物体抽出部11により抽出された対象画像が正規化された大きさとなるように、対象画像を正規化する(ステップS14)。さらに、境界抽出部15は、正規化処理部14により正規化された対象画像から、物体の境界(シルエット)を抽出する(ステップS15)。続いて、特徴量算出部16は、境界抽出部15により抽出された境界の各ピクセル位置および当該各ピクセル位置における各特徴量を算出する(ステップS16)。
最後に、画像マッチング部19は、特徴量算出部16により対象画像について算出された各ピクセル位置および各バイナリ特徴量と、比較データ記憶部20に複数の比較画像毎にあらかじめ記憶されている各ピクセル位置および各バイナリ特徴量とに基づいて、最も一致度の高い比較画像を検索し、当該検索した比較画像に関する物体の形状または姿勢を、撮影画像に写る対象物体の形状または姿勢として特定する(ステップS17)。
以上詳しく説明したように、本実施形態では、撮影画像から対象物体を抽出して大きさを正規化した対象画像について、境界の各ピクセル位置および当該各ピクセル位置における各特徴量を算出する。そして、当該算出した各ピクセル位置および各特徴量と、複数の比較画像について同様にしてあらかじめ算出しておいた各ピクセル位置および各特徴量とに基づいて、最も一致度の高い比較画像を検索し、当該検索した比較画像に関する物体の形状または姿勢を、撮影画像に写る対象物体の形状または姿勢として特定するようにしている。
このように構成した本実施形態によれば、対象物体の境界を構成するそれぞれのピクセル位置毎に、撮影画像から抽出された物体の対象画像と比較画像との間で特徴量の比較が行われる。そして、最も一致度の高い比較画像が対象画像に最も近い画像として検索され、検索された比較画像により物体の形状または姿勢が特定されることとなる。これにより、従来のように物体上の代表点のみの特徴量に基づき比較を行う場合や、物体の全体の形状等から計算した1つの特徴量に基づき比較を行う場合に比べて精度の高い比較を行うことができ、撮影画像内に写る対象物体の形状や姿勢をより正しく認識することができる。
なお、上記実施形態では、主成分分析を行って第1主成分方向および第2主成分方向を特定し、これら2つの方向により物体画像を正規化する例について説明したが、本発明はこれに限定されない。物体画像を正規化することができれば、必ずしも主成分分析による方法によらずともよい。
また、上記実施形態では、画像マッチングにおいてハミング距離を算出する例について説明したが、本発明はこれに限定されない。対象画像から算出された特徴量と比較画像から算出された特徴量との類似度を算出することが可能な手法であれば、何れも本発明に適用することが可能である。
また、上記実施形態では、対象画像から物体の特徴量を算出する処理と、比較画像から物体の特徴量を抽出する処理とを同じ画像処理装置100の主成分分析部13、正規化処理部14、境界抽出部15および特徴量算出部16を用いて行う例について説明したが、本発明はこれに限定されない。例えば、比較画像から物体の特徴量を抽出する処理を画像処理装置100とは別のパーソナルコンピュータ等で行い、その結果得られた比較データを比較データ記憶部20にあらかじめ記憶しておくようにしてもよい。
その他、上記実施形態は、何れも本発明を実施するにあたっての具体化の一例を示したものに過ぎず、これによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその要旨、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。
11 撮影画像取得部
12 物体抽出部
13 主成分分析部
14 正規化処理部
15 境界抽出部
16 特徴量算出部
17 比較画像取得部
18 比較データ生成部
19 画像マッチング部
20 比較データ記憶部
100 画像処理装置
200 単眼カメラ

Claims (4)

  1. 撮影画像から背景を除去して対象物体の画像である対象画像を抽出する物体抽出部と、
    物体画像が正規化された大きさとなるように、上記物体画像を正規化する正規化処理部と、
    上記正規化処理部により正規化された物体画像から物体の境界を抽出する境界抽出部と、
    上記境界抽出部により抽出された境界の各ピクセル位置および当該各ピクセル位置における各特徴量を算出する特徴量算出部と、
    物体に関する複数の比較画像について上記正規化処理部、上記境界抽出部および上記特徴量算出部と同様の処理を行うことによってあらかじめ生成された各ピクセル位置および各特徴量のセットを、上記複数の比較画像毎に、当該比較画像が表す物体の形状または姿勢の少なくとも何れか一方を示す情報と共に記憶してなる比較データ記憶部と、
    上記特徴量算出部により上記対象画像について算出された各ピクセル位置および各特徴量と、上記比較データ記憶部に複数の比較画像毎に記憶されている各ピクセル位置および各特徴量とに基づいて、最も一致度の高い比較画像を検索し、当該検索した比較画像に関する物体の形状または姿勢を、上記撮影画像に写る物体の形状または姿勢として特定する画像マッチング部とを備えたことを特徴とする画像処理装置。
  2. 上記物体画像に対して主成分分析を行い、第1主成分方向および第2主成分方向を定める主成分分析部をさらに備え、
    上記正規化処理部は、上記第1主成分方向および上記第2主成分方向により上記物体画像を正規化することを特徴とする請求項1記載の画像処理装置。
  3. 上記画像マッチング部は、上記特徴量算出部により上記対象画像について算出された各ピクセル位置と上記比較画像について算出された各ピクセル位置との差、および、上記特徴量算出部により上記対象画像について算出された各特徴量と上記比較画像について算出された各特徴量との差に基づいて、各ピクセル位置での特徴量の差の大きさが全体として最も小さくなる比較画像を、上記最も一致度の高い比較画像として検索することを特徴とする請求項1または2に記載の画像処理装置。
  4. 画像処理装置の物体抽出部が、撮影画像から背景を除去して対象物体の画像である対象画像を抽出する第1のステップと、
    上記画像処理装置の正規化処理部が、上記物体抽出部により抽出された上記物体画像が正規化された大きさとなるように、上記物体画像を正規化する第2のステップと、
    上記画像処理装置の境界抽出部が、上記正規化処理部により正規化された物体画像から物体の境界を抽出する第3のステップと、
    上記画像処理装置の特徴量算出部が、上記境界抽出部により抽出された境界の各ピクセル位置および当該各ピクセル位置における各特徴量を算出する第4のステップと、
    上記画像処理装置の画像マッチング部が、上記特徴量算出部により上記対象画像について算出された各ピクセル位置および各特徴量と、比較データ記憶部に複数の比較画像毎にあらかじめ記憶されている各ピクセル位置および各特徴量とに基づいて、最も一致度の高い比較画像を検索し、当該検索した比較画像に関する物体の形状または姿勢を、上記撮影画像に写る物体の形状または姿勢として特定するとを備えたことを特徴とする物体認識方法。
JP2014058194A 2014-03-20 2014-03-20 画像処理装置および物体認識方法 Active JP6393495B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014058194A JP6393495B2 (ja) 2014-03-20 2014-03-20 画像処理装置および物体認識方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014058194A JP6393495B2 (ja) 2014-03-20 2014-03-20 画像処理装置および物体認識方法

Publications (2)

Publication Number Publication Date
JP2015184743A true JP2015184743A (ja) 2015-10-22
JP6393495B2 JP6393495B2 (ja) 2018-09-19

Family

ID=54351251

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014058194A Active JP6393495B2 (ja) 2014-03-20 2014-03-20 画像処理装置および物体認識方法

Country Status (1)

Country Link
JP (1) JP6393495B2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019509577A (ja) * 2016-03-21 2019-04-04 フェイスブック,インク. マッチングコンテンツを特定するためのシステムおよび方法
WO2021117120A1 (ja) * 2019-12-10 2021-06-17 日本電信電話株式会社 推定方法、推定装置及びプログラム
JP2022529299A (ja) * 2020-03-11 2022-06-20 シェンチェン センスタイム テクノロジー カンパニー リミテッド 動作識別方法及び装置、電子デバイス、コンピュータ読み取り可能な記憶媒体

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05165968A (ja) * 1991-12-18 1993-07-02 Komatsu Ltd 物体の位置・姿勢認識装置
JP2001056861A (ja) * 1999-06-08 2001-02-27 Matsushita Electric Ind Co Ltd 手の形状と姿勢の認識装置および手の形状と姿勢の認識方法並びに当該方法を実施するプログラムを記録した記録媒体

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05165968A (ja) * 1991-12-18 1993-07-02 Komatsu Ltd 物体の位置・姿勢認識装置
JP2001056861A (ja) * 1999-06-08 2001-02-27 Matsushita Electric Ind Co Ltd 手の形状と姿勢の認識装置および手の形状と姿勢の認識方法並びに当該方法を実施するプログラムを記録した記録媒体

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019509577A (ja) * 2016-03-21 2019-04-04 フェイスブック,インク. マッチングコンテンツを特定するためのシステムおよび方法
WO2021117120A1 (ja) * 2019-12-10 2021-06-17 日本電信電話株式会社 推定方法、推定装置及びプログラム
JPWO2021117120A1 (ja) * 2019-12-10 2021-06-17
JP7255709B2 (ja) 2019-12-10 2023-04-11 日本電信電話株式会社 推定方法、推定装置及びプログラム
JP2022529299A (ja) * 2020-03-11 2022-06-20 シェンチェン センスタイム テクノロジー カンパニー リミテッド 動作識別方法及び装置、電子デバイス、コンピュータ読み取り可能な記憶媒体

Also Published As

Publication number Publication date
JP6393495B2 (ja) 2018-09-19

Similar Documents

Publication Publication Date Title
US20230045519A1 (en) Target Detection Method and Apparatus
US9098740B2 (en) Apparatus, method, and medium detecting object pose
JP6007682B2 (ja) 画像処理装置、画像処理方法及びプログラム
EP3090382B1 (en) Real-time 3d gesture recognition and tracking system for mobile devices
CN109934847B (zh) 弱纹理三维物体姿态估计的方法和装置
JP2011134114A (ja) パターン認識方法およびパターン認識装置
Ahmad et al. Inertial sensor data to image encoding for human action recognition
JP6071002B2 (ja) 信頼度取得装置、信頼度取得方法および信頼度取得プログラム
JP2012083855A (ja) 物体認識装置及び物体認識方法
WO2022095514A1 (zh) 图像检测方法、装置、电子设备及存储介质
CN110956131B (zh) 单目标追踪方法、装置及系统
EP2717223A1 (en) Information processing device, information processing method, and information processing program
US10937150B2 (en) Systems and methods of feature correspondence analysis
JP2016014954A (ja) 手指形状の検出方法、そのプログラム、そのプログラムの記憶媒体、及び、手指の形状を検出するシステム。
Itkarkar et al. A survey of 2D and 3D imaging used in hand gesture recognition for human-computer interaction (HCI)
CN113297963A (zh) 多人姿态的估计方法、装置、电子设备以及可读存储介质
JP6052533B2 (ja) 特徴量抽出装置および特徴量抽出方法
WO2013078657A1 (en) A gesture recognition method, an apparatus and a computer program for the same
US20160110909A1 (en) Method and apparatus for creating texture map and method of creating database
JP6393495B2 (ja) 画像処理装置および物体認識方法
KR101151435B1 (ko) 얼굴 인식 장치 및 방법
JPWO2015136709A1 (ja) 画像処理装置、画像センサ、画像処理方法
KR102068489B1 (ko) 3차원 객체 생성 장치
CN106406507B (zh) 图像处理方法以及电子设备
JP2019012497A (ja) 部位認識方法、装置、プログラム、及び撮像制御システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170301

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180208

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180220

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180418

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180807

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180827

R150 Certificate of patent or registration of utility model

Ref document number: 6393495

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250