JP2011193496A - 撮像装置、撮像方法及び撮像プログラム - Google Patents
撮像装置、撮像方法及び撮像プログラム Download PDFInfo
- Publication number
- JP2011193496A JP2011193496A JP2011094000A JP2011094000A JP2011193496A JP 2011193496 A JP2011193496 A JP 2011193496A JP 2011094000 A JP2011094000 A JP 2011094000A JP 2011094000 A JP2011094000 A JP 2011094000A JP 2011193496 A JP2011193496 A JP 2011193496A
- Authority
- JP
- Japan
- Prior art keywords
- pixel area
- comparison
- comparison pixel
- pixel region
- correlation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Studio Devices (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】 所定のフレーム画像から注目画素領域(15)を抽出する注目画素領域抽出手段(6d)、現フレーム画像から順次に比較画素領域(20)を抽出する比較画素領域抽出手段(6e)、各比較画素領域と注目画素領域との相関度を導出する相関度導出手段(6f)、各相関度をその補正係数が予め設定されている相関度補正マップ(6g)に基づいて補正して比較画素領域毎に補正相関度を導出する相関度補正手段(6h)、補正相関度に基づいて各比較画素領域から比較画素領域を選択する比較画素領域選択手段(6i)を備え、注目画素領域抽出手段は所定の新たなフレーム画像が取得された場合に、前記比較画素領域選択手段により選択された比較画素領域を新たな注目画素領域として抽出する。
【選択図】 図3
Description
請求項2記載の発明は、前記注目画素領域抽出手段により抽出された注目画素領域の当該フレーム画像に対する位置を導出する位置導出手段と、前記位置導出手段により導出された位置に基づいて、現フレーム画像における探索範囲を設定する探索範囲設定手段と、を更に備え、前記比較画素領域抽出手段は、前記探索範囲設定手段により設定された探索範囲内で比較画素領域を抽出することを特徴とする請求項1記載の撮像装置である。
請求項3記載の発明は、前記探索範囲設定手段は、前記位置導出手段により導出された位置が、探索範囲の実質的な中央となるように探索範囲を設定することを特徴とする請求項2記載の撮像装置である。
請求項4記載の発明は、前記相関度補正マップは、前記探索範囲に対して周辺に位置する比較画素領域よりも中央側に位置する比較画素領域の方が、注目画素領域との相関度が高くなるように補正係数が設定されていることを特徴とする請求項3記載の撮像装置である。
請求項5記載の発明は、前記比較画素領域選択手段は、前記相関度補正手段により導出された補正相関度に基づいて、注目画素領域との相関度が高い比較画素領域を1領域選択することを特徴とする請求項2乃至4いずれかに記載の撮像装置である。
請求項6記載の発明は、前記比較画素領域選択手段は、前記相関度補正手段により導出された補正相関度に基づいて、注目画素領域との相関度が高い比較画素領域を上位から所定数領域だけ選択する第一比較画素領域選択手段と、前記第一比較画素領域選択手段により選択された比較画素領域から、前記探索範囲設定手段により設定された探索範囲の中央位置に最も近い位置にある比較画素領域を1領域選択する第二比較画素領域選択手段と、を備え、前記注目画素領域抽出手段は、新たな現フレーム画像が取得された場合に、前記第二比較画素領域選択手段により選択された比較画素領域を新たな注目画素領域として抽出することを特徴とする請求項2乃至4いずれかに記載の撮像装置である。
請求項7記載の発明は、前記注目画素領域抽出手段は、新たな現フレーム画像が取得される毎に、前記比較画素領域選択手段により選択された比較画素領域を新たな第一注目画素領域として抽出する第一注目画像領域抽出手段と、新たな現フレーム画像が所定回数だけ取得される毎に、前記比較画素領域選択手段により選択された比較画素領域を新たな第二注目画素領域として抽出する第二注目画像領域抽出手段とを備え、前記相関度導出手段は、前記比較画素領域抽出手段により抽出された各比較画素領域と前記第二注目画素領域抽出手段により抽出された第二注目画素領域との相関度を導出し、前記相対位置導出手段は、前記第一注目画素領域抽出手段により抽出された第一注目画素領域の当該フレーム画像に対する相対位置を導出することを特徴とする請求項2乃至6いずれかに記載の撮像装置である。
請求項8記載の発明は、前記相関度導出手段は、前記注目画素領域の各画素データと前記比較画素領域の各画素データに基づいた差分2乗和として相関度を導出することを特徴とする請求項1乃至7いずれかに記載の撮像装置である。
請求項9記載の発明は、順次取得されるフレーム画像に基づいたブロックマッチングにより被写体追従する被写体追従手段を備えた撮像装置であって、前記被写体追従手段は、所定のフレーム画像から注目画素領域を抽出する注目画素領域抽出手段と、現フレーム画像から、順次、所定の比較画素領域を抽出する比較画素領域抽出手段と、前記比較画素領域抽出手段により抽出された各比較画素領域と前記注目画素領域抽出手段により抽出された注目画素領域との相関度を導出する相関度導出手段と、前記相関度導出手段により導出された相関度に基づいて、前記注目画素領域抽出手段により抽出された注目画素領域と相関度の高い比較画素領域を上位から所定数領域選択する第一比較画素領域選択手段と、前記注目画素領域抽出手段により抽出された注目画素領域の当該フレーム画像に対する位置を導出する位置導出手段と、前記第一比較画素領域選択手段により選択された比較画素領域から、前記位置導出手段により導出された位置に最も近い位置にある比較画素領域を1領域選択する第二比較画素領域選択手段と、を備え、前記注目画素領域抽出手段は、所定の新たなフレーム画像が取得された場合に、前記第二比較画素領域選択手段により選択された比較画素領域を新たな注目画素領域として抽出することを特徴とする撮像装置である。
請求項10記載の発明は、順次取得されるフレーム画像に基づいたブロックマッチングにより被写体追従する被写体追従手段を備えた撮像装置であって、前記被写体追従手段は、所定のフレーム画像から第一注目画素領域または第二注目画素領域を抽出する注目画素領域抽出手段と、前記注目画素領域抽出手段により抽出された第一注目画素領域の当該フレーム画像に対する位置を導出する位置導出手段と、前記位置導出手段により導出された位置に基づいて、現フレーム画像における探索範囲を設定する探索範囲設定手段と、前記探索範囲設定手段により設定された探索範囲内から、順次、所定の比較画素領域を抽出する比較画素領域抽出手段と、前記比較画素領域抽出手段により抽出された各比較画素領域と前記注目画素領域抽出手段により抽出された第二注目画素領域との相関度を導出する相関度導出手段と、前記相関度導出手段により導出された相関度に基づいて、前記比較画素領域抽出手段により抽出された各比較画素領域から所定の比較画素領域を選択する比較画素領域選択手段と、を備え、前記注目画素領域抽出手段は、新たな現フレーム画像が取得される毎に、前記比較画素領域選択手段により選択された比較画素領域を新たな第一注目画素領域として抽出するとともに、新たな現フレーム画像が所定回数だけ取得される毎に、前記比較画素領域選択手段により選択された比較画素領域を新たな第二注目画素領域として抽出することを特徴とする撮像装置である。
請求項11記載の発明は、順次取得される各フレーム画像でその位置が変化する被写体に対してブロックマッチングにより追従を行なう被写体追従工程を含む撮像方法であって、前記被写体追従工程は、所定のフレーム画像から注目画素領域を抽出する注目画素領域抽出工程と、現フレーム画像から、順次、所定の比較画素領域を抽出する比較画素領域抽出工程と、前記比較画素領域抽出工程により抽出された各比較画素領域と前記注目画素領域抽出工程により抽出された注目画素領域との相関度を導出する相関度導出工程と、前記相関度導出工程により導出された各相関度をその補正係数が予め設定されている相関度補正マップに基づいて補正して前記比較画素領域毎に補正相関度を導出する相関度補正工程と、前記相関度補正工程により導出された補正相関度に基づいて、前記比較画素領域抽出工程により抽出された各比較画素領域から所定の比較画素領域を選択する比較画素領域選択工程と、を含み、前記注目画素領域抽出工程は、所定の新たなフレーム画像が取得された場合に、前記比較画素領域選択工程により選択された比較画素領域を新たな注目画素領域として抽出することを特徴とする撮像方法である。
請求項12記載の発明は、順次取得されるフレーム画像に基づいたブロックマッチングにより被写体追従する被写体追従工程を含む撮像方法であって、前記被写体追従工程は、所定のフレーム画像から注目画素領域を抽出する注目画素領域抽出工程と、現フレーム画像から、順次、所定の比較画素領域を抽出する比較画素領域抽出工程と、前記比較画素領域抽出工程により抽出された各比較画素領域と前記注目画素領域抽出工程により抽出された注目画素領域との相関度を導出する相関度導出工程と、前記相関度導出工程により導出された相関度に基づいて、前記注目画素領域抽出工程により抽出された注目画素領域と相関度の高い比較画素領域を上位から所定数領域選択する第一比較画素領域選択工程と、前記注目画素領域抽出工程により抽出された注目画素領域の当該フレーム画像に対する位置を導出する位置導出工程と、前記第一比較画素領域選択工程により選択された比較画素領域から、前記位置導出工程により導出された位置に最も近い位置にある比較画素領域を1領域選択する第二比較画素領域選択工程と、を含み、前記注目画素領域抽出工程は、所定の新たなフレーム画像が取得された場合に、前記第二比較画素領域選択工程により選択された比較画素領域を新たな注目画素領域として抽出することを特徴とする撮像方法である。
請求項13記載の発明は、順次取得されるフレーム画像に基づいたブロックマッチングにより被写体追従する被写体追従工程を含む撮像方法であって、前記被写体追従工程は、所定のフレーム画像から第一注目画素領域または第二注目画素領域を抽出する注目画素領域抽出工程と、前記注目画素領域抽出工程により抽出された第一注目画素領域の当該フレーム画像に対する位置を導出する位置導出工程と、前記位置導出工程により導出された位置に基づいて、現フレーム画像における探索範囲を設定する探索範囲設定工程と、前記探索範囲設定工程により設定された探索範囲内から、順次、所定の比較画素領域を抽出する比較画素領域抽出工程と、前記比較画素領域抽出工程により抽出された各比較画素領域と前記注目画素領域抽出工程により抽出された第二注目画素領域との相関度を導出する相関度導出工程と、前記相関度導出工程により導出された相関度に基づいて、前記比較画素領域抽出工程により抽出された各比較画素領域から所定の比較画素領域を選択する比較画素領域選択工程と、を含み、前記注目画素領域抽出工程は、新たな現フレーム画像が取得される毎に、前記比較画素領域選択工程により選択された比較画素領域を新たな第一注目画素領域として抽出するとともに、新たな現フレーム画像が所定回数だけ取得される毎に、前記比較画素領域選択工程により選択された比較画素領域を新たな第二注目画素領域として抽出することを特徴とする撮像方法である。
請求項14記載の発明は、順次取得される各フレーム画像でその位置が変化する被写体に対してブロックマッチングにより追従を行なう被写体追従手段をコンピュータに実現させるための撮像プログラムであって、前記被写体追従手段は、所定のフレーム画像から注目画素領域を抽出する注目画素領域抽出手段と、現フレーム画像から、順次、所定の比較画素領域を抽出する比較画素領域抽出手段と、前記比較画素領域抽出手段により抽出された各比較画素領域と前記注目画素領域抽出手段により抽出された注目画素領域との相関度を導出する相関度導出手段と、前記相関度導出手段により導出された各相関度をその補正係数が予め設定されている相関度補正マップに基づいて補正して前記比較画素領域毎に補正相関度を導出する相関度補正手段と、前記相関度補正手段により導出された補正相関度に基づいて、前記比較画素領域抽出手段により抽出された各比較画素領域から所定の比較画素領域を選択する比較画素領域選択手段と、を備え、前記注目画素領域抽出手段は、所定の新たなフレーム画像が取得された場合に、前記比較画素領域選択手段により選択された比較画素領域を新たな注目画素領域として抽出することを特徴とする撮像プログラムである。
請求項15記載の発明は、順次取得されるフレーム画像に基づいたブロックマッチングにより被写体追従する被写体追従手段をコンピュータに実現させるための撮像プログラムであって、前記被写体追従手段は、所定のフレーム画像から注目画素領域を抽出する注目画素領域抽出手段と、現フレーム画像から、順次、所定の比較画素領域を抽出する比較画素領域抽出手段と、前記比較画素領域抽出手段により抽出された各比較画素領域と前記注目画素領域抽出手段により抽出された注目画素領域との相関度を導出する相関度導出手段と、前記相関度導出手段により導出された相関度に基づいて、前記注目画素領域抽出手段により抽出された注目画素領域と相関度の高い比較画素領域を上位から所定数領域選択する第一比較画素領域選択手段と、前記注目画素領域抽出手段により抽出された注目画素領域の当該フレーム画像に対する位置を導出する位置導出手段と、前記第一比較画素領域選択手段により選択された比較画素領域から、前記位置導出手段により導出された位置に最も近い位置にある比較画素領域を1領域選択する第二比較画素領域選択手段と、を備え、前記注目画素領域抽出手段は、所定の新たなフレーム画像が取得された場合に、前記第二比較画素領域選択手段により選択された比較画素領域を新たな注目画素領域として抽出することを特徴とする撮像プログラムである。
請求項16記載の発明は、順次取得されるフレーム画像に基づいたブロックマッチングにより被写体追従する被写体追従手段をコンピュータに実現させるための撮像プログラムであって、前記被写体追従手段は、所定のフレーム画像から第一注目画素領域または第二注目画素領域を抽出する注目画素領域抽出手段と、前記注目画素領域抽出手段により抽出された第一注目画素領域の当該フレーム画像に対する位置を導出する位置導出手段と、前記位置導出手段により導出された位置に基づいて、現フレーム画像における探索範囲を設定する探索範囲設定手段と、前記探索範囲設定手段により設定された探索範囲内から、順次、所定の比較画素領域を抽出する比較画素領域抽出手段と、前記比較画素領域抽出手段により抽出された各比較画素領域と前記注目画素領域抽出手段により抽出された第二注目画素領域との相関度を導出する相関度導出手段と、前記相関度導出手段により導出された相関度に基づいて、前記比較画素領域抽出手段により抽出された各比較画素領域から所定の比較画素領域を選択する比較画素領域選択手段と、を備え、前記注目画素領域抽出手段は、新たな現フレーム画像が取得される毎に、前記比較画素領域選択手段により選択された比較画素領域を新たな第一注目画素領域として抽出するとともに、新たな現フレーム画像が所定回数だけ取得される毎に、前記比較画素領域選択手段により選択された比較画素領域を新たな第二注目画素領域として抽出することを特徴とする撮像プログラムである。
ここで、各比較画素領域20は、注目画素領域15と同じサイズの画素領域であり、例えば、フレーム画像において、比較画素領域毎にx軸方向またはy軸方向に順次1画素ずつシフトされて抽出される。
すなわち、注目画素領域に基づいて、新たに取得される現フレーム画像から前記注目画素領域と一致すると判断される比較画素領域20を追尾対象の比較画素領域として選択抽出し、これを新たな注目画素領域とすることで、新たな現フレーム画像が取得される毎に、トリミング枠25においても順次被写体を追尾している。
図4(a)は、本実施形態におけるブロックマッチングの模式図である。この図において、8×8画素のブロック29は、ブロックマッチングの対象エリアであり、注目画素領域15としてのブロック29に含まれる画素情報(輝度情報)を用いて、ブロックマッチングを行う。ここで、各々の画素は升目で表されており、この図においては、マッチング処理時間の短縮を図るために、たとえば、一つおきに配列された黒く塗りつぶした画素のみをブロックマッチング処理の対象画素とした場合を示している。つまり、8×8画素からなる注目画素領域のうち、16画素の画素情報に基づいてブロックマッチングを行う例を示している。なお、画素情報は、上記の輝度情報だけでなく、画素の位置情報も含む。この位置情報は、探索範囲の設定の際に利用される。
図7は、参照フレームと現フレームの関係図である。この図において、Fi、Fi+1、Fi+2、・・・・、Fi+10は、それぞれ画像処理部4から周期的に出力されるフレーム画像である。ここで、Fiをトリミング撮影開始時点の参照フレーム画像とすると、追尾対象の被写体画像はFiの注目画素領域15から抽出され、この注目画素領域15における被写体画像に対応する比較画素領域20がFi+1、Fi+2、・・・・、Fi+10から抽出され、この抽出された比較画素領域20がそれぞれの時点における追尾位置となる。
6 制御部(被写体追従手段)
6d 注目画素領域抽出部(注目画素領域抽出手段、第一注目画像領域抽出手段、第二注目画像領域抽出手段)
6e 比較画素領域抽出部(比較画素領域抽出手段、位置導出手段、第一比較画素領域選択手段、第二比較画素領域選択手段、探索範囲設定手段)
6f 相関度導出部(相関度導出手段)
6g 相関度補正マップ
6h 相関度補正部(相関度補正手段)
6i 比較画素領域選択部(比較画素領域選択手段)
15 注目画素領域
20 比較画素領域
Claims (16)
- 順次取得される各フレーム画像でその位置が変化する被写体に対してブロックマッチングにより追従を行なう被写体追従手段を備えた撮像装置であって、
前記被写体追従手段は、
所定のフレーム画像から注目画素領域を抽出する注目画素領域抽出手段と、
現フレーム画像から、順次、所定の比較画素領域を抽出する比較画素領域抽出手段と、
前記比較画素領域抽出手段により抽出された各比較画素領域と前記注目画素領域抽出手段により抽出された注目画素領域との相関度を導出する相関度導出手段と、
前記相関度導出手段により導出された各相関度をその補正係数が予め設定されている相関度補正マップに基づいて補正して前記比較画素領域毎に補正相関度を導出する相関度補正手段と、
前記相関度補正手段により導出された補正相関度に基づいて、前記比較画素領域抽出手段により抽出された各比較画素領域から所定の比較画素領域を選択する比較画素領域選択手段と、を備え、
前記注目画素領域抽出手段は、所定の新たなフレーム画像が取得された場合に、前記比較画素領域選択手段により選択された比較画素領域を新たな注目画素領域として抽出することを特徴とする撮像装置。 - 前記注目画素領域抽出手段により抽出された注目画素領域の当該フレーム画像に対する位置を導出する位置導出手段と、
前記位置導出手段により導出された位置に基づいて、現フレーム画像における探索範囲を設定する探索範囲設定手段と、を更に備え、
前記比較画素領域抽出手段は、前記探索範囲設定手段により設定された探索範囲内で比較画素領域を抽出することを特徴とする請求項1記載の撮像装置。 - 前記探索範囲設定手段は、前記位置導出手段により導出された位置が、探索範囲の実質的な中央となるように探索範囲を設定することを特徴とする請求項2記載の撮像装置。
- 前記相関度補正マップは、前記探索範囲に対して周辺に位置する比較画素領域よりも中央側に位置する比較画素領域の方が、注目画素領域との相関度が高くなるように補正係数が設定されていることを特徴とする請求項3記載の撮像装置。
- 前記比較画素領域選択手段は、前記相関度補正手段により導出された補正相関度に基づいて、注目画素領域との相関度が高い比較画素領域を1領域選択することを特徴とする請求項2乃至4いずれかに記載の撮像装置。
- 前記比較画素領域選択手段は、
前記相関度補正手段により導出された補正相関度に基づいて、注目画素領域との相関度が高い比較画素領域を上位から所定数領域だけ選択する第一比較画素領域選択手段と、
前記第一比較画素領域選択手段により選択された比較画素領域から、前記探索範囲設定手段により設定された探索範囲の中央位置に最も近い位置にある比較画素領域を1領域選択する第二比較画素領域選択手段と、を備え、
前記注目画素領域抽出手段は、新たな現フレーム画像が取得された場合に、前記第二比較画素領域選択手段により選択された比較画素領域を新たな注目画素領域として抽出することを特徴とする請求項2乃至4いずれかに記載の撮像装置。 - 前記注目画素領域抽出手段は、
新たな現フレーム画像が取得される毎に、前記比較画素領域選択手段により選択された比較画素領域を新たな第一注目画素領域として抽出する第一注目画像領域抽出手段と、
新たな現フレーム画像が所定回数だけ取得される毎に、前記比較画素領域選択手段により選択された比較画素領域を新たな第二注目画素領域として抽出する第二注目画像領域抽出手段とを備え、
前記相関度導出手段は、前記比較画素領域抽出手段により抽出された各比較画素領域と前記第二注目画素領域抽出手段により抽出された第二注目画素領域との相関度を導出し、
前記相対位置導出手段は、前記第一注目画素領域抽出手段により抽出された第一注目画素領域の当該フレーム画像に対する相対位置を導出することを特徴とする請求項2乃至6いずれかに記載の撮像装置。 - 前記相関度導出手段は、前記注目画素領域の各画素データと前記比較画素領域の各画素データに基づいた差分2乗和として相関度を導出することを特徴とする請求項1乃至7いずれかに記載の撮像装置。
- 順次取得されるフレーム画像に基づいたブロックマッチングにより被写体追従する被写体追従手段を備えた撮像装置であって、
前記被写体追従手段は、
所定のフレーム画像から注目画素領域を抽出する注目画素領域抽出手段と、
現フレーム画像から、順次、所定の比較画素領域を抽出する比較画素領域抽出手段と、
前記比較画素領域抽出手段により抽出された各比較画素領域と前記注目画素領域抽出手段により抽出された注目画素領域との相関度を導出する相関度導出手段と、
前記相関度導出手段により導出された相関度に基づいて、前記注目画素領域抽出手段により抽出された注目画素領域と相関度の高い比較画素領域を上位から所定数領域選択する第一比較画素領域選択手段と、
前記注目画素領域抽出手段により抽出された注目画素領域の当該フレーム画像に対する位置を導出する位置導出手段と、
前記第一比較画素領域選択手段により選択された比較画素領域から、前記位置導出手段により導出された位置に最も近い位置にある比較画素領域を1領域選択する第二比較画素領域選択手段と、を備え、
前記注目画素領域抽出手段は、所定の新たなフレーム画像が取得された場合に、前記第二比較画素領域選択手段により選択された比較画素領域を新たな注目画素領域として抽出することを特徴とする撮像装置。 - 順次取得されるフレーム画像に基づいたブロックマッチングにより被写体追従する被写体追従手段を備えた撮像装置であって、
前記被写体追従手段は、
所定のフレーム画像から第一注目画素領域または第二注目画素領域を抽出する注目画素領域抽出手段と、
前記注目画素領域抽出手段により抽出された第一注目画素領域の当該フレーム画像に対する位置を導出する位置導出手段と、
前記位置導出手段により導出された位置に基づいて、現フレーム画像における探索範囲を設定する探索範囲設定手段と、
前記探索範囲設定手段により設定された探索範囲内から、順次、所定の比較画素領域を抽出する比較画素領域抽出手段と、
前記比較画素領域抽出手段により抽出された各比較画素領域と前記注目画素領域抽出手段により抽出された第二注目画素領域との相関度を導出する相関度導出手段と、
前記相関度導出手段により導出された相関度に基づいて、前記比較画素領域抽出手段により抽出された各比較画素領域から所定の比較画素領域を選択する比較画素領域選択手段と、を備え、
前記注目画素領域抽出手段は、新たな現フレーム画像が取得される毎に、前記比較画素領域選択手段により選択された比較画素領域を新たな第一注目画素領域として抽出するとともに、新たな現フレーム画像が所定回数だけ取得される毎に、前記比較画素領域選択手段により選択された比較画素領域を新たな第二注目画素領域として抽出することを特徴とする撮像装置。 - 順次取得される各フレーム画像でその位置が変化する被写体に対してブロックマッチングにより追従を行なう被写体追従工程を含む撮像方法であって、
前記被写体追従工程は、
所定のフレーム画像から注目画素領域を抽出する注目画素領域抽出工程と、
現フレーム画像から、順次、所定の比較画素領域を抽出する比較画素領域抽出工程と、
前記比較画素領域抽出工程により抽出された各比較画素領域と前記注目画素領域抽出工程により抽出された注目画素領域との相関度を導出する相関度導出工程と、
前記相関度導出工程により導出された各相関度をその補正係数が予め設定されている相関度補正マップに基づいて補正して前記比較画素領域毎に補正相関度を導出する相関度補正工程と、
前記相関度補正工程により導出された補正相関度に基づいて、前記比較画素領域抽出工程により抽出された各比較画素領域から所定の比較画素領域を選択する比較画素領域選択工程と、を含み、
前記注目画素領域抽出工程は、所定の新たなフレーム画像が取得された場合に、前記比較画素領域選択工程により選択された比較画素領域を新たな注目画素領域として抽出することを特徴とする撮像方法。 - 順次取得されるフレーム画像に基づいたブロックマッチングにより被写体追従する被写体追従工程を含む撮像方法であって、
前記被写体追従工程は、
所定のフレーム画像から注目画素領域を抽出する注目画素領域抽出工程と、
現フレーム画像から、順次、所定の比較画素領域を抽出する比較画素領域抽出工程と、
前記比較画素領域抽出工程により抽出された各比較画素領域と前記注目画素領域抽出工程により抽出された注目画素領域との相関度を導出する相関度導出工程と、
前記相関度導出工程により導出された相関度に基づいて、前記注目画素領域抽出工程により抽出された注目画素領域と相関度の高い比較画素領域を上位から所定数領域選択する第一比較画素領域選択工程と、
前記注目画素領域抽出工程により抽出された注目画素領域の当該フレーム画像に対する位置を導出する位置導出工程と、
前記第一比較画素領域選択工程により選択された比較画素領域から、前記位置導出工程により導出された位置に最も近い位置にある比較画素領域を1領域選択する第二比較画素領域選択工程と、を含み、
前記注目画素領域抽出工程は、所定の新たなフレーム画像が取得された場合に、前記第二比較画素領域選択工程により選択された比較画素領域を新たな注目画素領域として抽出することを特徴とする撮像方法。 - 順次取得されるフレーム画像に基づいたブロックマッチングにより被写体追従する被写体追従工程を含む撮像方法であって、
前記被写体追従工程は、
所定のフレーム画像から第一注目画素領域または第二注目画素領域を抽出する注目画素領域抽出工程と、
前記注目画素領域抽出工程により抽出された第一注目画素領域の当該フレーム画像に対する位置を導出する位置導出工程と、
前記位置導出工程により導出された位置に基づいて、現フレーム画像における探索範囲を設定する探索範囲設定工程と、
前記探索範囲設定工程により設定された探索範囲内から、順次、所定の比較画素領域を抽出する比較画素領域抽出工程と、
前記比較画素領域抽出工程により抽出された各比較画素領域と前記注目画素領域抽出工程により抽出された第二注目画素領域との相関度を導出する相関度導出工程と、
前記相関度導出工程により導出された相関度に基づいて、前記比較画素領域抽出工程により抽出された各比較画素領域から所定の比較画素領域を選択する比較画素領域選択工程と、を含み、
前記注目画素領域抽出工程は、新たな現フレーム画像が取得される毎に、前記比較画素領域選択工程により選択された比較画素領域を新たな第一注目画素領域として抽出するとともに、新たな現フレーム画像が所定回数だけ取得される毎に、前記比較画素領域選択工程により選択された比較画素領域を新たな第二注目画素領域として抽出することを特徴とする撮像方法。 - 順次取得される各フレーム画像でその位置が変化する被写体に対してブロックマッチングにより追従を行なう被写体追従手段をコンピュータに実現させるための撮像プログラムであって、
前記被写体追従手段は、
所定のフレーム画像から注目画素領域を抽出する注目画素領域抽出手段と、
現フレーム画像から、順次、所定の比較画素領域を抽出する比較画素領域抽出手段と、
前記比較画素領域抽出手段により抽出された各比較画素領域と前記注目画素領域抽出手段により抽出された注目画素領域との相関度を導出する相関度導出手段と、
前記相関度導出手段により導出された各相関度をその補正係数が予め設定されている相関度補正マップに基づいて補正して前記比較画素領域毎に補正相関度を導出する相関度補正手段と、
前記相関度補正手段により導出された補正相関度に基づいて、前記比較画素領域抽出手段により抽出された各比較画素領域から所定の比較画素領域を選択する比較画素領域選択手段と、を備え、
前記注目画素領域抽出手段は、所定の新たなフレーム画像が取得された場合に、前記比較画素領域選択手段により選択された比較画素領域を新たな注目画素領域として抽出することを特徴とする撮像プログラム。 - 順次取得されるフレーム画像に基づいたブロックマッチングにより被写体追従する被写体追従手段をコンピュータに実現させるための撮像プログラムであって、
前記被写体追従手段は、
所定のフレーム画像から注目画素領域を抽出する注目画素領域抽出手段と、
現フレーム画像から、順次、所定の比較画素領域を抽出する比較画素領域抽出手段と、
前記比較画素領域抽出手段により抽出された各比較画素領域と前記注目画素領域抽出手段により抽出された注目画素領域との相関度を導出する相関度導出手段と、
前記相関度導出手段により導出された相関度に基づいて、前記注目画素領域抽出手段により抽出された注目画素領域と相関度の高い比較画素領域を上位から所定数領域選択する第一比較画素領域選択手段と、
前記注目画素領域抽出手段により抽出された注目画素領域の当該フレーム画像に対する位置を導出する位置導出手段と、
前記第一比較画素領域選択手段により選択された比較画素領域から、前記位置導出手段により導出された位置に最も近い位置にある比較画素領域を1領域選択する第二比較画素領域選択手段と、を備え、
前記注目画素領域抽出手段は、所定の新たなフレーム画像が取得された場合に、前記第二比較画素領域選択手段により選択された比較画素領域を新たな注目画素領域として抽出することを特徴とする撮像プログラム。 - 順次取得されるフレーム画像に基づいたブロックマッチングにより被写体追従する被写体追従手段をコンピュータに実現させるための撮像プログラムであって、
前記被写体追従手段は、
所定のフレーム画像から第一注目画素領域または第二注目画素領域を抽出する注目画素領域抽出手段と、
前記注目画素領域抽出手段により抽出された第一注目画素領域の当該フレーム画像に対する位置を導出する位置導出手段と、
前記位置導出手段により導出された位置に基づいて、現フレーム画像における探索範囲を設定する探索範囲設定手段と、
前記探索範囲設定手段により設定された探索範囲内から、順次、所定の比較画素領域を抽出する比較画素領域抽出手段と、
前記比較画素領域抽出手段により抽出された各比較画素領域と前記注目画素領域抽出手段により抽出された第二注目画素領域との相関度を導出する相関度導出手段と、
前記相関度導出手段により導出された相関度に基づいて、前記比較画素領域抽出手段により抽出された各比較画素領域から所定の比較画素領域を選択する比較画素領域選択手段と、を備え、
前記注目画素領域抽出手段は、新たな現フレーム画像が取得される毎に、前記比較画素領域選択手段により選択された比較画素領域を新たな第一注目画素領域として抽出するとともに、新たな現フレーム画像が所定回数だけ取得される毎に、前記比較画素領域選択手段により選択された比較画素領域を新たな第二注目画素領域として抽出することを特徴とする撮像プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011094000A JP5278483B2 (ja) | 2011-04-20 | 2011-04-20 | 撮像装置、撮像方法及び撮像プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011094000A JP5278483B2 (ja) | 2011-04-20 | 2011-04-20 | 撮像装置、撮像方法及び撮像プログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006201682A Division JP4807623B2 (ja) | 2006-07-25 | 2006-07-25 | 撮像装置、撮像方法及び撮像プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011193496A true JP2011193496A (ja) | 2011-09-29 |
JP5278483B2 JP5278483B2 (ja) | 2013-09-04 |
Family
ID=44797867
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011094000A Active JP5278483B2 (ja) | 2011-04-20 | 2011-04-20 | 撮像装置、撮像方法及び撮像プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5278483B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013161134A1 (ja) * | 2012-04-25 | 2013-10-31 | Necカシオモバイルコミュニケーションズ株式会社 | 電子機器、その制御方法及び制御プログラムが格納された非一時的なコンピュータ可読媒体 |
JP2020018000A (ja) * | 2019-10-16 | 2020-01-30 | リコーイメージング株式会社 | 撮影機能を有する装置、この装置が実行する方法及びこの方法をコンピュータに実行させるためのプログラム |
JP2021077082A (ja) * | 2019-11-08 | 2021-05-20 | Kddi株式会社 | 物体追跡装置及び方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10123229A (ja) * | 1996-10-21 | 1998-05-15 | Mitsubishi Electric Corp | 画像追尾装置 |
JP2000123150A (ja) * | 1998-10-14 | 2000-04-28 | Nec Corp | 追跡用テンプレートの更新方法及び装置 |
JP2005312018A (ja) * | 2004-03-23 | 2005-11-04 | Canon Inc | 監視システム、撮像制御装置、撮像設定装置、制御方法、及びプログラム |
JP2007208425A (ja) * | 2006-01-31 | 2007-08-16 | Canon Inc | 識別領域を示す表示を画像と共に表示させる表示方法、コンピュータ装置に実行させるプログラム、および、撮像装置 |
-
2011
- 2011-04-20 JP JP2011094000A patent/JP5278483B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10123229A (ja) * | 1996-10-21 | 1998-05-15 | Mitsubishi Electric Corp | 画像追尾装置 |
JP2000123150A (ja) * | 1998-10-14 | 2000-04-28 | Nec Corp | 追跡用テンプレートの更新方法及び装置 |
JP2005312018A (ja) * | 2004-03-23 | 2005-11-04 | Canon Inc | 監視システム、撮像制御装置、撮像設定装置、制御方法、及びプログラム |
JP2007208425A (ja) * | 2006-01-31 | 2007-08-16 | Canon Inc | 識別領域を示す表示を画像と共に表示させる表示方法、コンピュータ装置に実行させるプログラム、および、撮像装置 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013161134A1 (ja) * | 2012-04-25 | 2013-10-31 | Necカシオモバイルコミュニケーションズ株式会社 | 電子機器、その制御方法及び制御プログラムが格納された非一時的なコンピュータ可読媒体 |
JP2020018000A (ja) * | 2019-10-16 | 2020-01-30 | リコーイメージング株式会社 | 撮影機能を有する装置、この装置が実行する方法及びこの方法をコンピュータに実行させるためのプログラム |
JP2021077082A (ja) * | 2019-11-08 | 2021-05-20 | Kddi株式会社 | 物体追跡装置及び方法 |
JP7365862B2 (ja) | 2019-11-08 | 2023-10-20 | Kddi株式会社 | 物体追跡装置及び方法 |
Also Published As
Publication number | Publication date |
---|---|
JP5278483B2 (ja) | 2013-09-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9674467B2 (en) | Image processing device, imaging device, image processing method, and image processing program | |
JP6271990B2 (ja) | 画像処理装置、画像処理方法 | |
JP4974812B2 (ja) | 電子カメラ | |
JP2008009263A (ja) | 撮像装置及びそのプログラム | |
CN107850753B (zh) | 检测设备、检测方法、检测程序和成像设备 | |
JP2009225072A (ja) | 撮像装置 | |
KR101728042B1 (ko) | 디지털 촬영 장치 및 이의 제어 방법 | |
JP2013183306A (ja) | 撮像装置、撮像方法、及びプログラム | |
JP2011217103A (ja) | 複眼撮影方法および装置 | |
US10412321B2 (en) | Imaging apparatus and image synthesis method | |
JP6300076B2 (ja) | 撮像装置、撮像方法及びプログラム | |
KR101797040B1 (ko) | 디지털 촬영 장치 및 이의 제어 방법 | |
JP4807623B2 (ja) | 撮像装置、撮像方法及び撮像プログラム | |
JP5278483B2 (ja) | 撮像装置、撮像方法及び撮像プログラム | |
JP4807582B2 (ja) | 画像処理装置、撮像装置及びそのプログラム | |
JP6172973B2 (ja) | 画像処理装置 | |
JP2008090059A (ja) | 撮像装置およびそのオートフォーカス制御方法 | |
JP6645711B2 (ja) | 画像処理装置、画像処理方法、プログラム | |
JP4716266B2 (ja) | 画像処理装置、撮像装置及びそのプログラム | |
JP5800600B2 (ja) | 撮像装置、撮像方法およびプログラム | |
JP7030565B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP5315019B2 (ja) | オートフォーカス装置、オートフォーカス方法及び撮像装置 | |
JP2015185870A (ja) | 画像処理装置、画像処理方法、及び画像処理装置のプログラム | |
JP2012257157A (ja) | 画像合成装置 | |
JP6525692B2 (ja) | 画像処理装置、その制御方法、および制御プログラム、並びに撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20121101 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121127 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130125 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130423 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130506 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 5278483 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |