JP2015176488A - 情報処理装置及びその制御方法、プログラム - Google Patents
情報処理装置及びその制御方法、プログラム Download PDFInfo
- Publication number
- JP2015176488A JP2015176488A JP2014053987A JP2014053987A JP2015176488A JP 2015176488 A JP2015176488 A JP 2015176488A JP 2014053987 A JP2014053987 A JP 2014053987A JP 2014053987 A JP2014053987 A JP 2014053987A JP 2015176488 A JP2015176488 A JP 2015176488A
- Authority
- JP
- Japan
- Prior art keywords
- divided
- reliability
- motion
- motion vector
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Analysis (AREA)
Abstract
Description
時間的に連続する画像を処理する情報処理装置であって、
基準画像に続く処理対象画像を複数の分割領域に分割する分割手段と、
前記分割手段で分割した前記分割領域に含まれる動きベクトルを取得する取得手段と、
前記取得手段で取得した前記分割領域の動きベクトルから、該分割領域の信頼度を算出する算出手段と、
前記算出手段で算出した信頼度に基づいて、前記複数の分割領域の内、信頼度が高い高信頼度の分割領域を抽出する抽出手段と、
前記抽出手段で抽出した分割領域に含まれる動きベクトルを用いて、前記処理対象画像における前記基準画像からの動きを示す動きパラメータを推定する推定手段と
を備える。
実施形態1では、画像の位置合わせを行うために、時間的に連続する画像から複数の動きベクトルを算出し、これらの動きベクトルから画像全体の動きを表現する動きパラメータを算出する構成について説明する。実施形態1は、画像全体の動き(例えば、位置ズレ)を表現する動きパラメータとして、カメラのパン、チルト、光軸回転を表現する回転行列(非特許文献1参照)を算出することとし、連続する画像からこの回転行列を推定して、画像に対して電子防振処理を行う応用例として説明する。
I={9,13,15,4,14,19,8,5,10,3,7,18,20}
となる。R1dが小さいということは信頼度が高いということであり、集合Iは、動きベクトルの信頼性が高い分割領域のインデックスの集合といえる。尚、実施形態1では、所定値として、全体の67%以下となるインデックスdを抽出しているが、これに限定されない。
実施形態2では、連続する画像から回転行列を推定して電子防振処理を行う構成について説明する。実施形態2では、実施形態1の図3のフローチャート(変換行列の推定処理)に対し、類似動きベクトルを抽出するステップを追加している。この類似動きベクトルを抽出するステップを含む変換行列の推定処理について、図6を参照して説明する。他の処理は、実施形態1に準ずるものとする。
実施形態3では、連続する画像から回転行列を推定して電子防振処理を行う構成について説明する。実施形態3は、実施形態1に対し計算式が異なる変形例である。
実施形態4では、撮像装置200のレンズの制御状態に応じて、処理内容を切り替えて、回転行列を推定して、電子防振処理を行う構成について説明する。
実施形態5では、インテリジェントな領域分割を用いて分割領域毎に代表ベクトルを算出する構成について説明する。
実施形態6では、連続する画像から回転行列を推定して電子防振処理を行う構成について説明する。実施形態6では、実施形態2に対し計算式が異なる変形例である。
Claims (13)
- 時間的に連続する画像を処理する情報処理装置であって、
基準画像に続く処理対象画像を複数の分割領域に分割する分割手段と、
前記分割手段で分割した前記分割領域に含まれる動きベクトルを取得する取得手段と、
前記取得手段で取得した前記分割領域の動きベクトルから、該分割領域の信頼度を算出する算出手段と、
前記算出手段で算出した信頼度に基づいて、前記複数の分割領域の内、信頼度が高い高信頼度の分割領域を抽出する抽出手段と、
前記抽出手段で抽出した分割領域に含まれる動きベクトルを用いて、前記処理対象画像における前記基準画像からの動きを示す動きパラメータを推定する推定手段と
を備えることを特徴とする情報処理装置。 - 前記抽出手段は、前記複数の分割領域それぞれに対して、前記算出手段で算出される信頼度の内、上位から一定数の信頼度の分割領域を、前記高信頼度の分割領域として抽出する
ことを特徴とする請求項1に記載の情報処理装置。 - 前記抽出手段は、前記複数の分割領域それぞれに対して、前記算出手段で算出される複数の信頼度の内、信頼度が閾値よりも高い分割領域を、前記高信頼度の分割領域として抽出する
ことを特徴とする請求項1に記載の情報処理装置。 - 前記閾値は、前記算出手段で算出される複数の信頼度を母集団とする統計処理によって決定される
ことを特徴とする請求項3に記載の情報処理装置。 - 前記母集団は、過去の所定数の画像に対して前記算出手段で算出される信頼度を更に含む
ことを特徴とする請求項4に記載の情報処理装置。 - 前記信頼度は、前記分割領域に含まれる動きベクトルの分散である
ことを特徴とする請求項1乃至5のいずれか1項に記載の情報処理装置。 - 前記信頼度は、前記分割領域に含まれる動きベクトルと、代表ベクトルとの差から計算される
ことを特徴とする請求項1乃至5のいずれか1項に記載の情報処理装置。 - 前記信頼度は、前記分割領域に含まれる動きベクトルと前記分割領域を代表する動きベクトルである代表ベクトルとの差が第二の閾値以内の動きベクトルの比率である
ことを特徴とする請求項1乃至5のいずれか1項に記載の情報処理装置。 - 前記信頼度は、前記分割領域に含まれる動きベクトルと前記分割領域を代表する動きベクトルである代表ベクトルとの差が第三の閾値以内のベクトルの比率が特定の範囲に収まる場合の前記第三の閾値である
ことを特徴とする請求項1乃至5のいずれか1項に記載の情報処理装置。 - 前記画像を入力する撮像装置の光学素子の制御状態を判定する判定手段と、
前記判定手段の判定の結果、前記光学素子が制御中である場合は、前記推定手段は、前記処理対象画像に含まれる動きベクトルを用いて、前記処理対象画像における前記基準画像からの動きを示す動きパラメータを推定し、
前記判定手段の判定の結果、前記光学素子が制御中でない場合は、前記抽出手段で抽出した分割領域に含まれる動きベクトルを用いて、前記処理対象画像における前記基準画像からの動きを示す動きパラメータを推定する
ことを特徴とする請求項1乃至9のいずれか1項に記載の情報処理装置。 - 前記分割領域は、前記処理対象画像をオブジェクト単位で分割した領域である
ことを特徴とする請求項1乃至10のいずれか1項に記載の情報処理装置。 - 時間的に連続する画像を処理する情報処理装置の制御方法であって、
基準画像に続く処理対象画像を複数の分割領域に分割する分割工程と、
前記分割工程で分割した前記分割領域に含まれる動きベクトルを取得する取得工程と、
前記取得工程で取得した前記分割領域の動きベクトルから、該分割領域の信頼度を算出する算出工程と、
前記算出工程で算出した信頼度に基づいて、前記複数の分割領域の内、信頼度が高い高信頼度の分割領域を抽出する抽出工程と、
前記抽出工程で抽出した分割領域に含まれる動きベクトルを用いて、前記処理対象画像における前記基準画像からの動きを示す動きパラメータを推定する推定工程と
を備えることを特徴とする情報処理装置の制御方法。 - 時間的に連続する画像を処理する情報処理装置の制御をコンピュータに機能させるためのプログラムであって、
前記コンピュータを、
基準画像に続く処理対象画像を複数の分割領域に分割する分割手段と、
前記分割手段で分割した前記分割領域に含まれる動きベクトルを取得する取得手段と、
前記取得手段で取得した前記分割領域の動きベクトルから、該分割領域の信頼度を算出する算出手段と、
前記算出手段で算出した信頼度に基づいて、前記複数の分割領域の内、信頼度が高い高信頼度の分割領域を抽出する抽出手段と、
前記抽出手段で抽出した分割領域に含まれる動きベクトルを用いて、前記処理対象画像における前記基準画像からの動きを示す動きパラメータを推定する推定手段と
して機能させることを特徴とするプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014053987A JP6341708B2 (ja) | 2014-03-17 | 2014-03-17 | 情報処理装置及びその制御方法、プログラム |
US14/508,096 US10051274B2 (en) | 2013-10-25 | 2014-10-07 | Image processing apparatus, method of calculating information according to motion of frame, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014053987A JP6341708B2 (ja) | 2014-03-17 | 2014-03-17 | 情報処理装置及びその制御方法、プログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2015176488A true JP2015176488A (ja) | 2015-10-05 |
JP2015176488A5 JP2015176488A5 (ja) | 2017-03-16 |
JP6341708B2 JP6341708B2 (ja) | 2018-06-13 |
Family
ID=54255595
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014053987A Active JP6341708B2 (ja) | 2013-10-25 | 2014-03-17 | 情報処理装置及びその制御方法、プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6341708B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021086257A (ja) * | 2019-11-26 | 2021-06-03 | 株式会社デンソーテン | 画像処理装置、および、画像処理方法 |
JP2021086258A (ja) * | 2019-11-26 | 2021-06-03 | 株式会社デンソーテン | 姿勢推定装置、および、姿勢推定方法 |
CN114222529A (zh) * | 2019-12-26 | 2022-03-22 | 株式会社日立高新技术 | 计测装置及计测方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05122591A (ja) * | 1991-10-24 | 1993-05-18 | Sanyo Electric Co Ltd | 手ブレ補正機能付きビデオカメラの動きベクトル特定回路 |
JP2005244780A (ja) * | 2004-02-27 | 2005-09-08 | Matsushita Electric Ind Co Ltd | 撮像装置 |
JP2008072665A (ja) * | 2006-09-15 | 2008-03-27 | Ntt Docomo Inc | 映像評価装置、映像フレームレート決定装置、映像評価方法、映像フレームレート決定方法、映像評価プログラム及び映像フレームレート決定プログラム |
US20090231446A1 (en) * | 2008-03-12 | 2009-09-17 | Micron Technology, Inc. | Method and apparatus for reducing motion blur in digital images |
JP2010118822A (ja) * | 2008-11-12 | 2010-05-27 | Victor Co Of Japan Ltd | 手ぶれ補正装置及び手ぶれ補正方法 |
-
2014
- 2014-03-17 JP JP2014053987A patent/JP6341708B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05122591A (ja) * | 1991-10-24 | 1993-05-18 | Sanyo Electric Co Ltd | 手ブレ補正機能付きビデオカメラの動きベクトル特定回路 |
JP2005244780A (ja) * | 2004-02-27 | 2005-09-08 | Matsushita Electric Ind Co Ltd | 撮像装置 |
JP2008072665A (ja) * | 2006-09-15 | 2008-03-27 | Ntt Docomo Inc | 映像評価装置、映像フレームレート決定装置、映像評価方法、映像フレームレート決定方法、映像評価プログラム及び映像フレームレート決定プログラム |
US20090231446A1 (en) * | 2008-03-12 | 2009-09-17 | Micron Technology, Inc. | Method and apparatus for reducing motion blur in digital images |
JP2010118822A (ja) * | 2008-11-12 | 2010-05-27 | Victor Co Of Japan Ltd | 手ぶれ補正装置及び手ぶれ補正方法 |
Non-Patent Citations (1)
Title |
---|
森村 淳、外4名: ""ビデオカメラの手揺れ補正技術"", 画像電子学会誌, vol. 21, no. 2, JPN6018003342, 25 April 1992 (1992-04-25), JP, pages 132 - 140, ISSN: 0003777066 * |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021086257A (ja) * | 2019-11-26 | 2021-06-03 | 株式会社デンソーテン | 画像処理装置、および、画像処理方法 |
JP2021086258A (ja) * | 2019-11-26 | 2021-06-03 | 株式会社デンソーテン | 姿勢推定装置、および、姿勢推定方法 |
JP7311406B2 (ja) | 2019-11-26 | 2023-07-19 | 株式会社デンソーテン | 画像処理装置、および、画像処理方法 |
JP7311407B2 (ja) | 2019-11-26 | 2023-07-19 | 株式会社デンソーテン | 姿勢推定装置、および、姿勢推定方法 |
CN114222529A (zh) * | 2019-12-26 | 2022-03-22 | 株式会社日立高新技术 | 计测装置及计测方法 |
CN114222529B (zh) * | 2019-12-26 | 2023-11-14 | 株式会社日立高新技术 | 计测装置及计测方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6341708B2 (ja) | 2018-06-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110248096B (zh) | 对焦方法和装置、电子设备、计算机可读存储介质 | |
US10051274B2 (en) | Image processing apparatus, method of calculating information according to motion of frame, and storage medium | |
US9275464B2 (en) | Method for determining the extent of a foreground object in an image | |
US10915998B2 (en) | Image processing method and device | |
US9773192B2 (en) | Fast template-based tracking | |
CN109598744B (zh) | 一种视频跟踪的方法、装置、设备和存储介质 | |
JP2014010621A (ja) | 最適画像サイズによる画像領域分割装置、方法、およびプログラム | |
US9536169B2 (en) | Detection apparatus, detection method, and storage medium | |
US10586099B2 (en) | Information processing apparatus for tracking processing | |
JP6341708B2 (ja) | 情報処理装置及びその制御方法、プログラム | |
CN111612696A (zh) | 图像拼接方法、装置、介质及电子设备 | |
JP2019012359A (ja) | 情報処理装置、プログラム及び情報処理方法 | |
JP6235860B2 (ja) | 情報処理装置及びその制御方法、プログラム | |
US11908144B2 (en) | Image processing apparatus, method, and medium using degrees of reliability and similarity in motion vectors | |
JP7118729B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
US9270883B2 (en) | Image processing apparatus, image pickup apparatus, image pickup system, image processing method, and non-transitory computer-readable storage medium | |
KR101458099B1 (ko) | 흔들림 영상 안정화 방법 및 이를 적용한 영상 처리 장치 | |
KR102630546B1 (ko) | 하천의 영상 정보를 활용한 인공지능 기반의 하천 수위 및 유속 계측 방법 및 장치 | |
JP6381212B2 (ja) | 撮像装置及びその制御方法 | |
JP6525693B2 (ja) | 画像処理装置及び画像処理方法 | |
JP2018072942A (ja) | 画像処理装置、画像処理方法、プログラム、記憶媒体 | |
JP6751663B2 (ja) | 画像処理装置、画像処理方法 | |
JP2016126576A (ja) | 画像処理装置、画像処理方法 | |
JP2017098900A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP6194677B2 (ja) | 画像処理装置およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170207 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170207 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180125 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180202 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180328 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180416 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180515 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6341708 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |