JP2014071664A - 画像処理装置及び画像処理方法 - Google Patents
画像処理装置及び画像処理方法 Download PDFInfo
- Publication number
- JP2014071664A JP2014071664A JP2012217219A JP2012217219A JP2014071664A JP 2014071664 A JP2014071664 A JP 2014071664A JP 2012217219 A JP2012217219 A JP 2012217219A JP 2012217219 A JP2012217219 A JP 2012217219A JP 2014071664 A JP2014071664 A JP 2014071664A
- Authority
- JP
- Japan
- Prior art keywords
- saliency
- motion
- image
- value
- input image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Analysis (AREA)
Abstract
【解決手段】本発明は、動画像を構成する入力画像における各画素の特徴量に基づいて顕著性値を求める顕著性算出手段と、入力画像の顕著性値と過去の画像の顕著性値とに基づいて、時間的に変化する時間変化顕著性値を求める時間変化顕著性算出手段と、過去の画像を参照して、入力画像を分割した各領域の動きの顕著性を示す動き顕著性値を算出する動き顕著性算出手段と、顕著性算出手段による顕著性値と、時間変化顕著性値と、動き顕著性値とに基づいて、動画像におけるオブジェクトの動きを反映させた統合顕著性値を求める統合顕著性算出手段とを備えることを特徴とする画像処理装置である。
【選択図】 図1
Description
以下、本発明の画像処理装置及び画像処理方法の実施形態を、図面を参照しながら詳細に説明する。
図1は、実施形態に係る画像処理装置200の機能を示す機能ブロック図である。
次に、この実施形態の画像処理装置200による動画像の顕著性値を算出する処理の動作を説明する。
そして、輝度色味顕著性算出部202は、各スケール画像間の輝度の差分を求める。このとき、各スケール画像の大きさはバラバラなので、輝度色味顕著性算出部202は、サイズの小さい側を大きい側に合わせて伸張させた上でピクセル毎に差分を求める。サイズの大きい側は、中心(Center)の画素、サイズの小さい側は中心の画素とその周辺(Surround)の画素を含む平均を表す。輝度色味顕著性算出部202は、輝度に対する差異I(c,s)=|I(c)−I(s)|で求めることができる。
BY(c,s)=|{B(c)−Y(c)}−{Y(s)−B(s)}|…(4)
次に、輝度色味顕著性算出部202は、例えばガウスフィルタ(例えばカボールフィルタ等)を用いて、回転角θ=0°、45°、90°、135°の4方向に対して畳み込み積分を行う。輝度色味顕著性算出部202は、方向性のCenter−Surroundスケール間の差分が方向性コントラストO(c,s,θ)を求める。
M(t)=|I(t)−I(t−τ)| …(6)
ここで、τは遅延時間を示す。式(6)は、時刻tにキャプチャーした入力画像と、蓄積部204に蓄積されている所定時間だけ過去の入力画像との輝度の差分量である。
以上のように、この実施形態によれば、従来の時間的に変化する顕著性値に、さらに、周辺領域と異なる動きをしている領域に対して、その領域の動きの量に応じた顕著性値を上乗せすることにより、顕著性値の精度を向上させることができる。
上述した実施形態でも、本発明の種々の変形実施形態を説明したが、以下の他の変形実施形態も本発明は適用することができる。
Claims (6)
- 動画像を構成する入力画像における各画素の特徴量に基づいて顕著性値を求める顕著性算出手段と、
上記入力画像の顕著性値と過去の画像の顕著性値とに基づいて、時間的に変化する時間変化顕著性値を求める時間変化顕著性算出手段と、
過去の画像を参照して、上記入力画像を分割した各領域の動きの顕著性を示す動き顕著性値を算出する動き顕著性算出手段と、
上記顕著性算出手段による上記顕著性値と、上記時間変化顕著性値と、上記動き顕著性値とに基づいて、動画像におけるオブジェクトの動きを反映させた統合顕著性値を求める統合顕著性算出手段と
を備えることを特徴とする画像処理装置。 - 上記動き顕著性算出手段が、
上記入力画像を複数の領域に分割し、過去の画像を参照して、上記入力画像における各領域の動き探索を行う動き探索部と、
上記動き探索部による上記各領域の動き探索結果を取得し、上記入力画像における対象領域と1又は複数の周辺領域との動きベクトルの差分量に基づいて、対象領域の動き顕著性値を求める動き顕著性算出部と
を有することを特徴とする請求項1に記載の画像処理装置。 - 上記動き顕著性算出部が、上記入力画像における対象領域の動きベクトルと、複数の周辺領域のそれぞれの動きベクトルとの差分量の総和に基づいて上記動き顕著性値を求めるものであることを特徴とする請求項2に記載の画像処理装置。
- 上記動き顕著性算出部が、上記入力画像における対象領域と、それぞれの周辺領域との距離に応じた重みを、対象領域の動きベクトルと各周辺領域の動きベクトルとの差分量に付与して上記動き顕著性値を求めるものであることを特徴とする請求項2又は3に記載の画像処理装置。
- 上記動き顕著性算出部が、上記入力画像における対象領域と周辺領域との距離が閾値を超える場合、対象領域の動きベクトルと当該周辺領域の動きベクトルとの差分量を削除することを特徴とする請求項2〜4のいずれかに記載の画像処理装置。
- 動画像の顕著性を求める画像処理方法において、
顕著性算出手段が、動画像を構成する入力画像における各画素の特徴量に基づいて顕著性値を求める顕著性算出工程と、
時間変化顕著性算出手段が、上記入力画像の顕著性値と過去の画像の顕著性値とに基づいて、時間的に変化する時間変化顕著性値を求める時間変化顕著性算出工程と、
動き顕著性算出手段が、過去の画像を参照して、上記入力画像を分割した各領域の動きの顕著性を示す動き顕著性値を算出する動き顕著性算出工程と、
統合顕著性算出手段が、上記顕著性算出手段による上記顕著性値と、上記時間変化顕著性値と、上記動き顕著性値とに基づいて、動画像におけるオブジェクトの動きを反映させた統合顕著性値を求める統合顕著性算出工程と
を有することを特徴とする画像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012217219A JP6044234B2 (ja) | 2012-09-28 | 2012-09-28 | 画像処理装置及び画像処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012217219A JP6044234B2 (ja) | 2012-09-28 | 2012-09-28 | 画像処理装置及び画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014071664A true JP2014071664A (ja) | 2014-04-21 |
JP6044234B2 JP6044234B2 (ja) | 2016-12-14 |
Family
ID=50746810
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012217219A Active JP6044234B2 (ja) | 2012-09-28 | 2012-09-28 | 画像処理装置及び画像処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6044234B2 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006005650A (ja) * | 2004-06-17 | 2006-01-05 | Toshiba Corp | 画像符号化装置及び方法 |
WO2012105196A1 (ja) * | 2011-02-04 | 2012-08-09 | パナソニック株式会社 | 関心度推定装置および関心度推定方法 |
-
2012
- 2012-09-28 JP JP2012217219A patent/JP6044234B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006005650A (ja) * | 2004-06-17 | 2006-01-05 | Toshiba Corp | 画像符号化装置及び方法 |
WO2012105196A1 (ja) * | 2011-02-04 | 2012-08-09 | パナソニック株式会社 | 関心度推定装置および関心度推定方法 |
Non-Patent Citations (1)
Title |
---|
JPN6016014125; 山田健太郎 外5名: '一人称視点における視覚的顕著性マップモデルの性能評価' 電子情報通信学会技術研究報告 HIP2010-79 - HIP2010-95 ヒューマン情報処理 第110巻 第422号, 20110214, 第81-86頁, 社団法人電子情報通信学会 * |
Also Published As
Publication number | Publication date |
---|---|
JP6044234B2 (ja) | 2016-12-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11423695B2 (en) | Face location tracking method, apparatus, and electronic device | |
JP6501092B2 (ja) | オブジェクトセグメンテーションのための前景マスク補正のための画像処理装置及び方法 | |
US9405960B2 (en) | Face hallucination using convolutional neural networks | |
US9619708B2 (en) | Method of detecting a main subject in an image | |
EP3186780B1 (en) | System and method for image scanning | |
US9710698B2 (en) | Method, apparatus and computer program product for human-face features extraction | |
US7382902B2 (en) | Evaluation of the definition of an eye iris image | |
US20190220685A1 (en) | Image processing apparatus that identifies object and method therefor | |
CN110493488B (zh) | 视频稳像方法、视频稳像装置和计算机可读存储介质 | |
CN110264493A (zh) | 一种针对运动状态下的多目标对象追踪方法和装置 | |
JP2019057815A (ja) | 監視システム | |
US8774519B2 (en) | Landmark detection in digital images | |
WO2018068129A1 (en) | Determining variance of a block of an image based on a motion vector for the block | |
US20130342559A1 (en) | Temporally consistent superpixels | |
CN116051736A (zh) | 一种三维重建方法、装置、边缘设备和存储介质 | |
CN108647605B (zh) | 一种结合全局颜色与局部结构特征的人眼凝视点提取方法 | |
US12029483B2 (en) | System and method for finding an area of an eye from a facial image | |
CN111611836A (zh) | 基于背景消除法的船只检测模型训练及船只跟踪方法 | |
RU2647645C1 (ru) | Способ устранения швов при создании панорамных изображений из видеопотока кадров в режиме реального времени | |
JP6044234B2 (ja) | 画像処理装置及び画像処理方法 | |
JP5786838B2 (ja) | 画像領域分割装置、方法、およびプログラム | |
CN108062741B (zh) | 双目图像处理方法、成像装置和电子设备 | |
JP2008102589A (ja) | 動画像処理装置および動画像処理方法ならびに動画像処理プログラム | |
Rahman et al. | Real-time face-based auto-focus for digital still and cell-phone cameras | |
JP2021009493A (ja) | 画像処理装置、画像処理装置の制御方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150515 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160407 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160419 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160615 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20161018 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161031 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6044234 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |