JP5613016B2 - 動画追尾装置、動画追尾方法および動画追尾プログラム - Google Patents
動画追尾装置、動画追尾方法および動画追尾プログラム Download PDFInfo
- Publication number
- JP5613016B2 JP5613016B2 JP2010244704A JP2010244704A JP5613016B2 JP 5613016 B2 JP5613016 B2 JP 5613016B2 JP 2010244704 A JP2010244704 A JP 2010244704A JP 2010244704 A JP2010244704 A JP 2010244704A JP 5613016 B2 JP5613016 B2 JP 5613016B2
- Authority
- JP
- Japan
- Prior art keywords
- tracking
- image
- frames
- displayed
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Exposure Control For Cameras (AREA)
- Studio Devices (AREA)
Description
さらに、ユーザは、追尾動作の停止または終了後に、逆再生を指示することにより所望のフレームの画像を新たな初期画像として表示させることができる。これにより、ユーザは、各フレームの画像およびシンボルを見ながら、追尾が最初に失敗したフレームの画像を容易に見つけることができる。したがって、追尾が失敗した最初のフレームの画像または追尾が失敗した直前のフレームの画像から追尾動作を容易に再開することができる。
さらに、ユーザは、第1または第2の追尾動作の停止または終了後に、逆再生を指示することにより所望のフレームの画像を新たな初期画像として表示させることができる。これにより、ユーザは、各フレームの画像およびシンボルを見ながら、追尾が最初に失敗したフレームの画像を容易に見つけることができる。したがって、追尾が失敗した最初のフレームの画像または追尾が失敗した直前のフレームの画像から追尾動作を容易に再開することができる。
さらに、ユーザは、第1または第2の追尾動作の停止または終了後に、逆再生を指示することにより所望のフレームの画像を新たな初期画像として表示させることができる。これにより、ユーザは、各フレームの画像およびシンボルを見ながら、追尾が最初に失敗したフレームの画像を容易に見つけることができる。したがって、追尾が失敗した最初のフレームの画像または追尾が失敗した直前のフレームの画像から追尾動作を容易に再開することができる。
図1は、本発明の一実施の形態に係る動画追尾装置を備える画像処理システム100の構成を示すブロック図である。図1に示すように、画像処理システム100は、本体部1、カメラ2、照明装置3および操作部4を備える。本体部1は、制御部10、表示部20、録画部30、記憶部40、ビデオメモリ50、波形収集部60、バスBSおよび複数のインターフェース(図示せず)を含む。制御部10、表示部20、録画部30、記憶部40、ビデオメモリ50および波形収集部60は、バスBSに接続される。カメラ2、照明装置3および操作部4は、それぞれインターフェースを介してバスBSに接続される。
図1の画像処理システム100の基本動作について説明する。
ユーザが操作部4を操作することにより、カメラ2の撮影条件が設定される。図2は、撮影条件の設定時における表示部20の表示例を示す図である。図2に示すように、撮影条件の設定時には、表示部20の画面上に画像表示領域Sa、波形表示領域Sb、条件設定領域Scおよび録画ボタンSeが表示される。
図3は、録画処理中の図1の録画部30の記憶状態を示す模式図である。上述のように、録画部30には、動画データ(複数フレームの画像データ)を記憶するための動画データ記憶領域30Aおよび波形データ(複数の評価値)を記憶するための波形データ記憶領域30Bが設定されている。
図6は、録画処理終了時の表示部20の表示例を示す図である。図6に示すように、録画終了時には図5のトリガボタンSfに代えて、表示部20にファイルボタンSjおよび再生ボタンSgが表示される。
次に、再生処理について説明する。再生処理とは、カメラ2から順次与えられる複数フレームの画像データ、録画部30に記憶される複数フレームの画像データまたは記憶部40に記憶される動画ファイル中の複数フレームの画像データのうち任意の連続する複数フレームの画像データに基づいて表示部20に動画を表示することをいう。
動画追尾装置は、図1の操作部4、制御部10、表示部20、記憶部40およびビデオメモリ50により構成される。動画追尾装置は、表示部20に表示される動画中の指定された追尾対象を追尾し、追尾結果を表示部20に表示する追尾処理を行う。記憶部40には、追尾処理を行うための動画追尾プログラムが記憶される。
図15、図16および図17は、動画追尾装置における動画中の追尾対象の追尾処理を示すフローチャートである。図18、図19および図20は、追尾対象の追尾処理の実行中に画像表示領域Taに表示される画像の遷移を示す図である。図21は、追尾処理実行中に制御部10のRAM10aに記憶されるデータを示す図である。制御部10のCPUは、記憶部40に記憶される追尾処理プログラムに従って追尾処理を実行する。以下、図15〜図21を用いて制御部10のCPU(以下、制御部10と略記する。)による追尾対象の追尾処理を説明する。
本実施の形態に係る動画追尾装置においては、記憶部40に記憶された複数フレームの画像のうち一の画像が初期画像として表示部20に表示される。操作部4により初期画像内でテンプレートTおよび探索範囲Rが設定されかつ再生ボタンTcが操作された場合、初期画像以降のフレームの画像について追尾動作が実行される。
(6−1)図22は、他の実施の形態に係る動画追尾装置における動画中の追尾対象の追尾処理を示すフローチャートである。本実施の形態では、図22に示すように、追尾対象の追尾処理において、図16のステップS10の後に、識別された追尾対象の位置の正確度を算出する(ステップS10a)。正確度は、例えば、識別された位置での画像データと基準画像データとの一致度である。
以下、請求項の各構成要素と実施の形態の各部との対応の例について説明するが、本発明は下記の例に限定されない。
2 カメラ
3 照明装置
4 操作部
5 PLC
6,8 センサ
7 波形収集装置
10 制御部
10a RAM
20 表示部
30 録画部
30A 動画データ記憶領域
30B 波形データ記憶領域
40 記憶部
50 ビデオメモリ
60 波形収集部
100 画像処理システム
BS バス
FA〜FD 動画ファイル
fi ファイル情報
i1〜i42 評価値
L 現在表示位置バー
M 物体
M1,M2 突起
rd,s1〜s20,td 位置データ
R 探索範囲
Re 基準画像データ
S シンボル
Sa,Ta 画像表示領域
Sb 波形表示領域
Sc 条件設定領域
Sc1〜Sc5 入力枠
Se 録画ボタン
Sf トリガボタン
Sg,Tc 再生ボタン
Sj ファイルボタン
Sy 追尾ボタン
T テンプレート
Td 一時停止ボタン
Te 逆再生ボタン
Tf シークバー
Tg スライダ
Th 追尾開始ボタン
Ti 追尾停止ボタン
Tj 追尾再開ボタン
Tk 終了ボタン
Tl 始点表示カーソル
Tm 終点表示カーソル
v1〜v20 画像データ
V1〜V20 画像
W 被写体
Claims (7)
- 複数フレームの画像により構成される動画中の追尾対象を追尾する動画追尾装置であって、
前記複数フレームの画像を表示するための複数フレームの画像データを記憶する記憶部と、
前記記憶部に記憶される各フレームの画像データに基づいて画像を表示する表示部と、
前記表示部に表示される画像内での追尾対象の追尾条件の設定および追尾対象の追尾に関する指示を行なうためにユーザにより操作される操作部と、
前記表示部に複数フレームの画像を順に表示させ、前記表示される各画像において前記操作部により設定された追尾条件で追尾対象の位置を識別するとともに識別された位置にシンボルを表示させる追尾動作を実行する制御部とを備え、
前記制御部は、前記複数フレームの画像のうち一の画像を初期画像として前記表示部に表示させ、前記操作部により前記初期画像内で追尾条件が設定されかつ追尾の開始が指示された場合に、前記初期画像以降のフレームの画像について前記追尾動作を実行し、前記追尾動作の停止または終了後に、前記操作部により前記複数フレームの画像のうちいずれかの画像を新たな初期画像として表示することが指示された場合に、前記新たな初期画像を前記表示部に表示させ、前記操作部により前記新たな初期画像内で追尾条件が再設定されかつ追尾の開始が指示された場合に、前記新たな初期画像以降のフレームの画像について前記追尾動作を実行し、
前記制御部は、複数フレームの画像を追尾動作時とは逆の時間順で前記表示部に表示させる逆再生の機能を有し、
前記操作部は、前記追尾動作の停止または終了後に、前記逆再生を指示することにより新たな初期画像の表示を指示可能であることを特徴とする動画追尾装置。 - 前記制御部は、前記表示部に現在表示される画像において識別された追尾対象の位置と、前記表示部に現在表示される画像よりも以前のフレームの画像において識別された追尾対象の位置とに前記シンボルをそれぞれ表示させ、前記新たな初期画像内で追尾条件が再設定されかつ追尾の開始が指示された場合に、前記表示部に現在表示される画像において識別された追尾対象の位置と、前記新たな初期画像よりも以後でかつ前記表示部に現在表示される画像よりも以前のフレームの画像において識別された追尾対象の位置と、前記新たな初期画像よりも以前のフレームの画像において識別された追尾対象の位置とに前記シンボルをそれぞれ表示させることを特徴とする請求項1記載の動画追尾装置。
- 前記追尾条件は、前記初期画像内での追尾対象の画像部分の範囲および各フレームの画像内で追尾対象を探索する範囲のうち少なくとも一方を含むことを特徴とする請求項1または2記載の動画追尾装置。
- 前記制御部は、前記表示部に表示させる画像を選択するための選択部を前記表示部に表示させ、
前記操作部は、前記表示部に表示された前記選択部を操作することにより前記新たな初期画像の表示を指示可能であることを特徴とする請求項1〜3のいずれかに記載の動画追尾装置。 - 前記制御部は、前記追尾動作の実行中に各画像について追尾対象の位置の識別結果の正確度を評価し、正確度が予め定められたしきい値以下になったときに前記追尾動作を停止することを特徴とする請求項1〜4のいずれかに記載の動画追尾装置。
- 複数フレームの画像により構成される動画中の追尾対象を追尾する動画追尾方法であって、
前記複数フレームの画像を表示するための複数フレームの画像データを記憶するステップと、
前記記憶された複数フレームの画像データに基づいて複数フレームの画像のうち一の画像を初期画像として表示部に表示させるステップと、
前記初期画像内で追尾条件が設定されかつ追尾の開始が指示された場合に、前記記憶された複数フレームの画像データに基づいて前記初期画像以降のフレームの画像を前記表示部に順に表示させ、前記表示される各画像において設定された追尾条件で追尾対象の位置を識別するとともに識別された位置にシンボルを表示させる第1の追尾動作を実行するステップと、
前記第1の追尾動作の停止または終了後に、前記複数フレームの画像のうちいずれかの画像を新たな初期画像として表示することが指示された場合に、前記記憶された複数フレームの画像データに基づいて前記新たな初期画像を前記表示部に表示させるステップと、
前記新たな初期画像内で追尾条件が再設定されかつ追尾の開始が指示された場合に、前記記憶された複数フレームの画像データに基づいて前記新たな初期画像以降のフレームの画像を前記表示部に順に表示させ、前記表示される各画像において設定された追尾条件で追尾対象の位置を識別するとともに識別された位置にシンボルを表示させる第2の追尾動作を実行するステップと、
前記第1または第2の追尾動作の停止または終了後に、逆再生が指示された場合に、複数フレームの画像を前記第1または第2の追尾動作時とは逆の時間順で前記表示部に表示させることにより新たな初期画像を前記表示部に表示させるステップとを含むことを特徴とする動画追尾方法。 - 複数フレームの画像により構成される動画中の追尾対象を追尾する追尾処理を処理装置に実行させる動画追尾プログラムあって、
前記複数フレームの画像を表示するための複数フレームの画像データを記憶する処理と、
前記記憶された複数フレームの画像データに基づいて複数フレームの画像のうち一の画像を初期画像として表示部に表示させる処理と、
前記初期画像内で追尾条件が設定されかつ追尾の開始が指示された場合に、前記記憶された複数フレームの画像データに基づいて前記初期画像以降のフレームの画像を前記表示部に順に表示させ、前記表示される各画像において設定された追尾条件で追尾対象の位置を識別するとともに識別された位置にシンボルを表示させる第1の追尾動作を実行する処理と、
前記第1の追尾動作の停止または終了後に、前記複数フレームの画像のうちいずれかの画像を新たな初期画像として表示することが指示された場合に、前記記憶された複数フレームの画像データに基づいて前記新たな初期画像を前記表示部に表示させる処理と、
前記新たな初期画像内で追尾条件が再設定されかつ追尾の開始が指示された場合に、前記記憶された複数フレームの画像データに基づいて前記新たな初期画像以降のフレームの画像を前記表示部に順に表示させ、前記表示される各画像において設定された追尾条件で追尾対象の位置を識別するとともに識別された位置にシンボルを表示させる第2の追尾動作を実行する処理と、
前記第1または第2の追尾動作の停止または終了後に、逆再生が指示された場合に、複数フレームの画像を前記第1または第2の追尾動作時とは逆の時間順で前記表示部に表示させることにより新たな初期画像を前記表示部に表示させる処理とを、
前記処理装置に実行させることを特徴とする動画追尾プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010244704A JP5613016B2 (ja) | 2010-10-29 | 2010-10-29 | 動画追尾装置、動画追尾方法および動画追尾プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010244704A JP5613016B2 (ja) | 2010-10-29 | 2010-10-29 | 動画追尾装置、動画追尾方法および動画追尾プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012099975A JP2012099975A (ja) | 2012-05-24 |
JP5613016B2 true JP5613016B2 (ja) | 2014-10-22 |
Family
ID=46391418
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010244704A Expired - Fee Related JP5613016B2 (ja) | 2010-10-29 | 2010-10-29 | 動画追尾装置、動画追尾方法および動画追尾プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5613016B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10664705B2 (en) | 2014-09-26 | 2020-05-26 | Nec Corporation | Object tracking apparatus, object tracking system, object tracking method, display control device, object detection device, and computer-readable medium |
JP6488647B2 (ja) * | 2014-09-26 | 2019-03-27 | 日本電気株式会社 | 物体追跡装置、物体追跡システム、物体追跡方法、表示制御装置、物体検出装置、プログラムおよび記録媒体 |
JP6284086B2 (ja) * | 2016-02-05 | 2018-02-28 | パナソニックIpマネジメント株式会社 | 追跡支援装置、追跡支援システムおよび追跡支援方法 |
WO2020080535A1 (ja) * | 2018-10-18 | 2020-04-23 | 国立研究開発法人科学技術振興機構 | 対象追跡方法、対象追跡システムおよび対象追跡プログラム |
CN111524159A (zh) * | 2019-02-01 | 2020-08-11 | 北京京东尚科信息技术有限公司 | 图像处理方法和设备、存储介质和处理器 |
CN111832367A (zh) * | 2019-04-22 | 2020-10-27 | 阿里巴巴集团控股有限公司 | 基于图像识别的业务处理方法、装置及电子设备 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3857558B2 (ja) * | 2001-10-02 | 2006-12-13 | 株式会社日立国際電気 | 物体追跡方法及び装置 |
JP2007274543A (ja) * | 2006-03-31 | 2007-10-18 | Sony Corp | 画像処理装置および方法、プログラム、並びに記録媒体 |
US20110199461A1 (en) * | 2008-10-17 | 2011-08-18 | Panasonic Corporation | Flow line production system, flow line production device, and three-dimensional flow line display device |
-
2010
- 2010-10-29 JP JP2010244704A patent/JP5613016B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2012099975A (ja) | 2012-05-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5613016B2 (ja) | 動画追尾装置、動画追尾方法および動画追尾プログラム | |
CN100364317C (zh) | 摄像装置 | |
RU2017128072A (ru) | Устройство поддержки отслеживания, система поддержки отслеживания и способ поддержки отслеживания | |
US9317748B2 (en) | Tracking apparatus | |
US8174584B2 (en) | Image shooting apparatus and control method and program thereof | |
JP2010041299A (ja) | 電子カメラ | |
US20120147245A1 (en) | Image pickup apparatus, control method thereof, and program | |
JP5094070B2 (ja) | 撮像装置、撮像方法、プログラム、及び記憶媒体 | |
JP2008182374A5 (ja) | ||
JP5714298B2 (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
JP5653174B2 (ja) | 動画追尾装置、動画追尾方法および動画追尾プログラム | |
US11483466B2 (en) | Imaging apparatus capable of displaying a focusing graph to assist user during focusing operation | |
JP5714297B2 (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
JP5321237B2 (ja) | 撮像装置、および撮影プログラム | |
JP2013201793A (ja) | 撮像装置 | |
US20140211080A1 (en) | Imaging apparatus | |
US20130136413A1 (en) | Playback apparatus, control method and recording medium | |
JP5784895B2 (ja) | 動画像撮像装置、動画像観察方法、動画像観察プログラム及びコンピュータで読取可能な記録媒体 | |
JP5643607B2 (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
JP4933347B2 (ja) | 撮像装置及びその制御方法及びプログラム及び記憶媒体 | |
JP2013138492A (ja) | 撮像装置 | |
JP2011155692A (ja) | 撮像装置及びそのプログラム | |
JP7458715B2 (ja) | 撮影装置、その制御方法、プログラム、並びに記録媒体 | |
JP5131554B2 (ja) | 撮像装置、及びプログラム | |
JP2007124178A (ja) | 映像信号記録再生装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130917 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140530 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140603 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140729 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140902 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140905 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5613016 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |