JP2005045606A - Image processing method, image processing device, and program - Google Patents
Image processing method, image processing device, and program Download PDFInfo
- Publication number
- JP2005045606A JP2005045606A JP2003278351A JP2003278351A JP2005045606A JP 2005045606 A JP2005045606 A JP 2005045606A JP 2003278351 A JP2003278351 A JP 2003278351A JP 2003278351 A JP2003278351 A JP 2003278351A JP 2005045606 A JP2005045606 A JP 2005045606A
- Authority
- JP
- Japan
- Prior art keywords
- image
- still
- still image
- displayed
- still images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は画像処理に関し、特に、ユーザ操作に従って動画から静止画を抽出するための画像処理方法、画像処理装置及びプログラムに関する。 The present invention relates to image processing, and more particularly to an image processing method, an image processing apparatus, and a program for extracting a still image from a moving image according to a user operation.
セキュリティに対する関心の高まりに伴い、多くの店舗、住宅、ビル、マンションなどにおいて、防犯のための監視システムが導入されている。通常の監視システムにおいて、監視カメラは24時間連続運転を行っており、監視カメラによって撮像された画像は監視モニタに表示され、又、磁気テープなどの記録媒体に記録される。このような監視システムにおいて、記録されている動画、あるいはライブ動画から所定のタイミングの画像を選択して、スナップショットとして保存することが必要とされる場合がある。 With increasing interest in security, surveillance systems for crime prevention have been introduced in many stores, houses, buildings, condominiums, and the like. In a normal monitoring system, the monitoring camera operates continuously for 24 hours, and an image captured by the monitoring camera is displayed on a monitoring monitor and recorded on a recording medium such as a magnetic tape. In such a monitoring system, it may be necessary to select an image at a predetermined timing from a recorded moving image or a live moving image and save it as a snapshot.
例えば、犯罪事件などの事象が生じた場合、その事象に関連するタイミングのスナップショットを抽出し、解析、頒布のために使用することがある。あるいは、例えばデジタルカメラは、ユーザによるデジタル静止画像の撮影のために、カメラによって撮影されている動画を表示する。ユーザは液晶表示装置などの表示画面に表示された動画を確認しながら、所望のタイミングでシャッタを押すことによって、静止画像を保存することができる。 For example, when an event such as a criminal case occurs, a snapshot of timing related to the event may be extracted and used for analysis and distribution. Alternatively, for example, the digital camera displays a moving image captured by the camera for the user to capture a digital still image. The user can save a still image by pressing a shutter at a desired timing while checking a moving image displayed on a display screen such as a liquid crystal display device.
尚、監視カメラによって撮像された動画データから抽出された静止画の一つの利用態様として、ユーザが所望の動画を選択するためのインデックスとして静止画を利用することできる監視システムが提案されている(例えば、特許文献1を参照)。監視カメラによって撮像された所定の動画データは、所定の検索キー情報とともに保管される。動画データから静止画データを抽出し、静止画情報と検索キー情報を利用者が分かりやすいような形のホームページとして編集し表示する。利用者はパソコンを使用し、ホームページの中の静止画とキー情報一覧から目的の静止画を選択することによって、静止画が抽出された動画を表示させることができる。 As one usage mode of still images extracted from moving image data captured by a monitoring camera, a monitoring system that can use a still image as an index for a user to select a desired moving image has been proposed ( For example, see Patent Document 1). The predetermined moving image data imaged by the monitoring camera is stored together with predetermined search key information. Still image data is extracted from moving image data, and still image information and search key information are edited and displayed as a homepage in a form that is easy for the user to understand. A user can display a moving image from which a still image is extracted by selecting a target still image from a still image and a key information list on a homepage using a personal computer.
上記のように、動画として表示されている画像から、必要とする瞬間の画像をスナップショット(静止画)として保存する場合、従来の典型的な保存方法においては、ユーザは動画を見ながら、必要とする画像が表示されたタイミングでスナップショット保存操作を行う。しかし、保存操作から実際にスナップショットとして保存されるまでに内部処理のための時間差が生じることや、ユーザによる保存操作自体が所望のタイミングから遅れてしまうことがある。あるいは、保存操作直後に、実際に保存操作を行った画像よりもよい画像が表示されることがある。 As described above, when saving an image of a required moment as a snapshot (still image) from an image displayed as a moving image, in a conventional typical saving method, the user needs to watch the moving image. The snapshot saving operation is performed at the timing when the image to be displayed is displayed. However, there may be a time difference for internal processing from the saving operation to the actual saving as a snapshot, or the saving operation by the user may be delayed from a desired timing. Alternatively, an image better than the image on which the save operation is actually performed may be displayed immediately after the save operation.
このように、従来のスナップショット保存処理においては、ユーザにとって最適な静止画を1回のスナップショット保存処理で保存できないことがあった。このため、録画された動画を再生し、再生画像からスナップショットを保存する場合、最適なスナップショットを撮ることができるまで録画の巻き戻し及び再生処理を交互に繰り返し、画像保存操作を何度も試みなければならなかった。あるいいは、スナップショットを取得するための動画がライブ画像であれ場合、スナップショットを撮ることができなかった瞬間の画像を、ユーザは2度と得ることはできない。 As described above, in the conventional snapshot saving process, a still image optimal for the user may not be saved by one snapshot saving process. For this reason, when playing back a recorded video and saving a snapshot from the playback image, the recording rewinding and playback processes are repeated alternately until the optimal snapshot can be taken, and the image saving operation is repeated many times. I had to try. In other words, if the moving image for acquiring the snapshot is a live image, the user cannot obtain the image at the moment when the snapshot could not be taken again.
従って、本発明の一つの目的は、ユーザが動画から静止画を効果的に選択することができる画像処理を提供することである。本発明の他の目的は、表示中の動画から抽出された所望のタイミングでの静止画を保存することができる画像処理を提供することである。本発明の他の目的は、ユーザ操作とユーザが望む静止画のタイミングのずれを小さくすることができる画像処理を提供することである。本発明の他の目的は、表示中の動画から抽出された静止画において、ユーザにとってより好ましいタイミングの静止画を選択することができる画像処理を提供することである。 Accordingly, one object of the present invention is to provide image processing that allows a user to effectively select a still image from a moving image. Another object of the present invention is to provide an image processing capable of storing a still image at a desired timing extracted from a moving image being displayed. Another object of the present invention is to provide an image processing capable of reducing a difference in timing between a user operation and a still image desired by the user. Another object of the present invention is to provide image processing that can select a still image at a more preferable timing for a user from among still images extracted from a moving image being displayed.
本発明の一つの態様は、表示されている動画から静止画を選択するための画像処理方法であって、(a)動画を表示するステップと、(b)複数の異なるタイミングの静止画を前記表示されている動画から抽出し、記憶するステップと、(c)前記記憶されている複数の静止画を、ユーザ操作に応答して表示するステップと、(d)前記表示されている複数の静止画から選択された静止画を保存するステップとを有する。この構成を有することによって、表示されている動画から、ユーザがより好ましい静止画を選択することができる。 One aspect of the present invention is an image processing method for selecting a still image from displayed moving images, wherein (a) a step of displaying a moving image, and (b) a plurality of still images at different timings are displayed. Extracting and storing from the displayed moving image; (c) displaying the plurality of stored still images in response to a user operation; and (d) the plurality of displayed still images. Storing a still image selected from the image. By having this configuration, the user can select a more preferable still image from the displayed moving images.
前記ステップ(c)において表示される複数の静止画は、前記表示されている動画からユーザが静止画を指定する静止画指定操作よりも前のタイミングの静止画を含むことが好ましい。これにより、例えば、静止画指定操作が遅れた場合においても、好ましいタイミングの静止画を取得することができる。好ましくは、前記ステップ(c)において表示される複数の静止画は、前記静止画指定操作よりも後のタイミングの静止画を含む。これによって、静止画指定操作と所望タイミングのずれを抑制することができる。 The plurality of still images displayed in step (c) preferably include still images at a timing prior to a still image specifying operation in which a user specifies a still image from the displayed moving image. Thereby, for example, even when the still image designation operation is delayed, a still image at a preferred timing can be acquired. Preferably, the plurality of still images displayed in the step (c) include still images at a timing later than the still image specifying operation. Thereby, it is possible to suppress a deviation between the still image designation operation and the desired timing.
前記ステップ(b)は、前記静止画指定操作の前にユーザによってなされる指定前操作に応答して開始されることが好ましい。これによって、効率的に静止画抽出、記憶処理を行うことができる。さらに、前記指定前操作は、表示画面における所定範囲へのポインタの移動であることが好ましい。これにより、ポインタによる画像処理において効果的に処理を開始することができる。前記所定範囲は、前記静止画指定操作を行うアイコンが表示されている領域であることが好ましい。これにより、効果的に指定前操作を検出することができる。 The step (b) is preferably started in response to a pre-designation operation performed by a user before the still image designating operation. Thereby, it is possible to efficiently perform still image extraction and storage processing. Furthermore, it is preferable that the pre-designation operation is a movement of the pointer to a predetermined range on the display screen. Thereby, processing can be effectively started in image processing using a pointer. The predetermined range is preferably an area in which an icon for performing the still image designation operation is displayed. Thereby, the pre-designation operation can be detected effectively.
本発明の他の態様は、コンピュータに画像処理を実行させるプログラムであって、前記コンピュータに、(a)動画が表示されている間に、複数の異なるタイミングの静止画を前記動画から抽出し、記憶するための処理と、(b)前記記憶されている複数の静止画を、ユーザ操作に応答して表示するための処理と、(c)前記表示されている複数の静止画から、ユーザ操作に応答して1もしくは複数の静止画を選択するための処理と、を実行させる。この構成を有することによって、表示されている動画から、ユーザがより好ましい静止画を選択することができる。 Another aspect of the present invention is a program for causing a computer to perform image processing, wherein (a) while a moving image is displayed on the computer, a plurality of still images at different timings are extracted from the moving image, A process for storing; (b) a process for displaying the plurality of stored still images in response to a user operation; and (c) a user operation from the plurality of displayed still images. And a process for selecting one or more still images in response to. By having this configuration, the user can select a more preferable still image from the displayed moving images.
前記処理(c)によって表示される複数の静止画は、前記表示されている動画からユーザが静止画を指定する静止画指定操作よりも前のタイミングで表示された静止画を含むことが好ましい。これにより、例えば、静止画指定操作が遅れた場合においても、好ましいタイミングの静止画を取得することができる。好ましくは、前記ステップ(c)において表示される複数の静止画は、前記静止画指定操作よりも後のタイミングの静止画を含む。これによって、静止画指定操作と所望タイミングのずれを抑制することができる。 It is preferable that the plurality of still images displayed by the process (c) include still images displayed at a timing before a still image specifying operation in which a user specifies a still image from the displayed moving image. Thereby, for example, even when the still image designation operation is delayed, a still image at a preferred timing can be acquired. Preferably, the plurality of still images displayed in the step (c) include still images at a timing later than the still image specifying operation. Thereby, it is possible to suppress a deviation between the still image designation operation and the desired timing.
本発明の他の態様は、表示されている動画から静止画を選択可能画像処理装置であって、動画を表示する手段と、複数の異なるタイミングの静止画を前記表示されている動画から抽出する手段と、前記抽出された複数の静止画を記憶する手段と、前記記憶されている複数の静止画を、ユーザ操作に応答して表示する手段と、前記表示されている複数の静止画から、ユーザ操作に応答して静止画を選択する手段と、を有する画像処理装置。この構成を有することによって、表示されている動画から、ユーザがより好ましい静止画を選択することができる。 Another aspect of the present invention is an image processing apparatus capable of selecting a still image from a displayed moving image, and means for displaying the moving image and extracting a plurality of still images at different timings from the displayed moving image. Means, means for storing the plurality of extracted still images, means for displaying the stored plurality of still images in response to a user operation, and the plurality of displayed still images, Means for selecting a still image in response to a user operation. By having this configuration, the user can select a more preferable still image from the displayed moving images.
前記静止画を記憶する手段に記憶される静止画は、前記表示されている動画からユーザが静止画を指定する静止画指定操作よりも前のタイミングの静止画を含むことが好ましい。これにより、例えば、静止画指定操作が遅れた場合においても、好ましいタイミングの静止画を取得することができる。好ましくは、前記静止画を記憶する手段に記憶される静止画は、前記表示されている動画からユーザが静止画を指定する静止画指定操作よりも後のタイミングの静止画を含むことが好ましい。これにより、静止画指定操作と所望タイミングのずれを抑制することができる。好ましくは、前記静止画を記憶する手段は、予め定められた数の静止画を記憶し、最も古い静止画を削除して前記表示されている動画から新たに抽出した静止画を記憶することが好ましい。これによって、効率的に抽出された静止画の記憶を行うことができる。 The still image stored in the means for storing the still image preferably includes a still image at a timing prior to a still image specifying operation in which a user specifies a still image from the displayed moving image. Thereby, for example, even when the still image designation operation is delayed, a still image at a preferred timing can be acquired. Preferably, the still image stored in the means for storing the still image preferably includes a still image at a timing later than a still image specifying operation in which a user specifies a still image from the displayed moving image. Thereby, it is possible to suppress a deviation between the still image designation operation and the desired timing. Preferably, the means for storing the still image stores a predetermined number of still images, deletes the oldest still image, and stores a still image newly extracted from the displayed moving image. preferable. As a result, it is possible to store the extracted still image efficiently.
本発明によれば、表示されている動画から、ユーザはより好ましい静止画を選択することができる。 According to the present invention, the user can select a more preferable still image from the displayed moving image.
以下に、本発明を適用可能な実施の形態が説明される。以下の説明は、本発明の実施形態を説明するものであり、本発明が以下の実施形態に限定されるものではない。説明の明確化のため、以下の記載は、適宜、省略及び簡略化がなされている。又、当業者であれば、以下の実施形態の各要素を、本発明の範囲において容易に変更、追加、変換することが可能である。 Hereinafter, embodiments to which the present invention can be applied will be described. The following description is to describe the embodiment of the present invention, and the present invention is not limited to the following embodiment. For clarity of explanation, the following description is omitted and simplified as appropriate. Moreover, those skilled in the art can easily change, add, and convert each element of the following embodiments within the scope of the present invention.
実施の形態1.
図1は、本実施の形態にかかる監視システム100における、ハードウェア及びネットワーク構成の概略を示す構成図である。図1において、110a、bは、所定の監視範囲を撮像する監視カメラである。130は、監視カメラ101によって撮像された画像を記録メディアに記録することによって蓄積する画像データ・サーバである。150は、監視カメラによって撮像された画像を表示、編集することができる監視画像処理装置である。各装置は、ネットワーク170に接続され、監視カメラ110によって撮像された画像データは、ネットワーク170を介して通信される。
FIG. 1 is a configuration diagram showing an outline of hardware and network configurations in the
監視カメラ110は、ビルや住宅などの建造物の入口や、屋内もしくは屋外の所定場所に配置され、監視範囲内の様子を撮像した動画像データを、ネットワーク170を介して送信する。監視カメラ110は、セキュリティ用途の他、様々な物体や人物の監視もしくは観察などのために利用することができる。監視カメラ110からネットワーク170に出力された動画像データは、画像データ・サーバ130に転送され、蓄積される。あるいは、監視カメラ110からの動画像データは、監視カメラ110もしくは画像データ・サーバ130から、監視画像処理装置150に転送される。監視画像処理装置150は、監視画像をディスプレイに表示することによって、ユーザに監視範囲の状況を提示する。監視画像処理装置150は、さらに、画像データの編集を行うことができ、ユーザ操作に従って、動画から静止画(スナップ・ショット)を抽出、保存することができる。監視画像処理装置150による画像データ編集処理については、後に説明される。
The
図2は、画像データ・サーバ130及び監視画像処理装置150のハードウェア構成の一例を示している。画像データ・サーバ130及び監視画像処理装置105は、典型的なコンピュータ・システムが利用可能であり、中央処理装置(CPU)201とメモリ204とを含んでいる。CPU201とメモリ204とは、バスを介して補助記憶装置としてのハードディスク装置213に接続される。フレキシビルディスク装置220、ハードディスク装置213、CD−ROMドライブ226等の記憶媒体駆動装置は、フレキシビルディスク・コントローラ219、IDEコントローラ225などの各種コントローラを介してバスに接続される。フレキシビルディスク装置220等の記憶媒体駆動装置には、フレキシビルディスク等の可搬型記憶媒体が挿入される。
FIG. 2 shows an example of the hardware configuration of the
記憶媒体にはオペレーティングシステムと共同してCPU201等に命令を与え、本実施形態を実施するためのコンピュータ・プログラムを記憶することができる。コンピュータ・プログラムは、メモリ204にロードされることによって実行される。コンピュータ・プログラムは圧縮し、又、複数に分割して記憶媒体に記憶することができる。ハードウェア構成は、典型的には、ユーザ・インターフェース・ハードウェアを備える。ユーザ・インターフェース・ハードウェアとしては、例えば、入力をするためのポインティング・デバイス(マウス207、ジョイスティック等)やキーボード206、あるいは、視覚データをユーザに提示するための液晶ディスプレイなどの表示装置211がある。シリアルポート215を介してモデムを接続することが可能であり、シリアルポート215、モデムまたはトークンリングや通信アダプタ218を介してネットワークに接続し、他のコンピュータ・システムと通信を行うことができる。上記構成は必要に応じて省略することができる。例えば、直接接続されたユーザ・インターフェース・ハードウェアを使用することなく、ネットワークを介して画像データ・サーバ103を操作することができる。
The storage medium can store a computer program for implementing this embodiment by giving instructions to the
図3は、監視カメラ110、画像データ・サーバ130、及び監視画像処理装置150の論理構成を示すブロック図である。各論理ブロックは、ハードウェア構成、あるいはハードウェア構成とソフトウェアとが共同して機能することによって実現することができる。典型的には、画像データ・サーバ130、及び監視画像処理装置150は、コンピュータ上でソフトウェアを起動、実行することによって実現することができる。監視カメラ110は、CCDなど、入射光を電気信号に変換し、動画像データとして出力する撮像部111、撮像部111から取得した動画像データの処理を行う動画像データ処理部112、及び動画像データの通信処理を行う通信インターフェース部113を備えている。
FIG. 3 is a block diagram illustrating logical configurations of the
監視範囲から撮像部111に入射した映像光信号は、電気信号としての動画像データに変換され、動画像データ処理部112に入力される。動画像データ処理部112は、MPEG2などの規格に従った圧縮処理など、動画像データについて所定の符号化処理を行う。符号化画像データはネットワークを介した通信のためにパケット化され、通信インターフェース部113に入力される。通信インターフェース部113は、所定のプロトコルに従って、パケット・データに関するデータ処理及びネットワーク170を介した画像データの転送処理を実行する。
The video light signal incident on the
画像データ・サーバ130は、監視カメラ110からの動画像データを蓄積する画像データ蓄積部131を有している。画像データ蓄積部131は外部記憶装置としての蓄積メディアを備え、取得した画像データを蓄積メディアに記憶する。蓄積メディアは、磁気テープ、光ディスク、磁気ディスクなど、必要に応じて適切な種類の記録媒体が利用される。画像データ管理部133は、画像データ蓄積部131に記録されるデータの管理を行い、データの登録、読み出し、消去、あるいは更新などの処理を実行する。監視カメラ110から送信された動画像データは、通信インターフェース部132を介して画像データ管理部133に渡される。画像データ管理部133は、取得した画像データを画像データ蓄積部131に記録する。さらに、画像データ・サーバ130は、監視画像処理装置150からの要求に応答して、要求された蓄積画像データを蓄積メディアから選択し、監視画像処理装置150に送信する。
The
監視画像処理装置150は、監視カメラ110、あるいは画像データ・サーバ130から受信した動画像データの表示及び編集処理を実行することができる。監視画像処理装置150は、ネットワーク170を介した画像データの通信処理を行う通信インターフェース部151、画像データに関する一連の処理を実行する画像データ処理部152、画像データを表示する表示部153、ユーザによって操作され、ユーザ操作に応じたデータを出力する入力操作部154、入力操作部154からのデータに応じて、ユーザによる入力操作を判定する入力操作判定部155を備えている。各機能ブロックは、ハードウェア構成により、あるいは、プログラム及び必要なデータがメモリ204上に展開され、プログラムに従ってCPU201が他のハードウェア構成と共同して処理を実行することによって実現することができる。
The monitoring
ネットワークを介して転送された動画像データは、通信インターフェース部151に入力される。通信インターフェース部151は受信したパケット・データに関する処理を実行する。録画された動画像データを画像データ・サーバ130からダウンロードする場合、あるいは監視カメラからライブ画像データを取得する場合、取得した動画像データは、ハードディスクなどの外部記憶装置156に記憶することができる。動画像データの表示もしくは編集のために、画像データ処理部152は外部記憶装置156に記憶された動画像データを取得する。
The moving image data transferred via the network is input to the
例えば、監視カメラ110からのライブ動画データ、もしくは、画像データ・サーバ130からの動画像データをストリーミングによって表示する場合などは、画像データ処理部152は、通信インターフェース部151が受信した動画像データを、通信インターフェース部151から取得する。画像データ処理部152は、通信インターフェース部151もしくは外部記憶装置156から取得した動画像データに対して、必要なデコード処理を実行する。デコード処理された動画像データは表示部153に渡され、表示部153はディスプレイ上に動画を表示する。監視カメラ110からのライブ動画像は、表示部153が表示すると同時に、外部記憶装置156に記憶することができる。
For example, when live video data from the
図4は、ディスプレイ上に動画像が表示された場合の表示画面の一例を示している。図4は、録画された動画像を表示する表示画面の例を示している。動画404はウィンドウ401内に表示され、マウス操作によって表示画像をコントロールすることができる。ウィンドウ401内には画像操作のための各種アイコンが表示され、これらアイコンをマウスなどの入力操作部154を使用して選択することによって、表示画像の操作を行うことができる。例えば、再生アイコン402上にマウス・ポインタ403を移動し、アイコン上でマウスをクリック操作することによって動画再生を行うことができる。早送り/巻戻し、静止、終了などの他の操作も同様に行うことができる。
FIG. 4 shows an example of a display screen when a moving image is displayed on the display. FIG. 4 shows an example of a display screen that displays a recorded moving image. The moving
監視画像処理装置150は、動画から静止画を抽出し、静止画スナップショットを生成することができる。例えば、監視システム100における監視領域において何らかの事象が生じた場合、監視カメラ110によって撮像された映像における特定の瞬間の静止画が必要とされる場合がある。発生事象に特に関連の深い瞬間の静止画を動画から抽出してレポートに添付する場合などに、静止画スナップショット生成機能は有用である。本形態においては、複数の静止画からユーザが所望の静止画を選択することができる。図5は、静止画を選択するために表示部153よって表示される、表示画面500の一例を示している。
The monitoring
図5に示すように、監視画像処理装置150は、動画再生中に、マウスやキーボードなどの入力操作部154によって静止画指定操作が行われた場合、動画から抽出された複数の静止画を選択的に表示部153に表示する。動画データから抽出された複数の静止画データは一時的にメモリ157に記憶され、入力操作部154の静止画指定操作に応答して、候補となる複数の静止画が静止画選択画面500に表示される。ユーザは、動画像再生中に所望の画像が表示されているタイミングで、入力操作部154によって静止画指定操作を行う。
As shown in FIG. 5, the monitoring
さらに、静止画選択画面による選択・保存操作によって、スナップショットが記憶装置156に保存される。これによって、複数の静止画からユーザが必要な一つもしくは複数の静止画を選択し、スナップショットとして保存することができる。好ましくは、静止画指定操作タイミングよりも前に表示された静止画と、その静止画以降の複数コマの静止画が表示画面500に表示される。さらに好ましくは、静止画指定操作タイミングの前後にまたがる時間に表示された複数の静止画が表示される。静止画指定操作の前の静止画を含むことによって、静止画指定操作の遅れをカバーし、あるいは、静止画抽出、保存処理の遅れをカバーすることができる。一方、静止画指定操作の後の静止画を含むことによって、静止画指定操作後に被写体がさらに良い動作をしたときなど、最も好ましい静止画タイミングが静止画指定操作後にある場合に対応することができる。
Further, the snapshot is saved in the
図5の例において、静止画選択画面500は、動画再生画面400において、ウィンドウ401内の静止画指定アイコン405上にマウス・ポインタ403が重なり、マウス・クリック操作が行われることによって表示される。マウス・クリック操作は静止画指定操作に相当する。ウィンドウ501内には、クリック操作タイミング前後の7コマの静止画が表示される例が示されている。図5の例においては、(4)で指示された静止画がクリック操作のタイミングに相当する。各静止画は過去から未来への時間経過に従ってレイアウトされており、左上の画像から右下の画像に向かって、時間経過に従う静止画が配置されている。各静止画に付された番号は時間経過に従った順番で付されている。
In the example of FIG. 5, the still
ユーザは、表示された複数の静止画から一つもしくは複数の静止画を、マウスもしくはキーボードを操作して選択することができる。図5においては、静止画(3)が選択された例が示されている。さらに、保存アイコンを選択してONにセットすることによって、所望のスナップショットを生成、保存することができる。図5においては、マウス操作によってスナップショット保存処理を行う例が示されているが、マウスに限らず、キーボードや入力ペンなど、他の入力装置の操作に応答して、処理を実行することができる。 The user can select one or a plurality of still images from the displayed plurality of still images by operating the mouse or the keyboard. FIG. 5 shows an example in which the still image (3) is selected. Furthermore, a desired snapshot can be generated and saved by selecting the save icon and setting it to ON. FIG. 5 shows an example in which snapshot saving processing is performed by a mouse operation. However, the processing may be executed in response to an operation of another input device such as a keyboard or an input pen, not limited to a mouse. it can.
動画から静止画スナップショットを生成、保存するための画像処理の好ましい例を説明する。本例において、マウス・ポインタ403と静止画指定アイコン403が重なることに応答して、動画データから静止画データが抽出されメモリへの記憶する処理が開始される。マウス・ポインタ403によって静止画指定アイコン403が選択されている状態において、静止画指定操作としてマウス・クリック操作されることによって、メモリ157に記憶されている静止画データが、静止画選択画面500が表示される。
A preferred example of image processing for generating and storing a still image snapshot from a moving image will be described. In this example, in response to the overlap of the
図3を参照して、入力操作判定部155は、マウス・ポインタ403と静止画指定アイコン405の座標データから、マウス・ポインタ403が静止画指定アイコン405の領域内にあることを判定する。入力操作判定部155は、マウス・ポインタ403が静止画指定アイコン405の領域内にあると判定すると、画像データ処理部152にその判定結果を通知する。画像データ処理部152は、判定結果に応答して、表示中の動画データからの静止画データの抽出、及びメモリ157への静止画データの一時的記憶処理を開始する。静止画データのサンプリング周期や、メモリ157に記憶する静止画数は、予めユーザが決定することができる。
Referring to FIG. 3, input
図6を参照して、動画からスナップショットを生成する処理について説明する。動画データから静止画データを抽出しメモリへ記憶する処理は、静止画指定操作の予め定められた前操作に応答して開始される。本例においては、マウスが所定領域内に入ったこと、特に、マウス・ポインタ403が静止画指定アイコン405に重なったことが、静止画データの抽出、一時的記憶処理を開始するトリガとなる。予め定められた数の静止画がメモリに記憶され、予め定められた数を超える場合、最古のデータを消去して新たなデータが記憶される。静止画指定アイコン405がマウス・クリックによってON状態にセットされた後の所定タイミングまで、静止画の抽出・記憶が続けられる。静止画指定アイコン405がON状態にセットされた後、静止画選択画面500にメモリに記憶されている複数の静止画が表示される。以下の説明において、明示のない場合、各処理は画像データ処理部152によって実行される。
With reference to FIG. 6, the process which produces | generates a snapshot from a moving image is demonstrated. The process of extracting still image data from the moving image data and storing it in the memory is started in response to a predetermined previous operation of the still image designating operation. In this example, when the mouse enters the predetermined area, in particular, when the
マウス・ポインタ403が静止画指定アイコン405の領域内に入り重なると(S601)、フラグや変数に関する所定の初期化処理を実行する(S602)。初期化処理終了後、保存継続フラグがON状態であるか否かを決定する(S603)。保存継続フラグは、動画データから抽出される静止画データのメモリへの一時的保存の継続を決定するフラグである。保存継続フラグがON状態である場合、メモリ157に記憶されている静止画データの数が予め定められた数以上であるかを決定する(S604)。メモリ157に記憶されている静止画データ数が予め定められた数未満である場合、動画データから抽出された静止画データがメモリ157に保存される(S605)。一方、メモリ157に記憶されている静止画データ数が予め定められた数に達している場合、一番古い静止画データを削除し、最新の静止画データをメモリに記憶する(S606)。
When the
入力操作判定部155が、マウス・ポインタ403が静止画指定アイコン405の領域内にあることを判定し(S607)、領域から外れている場合にはメモリの候補静止画データを消去して(S608)終了処理(S615)を実行する。マウス・ポインタ403が静止画指定アイコン403の領域内に維持されている場合、マウス・クリック操作によって静止画指定アイコン403がON状態にセットされた否かを、入力操作判定部155が決定する(S609)。ON状態にセットされていない場合、保存継続フラグ判定処理(S603)に戻り、S604以下の処理を繰り返す。
The input
静止画指定アイコン403がON状態にセットされると、保存継続回数が1以上であるかを決定する(S610)。保存継続回数は、静止画指定操作(静止画指定アイコンのクリック)の後に、何枚の静止画データを記憶するかを決定する。保存継続回数は、初期化処理において予め定められた値に設定されている。保存継続回数が0に初期化される場合、静止画指定操作以前に表示された静止画のみが静止画選択画面に表示される。好ましくは、静止画指定操作(静止画指定アイコンのクリック)の前後の静止画が表示されるように保存継続回数が設定される。
When the still
保存継続回数が1以上である場合、保存継続回数を1減算し(S611)、保存継続フラグの判定処理(S603)に戻る。保存継続フラグはON状態に維持されているので、以下、S604以降の処理が繰り返される。保存継続回数が0である場合、保存継続フラグをOFF状態にセットし(S612)、保存継続フラグ判定処理(S603)に戻る。保存継続フラグはOFFにセットされているので、メモリ157に記憶されている複数の候補静止画を表示部153に渡す。表示部153は静止画選択画面に静止画を表示する(S613)。入力操作部154の操作に応答して、選択された静止画の保存、もしくはキャンセル処理が実行される(S614)。静止画選択処理が終了すると、メモリ157に記憶されている候補静止画データが消去され(S608)、終了処理(S615)を実行する。
When the storage continuation count is 1 or more, the storage continuation count is decremented by 1 (S611), and the process returns to the storage continuation flag determination process (S603). Since the storage continuation flag is maintained in the ON state, the processes after S604 are repeated. If the save continuation count is 0, the save continuation flag is set to the OFF state (S612), and the process returns to the save continuation flag determination process (S603). Since the save continuation flag is set to OFF, a plurality of candidate still images stored in the
本実施の形態によれば、比較的動きが速く次の瞬間の動作を予測困難な被写体のスナップショットを保存する場合にも、ユーザにとって最適な瞬間のスナップショットを保存することができる。特に、静止画選択操作の前からの静止画が表示されることによって、所望タイミングに対するユーザ操作の遅れ、あるいは、静止画指定操作からの動作時間によるタイミングのずれを防ぐことができる。又、静止画選択操作後の静止画が表示されることによって、最も好ましい静止画タイミングが静止画選択操作後にある場合も、静止画選択操作と所望静止画のタイミングのずれを防ぐことができる。 According to the present embodiment, even when a snapshot of a subject whose movement is relatively fast and whose movement at the next moment is difficult to predict is saved, a snapshot at a moment that is optimal for the user can be saved. In particular, by displaying a still image from before the still image selection operation, it is possible to prevent a delay in user operation with respect to a desired timing or a timing shift due to an operation time from the still image designation operation. Further, by displaying the still image after the still image selection operation, even when the most preferable still image timing is after the still image selection operation, it is possible to prevent the timing difference between the still image selection operation and the desired still image.
上記例においては、静止画指定アイコンの領域とマウス・ポインタの重なりを静止画指定操作の前操作としたが、これに限らず、他の表示領域とマウス・ポインタの重なりを前操作と定義することができる。又、本形態においては、マウス操作に応答して静止画の抽出処理がコントロールされるが、キーボードなど他の入力装置の操作によって処理をコントロールすることができる。例えば、所定のキーに静止画選択が割り当てられ、キーに指の接触を検出するための圧電素子が実装される。静止画選択キーに指が接触したことを圧電素子が検出し、それを静止画指定操作の前操作として、動画データからの静止画データ抽出・記憶処理が開始される。 In the above example, the overlap of the still image designation icon area and the mouse pointer is the pre-operation of the still image designation operation. However, the present invention is not limited to this, and the overlap of the other display area and the mouse pointer is defined as the pre-operation. be able to. In this embodiment, the still image extraction process is controlled in response to a mouse operation, but the process can be controlled by operating another input device such as a keyboard. For example, a still image selection is assigned to a predetermined key, and a piezoelectric element for detecting finger contact is mounted on the key. The piezoelectric element detects that the finger touches the still image selection key, and as a pre-operation of the still image designation operation, still image data extraction / storage processing from the moving image data is started.
静止画選択キーが押下されON状態となることを検出すると、記憶されている複数の静止画が静止画選択画面に表示され、静止画選択処理が実行される。尚、圧電素子に代えて、フォトカプラなどの他の検出装置によって静止画選択キーに指がかかったことを検出することができる。あるいは2段階スイッチを使用して、キーの押下量に応じて処理を行うことができる。例えば、所定の押下量に伴い第1段のスイッチがON状態にセットされたことを前操作として処理し、さらに押下されることによって第2段のスイッチがON状態にセットされ、静止画指定操作として処理される。 When it is detected that the still image selection key is pressed and turned on, a plurality of stored still images are displayed on the still image selection screen, and a still image selection process is executed. In addition, it can detect that the finger | toe was applied to the still image selection key with other detection apparatuses, such as a photocoupler, instead of a piezoelectric element. Alternatively, a two-stage switch can be used to perform processing according to the amount of key press. For example, when the first stage switch is set to the ON state according to a predetermined pressing amount, it is processed as a previous operation, and when the second stage switch is further pressed, the second stage switch is set to the ON state. Is processed as
尚、本実施の形態においては、監視システムにおけるスナップショット処理について説明したが、本発明のスナップショット生成処理を、DVDやVCRなどの記録/再生装置、デジタルカメラやデジタル・ビデオなどの撮像装置などに適用することができる。本形態において、入力操作部154の操作に応答して、静止画データを記憶するが、動画データを一端記憶し、その動画データから静止画データを抽出することができる。これらの点は、以下の実施の形態において同様である。
Although the snapshot processing in the monitoring system has been described in the present embodiment, the snapshot generation processing of the present invention is performed by a recording / playback device such as a DVD or VCR, an imaging device such as a digital camera or digital video, etc. Can be applied to. In this embodiment, the still image data is stored in response to the operation of the
実施の形態2.
動画から静止画を生成する画像処理の好ましい他の例を説明する。実施の形態1においてはマウス・ポインタが所定領域に入ることによって動画データからの静止画データ抽出処理が開始されるが、本例において、画像データ処理部152は、動画再生が開始されることに応答して、動画データから静止画データを抽出しメモリに一時的に記憶する。ユーザ操作によって静止画データ抽出開始のタイミングがとれない場合に特に有用である。静止画データの抽出・記憶は、動画再生中において継続的に実行される。静止画は予め定められたコマ数が予め定められたサンプリング周期でメモリ157に記憶され、順次古い静止画データを削除して最新の静止画データを記憶する。静止画指定操作として、静止画指定アイコンがクリックされることによって、操作前後のタイミングにおける静止画が、選択画面500に表示される。以下、図7を参照して、スナップショット生成のための他の好ましい処理例について説明する。以下の説明において、明示のない場合、各処理は画像データ処理部152によって実行される。
Another preferred example of image processing for generating a still image from a moving image will be described. In
動画再生が開始されると(S701)、フラグや変数に関する所定の初期化処理が行われる(S702)。その後、保存継続フラグがON状態であるか否かを決定する(S703)。動画再生開始に応答して、保存継続フラグはON状態にセットされており、次のステップにおいて、メモリ157に記憶されている静止画データの数が予め定められた数以上であるかを決定する(S704)。メモリ157に記憶されている静止画データ数が予め定められた数未満である場合、動画データから抽出された静止画データがメモリ157に保存される(S705)。一方、メモリに記憶されている静止画データ数が予め定められた数に達している場合、一番古い静止画データを削除し(S706)、最新の静止画データをメモリ157に記憶する(S705)。メモリ157に記憶する画像データの数、あるいはサンプリング周期は、予め設定しておくことができる。
When the moving image reproduction is started (S701), predetermined initialization processing relating to flags and variables is performed (S702). Thereafter, it is determined whether or not the storage continuation flag is in an ON state (S703). In response to the start of moving image playback, the save continuation flag is set to ON, and in the next step, it is determined whether the number of still image data stored in the
次に、マウス・クリック操作によって静止画指定アイコン403がON状態にセットされた否かを、入力操作判定部155が決定する(S707)。ON状態にセットされていない場合、保存継続フラグ判定処理(S703)に戻り、S704以下の処理を繰り返す。静止画指定アイコン403がON状態にセットされると、保存継続回数が1以上であるかを判定する(S708)。保存継続回数が1以上である場合、保存継続回数を1減算して(S709)、保護継続フラグ判定処理(S703)に戻りS704以下の処理を繰り返す。保存継続回数は初期設定において予め定められた数に設定される。保存継続回数に相当する数の静止画が、静止画指示操作後に保存される。保存継続回数が1以上でない場合(S708)、保存継続フラグをOFF状態にセットし(S710)、保護継続フラグ判定処理(S703)に戻る。保護継続フラグはOFFにセットされているので、メモリ157に記憶されている複数の候補静止画を表示部153に渡し、表示部153はそれらを静止画選択画面500に表示する(S711)。
Next, the input
入力操作部154の操作に応答して、選択された静止画の保存、もしくはキャンセル処理が実行される(S712)。静止画選択処理が終了すると、メモリ157に記憶されている複数の候補静止画データが消去され(S713)、終了処理が実行される(S714)。本実施の形態によれば、ユーザの静止画指定前操作を検出することなく、複数の静止画の抽出、記憶処理を行うことができる。そのため、静止画抽出開始のタイミングが取れない場合などにおいても、ユーザ所望のタイミングにおけるスナップショットを保存することができる。
In response to the operation of the
110 監視カメラ、111 撮像部、112 動画像データ処理部、113 通信インターフェース部、130 画像データ・サーバ、131 画像データ蓄積部、133 画像データ管理部、132 通信インターフェース部、150 監視画像処理装置、151 通信インターフェース部、152 画像データ処理部、153 表示部、154 入力操作部、155 入力操作判定部、170 ネットワーク、156 動画などの画像データを記憶する記憶装置、157 静止画データを記憶するメモリ
DESCRIPTION OF
Claims (13)
(a)動画を表示するステップと、
(b)複数の異なるタイミングの静止画を前記表示されている動画から抽出し、記憶するステップと、
(c)前記記憶されている複数の静止画を、ユーザ操作に応答して表示するステップと、
(d)前記表示されている複数の静止画から選択された静止画を保存するステップと、
を有する画像処理方法。 An image processing method for selecting a still image from a displayed video,
(A) displaying a video;
(B) extracting and storing a plurality of still images at different timings from the displayed moving image;
(C) displaying the plurality of stored still images in response to a user operation;
(D) storing a still image selected from the plurality of displayed still images;
An image processing method.
(a)動画が表示されている間に、複数の異なるタイミングの静止画を前記動画から抽出し、記憶するための処理と、
(b)前記記憶されている複数の静止画を、ユーザ操作に応答して表示するための処理と、
(c)前記表示されている複数の静止画から、ユーザ操作に応答して1もしくは複数の静止画を選択するための処理と、
を実行させるプログラム。 A program for causing a computer to execute image processing.
(A) a process for extracting and storing a plurality of still images at different timings from the moving image while the moving image is displayed;
(B) a process for displaying the plurality of stored still images in response to a user operation;
(C) processing for selecting one or more still images in response to a user operation from the displayed still images;
A program that executes
動画を表示する手段と、
複数の異なるタイミングの静止画を前記表示されている動画から抽出する手段と、
前記抽出された複数の静止画を記憶する手段と、
前記記憶されている複数の静止画を、ユーザ操作に応答して表示する手段と、
前記表示されている複数の静止画から、ユーザ操作に応答して静止画を選択する手段と、
を有する画像処理装置。 An image processing device capable of selecting a still image from a displayed video,
A means of displaying videos,
Means for extracting a plurality of still images at different timings from the displayed moving image;
Means for storing the extracted still images;
Means for displaying the plurality of stored still images in response to a user operation;
Means for selecting a still image in response to a user operation from the displayed still images;
An image processing apparatus.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003278351A JP2005045606A (en) | 2003-07-23 | 2003-07-23 | Image processing method, image processing device, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003278351A JP2005045606A (en) | 2003-07-23 | 2003-07-23 | Image processing method, image processing device, and program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2005045606A true JP2005045606A (en) | 2005-02-17 |
Family
ID=34264784
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003278351A Pending JP2005045606A (en) | 2003-07-23 | 2003-07-23 | Image processing method, image processing device, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2005045606A (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007189324A (en) * | 2006-01-11 | 2007-07-26 | Noritsu Koki Co Ltd | Still picture extraction system |
JP2015040775A (en) * | 2013-08-22 | 2015-03-02 | 日置電機株式会社 | Measurement data processing device, measurement system, and measurement data processing program |
-
2003
- 2003-07-23 JP JP2003278351A patent/JP2005045606A/en active Pending
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007189324A (en) * | 2006-01-11 | 2007-07-26 | Noritsu Koki Co Ltd | Still picture extraction system |
JP4508112B2 (en) * | 2006-01-11 | 2010-07-21 | ノーリツ鋼機株式会社 | Still image extraction system |
JP2015040775A (en) * | 2013-08-22 | 2015-03-02 | 日置電機株式会社 | Measurement data processing device, measurement system, and measurement data processing program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101267523B (en) | Device for processing motion image, imaging apparatus, image display control method | |
KR100883066B1 (en) | Apparatus and method for displaying object moving path using text | |
JP5863400B2 (en) | Similar image search system | |
EP3185539B1 (en) | Information processing apparatus, imaging apparatus, image display control method and computer program | |
JP5506324B2 (en) | Similar image search system and similar image search method | |
US11727960B2 (en) | Recording and reproducing apparatus and method thereof | |
JP2009123196A (en) | Image retrieval device | |
JP3495709B2 (en) | Data recording device | |
JP6214762B2 (en) | Image search system, search screen display method | |
JP2008010979A (en) | Camera apparatus | |
JP2004120178A (en) | Video image recording apparatus | |
JP6210634B2 (en) | Image search system | |
JP5826513B2 (en) | Similar image search system | |
KR20210108691A (en) | apparatus and method for multi-channel image back-up based on event, and network surveillance camera system including the same | |
JP2002262233A (en) | Behavior measurement system | |
JP2005045606A (en) | Image processing method, image processing device, and program | |
JP4326753B2 (en) | Video information indexing support system, program, and storage medium | |
JP4983628B2 (en) | Monitoring device, monitoring method, and monitoring program | |
JP2005117182A (en) | Image display apparatus, image display method, program, and recording medium | |
JP2009152834A (en) | Image playback apparatus | |
JP2019101783A (en) | Information processing device and method | |
JP6662223B2 (en) | Video recording and playback device | |
JP4549325B2 (en) | VIDEO INFORMATION INDEXING SUPPORT DEVICE, PROGRAM, AND STORAGE MEDIUM | |
KR20210065006A (en) | Appratus and method for multi-channel image back-up based on event, and network surveillance camera system including the same | |
JP2004112005A (en) | Image recorder |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20051226 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080313 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080318 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080508 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080603 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20080626 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080714 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20080819 |