JP2005045606A - Image processing method, image processing device, and program - Google Patents

Image processing method, image processing device, and program Download PDF

Info

Publication number
JP2005045606A
JP2005045606A JP2003278351A JP2003278351A JP2005045606A JP 2005045606 A JP2005045606 A JP 2005045606A JP 2003278351 A JP2003278351 A JP 2003278351A JP 2003278351 A JP2003278351 A JP 2003278351A JP 2005045606 A JP2005045606 A JP 2005045606A
Authority
JP
Japan
Prior art keywords
image
still
still image
displayed
still images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2003278351A
Other languages
Japanese (ja)
Inventor
Kazuaki Takenaka
一晃 竹中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Azbil Corp
Original Assignee
Azbil Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Azbil Corp filed Critical Azbil Corp
Priority to JP2003278351A priority Critical patent/JP2005045606A/en
Publication of JP2005045606A publication Critical patent/JP2005045606A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image processing method capable of saving a snap shot from an animation at an optimum timing. <P>SOLUTION: A still image selecting screen 500 is displayed when a mouse pointer 403 is superposed on a still image designating icon 405 in a window 401 and a mouse is clicked within an animation reproduction screen 400. In a window 501, an example is displayed in which seven frames of still images are displayed around the timing of clicking. When the mouse pointer 403 is superposed on the still image designating icon 405 while an animation is reproduced, extracting of a still image data and temporary saving are started at a prescribed cycle from the animation data. When the mouse is clicked, a plurality of stored still images are displayed on the still image selecting screen 500. A user can select a still image of a required timing from the displayed still image to store it as a snap shot. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は画像処理に関し、特に、ユーザ操作に従って動画から静止画を抽出するための画像処理方法、画像処理装置及びプログラムに関する。   The present invention relates to image processing, and more particularly to an image processing method, an image processing apparatus, and a program for extracting a still image from a moving image according to a user operation.

セキュリティに対する関心の高まりに伴い、多くの店舗、住宅、ビル、マンションなどにおいて、防犯のための監視システムが導入されている。通常の監視システムにおいて、監視カメラは24時間連続運転を行っており、監視カメラによって撮像された画像は監視モニタに表示され、又、磁気テープなどの記録媒体に記録される。このような監視システムにおいて、記録されている動画、あるいはライブ動画から所定のタイミングの画像を選択して、スナップショットとして保存することが必要とされる場合がある。   With increasing interest in security, surveillance systems for crime prevention have been introduced in many stores, houses, buildings, condominiums, and the like. In a normal monitoring system, the monitoring camera operates continuously for 24 hours, and an image captured by the monitoring camera is displayed on a monitoring monitor and recorded on a recording medium such as a magnetic tape. In such a monitoring system, it may be necessary to select an image at a predetermined timing from a recorded moving image or a live moving image and save it as a snapshot.

例えば、犯罪事件などの事象が生じた場合、その事象に関連するタイミングのスナップショットを抽出し、解析、頒布のために使用することがある。あるいは、例えばデジタルカメラは、ユーザによるデジタル静止画像の撮影のために、カメラによって撮影されている動画を表示する。ユーザは液晶表示装置などの表示画面に表示された動画を確認しながら、所望のタイミングでシャッタを押すことによって、静止画像を保存することができる。   For example, when an event such as a criminal case occurs, a snapshot of timing related to the event may be extracted and used for analysis and distribution. Alternatively, for example, the digital camera displays a moving image captured by the camera for the user to capture a digital still image. The user can save a still image by pressing a shutter at a desired timing while checking a moving image displayed on a display screen such as a liquid crystal display device.

尚、監視カメラによって撮像された動画データから抽出された静止画の一つの利用態様として、ユーザが所望の動画を選択するためのインデックスとして静止画を利用することできる監視システムが提案されている(例えば、特許文献1を参照)。監視カメラによって撮像された所定の動画データは、所定の検索キー情報とともに保管される。動画データから静止画データを抽出し、静止画情報と検索キー情報を利用者が分かりやすいような形のホームページとして編集し表示する。利用者はパソコンを使用し、ホームページの中の静止画とキー情報一覧から目的の静止画を選択することによって、静止画が抽出された動画を表示させることができる。   As one usage mode of still images extracted from moving image data captured by a monitoring camera, a monitoring system that can use a still image as an index for a user to select a desired moving image has been proposed ( For example, see Patent Document 1). The predetermined moving image data imaged by the monitoring camera is stored together with predetermined search key information. Still image data is extracted from moving image data, and still image information and search key information are edited and displayed as a homepage in a form that is easy for the user to understand. A user can display a moving image from which a still image is extracted by selecting a target still image from a still image and a key information list on a homepage using a personal computer.

特開2002−330378号公報JP 2002-330378 A

上記のように、動画として表示されている画像から、必要とする瞬間の画像をスナップショット(静止画)として保存する場合、従来の典型的な保存方法においては、ユーザは動画を見ながら、必要とする画像が表示されたタイミングでスナップショット保存操作を行う。しかし、保存操作から実際にスナップショットとして保存されるまでに内部処理のための時間差が生じることや、ユーザによる保存操作自体が所望のタイミングから遅れてしまうことがある。あるいは、保存操作直後に、実際に保存操作を行った画像よりもよい画像が表示されることがある。   As described above, when saving an image of a required moment as a snapshot (still image) from an image displayed as a moving image, in a conventional typical saving method, the user needs to watch the moving image. The snapshot saving operation is performed at the timing when the image to be displayed is displayed. However, there may be a time difference for internal processing from the saving operation to the actual saving as a snapshot, or the saving operation by the user may be delayed from a desired timing. Alternatively, an image better than the image on which the save operation is actually performed may be displayed immediately after the save operation.

このように、従来のスナップショット保存処理においては、ユーザにとって最適な静止画を1回のスナップショット保存処理で保存できないことがあった。このため、録画された動画を再生し、再生画像からスナップショットを保存する場合、最適なスナップショットを撮ることができるまで録画の巻き戻し及び再生処理を交互に繰り返し、画像保存操作を何度も試みなければならなかった。あるいいは、スナップショットを取得するための動画がライブ画像であれ場合、スナップショットを撮ることができなかった瞬間の画像を、ユーザは2度と得ることはできない。   As described above, in the conventional snapshot saving process, a still image optimal for the user may not be saved by one snapshot saving process. For this reason, when playing back a recorded video and saving a snapshot from the playback image, the recording rewinding and playback processes are repeated alternately until the optimal snapshot can be taken, and the image saving operation is repeated many times. I had to try. In other words, if the moving image for acquiring the snapshot is a live image, the user cannot obtain the image at the moment when the snapshot could not be taken again.

従って、本発明の一つの目的は、ユーザが動画から静止画を効果的に選択することができる画像処理を提供することである。本発明の他の目的は、表示中の動画から抽出された所望のタイミングでの静止画を保存することができる画像処理を提供することである。本発明の他の目的は、ユーザ操作とユーザが望む静止画のタイミングのずれを小さくすることができる画像処理を提供することである。本発明の他の目的は、表示中の動画から抽出された静止画において、ユーザにとってより好ましいタイミングの静止画を選択することができる画像処理を提供することである。   Accordingly, one object of the present invention is to provide image processing that allows a user to effectively select a still image from a moving image. Another object of the present invention is to provide an image processing capable of storing a still image at a desired timing extracted from a moving image being displayed. Another object of the present invention is to provide an image processing capable of reducing a difference in timing between a user operation and a still image desired by the user. Another object of the present invention is to provide image processing that can select a still image at a more preferable timing for a user from among still images extracted from a moving image being displayed.

本発明の一つの態様は、表示されている動画から静止画を選択するための画像処理方法であって、(a)動画を表示するステップと、(b)複数の異なるタイミングの静止画を前記表示されている動画から抽出し、記憶するステップと、(c)前記記憶されている複数の静止画を、ユーザ操作に応答して表示するステップと、(d)前記表示されている複数の静止画から選択された静止画を保存するステップとを有する。この構成を有することによって、表示されている動画から、ユーザがより好ましい静止画を選択することができる。   One aspect of the present invention is an image processing method for selecting a still image from displayed moving images, wherein (a) a step of displaying a moving image, and (b) a plurality of still images at different timings are displayed. Extracting and storing from the displayed moving image; (c) displaying the plurality of stored still images in response to a user operation; and (d) the plurality of displayed still images. Storing a still image selected from the image. By having this configuration, the user can select a more preferable still image from the displayed moving images.

前記ステップ(c)において表示される複数の静止画は、前記表示されている動画からユーザが静止画を指定する静止画指定操作よりも前のタイミングの静止画を含むことが好ましい。これにより、例えば、静止画指定操作が遅れた場合においても、好ましいタイミングの静止画を取得することができる。好ましくは、前記ステップ(c)において表示される複数の静止画は、前記静止画指定操作よりも後のタイミングの静止画を含む。これによって、静止画指定操作と所望タイミングのずれを抑制することができる。   The plurality of still images displayed in step (c) preferably include still images at a timing prior to a still image specifying operation in which a user specifies a still image from the displayed moving image. Thereby, for example, even when the still image designation operation is delayed, a still image at a preferred timing can be acquired. Preferably, the plurality of still images displayed in the step (c) include still images at a timing later than the still image specifying operation. Thereby, it is possible to suppress a deviation between the still image designation operation and the desired timing.

前記ステップ(b)は、前記静止画指定操作の前にユーザによってなされる指定前操作に応答して開始されることが好ましい。これによって、効率的に静止画抽出、記憶処理を行うことができる。さらに、前記指定前操作は、表示画面における所定範囲へのポインタの移動であることが好ましい。これにより、ポインタによる画像処理において効果的に処理を開始することができる。前記所定範囲は、前記静止画指定操作を行うアイコンが表示されている領域であることが好ましい。これにより、効果的に指定前操作を検出することができる。   The step (b) is preferably started in response to a pre-designation operation performed by a user before the still image designating operation. Thereby, it is possible to efficiently perform still image extraction and storage processing. Furthermore, it is preferable that the pre-designation operation is a movement of the pointer to a predetermined range on the display screen. Thereby, processing can be effectively started in image processing using a pointer. The predetermined range is preferably an area in which an icon for performing the still image designation operation is displayed. Thereby, the pre-designation operation can be detected effectively.

本発明の他の態様は、コンピュータに画像処理を実行させるプログラムであって、前記コンピュータに、(a)動画が表示されている間に、複数の異なるタイミングの静止画を前記動画から抽出し、記憶するための処理と、(b)前記記憶されている複数の静止画を、ユーザ操作に応答して表示するための処理と、(c)前記表示されている複数の静止画から、ユーザ操作に応答して1もしくは複数の静止画を選択するための処理と、を実行させる。この構成を有することによって、表示されている動画から、ユーザがより好ましい静止画を選択することができる。   Another aspect of the present invention is a program for causing a computer to perform image processing, wherein (a) while a moving image is displayed on the computer, a plurality of still images at different timings are extracted from the moving image, A process for storing; (b) a process for displaying the plurality of stored still images in response to a user operation; and (c) a user operation from the plurality of displayed still images. And a process for selecting one or more still images in response to. By having this configuration, the user can select a more preferable still image from the displayed moving images.

前記処理(c)によって表示される複数の静止画は、前記表示されている動画からユーザが静止画を指定する静止画指定操作よりも前のタイミングで表示された静止画を含むことが好ましい。これにより、例えば、静止画指定操作が遅れた場合においても、好ましいタイミングの静止画を取得することができる。好ましくは、前記ステップ(c)において表示される複数の静止画は、前記静止画指定操作よりも後のタイミングの静止画を含む。これによって、静止画指定操作と所望タイミングのずれを抑制することができる。   It is preferable that the plurality of still images displayed by the process (c) include still images displayed at a timing before a still image specifying operation in which a user specifies a still image from the displayed moving image. Thereby, for example, even when the still image designation operation is delayed, a still image at a preferred timing can be acquired. Preferably, the plurality of still images displayed in the step (c) include still images at a timing later than the still image specifying operation. Thereby, it is possible to suppress a deviation between the still image designation operation and the desired timing.

本発明の他の態様は、表示されている動画から静止画を選択可能画像処理装置であって、動画を表示する手段と、複数の異なるタイミングの静止画を前記表示されている動画から抽出する手段と、前記抽出された複数の静止画を記憶する手段と、前記記憶されている複数の静止画を、ユーザ操作に応答して表示する手段と、前記表示されている複数の静止画から、ユーザ操作に応答して静止画を選択する手段と、を有する画像処理装置。この構成を有することによって、表示されている動画から、ユーザがより好ましい静止画を選択することができる。   Another aspect of the present invention is an image processing apparatus capable of selecting a still image from a displayed moving image, and means for displaying the moving image and extracting a plurality of still images at different timings from the displayed moving image. Means, means for storing the plurality of extracted still images, means for displaying the stored plurality of still images in response to a user operation, and the plurality of displayed still images, Means for selecting a still image in response to a user operation. By having this configuration, the user can select a more preferable still image from the displayed moving images.

前記静止画を記憶する手段に記憶される静止画は、前記表示されている動画からユーザが静止画を指定する静止画指定操作よりも前のタイミングの静止画を含むことが好ましい。これにより、例えば、静止画指定操作が遅れた場合においても、好ましいタイミングの静止画を取得することができる。好ましくは、前記静止画を記憶する手段に記憶される静止画は、前記表示されている動画からユーザが静止画を指定する静止画指定操作よりも後のタイミングの静止画を含むことが好ましい。これにより、静止画指定操作と所望タイミングのずれを抑制することができる。好ましくは、前記静止画を記憶する手段は、予め定められた数の静止画を記憶し、最も古い静止画を削除して前記表示されている動画から新たに抽出した静止画を記憶することが好ましい。これによって、効率的に抽出された静止画の記憶を行うことができる。   The still image stored in the means for storing the still image preferably includes a still image at a timing prior to a still image specifying operation in which a user specifies a still image from the displayed moving image. Thereby, for example, even when the still image designation operation is delayed, a still image at a preferred timing can be acquired. Preferably, the still image stored in the means for storing the still image preferably includes a still image at a timing later than a still image specifying operation in which a user specifies a still image from the displayed moving image. Thereby, it is possible to suppress a deviation between the still image designation operation and the desired timing. Preferably, the means for storing the still image stores a predetermined number of still images, deletes the oldest still image, and stores a still image newly extracted from the displayed moving image. preferable. As a result, it is possible to store the extracted still image efficiently.

本発明によれば、表示されている動画から、ユーザはより好ましい静止画を選択することができる。   According to the present invention, the user can select a more preferable still image from the displayed moving image.

以下に、本発明を適用可能な実施の形態が説明される。以下の説明は、本発明の実施形態を説明するものであり、本発明が以下の実施形態に限定されるものではない。説明の明確化のため、以下の記載は、適宜、省略及び簡略化がなされている。又、当業者であれば、以下の実施形態の各要素を、本発明の範囲において容易に変更、追加、変換することが可能である。   Hereinafter, embodiments to which the present invention can be applied will be described. The following description is to describe the embodiment of the present invention, and the present invention is not limited to the following embodiment. For clarity of explanation, the following description is omitted and simplified as appropriate. Moreover, those skilled in the art can easily change, add, and convert each element of the following embodiments within the scope of the present invention.

実施の形態1.
図1は、本実施の形態にかかる監視システム100における、ハードウェア及びネットワーク構成の概略を示す構成図である。図1において、110a、bは、所定の監視範囲を撮像する監視カメラである。130は、監視カメラ101によって撮像された画像を記録メディアに記録することによって蓄積する画像データ・サーバである。150は、監視カメラによって撮像された画像を表示、編集することができる監視画像処理装置である。各装置は、ネットワーク170に接続され、監視カメラ110によって撮像された画像データは、ネットワーク170を介して通信される。
Embodiment 1 FIG.
FIG. 1 is a configuration diagram showing an outline of hardware and network configurations in the monitoring system 100 according to the present embodiment. In FIG. 1, reference numerals 110a and 110b denote monitoring cameras that capture an image of a predetermined monitoring range. Reference numeral 130 denotes an image data server that stores an image captured by the monitoring camera 101 by recording it on a recording medium. A monitoring image processing apparatus 150 can display and edit an image captured by the monitoring camera. Each device is connected to the network 170, and image data captured by the monitoring camera 110 is communicated via the network 170.

監視カメラ110は、ビルや住宅などの建造物の入口や、屋内もしくは屋外の所定場所に配置され、監視範囲内の様子を撮像した動画像データを、ネットワーク170を介して送信する。監視カメラ110は、セキュリティ用途の他、様々な物体や人物の監視もしくは観察などのために利用することができる。監視カメラ110からネットワーク170に出力された動画像データは、画像データ・サーバ130に転送され、蓄積される。あるいは、監視カメラ110からの動画像データは、監視カメラ110もしくは画像データ・サーバ130から、監視画像処理装置150に転送される。監視画像処理装置150は、監視画像をディスプレイに表示することによって、ユーザに監視範囲の状況を提示する。監視画像処理装置150は、さらに、画像データの編集を行うことができ、ユーザ操作に従って、動画から静止画(スナップ・ショット)を抽出、保存することができる。監視画像処理装置150による画像データ編集処理については、後に説明される。   The monitoring camera 110 is arranged at an entrance of a building such as a building or a house, or a predetermined place indoors or outdoors, and transmits moving image data obtained by capturing an image of the state within the monitoring range via the network 170. The surveillance camera 110 can be used not only for security purposes but also for monitoring or observing various objects and people. The moving image data output from the monitoring camera 110 to the network 170 is transferred to the image data server 130 and stored. Alternatively, the moving image data from the monitoring camera 110 is transferred from the monitoring camera 110 or the image data server 130 to the monitoring image processing device 150. The monitoring image processing apparatus 150 presents the status of the monitoring range to the user by displaying the monitoring image on the display. The monitoring image processing apparatus 150 can further edit image data, and can extract and store still images (snap shots) from moving images in accordance with user operations. The image data editing process by the monitoring image processing apparatus 150 will be described later.

図2は、画像データ・サーバ130及び監視画像処理装置150のハードウェア構成の一例を示している。画像データ・サーバ130及び監視画像処理装置105は、典型的なコンピュータ・システムが利用可能であり、中央処理装置(CPU)201とメモリ204とを含んでいる。CPU201とメモリ204とは、バスを介して補助記憶装置としてのハードディスク装置213に接続される。フレキシビルディスク装置220、ハードディスク装置213、CD−ROMドライブ226等の記憶媒体駆動装置は、フレキシビルディスク・コントローラ219、IDEコントローラ225などの各種コントローラを介してバスに接続される。フレキシビルディスク装置220等の記憶媒体駆動装置には、フレキシビルディスク等の可搬型記憶媒体が挿入される。   FIG. 2 shows an example of the hardware configuration of the image data server 130 and the monitoring image processing apparatus 150. The image data server 130 and the monitoring image processing device 105 can use a typical computer system, and include a central processing unit (CPU) 201 and a memory 204. The CPU 201 and the memory 204 are connected to a hard disk device 213 as an auxiliary storage device via a bus. Storage medium drive devices such as the flexiville disk device 220, the hard disk device 213, and the CD-ROM drive 226 are connected to the bus via various controllers such as the flexiville disk controller 219 and the IDE controller 225. A portable storage medium such as a flexivir disk is inserted into a storage medium drive such as the flexidisk disk device 220.

記憶媒体にはオペレーティングシステムと共同してCPU201等に命令を与え、本実施形態を実施するためのコンピュータ・プログラムを記憶することができる。コンピュータ・プログラムは、メモリ204にロードされることによって実行される。コンピュータ・プログラムは圧縮し、又、複数に分割して記憶媒体に記憶することができる。ハードウェア構成は、典型的には、ユーザ・インターフェース・ハードウェアを備える。ユーザ・インターフェース・ハードウェアとしては、例えば、入力をするためのポインティング・デバイス(マウス207、ジョイスティック等)やキーボード206、あるいは、視覚データをユーザに提示するための液晶ディスプレイなどの表示装置211がある。シリアルポート215を介してモデムを接続することが可能であり、シリアルポート215、モデムまたはトークンリングや通信アダプタ218を介してネットワークに接続し、他のコンピュータ・システムと通信を行うことができる。上記構成は必要に応じて省略することができる。例えば、直接接続されたユーザ・インターフェース・ハードウェアを使用することなく、ネットワークを介して画像データ・サーバ103を操作することができる。   The storage medium can store a computer program for implementing this embodiment by giving instructions to the CPU 201 and the like in cooperation with the operating system. The computer program is executed by being loaded into the memory 204. The computer program can be compressed or divided into a plurality of pieces and stored in a storage medium. The hardware configuration typically comprises user interface hardware. User interface hardware includes, for example, a display device 211 such as a pointing device (mouse 207, joystick, etc.) or keyboard 206 for inputting, or a liquid crystal display for presenting visual data to the user. . A modem can be connected via the serial port 215, and can be connected to a network via the serial port 215, modem or token ring or communication adapter 218 to communicate with other computer systems. The above configuration can be omitted as necessary. For example, the image data server 103 can be operated via a network without using directly connected user interface hardware.

図3は、監視カメラ110、画像データ・サーバ130、及び監視画像処理装置150の論理構成を示すブロック図である。各論理ブロックは、ハードウェア構成、あるいはハードウェア構成とソフトウェアとが共同して機能することによって実現することができる。典型的には、画像データ・サーバ130、及び監視画像処理装置150は、コンピュータ上でソフトウェアを起動、実行することによって実現することができる。監視カメラ110は、CCDなど、入射光を電気信号に変換し、動画像データとして出力する撮像部111、撮像部111から取得した動画像データの処理を行う動画像データ処理部112、及び動画像データの通信処理を行う通信インターフェース部113を備えている。   FIG. 3 is a block diagram illustrating logical configurations of the monitoring camera 110, the image data server 130, and the monitoring image processing apparatus 150. Each logical block can be realized by a hardware configuration or a hardware configuration and software functioning together. Typically, the image data server 130 and the monitoring image processing apparatus 150 can be realized by starting and executing software on a computer. The surveillance camera 110 is a CCD or the like that converts incident light into an electrical signal and outputs it as moving image data, a moving image data processing unit 112 that processes moving image data acquired from the imaging unit 111, and a moving image. A communication interface unit 113 that performs data communication processing is provided.

監視範囲から撮像部111に入射した映像光信号は、電気信号としての動画像データに変換され、動画像データ処理部112に入力される。動画像データ処理部112は、MPEG2などの規格に従った圧縮処理など、動画像データについて所定の符号化処理を行う。符号化画像データはネットワークを介した通信のためにパケット化され、通信インターフェース部113に入力される。通信インターフェース部113は、所定のプロトコルに従って、パケット・データに関するデータ処理及びネットワーク170を介した画像データの転送処理を実行する。   The video light signal incident on the imaging unit 111 from the monitoring range is converted into moving image data as an electric signal and input to the moving image data processing unit 112. The moving image data processing unit 112 performs predetermined encoding processing on moving image data such as compression processing according to a standard such as MPEG2. The encoded image data is packetized for communication via the network and input to the communication interface unit 113. The communication interface unit 113 executes data processing related to packet data and image data transfer processing via the network 170 according to a predetermined protocol.

画像データ・サーバ130は、監視カメラ110からの動画像データを蓄積する画像データ蓄積部131を有している。画像データ蓄積部131は外部記憶装置としての蓄積メディアを備え、取得した画像データを蓄積メディアに記憶する。蓄積メディアは、磁気テープ、光ディスク、磁気ディスクなど、必要に応じて適切な種類の記録媒体が利用される。画像データ管理部133は、画像データ蓄積部131に記録されるデータの管理を行い、データの登録、読み出し、消去、あるいは更新などの処理を実行する。監視カメラ110から送信された動画像データは、通信インターフェース部132を介して画像データ管理部133に渡される。画像データ管理部133は、取得した画像データを画像データ蓄積部131に記録する。さらに、画像データ・サーバ130は、監視画像処理装置150からの要求に応答して、要求された蓄積画像データを蓄積メディアから選択し、監視画像処理装置150に送信する。   The image data server 130 includes an image data storage unit 131 that stores moving image data from the monitoring camera 110. The image data storage unit 131 includes a storage medium as an external storage device, and stores the acquired image data in the storage medium. As the storage medium, an appropriate type of recording medium such as a magnetic tape, an optical disk, or a magnetic disk is used as necessary. The image data management unit 133 manages data recorded in the image data storage unit 131 and executes processing such as data registration, reading, erasure, or update. The moving image data transmitted from the monitoring camera 110 is transferred to the image data management unit 133 via the communication interface unit 132. The image data management unit 133 records the acquired image data in the image data storage unit 131. Further, in response to the request from the monitoring image processing apparatus 150, the image data server 130 selects the requested stored image data from the storage medium and transmits it to the monitoring image processing apparatus 150.

監視画像処理装置150は、監視カメラ110、あるいは画像データ・サーバ130から受信した動画像データの表示及び編集処理を実行することができる。監視画像処理装置150は、ネットワーク170を介した画像データの通信処理を行う通信インターフェース部151、画像データに関する一連の処理を実行する画像データ処理部152、画像データを表示する表示部153、ユーザによって操作され、ユーザ操作に応じたデータを出力する入力操作部154、入力操作部154からのデータに応じて、ユーザによる入力操作を判定する入力操作判定部155を備えている。各機能ブロックは、ハードウェア構成により、あるいは、プログラム及び必要なデータがメモリ204上に展開され、プログラムに従ってCPU201が他のハードウェア構成と共同して処理を実行することによって実現することができる。   The monitoring image processing apparatus 150 can execute display and editing processing of moving image data received from the monitoring camera 110 or the image data server 130. The monitoring image processing apparatus 150 includes a communication interface unit 151 that performs communication processing of image data via the network 170, an image data processing unit 152 that executes a series of processing related to image data, a display unit 153 that displays image data, and a user. An input operation unit 154 that is operated and outputs data corresponding to a user operation, and an input operation determination unit 155 that determines an input operation by the user according to data from the input operation unit 154 are provided. Each functional block can be realized by a hardware configuration, or by a program and necessary data being loaded on the memory 204, and the CPU 201 executing a process in cooperation with other hardware configurations according to the program.

ネットワークを介して転送された動画像データは、通信インターフェース部151に入力される。通信インターフェース部151は受信したパケット・データに関する処理を実行する。録画された動画像データを画像データ・サーバ130からダウンロードする場合、あるいは監視カメラからライブ画像データを取得する場合、取得した動画像データは、ハードディスクなどの外部記憶装置156に記憶することができる。動画像データの表示もしくは編集のために、画像データ処理部152は外部記憶装置156に記憶された動画像データを取得する。   The moving image data transferred via the network is input to the communication interface unit 151. The communication interface unit 151 executes processing related to the received packet data. When the recorded moving image data is downloaded from the image data server 130 or when live image data is acquired from the surveillance camera, the acquired moving image data can be stored in an external storage device 156 such as a hard disk. In order to display or edit the moving image data, the image data processing unit 152 acquires the moving image data stored in the external storage device 156.

例えば、監視カメラ110からのライブ動画データ、もしくは、画像データ・サーバ130からの動画像データをストリーミングによって表示する場合などは、画像データ処理部152は、通信インターフェース部151が受信した動画像データを、通信インターフェース部151から取得する。画像データ処理部152は、通信インターフェース部151もしくは外部記憶装置156から取得した動画像データに対して、必要なデコード処理を実行する。デコード処理された動画像データは表示部153に渡され、表示部153はディスプレイ上に動画を表示する。監視カメラ110からのライブ動画像は、表示部153が表示すると同時に、外部記憶装置156に記憶することができる。   For example, when live video data from the monitoring camera 110 or moving image data from the image data server 130 is displayed by streaming, the image data processing unit 152 uses the moving image data received by the communication interface unit 151. , Acquired from the communication interface unit 151. The image data processing unit 152 performs necessary decoding processing on the moving image data acquired from the communication interface unit 151 or the external storage device 156. The decoded moving image data is transferred to the display unit 153, and the display unit 153 displays a moving image on the display. The live moving image from the monitoring camera 110 can be stored in the external storage device 156 at the same time as the display unit 153 displays it.

図4は、ディスプレイ上に動画像が表示された場合の表示画面の一例を示している。図4は、録画された動画像を表示する表示画面の例を示している。動画404はウィンドウ401内に表示され、マウス操作によって表示画像をコントロールすることができる。ウィンドウ401内には画像操作のための各種アイコンが表示され、これらアイコンをマウスなどの入力操作部154を使用して選択することによって、表示画像の操作を行うことができる。例えば、再生アイコン402上にマウス・ポインタ403を移動し、アイコン上でマウスをクリック操作することによって動画再生を行うことができる。早送り/巻戻し、静止、終了などの他の操作も同様に行うことができる。   FIG. 4 shows an example of a display screen when a moving image is displayed on the display. FIG. 4 shows an example of a display screen that displays a recorded moving image. The moving image 404 is displayed in the window 401, and the display image can be controlled by operating the mouse. Various icons for image operation are displayed in the window 401, and the display image can be operated by selecting these icons using the input operation unit 154 such as a mouse. For example, a moving image can be reproduced by moving the mouse pointer 403 on the reproduction icon 402 and clicking the mouse on the icon. Other operations such as fast forward / rewind, rest, and end can be performed in the same manner.

監視画像処理装置150は、動画から静止画を抽出し、静止画スナップショットを生成することができる。例えば、監視システム100における監視領域において何らかの事象が生じた場合、監視カメラ110によって撮像された映像における特定の瞬間の静止画が必要とされる場合がある。発生事象に特に関連の深い瞬間の静止画を動画から抽出してレポートに添付する場合などに、静止画スナップショット生成機能は有用である。本形態においては、複数の静止画からユーザが所望の静止画を選択することができる。図5は、静止画を選択するために表示部153よって表示される、表示画面500の一例を示している。   The monitoring image processing apparatus 150 can extract a still image from a moving image and generate a still image snapshot. For example, when an event occurs in the monitoring area of the monitoring system 100, a still image at a specific moment in the video captured by the monitoring camera 110 may be required. The still image snapshot generation function is useful when, for example, a still image of a moment that is particularly relevant to an occurrence event is extracted from a moving image and attached to a report. In this embodiment, the user can select a desired still image from a plurality of still images. FIG. 5 shows an example of a display screen 500 displayed by the display unit 153 to select a still image.

図5に示すように、監視画像処理装置150は、動画再生中に、マウスやキーボードなどの入力操作部154によって静止画指定操作が行われた場合、動画から抽出された複数の静止画を選択的に表示部153に表示する。動画データから抽出された複数の静止画データは一時的にメモリ157に記憶され、入力操作部154の静止画指定操作に応答して、候補となる複数の静止画が静止画選択画面500に表示される。ユーザは、動画像再生中に所望の画像が表示されているタイミングで、入力操作部154によって静止画指定操作を行う。   As shown in FIG. 5, the monitoring image processing apparatus 150 selects a plurality of still images extracted from a moving image when a still image specifying operation is performed by an input operation unit 154 such as a mouse or a keyboard during moving image reproduction. Is displayed on the display unit 153. A plurality of still image data extracted from the moving image data is temporarily stored in the memory 157, and a plurality of candidate still images are displayed on the still image selection screen 500 in response to a still image specifying operation of the input operation unit 154. Is done. The user performs a still image designation operation with the input operation unit 154 at a timing when a desired image is displayed during moving image reproduction.

さらに、静止画選択画面による選択・保存操作によって、スナップショットが記憶装置156に保存される。これによって、複数の静止画からユーザが必要な一つもしくは複数の静止画を選択し、スナップショットとして保存することができる。好ましくは、静止画指定操作タイミングよりも前に表示された静止画と、その静止画以降の複数コマの静止画が表示画面500に表示される。さらに好ましくは、静止画指定操作タイミングの前後にまたがる時間に表示された複数の静止画が表示される。静止画指定操作の前の静止画を含むことによって、静止画指定操作の遅れをカバーし、あるいは、静止画抽出、保存処理の遅れをカバーすることができる。一方、静止画指定操作の後の静止画を含むことによって、静止画指定操作後に被写体がさらに良い動作をしたときなど、最も好ましい静止画タイミングが静止画指定操作後にある場合に対応することができる。   Further, the snapshot is saved in the storage device 156 by the selection / save operation on the still image selection screen. Accordingly, one or a plurality of still images required by the user can be selected from a plurality of still images and saved as a snapshot. Preferably, a still image displayed before the still image designation operation timing and a plurality of still images after the still image are displayed on the display screen 500. More preferably, a plurality of still images displayed at a time spanning before and after the still image designation operation timing are displayed. By including the still image before the still image designating operation, the delay of the still image designating operation can be covered, or the delay of the still image extraction and storage processing can be covered. On the other hand, including the still image after the still image designating operation can cope with the case where the most preferable still image timing is after the still image designating operation, such as when the subject performs a better operation after the still image designating operation. .

図5の例において、静止画選択画面500は、動画再生画面400において、ウィンドウ401内の静止画指定アイコン405上にマウス・ポインタ403が重なり、マウス・クリック操作が行われることによって表示される。マウス・クリック操作は静止画指定操作に相当する。ウィンドウ501内には、クリック操作タイミング前後の7コマの静止画が表示される例が示されている。図5の例においては、(4)で指示された静止画がクリック操作のタイミングに相当する。各静止画は過去から未来への時間経過に従ってレイアウトされており、左上の画像から右下の画像に向かって、時間経過に従う静止画が配置されている。各静止画に付された番号は時間経過に従った順番で付されている。   In the example of FIG. 5, the still image selection screen 500 is displayed by moving the mouse pointer 403 over the still image designation icon 405 in the window 401 on the moving image playback screen 400 and performing a mouse click operation. A mouse click operation corresponds to a still image designation operation. In the window 501, an example is shown in which seven frames of still images before and after the click operation timing are displayed. In the example of FIG. 5, the still image designated in (4) corresponds to the timing of the click operation. Each still image is laid out in accordance with the passage of time from the past to the future, and still images are arranged according to the passage of time from the upper left image to the lower right image. The numbers given to the still images are given in order according to the passage of time.

ユーザは、表示された複数の静止画から一つもしくは複数の静止画を、マウスもしくはキーボードを操作して選択することができる。図5においては、静止画(3)が選択された例が示されている。さらに、保存アイコンを選択してONにセットすることによって、所望のスナップショットを生成、保存することができる。図5においては、マウス操作によってスナップショット保存処理を行う例が示されているが、マウスに限らず、キーボードや入力ペンなど、他の入力装置の操作に応答して、処理を実行することができる。   The user can select one or a plurality of still images from the displayed plurality of still images by operating the mouse or the keyboard. FIG. 5 shows an example in which the still image (3) is selected. Furthermore, a desired snapshot can be generated and saved by selecting the save icon and setting it to ON. FIG. 5 shows an example in which snapshot saving processing is performed by a mouse operation. However, the processing may be executed in response to an operation of another input device such as a keyboard or an input pen, not limited to a mouse. it can.

動画から静止画スナップショットを生成、保存するための画像処理の好ましい例を説明する。本例において、マウス・ポインタ403と静止画指定アイコン403が重なることに応答して、動画データから静止画データが抽出されメモリへの記憶する処理が開始される。マウス・ポインタ403によって静止画指定アイコン403が選択されている状態において、静止画指定操作としてマウス・クリック操作されることによって、メモリ157に記憶されている静止画データが、静止画選択画面500が表示される。   A preferred example of image processing for generating and storing a still image snapshot from a moving image will be described. In this example, in response to the overlap of the mouse pointer 403 and the still image designation icon 403, processing for extracting still image data from the moving image data and storing it in the memory is started. In a state where the still image designation icon 403 is selected by the mouse pointer 403, when the mouse click operation is performed as the still image designation operation, the still image data stored in the memory 157 is displayed on the still image selection screen 500. Is displayed.

図3を参照して、入力操作判定部155は、マウス・ポインタ403と静止画指定アイコン405の座標データから、マウス・ポインタ403が静止画指定アイコン405の領域内にあることを判定する。入力操作判定部155は、マウス・ポインタ403が静止画指定アイコン405の領域内にあると判定すると、画像データ処理部152にその判定結果を通知する。画像データ処理部152は、判定結果に応答して、表示中の動画データからの静止画データの抽出、及びメモリ157への静止画データの一時的記憶処理を開始する。静止画データのサンプリング周期や、メモリ157に記憶する静止画数は、予めユーザが決定することができる。   Referring to FIG. 3, input operation determination unit 155 determines from the coordinate data of mouse pointer 403 and still image designation icon 405 that mouse pointer 403 is within the area of still image designation icon 405. When the input operation determination unit 155 determines that the mouse pointer 403 is within the area of the still image designation icon 405, the input operation determination unit 155 notifies the image data processing unit 152 of the determination result. In response to the determination result, the image data processing unit 152 starts extracting still image data from the moving image data being displayed and temporarily storing the still image data in the memory 157. The sampling period of still image data and the number of still images stored in the memory 157 can be determined in advance by the user.

図6を参照して、動画からスナップショットを生成する処理について説明する。動画データから静止画データを抽出しメモリへ記憶する処理は、静止画指定操作の予め定められた前操作に応答して開始される。本例においては、マウスが所定領域内に入ったこと、特に、マウス・ポインタ403が静止画指定アイコン405に重なったことが、静止画データの抽出、一時的記憶処理を開始するトリガとなる。予め定められた数の静止画がメモリに記憶され、予め定められた数を超える場合、最古のデータを消去して新たなデータが記憶される。静止画指定アイコン405がマウス・クリックによってON状態にセットされた後の所定タイミングまで、静止画の抽出・記憶が続けられる。静止画指定アイコン405がON状態にセットされた後、静止画選択画面500にメモリに記憶されている複数の静止画が表示される。以下の説明において、明示のない場合、各処理は画像データ処理部152によって実行される。   With reference to FIG. 6, the process which produces | generates a snapshot from a moving image is demonstrated. The process of extracting still image data from the moving image data and storing it in the memory is started in response to a predetermined previous operation of the still image designating operation. In this example, when the mouse enters the predetermined area, in particular, when the mouse pointer 403 is overlapped with the still image designation icon 405, the trigger for starting the extraction and temporary storage processing of the still image data is started. A predetermined number of still images are stored in the memory, and when the predetermined number is exceeded, the oldest data is erased and new data is stored. Extraction and storage of still images continues until a predetermined timing after the still image designation icon 405 is set to the ON state by mouse click. After the still image designation icon 405 is set to the ON state, a plurality of still images stored in the memory are displayed on the still image selection screen 500. In the following description, each process is executed by the image data processing unit 152 unless otherwise specified.

マウス・ポインタ403が静止画指定アイコン405の領域内に入り重なると(S601)、フラグや変数に関する所定の初期化処理を実行する(S602)。初期化処理終了後、保存継続フラグがON状態であるか否かを決定する(S603)。保存継続フラグは、動画データから抽出される静止画データのメモリへの一時的保存の継続を決定するフラグである。保存継続フラグがON状態である場合、メモリ157に記憶されている静止画データの数が予め定められた数以上であるかを決定する(S604)。メモリ157に記憶されている静止画データ数が予め定められた数未満である場合、動画データから抽出された静止画データがメモリ157に保存される(S605)。一方、メモリ157に記憶されている静止画データ数が予め定められた数に達している場合、一番古い静止画データを削除し、最新の静止画データをメモリに記憶する(S606)。   When the mouse pointer 403 enters and overlaps the area of the still image designation icon 405 (S601), predetermined initialization processing relating to flags and variables is executed (S602). After the initialization process is completed, it is determined whether or not the storage continuation flag is in an ON state (S603). The storage continuation flag is a flag that determines whether to temporarily store still image data extracted from the moving image data in the memory. If the save continuation flag is ON, it is determined whether the number of still image data stored in the memory 157 is equal to or greater than a predetermined number (S604). When the number of still image data stored in the memory 157 is less than a predetermined number, still image data extracted from the moving image data is stored in the memory 157 (S605). On the other hand, if the number of still image data stored in the memory 157 has reached a predetermined number, the oldest still image data is deleted and the latest still image data is stored in the memory (S606).

入力操作判定部155が、マウス・ポインタ403が静止画指定アイコン405の領域内にあることを判定し(S607)、領域から外れている場合にはメモリの候補静止画データを消去して(S608)終了処理(S615)を実行する。マウス・ポインタ403が静止画指定アイコン403の領域内に維持されている場合、マウス・クリック操作によって静止画指定アイコン403がON状態にセットされた否かを、入力操作判定部155が決定する(S609)。ON状態にセットされていない場合、保存継続フラグ判定処理(S603)に戻り、S604以下の処理を繰り返す。   The input operation determination unit 155 determines that the mouse pointer 403 is within the region of the still image designation icon 405 (S607), and if it is out of the region, erases the candidate still image data in the memory (S608). ) End processing (S615) is executed. When the mouse pointer 403 is maintained within the area of the still image designation icon 403, the input operation determination unit 155 determines whether or not the still image designation icon 403 is set to the ON state by the mouse click operation ( S609). If it is not set to the ON state, the process returns to the storage continuation flag determination process (S603), and the processes from S604 onward are repeated.

静止画指定アイコン403がON状態にセットされると、保存継続回数が1以上であるかを決定する(S610)。保存継続回数は、静止画指定操作(静止画指定アイコンのクリック)の後に、何枚の静止画データを記憶するかを決定する。保存継続回数は、初期化処理において予め定められた値に設定されている。保存継続回数が0に初期化される場合、静止画指定操作以前に表示された静止画のみが静止画選択画面に表示される。好ましくは、静止画指定操作(静止画指定アイコンのクリック)の前後の静止画が表示されるように保存継続回数が設定される。   When the still image designation icon 403 is set to the ON state, it is determined whether the storage continuation count is 1 or more (S610). The number of times of preservation determines how many still image data are stored after a still image designating operation (clicking on a still image designating icon). The storage continuation count is set to a predetermined value in the initialization process. When the number of preservation continuations is initialized to 0, only the still images displayed before the still image designation operation are displayed on the still image selection screen. Preferably, the storage continuation count is set so that still images before and after the still image designation operation (clicking on the still image designation icon) are displayed.

保存継続回数が1以上である場合、保存継続回数を1減算し(S611)、保存継続フラグの判定処理(S603)に戻る。保存継続フラグはON状態に維持されているので、以下、S604以降の処理が繰り返される。保存継続回数が0である場合、保存継続フラグをOFF状態にセットし(S612)、保存継続フラグ判定処理(S603)に戻る。保存継続フラグはOFFにセットされているので、メモリ157に記憶されている複数の候補静止画を表示部153に渡す。表示部153は静止画選択画面に静止画を表示する(S613)。入力操作部154の操作に応答して、選択された静止画の保存、もしくはキャンセル処理が実行される(S614)。静止画選択処理が終了すると、メモリ157に記憶されている候補静止画データが消去され(S608)、終了処理(S615)を実行する。   When the storage continuation count is 1 or more, the storage continuation count is decremented by 1 (S611), and the process returns to the storage continuation flag determination process (S603). Since the storage continuation flag is maintained in the ON state, the processes after S604 are repeated. If the save continuation count is 0, the save continuation flag is set to the OFF state (S612), and the process returns to the save continuation flag determination process (S603). Since the save continuation flag is set to OFF, a plurality of candidate still images stored in the memory 157 are transferred to the display unit 153. The display unit 153 displays the still image on the still image selection screen (S613). In response to the operation of the input operation unit 154, the selected still image is stored or canceled (S614). When the still image selection process ends, the candidate still image data stored in the memory 157 is deleted (S608), and the end process (S615) is executed.

本実施の形態によれば、比較的動きが速く次の瞬間の動作を予測困難な被写体のスナップショットを保存する場合にも、ユーザにとって最適な瞬間のスナップショットを保存することができる。特に、静止画選択操作の前からの静止画が表示されることによって、所望タイミングに対するユーザ操作の遅れ、あるいは、静止画指定操作からの動作時間によるタイミングのずれを防ぐことができる。又、静止画選択操作後の静止画が表示されることによって、最も好ましい静止画タイミングが静止画選択操作後にある場合も、静止画選択操作と所望静止画のタイミングのずれを防ぐことができる。   According to the present embodiment, even when a snapshot of a subject whose movement is relatively fast and whose movement at the next moment is difficult to predict is saved, a snapshot at a moment that is optimal for the user can be saved. In particular, by displaying a still image from before the still image selection operation, it is possible to prevent a delay in user operation with respect to a desired timing or a timing shift due to an operation time from the still image designation operation. Further, by displaying the still image after the still image selection operation, even when the most preferable still image timing is after the still image selection operation, it is possible to prevent the timing difference between the still image selection operation and the desired still image.

上記例においては、静止画指定アイコンの領域とマウス・ポインタの重なりを静止画指定操作の前操作としたが、これに限らず、他の表示領域とマウス・ポインタの重なりを前操作と定義することができる。又、本形態においては、マウス操作に応答して静止画の抽出処理がコントロールされるが、キーボードなど他の入力装置の操作によって処理をコントロールすることができる。例えば、所定のキーに静止画選択が割り当てられ、キーに指の接触を検出するための圧電素子が実装される。静止画選択キーに指が接触したことを圧電素子が検出し、それを静止画指定操作の前操作として、動画データからの静止画データ抽出・記憶処理が開始される。   In the above example, the overlap of the still image designation icon area and the mouse pointer is the pre-operation of the still image designation operation. However, the present invention is not limited to this, and the overlap of the other display area and the mouse pointer is defined as the pre-operation. be able to. In this embodiment, the still image extraction process is controlled in response to a mouse operation, but the process can be controlled by operating another input device such as a keyboard. For example, a still image selection is assigned to a predetermined key, and a piezoelectric element for detecting finger contact is mounted on the key. The piezoelectric element detects that the finger touches the still image selection key, and as a pre-operation of the still image designation operation, still image data extraction / storage processing from the moving image data is started.

静止画選択キーが押下されON状態となることを検出すると、記憶されている複数の静止画が静止画選択画面に表示され、静止画選択処理が実行される。尚、圧電素子に代えて、フォトカプラなどの他の検出装置によって静止画選択キーに指がかかったことを検出することができる。あるいは2段階スイッチを使用して、キーの押下量に応じて処理を行うことができる。例えば、所定の押下量に伴い第1段のスイッチがON状態にセットされたことを前操作として処理し、さらに押下されることによって第2段のスイッチがON状態にセットされ、静止画指定操作として処理される。   When it is detected that the still image selection key is pressed and turned on, a plurality of stored still images are displayed on the still image selection screen, and a still image selection process is executed. In addition, it can detect that the finger | toe was applied to the still image selection key with other detection apparatuses, such as a photocoupler, instead of a piezoelectric element. Alternatively, a two-stage switch can be used to perform processing according to the amount of key press. For example, when the first stage switch is set to the ON state according to a predetermined pressing amount, it is processed as a previous operation, and when the second stage switch is further pressed, the second stage switch is set to the ON state. Is processed as

尚、本実施の形態においては、監視システムにおけるスナップショット処理について説明したが、本発明のスナップショット生成処理を、DVDやVCRなどの記録/再生装置、デジタルカメラやデジタル・ビデオなどの撮像装置などに適用することができる。本形態において、入力操作部154の操作に応答して、静止画データを記憶するが、動画データを一端記憶し、その動画データから静止画データを抽出することができる。これらの点は、以下の実施の形態において同様である。   Although the snapshot processing in the monitoring system has been described in the present embodiment, the snapshot generation processing of the present invention is performed by a recording / playback device such as a DVD or VCR, an imaging device such as a digital camera or digital video, etc. Can be applied to. In this embodiment, the still image data is stored in response to the operation of the input operation unit 154. However, the moving image data is temporarily stored, and the still image data can be extracted from the moving image data. These points are the same in the following embodiments.

実施の形態2.
動画から静止画を生成する画像処理の好ましい他の例を説明する。実施の形態1においてはマウス・ポインタが所定領域に入ることによって動画データからの静止画データ抽出処理が開始されるが、本例において、画像データ処理部152は、動画再生が開始されることに応答して、動画データから静止画データを抽出しメモリに一時的に記憶する。ユーザ操作によって静止画データ抽出開始のタイミングがとれない場合に特に有用である。静止画データの抽出・記憶は、動画再生中において継続的に実行される。静止画は予め定められたコマ数が予め定められたサンプリング周期でメモリ157に記憶され、順次古い静止画データを削除して最新の静止画データを記憶する。静止画指定操作として、静止画指定アイコンがクリックされることによって、操作前後のタイミングにおける静止画が、選択画面500に表示される。以下、図7を参照して、スナップショット生成のための他の好ましい処理例について説明する。以下の説明において、明示のない場合、各処理は画像データ処理部152によって実行される。
Embodiment 2. FIG.
Another preferred example of image processing for generating a still image from a moving image will be described. In Embodiment 1, the still image data extraction process from the moving image data is started when the mouse pointer enters the predetermined area. In this example, the image data processing unit 152 starts the moving image reproduction. In response, still image data is extracted from the moving image data and temporarily stored in the memory. This is particularly useful when the timing for starting still image data extraction cannot be taken by user operation. Extraction and storage of still image data is continuously performed during moving image reproduction. The still image is stored in the memory 157 with a predetermined number of frames in a predetermined sampling cycle, and the latest still image data is stored by sequentially deleting old still image data. As a still image specifying operation, a still image at a timing before and after the operation is displayed on the selection screen 500 by clicking a still image specifying icon. In the following, with reference to FIG. 7, another preferred processing example for generating a snapshot will be described. In the following description, each process is executed by the image data processing unit 152 unless otherwise specified.

動画再生が開始されると(S701)、フラグや変数に関する所定の初期化処理が行われる(S702)。その後、保存継続フラグがON状態であるか否かを決定する(S703)。動画再生開始に応答して、保存継続フラグはON状態にセットされており、次のステップにおいて、メモリ157に記憶されている静止画データの数が予め定められた数以上であるかを決定する(S704)。メモリ157に記憶されている静止画データ数が予め定められた数未満である場合、動画データから抽出された静止画データがメモリ157に保存される(S705)。一方、メモリに記憶されている静止画データ数が予め定められた数に達している場合、一番古い静止画データを削除し(S706)、最新の静止画データをメモリ157に記憶する(S705)。メモリ157に記憶する画像データの数、あるいはサンプリング周期は、予め設定しておくことができる。   When the moving image reproduction is started (S701), predetermined initialization processing relating to flags and variables is performed (S702). Thereafter, it is determined whether or not the storage continuation flag is in an ON state (S703). In response to the start of moving image playback, the save continuation flag is set to ON, and in the next step, it is determined whether the number of still image data stored in the memory 157 is equal to or greater than a predetermined number. (S704). When the number of still image data stored in the memory 157 is less than a predetermined number, still image data extracted from the moving image data is stored in the memory 157 (S705). On the other hand, when the number of still image data stored in the memory has reached a predetermined number, the oldest still image data is deleted (S706), and the latest still image data is stored in the memory 157 (S705). ). The number of image data stored in the memory 157 or the sampling period can be set in advance.

次に、マウス・クリック操作によって静止画指定アイコン403がON状態にセットされた否かを、入力操作判定部155が決定する(S707)。ON状態にセットされていない場合、保存継続フラグ判定処理(S703)に戻り、S704以下の処理を繰り返す。静止画指定アイコン403がON状態にセットされると、保存継続回数が1以上であるかを判定する(S708)。保存継続回数が1以上である場合、保存継続回数を1減算して(S709)、保護継続フラグ判定処理(S703)に戻りS704以下の処理を繰り返す。保存継続回数は初期設定において予め定められた数に設定される。保存継続回数に相当する数の静止画が、静止画指示操作後に保存される。保存継続回数が1以上でない場合(S708)、保存継続フラグをOFF状態にセットし(S710)、保護継続フラグ判定処理(S703)に戻る。保護継続フラグはOFFにセットされているので、メモリ157に記憶されている複数の候補静止画を表示部153に渡し、表示部153はそれらを静止画選択画面500に表示する(S711)。   Next, the input operation determination unit 155 determines whether or not the still image designation icon 403 is set to the ON state by the mouse click operation (S707). If it is not set to the ON state, the process returns to the storage continuation flag determination process (S703), and the processes after S704 are repeated. When the still image designation icon 403 is set to the ON state, it is determined whether the storage continuation count is 1 or more (S708). When the storage continuation count is 1 or more, the storage continuation count is decremented by 1 (S709), the process returns to the protection continuation flag determination process (S703), and the processes after S704 are repeated. The number of preservation continuations is set to a predetermined number in the initial setting. The number of still images corresponding to the number of times of continuation is saved after the still image instruction operation. If the storage continuation count is not 1 or more (S708), the storage continuation flag is set to OFF (S710), and the process returns to the protection continuation flag determination process (S703). Since the protection continuation flag is set to OFF, a plurality of candidate still images stored in the memory 157 are transferred to the display unit 153, and the display unit 153 displays them on the still image selection screen 500 (S711).

入力操作部154の操作に応答して、選択された静止画の保存、もしくはキャンセル処理が実行される(S712)。静止画選択処理が終了すると、メモリ157に記憶されている複数の候補静止画データが消去され(S713)、終了処理が実行される(S714)。本実施の形態によれば、ユーザの静止画指定前操作を検出することなく、複数の静止画の抽出、記憶処理を行うことができる。そのため、静止画抽出開始のタイミングが取れない場合などにおいても、ユーザ所望のタイミングにおけるスナップショットを保存することができる。   In response to the operation of the input operation unit 154, the selected still image is stored or canceled (S712). When the still image selection process is completed, a plurality of candidate still image data stored in the memory 157 is deleted (S713), and an end process is executed (S714). According to the present embodiment, a plurality of still images can be extracted and stored without detecting a user's pre-designation operation. Therefore, even when the timing for starting the still image extraction cannot be taken, a snapshot at a timing desired by the user can be saved.

本実施の形態に係る監視システムのハードウェア、ネットワーク構成の概略を示す図である。It is a figure which shows the outline of the hardware of the monitoring system which concerns on this Embodiment, and a network structure. 本実施の形態に係る画像データ・サーバ、監視画像処理装置のハードウェア構成の概略を示すブロック図である。It is a block diagram which shows the outline of the hardware constitutions of the image data server which concerns on this Embodiment, and a monitoring image processing apparatus. 本実施の形態に係る監視システムの論路構成を示すブロック図である。It is a block diagram which shows the logical path structure of the monitoring system which concerns on this Embodiment. 本実施の形態に係る動画再生画面の一例を示す図である。It is a figure which shows an example of the moving image reproduction screen which concerns on this Embodiment. 本実施の形態に係る静止画選択画面の一例を示す図である。It is a figure which shows an example of the still image selection screen which concerns on this Embodiment. 本実施の形態に係る監視画像処理装置におけるスナップショット生成処理の好ましい一例を示すフローチャートである。It is a flowchart which shows a preferable example of the snapshot production | generation process in the monitoring image processing apparatus which concerns on this Embodiment. 本実施の形態に係る監視画像処理装置におけるスナップショット生成処理の好ましい他の例を示すフローチャートである。It is a flowchart which shows the other preferable example of the snapshot production | generation process in the monitoring image processing apparatus which concerns on this Embodiment.

符号の説明Explanation of symbols

110 監視カメラ、111 撮像部、112 動画像データ処理部、113 通信インターフェース部、130 画像データ・サーバ、131 画像データ蓄積部、133 画像データ管理部、132 通信インターフェース部、150 監視画像処理装置、151 通信インターフェース部、152 画像データ処理部、153 表示部、154 入力操作部、155 入力操作判定部、170 ネットワーク、156 動画などの画像データを記憶する記憶装置、157 静止画データを記憶するメモリ   DESCRIPTION OF SYMBOLS 110 Surveillance camera, 111 Image pick-up part, 112 Moving image data processing part, 113 Communication interface part, 130 Image data server, 131 Image data storage part, 133 Image data management part, 132 Communication interface part, 150 Surveillance image processing apparatus, 151 Communication interface unit, 152 image data processing unit, 153 display unit, 154 input operation unit, 155 input operation determination unit, 170 network, 156 storage device for storing image data such as moving images, 157 memory for storing still image data

Claims (13)

表示されている動画から静止画を選択するための画像処理方法であって、
(a)動画を表示するステップと、
(b)複数の異なるタイミングの静止画を前記表示されている動画から抽出し、記憶するステップと、
(c)前記記憶されている複数の静止画を、ユーザ操作に応答して表示するステップと、
(d)前記表示されている複数の静止画から選択された静止画を保存するステップと、
を有する画像処理方法。
An image processing method for selecting a still image from a displayed video,
(A) displaying a video;
(B) extracting and storing a plurality of still images at different timings from the displayed moving image;
(C) displaying the plurality of stored still images in response to a user operation;
(D) storing a still image selected from the plurality of displayed still images;
An image processing method.
前記ステップ(c)において表示される複数の静止画は、前記表示されている動画からユーザが静止画を指定する静止画指定操作よりも前のタイミングの静止画を含む、請求項1に記載の画像処理方法。   The plurality of still images displayed in the step (c) include still images at a timing prior to a still image specifying operation in which a user specifies a still image from the displayed moving image. Image processing method. 前記ステップ(c)において表示される複数の静止画は、前記静止画指定操作よりも後のタイミングの静止画を含む、請求項1もしくは2に記載の画像処理方法。   The image processing method according to claim 1, wherein the plurality of still images displayed in step (c) include still images at a timing later than the still image designation operation. 前記ステップ(b)は、前記静止画指定操作の前にユーザによってなされる指定前操作に応答して開始される、請求項2に記載の画像処理方法。   The image processing method according to claim 2, wherein the step (b) is started in response to a pre-designation operation performed by a user before the still image designating operation. 前記指定前操作は、表示画面における所定範囲へのポインタの移動である、請求項4に記載の画像処理方法。   The image processing method according to claim 4, wherein the pre-designation operation is a movement of a pointer to a predetermined range on a display screen. 前記所定範囲は、前記静止画指定操作を行うアイコンが表示されている領域である、請求項5に記載の画像処理方法。   The image processing method according to claim 5, wherein the predetermined range is an area in which an icon for performing the still image designation operation is displayed. コンピュータに画像処理を実行させるプログラムであって、前記コンピュータに、
(a)動画が表示されている間に、複数の異なるタイミングの静止画を前記動画から抽出し、記憶するための処理と、
(b)前記記憶されている複数の静止画を、ユーザ操作に応答して表示するための処理と、
(c)前記表示されている複数の静止画から、ユーザ操作に応答して1もしくは複数の静止画を選択するための処理と、
を実行させるプログラム。
A program for causing a computer to execute image processing.
(A) a process for extracting and storing a plurality of still images at different timings from the moving image while the moving image is displayed;
(B) a process for displaying the plurality of stored still images in response to a user operation;
(C) processing for selecting one or more still images in response to a user operation from the displayed still images;
A program that executes
前記処理(c)によって表示される複数の静止画は、前記表示されている動画からユーザが静止画を指定する静止画指定操作よりも前のタイミングで表示された静止画を含む、請求項7に記載のプログラム。   The plurality of still images displayed by the processing (c) include still images displayed at a timing before a still image specifying operation in which a user specifies a still image from the displayed moving image. The program described in. 前記ステップ(c)において表示される複数の静止画は、前記表示されている動画からユーザが静止画を指定する静止画指定操作よりも後のタイミングの静止画を含む、請求項7もしくは8に記載のプログラム。   The plurality of still images displayed in the step (c) include still images at a timing later than a still image specifying operation in which a user specifies a still image from the displayed moving image. The listed program. 表示されている動画から静止画を選択可能画像処理装置であって、
動画を表示する手段と、
複数の異なるタイミングの静止画を前記表示されている動画から抽出する手段と、
前記抽出された複数の静止画を記憶する手段と、
前記記憶されている複数の静止画を、ユーザ操作に応答して表示する手段と、
前記表示されている複数の静止画から、ユーザ操作に応答して静止画を選択する手段と、
を有する画像処理装置。
An image processing device capable of selecting a still image from a displayed video,
A means of displaying videos,
Means for extracting a plurality of still images at different timings from the displayed moving image;
Means for storing the extracted still images;
Means for displaying the plurality of stored still images in response to a user operation;
Means for selecting a still image in response to a user operation from the displayed still images;
An image processing apparatus.
前記静止画を記憶する手段に記憶される静止画は、前記表示されている動画からユーザが静止画を指定する静止画指定操作よりも前のタイミングの静止画を含む、請求項10に記載の画像処理装置。   The still image stored in the means for storing the still image includes a still image at a timing prior to a still image specifying operation in which a user specifies a still image from the displayed moving image. Image processing device. 前記静止画を記憶する手段に記憶される静止画は、前記表示されている動画からユーザが静止画を指定する静止画指定操作よりも後のタイミングの静止画を含む、請求項10もしくは11に記載の画像処理装置。   The still image stored in the means for storing the still image includes a still image at a timing later than a still image specifying operation in which a user specifies a still image from the displayed moving image. The image processing apparatus described. 前記静止画を記憶する手段は、予め定められた数の静止画を記憶し、最も古い静止画を削除して前記表示されている動画から新たに抽出した静止画を記憶する、請求項10に記載の画像処理装置。   The means for storing the still image stores a predetermined number of still images, deletes the oldest still image, and stores a still image newly extracted from the displayed moving image. The image processing apparatus described.
JP2003278351A 2003-07-23 2003-07-23 Image processing method, image processing device, and program Pending JP2005045606A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003278351A JP2005045606A (en) 2003-07-23 2003-07-23 Image processing method, image processing device, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003278351A JP2005045606A (en) 2003-07-23 2003-07-23 Image processing method, image processing device, and program

Publications (1)

Publication Number Publication Date
JP2005045606A true JP2005045606A (en) 2005-02-17

Family

ID=34264784

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003278351A Pending JP2005045606A (en) 2003-07-23 2003-07-23 Image processing method, image processing device, and program

Country Status (1)

Country Link
JP (1) JP2005045606A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007189324A (en) * 2006-01-11 2007-07-26 Noritsu Koki Co Ltd Still picture extraction system
JP2015040775A (en) * 2013-08-22 2015-03-02 日置電機株式会社 Measurement data processing device, measurement system, and measurement data processing program

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007189324A (en) * 2006-01-11 2007-07-26 Noritsu Koki Co Ltd Still picture extraction system
JP4508112B2 (en) * 2006-01-11 2010-07-21 ノーリツ鋼機株式会社 Still image extraction system
JP2015040775A (en) * 2013-08-22 2015-03-02 日置電機株式会社 Measurement data processing device, measurement system, and measurement data processing program

Similar Documents

Publication Publication Date Title
CN101267523B (en) Device for processing motion image, imaging apparatus, image display control method
KR100883066B1 (en) Apparatus and method for displaying object moving path using text
JP5863400B2 (en) Similar image search system
EP3185539B1 (en) Information processing apparatus, imaging apparatus, image display control method and computer program
JP5506324B2 (en) Similar image search system and similar image search method
US11727960B2 (en) Recording and reproducing apparatus and method thereof
JP2009123196A (en) Image retrieval device
JP3495709B2 (en) Data recording device
JP6214762B2 (en) Image search system, search screen display method
JP2008010979A (en) Camera apparatus
JP2004120178A (en) Video image recording apparatus
JP6210634B2 (en) Image search system
JP5826513B2 (en) Similar image search system
KR20210108691A (en) apparatus and method for multi-channel image back-up based on event, and network surveillance camera system including the same
JP2002262233A (en) Behavior measurement system
JP2005045606A (en) Image processing method, image processing device, and program
JP4326753B2 (en) Video information indexing support system, program, and storage medium
JP4983628B2 (en) Monitoring device, monitoring method, and monitoring program
JP2005117182A (en) Image display apparatus, image display method, program, and recording medium
JP2009152834A (en) Image playback apparatus
JP2019101783A (en) Information processing device and method
JP6662223B2 (en) Video recording and playback device
JP4549325B2 (en) VIDEO INFORMATION INDEXING SUPPORT DEVICE, PROGRAM, AND STORAGE MEDIUM
KR20210065006A (en) Appratus and method for multi-channel image back-up based on event, and network surveillance camera system including the same
JP2004112005A (en) Image recorder

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20051226

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080313

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080318

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080508

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080603

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20080626

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080714

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20080819