JP2004328785A - 監視記録装置における画像データ検索表示方法 - Google Patents

Abstract

【課題】 日付を設定しながら該日付の画像を見ることができる機能を提供する。また、サムネール表示よる検索と、ユーザが指定した条件に合致する画像・文字データのみを検索する機能を提供する。
【解決手段】 ディスプレイ装置上に画像と該画像の日付等の付帯情報を表示し入力装置を操作して所要の日付を設定し、設定した日付と該画像を表示させる。検索実行前にディスプレイ上に複数台のカメラの記憶映像を分割表示している状態の時、サムネール表示を記憶映像の表示状態と同じように分割された状態で表示する。サムネールが表示された後、入力装置を操作して画像を選択して該画像を一時停止状態でディスプレイ装置に表示する。
【選択図】 図８

Description

本発明は、テレビジョンカメラを使用し、所要の場所または地域の人、動植物、物体などの侵入等の監視を行う、監視システムにおける監視記憶内容の検索方法に関するものである。特に、テレビジョンカメラで撮像した画像などの記憶機能、記憶された撮像画像やその他の画像、時刻、文字などの情報をデータとして保持したり処理するデータベース機能、ユーザーが必要とする記憶画像データを検索するための画像処理手順の記憶機能などを有する監視記憶装置の情報を用いた画像データ検索方法、表示方法に関するものである。

従来の監視装置システムでは、ＶＴＲやハードディスクなどの記憶装置に、テレビジョンカメラで撮像した画像データを記憶し、ユーザーは所要の操作を行い記憶装置に記憶された画像データから、目的の画像データを検索し表示させる。この記憶装置に記憶された多くの画像データから所要の画像データを検索する方法として、いくつか使用されている。１つめの例として、記憶した内容を一覧表示すると共に、画面の下部に検索日時設定部を表示し、検索設定日時部で検索する日時を指定して検索する方法が挙げられる。２つめの例として、固定された大きさでサムネール表示し、選択する時はサムネール表示下の文字を点滅させて実現させる方法が挙げられる。３つめの例として、記憶した全ての画像データを一覧表示し、検索する方法が挙げられる。

従来の技術による監視記憶装置の検索方法では、記憶された内容の一覧と日時設定部を表示した画面を表示し、検索実行時には日時設定部の日時を設定して行っていた。そのため、日時を設定しながら、該日時の画像を見ることができなかった。また、ディスプレイ上に複数台のカメラの記憶映像を分割表示している状態に、サムネール表示による検索を行った時、各サムネール表示は記憶映像の表示状態とは異なって表示されてしまった。さらに、記憶内容が膨大な時、記憶内容全てを一覧表示して検索するため、所望の画像データを検索するのが困難であった。その上、ユーザーが先に行った検索終了した後、再びその検索終了時点の検索表示状態から検索するためには、その検索の初期起動状態から検索終了時点の表示状態をユーザーが検索する手間が必要であった。そこで、本発明は、以下の４つの画像データ検索機能を提供することを目的とする。本発明は第１に、画像の縮小表示と日付設定部分を表示することによって、日付を設定しながら該日付の画像を見ることができる機能（以下では、日付検索と呼ぶことにする。）を提供する。また、日時を画像が表示されていない領域に箇所に表示することによって、日時と画像を見やすくさせる。２つめとして、ディスプレイ上に複数台のカメラの記憶映像を分割表示している状態に、サムネール表示による検索（以下では、サムネール検索と呼ぶことにする）を行うと、各サムネール表示が記憶映像の表示状態と同じように分割表示された状態で表示することができるようにする。また、分割表示した任意のサムネール画像を一定時間選択状態にすると、拡大表示させる事によって、分割表示されたサムネールの詳細部分を確認することができるようにする。また、画像が選択状態であることを、画像の周囲を枠で囲んで示す方法を提供する。３つめとして、ユーザが指定した条件に合致する画像・文字データのみを検索する機能を有することによって、膨大な記憶内容から効率的な検索を可能にさせる。また、各画像データの日時とともに情報（カメラ番号、検出領域）を表示することによって、その情報を基にして検索することができる機能を提供する。さらに、新たな検索機能として、ある検索作業を行った後に、再度先に行った検索の終了時点と同じ表示状態での検索を実現させる機能（以下では、先の検索を実行と呼ぶことにする。）を提供する。

上記目的を達成するため、本例に係る監視記憶装置における画像データ検索表示方法では、テレビカメラを用いて、進入物体を監視し、併せて撮像画像データ情報と日時などの付帯情報を記憶装置に記録する監視記憶装置における画像データ検索表示方法であって、前記記憶装置に格納された画像データ情報のサムネールを一覧表示し、当該表示されたサムネールの中からユーザによって選択された画像を表示する。

また、本例に係る監視記憶装置における画像データ検索表示方法において、サムネールの表示形式をディスプレイ上の記録映像の表示形式と同じにする。
また、本例に係る監視記憶装置における画像データ検索表示方法において、サムネールをユーザに選択させるためのカーソルが所定時間停止している場合には、当該カーソルが位置しているサムネールを拡大表示する。

また、前記の画像データ検索を実現するために、本発明の監視記憶装置は、入力される画像信号を所定フォーマットの画像データに変換するビデオインタフェース、前記画像データと関連する情報データで構成されているデータベースを記憶する記憶装置、各装置および各種データの制御と管理を行う中央演算処理装置、各種データを表示するディスプレイ装置、所要の操作と制御を行うための入力装置を有する。以下で、前記の装置を用いた本発明の画像データ検索方法を説明する。第１に、日付検索による画像データ検索方法を説明する。ディスプレイ装置上に画像と該画像の日付等の付帯情報表示し、入力装置を操作して所要の日付を設定する。その設定した日付が記憶装置内のデータベースに存在するか否かを検索する。もし、該画像データが存在する場合、その設定した日付と該画像を表示する。一方、画像が存在しない場合、日付と画像を変更させずに表示させる。２つめに、サムネール検索による画像データ検索方法を説明する。データベースから画像データ情報を取得し、その結果を基にディスプレイ装置上にサムネールを表示する。ただし、検索実行前のディスプレイ上に複数台のカメラの記憶映像を分割表示している状態の時は、各サムネール表示を、記憶映像の表示状態と同じように分割表示された状態で表示する。サムネールが表示された後、入力装置を操作して画像を選択して、該画像を一時停止状態でディスプレイ装置上に表示させる。３つめに、リスト検索による画像データ検索方法を説明する。入力装置を操作して検索条件を設定した後、その設定条件を満たす画像データをデータベースから取得する。そして、その取得した画像データをリスト表示する。最後に、先の検索を実行による画像データ検索機能を説明する。入力装置を操作して先の検索を実行する項目をメニュー上から選択し、ディスプレイ装置上に先の検索終了時の状態を表示する。この後の処理は、上述した各画像データ検索方法と同じである。

ここまで、４つの画像データの検索、表示方法について説明してきた。以下では、それぞれの発明の効果を示す。日付検索では、日時を設定しながら該画像を確認できる。また、画像と日時を重ならずに表示することによって、画像と日時それぞれが見やすくしている。サムネール検索では、ディスプレイ装置上の分割表示に合わせて、各サムネールが表示される。このようなサムネール表示形式にすることにより、任意のサムネールを選択してディスプレイ装置上に表示した形式と、サムネール検索実行前に表示されていた形式を一致させることができる。さらに、サムネールの拡大表示によって、分割されたサムネール表示の詳細部を容易に確認することができる。リスト検索では、検索条件を一覧表示された検索設定画面で所望の検索条件を設定することにより、膨大な記憶内容から所望の画像データを比較的容易に検索することができる。また、各リストの属性（カメラ番号、録画種別）を示すことにより、各リストの詳細な情報を取得することが可能である。先の検索実行では、前回実行した検索を再度実行するのを容易にさせる。以上のような画像データ検索を用いることによって、効率的な検索が可能となる。

本発明の監視記憶装置における画像データ検索方法を図を用いて説明する。まず、本発明の監視記憶装置の構成を図１を用いて説明する。図１において、１０１はＣＰＵ（中央演算記憶装置）、１０２はメモリ、１０３は画像認識部、１０４はテレビジョンカメラなどからの画像信号の入力端子、１０５はビデオインタフェース、１０６は記憶装置、１０７はフレームバッファメモリ、１０８はディスプレイ装置、１０９はキーボード、マウス、操作パネル、リモートコントローラなどの入力装置、１１０はバス、１１１は画像信号の出力端子を示す。なお、メモリ１０２、画像認識部１０３、ビデオインタフェース１０５、記憶装置１０６、フレームバッファメモリ１０７、ディスプレイ装置１０８、入力装置１０９、バス１１０を介してＣＰＵ３０１に接続されており、ＣＰＵ１０１をはじめ各装置は、バス３１０で接続されている他の各装置と各種データを送受し合い、各装置はＣＰＵ１０１からのアクセス信号により制御される。また、ＣＰＵ１０１への指示は、ユーザーが、図２に示す操作パネルを有する入力装置１０９を使用して行う。

次に、本発明の監視記憶装置における画像データ検索方法の概略を説明する。監視記憶装置では、テレビジョンカメラからの画像信号を入力端子１０４に入力し、侵入者等を録画する。録画を実行している時、ＣＰＵ１０１は画像と該画像データを記憶装置１０６に記録する。なお、画像データは記憶装置１０６にあるデータベースに書き込まれ、該データベースは画像データの検索に用いられる。該データベースを用いて検索機能を実行するために、まず操作パネル２００のメニューボタン２０１を押して（フローチャート４００図４参照）、図３に示すメニュー３００を表示させる（フローチャート４０１）。日時を設定して検索するときは「日付検索」３０２を、サムネール表示による検索を実行する時は「サムネール検索」３０３を、リスト表示からの検索を実行する時は「リスト検索」３０４を、先の検索を実行するときは「先の検索実行」３０１をそれぞれ選択する（フローチャート４０３）。

これからは、先に示した本発明の４つの画像データ検索方法についてそれぞれ説明する。はじめに、日付検索の過程を表示画面図５とフローチャート図６を用いて説明する。メニュー３００から日付検索３０２を選択して（フローチャート６００）、縮小表示された画像５０１と該画像の日付５０３で構成した日付検索画面５００を表示させる（フローチャート６０１）。なお、該画面は、縮小画像５０１と該画像の日時を重ねずに表示させて、縮小画像５０１と該画像の日付５０３それぞれを見やすくしている。次に、検索する日時を設定するために、まず左方向ボタン２０３または右方向ボタン２０５を押して変更したい箇所にカーソル５０２を移動させる。なお、検索日付５０２で、数値の設定が可能な箇所は、年の２桁、月の２桁、日の２桁、時の２桁、分の２桁と秒の２桁であり、それぞれ個別に設定を行うことができる。また、カーソル５０３が、画面の左端まで移動した後に左方向ボタン２０３を押すと画面の右端に移動し、画面の右端まで移動した後に右方向ボタン２０５を押すと画面の左端に移動する。カーソル５０３を所望の位置に移動させた後、上方向ボタン２０２または下方向ボタン２０４を押して日付を設定する（フローチャート６０３）。日付を設定した後、ＣＰＵ１０１は該日時の画像データが記憶装置内１０６のデータベースに存在しないかを検索する（フローチャート６０５）。もし、設定された日付に画像データが存在する場合は、データベースから該当する画像データをＣＰＵ１０１に送り、ディスプレイ装置１０８上に該画像と日付を表示する（フローチャート６０６）。一方、設定された日時に画像データが存在しない場合は、データベースから該当する画像データが存在しないという情報をＣＰＵ１０１に送り、ディスプレイ装置１０８上の画像と日時を変更せずに表示する。このように、日付を設定しながら、該日付の画像を確認することができる。この後、エンターボタン２０６を押すと、日付検索画面５００上の縮小画像５０１に関する画像データをＣＰＵ１０１に送り、該画像をディスプレイ装置１０８上に表示する（フローチャート６０８）。一方、メニューボタン２０１（図２参照）を押すと、日付検索画面５００上の縮小画像５０１をディスプレイ装置１０８に表示しないことをＣＰＵ１０１に通知し、検索実行前にディスプレイ装置１０８上に表示されていた画像が表示される。

２つめに、サムネール検索の過程を図７、図８、図９と図１０を用いて説明する。図３のメニュー３００からサムネール検索３０３を選択した（フローチャート１０００図１０参照）後、ＣＰＵ１０１は記憶装置１０６内のデータベースからサムネール表示に必要な画像データを取得し、サムネール検索画面８００をディスプレイ装置１０８上に表示させる（フローチャート１００１）。各サムネール８０１はディスプレイ装置１０８上の分割表示形式７００と同じ表示形式で表示させる（フローチャート１００１）。このようなサムネール表示形式にすることにより、任意のサムネールを選択してディスプレイ装置上に表示した形式と、サムネール検索実行前に表示されていた表示形式を一致させることができる。図８に示したサムネール検索画面８００表示後、選択したいサムネール表示に、画像の周囲の枠８０２（以下では、カーソルと呼ぶことにする。）を、左方向ボタン２０３または右方向ボタン２０５を押して移動させる。なお、カーソル８０２が左端に位置するときに、左方向ボタン２０３を押すと１段上の右端に移動し、カーソルが右端に位置するとき、右方向ボタン２０５を押すと、１段下の左端に移動する。また、カーソル８０２が上端に位置する時に上方向ボタン２０２を押すと、上方向へのスクロール時に新たに表示する画像のデータを、ＣＰＵ１０１がデータベースから画像データを取得した後、上方向にスクロールした画面を表示する。一方、下端に位置する時に下方向ボタン２０４を押すと、下方向へのスクロール時に新たに表示する画像のデータを、ＣＰＵ１０１がデータベースから画像データを取得した後、下方向にスクロールした画面を表示する。また、カーソル８０２を一定時間停止状態にすると、カーソル８０２が位置しているサムネール表示が拡大表示９０１される（フローチャート１００６）。これにより、分割表示されたサムネール表示の詳細部分を確認することができる。所望のサムネール表示にカーソル８０２を移動した後、エンターボタン２０６を押すと、選択中のサムネールに関するデータをＣＰＵ１０１に送り、ディスプレイ装置１０８に該画像を表示する（フローチャート１００８）。また、メニューボタン２０１を押すと、選択中のサムネールをディスプレイ装置１０８に表示しないことをＣＰＵ１０１に通知し、ディスプレイ装置１０８に検索実行前に表示されていた画像が表示される。

３つめに、リスト検索の過程を図１１、図１２、図１３を用いて説明する。メニュー３００からリスト検索３０４を選択すると（フローチャート１３００）、検索条件を設定する画面１１００が表示される（フローチャート１３０１）。なお、該画面は、検索条件を一覧表示している。カメラ番号１１０１、録画種別１１０２、検索領域１１０３と曜日１１０７に対して設定する時は、まず、左側の項目（カメラ番号１１０１、録画種別１１０２、検出領域１１０３または曜日１１０７）にカーソル１１０９を移動させる。その後、左方向ボタン２０３または右方向ボタン２０５を押すと、右側の項目（１１１０，１１１１，１１１２または１１１６）にカーソル１１０９が移動する。所望する検索条件にカーソルを移動させた後、エンターボタン２０６を押すと選択状態になる。一方、開始日付１１０４、終了日付１１０５と時刻１１０６の設定も、同様に左側の項目（開始日付１１０４、終了日付１１０５または時刻１１０６）にカーソル１１０９を移動させた後、左方向ボタン２０３または右方向ボタン２０５を押して、数字の下にカーソル１１１７を移動させる。次に、上方向ボタン２０２または下方向ボタン２０４を押して、所望の日付または時刻に設定する。なお、時刻は、「時」部分のみ変更が可能である。このように検索条件を設定した後、実行１１０８を選択すると（フローチャート１３０３）、ＣＰＵ１０１がデータベースから検索条件と一致する画像データを取得した後、画面上部に先程設定した検索条件の一覧１２０１とＴｒｅｅ構造のリスト表示１２０１，１２０２と１２０３がディスプレイ装置１０８に表示される（フローチャート１３０４）。なお、イベント項目１２０３の右側に各リストの録画種別と検出領域を示して、リストの詳細な情報をユーザーが確認できるようにしている。

ここで、日付項目１２０１にカーソル１２０４が存在する時、上方向ボタン２０２または下方向ボタン２０４を押すと、カーソル１２０４が位置する日付内に存在する画像データをＣＰＵ１０１がデータベースから取得し、時単位にまとめた項目１２０２（以下では、時刻項目と呼ぶことにする）が表示される。一方、時刻項目１２０２にカーソル１２０４が存在するとき、上方向ボタン２０２または下方向ボタン２０４を押すと、カーソル１２０４が位置する時刻内に存在する画像データをＣＰＵ１０１がデータベースから取得し、各イベントの画像リスト（以下では、イベント項目と呼ぶことにする）１２０３を表示する。また、日付項目１２０１にカーソル１２０４が存在する時、右方向ボタン２０５を押すと時刻項目１２０２にカーソル１２０４が移動し、更に右方向ボタン２０５ボタンを押すとイベント項目１２０３にカーソル１２０４が移動する。一方、イベント項目１２０３にカーソル１２０４が存在する場合、左方向ボタン２０３を押すと時刻項目１２０２にカーソルが移動し、更に左方向ボタンを押すと日付項目１２０１にカーソル１２０３が移動する。先に示したカーソルの移動方法を踏まえて、所望のリストにカーソル１２０４を移動させた後、エンターボタン２０６を押すと、選択中のリストに関するデータをＣＰＵ１０１に送り、該リストにあう画像がディスプレイ装置上１０８に表示される（フローチャート１３０８）。また、メニューボタン２０１を押すと、選択中のリストをディスプレイ装置１０８に表示しないことをＣＰＵ１０１に通知し、ディスプレイ装置１０８に検索実行前に表示されていた画像が表示される。

４つめに、先の検索実行の過程を説明する。メニュー３００から先の検索を実行３０１を選択すると、前回実行した検索終了時点の検索画面が表示される。これにより、ユーザーが前回の検索を容易に行うことができる。検索画面表示後は、該検索の実施方法に基づいて実行する。

本発明の一実施例の構成図。 本発明の一実施例の説明図。 本発明の一実施例の説明図。 本発明の一実施例のフローチャート。 本発明の一実施例の説明図。 本発明の一実施例のフローチャート。 本発明の一実施例の説明図。 本発明の一実施例の説明図。 本発明の一実施例の説明図。 本発明の一実施例のフローチャート。 本発明の一実施例の説明図。 本発明の一実施例の説明図。 本発明の一実施例のフローチャート。

符号の説明

１０１：中央演算記憶装置、１０２：メモリ、１０３：画像認識部、１０４：画像信号の入力端子、１０５：ビデオインタフェース、１０６：記憶装置、１０７：フレームバッファメモリ、１０８：ディスプレイ装置、１０９：入力装置、１１０：バス、１１１：画像信号の出力端子、２００：操作パネル、２０１：メニューボタン、２０２：上方向ボタン、２０３：左方向ボタン、２０４：下方向ボタン、２０５：右方向ボタン、２０６：エンターボタン、２０７：再生ボタン群、３００：メニュー、５００：日付検索、７００：複数台のカメラの記憶映像を分割表示しているディスプレイ装置、８００：サムネール検索、９０１：サムネール表示の拡大表示、１１００：リスト検索の条件設定画面、１２００：リスト検索のリスト一覧表示。

Claims (3)

1. テレビカメラを用いて、進入物体を監視し、併せて撮像画像データ情報と日時などの付帯情報を記憶装置に記録する監視記憶装置における画像データ検索表示方法であって、
   前記記憶装置に格納された画像データ情報のサムネールを一覧表示し、
   当該表示されたサムネールの中からユーザによって選択された画像を表示することを特徴とする監視記録装置における画像データ検索表示方法。
2. 請求項１に記載の監視記録装置における画像データ検索表示方法において、
   サムネールの表示形式をディスプレイ上の記録映像の表示形式と同じにすることを特徴とする監視記録装置における画像データ検索表示方法。
3. 請求項１に記載の監視記録装置における画像データ検索表示方法において、
   サムネールをユーザに選択させるためのカーソルが所定時間停止している場合には、当該カーソルが位置しているサムネールを拡大表示することを特徴とする監視記録装置における画像データ検索表示方法。