JP6758918B2

JP6758918B2 - 画像出力装置、画像出力方法及びプログラム

Info

Publication number: JP6758918B2
Application number: JP2016106365A
Authority: JP
Inventors: 博楠本
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2016-05-27
Filing date: 2016-05-27
Publication date: 2020-09-23
Anticipated expiration: 2036-05-27
Also published as: JP2017212682A; US20170347068A1

Description

本発明は、画像出力装置、画像出力方法及びプログラムに関する。

従来、カメラ画像をインターネット等のＩＰ（ＩｎｔｅｒｎｅｔＰｒｏｔｏｃｏｌ）ネットワークを利用した配信システムが知られており、スキー場や動物園の状況を配信するインターネットサイトや、店舗・ビル監視等にも採用されている。また近年、イベント発生時に電子メールや携帯端末へのイベント通知等により、監視端末前に居ないユーザにイベント発生を通知する技術も知られている。特許文献１には、カメラに録画機能と動体検知機能を設け、置き去りや持ち去り検知等のイベントが発生するとイベント発生時のタイムラインを表示し、イベント発生時の録画映像を呼び出す技術が開示されている。

特開２０１０−２５８７０４号公報

カメラ画像において侵入者が検知された場合等、所定の事象が発生した場合に、ユーザは、自身が所持する携帯端末からカメラに接続し、所定の事象に係る映像の確認を行う。しかしながら、携帯端末がカメラから事象発生通知を受け、カメラに接続したときには、侵入者はカメラ画像から消えてしまい、カメラ画像において侵入者を確認できない等、カメラ画像において事象を確認できない場合があるという問題があった。

本発明はこのような問題点に鑑みなされたもので、所定の事象が発生した場合に、事象の確認に適した撮像画像を出力することを目的とする。

そこで、本発明は、所定の事象が発生したときにおける撮像手段によって撮像された画像を端末装置に出力する画像出力装置であって、前記所定の事象の発生通知を前記端末装置が受けたことに応じて、撮像手段により撮像された撮像画像を前記端末装置において閲覧するために、前記端末装置から撮像画像の出力指示を受け付ける第１の受付手段と、第１の時点に撮像された撮像画像において所定の事象が発生した後の第２の時点に前記出力指示を受け付けた場合、前記第２の時点において前記所定の事象が前記第１の時点から継続しているときは、前記第２の時点以降に撮像手段によって撮像された撮像画像を出力し、前記第２の時点において前記所定の事象が継続していないときは、前記所定の事象が継続している間に撮像された撮像画像を出力する出力手段とを有することを特徴とする。

本発明によれば、所定の事象が発生した場合に、事象の確認に適した撮像画像を出力することができる。

撮像システムの全体図である。撮像装置のハードウェア構成を示す図である。撮像装置の機能ブロック図である。端末装置の表示例を示す図である。端末装置の構成を示す図である。状態判定処理を示すフローチャートである。状態判定処理の説明図である。継続判定条件の説明図である。配信処理を示すフローチャートである。継続判定条件の説明図である。継続判定条件の説明図である。

以下、本発明の実施形態について図面に基づいて説明する。

以下に図面を参照して本発明の実施例を説明する。図１は、実施形態に係る撮像システム１００の全体構成を示す図である。本実施形態に係る撮像システム１００は、撮像装置１１０と、ユーザが使用する端末装置１２０と、ＶＭＳ（ビデオマネジメントシステム）１３０と、を有している。撮像装置１１０、端末装置１２０及びＶＭＳ１３０は、ネットワーク１４０を介して互いに接続している。

撮像装置１１０は、監視カメラであり、例えば壁面や天井に設置され、監視領域の撮像画像を得る。本実施形態においては、撮像装置１１０は、撮像画像として動画を撮像するものとする。なお、他の例としては、撮像装置１１０は、撮像画像として静止画を撮像してもよい。撮像装置１１０は、例えば、数秒毎など定期的に静止画を撮像してもよい。撮像装置１１０は、撮像した撮像画像を、ネットワーク１４０を介して、端末装置１２０及びＶＭＳ１３０に配信することができる。撮像装置１１０はさらに、撮像画像を解析して、不審者等の侵入や通過、物体等の持ち去りや置き去り等、所定の事象を検知する。撮像装置１１０はまた、マイク、接点入力等のセンサからの入力を解析し、異常を検知する。撮像装置１１０は、画像出力装置の一例である。

端末装置１２０は、情報処理装置である。本実施形態においては、端末装置１２０は、携帯型の端末装置であるものとするが、他の例としては、例えばＰＣ等であってもよい。また、端末装置１２０は、電話回線を通したスマートフォン等であってもよい。端末装置１２０は、撮像装置１１０又はＶＭＳ１３０に対し、撮像画像の配信依頼を行い、撮像装置１１０又はＶＭＳ１３０から受信した撮像画像を再生表示する。ＶＭＳ１３０は、情報処理装置である。ＶＭＳ１３０は、撮像装置１１０から撮像画像を受信し、撮像画像の配信、録画を行う。

なお、本実施形態においては、撮像装置１１０、ＶＭＳ１３０及び端末装置１２０は、撮像装置１１０で規定される通信を実行する。ネットワーク１４０は、例えばＥｔｈｅｒｎｅｔ（登録商標）等の通信規格を満足する複数のルータ、スイッチ、ケーブル等から構成される。なお、ネットワーク１４０は、撮像装置１１０、端末装置１２０及びＶＭＳ１３０の間の通信を行うことができるものであればよく、その通信規格、規模、構成を問わない。例えば、ネットワーク１４０は、インターネットや有線ＬＡＮ（ＬｏｃａｌＡｒｅａＮｅｔｗｏｒｋ）、無線ＬＡＮ（ＷｉｒｅｌｅｓｓＬＡＮ）、ＷＡＮ（ＷｉｄｅＡｒｅａＮｅｔｗｏｒｋ）、電話通信回線等のいずれにより構成されてもよい。なお、本実施形態における撮像装置１１０は、例えば、ＰｏＥ（ＰｏｗｅｒＯｖｅｒＥｔｈｅｒｎｅｔ（登録商標））に対応していても良く、ＬＡＮケーブルを介して電力を供給されてもよい。

図２は、本実施形態に係る撮像装置１１０のハードウェア構成の一例を示すブロック図である。撮像部２０１は、撮像光学系における前玉レンズ２０２と、撮像素子２０３と、を有している。撮像素子２０３には、前玉レンズ２０２から映像光が入射され光電変換される。２０４は信号処理回路、２０５は映像信号をＪＰＥＧ等の映像に変換する符号化回路である。２０６は録画回路で、ＳＤカード等の記憶媒体２０７に撮像画像を録画する。また録画回路２０６は、処理時点から所定時間前までの映像が常に記憶媒体２０７に記録されるように制御する。

２０８は、選択回路であり、配信対象を、符号化回路２０５から直接入力された撮像画像、すなわちライブ映像と、記憶媒体２０７に記憶されている撮像画像、すなわち録画映像と、の何れか一方を配信対象として選択する。

２０９はバッファ、２１０は通信回路、２１１は通信端子、２１２は接点入力やマイク等のセンサ信号入力部、２１３は検出回路である。検出回路２１３は、撮像画像やセンサ入力部２１２からの信号に基づいて、侵入等、所定の事象の発生を検出する。なお、ここで、マイク等のセンサは、撮像部２０１の撮像範囲を基準とする領域における環境変化を検知するものであり、検知部の一例である。２１４は中央演算処理回路（以下、ＣＰＵと称する）である。２１５は電気的に消去可能な不揮発性メモリ（ＥｌｅｃｔｒｉｃａｌｌｙＥｒａｓａｂｌＰｒｏｇｒａｍｍａｂｌｅＲｅａｄＯｎｌｙＭｅｍｏｒｙ；以下ＥＥＰＲＯＭと称する場合がある）である。なお、後述する撮像装置１１０の機能や処理は、ＣＰＵ２１４が不揮発性メモリ２１５に格納されているプログラムを読み出し、このプログラムを実行することにより実現されるものである。

撮像部２０１において撮像が行われると、ＣＰＵ２１４の指示によって、信号処理回路２０４は撮像素子２０３からの輝度信号と色差信号とを符号化回路２０５に出力する。符号化回路２０５にて符号化された映像信号はＣＰＵ２１４の指示により録画回路２０６にて記憶媒体２０７に録画される。また、符号化された映像信号は選択回路２０８に出力される。選択回路２０８は、ＣＰＵ２１４の指示により録画映像かライブ映像かを選択する。選択回路２０８により選択された映像（録画映像又はライブ映像）は、バッファ２０９、通信回路２１０及び通信端子２１１を介して外部に送信される。

検出回路２１３は符号化回路２０５から映像信号にて映像の動きの結果及びセンサからの信号により、各種事象が発生したことを検出する。検出回路２１３は、例えば、予め登録された登録事象が発生した場合には、センサの状態検知を行い、登録事象が発生したことを示す通知情報をＣＰＵ２１４に出力する。なお、本実施形態の検出回路２１３においては、登録事象として、車や人等の移動物体の侵入検知及び通過検知と、カバンや人等の物体の置き去り検知及び持ち去り検知が設定されているものとする。

検出回路２１３は、さらに登録事象の他、登録事象に関連する関連事象についても検出を行う。なお、検出回路２１３には、登録事象毎に関連する関連事象が予め設定されているものとする。検出回路２１３には、関連事象として、動体検知、検知物の追尾（位置確認）が設定されているものとする。ここで、関連事象について説明する。登録事象「持ち去り検知」が発生した場合、持ち去り検知が完了した後も、持ち去った人物が撮像画像に写っている。この場合、持ち去った人物の映像は、持ち去りに関連する重要な映像になる可能性が高い。このように、登録事象に関連して発生する事象を関連事象として設定しておく。すなわち、登録事象「持ち去り検知」に対し、「持ち去った人物の検知」が関連事象として設定される。

なお、登録事象及び関連事象は、設計者等が予め検出回路２１３に設定しておくものとし、また適宜変更することができるものとする。また、検出回路２１３に設定される登録事象及び関連事象の数や種類等は実施形態に限定されるものではない。登録事象及び関連事象の具体例については後に詳述する。

ＣＰＵ２１４は、検出回路２１３から通知情報が入力されると、通信回路２１０及び通信端子２１１を介し、端末装置１２０に登録事象の発生通知（例えばアラート）を送信する。なお、発生通知の送信対象となる端末装置１２０については、撮像装置１１０にＩＰアドレス等が設定されているものとする。また、撮像装置１１０にメールアドレス等が登録されていて、撮像装置からそのメールアドレス宛てに発生通知を送信するようにしてもよい。例えば、端末装置１２０のユーザは、端末装置１２０が発生通知を受けたことに応じて、撮像装置１１０が撮像する撮像画像を閲覧する。ＣＰＵ２１４はさらに、登録事象を検出した場合には、検出された登録事象が発生した時点から例えば１０秒等予め定められた特定時間だけ前の時点からの撮像画像の記憶媒体２０７への録画を開始するよう、録画回路２０６を制御する。

図３は、撮像装置１１０の機能ブロック図である。判定部３０１は、検出回路２１３の検出結果に基づいて登録事象が発生したか否かを判定する。さらに、判定部３０１は、登録事象が発生した後は、検出回路２１３の検出結果に基づいて、登録事象が継続しているか否かを判定する。録画処理部３０２は、判定部３０１による判定結果に基づいて、録画回路２０６に対し、録画の開始を指示する。受付部３０３は、端末装置１２０においてユーザから入力された指示等の情報を、通信回路２１０を介して受け付ける。出力処理部３０４は、登録事象の発生、継続の状況に基づいて、ライブ映像及び録画映像の何れを撮像画像として選択するかを決定し、選択回路２０８に対し、選択指示を出す。

図４は、端末装置１２０の表示例を示す図である。表示部４００の映像領域４１０には、撮像装置１１０から配信された撮像画像（ライブ映像又は撮像映像）が表示されている。操作ボタン４１１は、映像の停止、巻き戻し、早送りを指示する操作部であり映像種類が録画映像の時に表示される。また、操作ボタン４１２は映像の種類を切り替える操作ボタンである。操作ボタン４１２は、映像領域４１０に表示されている映像が録画映像のときは、ライブ映像への切り替えボタンとして表示され、映像領域４１０に表示されている映像がライブ映像のときは、録画映像への切り替えボタンとして表示される。録画映像へ切り替える操作ボタン４１２が押されると、録画映像の一覧（不図示）が表示される。ユーザは、一覧において、表示したい録画映像を選択することができる。ＬＯＧＯＵＴボタン４２５が押されると、他の撮像装置１１０の一覧（不図示）が表示され、映像領域４１０に表示したい撮像装置の映像が選択可能となる。

図５は、端末装置１２０の構成を示す図である。端末装置１２０は、表示部４００の他、ＣＰＵ５０１と、ＲＯＭ５０２と、ＲＡＭ５０３と、ＨＤＤ５０４と、入力部５０５と、通信部５０６とを有している。ＣＰＵ５０１は、ＲＯＭ５０２に記憶された制御プログラムを読み出して各種処理を実行する。ＲＡＭ５０３は、ＣＰＵ５０１の主メモリ、ワークエリア等の一時記憶領域として用いられる。ＨＤＤ５０４は、各種データや各種プログラム等を記憶する。後述する端末装置１２０の機能や処理は、ＣＰＵ５０１がＲＯＭ５０２又はＨＤＤ５０４に格納されているプログラムを読み出し、このプログラムを実行することにより実現されるものである。入力部５０５は、キーボードやマウスを有し、ユーザによる各種操作を受け付ける。通信部５０６は、ネットワーク１４０を介して外部装置との通信処理を行う。なお、ＶＭＳ１３０のハードウェア構成は、端末装置１２０のハードウェア構成と同様である。

図６は、撮像装置１１０による状態判定処理を示すフローチャートである。状態判定処理において、ＣＰＵ２１４は、登録事象の状態を判定する。なお、登録事象の状態は、登録事象が継続中の状態と、登録事象が発生していない状態と、の２つの状態を取る。なお、登録事象の状態は、初期状態として、登録事象が発生していない状態に設定されているものとする。

まず、Ｓ６００において、判定部３０１は、登録事象が発生したか否かを判定する。判定部３０１は、予め定められた発生判定条件に従い、検出回路２１３の検出結果に基づいて、登録事象が発生したか否かを判定する。発生判定条件は、登録事象毎に定められているものとする。発生判定条件は、撮像画像に基づくものである。また、発生判定条件は、撮像画像だけでなく、センサによる検知結果も参照するものであってもよい。例えば、持ち去り検知の発生判定条件は、撮像画像において、持ち去りの対象となる物体の移動が検知された場合に、持ち去り検知と判定する、というものである。判定部３０１は、登録事象が発生したと判定した場合には（Ｓ６００でＹｅｓ）、処理をＳ６０１へ進める。判定部３０１は、登録事象が発生していないと判定した場合には（Ｓ６００でＮｏ）、Ｓ６００の処理を継続する。

Ｓ６０１において、録画処理部３０２は、登録事象が発生したと判定された時点から予め定められた特定時間前を開始時点として、撮像部２０１により得られた撮像画像の録画を開始するよう録画回路２０６に指示する。これに対し、録画回路２０６は、記憶部としての記憶媒体２０７への撮像画像の録画を開始する。なお、録画回路２０６が常時録画を行う場合には、録画処理部３０２は、登録事象が発生したと判定された時点から予め定められた特定時間前を開始時点として、録画回路２０６に記録しておけばよい。

次に、Ｓ６０２において、出力処理部３０４は、登録事象が発生したことを示す発生通知を、通信回路２１０を介して端末装置１２０に送信するよう制御する。出力処理部３０４は、例えば端末装置１２０に対し発生通知を送信するよう制御する。なお、送信対象の端末装置１２０は、撮像装置１１０に予め登録された登録ユーザの端末装置１２０とする。これに対し、通信回路２１０は、発生通知を出力する。このように、撮像装置１１０は、所定の事象が発生した場合に、発生通知を出力する。

次に、Ｓ６０３において、判定部３０１は、Ｓ６００において発生したと判定された登録事象が継続しているか否かを判定する。判定部３０１は、予め定められた継続判定条件を参照し、検出回路２１３の検出結果に基づいて判定を行う。なお、登録事象が継続しているか否かの判定においては、登録事象が継続しているか否かだけでなく、登録事象に関連する関連事象が継続しているか否かを考慮する。例えば、登録事象「持ち去り検知」に対しては、対応する関連事象「持ち去った人物の検知」が発生、継続している場合には、判定部３０１は、登録事象が継続していると判定する。

判定部３０１は、登録事象が継続していると判定した場合には（Ｓ６０３でＹｅｓ）、処理をＳ６０４へ進める。判定部３０１は、登録事象が継続していないと判定した場合には（Ｓ６０３でＮｏ）、処理をＳ６０５へ進める。

Ｓ６０４において、判定部３０１は、登録事象が継続中の状態と判定し、その後処理をＳ６０３へ進める。一方、Ｓ６０５においては、判定部３０１は、登録事象が継続中の状態が終了し、登録事象が発生していない状態になったと判定し、その後、処理をＳ６００へ進める。なお、状態判定処理は、継続的に繰り返し実行されているものとする。

図７を参照しつつ、登録事象「持ち去り検知」を例に状態判定処理を具体的に説明する。図７のフレーム画像７００、７１０、７２０は、撮像画像に含まれるフレーム画像であり、それぞれ時刻ｔ、ｔ＋α、ｔ＋β（β＞α）において得られたものとする。また、フレーム画像７００の物体７０１が持ち去り検知の対象である。判定部３０１は、物体７０１を監視し、物体７０１の移動が検出されると、持ち去り検知が発生したと判定する。さらに、フレーム画像７１０のように、物体７０１と共に移動する動体（人物）７１１が撮像画像中に存在している間は、判定部３０１は、登録事象が継続中の状態にあると判定する。そして、フレーム画像７３０のように、動体７１１が撮像画像から消えると、判定部３０１は、登録事象が継続中の状態が終了したと判定する。

撮像装置１１０において、「持ち去り検知」の事象の継続に関しては、以下に示す条件１、条件２のいずれかの条件を満たす場合に継続と判定することが継続判定条件として設定されているものとする。
条件１持ち去り検知の対象物が持ち去られた。
条件２撮像画像の中で、動体が検知された、または、持ち去り検知の対象物のエリアで動体が検知され、動体検知後、検知された動体が撮像画像中に存在する。
判定部３０１は、上記条件１又は条件２の何れかの条件を満たす場合に、継続中と判定する。

条件２における、検知された動体が撮像画像中に存在するか否かの判定に関し、検出回路２１３は、動体を検知すると、検知した動体の追跡を行うものとする。なお、条件２の持ち去り検知の対象物のエリアでの動体検知後その動体を追跡するエリアをその対象物近傍に別に設定してもよい。これは持ち去り検知の対象物を持ち去るときに、対象物の持ち去り検知のエリアでは例えば棚の上にあるものが持ち去られるときのように追跡のための動体検出が行えないことがあるからである。

図８は、持ち去り検知以外の登録事象に係る継続判定条件の説明図である。図８（ａ）は、登録事象「侵入検知」に対する事象が継続中か否かを判定するための継続判定条件の説明図である。フレーム画像８００において、侵入物体８０１が検知された場合に、侵入検知の事象が発生する。「侵入検知」に対応する継続判定条件は、「侵入検知状態の事象が続いている」という状態の場合に、継続中と判定するというものである。

なお、侵入物体が何かを確認したいときは、検出回路２１３は、侵入検知状態終了後も、侵入物体つまり侵入検出エリア８０２から出た移動物を追跡する。そして、判定部３０１は、侵入物体が映像内にあるという状態であれば、継続中と判定してもよい。

図８（ｂ）は、登録事象「通過検知」に対する継続判定条件の説明図である。フレーム画像８１０において、ライン８１１を右から左に通過する移動物体８１２が検知された場合に、通過検知の事象が発生する。「通過検知」に対応する継続判定条件は、「検出物体を追跡し映像内にある」という状態の場合に、継続中と判定するというものである。

なお、継続判定条件の他の例としては、動体検知を行うための設定エリアに検出物体が存在する」という状態の場合に、継続中と判定するというものであってもよい。例えば、図８（ｂ）の例では、設定エリア８１３は、ライン８１１の左側の領域である。設定エリア８１３は、ライン８１１を基準として定められる範囲である。

図８（ｃ）は、登録事象「置き去り検知」に対する継続判定条件の説明図である。フレーム画像８２０において、新たな物体８２１が検知された場合に、置き去り検知の事象が発生する。「置き去り検知」に対応する継続判定条件は、「置き去り検知の事象が続いている」という状態の場合に、継続中と判定するというものである。

なお、継続判定条件の他の例としては、置き去り検知の検知エリアから出た移動体を追跡し、映像内にある」という状態の場合に、継続中と判定するというものであってもよい。例えば、図８（ｃ）の例では、物体８２１の検知位置を基準として検知エリア８２２が設定されている。

図８（ｄ）は、登録事象「扉が開くのを検知」に対する継続判定条件の説明図である。フレーム画像８３０には、検知対象の扉８３１が含まれる。この検知対象の扉には、センサが付けられており、扉が開くと、センサ入力部２１２に扉開の信号が入力される。検出回路２１３は、この信号に基づいて、扉が開いたことを検知する。「扉が開くのを検知」に対応する継続判定条件は、「映像内で動体を検知した」という状態の場合に、継続中と判定するというものである。これは扉を開けて侵入した人がいるかを判断するものである。

他の例としては、動体検知エリアを制限してもよい。また、扉からの侵入物が音を発生している場合がある。このような場合には、「センサ入力部２１２からのマイクを経由した音声情報で音量が設定値異常検出され続いていること」を継続判定条件としてもよい。センサ入力部２１２からの入力は、マイクからの音声に限定されるものではなく、他の例としては、悲鳴検知、大音量検知等が挙げられる。

図９は、撮像装置１１０による、配信処理を示すフローチャートである。Ｓ９００において、受付部３０３は、通信回路２１０を介して、端末装置１２０からログイン要求を受け付けたか否かを確認する。受付部３０３は、ログイン要求を受け付けた場合には（Ｓ９００でＹｅｓ）、処理をＳ９０１へ進める。受付部３０３は、ログイン要求を受け付けなかった場合には（Ｓ９００でＮｏ）、Ｓ９００の処理を継続する。なお、ログイン要求は、撮像画像の出力指示の一例である。

Ｓ９０１において、出力処理部３０４は、ログイン要求の送信元の端末装置１２０が登録ユーザの端末装置１２０であるか否かを確認する。出力処理部３０４は、登録ユーザの端末装置１２０の場合には（Ｓ９０１でＹｅｓ）、処理をＳ９０２へ進める。出力処理部３０４は、登録ユーザの端末装置１２０でない場合には（Ｓ９０１でＮｏ）、処理をＳ９０４へ進める。

Ｓ９０２において、出力処理部３０４は、登録事象の状態を確認する。登録事象の状態は、前述の状態判定処理において判定される。出力処理部３０４は、登録事象が発生していない状態の場合には（Ｓ９０２でＹｅｓ）、処理をＳ９０３へ進める。出力処理部３０４は、登録事象が継続中の状態の場合には（Ｓ９０２でＮｏ）、処理をＳ９０４へ進める。本処理は、出力指示としてのログイン要求を受け付けた時点において、登録事象が発生しているか否かを確認する処理である。

Ｓ９０３において、出力処理部３０４は、撮像画像として、録画映像を、録画映像であることを示す情報と共に、ログイン要求の要求元の端末装置１２０に配信するよう制御する。具体的には、出力処理部３０４は、選択回路２０８に対し、録画映像を選択するよう指示する。これに対応して、選択回路２０８は、録画映像を選択する。録画映像は、通信回路２１０等を経由して、端末装置１２０に送信される。なお、Ｓ９０３において送信される録画映像は、登録事象が継続している間に撮像された映像である。本実施形態においては、録画映像は、前述の通り、事象が発生した時点から特定時間だけ前を開始時点とし、登録事象が継続中の状態が終了した時点を終了時点とする開始時点から終了時点までの映像である。このように、登録事象が継続していない場合には、録画映像を配信するので、ユーザは、登録事象の状況を確認することができる。なお、登録事象が継続していない場合であっても事象が発生してから所定時間が経過した後は、ライブ映像を配信するようにしてもよい。このようにする理由は、そのユーザは登録事象が発生したことを契機として映像を取得しようとしたわけではないと考えられるからである。また、発生通知を送信したユーザに対して、ライブ映像を配信するようにしてもよい。このようにする理由も、そのユーザは登録事象が発生したことを契機として映像を取得しようとしたわけではないと考えられるからである。

なお、本実施形態の出力処理部３０４は、登録事象の発生時点から終了時点までの録画映像を配信対象としたが、配信対象の録画映像の期間は実施形態に限定されるものではない。例えば、事象発生時点から予め設定された時間分の映像であってもよい。

なお、他の例としては、Ｓ９０３において、出力処理部３０４は、ライブ映像を一定時間出力した後に、録画映像を配信することとしてもよい。これにより、ユーザは、配信時点における状況を確認した上で、事象の継続中の状況を確認することができる。

Ｓ９０４において、出力処理部３０４は、撮像画像として、ライブ映像を、ライブ映像であることを示す情報と共に、ログイン要求の要求元の端末装置１２０に配信するよう制御する。具体的には、出力処理部３０４は、選択回路２０８に対し、ライブ映像を選択するよう指示する。これに対応して、選択回路２０８は、ライブ映像を選択する。ライブ映像は、通信回路２１０等を経由して、端末装置１２０に送信される。このように、登録事象が継続中の場合には、ライブ映像を配信するので、ユーザは、登録事象に関連した、配信時点における状況を確認することができる。なお、ライブ映像は、出力指示としてのログイン要求を受け付けた時点以降に撮像された撮像画像の一例である。

このように、撮像装置１１０は、登録事象が継続中か否かに応じて、録画画像及びライブ画像を切り替えて、端末装置１２０に送信することができる。これにより、ユーザは、端末装置１２０から撮像装置１１０にログインしてすぐに、発生した登録事象について確認することができる。したがって、ユーザは、登録事象に対し、素早く対応することができる。

監視環境は、人がいない時間に監視するもの、監視内に道路等動体が絶えずあり監視対象から外さなければならないものなど、監視条件によって最適な監視状態は異なる。そこで、撮像装置１１０には、登録事象毎に、継続判定条件を設定、変更可能とする機能が設けられている。これにより、撮像現場に適した、登録事象の継続判定を行うことが可能になる。

図１０は、継続判定条件の説明図である。図１０（ａ）は、持ち去り検知に対する設定の例である。ユーザは、映像１０００において、動体を追跡したいエリアとして、持ち去り検知の対象物１００１の近傍に追跡のための動体検知エリア１００２を指定することができる。なお、撮像装置１１０は、ユーザ操作に応じて設定指示を受け付けると、設定指示に係る動体検知エリア１００２に対し、エリアＩＤを付与し、エリアＩＤに対応付けて動体検知エリア１００２を設定する。ここでは、動体検知エリア１００２のエリアＩＤを「Ａ」とする。なお、ユーザは、不図示のグラフィカルＩ／Ｆによって映像１０００上にマウスで矩形を描き、エリアＩＤを設定することにより、エリアを設定することができる。

図１０（ｂ）は、侵入検知に対する設定の例である。侵入物１０１１が侵入監視エリア１０１２を出た後も追跡により監視したいとする。この場合、ユーザは、映像１０１０において、侵入監視エリアと映像全体のエリアを指定することができる。撮像装置１１０は、侵入監視エリアと、映像全体のエリアに対し、エリアＩＤを付与し、エリアＩＤに対応付けて全体のエリアを設定する。ここでは、侵入監視エリア及び全体のエリアのエリアＩＤをそれぞれ「Ｂ」、「Ｃ」とする。

図１０（ｃ）は、通過検知に対する設定の例である。ユーザは、映像１０２０において、動体検知エリア１０２１を指定することができる。撮像装置１１０は、動体検知エリア１０２１をエリアＩＤ「Ｄ」に対応付けて設定する。図１０（ｄ）は、ドア開状態検知に対する設定の例である。ドアが開いた後に映像１０３０内に動体が存在するか否かを監視したいとする。この場合には、ユーザは、映像１０３０において、映像全体を動体検知エリアとして指定することができる。撮像装置１１０は、動体検知エリアとしての映像全体のエリアを、エリアＩＤ「Ｃ」に対応付けて設定する。

図１１（ａ）は、図１０（ａ）〜（ｄ）に対応する事象の監視条件を表形式で示す図である。監視条件は、撮像装置１１０の記憶部に予め記憶されている。なお、「ＩＤ」の欄には、撮像装置１１０が監視可能な事象の事象ＩＤが示されている。「事象」の欄には、撮像装置１１０が監視可能な事象が示されている。なお、事象は、同一の種類の事象についても、「持ち去り検知１」と「持ち去り検知２」というように、名称を変えることにより、監視対象物や、監視条件を替えて登録することができる。「監視設定エリア」の欄には、監視エリアとして設定されているエリアのエリアＩＤが示されている。「監視開始エリア」の欄には、「事象」の欄に示されている事象に対する監視開始エリアのエリアＩＤが示されている。

事象ＩＤ「１」の「持ち去り検知」は、図１０（ａ）の持ち去り検知状態が続いていることであり、事象ＩＤ「２」の「追跡」は、図１０（ａ）の追跡開始エリアをＩＤ「Ａ」のエリアから始めることを示すものである。事象ＩＤ「３」の「動体検出」は、図１０（ｂ）の侵入検知、図１０（ｄ）のドア開状態検知における、ＩＤ「Ｃ」の動体検知エリア（映像全体）を示すものである。事象ＩＤ「４」の「動体検出」は、図１０（ｃ）の通過検知における動体検知エリア１０２１を示すものである。事象ＩＤ「５」の「ドア会状態検知」は、図１０（ｄ）のドア開監視のドアの開状態が続いている状態を示すものである。事象ＩＤ「６」は、図１０（ｂ）の侵入検知において侵入監視エリア１１０１が設定されていることを示すものである。

なお、監視条件に示される事象は、登録事象だけでなく、関連事象に関するものも含まれている。例えば、動体検出の監視条件は、登録事象としての持ち去り検知の検知対象となる物体についての動体検出の他、持ち去った人物についての動体検出にも適用される条件である。

図１１（ｂ）は、継続判定条件を表形式で示す図である。継続判定条件は、撮像装置１１０記憶部に予め記憶されている。「事象名」の欄には、撮像装置１１０に設定された登録事象の名称が示されている。なお、登録事象の名称は、ユーザ等が任意に設定することができる。「登録事象」の欄には、登録事象の種類が示されている。「継続判定条件」の欄には、図１１（ａ）を参照しつつ説明した各監視条件に対し、「ａｎｄ」、「ｏｒ」、「ｎａｎｄ」、「ｎｏｔ」等の条件を設定した条件式が示されている。

事象名「持ち去り１」においては、持ち去り検知が継続判断のトリガであり、継続判定条件の欄において、図１１に示す事象ＩＤ「１」及び「２」の条件が同時に発生している場合に、継続と判定することを示している。事象名「侵入１」においては、侵入検知が継続判断のトリガであり、事象ＩＤ「３」又は「６」の何れかの事象が監視された場合に、継続と判定することを示している。事象名「通過１」においては、通過検知が継続判断のトリガであり、事象ＩＤ「４」の事象が監視された場合に、継続と判定することを示している。事象名「ドア１」においては、ドアの開状態検知が継続判断のトリガであり、事象ＩＤ「３」又は「５」の事象が監視された場合に、継続と判定することを示している。

撮像装置１１０においては、図１１（ｂ）に示すような、登録事象毎の継続判定条件についても、ユーザ操作に応じて、設定、変更することができる。これにより、撮影現場に適した、適切な継続判定を行うことができる。以上のように、本実施形態に係る撮像装置１１０は、登録事象が継続中か否かに応じて、配信対象の画像をライブ映像と録画映像との間で切り替えることができる。すなわち、撮像装置１１０は、所定の事象が発生した場合に事象の確認に適した撮像画像を出力することができる。

本実施形態に係る撮像システムの第１の変更例について説明する。図６を参照しつつ説明した状態判定処理及び図９を参照しつつ説明した配信処理は、いずれもその動作主体は、撮像装置１１０に限定されるものではない。他の例としては、これらの処理を、端末装置１２０やＶＭＳ１３０が行ってもよい。

端末装置１２０が処理を行う場合には、撮像装置１１０は、符号化回路２０５から出力されたライブ映像を常に端末装置１２０に送信する。端末装置１２０は、撮像装置１１０に過去の状態を問い合わせることにより、処理を行う。そして、端末装置１２０は、表示部４００への表示対象の撮像画像を、ライブ映像と、録画映像との間で切り替える。

また、ＶＭＳ１３０が処理を行う場合には、撮像装置１１０は、符号化回路２０５から出力されたライブ映像を常にＶＭＳ１３０に送信するものとする。そして、ＶＭＳ１３０は、端末装置１２０への配信対象の撮像画像を、ライブ映像と、録画映像との間で切り替えるものとする。

さらに、撮像装置１１０が、状態判定処理を行い、端末装置１２０が配信処理を行う、というように、複数の装置が協働して、処理を行うこととしてもよい。

また、第２の変更例としては、撮像装置１１０の録画回路２０６、選択回路２０８、検出回路２１３の処理は、ＣＰＵ２１４が行うこととしてもよい。

以上、上述した各実施形態によれば、所定の事象が発生した場合に、事象の確認に適した撮像画像を出力することができる。

以上、本発明の好ましい実施形態について詳述したが、本発明は係る特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。

（その他の実施例）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１００撮像システム
１１０撮像装置
１２０端末装置
１３０ＶＭＳ

Claims

所定の事象が発生したときにおける撮像手段によって撮像された画像を端末装置に出力する画像出力装置であって、
前記所定の事象の発生通知を前記端末装置が受けたことに応じて、撮像手段により撮像された撮像画像を前記端末装置において閲覧するために、前記端末装置から撮像画像の出力指示を受け付ける第１の受付手段と、
第１の時点に撮像された撮像画像において所定の事象が発生した後の第２の時点に前記出力指示を受け付けた場合、前記第２の時点において前記所定の事象が前記第１の時点から継続しているときは、前記第２の時点以降に撮像手段によって撮像された撮像画像を出力し、前記第２の時点において前記所定の事象が継続していないときは、前記所定の事象が継続している間に撮像された撮像画像を出力する出力手段と
を有することを特徴とする画像出力装置。
前記出力手段は、前記第２の時点に前記所定の事象が継続していない場合、前記所定の事象が継続している間に撮像された撮像画像で、記憶手段に記憶されている前記撮像画像を出力することを特徴とする請求項１に記載の画像出力装置。
前記撮像画像は、動画であって、
前記出力手段は、前記第２の時点に前記所定の事象が継続していない場合、前記所定の事象が継続している間の動画を前記撮像画像として出力することを特徴とする請求項１又は２に記載の画像出力装置。
前記出力手段は、前記第２の時点に前記所定の事象が継続していない場合、前記第２の時点以降に前記撮像手段により撮像された前記撮像画像を一定時間出力した後で、前記所定の事象が継続している間に撮像された前記画像を出力することを特徴とする請求項１乃至３のいずれか１項に記載の画像出力装置。
前記第１の時点に撮像された前記撮像画像において、前記撮像画像に写る物体に係る所定の事象が発生した後の前記第２の時点に前記出力指示を受け付け、前記第２の時点に前記所定の事象が継続しているかを判定する第１の判定手段をさらに有し、
前記出力手段は、前記第２の時点に前記所定の事象が継続していると判定された場合に、前記撮像手段によって撮像されているライブの撮像画像を出力し、前記第２の時点に前記所定の事象が継続していないと判定された場合に、前記所定の事象が継続している間に前記撮像手段によって撮像された録画の撮像画像を出力することを特徴とする請求項１乃至４のいずれか１項に記載の画像出力装置。
前記第１の判定手段は、前記所定の事象が継続しているか否かを、判定条件に基づいて判定することを特徴とする請求項５に記載の画像出力装置。
前記判定条件の設定指示を受け付ける第２の受付手段をさらに有し、
前記第１の判定手段は、前記設定指示に係る前記判定条件に基づいて、判定を行うことを特徴とする請求項６に記載の画像出力装置。
前記撮像画像に基づいて、前記所定の事象が発生したか否かを判定する第２の判定手段をさらに有することを特徴とする請求項１乃至７のいずれか１項に記載の画像出力装置。
前記第２の判定手段は、さらに前記撮像手段の撮像範囲を基準とする領域における、前記所定の事象に応じた環境変化を検知する検知手段による検知結果に基づいて、前記所定の事象が発生したか否かを判定することを特徴とする請求項８に記載の画像出力装置。
前記出力手段は、前記第１の時点に撮像された撮像画像において、所定の事象が発生した場合、前記所定の事象が発生したことを示す発生通知を出力することを特徴とする請求項１乃至９のいずれか１項に記載の画像出力装置。
前記出力手段は、前記第２の時点が、前記発生通知を出力してから所定時間経過後である場合には、前記第２の時点に前記所定の事象が継続している場合であっても、前記第２の時点以降に撮像手段によって撮像された撮像画像を出力することを特徴とする請求項１０に記載の画像出力装置。
前記所定の事象には、物体の侵入、通過、置き去り、持ち去りのうち、少なくともいずれかを含むことを特徴とする請求項１乃至１１のいずれか１項に記載の画像出力装置。
所定の事象が発生したときにおける撮像手段によって撮像された画像を端末装置に出力する画像出力装置が実行する画像出力方法であって、
前記所定の事象の発生通知を前記端末装置が受けたことに応じて、撮像手段により撮像された撮像画像を前記端末装置において閲覧するために、前記端末装置から撮像画像の出力指示を受け付ける受付ステップと、
第１の時点に撮像された撮像画像において所定の事象が発生した後の第２の時点に前記出力指示を受け付けた場合、前記第２の時点において前記所定の事象が前記第１の時点から継続しているときは、前記第２の時点以降に撮像手段によって撮像された撮像画像を出力し、前記第２の時点において前記所定の事象が継続していないときは、前記所定の事象が継続している間に撮像された撮像画像を出力する出力ステップと
を含むことを特徴とする画像出力方法。
コンピュータを、
所定の事象の発生通知を端末装置が受けたことに応じて、撮像手段により撮像された撮像画像を前記端末装置において閲覧するために、前記端末装置から撮像画像の出力指示を受け付ける受付手段と、
第１の時点に撮像された撮像画像において所定の事象が発生した後の第２の時点に前記出力指示を受け付けた場合、前記第２の時点において前記所定の事象が前記第１の時点から継続しているときは、前記第２の時点以降に撮像手段によって撮像された撮像画像を出力し、前記第２の時点において前記所定の事象が継続していないときは、前記所定の事象が継続している間に撮像された撮像画像を出力する出力手段と
して機能させるためのプログラム。