JP2018174573A - 監視カメラシステムにおける監視方法、差分画像作成方法、画像復元方法、及び差分検出装置 - Google Patents

Abstract

【課題】録画サーバへの転送フレーム数及び解像度を落とさずに、録画サーバへの転送容量の削減を可能とする監視カメラシステムにおける監視方法、差分画像作成方法、画像復元方法及び差分検出装置を提供する。【解決手段】差分画像作成方法は、第１の全画像Ａと、第１の全画像の次に連続して取得した第２の全画像Ｂに基づき、第１の全画像と第２の全画像の差分画像であって、第１の全画像と第２の全画像とが相違しないエリアをマスクエリアとした第１の差分画像を作成するステップ、第２の全画像から第１の差分画像との差分画像であって、第１の差分画像のマスクエリア以外については第２の全画像の対応部分とし、第１の差分画像のマスクエリアについては透明色情報を設定した第２の差分画像を作成するステップ、を含む。【選択図】図７

Description

本発明は、防犯や管理等のために、撮影した画像やデータをサーバに転送し、蓄積させ
る監視カメラシステムにおける監視方法と、差分画像作成方法、画像転送方法、及び画像
転送に適した差分検出装置、また、転送されたデータについて端末で表示できる画像に復
元する画像復元方法に関する。

従来、防犯や調査あるいは管理といった目的で、集合住宅などの建物の出入口や店頭あ
るいは街頭、工場や配送センター等、監視対象となるポイントを監視用カメラにより適時
監視し、監視結果を、インターネットその他電気通信回線を介して、ユーザ端末のモニタ
ーに送出し、モニターするカメラシステムが導入されている。静止画を撮影して、サーバ
で取得した画像を圧縮してから端末に表示するカメラシステムも開発されているが（例え
ば、特許文献１参照）、一般には、カメラで撮影した動画を記録するシステムの方が知ら
れている（例えば、特許文献２参照）。

特開２０１３−５１５３４号公報 特開２００２−７７８８２号公報

しかし、従来のシステムでは、サーバにおいては画像圧縮ができるが、監視カメラから
サーバまでの転送では、転送容量が大きく、特に動画の場合に顕著であるという問題があ
った。

また、監視カメラからサーバまでの転送容量を小さくするには、撮影間隔を長くして転
送するフレーム数を減らすか、解像度を下げて撮影することが必要となるという問題があ
った。

したがって、本発明の第１の目的は、上記した課題を解決し、録画サーバへの転送フレ
ーム数を落とさず、また解像度も落とさずに、録画サーバへの転送容量の削減を可能とす
る差分画像作成方法、及びこれを用いた画像転送方法と、差分検出装置、並びに監視カメ
ラシステムにおける監視方法を提供することにある。また、本発明の第２の目的は、かか
る方法で転送されたデータについて端末で表示できる画像に復元する画像復元方法を提供
することにある。

本発明の第１の態様は、上記目的を達成するため、第１の全画像と、前記第１の全画像
の次に連続して取得した第２の全画像に基づき、前記第１の全画像と前記第２の全画像の
差分画像であって、前記第１の全画像と前記第２の全画像とが相違しないエリアをマスク
エリアとした第１の差分画像を作成するステップ、
前記第２の全画像から前記第１の差分画像との差分画像であって、前記第１の差分画像の
マスクエリア以外については第２の全画像の対応部分とし、第１の差分画像のマスクエリ
アについては透明色情報を設定した第２の差分画像を作成するステップ、
を含むことを特徴とする差分画像作成方法を提供する。

本発明の第１の態様によれば、後で元の全画像を復元でき容量が小さい差分画像を作成
できるので、画像データをサーバへ転送する際に、録画サーバへの転送フレーム数を落と
さず、また解像度も落とさずに、録画サーバへの転送容量の削減を可能とする。転送容量
の点から、仮に全画像２枚で１秒１コマの画像取得が限界であった場合でも、本態様によ
れば、１秒３コマの画像取得が実現できる。

なお、「画像」は、静止画像と動画像の両方の意味を含む言葉であるが、本願において
は、特に区別するときには、静止画像を「画像」、動画像を「映像」と表示する。

本発明の第２の態様は、上述した本発明の第１の態様の差分画像作成方法によって作成
された差分画像の復元方法であって、前記第１の全画像に前記第２の差分画像を合成する
ステップを含むことを特徴とする画像復元方法を提供する。

本発明の第２の態様によれば、解像度の高い画像を復元できるので、高解像度の動画を
再生できる。

本発明の第３の態様は、動画を撮影するカメラ群及び／又は静止画を撮影するカメラ群
の各カメラに接続され、ルータとインターネットとを介して録画サーバに接続され、画像
を保存するフォルダを有する差分検出装置であって、
一定時間毎又は前記録画サーバからの全画像要求を受信する毎に、前記カメラから全画像
を取得し、全画像転送用の全画像とし、前記フォルダに前記全画像転送用の全画像を保存
するとともに、前記録画サーバに前記全画像転送用の全画像を転送する全画像転送手段、
前記一定時間中の所定時間毎又は前記録画サーバからの差分画像要求を受信する毎に、前
記カメラから全画像を取得し、差分画像転送用の全画像とする差分画像用全画像取得手段
、
前記フォルダに保存されている全画像を抽出する抽出手段、
前記抽出手段で抽出された全画像と前記差分画像用全画像取得手段で取得された差分画像
転送用の全画像との差分画像であって、前記抽出手段で抽出された全画像と前記差分画像
用全画像取得手段で取得された差分画像転送用の全画像とが相違しないエリアをマスクエ
リアとした第１の差分画像を作成する第１の差分画像作成手段、
前記差分画像用全画像取得手段で取得された差分画像転送用の全画像から前記第１の差分
画像との差分画像であって、前記第１の差分画像のマスクエリア以外については、前記差
分画像用全画像取得手段で取得された差分画像転送用の全画像の対応部分とし、前記第１
の差分画像のマスクエリアについては透明色情報を設定した第２の差分画像を作成する第
２の差分画像作成手段、
前記録画サーバに前記第２の差分画像を転送する差分画像転送手段、
前記フォルダに保存されている全画像を前記差分画像用全画像取得手段で取得された差分
画像転送用の全画像に置き換える全画像置換手段、
を有することを特徴とする差分検出装置を提供する。

本発明の第３の態様によれば、カメラ群から画像データを録画サーバへ転送する際に、
録画サーバへの転送フレーム数を落とさず、また解像度も落とさずに、録画サーバへの転
送容量の削減を可能とする。

本発明の第４の態様は、動画を撮影するカメラ群及び／又は静止画を撮影するカメラ群
と、前記カメラ群のカメラに接続され画像を保存するフォルダを有する差分検出装置と、
前記差分検出装置にルータ及びインターネットを介して接続された録画サーバと、を有す
る監視カメラシステムにおける監視方法であって、
一定時間毎又は前記録画サーバからの全画像要求を受信する毎に、前記差分検出装置が、
前記カメラから全画像を取得し、全画像転送用の全画像とし、前記フォルダに前記全画像
転送用の全画像を保存するとともに、前記録画サーバに前記全画像転送用の全画像を転送
する全画像転送ステップを含み、
かつ、
前記一定時間中の所定時間毎又は前記録画サーバからの差分画像要求を受信する毎に、
前記差分検出装置が、前記カメラから全画像を取得し、差分画像転送用の全画像とする差
分画像用全画像取得ステップと、
前記差分検出装置が、前記フォルダに保存されている全画像を抽出する抽出ステップと、
前記差分検出装置が、前記抽出ステップで抽出された全画像と前記差分画像用全画像取得
ステップで取得された差分画像転送用の全画像との差分画像であって、前記抽出ステップ
で抽出された全画像と前記差分画像用全画像取得手段で取得された差分画像転送用の全画
像とが相違しないエリアをマスクエリアとした第１の差分画像を作成する第１の差分画像
作成ステップと、
前記差分検出装置が、前記差分画像用全画像取得抽出ステップで取得された差分画像転送
用の全画像から前記第１の差分画像との差分画像であって、前記第１の差分画像のマスク
エリア以外については、前記差分画像用全画像取得ステップで取得された差分画像転送用
の全画像の対応部分とし、前記第１の差分画像のマスクエリアについては透明色情報を設
定した第２の差分画像を作成する第２の差分画像作成ステップと、
前記差分検出装置が、前記録画サーバに前記第２の差分画像を転送する差分画像転送ステ
ップと、
前記差分検出装置が、前記フォルダに保存されている全画像を前記差分画像用全画像取得
ステップで取得された差分画像転送用の全画像に置き換える全画像置換ステップ、
の各ステップを順に繰り返すことを含み、
かつ、
前記録画サーバが、前記差分検出装置から取得した全画像を保存する全画像保存ステップ
、
前記録画サーバが、前記差分検出装置から取得した差分画像をその一つ前の時点の全画像
に合成して全画像として保存する差分画像変換ステップを含むことを特徴とする監視カメ
ラシステムにおける監視方法を提供する。

本発明の第４の態様によれば、録画サーバへの転送フレーム数を落とさず、また解像度
も落とさずに、録画サーバへの転送容量の削減を可能とするうえ、録画サーバにおいて解
像度の高い画像を復元できるので、高解像度の動画を再生できる。また、ローカルネット
ワーク以外にも動画カメラを設置してインターネット網を介したデータ取得が可能となる
。また、互いにインターネット網を介して接続されたカメラからサーバに画像を送信する
際に、所定のタイミングでの全画像の他、データ量が小さく差分画像より前の画像と組み
わせて元の画像に復元可能な差分データを作成してから転送できるので、インターネット
網を流れる転送容量を削減することができる。

さらに、前記全画像転送ステップ及び前記差分画像用全画像取得ステップにおいて、前
記カメラから全画像を取得した後、前記フォルダに保存されている全画像と画像の色構成
を比較し、光量変化によるノイズを除去してから保存することが好ましい。

屋外等での太陽の光の影響や、屋内での照明の点灯消灯の影響等で生じる画像の色調の
変化による差分量を軽減できるので、外部環境の画像がすこしずつ変化するような箇所に
設置された監視用カメラでも差分を小さくできるので転送量を削減できる。

本発明において、「ネットワーク」には、ＬＡＮやインターネット、Ｗｉ−Ｆｉ回線、
３Ｇ／ＬＴＥ回線、専用線等の通信網及びそれらの組合せから構成されるネットワークを
含む。前記カメラ群は、静止画を撮影するカメラ群及び動画を撮影するカメラ群のいずれ
か又は両方であって、前記カメラ群に撮影させる画像が、静止画及び動画のいずれか又は
両方であってもよい。各カメラは、出力機能と、静止画撮影機能及び／又は動画撮影機能
を有する。カメラはＩＰカメラであることが好ましいが、アナログカメラでも可能である
。静止画を撮影するカメラ群から取得した画像について、動画への圧縮形式は、現時点で
高圧縮であるＨ．２６４であることがさらに好ましい。軽量で、ハードウェア、ソフトウ
ェアいずれであっても実装が容易である。また、本態様においては、前記カメラ群のうち
、動画を撮影するカメラは、前記録画サーバとＬＡＮネットワークで接続される必要がな
く、３Ｇ／ＬＴＥ回線を介してインターネットに接続された動画の監視用カメラであって
も、復元して解像度の高い動画を再生できるデータを録画サーバに転送でき、動画の監視
用カメラを置ける範囲が広くなる。なお、録画サーバはクラウドサーバであってもよい。

本発明によれば、録画サーバへの転送フレーム数を落とさず、また解像度も落とさずに
、録画サーバへの転送容量の削減を可能とする。

本発明の差分画像作成方法の実施例１を利用する監視カメラシステムのシステム構成の一例を示す図である。 本発明の差分画像作成方法の実施例１の録画サーバの構成図である。 本発明の差分画像作成方法の実施例１の差分検出装置の構成図である。 本発明の差分画像作成方法の実施例１の端末（モバイル）の構成図である。 本発明の差分画像作成方法の実施例１の端末（ＰＣ）の構成図である。 本発明の差分画像作成方法の実施例１における監視用カメラから録画サーバへのデータ送信のイメージ図である。 本発明の差分画像作成方法の実施例における差分抽出方法及び本発明の差分画像作成方法の実施例により作成された差分画像からの画像復元方法の説明図である。 本発明の差分画像作成方法の実施例１における監視用カメラ（静止画用）と録画サーバとの接続から一次画像データ書き込みまでの手順概要を示すフロー図である。 本発明の差分画像作成方法の実施例１におけるカメラ（動画撮影）と録画サーバとの接続から一次画像データ書き込みまでの手順概要を示すフロー図である。 本発明の差分画像作成方法の実施例１における画像の変換方法を示すイメージ図である。

以下、本発明について、実施例を用いて本発明を具体的に説明するが、本発明はこれら
に限定されるものではない。

実施例１の差分画像作成方法は、ネットワークを介して録画サーバで監視用カメラを作
動させて、録画サーバが動画及び静止画のカメラ画像を撮影・収集・編集・保存し、録画
サーバがユーザの端末に端末からの要求に応じてネットワークを介してモニターする画像
を送信する監視カメラシステムにおける監視方法に用いる差分画像作成方法である。実施
例１の差分画像作成方法に用いる実施例１の差分検出装置と、上記監視カメラシステムに
おける実施例１の監視カメラの画像転送方法と実施例１の画像復元方法についても合わせ
て説明する。

上記監視カメラシステムは、実施例１の画像復元方法によって復元された画像を端末等
に送信して、ライブ画像の再生・巻戻し・早送りもリライブ再生も行うものである。また
、上記監視カメラシステムは、復元された画像を圧縮して保存し、画像を端末等に送信し
て、過去の画像の再生・巻戻し・早送りも行うものである。本実施例では、静止画像の差
分転送により、カメラから録画サーバへの転送容量を少なくでき、現地に録画サーバを設
置せずにクラウドサーバ等での静止画像収集が可能となる。また、単純な静止画像収集に
比べて、フレーム数の増加、もしくは解像度の拡大が可能となる。

｛構成｝
図１は、本発明の差分画像作成方法の実施例１を利用する監視カメラシステムのシステ
ム構成の一例を示す図である。ＬＡＮやインターネット、Ｗｉ−Ｆｉ回線、３Ｇ／ＬＴＥ
回線、専用線等の通信網の組み合わせから構成されるネットワーク５００上には、（１）
画像を撮影するカメラとして、複数台の監視用カメラ（動画用）７００Ａ〜Ｃと複数台の
監視用カメラ（静止画用）７０１Ａ〜Ｃ、（２）監視用カメラ（動画用）７００Ｂ、Ｃ・
監視用カメラ（静止画用）７０１Ｂ、Ｃのそれぞれに接続されており、監視用カメラで撮
影した画像を取得して録画サーバ１００に転送する差分検出装置４００Ａ〜Ｄ、（２）差
分検出装置４００にルータ６００Ａ〜Ｄ及びインターネットを介して接続され、差分検出
装置４００から画像データを取得し蓄積し端末に送信する録画サーバ１００、（３）ネッ
トワーク５００を介して録画サーバ１００と接続され、録画サーバ１００からの画像デー
タを受信して表示する端末として、スマートフォンなどのモバイル端末２００Ａ、Ｂや、
デスクトップＰＣ（パーソナルコンピュータ）やノートＰＣなどの閲覧ＰＣ３００Ａ〜Ｃ
が接続されている。録画サーバ１００にはＬＡＮを介して監視用カメラ（動画用）７００
Ａと監視用カメラ（静止画用）７０１Ａにも接続されているが、本実施例の差分画像作成
方法は、録画サーバ１００とＬＡＮ上で接続されたカメラについては対象としていないた
め、以下で述べるカメラには、録画サーバ１００とＬＡＮ上で接続されたカメラ（図１で
は監視用カメラ（動画用）７００Ａと監視用カメラ（静止画用）７０１Ａで例示される）
を含まない。図１中では、監視用カメラ（動画用）で撮影された動画（ストリーム動画）
の流れを点線矢印で図示している。なお、以下、モバイル端末と閲覧ＰＣとをまとめると
きは、「端末」又は「Ｖｉｅｗｅｒ」という。

録画サーバ１００は、監視用カメラ（動画用）７００Ｂ、Ｃ及び監視用カメラ（静止画
用）７０１Ｂ、Ｃとは、インターネットを含むネットワーク５００を介して接続されてい
る。本実施例では、録画サーバ１００と同じＬＡＮ以外のネットワーク上にも、静止画を
撮影する監視用カメラのみならず、動画を撮影する監視用カメラを設けることができる。
監視用カメラ（動画用）７００Ｂ、Ｃ、監視用カメラ（静止画用）７０１Ｂ、Ｃには、そ
れぞれ差分検出装置４００Ｄ、Ｃ、Ｂ、Ａが接続されている。録画サーバ１００が接続さ
れたＬＡＮとルータ６００Ａを介して接続されたインターネット網には、３Ｇ／ＬＴＥ回
線が接続され、またルータ６００Ｃを介して別のＬＡＮが接続されている。差分検出装置
４００Ｄは、ルータ６００Ｄと３Ｇ／ＬＴＥ回線を介してインターネット網に接続されて
おり、差分検出装置４００Ｂは、ルータ６００Ｂと３Ｇ／ＬＴＥ回線を介してインターネ
ット網に接続されている。差分検出装置４００Ａ、Ｃは、録画サーバ１００とは異なるＬ
ＡＮに接続されている。図１は、監視用カメラ（動画用）及び監視用カメラ（静止画用）
や閲覧ＰＣやモバイル端末を、録画サーバと複数のネットワークを介して接続した接続例
を示すものであり、これに限定されない。本実施例では、監視用カメラ（静止画用）４０
１と録画サーバ１００との通信及び監視用カメラ（動画用）４００と録画サーバ１００と
の通信は、セッションを確立してから通信を開始する信頼性の高いＴＣＰで行うが、セッ
ションを確立しないでデータを送信する早くてリアルタイム性に優れたＵＤＰでもよく、
ＴＣＰ、ＵＤＰどちらのプロトコルでも画像を取得できる。

監視用カメラ（動画用）や監視用カメラ（静止画用）は、本実施例ではＩＰカメラであ
るが、アナログカメラでもよい。ただし、アナログの場合、変換器を要する。画像表示用
の端末である閲覧ＰＣ３００も、録画サーバ１００と同じＬＡＮ内に存在する場合に限ら
ず、インターネットやＬＡＮやＷｉ-Ｆｉ回線等、複数のネットワークを介して接続され
ていてもよい。画像表示用の端末であるモバイル端末２００についても、ＬＡＮ、インタ
ーネット、携帯電話用ネットワーク（Ｗｉ−Ｆｉ回線や３Ｇ／ＬＴＥ回線等）等、複数の
ネットワークを介して接続されていてもよい。なお、ＬＡＮとインターネット間や、監視
用カメラ（動画用）及び監視用カメラ（静止画用）とインターネット間は、ルータ６００
を介する。

１台の録画サーバ１００は、複数台の監視用カメラ（動画用）７００からカメラ動画を
、また複数台の監視用カメラ（静止画用）７０１からカメラ静止画を取得することができ
る。本実施例では、録画サーバ１００側がネットワークトラフィックを自動的に分散させ
るので、ネットワーク設計が不要で、カメラをポートに繋ぐだけで済むため、作業が非常
に簡便となる。また、通信が不通になった場合にも再開が容易である。

なお、本実施例と異なるが、録画サーバから差分検出装置にアクセスせずに、差分検出
装置から録画サーバに画像を転送する方式（変形例）でも良い。かかる変形例の場合は、
通信が不通になったときに録画サーバ側で状況把握できない一方、ルータのポート変更の
必要がないというメリットがある。変形例での処理としては、差分検出装置内のタイマー
で、１秒などのタイミングで画像取得を行い録画サーバに転送し、転送が正常に終わって
から、１秒等の設定時間でスリープをする。

従来のＩＰカメラシステムでは、動画を取得する監視用カメラは、録画サーバと同じＬ
ＡＮ上に置かないとネットワークへの負担が過大となったが、本実施例では、録画サーバ
への転送フレーム数を落とさず、また解像度も落とさずに、録画サーバへの転送容量の削
減を可能とするので、インターネット上、また、携帯端末等、３Ｇ／ＬＴＥ回線上にも動
画用の監視用カメラを設けることができるため、自由度が非常に高くなる。

図２は、本発明の差分画像作成方法の実施例１の録画サーバの構成図である。録画サー
バ１００は、キャッシュメモリであるメモリ１０２を伴うＣＰＵ１０１やデバイスドライ
バ等を有する制御・演算装置と、ＤＲＡＭ等の主記憶装置やハードディスク等の補助記憶
装置を有する記憶装置１１０と、ネットワークインターフェース１０４等の通信制御装置
や表示装置としてのディスプレイ１０３、キーボード１０５、マウス１０６等で構成され
る入出力装置とを備えている。記憶装置１１０には、一次画像フォルダ１１１と二次映像
フォルダとプログラム１１３と認証用データベースと環境設定フォルダ等の他、オペレー
ティングシステム１１４が格納されている。プログラム１１３は、通常、記憶装置１１０
の補助記憶装置に格納されており、実行時には主記憶装置にロードされる。一次画像フォ
ルダ１１１には、差分検出装置４００から取得した、全画像と、差分画像から作成された
全画像と、で構成される全画像のみからなる動画を一次データとして蓄積し、二次映像フ
ォルダには、一次画像フォルダ１１１内に蓄積された一定時間分の一次データを動画圧縮
変換して二次データとして蓄積する。プログラム１１３には、撮影・収集・編集プログラ
ムや送信プログラム等、各種プログラムを含む。認証用データベースには、ＩＤ、パスワ
ード、各監視用カメラ７００、７０１やモバイル端末２００や閲覧ＰＣ３００のポート番
号とＩＰアドレス、ＩＰアドレスのない端末では個体識別情報（ＵＩＤ）が蓄積されてい
る。本実施例では、録画サーバ１００は、録画サーバと端末が一体となっており、自ら画
像を表示する端末の役割も果たすため、また、メンテナンスや管理のため、ディスプレイ
１０３、また入力手段としてのキーボード１０５やマウス１０６を有している。録画サー
バでカメラ画像の再生を要しない場合は、画像表示装置としての端末機能はなくてもよい
。環境設定フォルダには、各差分検出装置からの画像取得タイミング、一次データや二次
データの作成間隔、圧縮条件等が蓄積されている。録画サーバ１００は、設置型のサーバ
であるが、クラウドサーバであってもよい。

録画サーバ１００は、インターネットを介して接続された監視用カメラ（静止画用）７
０１には、差分検出装置４００に画像要求することにより、静止画で画像を取得させて、
監視用カメラ毎の差分検出装置４００において、全画像のまま或いは差分画像に変換して
録画サーバ１００に送信させる。録画サーバ１００は、インターネットを介して接続され
た監視用カメラ（動画用）７００には、差分検出装置４００に画像要求することにより、
動画で画像を取得させて、監視用カメラ毎の差分検出装置４００において、全画像のまま
或いは差分画像に変換して録画サーバ１００に送信させる。

録画サーバ１００は、ＣＰＵ１０１が、撮影・収集・編集プログラムをメモリ１０２に
ロードして実行することにより本実施例の差分画像作成方法を利用する監視方法における
差分検出装置からの画像取得から編集保存までが可能なコンピュータの機能を実現する。
録画サーバ１００は、ＣＰＵ１０１が、送信プログラムをメモリ１０２にロードして実行
することにより端末への画像送出処理が可能なコンピュータの機能を実現する。ＣＰＵ１
０１は、通常のコンピュータに搭載する演算処理装置であり、各種プログラムを実行し、
各種制御等を行う。

録画サーバ１００は、１台のサーバとする他、複数の録画サーバからなるサーバ群であ
ってもよい。例えば、二次映像フォルダについて、一定期間（例えば２４時間）経過後の
二次データについては、保存先を、カメラ画像を取得する録画サーバと別の録画サーバに
設けた二次映像フォルダとしてもよい。頻繁には再生しない過去の保存データを別にする
ことで、さらに多くの台数のカメラを同一ネットワーク上で監視可能となる。

撮影・収集・編集プログラムは、コンピュータに、（１）差分検出装置との接続を行う
差分検出装置接続機能、（２）一定時間（例えば１秒）毎に、接続した差分検出装置に画
像を録画サーバに入力させる画像取得機能、（３）差分検出装置から取得した画像が差分
画像かを判断する差分画像判断機能、差分検出装置から取得した全画像を保存する全画像
保存機能、（４）差分検出装置から取得した差分画像をその一つ前の時点の全画像に合成
して全画像として保存する差分画像変換機、（５）取得又は合成した全画像を次回画像生
成までメモリに保持する画像保持機能、（６）取得又は合成した全画像を一次データとし
て一次画像フォルダに蓄積する一次データ作成機能を実現させるためのプログラムである
。

本実施例では、撮影・収集・編集プログラムは、より好ましい態様として、さらに、コ
ンピュータに、一次データを、一定時間分（例えば１０分分）毎に結合させタイムスタン
プを付して動画形式で圧縮した二次データに変換する二次データ作成機能をも実現させる
ためのプログラムである。一次データは、全て全画像（カメラ画像が動画の場合はＩフレ
ーム（イントラフレーム））であり、二次データは、カメラ画像が静止画の場合でも動画
形式に圧縮し、カメラ画像が動画の場合、例えば、Ｉフレームを２００フレームにつき１
枚の割合とし、Ｐフレーム（予測インターフレーム）だけでなくＢフレーム（双方向予測
インターフレーム）を組み合わせて挿入し、劣化せずに容量を削減する。本実施例では、
未来のＩフレームを参照することができるので、Ｂフレームを挿入できる。Ｂフレームは
前後比較差分であるので、Ｐフレームよりも小さくなる。

送信プログラムは、コンピュータに、端末との接続を行う端末接続機能、端末にカメラ
一覧を表示して端末からのカメラの選択を受け付ける画像選択受付機能、選択されたカメ
ラについて一次データの画像をライブ画像として端末に送信するライブ画像送信機能、端
末よりライブ画像からの巻戻し要求を受け付けるライブ画像巻戻し受付機能、巻戻し要求
毎に、端末に前回送信した画像より一定時間分（例えば１秒分）過去の時点の一次データ
を抽出して巻戻しライブ画像として端末に送信する巻戻しライブ画像送信機能、端末より
巻戻しライブ画像からの早送り要求を受け付ける巻戻しライブ画像早送り受付機能、早送
り要求毎に、現時点の画像に達するまでは、端末に前回送信した画像より一定時間分（例
えば１秒分）未来の時点の一次データを抽出して早送りライブ画像として端末に送信する
早送りライブ画像送信機能をも実現させるためのプログラムである。「現時点の画像」と
は、差分検出装置から取得した最新の画像を意味する。したがって、現時点の画像は、差
分検出装置からの画像が録画サーバに入力される度に、新しい画像に変わる。

送信プログラムは、さらに、コンピュータに、端末より巻戻しライブ画像からのリライ
ブ画像要求を受け付けるリライブ画像受付機能、リライブ画像要求毎に、端末に前回送信
した画像より一定時間分、詳細には、差分検出装置４００から録画サーバ１００への画像
取得間隔分、未来の時点の一次データを抽出して早送りライブ画像として端末に送信する
リライブ画像送信機能をも実現させるためのプログラムである。なお、ここで「リライブ
画像」は、ライブ画像から過去へ巻き戻しての再生画像を指す。

本実施例では、端末２００、３００と録画サーバ１００との接続もＴＣＰ／ＩＰ方式で
行い、ユーザＩＤとパスワードで認証を行って、端末が録画サーバに登録してある端末で
あることを確認してから画像送信を行う。認証は、録画サーバ上の認証用データベースに
よる認証が好ましい。

端末が同じＬＡＮ上になくても録画サーバがルータを介してネットワークで繋がってい
れば、接続するルータのＩＰアドレスとルータに割り振られたポート番号で録画サーバか
ら画像（全画像若しくは圧縮画像）の取得を行う。端末の接続には、端末認証時に登録し
たＵＩＤを利用して端末の認証を行う。

録画サーバ１００は、モバイル端末２００の接続開始時にＵＩＤを用いた端末固有情報
を元に端末を特定するため、ユーザＩＤとパスワードの認証及び端末固有情報の一致によ
り画像表示を可能とする。

図３は、本発明の差分画像作成方法の実施例１の差分検出装置の構成図である。差分検
出装置４００は、メモリ４０２を伴うＣＰＵ４０１やデバイスドライバ等を有する制御・
演算装置と、ＤＲＡＭ等の主記憶装置やハードディスク等の補助記憶装置を有する記憶装
置４１０と、ネットワークインターフェース４０４等の通信制御装置や、メンテナンス時
のみ接続して用いる表示装置としてのディスプレイ４０３、キーボード４０５、マウス４
０６等で構成される入出力装置とを備えている。記憶装置４１０には、蓄積フォルダ４１
１や環境設定フォルダや差分検出プログラム４１３やオペレーティングシステム４１４が
格納されている。蓄積フォルダ４１１は、画像を保存するフォルダであって、蓄積フォル
ダ４１１には、監視用カメラ（動画用）７００及び監視用カメラ（静止画用）７０１から
取得したカメラ画像の全画像と、先に記憶した全画像と次に記憶した差分画像転送用の全
画像とが相違しないエリアをマスクエリアとした第１の差分画像と、第１の差分画像のマ
スクエリア以外については差分画像転送用の全画像の対応部分とし第１の差分画像のマス
クエリアについては透明色情報を設定した第２の差分画像と、を蓄積する。環境設定フォ
ルダには、ノイズ除去条件や、全画像を保存するカメラ画像か差分画像を保存するカメラ
画像かを判断する条件等が蓄積されている。

差分検出装置４００は、録画サーバ１００とインターネットを介して接続された監視用
カメラ（動画用）７００及び監視用カメラ（静止画用）７０１に、一台につき一台ずつ接
続されている。

差分検出装置４００は、本実施例では、録画サーバ１００によって、差分検出装置４０
０が接続している監視用カメラ（動画用）７００或いは監視用カメラ（静止画用）７０１
への接続要求及びカメラ画像要求を制御され、監視用カメラ（動画用）７００や監視用カ
メラ（静止画用）７０１から取得したカメラ画像を所定の画像にして録画サーバ１００に
送信する。

差分検出装置４００は、ＣＰＵ４０１が、差分検出プログラム４１３をメモリ４０２に
ロードして実行することにより本実施例の差分画像作成方法を利用する監視方法における
カメラ画像取得から編集保存、そして録画サーバへの送信までが可能なコンピュータの機
能を実現する。ＣＰＵ４０１は、通常のコンピュータに搭載する演算処理装置であり、各
種プログラムを実行し、各種制御等を行う。

差分検出プログラム４１３は、コンピュータに、（１）録画サーバからの監視用カメラ
との接続要求を受信する毎に、監視用カメラとの接続を行うカメラ接続機能、（２）録画
サーバからの全画像要求を受信する毎に、接続した監視用カメラ（動画用）或いは監視用
カメラ（静止画用）から全画像を取得し、全画像転送用の全画像とし、蓄積フォルダに全
画像転送用の全画像を保存するとともに、録画サーバに全画像転送用の全画像を転送する
全画像転送機能、（３）録画サーバからの差分画像要求を受信する毎に、接続した監視用
カメラ（動画用）或いは監視用カメラ（静止画用）から全画像を取得し、差分画像転送用
の全画像とする差分画像用全画像取得機能、（４）蓄積フォルダに保存されている全画像
を抽出する抽出機能、（５）抽出機能により抽出された全画像と差分画像用全画像取得機
能により取得された差分画像転送用の全画像との差分画像であって、抽出機能により抽出
された全画像と差分画像用全画像取得機能により取得された差分画像転送用の全画像とが
相違しないエリアをマスクエリアとした第１の差分画像を作成する第１の差分画像作成機
能、（６）差分画像用全画像取得機能により取得された差分画像転送用の全画像から第１
の差分画像との差分画像であって、第１の差分画像のマスクエリア以外については、差分
画像用全画像取得機能により取得された差分画像転送用の全画像の対応部分とし、第１の
差分画像のマスクエリアについては透明色情報を設定した第２の差分画像を作成する第２
の差分画像作成機能、（７）録画サーバに第２の差分画像を転送する差分画像転送機能、
（８）蓄積フォルダに保存されている全画像を差分画像用全画像取得機能により取得され
た差分画像転送用の全画像に置き換える全画像置換機能、を実現させるためのプログラム
である。

なお、録画サーバからの全画像要求や差分画像要求を受信する毎にカメラから全画像を
取得する代わりに、一定時間（例えば１秒）毎に、接続した監視用カメラ（動画用）或い
は監視用カメラ（静止画用）から全画像を取得するものであってもよい。

なお、差分画像用全画像取得機能は、本実施例においては、さらに、監視用カメラ（動
画用）又は監視用カメラ（静止画用）から全画像を取得した後、蓄積フォルダに保存され
ている全画像と画像の色構成を比較し、光量変化によるノイズを除去してから保存する機
能を含む。

本実施例では、差分検出装置を介しての監視用カメラと録画サーバとの接続はＴＣＰ／
ＩＰ方式で行い、監視用カメラを特定するため、録画サーバ側で設定したユーザＩＤとパ
スワードで認証を行ってからカメラ画像の撮影等の要求を行う。認証は、録画サーバ上の
認証用データベースによる認証が好ましい。

カメラが同じＬＡＮ上になくてもルータを介してネットワークで繋がっていれば、接続
するルータのＩＰアドレスとルータに割り振られたポート番号で差分検出装置から画像（
全画像若しくは差分画像）の取得を行う。グローバルＩＰを持たない環境で接続されてい
るときは、差分検出装置から録画サーバに向けて画像（全画像若しくは差分画像）転送を
行う。この際は、録画サーバ側ルータのポート番号を開放し、録画サーバにポート転送す
る。

録画サーバ１００は、ローカル環境（例えば、同じＬＡＮ上）にある監視用カメラ接続
開始時にＩＰアドレス及びポート番号を用いた接続によって接続相手を特定でき、ユーザ
ＩＤとパスワードで認証する。録画サーバ１００は、インターネット網を介する等、遠隔
環境にある監視用カメラとの接続では、ルータのポート転送（ポートフォワーディングな
どとも表現される）を用いることで、グローバルＩＰアドレス及びポート番号を用いて接
続相手を特定する。

図４は、本発明の差分画像作成方法の実施例１の端末（モバイル）の構成図である。モ
バイル端末２００は、メモリ２０２を伴うＣＰＵ２０１やデバイスドライバ等を有する制
御・演算装置と、記憶装置２１０、データの送受信等を行う通信制御装置、表示装置とし
てのディスプレイ２０３、操作ボタンあるいはタッチパネル等の入出力装置を備えている
。記憶装置２１０には、画像表示プログラム２１３やオペレーティングシステム２１４が
格納されている。モバイル端末２００は、例えばスマートフォン等の携帯電話等であり、
ＣＰＵ２０１が画像表示プログラム２１３をメモリ２０２にロードして実行することによ
り本発明の画像表示が可能なコンピュータの機能を実現する。ＣＰＵ２０１は、通常のモ
バイル端末に搭載する演算処理装置であり、各種プログラムを実行し、各種制御等を行う
。

図５は、本発明の差分画像作成方法の実施例１の端末（ＰＣ）の構成図である。閲覧Ｐ
Ｃ３００は、メモリ３０２を伴うＣＰＵ３０１やデバイスドライバ等を有する制御・演算
装置と、ＤＲＡＭ等の主記憶装置やハードディスク等の補助記憶装置を有する記憶装置３
１０と、ネットワークインターフェース３０４等の通信制御装置や表示装置としてのディ
スプレイ３０３、キーボード３０５、マウス３０６等で構成される入出力装置とを備えて
いる。記憶装置３１０には、画像表示プログラム３１３やオペレーティングシステム３１
４が格納されている。閲覧ＰＣ３００は、例えばデスクトップＰＣやノートＰＣ、タブレ
ット端末等であり、ＣＰＵ３０１が画像表示プログラム３１３をメモリ３０２にロードし
て実行することにより本発明の画像表示が可能なコンピュータの機能を実現する。ＣＰＵ
３０１は、通常のＰＣに搭載する演算処理装置であり、各種プログラムを実行し、各種制
御等を行う。

画像表示プログラムは、コンピュータに、録画サーバとの接続を行う端末接続機能、録
画サーバから送信された画像を表示する画像表示機能を実現させるためのプログラムであ
る。

画像表示プログラムは、より好ましい態様として、さらに、コンピュータに、ライブ画
像表示中に、監視用カメラから録画サーバへのカメラ画像取得間隔毎に、ライブ画像を録
画サーバに要求するライブ画像要求機能、ライブ画像表示中に、巻戻し要求の入力を受け
付け、巻戻しライブ画像を録画サーバに要求する巻戻し開始要求機能、巻戻しライブ画像
表示中に、ライブ画像の要求間隔より短い一定時間（例えば０．２秒）毎に、巻戻しライ
ブ画像を録画サーバに要求する巻戻し継続要求機能、巻戻しライブ画像表示中に、ユーザ
からの早送り要求の入力を受け付け、早送りライブ画像を録画サーバに要求する巻戻しラ
イブ画像早送り開始要求機能、早送りライブ画像表示中に、ライブ画像の要求間隔より短
い一定時間（例えば０．２秒）毎に、早送りライブ画像を録画サーバに要求する巻戻しラ
イブ画像早送り継続要求機能をも実現させるためのプログラムである。

本実施例では、画像表示プログラムは、より好ましい態様として、さらに、コンピュー
タに、巻戻しライブ画像表示中に、リライブ画像要求の入力を受け付け、リライブ画像を
録画サーバに要求するリライブ画像開始要求機能、リライブ画像表示中に、カメラから録
画サーバへのカメラ画像取得間隔毎に、リライブ画像を録画サーバに要求するリライブ画
像継続要求機能をも実現させるためのプログラムである。

本実施例においては、録画サーバ１００と閲覧ＰＣ３００と差分検出装置４００とは、
ともにパーソナルコンピュータとして構成され、通常のパーソナルコンピュータが有する
クロック機能等を備えている。モバイル端末２００もクロック機能等を備えている。

本実施例の差分検出方法では、実施例１の差分検出装置４００は、動画を撮影するカメ
ラ群と静止画を撮影するカメラ群の各カメラ（監視用カメラ（動画用）７００・監視用カ
メラ（静止画用）７０１）に接続され、ルータ６００とインターネットを含むネットワー
ク５００とを介して録画サーバ１００に接続され、画像を保存する蓄積フォルダ４１１を
有する差分検出装置であって、（１）録画サーバ１００からの監視用カメラ（動画用）７
００又は監視用カメラ（静止画用）７０１との接続要求を受信する毎に、監視用カメラ（
動画用）７００又は監視用カメラ（静止画用）７０１との接続を行うカメラ接続手段、（
２）一定時間毎又は録画サーバ１００からの全画像要求を受信する毎に、差分検出装置４
００が接続している監視用カメラ（動画用）７００或いは監視用カメラ（静止画用）７０
１から全画像を取得し、全画像転送用の全画像とし、蓄積フォルダ４１１に全画像転送用
の全画像を保存するとともに、録画サーバ１００に前記全画像転送用の全画像を転送する
全画像転送手段、（３）一定時間中の所定時間毎又は録画サーバ１００からの差分画像要
求を受信する毎に、差分検出装置４００が接続している監視用カメラ（動画用）７００或
いは監視用カメラ（静止画用）７０１から全画像を取得し、差分画像転送用の全画像とす
る差分画像用全画像取得手段、（４）蓄積フォルダ４１１に保存されている全画像を抽出
する抽出手段、（５）抽出手段で抽出された全画像と差分画像用全画像取得手段で取得さ
れた差分画像転送用の全画像との差分画像であって、抽出手段で抽出された全画像と差分
画像用全画像取得手段で取得された差分画像転送用の全画像とが相違しないエリアをマス
クエリアとした第１の差分画像を作成する第１の差分画像作成手段、（６）差分画像用全
画像取得手段で取得された差分画像転送用の全画像から第１の差分画像との差分画像であ
って、第１の差分画像のマスクエリア以外については、差分画像用全画像取得手段で取得
された差分画像転送用の全画像の対応部分とし、第１の差分画像のマスクエリアについて
は透明色情報を設定した第２の差分画像を作成する第２の差分画像作成手段、（７）録画
サーバ１００に第２の差分画像を転送する差分画像転送手段、（８）蓄積フォルダ４１１
に保存されている全画像を差分画像用全画像取得手段で取得された差分画像転送用の全画
像に置き換える全画像置換手段、を設けてある。本実施例では、差分画像用全画像取得手
段は、さらに、監視用カメラ（動画用）７００又は監視用カメラ（静止画用）７０１から
全画像を取得した後、蓄積フォルダ４１１に保存されている全画像と画像の色構成を比較
し、光量変化によるノイズを除去してから保存する。

差分検出装置４００は、前述のハードウェア構成と差分検出プログラム４１３によって
、（１）〜（８）の手段として機能する。

本実施例の差分検出方法では、録画サーバ１００は、（１）差分検出装置との接続を行
う差分検出装置接続手段、（２）一定時間（例えば１秒）毎に、接続した差分検出装置に
画像を録画サーバに入力させる画像取得手段、（３）差分検出装置から取得した画像が差
分画像かを判断する差分画像判断手段、差分検出装置から取得した全画像を保存する全画
像保存手段、（４）差分検出装置から取得した差分画像をその一つ前の時点の全画像に合
成して全画像として保存する差分画像変換手段、（５）取得又は合成した全画像を次回画
像生成までメモリに保持する画像保持手段、（６）取得又は合成した全画像を一次データ
として一次画像フォルダに蓄積する一次データ作成手段、（６）一次データを、一定時間
分（例えば１０分分）毎に結合させタイムスタンプを付して動画形式で圧縮した二次デー
タに変換する二次データ作成手段を設けてある。

録画サーバ１００は、前述のハードウェア構成と撮影・収集・編集プログラムによって
、（１）〜（６）の手段として機能する。また、録画サーバ１００は、前述のハードウェ
ア構成と送信プログラムによって、端末へのライブ画像やリライブ画像やそれらの画像の
巻戻しや早送り等の画像送信手段として機能する。

また、端末２００、３００に、（１）監視権限のある１又は複数の監視用カメラ７００
についてカメラ動画のライブ再生を録画サーバ１００に要求するライブ再生要求手段、（
２）録画サーバ１００から送信された一次データを表示するライブ再生表示手段、（３）
監視権限のある１又は複数の監視用カメラ７００について過去のカメラ動画の再生を録画
サーバ１００に要求する過去映像再生要求手段、（４）録画サーバ１００から送信された
二次データを表示する過去映像再生表示手段を設けてある。端末は、前述のハードウェア
構成と画像表示プログラム２１３、３１３によって、（１）〜（４）の手段として機能す
る。

なお、カメラ画像データを圧縮して作成された一次データは、一定時間毎に録画サーバ
で二次データに変換されているので、端末は、ライブ画像の巻戻しや巻戻し後の早送り以
外に、従来の録画再生装置で可能な、過去のカメラ画像の再生や巻戻し、早送りも可能で
ある。高画質でありながらデータ量が小さく、巻戻しライブ合成画像や早送りライブ合成
画像は、一次的な保存用に圧縮した一次データを使用するため、高画質ながらデータ量が
小さい。頻繁には使用しない、二次データ作成単位以上に過去分の再生や早送り巻戻しは
、圧縮変換した動画ファイルである二次データを使用するため、動画ながら保存に要する
データ量が小さくて済む。また、ライブ合成画像の巻戻し後の再生が可能となる。

上述した監視用カメラと差分検出装置と録画サーバと端末とによって構成される監視用
カメラシステムは、実施例１の差分画像作成方法と、かかる差分画像作成方法を利用した
実施例１の画像転送方法と、かかる画像転送方法によって転送された画像の復元方法であ
る実施例１の画像復元方法を実現する監視カメラシステムであり、差分検出装置から録画
サーバへの送信データ量が小さく、ローカル環境以外に動画撮影用カメラを設けてもデー
タ遅延等の問題が生じにくく、また、録画サーバから端末への送信データ量も小さく、解
像度が高く高画質ながらネットワークにかかる負荷が小さい監視システムを実現できる。
すなわち、録画サーバへの転送フレーム数を落とさず、また解像度も落とさずに、録画サ
ーバへの転送容量の削減を可能とする。ネットワーク上に同時に流れるデータ量が少なく
なるので、一般のインターネット回線などを通じてカメラ画像を録画サーバに流すことが
でき、また、一般のインターネット回線などにも、ネットワークカメラ情報を流すことが
できる。さらに、インターネット回線（ＷＡＮ）越しのクラウドサーバでのデータ蓄積を
可能にする。

｛手順｝
本発明の差分画像作成方法の実施例１の差分画像作成手順について次に説明する。本手
順では、上述した監視用カメラと差分検出装置と録画サーバと端末とによって構成される
監視カメラシステムを使用する。

図６は、本発明の差分画像作成方法の実施例１における監視用カメラから録画サーバへ
のデータ送信のイメージ図である。監視用カメラ（動画用）であるストリームＩＰカメラ
も、監視用カメラ（静止画用）である静止画ＩＰカメラも、ネットワークＨＵＢを介して
差分検出装置に接続されており、差分検出装置は、ネットワークＨＵＢを介してインター
ネット網に接続されており、録画サーバであるサーバ機は、インターネット網に接続され
ている。

録画サーバから差分検出装置へ全画像要求や差分画像要求が送信され、差分検出装置は
、録画サーバから受信した要求に基づいて監視用カメラ（動画用）や、監視用カメラ（静
止画用）に画像要求する。差分検出装置からの要求に基づいて、監視用カメラ（動画用）
はストリーム動画を差分検出装置に送信し、監視用カメラ（静止画用）は静止画像を差分
検出装置に送信する。差分検出装置に送信されたストリーム動画や静止画像は、差分検出
装置において、静止画像である全画像又は差分画像に編集して録画サーバに送信する。し
たがって、インターネット網には静止画像のみ流れることになり、しかも差分画像では全
画像よりデータ量が小さくなるので、ネットワークへの負荷が小さくて済む。

図７は、本発明の差分画像作成方法の実施例における差分抽出方法及び本発明の差分画
像作成方法の実施例により作成された差分画像からの画像復元方法の説明図である。

本実施例の差分画像作成方法では、（１）第１の全画像（図７における「Ａ画像」）と
、第１の全画像の次に連続して取得した第２の全画像（図７における「Ｂ画像」）に基づ
き、第１の全画像と第２の全画像の差分画像であって、第１の全画像と第２の全画像とが
相違しないエリアをマスクエリアとした第１の差分画像（図７における「Ａ画像とＢ画像
の差分」）を作成するステップ、（２）第２の全画像から第１の差分画像との差分画像で
あって、第１の差分画像のマスクエリア以外については第２の全画像の対応部分とし、第
１の差分画像のマスクエリアについては透明色情報を設定した第２の差分画像（図７にお
ける「Ｂ画像から差分発生エリアを抽出」＝「差分画像」）を作成するステップ、を含む
。図７における「Ａ画像とＢ画像の差分」の絵において、マスクエリアは黒く塗りつぶし
た部分である。図７における「Ｂ画像から差分発生エリアを抽出」の絵において、黒く塗
りつぶした部分は、αチャンネルとし透明色を扱えるフォーマットに変換して、透明色情
報を設定したエリアである。これにより、画像容量を削減できる。

上述した差分画像作成方法によって作成された差分画像の復元方法では、第１の全画像
（図７における「Ａ画像」）に第２の差分画像（図７における「Ｂ画像から差分発生エリ
アを抽出」＝「差分画像」）を合成するステップを含む。第１の全画像に第２の差分画像
を重ね合わせると第２の全画像（図７における「Ａ画像に差分画像のみを描画」＝「Ｂ画
像」）を復元できる。

本実施例の差分画像作成方法では、特に定点で設置する監視カメラのシステムにおいて
は、差分が小さいので、転送容量の縮小に極めて効果的である。

本実施例の差分画像作成方法を含む監視カメラの画像転送方法は、動画を撮影するカメ
ラ群と静止画を撮影するカメラ群と、カメラ群の各カメラ（監視用カメラ（動画用）・監
視用カメラ（静止画用））に接続され画像を保存するフォルダを有する差分検出装置と、
差分検出装置にルータ及びインターネットを介して接続された録画サーバと、を有する監
視カメラシステムにおける画像転送方法であって、（１）一定時間毎又は録画サーバから
の全画像要求を受信する毎に、差分検出装置が、カメラから全画像を取得し、全画像転送
用の全画像とし、蓄積フォルダに全画像転送用の全画像を保存するとともに、録画サーバ
に全画像転送用の全画像を転送する全画像転送ステップを含み、かつ、一定時間中の所定
時間毎又は録画サーバからの差分画像要求を受信する毎に、（２）差分検出装置が、前記
カメラから全画像を取得し、差分画像転送用の全画像とする差分画像用全画像取得ステッ
プと、（３）差分検出装置が、蓄積フォルダに保存されている全画像を抽出する抽出ステ
ップと、（４）差分検出装置が、抽出ステップで抽出された全画像と差分画像用全画像取
得ステップで取得された差分画像転送用の全画像との差分画像であって、抽出ステップで
抽出された全画像と差分画像用全画像取得抽出ステップで取得された差分画像転送用の全
画像とが相違しないエリアをマスクエリアとした第１の差分画像を作成する第１の差分画
像作成ステップと、（５）差分検出装置が、差分画像用全画像取得ステップで取得された
差分画像転送用の全画像から第１の差分画像との差分画像であって、第１の差分画像のマ
スクエリア以外については、差分画像用全画像取得ステップで取得された差分画像転送用
の全画像の対応部分とし、第１の差分画像のマスクエリアについては透明色情報を設定し
た第２の差分画像を作成する第２の差分画像作成ステップと、（６）差分検出装置が、録
画サーバに第２の差分画像を転送する差分画像転送ステップと、（７）差分検出装置が、
蓄積フォルダに保存されている全画像を差分画像用全画像取得ステップで取得された差分
画像転送用の全画像に置き換える全画像置換ステップの（２）〜（７）の各ステップを順
に繰り返すことを含み、かつ、（８）録画サーバが、差分検出装置から取得した全画像を
保存する全画像保存ステップ、（９）録画サーバが、差分検出装置から取得した差分画像
をその一つ前の時点の全画像に合成して全画像として保存する差分画像変換ステップを含
む。また、上述した全画像転送ステップ及び差分画像用全画像取得ステップにおいて、本
実施例においては、カメラから全画像を取得した後、蓄積フォルダに保存されている全画
像と画像の色構成を比較し、光量変化によるノイズを除去してから保存する。ノイズの除
去は、第１の全画像と第２の全画像のそれぞれから差分量を減らすために行うものであっ
て、大きく画像の色構成が変更されたタイミング（屋外日中、屋外夜間、屋内蛍光灯、屋
内照明なしなど）の数枚の静止画像を用いて差分量の少なくなる調整をノイズ除去強度を
変化割り出しして行う。

撮影・収集・編集プログラムと、差分検出プログラムとを有する監視カメラシステムの
プログラムは、これらのステップをコンピュータに実行させるものである。図を用いて、
さらに具体的に説明する。

図８は、本発明の差分画像作成方法の実施例１における監視用カメラ（静止画用）と録
画サーバとの接続から一次画像データ書き込みまでの手順概要を示すフロー図である。ま
ず、録画サーバは、ＴＣＰ／ＩＰ方式で差分検出装置に接続を要求する。差分検出装置は
、かかる接続要求を受けて監視用カメラ（静止画用）に接続要求をする。監視用カメラ（
静止画用）は１又は複数台で構成され、各カメラと録画サーバは、差分検出装置を介して
、ユーザＩＤ及びパスワードで認証を行う。差分検出装置が各カメラからの接続応答を受
けて、録画サーバの認証用データベースを参照して認証に成功すると、接続状態となる。

次に、録画サーバから差分検出装置に、画像要求を行う。差分検出装置は、かかる画像
要求を受けて、監視用カメラ（静止画用）に、静止画を撮影し撮影したカメラ画像をＪＰ
ＥＧ形式で差分検出装置に送信することを要求（画像要求）する。監視用カメラ（静止画
用）は、画像要求を受けて、スナップショット（静止画）を撮影して、撮影して得られた
静止画をＪＰＥＧ形式でカメラ画像としてＴＣＰ／ＩＰ方式で差分検出装置に送信する。
本実施例では、録画サーバ側で一定時間毎に二次データに動画圧縮変換するため、静止画
を撮影するカメラに動画フォーマットの機能が備わっている必要がない。

差分検出装置は、静止画のカメラ画像を受信すると、上述のようにノイズ除去を行い、
録画サーバから全画像要求が送信されてから監視用カメラ（静止画用）から送信された画
像（１枚目）かを判断する。１枚目である場合は、全画像転送用の全画像とし、蓄積フォ
ルダに全画像転送用の全画像として保存するとともに、録画サーバに全画像転送用の全画
像を転送する全画像転送を行う。録画サーバから差分画像要求が送信されてから監視用カ
メラ（静止画用）から送信された画像である（１枚目でない）場合は、差分画像転送用の
全画像とし、蓄積フォルダに保存されている全画像との差分から、上述のようにして透明
色情報を設定した第２の差分画像を作成し、録画サーバに第２の差分画像を転送する差分
画像転送を行う。差分検出装置は、蓄積フォルダに保存されている全画像を上述した差分
画像転送用の全画像（第２の全画像）に置き換える。録画サーバから画像要求が送信され
る毎にこれらのステップを繰り返す。

録画サーバは、差分検出装置から画像を取得すると、画像復元を行う。まずは、取得し
た画像が差分画像かを判断し、取得した画像が差分画像の場合は、その一つ前の時点の全
画像に合成して全画像を生成し、取得した画像が全画像の場合は、そのままとし、いずれ
の場合も、画像をメモリに展開し、次の画像生成まで保持する。そして、保持した画像を
一次データとして、一次画像フォルダに蓄積する。その後、一次データを動画圧縮変換し
て二次映像フォルダに蓄積する。

図９は、本発明の差分画像作成方法の実施例１におけるカメラ（動画撮影）と録画サー
バとの接続から一次画像データ書き込みまでの手順概要を示すフロー図である。まず、録
画サーバは、ＴＣＰ／ＩＰ方式で差分検出装置に接続を要求する。差分検出装置は、かか
る接続要求を受けて監視用カメラ（動画用）に接続要求をする。監視用カメラ（動画用）
は１又は複数台で構成され、各カメラと録画サーバは、差分検出装置を介して、ユーザＩ
Ｄ及びパスワードで認証を行う。差分検出装置が各カメラからの接続応答を受けて、差分
検出装置は、監視用カメラ（動画用）に、動画を撮影し撮影したストリーム動画のカメラ
画像を差分検出装置に送信することを要求（画像要求）する。

監視用カメラ（動画用）は、画像要求を受けて、動画を連続撮影して、撮影して得られ
た動画をストリーム方式でＨ．２６４ベースラインプロファイルの動画のカメラ画像とし
て差分検出装置に送信する。差分検出装置は、動画のカメラ画像を受信すると、接続応答
を録画サーバに送信し、録画サーバの認証用データベースを参照して認証に成功すると、
接続状態となる。

次に、録画サーバから差分検出装置に、画像要求を行う。差分検出装置は、かかる画像
要求を受けて、受信済の動画のカメラ画像から所定の間隔で静止画像を抽出し、ノイズを
除去する。受信済の動画のカメラ画像から抽出した１枚目の静止画像は、全画像転送用の
全画像とし、蓄積フォルダに全画像転送用の全画像として保存するとともに、録画サーバ
に全画像転送用の全画像を転送する全画像転送を行う。２枚目以降の静止画像は、差分画
像転送用の全画像とし、蓄積フォルダに保存されている全画像との差分から、上述のよう
にして透明色情報を設定した第２の差分画像を作成し、録画サーバに第２の差分画像を転
送する差分画像転送を行う。差分検出装置は、蓄積フォルダに保存されている全画像を上
述した差分画像転送用の全画像（第２の全画像）に置き換える。録画サーバから画像要求
が送信される毎にこれらのステップを繰り返す。

録画サーバは、差分検出装置から画像を取得すると、画像復元を行う。まずは、取得し
た画像が差分画像かを判断し、取得した画像が差分画像の場合は、その一つ前の時点の全
画像に合成して全画像を生成し、取得した画像が全画像の場合は、そのままとし、いずれ
の場合も、画像をメモリに展開し、次の画像生成まで保持する。そして、保持した画像を
一次データとして、一次画像フォルダに蓄積する。その後、一次データを動画圧縮変換し
て二次映像フォルダに蓄積する。

図１０は、本発明の差分画像作成方法の実施例１における画像の変換方法を示すイメー
ジ図である。図１０は、監視用カメラ（動画用）から取得した画像に基づいて差分検出装
置が作成した全画像（Ｉフレーム）と差分画像（Ｗフレーム）を録画サーバに送信する状
態を示しており、Ｗフレームは透明色を含む差分画像である。録画サーバの一次画像フォ
ルダに蓄積される一次データは、全フレームがＩフレームであって、二次映像フォルダに
蓄積される二次データは、一次データからＩフレームを２００フレームに１枚の割合まで
減少させ、ＢフレームとＰフレームとを含む圧縮した動画ファイルである。

本実施例は、防犯や管理等のための監視用カメラシステムに利用できる差分画像作成方
法であって、撮影した画像やデータをサーバに転送し、蓄積させる。これを用いた画像転
送方法によって録画サーバに転送されたデータは、上述した画像復元方法により、端末で
表示できる画像に復元される。

｛効果｝
本実施例によれば、録画サーバへの転送フレーム数を落とさず、また解像度も落とさず
に、録画サーバへの転送容量の削減を可能とする。

また、インターネット回線等を経由してクラウドサーバでのデータ蓄積も可能となる。
単純な静止画像収集に比べて、フレーム数の増加、若しくは解像度の拡大が可能である。
例えば、従来、Ｉフレームのみで１秒１コマの画像取得が限界であった場合でもＩフレー
ムとＷフレームとすることで、１秒３コマの画像取得が可能となり、したがって、一定時
間に対するフレーム数を上げることが可能となる。同じ条件で解像度を上げた場合は、１
枚目は遅延が発生するものの、それ以降は差分となり容量が減るので、オンタイムをキー
プできるようになる。

カメラから端末へデータを送信する際にパケット紛失が起きにくく、データ転送量が少
なくて済む。したがって、インターネット回線（ＷＡＮ）越しのクラウドサーバでのデー
タ蓄積が可能となる。

なお、本発明は、上記実施の形態に限定されず、その発明の趣旨を逸脱しない範囲で種
々と変形実施が可能である。また、上記各実施の形態の構成要素を発明の趣旨を逸脱しな
い範囲で任意に組み合わせることができる。

１００ 録画サーバ
１０１ ＣＰＵ
１０２ メモリ
１０３ ディスプレイ
１０４ ネットワークインターフェース
１０５ キーボード
１０６ マウス
１１０ 記憶装置
１１１ 一次画像フォルダ
１１３ 撮影・収集・編集プログラム
１１４ オペレーティングシステム
２００ モバイル端末
２０１ ＣＰＵ
２０２ メモリ
２０３ ディスプレイ
２１０ 記憶装置
２１３ 画像表示プログラム
２１４ オペレーティングシステム
３００ 閲覧ＰＣ
３０１ ＣＰＵ
３０２ メモリ
３０３ ディスプレイ
３０４ ネットワークインターフェース
３０５ キーボード
３０６ マウス
３１０ 記憶装置
３１３ 画像表示プログラム
３１４ オペレーティングシステム
４００ 差分検出装置
４０１ ＣＰＵ
４０２ メモリ
４０３ ディスプレイ
４０４ ネットワークインターフェース
４０５ キーボード
４０６ マウス
４１０ 記憶装置
４１１ 蓄積フォルダ
４１３ 撮影・差分検出・送信プログラム
４１４ オペレーティングシステム
５００ ネットワーク
６００ ルータ
７００ 監視用カメラ（動画用）
７０１ 監視用カメラ（静止画用）

Claims (6)

1. 動画を撮影するカメラ群及び／又は静止画を撮影するカメラ群の各カメラに接続され、
   ネットワークを介して画像復元装置に接続されている差分検出装置であって、
   一定時間毎又は前記画像復元装置からの全画像要求を受信する毎に、前記カメラから全
   画像を全画像転送用の全画像として取得し、前記画像復元装置に前記全画像転送用の全画
   像を転送する全画像転送手段、
   前記一定時間中の所定時間毎又は前記画像復元装置からの差分画像要求を受信する毎に
   、前記カメラから全画像を差分画像転送用の全画像として取得する差分画像用全画像取得
   手段、
   前記全画像転送用の全画像と前記差分画像用全画像取得手段で取得された差分画像転送
   用の全画像との差分画像であって、前記全画像転送用の全画像と前記差分画像用全画像取
   得手段で取得された差分画像転送用の全画像とが相違しないエリアをマスクエリアとした
   第１の差分画像を作成する第１の差分画像作成手段、
   前記差分画像用全画像取得手段で取得された差分画像転送用の全画像から前記第１の差
   分画像との差分画像であって、前記第１の差分画像のマスクエリア以外については、前記
   差分画像用全画像取得手段で取得された差分画像転送用の全画像の対応部分とし、前記第
   １の差分画像のマスクエリアについては透明色情報を設定した第２の差分画像を作成する
   第２の差分画像作成手段、
   前記画像復元装置に前記第２の差分画像を転送する差分画像転送手段、
   を有することを特徴とする差分検出装置。
2. 前記全画像転送手段は、記憶装置に前記全画像転送用の全画像を保存し、
   前記記憶装置に保存されている全画像を抽出する抽出手段を更に有し、
   前記第１の差分画像作成手段は、前記抽出手段で抽出された全画像と前記差分画像用全
   画像取得手段で取得された差分画像転送用の全画像から第１の差分画像を作成し、
   前記記憶装置に保存されている全画像を前記差分画像用全画像取得手段で取得された差
   分画像転送用の全画像に置き換える全画像置換手段を更に有する請求項１に記載の差分検
   出装置。
3. 動画を撮影するカメラ群及び／又は静止画を撮影するカメラ群の各カメラに接続され、
   ネットワークを介して画像復元装置に接続されている差分検出装置が実行する差分実行方
   法であって、
   一定時間毎又は前記画像復元装置からの全画像要求を受信する毎に、前記カメラから全
   画像を全画像転送用の全画像として取得し、前記画像復元装置に前記全画像転送用の全画
   像を転送する全画像転送ステップ、
   前記一定時間中の所定時間毎又は前記画像復元装置からの差分画像要求を受信する毎に
   、前記カメラから全画像を差分画像転送用の全画像として取得する差分画像用全画像取得
   ステップ、
   前記全画像転送用の全画像と前記差分画像用全画像取得ステップで取得された差分画像
   転送用の全画像との差分画像であって、前記全画像転送用の全画像と前記差分画像用全画
   像取得ステップで取得された差分画像転送用の全画像とが相違しないエリアをマスクエリ
   アとした第１の差分画像を作成する第１の差分画像作成ステップ、
   前記差分画像用全画像取得ステップで取得された差分画像転送用の全画像から前記第１
   の差分画像との差分画像であって、前記第１の差分画像のマスクエリア以外については、
   前記差分画像用全画像取得ステップで取得された差分画像転送用の全画像の対応部分とし
   、前記第１の差分画像のマスクエリアについては透明色情報を設定した第２の差分画像を
   作成する第２の差分画像作成ステップ、
   前記画像復元装置に前記第２の差分画像を転送する差分画像転送ステップ、
   を有することを特徴とする差分検出方法。
4. 動画を撮影するカメラ群及び／又は静止画を撮影するカメラ群の各カメラに接続され、
   ネットワークを介して画像復元装置に接続されているコンピュータに、
   一定時間毎又は前記画像復元装置からの全画像要求を受信する毎に、前記カメラから全
   画像を全画像転送用の全画像として取得し、前記画像復元装置に前記全画像転送用の全画
   像を転送する全画像転送ステップ、
   前記一定時間中の所定時間毎又は前記画像復元装置からの差分画像要求を受信する毎に
   、前記カメラから全画像を差分画像転送用の全画像として取得する差分画像用全画像取得
   ステップ、
   前記全画像転送用の全画像と前記差分画像用全画像取得ステップで取得された差分画像
   転送用の全画像との差分画像であって、前記全画像転送用の全画像と前記差分画像用全画
   像取得ステップで取得された差分画像転送用の全画像とが相違しないエリアをマスクエリ
   アとした第１の差分画像を作成する第１の差分画像作成ステップ、
   前記差分画像用全画像取得ステップで取得された差分画像転送用の全画像から前記第１
   の差分画像との差分画像であって、前記第１の差分画像のマスクエリア以外については、
   前記差分画像用全画像取得ステップで取得された差分画像転送用の全画像の対応部分とし
   、前記第１の差分画像のマスクエリアについては透明色情報を設定した第２の差分画像を
   作成する第２の差分画像作成ステップ、
   前記画像復元装置に前記第２の差分画像を転送する差分画像転送ステップ、
   を実行させるための差分検出プログラム。
5. 動画を撮影するカメラ群及び／又は静止画を撮影するカメラ群と、前記カメラ群のカメ
   ラに接続されている差分検出装置と、前記差分検出装置にネットワークを介して接続され
   た画像復元装置と、を有する監視カメラシステムにおける監視方法であって、
   一定時間毎又は前記画像復元装置からの全画像要求を受信する毎に、前記差分検出装置
   が、前記カメラから全画像を全画像転送用の全画像として取得し、前記画像復元装置に前
   記全画像転送用の全画像を転送する全画像転送ステップを含み、
   かつ、
   前記一定時間中の所定時間毎又は前記画像復元装置からの差分画像要求を受信する毎に、
   前記差分検出装置が、前記カメラから全画像を差分画像転送用の全画像として取得する差
   分画像用全画像取得ステップと、
   前記差分検出装置が、前記全画像転送用の全画像と前記差分画像用全画像取得ステップ
   で取得された差分画像転送用の全画像との差分画像であって、前記全画像転送用の全画像
   と前記差分画像用全画像取得ステップで取得された差分画像転送用の全画像とが相違しな
   いエリアをマスクエリアとした第１の差分画像を作成する第１の差分画像作成ステップと
   、
   前記差分検出装置が、前記差分画像用全画像取得ステップで取得された差分画像転送用
   の全画像から前記第１の差分画像との差分画像であって、前記第１の差分画像のマスクエ
   リア以外については、前記差分画像用全画像取得ステップで取得された差分画像転送用の
   全画像の対応部分とし、前記第１の差分画像のマスクエリアについては透明色情報を設定
   した第２の差分画像を作成する第２の差分画像作成ステップと、
   前記差分検出装置が、前記画像復元装置に前記第２の差分画像を転送する差分画像転送
   ステップと、
   の各ステップを順に繰り返すことを含み、
   かつ、
   前記画像復元装置が、前記差分検出装置から取得した全画像を保存する全画像保存ステ
   ップ、
   前記画像復元装置が、前記差分検出装置から取得した差分画像をその一つ前の時点の全
   画像に合成して全画像として保存する差分画像変換ステップを含むことを特徴とする監視
   カメラシステムにおける監視方法。
6. 前記全画像転送ステップにおいて、記憶装置に前記全画像転送用の全画像を保存し、
   さらに、前記全画像転送ステップまたは前記差分画像用全画像取得ステップにおいて、
   前記カメラから全画像を取得した後、当該取得した全画像と前記記憶装置に保存されてい
   る全画像との間で画像の色構成を比較し、光量変化によるノイズを除去することを特徴と
   する請求項５に記載の監視カメラシステムにおける監視方法。

Images