【０００１】
【発明の属する技術分野】
本発明は、遠隔地の撮像装置で撮像した映像データを、携帯電話機、ＰＨＳ等の一般電話回線を利用して、指令センターの映像受信装置に伝送して表示する遠隔監視システムに関するものである。
【０００２】
【従来の技術】
従来から、ビデオカメラ等の撮像装置で撮像した映像データを携帯電話機等の携帯無線端末装置を利用して、中央管理センターに伝送する遠隔監視システムについては、多数のシステムが提案されている。例えば、下記の特許文献が提案されている。
【０００３】
【特許文献１】特開平９−２６１６１９号公報（明細書第２頁〜第４頁、図１）
【特許文献２】特開２００１−６５２１２号公報（明細書第３頁〜第６頁、図１）
【特許文献３】特開２０００−３３３１６０号公報（明細書第３頁〜第４頁、図３）
【特許文献４】特開２００２−４２２７１号公報（明細書第４頁〜第６頁、図１、図３）
【０００４】
上記特許文献１には、施工現場の状況をテレビカメラによって撮像し、撮像した画像を静止画像として遠隔にある管理事務所に携帯電話機の無線通信網によって送信し、管理事務所に設置されているモニタテレビに送信された静止画像を映し出す施工現場のモニター監視システムが提案されている。
【０００５】
特許文献２には、ＣＣＤカメラにより撮像した車内の画像データを携帯電話機等の無線通信手段を介して遠隔地に設置されているコンピュータに伝送し、このコンピュータにより伝送された画像データを即時に画面表示する車両盗難防止システムが提案されている。
【０００６】
特許文献３には、消防車に取り付けられたビデオカメラで撮像した画像データを、第一の携帯電話端末を利用して中央指令所の画像表示装置に伝送し、中央指令所では、第一の携帯電話端末から伝送された画像データを第二の携帯電話端末で受信し、受信した画像データを画像表示装置に表示する火災現場の状況把握装置が提案されている。また、特許文献３には、消防車上の雲台に取り付けたビデオカメラを、中央指令所に設置したジョイステック式操作装置により、雲台の上下、水平回転角度およびピントを制御することが提案されている。
【０００７】
特許文献４には、消防用車両に搭載された撮影装置で撮影した映像信号を、携帯電話端末ではない専用の無線通信装置により、離れた位置に配置された指令側制御装置に伝送し、その映像信号を表示装置に表示する消防用映像伝送システムが記載されている。さらに、特許文献４には、指令側制御装置から撮影装置の旋回角度を３６０度以上に制御することが記載されている。
【０００８】
【発明が解決しようとする課題】
特許文献１、２に記載の発明は、遠隔地に設置されている撮像装置で撮像した映像データを携帯電話機を利用した一般電話回線により、中央管理センター等に設置されている受信装置に伝送し、この受信装置で受信した映像データを静止画像として表示する監視システムである。しかし、この特許文献１、２には、受信装置側から撮像装置のカメラを遠隔制御することについては記載されていない。
【０００９】
特許文献３、４に記載の発明は、上記特許文献１、２に記載の発明に、さらに、中央管理センターから、撮像装置をジョイスティック式操作レーバ等により遠隔操作する機能を備えたことが記載されている。しかし、特許文献３には、この撮像装置の遠隔操作について、表示画面との対話式遠隔操作について具体的な操作手段については開示されていない。特許文献４には、表示装置の画像を見ながら、操作装置により撮像装置の旋回角度、ズーム倍率を制御することが記載されているが、この制御値を設定した後の映像の良否を素早く判断するための対策については開示されていない。
【００１０】
現時点において、ＰＨＳ、携帯電話機等の一般電話回線の通信速度は、９．６ｋｂｐｓ〜６４ｋｂｐｓである。このため、撮像装置で撮像した映像データを一般電話回線を利用して伝送する場合、例えば、１フレーム当たり６４０×４８０画素の映像データを圧縮して伝送しても、１フレーム当たりの伝送時間は、画質により異なるが、１〜１０秒の時間を要する。
【００１１】
一方、上記のような火災現場、あるいは駐車場、店舗、ビルディング等の監視システムにおいては、監視画像を見ながら遠隔操作により撮像装置の撮像角度、ズーム倍率等を変更し、この撮像制御値を変更した映像を直ちに監視して、適切な対策・指令を出すことが要求される。このとき、一般電話回線を利用した監視システムにおいては、上記のように通信速度が遅いので、撮像装置の制御値を変更した後の映像データを受信して表示するまでの時間がかかり過ぎる。上記特許文献３、４には、このような不具合を解決する手段については記載されていない。
【００１２】
そこで、本発明の目的は、指令センターの映像受信装置から対話方式により撮像装置を遠隔制御したときに、その制御値に基づいて撮像した映像データを直ちに映像受信装置に動画像として表示することにより、この制御値の良否を迅速に判断することができる一般電話回線を利用した遠隔監視システムを提供することにある。
【００１３】
【課題を解決するための手段】
本発明は、遠隔制御が可能な撮像装置と、前記撮像装置で撮像した映像データを一般電話回線を利用した携帯無線端末装置により指令センターの映像受信装置に伝送する通信制御装置と、前記映像受信装置は受信した前記映像データを表示する表示装置を備えた遠隔監視システムであって、前記映像受信装置は、前記撮像装置を遠隔制御するときに、前記遠隔制御を行う前に受信した映像データを前記表示装置に静止画像として表示した状態で、前記静止画像の表示領域より小さい表示領域に、前記撮像装置が撮像する映像データを動画像として表示しながら、前記表示装置の表示画面と対話方式で前記撮像装置の制御データを設定する対話式撮像制御手段を備えている一般電話回線を利用した遠隔監視システムである。
【００１４】
さらに、本発明は、前記通信制御装置は、前記映像受信装置から前記撮像装置の遠隔制御信号を受信すると、前記映像データより解像度の低い映像データを前記映像受信装置に伝送する手段を備えている一般電話回線を利用した遠隔監視システムである。
【００１５】
さらに、本発明は、前記撮像装置、通信制御装置および携帯無線端末装置は、車両の運転席内に搭載されている一般電話回線を利用した遠隔監視システムである。
【００１６】
本発明において、携帯無線端末装置とは、ＰＨＳ、携帯電話機を示し、一般電話回線とは、これらＰＨＳ、携帯電話機に用いられている電話回線網のことを示す。
【００１７】
【発明の実施の形態】
以下、本発明の実施の形態について説明する。図１は、本発明を実施するためのシステム構成例を示す。図１において、１は遠隔操作（以下、遠隔制御という）が可能な撮像装置である。撮像装置１としては、ビデオカメラ、ＣＣＤカメラ等が利用でき、遠隔制御により、カメラの上下・左右の旋回角度、ズーム倍率、ピント、画質（輝度、濃淡等）等が制御可能なものである。
【００１８】
２は通信制御装置であって、撮像装置１で撮像した映像データを取り込んで画像圧縮し、この圧縮した映像データを携帯無線端末装置３を介して無線伝送する機能を備えている。通信制御装置２は、ＣＰＵ、内部記憶装置、撮像装置１で撮像した映像データを取り込むためのＩ／Ｆ回路、撮像装置１を制御するためのＩ／Ｆ回路（ＲＳ２３２Ｃ）、取り込んだ映像データを圧縮するための論理回路（画像圧縮ボード）、圧縮した映像データを携帯端末装置３に伝送するためのＩ／Ｆ回路、および通信制御装置２の動作を制御するためのソフトウエアを備えている。撮像した映像データを圧縮する手段としては、公知のＪＰＥＧ、ＭＰＥＧ等を利用することができる。また、通信制御装置２は、撮像装置１で撮像した１フレーム当たりの解像度、すなわち、６４０×４８０画素、あるいは３２０×４８０画素等をソフトウエアにより設定することができるようになっている。なお、通信制御装置２には、液晶表示装置等のモニター装置４を接続し、撮像装置１で撮像した映像をモニタリングする。
【００１９】
携帯無線端末装置３は、携帯電話機、ＰＨＳ等からなる。携帯端末装置３から発信された映像データは、無線により地上基地局５ａに伝送され、さらに、一般電話回線５を介して、離れた場所にある指令センターの映像受信装置６に伝送される。現時点では、携帯電話機、ＰＨＳの通信速度は、９．６ｋｂｐｓ〜６４ｋｂｓである。
【００２０】
なお、本発明において、撮像装置１、通信制御装置２、携帯端末装置３、表示装置４は、監視対象となる現場に設置されるが、消防車等の車両の運転席内に設置することも可能である。これら装置を運転席内に設置する時には、撮像装置１はフロントガラスに近接した位置に配設し、フロントガラスを介して前方が撮像できるようにする。こうすることにより、撮像装置１は風雨に晒されることがなくなる。
【００２１】
指令センターには、一般電話回線５にモデムを介して接続された映像受信装置６が設置されている。この映像受信装置６は、表示装置６ａを備えたパーソナルコンピュータから構成される。映像受信装置６は、携帯端末装置３から伝送された映像データを受信し、受信した映像データを復号化して表示装置６ａに、例えば、フレーム当たり６４０×４８０画素からなる映像を所定の時間間隔で更新される静止画像として表示する機能を有している。
さらに、映像受信装置６は、携帯端末装置３から伝送された映像データをハードディスク装置に蓄積する機能、および撮像装置１を遠隔制御する機能を備えている。この撮像装置１を遠隔制御する機能としては、撮像装置１の上下・左右の旋回角度の制御、スーム倍率の制御、ピント合わせ、撮像する画質の設定機能等である。上記した映像受信装置６の各機能は、映像受信装置６に組み込まれているソフトウエアの制御に従って実行される。
【００２２】
なお、撮像装置１では２４フレーム／秒以上の速度で撮像することができるが、上記のように、携帯電話機、ＰＨＳの通信速度は９．６ｋｂｐｓ〜６４ｋｂｐｓと遅いため、撮像装置１で６４０×４８０画素で撮像した映像データを圧縮し、一般電話回線５を介して映像受信装置６に伝送しても、表示装置６ａでリアルタイムに撮像した映像データを動画像として表示することは困難である。従って、本発明のシステムにおいて、通常の監視時においては、１フレーム当たり６４０×４８０画素で撮像した映像データを、そのまま受信制御装置６の表示装置６ａに６４０×４８０画素で表示する場合には、約１〜１０秒ごとに静止画像が更新される映像として表示されるようになる。
【００２３】
続いて、本発明のシステムの作動について説明する。まず、撮像装置１で撮像した映像データは通信制御装置２に入力される。通信制御装置２は、入力された映像データを画像圧縮回路により画像圧縮し、この圧縮した映像データをソフトウエアの処理により内部記憶装置に一時記憶する。続いて、通信制御装置２に組み込まれているソフトウエアは、内部記憶装置に記憶した映像データを所定のデータ長に分割しながら、携帯無線端末装置３から一般電話回線５を介して映像受信装置６に伝送する。この映像データを所定のデータ長に分割して伝送するときには、１フレーム分の映像データを、例えば、１Ｋバイトごとに分割して、先頭にヘッダーとしてフレーム番号とその分割番号等を付加して伝送するようにする。
【００２４】
映像受信装置６は、組み込まれてソフトウエアにより、携帯無線端末装置３から映像データを受信すると次の処理を行う。
１）携帯無線端末装置３から、映像データを受信すると内部記憶装置に一時記憶する。そして、受信した映像データのヘッダーを解析し、１フレーム分の映像データを受信すると、直ちに内部記憶装置に記憶した１フレーム分の映像データを複合化し、表示装置６ａに表示する。
【００２５】
２）上記１）の手順により、１フレーム分の映像データを受信して表示すると、次の映像データを受信し、次の１フレーム分の映像データを受信すると、その１フレームの映像データを表示装置６ａに表示する。このように上記１）〜２）の処理手順を繰り返すことにより、映像受信装置６は受信した映像データを所定の時間間隔で更新される静止画像を表示装置６ａに表示することができる。この静止画像を更新する時間間隔は、前記のように、撮像装置１で１フレーム当たり６４０×４８０画素で撮像した映像データを受信制御装置６の表示装置６ａに、６４０×４８０画素で表示する場合には、約１〜１０秒ごとに静止画像が更新される映像として表示させることができる。
【００２６】
続いて、映像受信装置６の表示画面を利用して、撮像装置１を遠隔制御する手順について説明する。この遠隔制御は、映像受信装置６に組み込まれているソフトウエアの制御に従って実行される。図２は、表示装置６ａを利用して撮像装置１を対話方式により制御するときの画面例を示す。以下、図２に基づいて説明する。
【００２７】
（手順１）
上記した通常の監視時において、映像受信装置６の表示装置６ａには、図２の領域７ａを除いたほぼ全画面領域（６４０×４８０画素）に受信した映像データを表示させる。そして、映像装置１を遠隔制御する時には、表示画面７の右下の領域７ａをマウス６ｂでクリックする。すると、映像受信装置６は、撮像装置１を遠隔制御する制御モードになり、表示画面７は、図２に示すような表示に変わる。
【００２８】
制御モードになると、映像受信装置６は一般電話回線網５を介して、通信制御装置２に遠隔制御信号を伝送する。通信制御装置２は、この遠隔制御信号を受信すると、撮像装置１が撮像した映像データを通常の監視時の映像データより解像度が低いデータ、例えば、１フレーム当たり１６０×１２０画素とした映像データを圧縮した後、映像受信装置６に伝送するようにする。このように解像度を低くしてデータ量が少ない映像データを伝送すると、１フレーム当たりの伝送時間を短縮することができるので、制御モード中は撮像装置１が撮像した映像データをほぼリアルタイムに映像受信装置に伝送することができるようになる。
【００２９】
映像受信装置６は、制御モードになると、表示装置６の表示領域７ｂに、マウス６ｂで領域７ａをクリックする直前に表示していた映像データを静止画像として表示する。さらに、映像受信装置６は、表示領域７ｂより小さい表示領域７ｃに、制御モード後に受信した映像データを表示する。この表示領域７ｃの表示画素数は、前記した通信制御装置２が制御モード中に伝送する１フレーム当たりの画素数１６０×１２０と同一にする。このように、制御モード中において、解像度を低くした映像データを伝送すると、表示領域７ｃには、撮像装置１の撮像とほぼリアルタイムに、約１０フレーム／秒で表示することが可能になる。１０フレーム／秒程度の速度で映像を表示すると、ほぼ動画像に近い感覚で映像を見ることができる。
【００３０】
（手順２）
続いて、撮像装置１を制御するために、撮像装置１の上下・左右の旋回角度、ズーム倍率を設定する表示領域７ｄ、画質（輝度、濃淡等）を制御する表示領域７ｅの各スイッチボタンについて、マウス６ｂによる対話方式により適切な制御値を設定する。これらの制御値の設定が完了すると、確定ボタン７ｆをマウス６ｂでクリックする。
【００３１】
（手順３）
確定ボタン７ｆをマウス６ｂでクリックすると、映像受信装置６のソフトウエアは、上記手順２で設定した制御値を通信制御装置２に伝送する。通信制御装置２は、この制御値を受信すると、直ちに、この制御値を撮像装置１に伝送する。
すると、撮像装置１はこの変更された制御値に基づいて撮像を行うようになる。
【００３２】
（手順４）
新しい制御値で撮像された映像データは、通信制御装置２に入力される。通信制御装置２のソフトウエアは、この入力した映像データを圧縮し、携帯無線端末装置３を介して映像受信装置６に伝送する。映像受信装置６はこの映像データを受信すると、受信した映像データを復号化し、表示領域７ｃに約１０フレーム／秒で表示する。
【００３３】
（手順５）
映像受信装置６は、制御モードに移行すると、制御モード前に撮像した映像の静止画像を表示領域７ｂ、制御モードで設定した制御値で撮像した動画像に近い映像を、ほぼリアルタイムに表示領域７ｃに表示させる。従って、映像受信装置６の監視者は、双方の画像を比較して、短時間で適切な撮像装置１の遠隔制御を行うことができるようになる。特に、表示領域７ｃには動画像に近い映像が表示され、撮像装置１の制御値を変更すると、直ちに変更した映像を見ることができるので、監視者は短時間で適切な制御値を設定することができるようになる。なお、さらに制御値の再設定を行いたい場合には、手順２により制御値を再設定する。
【００３４】
（手順６）
撮像装置１の遠隔制御が完了した場合には、完了ボタン７ｇをマウス６ｂでクリックして制御モードを終了させる。制御モードが終了すると、映像受信装置６は、直ちに遠隔制御完了信号を通信制御装置２に伝送する。通信制御装置２はこの遠隔制御完了信号を受信すると、通常の監視モードに戻り、撮像装置１で撮像した映像データを１フレーム当たり、例えば、６４０×４８０画素の解像度の映像データを圧縮した後、映像受信装置６に伝送する。
一方、映像受信装置６は、制御モードが終了すると、表示装置６ａの表示画面７の全体に撮像装置１で撮像した映像データが１〜１０秒ごとに表示画面が更新される静止画像として表示する。なお、上記した手順１〜手順６の処理は、本発明の対話式撮像制御手段を構成する。
【００３５】
上記した実施形態において、映像受信装置６には、受信した映像データをハードディスク装置に記憶、および表示装置６ａに表示された静止画像を印刷する機能を付加することもできる。
この場合、１フレーム分の映像データを受信する都度、この１フレーム分の映像データが圧縮された状態でハードディスク装置に記憶する。そして、必要に応じて後からこの記憶した映像データを複合化して表示装置６ａに再生するようにする。また、表示装置６ａに表示された静止画像について、マウス６ｂの操作、またはキーボード操作によりこの静止画像の印刷指示を行って、一旦この静止画像データをハードディスク装置に記憶し、撮像装置１からの映像データの受信処理が終了した後、記憶した静止画像データを印刷するようにする。
【００３６】
続いて、撮像装置１、通信制御装置２、携帯無線端末装置３、モニター装置４を車両に搭載した実施形態を図３に基づいて説明する。この実施形態においては、車両８の運転席９内に、撮像装置１、通信制御装置２、携帯無線端末装置３、モニター装置４を設置した例を示している。これらの各装置を車両に搭載する場合、撮像装置１のレンスをフロントガラス８ａに極力近づけるように撮像装置１を設置して、フロントガラス８ａの前方を撮像するようにする。また、撮像装置１、モニタ装置４は、運転席９上の天井付近に設置するとよい。また、これら各装置の電源は、車両用のバッテリーから取るようにすることも可能である。
【００３７】
以上に説明した本発明の実施形態において、一般電話回線５と映像受信装置６との通信についても、携帯電話機を利用した無線通信を行うことができる。この場合には、映像受信装置６に携帯電話機を接続することにより実施できる。また、映像受信装置６として携帯型パーソナルコンピュータ（モバイルパソコン）を使用すれば、映像受信装置６を車両に搭載した車載型指令センターにすることもできる。なお、この場合、撮像装置１の遠隔制御を携帯型パーソナルコンピュータの画面を利用して対話方式で行う場合には、キーボード操作で実施できるようにするとよい。
【００３８】
さらに、本発明のシステムにおいては、撮像装置１を広く市販されているデジタルカメラ、通信制御装置２をバッテリー電源により作動できる装置として、これら撮像装置１、通信制御装置２、および携帯無線端末装置３を人間に携帯させた監視システムとすることも可能である。
【００３９】
【発明の効果】
以上に説明した本発明は次の効果を有している。
１）撮像装置を遠隔制御するときに、遠隔制御前に撮像した静止画像を表示した状態で、撮像した映像をリアルタイムで動画像に近い映像速度で表示しながら制御値を設定できるので、適切な制御値を速く設定することができる。
２）上記１）の操作は、パーソナルコンピュータから構成される映像受信装置の画面を利用した対話方式により実施できるので、撮像装置の遠隔制御が極めて簡単に実施できるようになる。
【図面の簡単な説明】
【図１】本発明を実施するためのシステム構成例を示す図である。
【図２】撮像装置を遠隔制御するときの対話式操作画面例を説明するための図である。
【図３】本発明を実施するための他の実施形態を説明するための図である。
【符号の説明】
１ ：撮像装置
２ ：通信制御装置
３ ：携帯無線端末装置
４ ：モニター装置
５ ：一般電話回線
６ ：映像受信装置
６ａ：表示装置
７ ：表示画面
７ａ：制御モードボタン
７ｂ：表示領域
７ｃ：表示領域
７ｄ：表示領域
７ｅ：画質制御ボタン
７ｆ：確定ボタン
７ｇ：完了ボタン
８ ：車両
９ ：運転席[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a remote monitoring system for transmitting and displaying video data captured by a remote imaging device to a video receiving device at a command center using a general telephone line such as a mobile phone or a PHS.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, many remote monitoring systems have been proposed for transmitting video data captured by an imaging device such as a video camera to a central management center using a portable wireless terminal device such as a mobile phone. For example, the following patent documents have been proposed.
[0003]
[Patent Document 1] Japanese Patent Application Laid-Open No. 9-261419 (pages 2 to 4, FIG. 1)
[Patent Document 2] Japanese Patent Application Laid-Open No. 2001-65212 (Specifications: pages 3 to 6, FIG. 1)
[Patent Document 3] Japanese Patent Application Laid-Open No. 2000-333160 (specifications, pages 3 to 4, FIG. 3)
[Patent Document 4] Japanese Patent Application Laid-Open No. 2002-42271 (specification pages 4 to 6, FIGS. 1 and 3)
[0004]
In Patent Document 1, the situation of a construction site is captured by a television camera, and the captured image is transmitted as a still image to a remote management office via a wireless communication network of a mobile phone, and is installed in the management office. 2. Description of the Related Art A monitor system for monitoring a construction site that displays a still image transmitted to a monitor television has been proposed.
[0005]
Patent Document 2 discloses that image data in a vehicle captured by a CCD camera is transmitted to a computer installed in a remote place via wireless communication means such as a mobile phone, and the image data transmitted by the computer is immediately displayed on a screen. A display anti-theft system has been proposed.
[0006]
Patent Document 3 discloses that image data captured by a video camera attached to a fire engine is transmitted to an image display device of a central command center using a first mobile phone terminal. There has been proposed a device for grasping a situation at a fire spot, in which image data transmitted from a mobile phone terminal is received by a second mobile phone terminal, and the received image data is displayed on an image display device. Patent Document 3 proposes that a video camera attached to a pan head on a fire engine is controlled by a joystick-type operation device installed at a central command center to control the vertical and horizontal rotation angles and focus of the pan head. Have been.
[0007]
Patent Document 4 discloses that a video signal photographed by a photographing device mounted on a fire-fighting vehicle is transmitted to a command-side control device disposed at a remote position by a dedicated wireless communication device other than a mobile phone terminal. A fire-fighting video transmission system that displays a video signal on a display device is described. Further, Patent Literature 4 discloses that a turning angle of a photographing device is controlled to 360 degrees or more from a command-side control device.
[0008]
[Problems to be solved by the invention]
The inventions described in Patent Literatures 1 and 2 transmit image data captured by an imaging device installed in a remote place to a receiving device installed in a central management center or the like via a general telephone line using a mobile phone. Is a monitoring system that displays video data received by the receiving device as a still image. However, Patent Documents 1 and 2 do not describe remote control of a camera of an imaging device from a receiving device side.
[0009]
The inventions described in Patent Literatures 3 and 4 are described in addition to the inventions described in Patent Literatures 1 and 2 above, in that a function of remotely controlling the imaging device from a central management center using a joystick type operation lever or the like is provided. ing. However, Patent Literature 3 does not disclose a specific operation means for remote operation of the imaging apparatus and interactive remote operation with a display screen. Patent Literature 4 describes that a turning angle and a zoom magnification of an imaging device are controlled by an operation device while viewing an image on a display device. However, the quality of an image after setting these control values is quickly determined. No countermeasures were taken to disclose it.
[0010]
At present, the communication speed of a general telephone line such as a PHS and a mobile phone is 9.6 kbps to 64 kbps. For this reason, when video data captured by an imaging device is transmitted using a general telephone line, for example, even if video data of 640 × 480 pixels per frame is compressed and transmitted, the transmission time per frame is It takes 1 to 10 seconds depending on the image quality.
[0011]
On the other hand, in a monitoring system for a fire site, a parking lot, a store, a building, or the like as described above, the imaging control value is changed by changing the imaging angle, zoom magnification, and the like of the imaging device by remote control while monitoring the monitoring image. It is necessary to immediately monitor the images that have been made and issue appropriate countermeasures and instructions. At this time, in the monitoring system using a general telephone line, since the communication speed is low as described above, it takes too much time to receive and display the video data after the control value of the imaging device is changed. Patent Documents 3 and 4 do not disclose means for solving such a problem.
[0012]
Therefore, an object of the present invention is to display video data captured based on the control value as a moving image immediately on the video receiving device when the imaging device is remotely controlled from the video receiving device of the command center in an interactive manner. Another object of the present invention is to provide a remote monitoring system using a general telephone line, which can quickly determine the quality of the control value.
[0013]
[Means for Solving the Problems]
The present invention relates to an imaging device capable of remote control, a communication control device for transmitting video data captured by the imaging device to a video receiving device of a command center by a portable wireless terminal device using a general telephone line, and the video receiving device The apparatus is a remote monitoring system including a display device that displays the received video data, wherein the video reception device, when remotely controlling the imaging device, receives the video data before performing the remote control. In a state where the image data is displayed as a still image on the display device, in a display area smaller than the display area of the still image, video data captured by the imaging device is displayed as a moving image. This is a remote monitoring system using a general telephone line including an interactive imaging control unit for setting control data of the imaging device.
[0014]
Further, in the present invention, when the communication control device receives a remote control signal of the imaging device from the video receiving device, the communication control device includes means for transmitting video data having a lower resolution than the video data to the video receiving device. This is a remote monitoring system using a general telephone line.
[0015]
Furthermore, the present invention is a remote monitoring system in which the imaging device, the communication control device, and the portable wireless terminal device use a general telephone line mounted in a driver's seat of a vehicle.
[0016]
In the present invention, the portable wireless terminal device indicates a PHS and a mobile phone, and the general telephone line indicates a telephone line network used for the PHS and the mobile phone.
[0017]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described. FIG. 1 shows an example of a system configuration for implementing the present invention. In FIG. 1, reference numeral 1 denotes an imaging device capable of remote operation (hereinafter, referred to as remote control). As the imaging device 1, a video camera, a CCD camera, or the like can be used, and the vertical and horizontal turning angles, zoom magnification, focus, image quality (brightness, light and shade, etc.) of the camera can be controlled by remote control.
[0018]
Reference numeral 2 denotes a communication control device, which has a function of capturing video data captured by the imaging device 1 and compressing the image, and wirelessly transmitting the compressed video data via the portable wireless terminal device 3. The communication control device 2 includes a CPU, an internal storage device, an I / F circuit for capturing video data captured by the imaging device 1, an I / F circuit (RS232C) for controlling the imaging device 1, and a A logic circuit (image compression board) for compression, an I / F circuit for transmitting the compressed video data to the portable terminal device 3, and software for controlling the operation of the communication control device 2 are provided. As means for compressing the captured video data, known JPEG, MPEG, or the like can be used. In addition, the communication control device 2 can set the resolution per frame captured by the imaging device 1, that is, 640 × 480 pixels or 320 × 480 pixels, by software. Note that a monitor device 4 such as a liquid crystal display device is connected to the communication control device 2 to monitor a video image captured by the imaging device 1.
[0019]
The mobile wireless terminal device 3 includes a mobile phone, a PHS, and the like. The video data transmitted from the portable terminal device 3 is wirelessly transmitted to the ground base station 5a, and further transmitted via the general telephone line 5 to the video receiving device 6 of the command center at a remote place. At present, the communication speed of the mobile phone and the PHS is 9.6 kbps to 64 kbs.
[0020]
In the present invention, the imaging device 1, the communication control device 2, the portable terminal device 3, and the display device 4 are installed at a site to be monitored, but may be installed in a driver's seat of a vehicle such as a fire engine. It is possible. When these devices are installed in the driver's seat, the imaging device 1 is disposed at a position close to the windshield so that the front can be imaged through the windshield. By doing so, the imaging device 1 is not exposed to wind and rain.
[0021]
At the command center, a video receiver 6 connected to a general telephone line 5 via a modem is installed. The video receiving device 6 includes a personal computer having a display device 6a. The video receiving device 6 receives the video data transmitted from the mobile terminal device 3, decodes the received video data, and displays the video having, for example, 640 × 480 pixels per frame at a predetermined time interval on the display device 6 a. It has a function of displaying a still image to be updated.
Further, the video receiving device 6 has a function of storing video data transmitted from the mobile terminal device 3 in the hard disk device and a function of remotely controlling the imaging device 1. Functions for remotely controlling the imaging device 1 include a control of the vertical and horizontal turning angles of the imaging device 1, a control of the zoom magnification, a focus adjustment, a setting function of an image quality to be imaged, and the like. Each function of the video receiving device 6 described above is executed under the control of software incorporated in the video receiving device 6.
[0022]
Note that the imaging device 1 can capture an image at a speed of 24 frames / second or more. However, as described above, the communication speed of the mobile phone and the PHS is as low as 9.6 kbps to 64 kbps. Even if the video data captured by the pixels is compressed and transmitted to the video receiving device 6 via the general telephone line 5, it is difficult to display the video data captured in real time on the display device 6a as a moving image. Therefore, in the system of the present invention, when the video data captured at 640 × 480 pixels per frame is displayed as it is on the display device 6a of the reception control device 6 at 640 × 480 pixels during normal monitoring, A still image is displayed as a video that is updated approximately every 1 to 10 seconds.
[0023]
Subsequently, the operation of the system of the present invention will be described. First, video data captured by the imaging device 1 is input to the communication control device 2. The communication control device 2 performs image compression on the input video data using an image compression circuit, and temporarily stores the compressed video data in an internal storage device by software processing. Subsequently, the software installed in the communication control device 2 divides the video data stored in the internal storage device into a predetermined data length, and transmits the video data from the portable wireless terminal device 3 via the general telephone line 5 to the video receiving device. Transmit to 6. When this video data is transmitted after being divided into a predetermined data length, the video data for one frame is divided into, for example, 1 Kbytes, and a frame number and its division number are added as a header at the beginning and transmitted. To do.
[0024]
The video receiving device 6 performs the following processing when receiving video data from the portable wireless terminal device 3 by software incorporated therein.
1) Upon receiving video data from the portable wireless terminal device 3, the video data is temporarily stored in the internal storage device. Then, the header of the received video data is analyzed. When one frame of video data is received, one frame of video data stored in the internal storage device is immediately composited and displayed on the display device 6a.
[0025]
2) When one frame of video data is received and displayed according to the procedure of 1), the next video data is received. When the next one frame of video data is received, the one frame of video data is displayed. It is displayed on the device 6a. By repeating the processing steps 1) and 2) in this manner, the video receiving device 6 can display a still image in which the received video data is updated at predetermined time intervals on the display device 6a. The time interval for updating the still image is, as described above, when the image data captured by the imaging device 1 at 640 × 480 pixels per frame is displayed on the display device 6a of the reception control device 6 at 640 × 480 pixels. , A still image can be displayed as a video that is updated about every 1 to 10 seconds.
[0026]
Subsequently, a procedure for remotely controlling the imaging device 1 using the display screen of the video receiving device 6 will be described. This remote control is executed in accordance with the control of software incorporated in the video receiving device 6. FIG. 2 shows an example of a screen when the imaging device 1 is controlled in an interactive manner using the display device 6a. Hereinafter, description will be given based on FIG.
[0027]
(Procedure 1)
During the normal monitoring described above, the display device 6a of the video receiving device 6 displays the received video data in almost the entire screen area (640 × 480 pixels) except for the area 7a in FIG. Then, when remotely controlling the video apparatus 1, the user clicks the lower right area 7a of the display screen 7 with the mouse 6b. Then, the video receiving device 6 enters a control mode for remotely controlling the imaging device 1, and the display screen 7 changes to a display as shown in FIG.
[0028]
In the control mode, the video receiving device 6 transmits a remote control signal to the communication control device 2 via the general telephone network 5. When the communication control device 2 receives the remote control signal, the communication control device 2 converts the video data captured by the imaging device 1 into data having a lower resolution than video data during normal monitoring, for example, video data having 160 × 120 pixels per frame. After the compression, the data is transmitted to the video receiving device 6. Transmission of video data with a small amount of data at a low resolution in this way can reduce the transmission time per frame, so that video data captured by the imaging device 1 can be received almost in real time during the control mode. It can be transmitted to the device.
[0029]
In the control mode, the video receiving device 6 displays, as a still image, the video data displayed immediately before clicking the region 7a with the mouse 6b in the display region 7b of the display device 6. Further, the video receiving device 6 displays the video data received after the control mode in a display area 7c smaller than the display area 7b. The number of display pixels in the display area 7c is the same as the number of pixels per frame 160 × 120 transmitted by the communication control device 2 during the control mode. As described above, when the video data with the reduced resolution is transmitted in the control mode, it is possible to display the image at approximately 10 frames / sec in the display area 7c almost in real time with the imaging by the imaging device 1. When an image is displayed at a speed of about 10 frames / second, the image can be viewed with a feeling almost like a moving image.
[0030]
(Procedure 2)
Subsequently, in order to control the imaging apparatus 1, the respective switch buttons of a display area 7d for setting the vertical and horizontal turning angles of the imaging apparatus 1, a zoom magnification, and a display area 7e for controlling the image quality (brightness, shading, etc.) are described. And an appropriate control value is set by an interactive method using the mouse 6b. When the setting of these control values is completed, the enter button 7f is clicked with the mouse 6b.
[0031]
(Procedure 3)
When the confirm button 7f is clicked with the mouse 6b, the software of the video receiving device 6 transmits the control value set in the procedure 2 to the communication control device 2. Upon receiving the control value, the communication control device 2 transmits the control value to the imaging device 1 immediately.
Then, the imaging device 1 performs imaging based on the changed control value.
[0032]
(Procedure 4)
Video data captured with the new control value is input to the communication control device 2. The software of the communication control device 2 compresses the input video data and transmits the compressed video data to the video receiving device 6 via the portable wireless terminal device 3. When receiving the video data, the video receiving device 6 decodes the received video data and displays it at about 10 frames / second in the display area 7c.
[0033]
(Procedure 5)
When the video receiver 6 shifts to the control mode, the video receiver 6 displays a still image of the video captured before the control mode in the display area 7b, and a video close to a moving image captured with the control value set in the control mode in the display area 7c in almost real time. To be displayed. Therefore, the observer of the video receiving device 6 can compare the two images and perform appropriate remote control of the imaging device 1 in a short time. In particular, an image close to a moving image is displayed in the display area 7c, and when the control value of the imaging device 1 is changed, the changed image can be viewed immediately, so that the observer sets an appropriate control value in a short time. Will be able to do it. If it is desired to reset the control value, the control value is reset according to procedure 2.
[0034]
(Procedure 6)
When the remote control of the imaging device 1 is completed, the completion button 7g is clicked with the mouse 6b to end the control mode. When the control mode ends, the video receiving device 6 immediately transmits a remote control completion signal to the communication control device 2. When the communication control device 2 receives the remote control completion signal, the communication control device 2 returns to the normal monitoring mode, compresses video data captured by the imaging device 1 per frame, for example, video data having a resolution of 640 × 480 pixels, The data is transmitted to the video receiving device 6.
On the other hand, when the control mode ends, the video receiving device 6 displays the video data captured by the imaging device 1 on the entire display screen 7 of the display device 6a as a still image whose display screen is updated every 1 to 10 seconds. . Note that the above-described procedures 1 to 6 constitute the interactive imaging control unit of the present invention.
[0035]
In the above-described embodiment, the video receiving device 6 may have a function of storing the received video data in the hard disk device and printing a still image displayed on the display device 6a.
In this case, each time one frame of video data is received, the one frame of video data is stored in a compressed state on the hard disk device. Then, if necessary, the stored video data is decoded and reproduced on the display device 6a. Further, for the still image displayed on the display device 6a, a print instruction for the still image is issued by operating the mouse 6b or the keyboard, and the still image data is temporarily stored in the hard disk device, and the image from the imaging device 1 is stored. After the data reception processing is completed, the stored still image data is printed.
[0036]
Next, an embodiment in which the imaging device 1, the communication control device 2, the portable wireless terminal device 3, and the monitor device 4 are mounted on a vehicle will be described with reference to FIG. This embodiment shows an example in which an imaging device 1, a communication control device 2, a portable wireless terminal device 3, and a monitor device 4 are installed in a driver's seat 9 of a vehicle 8. When each of these devices is mounted on a vehicle, the imaging device 1 is installed so that the lens of the imaging device 1 approaches the windshield 8a as much as possible, and an image of the front of the windshield 8a is taken. Further, the imaging device 1 and the monitor device 4 may be installed near the ceiling above the driver's seat 9. Further, the power of each of these devices can be obtained from a battery for a vehicle.
[0037]
In the embodiment of the present invention described above, the communication between the general telephone line 5 and the video receiving device 6 can also be performed by wireless communication using a mobile phone. In this case, it can be implemented by connecting a mobile phone to the video receiving device 6. If a portable personal computer (mobile personal computer) is used as the video receiving device 6, the video receiving device 6 can be used as a vehicle-mounted command center mounted on a vehicle. In this case, when the remote control of the imaging device 1 is performed in an interactive manner using the screen of the portable personal computer, it is preferable that the operation can be performed by a keyboard operation.
[0038]
Furthermore, in the system of the present invention, the imaging device 1 is a commercially available digital camera, and the communication control device 2 is a device that can be operated by battery power. It is also possible to make a surveillance system in which is carried by a human.
[0039]
【The invention's effect】
The present invention described above has the following effects.
1) When the imaging apparatus is remotely controlled, a control value can be set while displaying a captured image in real time at a video speed close to a moving image in a state where a still image captured before remote control is displayed. The control value can be set quickly.
2) Since the operation of the above 1) can be performed by an interactive method using the screen of the video receiving device composed of a personal computer, the remote control of the imaging device can be performed very easily.
[Brief description of the drawings]
FIG. 1 is a diagram showing an example of a system configuration for implementing the present invention.
FIG. 2 is a diagram illustrating an example of an interactive operation screen when remotely controlling an imaging apparatus.
FIG. 3 is a diagram for explaining another embodiment for carrying out the present invention.
[Explanation of symbols]
1: imaging device 2: communication control device 3: portable wireless terminal device 4: monitor device 5: general telephone line 6: video receiving device 6a: display device 7: display screen 7a: control mode button 7b: display region 7c: display region 7d: display area 7e: image quality control button 7f: confirm button 7g: complete button 8: vehicle 9: driver's seat
