JP2004194012A

JP2004194012A - Mobile information terminal device

Info

Publication number: JP2004194012A
Application number: JP2002359948A
Authority: JP
Inventors: Tomoaki Kawai; 智明河合; Takashi Oya; 崇大矢; Kazuko Suzuki; 和子鈴木; Hiroyuki Osawa; 弘幸大澤
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2002-12-11
Filing date: 2002-12-11
Publication date: 2004-07-08
Anticipated expiration: 2022-12-11
Also published as: JP4125107B2

Abstract

<P>PROBLEM TO BE SOLVED: To provide a mobile information terminal device for displaying a real time image in an effectively switching way from a controllable camera installed at a remote spot and realizing camera control. <P>SOLUTION: The terminal device includes a position detecting unit 105 for detecting an existing position, a pathway information setting controlling unit 106 for setting and controlling the pathway information, a camera selecting unit 108 for selecting one camera from a plurality cameras according to the pathway information and the existing position information, an image displaying unit 110 for displaying the image of the camera selected by the camera selecting unit 108, and an communication control unit 111 for communicating the camera image. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、カメラからの画像（映像）を表示するカーナビゲーションシステム等の移動情報端末装置に関する。
【０００２】
【従来の技術】
遠隔地に配置されたカメラの画像をネットワーク経由で複数人が観察できるシステムにおいて、単にカメラ画像を観察するだけでなく、カメラのパン・チルト角度やズーム倍率を遠隔制御可能にしたものがある。
【０００３】
例えば、インターネット上のＷＷＷサーバを通じて、同じくインターネットに接続されたＰＣ（パーソナルコンピュータ）にコンピュータ制御可能なカメラを接続し、カメラから撮影したリアルタイム画像をアクセス者に配送するだけでなく、そのカメラの制御も許すようなシステムが開発されている(特許文献１参照)。
【０００４】
このようなカメラ制御可能で複数人に映像配送ができるようなシステムにおけるカメラサーバ装置においては、不特定多数の利用者が操作・観察することを想定している。多人数が１台のカメラを制御する場合には、そのカメラの制御権が重要になるもので、その制御権を取得したものだけがカメラサーバ装置のカメラ制御を可能にするようになっており、また、一定時間経過すると制御権を開放するというものである（特許文献２参照）。
【０００５】
一方、カーナビゲーション装置等、自分(自車)の現在位置を知ることのできるシステムが開発されており、斯かるカーナビゲーション装置から遠隔地に設置されたカメラからのリアルタイム画像を切り替えて見ることができる技術がある（特許文献３参照）。
【０００６】
【特許文献１】
特開平１０−４０１８５号公報
【特許文献２】
特開平１０−４２２７８号公報
【特許文献３】
特開２００１−２１３６８号公報
【０００７】
【発明が解決しようとする課題】
一般に、カーナビゲーション装置等の移動情報端末装置からカメラサーバ装置で取得したリアルタイムカメラ画像を見る場合、自分の現在位置や、これから行く予定の目的地、途中の経路等に応じて、見たいカメラ画像は異なる。
【０００８】
しかしながら、これまでは、カメラの設置場所に関する情報を用いておらず、また、自分(自車)の位置情報をカメラ切り替え選択の情報として用いることは考慮されていなかった。また、制御可能なカメラからのリアルタイム画像を見ようとすると、制御したい地点に来たときに、カメラの制御権を獲得する必要があるが、こうしたことも考慮されていなかった。
【０００９】
本発明は、上述したような従来技術の有する問題点を解消するためになされたもので、その目的は、遠隔地に設置された制御可能なカメラからのリアルタイム画像を有効に切り替えて表示し、カメラ制御できるようにした移動情報端末装置を提供することである。
【００１０】
【課題を解決するための手段】
上記目的を達成するため、本発明の移動情報端末装置は、現在位置を検出する位置検出手段と、経路情報を設定管理する経路情報設定管理手段と、前記経路情報と現在位置情報とに応じて複数のカメラから一つのカメラを選択するカメラ選択手段と、前記カメラ選択手段により選択されたカメラによる画像を表示する画像表示手段と、前記カメラ画像を通信するための通信制御手段とを有することを特徴とする。
【００１１】
【発明の実施の形態】
以下、本発明の一実施の形態を、図面に基づき説明する。
【００１２】
本実施の形態は、現在位置に応じて遠隔地に設置された制御可能なカメラからのリアルタイム画像を有効に切り替えて表示し、カメラ制御できるようにするものである。具体的には、現在位置情報及び経路情報を用いて、適切な位置において、適切なカメラを選択できるようにするものである。また、カメラが選択された際には、そのカメラが有効に制御できるように、予めカメラ制御権を予約しておくことで、制御権が取れないという状況を減らすようにするものである。
【００１３】
図１は、本実施の形態に係る移動情報端末装置を有する撮像システムの構成を示すブロック図であり、同図において、１０１は移動情報端末装置、１０２はカメラサーバ装置、１０３はカメラ管理部であり、これらは、ネットワーク１０４を介して相互に接続されている。図１では、カメラサーバ装置１０２だけが複数台設けられているように描かれているが、移動情報端末装置１０１及びカメラサーバ装置１０２は、少なくとも１台以上がネットワーク１０４に接続されていることを想定している。
【００１４】
尚、ネットワーク１０４への接続は、移動情報端末装置１０１、カメラサーバ装置１０２共に有線、無線のいずれでも良い。また、ネットワーク１０４は、画像を流すのに十分な帯域を有するネットワークを想定している。
【００１５】
移動情報端末装置１０１は、現在位置を地図等で把握すると共に、必要に応じて必要なカメラサーバ装置１０２からの画像を表示したり、カメラ制御したりするものであり、現在位置検出部１０５、経路情報設定管理部１０６、地図情報表示部１０７、カメラ選択管理部１０８、カメラ制御Ｉ／Ｆ（インタフェース）部１０９、画像表示部１１０及び通信制御部１１１から構成されている。
【００１６】
尚、図３は、移動情報端末装置１０１の画面表示例を示す図であるが、以下に述べる各部が、これらの表示を行っている。
【００１７】
現在位置検出部１０５は、ＧＰＳ（世界的位置決定システム）やジャイロ等から構成され、自分(自車)の現在位置を把握することができるものである。現在位置検出部１０５は、現在位置が把握できれば、ＧＰＳやジャイロに限られるものではない。経路情報設定管理部１０６は、現在位置検出部１０５で取得した現在位置情報と目的地までの経路情報、地図情報及び後述するカメラの表示を設定管理するものである。通常、地図情報は、ＤＶＤ（デジタルビデオディスク）等のメディアに保持している。
【００１８】
尚、ここで用いる地図情報は、ネットワーク１０４経由で必要な部分を取得するものであっても良い。
【００１９】
地図情報表示部１０７は、経路情報設定管理部１０６からの情報を、図３のような地図情報表示形式で行う。
【００２０】
図３（ａ）のように、現在位置を周辺の地図や周辺施設情報と共に表示する。また、経路情報設定管理部１０６で目的地や途中経路を探索・設定し、目的地までの経路を地図情報表示部１０７の地図上に、図３（ａ）のように表示することができるものである。
【００２１】
従って、現在位置検出部１０５と経路情報設定管理部１０６、地図情報表示部１０７だけで、一般的なカーナビゲーション装置の基本部分を構成することが可能である。
【００２２】
尚、この部分については、本発明においては本質的な部分ではないので、その詳しい説明は省略する。
【００２３】
カメラ選択管理部１０８は、現在位置情報と経路情報とに応じて、適切なカメラサーバ装置１０２の画像を選択すると共に、後述するカメラ制御権予約・獲得処理を行う。また、図３（ｂ）のように経路情報に応じた適切なカメラサーバ装置１０２に関する情報表示を行う。カメラ制御インタフェース手段１０９は、カメラサーバ装置１０２におけるパン・チルト・ズーム等のカメラ制御を行う際に、カメラ制御を行うためのユーザインタフェースを提供するものであり、図４のように画面上にグラフィカルに操作ユーザインタフェース４０２を表示する。
【００２４】
図４は、移動情報端末装置１０１の画面表示例を示す図であり、同図において、４０１はポップアップウィンドウ、４０２は操作ユーザインタフェースであり、４０３はパン操作、４０４はチルト操作、４０５はズーム操作に対応している。
【００２５】
尚、操作方法については、上述した方法に限られるものではなく、これらは、音声を用いたユーザインタフェース等でも良い。
【００２６】
画像表示部１１０は、所定の位置にきたときに、カメラサーバ装置１０２から送られてきたリアルタイム画像或いは蓄積画像を必要に応じて(送信画像が圧縮されていればデコードして)表示するものであり、図４に示すように、必要に応じて画像をポップアップウィンドウ４０１として表示する。通信制御部１１１は、カメラサーバ装置１０２からの画像を受信したり、ネットワーク１０４経由でカメラ制御を実現したりするものである。
【００２７】
カメラサーバ装置１０２は、ネットワーク１０４経由で、１台以上の移動情報端末装置１０１に撮影したリアルタイム画像を配信したり、移動情報端末装置１０１からのカメラ制御の要求を受けて、実際にパン・チルト・ズーム等のカメラ制御を行ったりするものである。
【００２８】
図２は、カメラサーバ装置１０２の内部構成を示すブロック図であり、同図において、２０１は撮像部、２０２はカメラ制御部、２０３は制御権管理部、２０４は画像送信部、２０５は画像記憶部、２０６は通信制御部、２０７はカメラサーバ情報管理部である。
【００２９】
撮像部２０１は、リアルタイムの動画像を取り込むためのものである。カメラ制御部２０２は、雲台等により撮像部２０１の撮影方向、即ち、パン・チルト角度や画角、即ち、ズーム倍率を制御するためのものであり、これらは、ネットワーク１０４経由でカメラ制御権を有している移動情報端末装置１０１等の装置が制御できるようにするものである。
【００３０】
尚、ネットワーク経由でのカメラ制御の方法については、上述した特許文献１（特開平１０−４０１８５号公報）等で開示されているので、ここでは、その詳細説明は省略する。
【００３１】
制御権管理部２０３は、カメラのパン・チルト角度やズーム倍率が物理的に同時には一つの設定値にしか制御できないため、制御権を有している一つの移動情報端末装置１０１だけにカメラ制御を可能とするものであり、このため、カメラ制御のための制御権を管理するものである。制御権そのものについては、上述した特許文献２である特開平１０−４２２７８号公報等で開示されているので、その詳細説明は省略する。
【００３２】
但し、後述するように、本実施の形態ではカメラ制御権の予約の概念を導入している。
【００３３】
画像送信部２０４は、撮像部２０１で取り込んだリアルタイムの動画像をネットワーク１０４経由で配信できるように、必要に応じて画像圧縮して配信するものである。画像圧縮のフォーマットに関しては、例えば、ＭｏｔｉｏｎＪＰＥＧやＭＰＥＧ等があるが、これらに限られるものではない。
【００３４】
画像記憶部２０５は、後述するように、必要な画像を一定時間の画像クリップとして記憶しておき、カメラ制御権を取れなかった場合に、リアルタイム画像の代替画像として、必要に応じて配信できるようにするものである。通信制御部２０６は、撮像部２０１のリアルタイム画像や画像記憶部２０５に蓄積された蓄積画像を複数の移動情報端末装置１０１に同時に配信したり、複数の移動情報端末装置１０１からのカメラ制御要求、制御権獲得要求を処理したりするためのものである。カメラ制御は、カメラ制御権を有する一つの移動情報端末装置１０１からのみ同時には受け付けないが、画像は、複数の移動情報端末装置１０１から同時に見ることができる。
【００３５】
複数台ある移動情報端末装置１０１及びカメラサーバ装置１０２において、任意の移動情報端末装置１０１は、任意のカメラサーバ装置１０２に接続できるようになっているものとし、それぞれの装置は、互いに認識するためのアドレスを保有しているものとする。
【００３６】
カメラサーバ情報管理部２０７は、カメラサーバ装置１０２についての情報を管理するものである。
【００３７】
カメラサーバ管理部１０３は、ネットワーク１０４に接続されている複数のカメラサーバ装置１０２の情報を管理し、移動情報端末装置１０１から問い合わせがあった場合に、この管理情報を返すものであり、具体的には、図３（ｂ）に表示するための情報を提供するものである。
【００３８】
全てのカメラサーバ装置１０２について、次のような情報が管理されている。
【００３９】
尚、これら情報は、各カメラサーバ装置１０２におけるカメラサーバ情報管理部２０７が有しており、起動時或いは設置時にカメラサーバ装置１０２からカメラ管理部１０３に通知し、保持されているものである。
【００４０】
カメラサーバ装置１０２毎に次の情報(以下、カメラサーバ管理情報と記述する。)が管理される。
（１）カメラサーバ装置のアドレス(ネットワークアドレス)
（２）カメラ識別番号及びカメラサーバ装置毎に異なる番号が付与される
（３）カメラサーバの設置場所(緯度・経度情報)
（４）カメラ-サーバの設置場所に関する説明情報（Ｂ地点ＪＣＴ、Ａ地点ＳＡ等）
（５）各カメラサーバ装置に設定されているカメラプリセット情報
尚、プリセットとは、番号によりパン・チルト・ズーム制御を行うものであ
り、各プリセット毎に次の情報が管理される。また、各カメラ毎に任意のプリセットが設定できるようになっている。
▲１▼プリセット番号（１〜Ｎ、プリセット設定の数に応じて設定される。）
▲２▼プリセット番号に対応するパン・チルト・ズーム制御値
▲３▼プリセット番号に対応するパン・チルト・ズーム制御値で撮影される画像の内容説明情報
（６）カメラ画像表示開始・終了地点(現在位置が近づいたときにカメラ画像を表示開始・終了する場所)
（７）進行方向・経路・現在位置に応じたお勧めカメラプリセット番号等から成る。
【００４１】
尚、全ての情報が図３（ｂ）に表示されるわけではない。
【００４２】
また、カメラ管理部１０３は、移動情報端末装置１０１からネットワーク的に位置を認識できれば（即ち、ネットワークアドレスが分れば）、ネットワーク１０４上のどこにあっても良く、ある一つのカメラサーバ装置１０２内に同時に具備していても良い。
【００４３】
図３について、更に説明する。図３（ａ）には、現在位置情報と周辺施設を含む周辺地図情報、カメラサーバ装置１０２の位置情報が表示されている。図３（ａ）において、▲マーク３０１が現在位置であり、ＳＡやＪＣＴ等は周辺施設、Ｃ３０２は、カメラサーバ装置１０２の位置を表している。
【００４４】
一方、図３（ｂ）には、現在位置から、これから進行する予定の経路近傍にあるカメラサーバ装置１０２のリストが、上から順により近い場所にあるものから並べられている。この情報は、上述のようにカメラ管理部１０３に問い合わせることで、カメラサーバ管理情報として得られる。図３（ｂ）の欄３０３には、カメラ識別番号が、欄３０４には設置場所に関する説明情報が、欄３０５には各プリセット画像の内容説明情報が、それぞれ表示される。基本的に、このリストにあるカメラについては、制御権の予約が行われることになる。
【００４５】
図３（ｃ）は、各エントリに対する操作のポップアップメニューを示している。操作に関しては後述するが、デフォルトでは通常予約になっていて、予約について変更する場合にはメニューを用いる。
【００４６】
ここで、カメラ制御権の予約の概念について説明する。
【００４７】
本実施の形態でも、カメラサーバ装置１０２のカメラ制御権は、上述した特許文献２である特開平１０−４２２７８号公報で開示されているように、排他制御されており、制御権を獲得したクライアントがカメラを制御することが可能となる。また、既に他のクライアントが制御権を有している場合には、制御権獲得の待ち行列に並ぶことになる。
【００４８】
本実施の形態においては、一つのクライアントがカメラ制御権を有していることのできる時間を一定(τ)、待ち行列に並ぶことのできるクライアントの最大数をｎとすると、予約に関しては、最も早くてｎ×τ時間前に予約を入れられれば、必ずｎ×τ時間後には、制御権を獲得できるようになっている。
【００４９】
但し、通常の待ち行列とは異なり、予約の場合は、前に並んでいるクライアントが無い場合に、行列の先頭に並ぶのではなく、後述する方法により、一定時間後に制御権が取れるように、前に空席を残したまま行列に並ぶことになる。空席があれば、そこに制御権の予約を入れることも可能である。また、空席が制御の順番に到達したときには、早い者勝ちで制御権を取得できる。
【００５０】
即ち、この待ち行列は、下記表のようになっている(Ｎ＝７で例示)。待ち及び制御権保有時間共に、一定時間(τ)毎に区切られている。下記表において、左端が制御権を獲得したクライアント、「待ち有」が予約で並んでいるクライアント、先頭がαは、制御権を獲得してから経過した時間である。
【００５１】
【表１】

図１３に具体的な予約リストの一例を示す。この予約リストは、各カメラサーバ装置１０２が有しており、予約時刻、予約プリセット、予約クライアントアドレスのエントリから成る。
【００５２】
Ｔ１＝τ，Ｔ２＝２×τ，Ｔ３＝３×τ，…，ＴＮ＝ｎ×τである。
プリセットのエントリには予約プリセット番号が、アドレスには予約クライアント(移動情報端末装置１０１)のアドレスが登録される。
【００５３】
尚、図１３において、アドレスが空(none)のエントリは空席を表す。また、プリセットが＊マークのエントリは自由操作予約を表す。アドレスに複数登録可能であるが、これについては後述する。
【００５４】
次に、本実施の形態に係る移動情報端末装置１０１における経路情報設定処理動作について、図５を用いて説明する。
【００５５】
図５は、本実施の形態に係る移動情報端末装置１０１における経路設定処理動作の流れを示すフローチャートである。
【００５６】
経路設定処理では、目的地を設定すると経路探索を行い（ステップＳ５０１）、経路情報を取得する（ステップＳ５０２）。次に、この経路情報をベースに、カメラ管理部１０３に近傍カメラリストを問い合わせて、近傍カメラリスト情報を取得する(ステップＳ５０３)。次に、この取得した近傍カメラリストを、現在位置から目的地までの経路順に並べ替えて、図３の欄３０４のように表示する(ステップＳ５０４)。次に、必要に応じて、このカメラリストを編集し(ステップＳ５０５)、その後、本処理動作を終了する。前記ステップＳ５０５における編集処理では、エントリ毎に図３（ｃ）の操作メニューを用いて、見る必要のないカメラを削除したり、操作予約の設定をしたり、操作予約の種類を設定したりすることができる。
【００５７】
操作予約の種類としては、下記の５種類がある。
（１）自由操作予約
制御権を取得したらパン・チルト・ズームを自由自在に変更する。
（２）通常予約
予め決まったプリセット番号に対応したプリセット制御の制御権を予約する。
（３）予約不要
予約は行わないが、適当なタイミングで制御権が取得できればカメラ制御する。
（４）映像のみ
カメラ制御は行わず、カメラ映像を一定時間取得して表示する。
（５）予約削除
カメラ制御も画像表示も行わない(図３（ｂ）のカメラリストから削除)。
【００５８】
次に、本実施の形態に係る移動情報端末装置１０１における表示変更処理動作について、図６を用いて説明する。
【００５９】
図６は、本実施の形態に係る移動情報端末装置１０１における経路設定処理動作の流れを示すフローチャートである。
【００６０】
表示更新処理は、現在位置情報を元に表示近傍地図、施設情報を常に更新する処理である。
【００６１】
表示更新処理では、現在位置情報を取得し（ステップＳ６０１）、次に、現在位置に応じた処理を行い（ステップＳ６０２）、その後、前記ステップＳ６０１へ戻って、再び現在位置情報を取得する。
【００６２】
次に、本実施の形態に係る移動情報端末装置１０１における近傍カメラサーバ装置検索処理動作について、図７を用いて説明する。
【００６３】
図７は、本実施の形態に係る移動情報端末装置１０１のカメラ管理部１０３における近傍カメラサーバ装置検索処理動作の流れを示すフローチャートである。
【００６４】
近傍カメラサーバ装置の検索処理では、経路情報を取得し（ステップＳ７０１）、次に、経路の近傍カメラサーバ装置を検索する（ステップＳ７０２）。次に、近傍カメラリスト情報を応答し（ステップＳ７０３）、その後、本処理動作を終了する。
【００６５】
これにより、設定経路近傍のカメラサーバリストを得ることができる。また、移動情報端末装置１０１に設定されている経路情報を用いて、カメラ管理部１０３に問い合わせることで、カメラ管理部１０３に設定されている上述したカメラサーバ管理情報から、経路の近傍カメラリスト情報を取得することができる。
【００６６】
尚、経路(道路)の進行方向に応じて、見せたい画像が異なることもある。このため、前記ステップＳ７０３において応答する近傍カメラリスト情報は、前記ステップＳ７０１及びステップＳ７０２において、経路及びその経路上の進行方向に応じて、異なったカメラサーバ装置１０２に関する情報及びカメラプリセッ番号を求め、これを返答しても良い。これらは、予めカメラサーバ装置１０２に登録されているカメラサーバ管理情報の中に含まれている。
【００６７】
次に、本実施の形態に係る移動情報端末装置１０１の制御権予約処理動作について、図８を用いて説明する。
【００６８】
図８は、本実施の形態に係る移動情報端末装置１０１の制御権予約処理動作の流れを示すフローチャートである。
【００６９】
現在位置情報を元に、基本的に図３（ｂ）に示すカメラリストの上から順番にカメラを予約していくことになる。
【００７０】
移動情報端末装置１０１の制御権予約処理では、現在位置情報と進行方向情報を取得し(ステップＳ８０１)、図３（ｂ）のカメラリストから次の予約候補となるカメラを決定し(ステップＳ８０２)、そのカメラの画像を表示する予定の場所(地点Ｑとする)に到達する予定時刻をＴとすると、平均予想速度を加味して、時刻(Ｔ−ｎ×τ)に到達する予定の場所Ｐを計算し、その場所に到達するのを待つ(ステップＳ８０３)。
【００７１】
尚、ｎは待ち行列の最大長、τは制御権保有時間である。
【００７２】
地点Ｐに到達すると、カメラ制御権予約を行う(ステップＳ８０４)。この際、どのような予約(プリセットであるか自由制御であるか)を指定する。予約が成功すると、制御権取得予定時刻が返るので、その時刻にカメラ制御権を取得することが可能となる。
【００７３】
尚、後述するように、地点Ｑに到達する時刻と制御権取得予定時刻とは必ずしも一致しない。このため、制御権取得は位置情報ではなく、制御権取得予定時刻情報を用いる。また、予約が画像のみの場合には、制御は不要であるので、制御権予約も不要であり、地点Ｑに到達した段階で、カメラ画像を一定期間(τ)要求し、表示するようにする。
【００７４】
尚、カメラ画像を表示する予定の地点Ｑは、カメラサーバ装置１０２毎に設定してあり、例えば、カメラサーバ装置１０２と移動情報端末装置１０１との間の距離がある一定距離になる点として設定するか、或いは経路や道路毎に異なる地点を、見せたい地点として保持していても良い。また、カメラサーバ装置１０２毎に設定されているカメラプリセット情報に関しては、経路や道路毎の進行方向に応じて、必ずしも同じでない異なったプリセット番号を返すように、経路または道路情報と進行方向及びプリセット番号を関連付けて、カメラサーバ装置１０２に設定・記憶しておけば良い。
【００７５】
前記ステップＳ８０４の処理を終了後は、前記ステップＳ８０１へ戻り、再び現在位置情報と進行方向情報を獲得する。
【００７６】
次に、本実施の形態に係る移動情報端末装置１０１の制御権取得・表示処理動作について、図９を用いて説明する。
【００７７】
図９は、本実施の形態に係る移動情報端末装置１０１の制御権取得・表示処理動作の流れを示すフローチャートである。
【００７８】
制御権取得・表示処理では、制御権取得予定時刻(地点Ｑに到着時刻と略同じ)Ｔになるのを待ち（ステップＳ９０１）、制御権取得予定時刻Ｔになると、予め予約しておいたカメラサーバ装置１０２に制御権要求を行い、制御権を待つ（ステップＳ９０２）。通常ならば制御権が取得できるので（ステップＳ９０３）、予約内容に応じたカメラ制御及び画像表示を行う（ステップＳ９０４）。次に、τ時間経過後に制御権を開放し（ステップＳ９０５）、その後、前記ステップＳ９０１へ戻り、再び制御権取得予定時刻Ｔになるのを待つ。
【００７９】
次に、本実施の形態に係る移動情報端末装置１０１におけるカメラサーバ装置の制御権予約処理動作について、図１０を用いて説明する。
【００８０】
図１０は、本実施の形態に係る移動情報端末装置１０１におけるカメラサーバ装置の制御権予約処理動作の流れを示すフローチャートである。
【００８１】
カメラサーバ装置の制御権予約処理では、図１３に示すカメラサーバ装置１０２の予約リストにおいて、予約時刻のエントリが空き(ｎｏｎｅ)であるか否か判断し（ステップＳ１００１）、空きであれば、そのまま予約リストにプリセット番号とアドレスを登録し(ステップＳ１００２)、予約時刻を応答し(ステップＳ１００３)、その後、本処理動作を終了する。
【００８２】
一方、予約リストが空いていない場合には、プリセット予約であるか否かを判断し(ステップＳ１００４)、プリセット予約であれば、予約時刻の近傍時刻のエントリで同じプリセットを検索する(ステップＳ１００５)。そして、同じプリセットが検索された場合は(ステップＳ１００６)、予約リストのアドレスの欄にアドレスを追加登録し(ステップＳ１００３)、その時刻を予約時刻として応答し（ステップＳ１００３）、その後、本処理動作を終了する。
【００８３】
また、プリセット予約でない場合、及び近傍時刻に同一プリセット番号の予約が検索されない場合は、次に近傍時刻における空きエントリを検索する(ステップＳ１００７)。そして、空きエントリが検索された場合は(ステップＳ１００８)、そこにエントリを登録し(ステップＳ１００３)、その時刻を予約時刻として応答し（ステップＳ１００３）、その後、本処理動作を終了する。また、それ以外は、予約が行えなかったということで、予約ＮＧを応答し（ステップＳ１００９）、その後、本処理動作を終了する。
【００８４】
前記予約ＮＧが返ってきた場合でも、制御権待ちリストからキャンセルされて空きが出る可能性があるので、移動情報端末装置１０１は、最初の予定時刻Ｔにカメラ制御権要求を出すことで、制御権取得を目指すことになる。
【００８５】
次に、本実施の形態に係る移動情報端末装置１０１の制御権取得・表示処理動作について、図１１及び図１２を用いて説明する。
【００８６】
図１１及び図１２は、本実施の形態に係る移動情報端末装置１０１の制御権取得・表示処理動作の流れを示すフローチャートである。
【００８７】
「プリセット予約」或いは「自由制御予約」、「予約不要」の場合に、予約がＮＧであるか否かに拘らず、この図１１及び図１２に示すフローになる。
【００８８】
要求には、移動情報端末装置１０１のアドレスと予約種別、プリセット番号がパラメータとして含まれる。
【００８９】
図１１において、要求があると、まず、要求元である移動情報端末装置１０１のアドレスと予約種別を調べ(ステップＳ１１０１)、予約リストを確認する(ステップＳ１１０２)。プリセット予約であって、プリセット番号が一致していれば(ステップＳ１１０３)、他の移動情報端末装置１０１が既にプリセット予約をしていると解釈する。そして、一定時刻(τ)の間、同じプリセットが持続されると判断して、要求のあったアドレスに対して画像送信を開始し(ステップＳ１１０４)、一定時刻(τ)が経過する迄画像送信を続ける。
【００９０】
一方、プリセット番号が一致しない場合、及びプリセット予約でない場合には(ステップＳ１１０３)、制御権を取得して(ステップＳ１１０６)、カメラ画像の送信を開始する(ステップＳ１１０７)。このとき、プリセット予約であれば(ステップＳ１１０８)、プリセット制御を行い(ステップＳ１１０９)、一定時刻(τ)が経過する迄画像を送信する。また、プリセット予約でなく、自由制御予約の場合には、図４の制御インタフェース４０２等を用いて、自由にカメラ制御要求を出すことで、カメラ制御を行う(ステップＳ１１１２)。
【００９１】
前記ステップＳ１１０６において、制御権が取得できない場合は、カメラ制御は行えない。この場合は、予め蓄積してある至近のカメラ画像を送信することで代用する。従って、ステップＳ１１０４やステップＳ１１０７では、必ず、プリセットに関連付けて、図１４に示すような形式で画像を、クリップの形でファイルに蓄積している。
【００９２】
即ち、図１２において、プリセット予約であるか否かを判断し(ステップＳ１１１３)、プリセット制御が行われている場合には、常にプリセットを関連付けて、最新の画像に更新しておく。そして、プリセット予約であった場合には(ステップＳ１１１４)、そのプリセットに対応する最新の代用画像クリップを、図１４に示す表から探して再生し、その再生画像（代用記憶画像）を送信する(ステップＳ１１１５)。
【００９３】
また、プリセット予約でない場合、即ち、自由制御の場合にはプリセットリストを確認し(ステップＳ１１１７)、図１４の表に含まれる画像ファイル（適宜切り替えながら（代用記憶画像を切り替えながら）送信することで代用する(ステップＳ１１１８)。
【００９４】
前記ステップＳ１１１５及びステップＳ１１１８を終了後は、いずれもファイル終了及び画像送信を終了し(ステップＳ１１１６)、その後、本処理動作を終了する。
【００９５】
尚、カメラサーバ装置１０２において、画像或いはカメラ制御権は、移動情報端末装置１０１以外の通常のビューワクライアントからもアクセスされる可能性があり、この場合、通常の制御権待ち行列の処理となる。また、画像送信については、送信要求があってから一定時間、画像を送信することになる。また、移動情報端末装置１０１から画像のみを予約する場合は、単に画像を一定時間要求するだけである。この場合は、ビューワクライアント或いは移動情報端末装置１０１毎に、図１５に示すフローで画像送信することになる。
【００９６】
即ち、図１５は、本実施の形態に係るカメラサーバ装置１０２の画像送信処理動作の流れを示すフローチャートである。
【００９７】
カメラサーバ装置１０２の画像送信処理では、カメラ画像の送信を開始し（ステップＳ１５０１）、次に、一定時間が経過すると画像送信を終了し（ステップＳ１５０２）、その後、本処理動作を終了する。
【００９８】
また、上述した実施の形態の機能を実現するソフトウェアのプログラムコードを記憶した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）が記憶媒体に格納されたプログラムコードを読み出して実行することによっても、本発明が達成されることは言うまでもない。
【００９９】
この場合、記憶媒体から読み出されたプログラムコード自体が上述した実施の形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。
【０１００】
また、プログラムコードを供給するための記憶媒体としては、例えば、ＲＡＭ、ＮＶ−ＲＡＭ、フロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ（ＤＶＤ−ＲＯＭ、ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ等）、磁気テープ、不揮発性のメモリカード、他のＲＯＭ等の上記プログラムコードを記憶できるものであれば良く、或いはネットワークを介したダウンロード等を用いることができる。
【０１０１】
また、コンピュータが読み出したプログラムコードを実行することにより、上述した実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって上述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
【０１０２】
更に、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって上述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
【０１０３】
以上では、本発明の様々な例と実施形態を説明したが、当業者であれば、本発明の趣旨と範囲は本明細書内の特定の説明と図に限定されるものではなく、本願特許請求の範囲に全て述べられた様々な修正と変更に及ぶことが可能であることは言うまでもない。
【０１０４】
本発明の実施態様の例を以下に列挙する。
【０１０５】
［実施態様１］現在位置を検出する位置検出手段と、
経路情報を設定管理する経路情報設定管理手段と、
前記経路情報と現在位置情報とに応じて複数のカメラから一つのカメラを選択するカメラ選択手段と、
前記カメラ選択手段により選択されたカメラによる画像を表示する画像表示手段と、
前記カメラ画像を通信するための通信制御手段と
を有することを特徴とする移動情報端末装置。
【０１０６】
［実施態様２］前記カメラ選択手段は、進行方向を考慮する機能を有することを特徴とする実施態様１に記載の移動情報端末装置。
【０１０７】
［実施態様３］前記カメラ選択手段により選択されたカメラを制御するためのカメラ制御インタフェース手段を有することを特徴とする実施態様２に記載の移動情報端末装置。
【０１０８】
［実施態様４］前記カメラ制御インタフェース手段は、進行方向に応じて異なるプリセット制御を行うことを特徴とする実施態様３に記載の移動情報端末装置。
【０１０９】
［実施態様５］前記経路情報と現在位置情報とに応じて、前記カメラの制御権を予約する制御権予約手段を有することを特徴とする実施態様４に記載の移動情報端末装置。
【０１１０】
［実施態様６］前記制御権予約手段は、複数の予約方法を用いて予約することが可能であることを特徴とする実施態様５に記載の移動情報端末装置。
【０１１１】
［実施態様７］前記制御権予約手段には、プリセット予約及び自由制御予約が含まれることを特徴とする実施態様６に記載の移動情報端末装置。
【０１１２】
［実施態様８］前記カメラ選択手段は、カメラサーバ装置により指定された地点に到達した場合にカメラの選択が行われることを特徴とする実施態様１乃至７のいずれかに記載の移動情報端末装置。
【０１１３】
［実施態様９］所定の位置に到達した場合に、前記カメラの制御権獲得要求を行うことを特徴とする実施態様２乃至８のいずれかに記載の移動情報端末装置。
【０１１４】
［実施態様１０］画像を取り込む撮像手段と、
前記撮像手段により取り込まれた画像を送信する送信手段と、
前記画像を移動情報端末に送信したり該移動情報端末からの各種要求を処理するための通信制御手段と、
カメラサーバ情報を管理するカメラサーバ情報管理手段と
を有することを特徴とするカメラサーバ装置。
【０１１５】
［実施態様１１］前記カメラサーバ情報管理手段は、カメラ画像表示開始・終了場所を示す情報を管理することを特徴とする実施態様１０に記載のカメラサーバ装置。
【０１１６】
［実施態様１２］前記撮像手段の撮影方向を制御するカメラ制御手段を有することを特徴とする実施態様１０または１１に記載のカメラサーバ装置。
【０１１７】
［実施態様１３］前記カメラサーバ情報管理手段は、進行方向・経路・現在位置等に応じたお勧めカメラプリセット番号を管理することを特徴とする実施態様１２に記載のカメラサーバ装置。
【０１１８】
［実施態様１４］カメラ制御権を管理するためのカメラ制御権管理手段を設けることにより、カメラ制御権の予約を可能にしたことを特徴とする実施態様１２または１３に記載のカメラサーバ装置。
【０１１９】
［実施態様１５］前記カメラ制御権の予約には、プリセット予約と自由制御予約とを含むことを特徴とする実施態様１４に記載のカメラサーバ装置。
【０１２０】
［実施態様１６］同時刻の同一のプリセット予約であった場合には、同じ予約であると見なすことを特徴とする実施態様１５に記載のカメラサーバ装置。
【０１２１】
［実施態様１７］時間の近い同一のプリセット予約であった場合には、同じ予約であると見なすことを特徴とする実施態様１５に記載のカメラサーバ装置。
【０１２２】
［実施態様１８］前記カメラ制御権が獲得できなかった場合に、直前の蓄積映像を送ることを特徴とする実施態様１４乃至１７のいずれかに記載のカメラサーバ装置。
【０１２３】
［実施態様１９］前記カメラ制御権が獲得できなかった場合に、プリセット制御であれば、プリセットに対応する直前の蓄積画像を送ることを特徴とする実施態様１８に記載のカメラサーバ装置。
【０１２４】
［実施態様２０］前記カメラ制御は、パン・チルト・ズームであることを特徴とする実施態様１４乃至１９のいずれかに記載のカメラサーバ装置。
【０１２５】
［実施態様２１］少なくとも一つ以上の請求項1乃至９に記載の移動情報端末装置と、少なくとも一つ以上の実施態様１０乃至２０に記載のカメラサーバ装置とから成る事を特徴とする撮像システム。
【０１２６】
［実施態様２２］前記カメラサーバ装置を管理するカメラサーバ管理手段を有することを特徴とする実施態様２１に記載の撮像システム。
【０１２７】
［実施態様２３］前記カメラサーバ管理手段は、前記カメラサーバ装置の設置場所、カメラ画像表示場所及び進行方向に応じた推奨プリセット情報等を管理することを特徴とする実施態様２２に記載の撮像システム。
【０１２８】
［実施態様２４］現在位置を検出する位置検出工程と、
経路情報を設定管理する経路情報設定管理工程と、
前記経路情報と現在位置情報とに応じて複数のカメラから一つのカメラを選択するカメラ選択工程と、
前記カメラ選択工程により選択されたカメラによる画像を表示する画像表示工程と、
前記カメラ画像を通信するための通信制御工程と
を有することを特徴とする移動情報通信方法。
【０１２９】
［実施態様２５］前記カメラ選択工程は、進行方向を考慮する機能を有することを特徴とする実施態様２４の記載の移動情報通信方法。
【０１３０】
［実施態様２６］前記カメラ選択工程により選択されたカメラを制御するためのカメラ制御インタフェース工程を有することを特徴とする実施態様２５に記載の移動情報通信方法。
【０１３１】
［実施態様２７］前記カメラ制御インタフェース工程は、進行方向に応じて異なるプリセット制御を行うことを特徴とする実施態様２６に記載の移動情報通信方法。
【０１３２】
［実施態様２８］前記経路情報と現在位置情報とに応じて、前記カメラの制御権を予約する制御権予約工程を有することを特徴とする実施態様２７に記載の移動情報通信方法。
【０１３３】
［実施態様２９］前記制御権予約工程は、複数の予約方法を用いて予約することが可能であることを特徴とする実施態様２８に記載の移動情報通信方法。
【０１３４】
［実施態様３０］前記制御権予約工程には、プリセット予約及び自由制御予約が含まれることを特徴とする実施態様２９に記載の移動情報通信方法。
【０１３５】
［実施態様３１］前記カメラ選択工程は、カメラサーバ装置により指定された地点に到達した場合にカメラの選択が行われることを特徴とする実施態様２４乃至３０のいずれかに記載の移動情報通信方法。
【０１３６】
［実施態様３２］所定の位置に到達した場合に、前記カメラの制御権獲得要求を行うことを特徴とする実施態様２３乃至３１のいずれかに記載の移動情報通信方法。
【０１３７】
［実施態様３３］画像を取り込む撮像工程と、
前記撮像工程により取り込まれた画像を送信する送信工程と、
前記画像を移動情報端末に送信したり該移動情報端末からの各種要求を処理するための通信制御工程と、
カメラサーバ情報を管理するカメラサーバ情報管理工程と
を有することを特徴とするカメラサーバ方法。
【０１３８】
［実施態様３４］前記カメラサーバ情報管理工程は、カメラ画像表示開始・終了場所を示す情報を管理することを特徴とする実施態様３３に記載のカメラサーバ方法。
【０１３９】
［実施態様３５］前記撮像工程の撮影方向を制御するカメラ制御工程を有することを特徴とする実施態様３３または３４に記載のカメラサーバ方法。
【０１４０】
［実施態様３６］前記カメラサーバ情報管理工程は、進行方向・経路・現在位置等に応じたお勧めカメラプリセット番号を管理することを特徴とする実施態様３５に記載のカメラサーバ方法。
【０１４１】
［実施態様３７］カメラ制御権を管理するためのカメラ制御権管理工程を設けることにより、カメラ制御権の予約を可能にしたことを特徴とする実施態様３５または３６に記載のカメラサーバ方法。
【０１４２】
［実施態様３８］前記カメラ制御権の予約には、プリセット予約と自由制御予約とを含むことを特徴とする実施態様３７に記載のカメラサーバ方法。
【０１４３】
［実施態様３９］同時刻の同一のプリセット予約であった場合には、同じ予約であると見なすことを特徴とする実施態様３８に記載のカメラサーバ方法。
【０１４４】
［実施態様４０］時間の近い同一のプリセット予約であった場合には、同じ予約であると見なすことを特徴とする実施態様３８に記載のカメラサーバ方法。
【０１４５】
［実施態様４１］前記カメラ制御権が獲得できなかった場合に、直前の蓄積映像を送ることを特徴とする実施態様３７乃至４０のいずれかに記載のカメラサーバ方法。
【０１４６】
［実施態様４２］前記カメラ制御権が獲得できなかった場合に、プリセット制御であれば、プリセットに対応する直前蓄積映像を送ることを特徴とする実施態様４１に記載のカメラサーバ方法。
【０１４７】
［実施態様４３］前記カメラ制御は、パン・チルト・ズームであることを特徴とする実施態様３７乃至４２のいずれかに記載のカメラサーバ方法。
【０１４８】
［実施態様４４］少なくとも一つ以上の実施態様２４乃至３２に記載の移動情報通信方法と、少なくとも一つ以上の実施態様３３乃至４３に記載のカメラサーバ方法とから成る事を特徴とする撮像方法。
【０１４９】
［実施態様４５］前記カメラサーバ方法を管理するカメラサーバ管理工程を有することを特徴とする実施態様４４に記載の撮像方法。
【０１５０】
［実施態様４６］前記カメラサーバ管理工程は、前記カメラサーバ方法の実行場所、カメラ画像表示場所及び進行方向に応じた推奨プリセット情報等を管理することを特徴とする実施態様４５に記載の撮像方法。
【０１５１】
［実施態様４７］移動情報端末装置を制御するためのコンピュータ読み取り可能な制御プログラムであって、
現在位置を検出する位置検出工程と、経路情報を設定管理する経路情報設定管理工程と、前記経路情報と現在位置情報とに応じて複数のカメラから一つのカメラを選択するカメラ選択工程と、前記カメラ選択工程により選択されたカメラによる画像を表示する画像表示工程と、前記カメラ画像を通信するための通信制御工程とをコンピュータに実行させるためのプログラムコードから成ることを特徴とする移動情報端末装置の制御プログラム。
【０１５２】
［実施態様４８］カメラサーバ装置を制御するためのコンピュータ読み取り可能な制御プログラムであって、
画像を取り込む撮像工程と、前記撮像工程により取り込まれた画像を送信する送信工程と、前記画像を移動情報端末に送信したり該移動情報端末からの各種要求を処理するための通信制御工程と、カメラサーバ情報を管理するカメラサーバ情報管理工程とをコンピュータに実行させるためのプログラムコードから成ることを特徴とするカメラサーバ装置の制御プログラム。
【０１５３】
［実施態様４９］実施態様４８及び４９に記載の制御プログラムを格納したことを特徴とする記憶媒体。
【０１５４】
【発明の効果】
以上のように、本発明によれば、遠隔地に設置された制御可能なカメラからのリアルタイム画像を有効に切り替えて表示し、カメラ制御できるという効果を奏する。
【図面の簡単な説明】
【図１】本発明の一実施の形態に係る移動情報端末装置を有する撮像システムの構成を示すブロック図である。
【図２】本発明の一実施の形態に係る移動情報端末装置を有する撮像システムにおけるカメラサーバ装置の構成を示すブロック図である。
【図３】本発明の一実施の形態に係る移動情報端末装置の画面表示例を示す図である。
【図４】本発明の一実施の形態に係る移動情報端末装置の画面表示例を示す図である。
【図５】本発明の一実施の形態に係る移動情報端末装置の経路設定処理動作の流れを示すフローチャートである。
【図６】本発明の一実施の形態に係る移動情報端末装置の表示更新処理動作の流れを示すフローチャートである。
【図７】本発明の一実施の形態に係る移動情報端末装置を有する撮像システムにおけるカメラサーバ装置検索処理動作の流れを示すフローチャートである。
【図８】本発明の一実施の形態に係る移動情報端末装置の予約処理動作の流れを示すフローチャートである。
【図９】本発明の一実施の形態に係る移動情報端末装置の制御権取得・表示処理動作の流れを示すフローチャートである。
【図１０】本発明の一実施の形態に係る移動情報端末装置を有する撮像システムにおけるカメラサーバ装置の制御権予約処理動作の流れを示すフローチャートである。
【図１１】本発明の一実施の形態に係る移動情報端末装置を有する撮像システムにおけるカメラサーバ装置の制御権取得・表示処理動作の流れを示すフローチャートである。
【図１２】本発明の一実施の形態に係る移動情報端末装置を有する撮像システムにおけるカメラサーバ装置の制御権取得・表示処理動作の流れを示すフローチャートである。
【図１３】本発明の一実施の形態に係る移動情報端末装置を有する撮像システムにおけるカメラサーバ装置の予約リストの一例を示す図である。
【図１４】本発明の一実施の形態に係る移動情報端末装置を有する撮像システムにおけるカメラサーバ装置のプリセット蓄積画像リストの一例を示す図である。
【図１５】本発明の一実施の形態に係る移動情報端末装置を有する撮像システムにおけるカメラサーバ装置の画像送信処理動作の流れを示すフローチャートである。
【符号の説明】
１０１移動情報端末装置
１０２カメラサーバ装置
１０３カメラ管理部
１０４ネットワーク
１０５現在位置検出部
１０６経路情報設定管理部
１０７地図情報表示部
１０８カメラ選択管理部
１０９カメラ制御Ｉ／Ｆ（インタフェース）部
１１０画像表示部
１１１通信制御部
３０１ ▲マーク
３０２Ｃ
３０３欄
３０４欄
３０５欄
４０１ポップアップウィンドウ
４０２操作ユーザインタフェース
４０３パン操作
４０４チルト操作
４０５ズーム操作[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a mobile information terminal device such as a car navigation system that displays an image (video) from a camera.
[0002]
[Prior art]
2. Description of the Related Art In a system in which a plurality of persons can observe an image of a camera located at a remote place via a network, not only a camera image is simply observed, but also a pan / tilt angle and a zoom magnification of the camera can be remotely controlled.
[0003]
For example, a computer controllable camera is connected to a PC (personal computer) also connected to the Internet through a WWW server on the Internet, and not only is a real-time image taken from the camera delivered to an accessor, but also control of the camera. (See Patent Document 1).
[0004]
In a camera server device in such a system that can control a camera and can deliver video to a plurality of persons, it is assumed that an unspecified number of users operate and observe. When many people control one camera, the control right of the camera becomes important, and only the one who has obtained the control right can control the camera of the camera server device. Further, the control right is released after a lapse of a predetermined time (see Patent Document 2).
[0005]
On the other hand, a system that can know the current position of one's own (own vehicle) such as a car navigation device has been developed, and it is possible to switch and view a real-time image from a camera installed at a remote place from such a car navigation device. There is a technology that can be used (see Patent Document 3).
[0006]
[Patent Document 1]
JP-A-10-40185
[Patent Document 2]
JP-A-10-42278
[Patent Document 3]
JP 2001-21368 A
[0007]
[Problems to be solved by the invention]
Generally, when viewing a real-time camera image acquired by a camera server device from a mobile information terminal device such as a car navigation device, the camera image desired to be viewed depends on the current position of the user, a destination to be visited, a route along the way, and the like. Is different.
[0008]
However, hitherto, information on the installation location of the camera has not been used, and no consideration has been given to using the position information of the own vehicle (own vehicle) as information for selecting camera switching. In addition, in order to view a real-time image from a controllable camera, it is necessary to acquire the control right of the camera when the user wants to control the camera. However, this has not been considered.
[0009]
The present invention has been made to solve the problems of the prior art as described above, and its purpose is to effectively switch and display real-time images from a controllable camera installed at a remote location, An object of the present invention is to provide a mobile information terminal device capable of controlling a camera.
[0010]
[Means for Solving the Problems]
In order to achieve the above object, a mobile information terminal device according to the present invention comprises: a position detecting unit that detects a current position; a route information setting managing unit that sets and manages route information; Camera selection means for selecting one camera from a plurality of cameras, image display means for displaying an image by the camera selected by the camera selection means, and communication control means for communicating the camera images Features.
[0011]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, an embodiment of the present invention will be described with reference to the drawings.
[0012]
In the present embodiment, a real-time image from a controllable camera installed in a remote place is effectively switched and displayed according to the current position so that the camera can be controlled. More specifically, it is possible to select an appropriate camera at an appropriate position using the current position information and the route information. Further, when a camera is selected, a camera control right is reserved in advance so that the camera can be effectively controlled, so that the situation where the control right cannot be obtained is reduced.
[0013]
FIG. 1 is a block diagram showing a configuration of an imaging system having a mobile information terminal device according to the present embodiment. In FIG. 1, reference numeral 101 denotes a mobile information terminal device, 102 denotes a camera server device, and 103 denotes a camera management unit. Yes, they are interconnected via a network 104. Although FIG. 1 illustrates that only a plurality of camera server devices 102 are provided, at least one of the mobile information terminal device 101 and the camera server device 102 is connected to the network 104. I assume.
[0014]
The connection to the network 104 may be wired or wireless for both the mobile information terminal device 101 and the camera server device 102. In addition, the network 104 is assumed to be a network having a band sufficient for transmitting an image.
[0015]
The mobile information terminal device 101 grasps the current position on a map or the like, displays an image from the camera server device 102 as necessary, or controls the camera as needed. It includes a route information setting management unit 106, a map information display unit 107, a camera selection management unit 108, a camera control I / F (interface) unit 109, an image display unit 110, and a communication control unit 111.
[0016]
FIG. 3 is a diagram showing an example of a screen display of the mobile information terminal device 101, and each unit described below performs these displays.
[0017]
The current position detection unit 105 includes a GPS (Global Positioning System), a gyro, and the like, and can grasp the current position of the vehicle (own vehicle). The current position detection unit 105 is not limited to the GPS and the gyro as long as the current position can be grasped. The route information setting management unit 106 sets and manages the current position information acquired by the current position detection unit 105, the route information to the destination, the map information, and the display of a camera described later. Usually, the map information is stored in a medium such as a DVD (digital video disc).
[0018]
It should be noted that the map information used here may be information for acquiring a necessary portion via the network 104.
[0019]
The map information display unit 107 performs the information from the route information setting management unit 106 in a map information display format as shown in FIG.
[0020]
As shown in FIG. 3A, the current position is displayed together with a map of the surrounding area and information on the surrounding facilities. Also, the route information setting management unit 106 searches for and sets a destination or a route on the way, and the route to the destination can be displayed on the map of the map information display unit 107 as shown in FIG. It is.
[0021]
Therefore, the basic part of a general car navigation device can be constituted only by the current position detection unit 105, the route information setting management unit 106, and the map information display unit 107.
[0022]
Since this part is not an essential part in the present invention, a detailed description thereof will be omitted.
[0023]
The camera selection management unit 108 selects an appropriate image of the camera server device 102 according to the current position information and the route information, and performs a camera control right reservation / acquisition process described later. In addition, as shown in FIG. 3B, information about the appropriate camera server device 102 is displayed according to the route information. The camera control interface means 109 provides a user interface for performing camera control when performing camera control such as pan / tilt / zoom in the camera server device 102, and graphically displays on a screen as shown in FIG. The operation user interface 402 is displayed.
[0024]
FIG. 4 is a diagram showing a screen display example of the mobile information terminal apparatus 101. In FIG. 4, reference numeral 401 denotes a pop-up window, 402 denotes an operation user interface, 403 denotes a pan operation, 404 denotes a tilt operation, and 405 denotes a zoom operation. It corresponds to.
[0025]
Note that the operation method is not limited to the above-described method, and these may be a user interface using voice or the like.
[0026]
The image display unit 110 displays a real-time image or a stored image sent from the camera server device 102 as needed (decoding if the transmission image is compressed) when it reaches a predetermined position. Yes, as shown in FIG. 4, an image is displayed as a pop-up window 401 as necessary. The communication control unit 111 receives an image from the camera server device 102 and implements camera control via the network 104.
[0027]
The camera server device 102 distributes the photographed real-time image to one or more mobile information terminal devices 101 via the network 104, or receives a camera control request from the mobile information terminal device 101 and actually performs pan / tilt. -It performs camera control such as zooming.
[0028]
FIG. 2 is a block diagram showing the internal configuration of the camera server device 102. In FIG. 2, reference numeral 201 denotes an imaging unit, 202 denotes a camera control unit, 203 denotes a control right management unit, 204 denotes an image transmission unit, and 205 denotes an image storage. Unit, 206 is a communication control unit, and 207 is a camera server information management unit.
[0029]
The imaging unit 201 is for capturing a real-time moving image. The camera control unit 202 controls the shooting direction of the imaging unit 201 using a camera platform or the like, that is, the pan / tilt angle and the angle of view, that is, the zoom magnification. This enables a device such as the mobile information terminal device 101 having a control function to be controlled.
[0030]
The method of controlling the camera via the network is disclosed in the above-mentioned Patent Document 1 (Japanese Patent Application Laid-Open No. 10-40185) and the like, and the detailed description is omitted here.
[0031]
Since the control right management unit 203 can control the pan / tilt angle and the zoom magnification of the camera to only one set value at the same time physically, the camera control is performed only by one mobile information terminal device 101 having the control right. Therefore, the control right for camera control is managed. Since the control right itself is disclosed in Japanese Patent Application Laid-Open No. H10-42278, which is the above-mentioned Patent Document 2, detailed description thereof will be omitted.
[0032]
However, as described later, the present embodiment introduces the concept of camera control right reservation.
[0033]
The image transmission unit 204 compresses and distributes a real-time moving image captured by the imaging unit 201 as necessary so that the moving image can be distributed via the network 104. The image compression format includes, for example, Motion JPEG and MPEG, but is not limited to these.
[0034]
As will be described later, the image storage unit 205 stores necessary images as image clips for a predetermined period of time, and can distribute the images as necessary as substitute images for real-time images when camera control authority cannot be obtained. It is to be. The communication control unit 206 distributes the real-time image of the imaging unit 201 and the stored image stored in the image storage unit 205 simultaneously to a plurality of mobile information terminal devices 101, a camera control request from the plurality of mobile information terminal devices 101, This is for processing a control right acquisition request. Although camera control is not simultaneously received from only one mobile information terminal device 101 having camera control authority, an image can be viewed from a plurality of mobile information terminal devices 101 at the same time.
[0035]
In a plurality of mobile information terminal devices 101 and camera server devices 102, it is assumed that any mobile information terminal device 101 can be connected to any camera server device 102, and each device recognizes each other. It is assumed that you have the address of
[0036]
The camera server information management unit 207 manages information about the camera server device 102.
[0037]
The camera server management unit 103 manages information on a plurality of camera server devices 102 connected to the network 104, and returns this management information when inquired from the mobile information terminal device 101. Provides information to be displayed in FIG. 3 (b).
[0038]
The following information is managed for all camera server devices 102.
[0039]
Note that these pieces of information are included in the camera server information management unit 207 of each camera server device 102, and are notified from the camera server device 102 to the camera management unit 103 at the time of startup or installation, and are held.
[0040]
The following information (hereinafter referred to as camera server management information) is managed for each camera server device 102.
(1) Camera server device address (network address)
(2) Different numbers are assigned to camera identification numbers and camera server devices
(3) Camera server installation location (latitude / longitude information)
(4) Descriptive information about the installation location of the camera-server (JCT at point B, SA at point A, etc.)
(5) Camera preset information set in each camera server device
Note that the preset performs pan / tilt / zoom control by number.
The following information is managed for each preset. Also, an arbitrary preset can be set for each camera.
(1) Preset number (1 to N, set according to the number of preset settings)
(2) Pan / tilt / zoom control values corresponding to preset numbers
{Circle around (3)} Information describing the content of the image captured with the pan / tilt / zoom control values corresponding to the preset numbers
(6) Camera image display start / end point (where camera image display starts / ends when the current position approaches)
(7) It consists of a recommended camera preset number according to the traveling direction, the route, and the current position.
[0041]
Note that not all information is displayed in FIG.
[0042]
Further, the camera management unit 103 can be located anywhere on the network 104 as long as the position can be recognized from the mobile information terminal device 101 over the network (that is, if the network address is known). May be provided at the same time.
[0043]
FIG. 3 will be further described. FIG. 3A shows the current position information, the surrounding map information including the surrounding facilities, and the position information of the camera server device 102. In FIG. 3A, the mark 301 indicates the current position, SA and JCT indicate peripheral facilities, and C302 indicates the position of the camera server device 102.
[0044]
On the other hand, in FIG. 3B, a list of the camera server devices 102 near the route to be advanced from the current position is arranged in order from a position closer to the top. This information is obtained as camera server management information by querying the camera management unit 103 as described above. In FIG. 3B, a column 303 displays a camera identification number, a column 304 displays descriptive information on an installation location, and a column 305 displays descriptive information on each preset image. Basically, control rights are reserved for the cameras on this list.
[0045]
FIG. 3C shows a pop-up menu of an operation for each entry. Although the operation will be described later, the default is a normal reservation, and a menu is used to change the reservation.
[0046]
Here, the concept of camera control right reservation will be described.
[0047]
Also in the present embodiment, the camera control right of the camera server device 102 is exclusively controlled as disclosed in JP-A-10-42278, which is the above-mentioned Patent Document 2, and the client that has obtained the control right Can control the camera. If another client already has the control right, the client is queued to obtain the control right.
[0048]
In the present embodiment, assuming that the time during which one client can have the camera control right is constant (τ) and the maximum number of clients that can be queued is n, If a reservation can be made as early as n × τ hours, the control right can always be obtained after n × τ hours.
[0049]
However, unlike a normal queue, in the case of a reservation, if there is no client arranged in front, instead of arranging at the head of the queue, the control right can be obtained after a certain time by a method described later, They will line up in a queue with empty seats left in front. If there is a vacant seat, it is possible to reserve a control right there. Further, when the vacant seats reach the control order, the control right can be acquired on a first-come, first-served basis.
[0050]
That is, this queue is as shown in the following table (N = 7 is exemplified). Both the waiting time and the control right holding time are separated by a certain time (τ). In the table below, the left end is the client that has acquired the control right, the “waiting” is the client whose reservation is lined up, and the first α is the time elapsed since the acquisition of the control right.
[0051]
[Table 1]

FIG. 13 shows an example of a specific reservation list. This reservation list is included in each camera server device 102, and includes entries of a reservation time, a reservation preset, and a reservation client address.
[0052]
T1 = τ, T2 = 2 × τ, T3 = 3 × τ,... TN = n × τ.
A preset entry number is registered in a preset entry, and an address of a reservation client (mobile information terminal device 101) is registered in an address.
[0053]
In FIG. 13, an entry whose address is empty (none) indicates an empty seat. Further, an entry with a preset * mark indicates a free operation reservation. A plurality of addresses can be registered, which will be described later.
[0054]
Next, the operation of the route information setting process in mobile information terminal device 101 according to the present embodiment will be described using FIG.
[0055]
FIG. 5 is a flowchart showing a flow of the route setting processing operation in mobile information terminal apparatus 101 according to the present embodiment.
[0056]
In the route setting process, when a destination is set, a route search is performed (step S501), and route information is obtained (step S502). Next, based on the route information, the camera management unit 103 is inquired about a nearby camera list, and the nearby camera list information is acquired (step S503). Next, the acquired nearby camera list is rearranged in the order of the route from the current position to the destination, and displayed as a column 304 in FIG. 3 (step S504). Next, if necessary, the camera list is edited (step S505), and thereafter, the processing operation ends. In the editing processing in step S505, the camera that does not need to be viewed is deleted, operation reservation is set, and the type of operation reservation is set using the operation menu of FIG. 3C for each entry. be able to.
[0057]
There are the following five types of operation reservations.
(1) Free operation reservation
Once you have control, you can freely change pan, tilt and zoom.
(2) Normal reservation
The control right of the preset control corresponding to the predetermined preset number is reserved.
(3) No reservation required
No reservation is made, but the camera is controlled if the control right can be obtained at an appropriate timing.
(4) Video only
Camera control is not performed, and a camera image is acquired for a certain period of time and displayed.
(5) Delete reservation
Neither camera control nor image display is performed (deleted from the camera list in FIG. 3B).
[0058]
Next, a display change processing operation in mobile information terminal device 101 according to the present embodiment will be described using FIG.
[0059]
FIG. 6 is a flowchart showing a flow of the route setting processing operation in mobile information terminal apparatus 101 according to the present embodiment.
[0060]
The display update process is a process for constantly updating the display vicinity map and the facility information based on the current position information.
[0061]
In the display updating process, the current position information is obtained (step S601), and then a process corresponding to the current position is performed (step S602). Then, the process returns to step S601 to obtain the current position information again.
[0062]
Next, a search operation of a nearby camera server device in mobile information terminal device 101 according to the present embodiment will be described using FIG.
[0063]
FIG. 7 is a flowchart showing a flow of a nearby camera server device search processing operation in camera management section 103 of mobile information terminal device 101 according to the present embodiment.
[0064]
In the search processing for a nearby camera server device, route information is acquired (step S701), and then a nearby camera server device on the route is searched (step S702). Next, a response is made to the nearby camera list information (step S703), and then the present processing operation ends.
[0065]
Thereby, a camera server list near the set route can be obtained. Also, by inquiring the camera management unit 103 using the route information set in the mobile information terminal device 101, the camera server management information set in the camera management unit 103 can be used to obtain the camera list information in the vicinity of the route. Can be obtained.
[0066]
Note that the image to be shown may be different depending on the traveling direction of the route (road). For this reason, the nearby camera list information responded in the step S703 is obtained from the information on the different camera server device 102 and the camera preset number in the steps S701 and S702 according to the route and the traveling direction on the route. You may reply this. These are included in the camera server management information registered in the camera server device 102 in advance.
[0067]
Next, control right reservation processing operation of mobile information terminal apparatus 101 according to the present embodiment will be described using FIG.
[0068]
FIG. 8 is a flowchart showing a flow of the control right reservation processing operation of mobile information terminal apparatus 101 according to the present embodiment.
[0069]
Cameras are basically reserved in order from the camera list shown in FIG. 3B based on the current position information.
[0070]
In the control right reservation process of the mobile information terminal device 101, the current position information and the traveling direction information are obtained (step S801), and the camera to be the next reservation candidate is determined from the camera list of FIG. 3B (step S802). T is the scheduled time to reach the place where the image of the camera is to be displayed (point Q), and T is the place P to be reached at the time (T−n × τ) in consideration of the average expected speed. , And waits for the user to reach the location (step S803).
[0071]
Here, n is the maximum queue length, and τ is the control right holding time.
[0072]
When reaching the point P, a camera control right reservation is made (step S804). At this time, what kind of reservation (preset or free control) is specified. If the reservation is successful, the scheduled control right acquisition time is returned, so that the camera control right can be acquired at that time.
[0073]
Note that, as described later, the time at which the vehicle arrives at the point Q does not always coincide with the scheduled control right acquisition time. Therefore, the control right acquisition uses not the position information but the control right acquisition scheduled time information. In addition, when the reservation is only for an image, control is not required, so that control right reservation is not necessary. When the vehicle reaches the point Q, a camera image is requested for a certain period (τ) and displayed. .
[0074]
The point Q at which the camera image is to be displayed is set for each camera server device 102, and is set, for example, as a point at which the distance between the camera server device 102 and the mobile information terminal device 101 becomes a certain distance. Alternatively, a different point for each route or road may be held as a point to be shown. In addition, regarding the camera preset information set for each camera server apparatus 102, the route or road information and the traveling direction and the preset direction are returned so that different preset numbers that are not necessarily the same are returned according to the traveling direction of each route or road. The number may be set and stored in the camera server device 102 in association with the number.
[0075]
After the process of step S804 is completed, the process returns to step S801, and the current position information and the traveling direction information are acquired again.
[0076]
Next, a control right acquisition / display processing operation of mobile information terminal apparatus 101 according to the present embodiment will be described using FIG.
[0077]
FIG. 9 is a flowchart showing the flow of the control right acquisition / display processing operation of mobile information terminal apparatus 101 according to the present embodiment.
[0078]
In the control right acquisition / display process, the control right acquisition time (substantially the same as the arrival time at the point Q) T is awaited (step S901). The control right is requested to the server device 102, and the control right is waited for (step S902). Normally, since the control right can be obtained (step S903), camera control and image display according to the reservation contents are performed (step S904). Next, the control right is released after the elapse of the time τ (step S905), and thereafter, the process returns to the step S901, and waits for the scheduled control right acquisition time T again.
[0079]
Next, the control right reservation processing operation of the camera server device in mobile information terminal device 101 according to the present embodiment will be described using FIG.
[0080]
FIG. 10 is a flowchart showing the flow of the control right reservation processing operation of the camera server device in mobile information terminal device 101 according to the present embodiment.
[0081]
In the control right reservation process of the camera server device, it is determined whether or not the entry of the reservation time is empty (none) in the reservation list of the camera server device 102 shown in FIG. 13 (step S1001). The preset number and address are registered in the reservation list (step S1002), and the reservation time is returned (step S1003), and thereafter, the present processing operation ends.
[0082]
On the other hand, if the reservation list is not empty, it is determined whether or not the reservation is a preset reservation (step S1004). If the reservation is a preset reservation, the same preset is searched for in an entry near the reservation time (step S1005). . If the same preset is found (step S1006), the address is additionally registered in the address column of the reservation list (step S1003), and the time is returned as the reservation time (step S1003). To end.
[0083]
If the reservation is not a preset reservation, and if a reservation with the same preset number is not retrieved at the nearby time, a vacant entry at the neighboring time is retrieved next (step S1007). If an empty entry is found (step S1008), the entry is registered there (step S1003), and the time is returned as a reservation time (step S1003), and thereafter, the processing operation is terminated. Otherwise, a reservation NG is returned as a response that the reservation could not be made (step S1009), and then this processing operation ends.
[0084]
Even when the reservation NG is returned, the mobile information terminal device 101 issues a camera control right request at the first scheduled time T because there is a possibility that the reservation may be canceled from the control right waiting list and an empty space may appear. The aim is to acquire rights.
[0085]
Next, the control right acquisition / display processing operation of mobile information terminal apparatus 101 according to the present embodiment will be described using FIG. 11 and FIG.
[0086]
FIG. 11 and FIG. 12 are flowcharts showing the flow of the control right acquisition / display processing operation of mobile information terminal device 101 according to the present embodiment.
[0087]
In the case of “preset reservation”, “free control reservation”, or “reservation unnecessary”, the flow shown in FIGS. 11 and 12 is performed regardless of whether the reservation is NG.
[0088]
The request includes the address of the mobile information terminal device 101, the reservation type, and the preset number as parameters.
[0089]
In FIG. 11, when there is a request, first, the address and reservation type of the mobile information terminal device 101 that is the request source are checked (step S1101), and the reservation list is confirmed (step S1102). If it is a preset reservation and the preset numbers match (step S1103), it is interpreted that another mobile information terminal apparatus 101 has already made a preset reservation. Then, it is determined that the same preset is maintained during the predetermined time (τ), and image transmission is started to the requested address (step S1104), and image transmission is performed until the predetermined time (τ) elapses. Continue.
[0090]
On the other hand, if the preset numbers do not match or the preset is not reserved (step S1103), the control right is acquired (step S1106), and transmission of the camera image is started (step S1107). At this time, if it is a preset reservation (step S1108), preset control is performed (step S1109), and an image is transmitted until a certain time (τ) elapses. In the case of free control reservation instead of preset reservation, camera control is performed by freely issuing a camera control request using the control interface 402 or the like in FIG. 4 (step S1112).
[0091]
If the control right cannot be obtained in step S1106, camera control cannot be performed. In this case, a nearby camera image that has been stored in advance is transmitted instead. Therefore, in steps S1104 and S1107, images are always stored in a file in the form of a clip as shown in FIG. 14 in association with the preset.
[0092]
That is, in FIG. 12, it is determined whether or not a preset reservation has been made (step S1113), and if the preset control is being performed, the preset is always linked and updated to the latest image. If it is a preset reservation (step S1114), the latest substitute image clip corresponding to the preset is searched from the table shown in FIG. 14 and reproduced, and the reproduced image (substitute stored image) is transmitted (step S1114). Step S1115).
[0093]
If the preset reservation is not made, that is, in the case of the free control, the preset list is checked (step S1117), and the image files included in the table of FIG. Substitute (step S1118).
[0094]
After the steps S1115 and S1118 are completed, the end of the file and the transmission of the image are completed (step S1116), and then the present processing operation is ended.
[0095]
In the camera server device 102, the image or camera control right may be accessed from a normal viewer client other than the mobile information terminal device 101. In this case, the process is a normal control right queuing process. As for image transmission, an image is transmitted for a certain period of time after a transmission request is made. When only the image is reserved from the mobile information terminal device 101, the image is simply requested for a certain period of time. In this case, image transmission is performed for each viewer client or mobile information terminal device 101 according to the flow shown in FIG.
[0096]
That is, FIG. 15 is a flowchart showing the flow of the image transmission processing operation of the camera server device 102 according to the present embodiment.
[0097]
In the image transmission processing of the camera server apparatus 102, transmission of a camera image is started (step S1501), and then, after a certain period of time, the image transmission is ended (step S1502), and thereafter, this processing operation is ended.
[0098]
In addition, a storage medium storing program codes of software for realizing the functions of the above-described embodiments is supplied to a system or an apparatus, and a computer (or CPU, MPU, or the like) of the system or the apparatus is stored in the storage medium. It goes without saying that the present invention is also achieved by reading and executing the program code.
[0099]
In this case, the program code itself read from the storage medium realizes the functions of the above-described embodiment, and the storage medium storing the program code constitutes the present invention.
[0100]
Further, as a storage medium for supplying the program code, for example, RAM, NV-RAM, floppy (registered trademark) disk, hard disk, optical disk, magneto-optical disk, MO, CD-ROM, CD-R, CD-RW , A DVD (DVD-ROM, DVD-R, DVD-RW, etc.), a magnetic tape, a non-volatile memory card, another ROM, etc., as long as the program code can be stored, or a download via a network. Can be used.
[0101]
When the computer executes the readout program code, not only the functions of the above-described embodiment are realized, but also an OS (Operating System) or the like running on the computer based on the instruction of the program code. Performs part or all of the actual processing, and the functions of the above-described embodiments are realized by the processing.
[0102]
Further, after the program code read from the storage medium is written into a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer, the function expansion is performed based on the instruction of the program code. It goes without saying that a CPU or the like provided in the board or the function expansion unit performs part or all of the actual processing, and the processing realizes the functions of the above-described embodiments.
[0103]
Although various examples and embodiments of the present invention have been described above, those skilled in the art will appreciate that the spirit and scope of the present invention are not limited to the specific description and drawings in this specification, and are not limited thereto. It goes without saying that it is possible to cover various modifications and changes all set forth in the claims.
[0104]
Examples of embodiments of the present invention are listed below.
[0105]
[Embodiment 1] Position detecting means for detecting a current position;
Route information setting management means for setting and managing route information;
Camera selection means for selecting one camera from a plurality of cameras according to the path information and current position information,
Image display means for displaying an image by the camera selected by the camera selection means,
Communication control means for communicating the camera image;
A mobile information terminal device comprising:
[0106]
[Second Embodiment] The mobile information terminal device according to the first embodiment, wherein the camera selection unit has a function of considering a traveling direction.
[0107]
[Third Embodiment] A mobile information terminal device according to a second embodiment, further comprising a camera control interface unit for controlling a camera selected by the camera selection unit.
[0108]
[Embodiment 4] The mobile information terminal device according to Embodiment 3, wherein the camera control interface unit performs different preset control according to a traveling direction.
[0109]
[Embodiment 5] The mobile information terminal device according to embodiment 4, further comprising a control right reservation unit that reserves a control right of the camera according to the route information and the current position information.
[0110]
[Sixth Embodiment] The mobile information terminal device according to the fifth embodiment, wherein the control right reservation unit can make a reservation using a plurality of reservation methods.
[0111]
[Seventh Embodiment] The mobile information terminal device according to the sixth embodiment, wherein the control right reservation unit includes a preset reservation and a free control reservation.
[0112]
[Eighth Embodiment] The mobile information terminal device according to any one of the first to seventh embodiments, wherein the camera selection means selects a camera when the camera reaches a point designated by a camera server device. .
[0113]
[Embodiment 9] The mobile information terminal device according to any one of Embodiments 2 to 8, wherein a request to acquire control right of the camera is issued when the mobile information terminal reaches a predetermined position.
[0114]
[Embodiment 10] Imaging means for capturing an image,
Transmitting means for transmitting an image captured by the imaging means;
Communication control means for transmitting the image to the mobile information terminal or processing various requests from the mobile information terminal,
Camera server information management means for managing camera server information;
A camera server device comprising:
[0115]
[Embodiment 11] The camera server device according to embodiment 10, wherein the camera server information management unit manages information indicating a start / end location of a camera image display.
[0116]
[Twelfth embodiment] The camera server device according to the tenth or eleventh embodiment, further comprising a camera control unit that controls a shooting direction of the imaging unit.
[0117]
[Thirteenth Embodiment] The camera server device according to the twelfth embodiment, wherein the camera server information management unit manages a recommended camera preset number according to a traveling direction, a route, a current position, and the like.
[0118]
[Embodiment 14] The camera server apparatus according to embodiment 12 or 13, wherein a camera control right management unit for managing the camera control right is provided so that the camera control right can be reserved.
[0119]
[Embodiment 15] The camera server device according to embodiment 14, wherein the reservation of the camera control right includes a preset reservation and a free control reservation.
[0120]
[Embodiment 16] The camera server device according to embodiment 15, wherein if the same preset reservation is made at the same time, it is regarded as the same reservation.
[0121]
[Embodiment 17] The camera server apparatus according to embodiment 15, wherein if the preset reservations have the same time, the reservations are considered to be the same.
[0122]
[Embodiment 18] The camera server device according to any one of Embodiments 14 to 17, wherein if the camera control right cannot be acquired, the immediately preceding stored image is transmitted.
[0123]
[Embodiment 19] The camera server apparatus according to embodiment 18, wherein, if the camera control right cannot be acquired, if the preset control is performed, the stored image immediately before the preset is transmitted.
[0124]
[Embodiment 20] The camera server device according to any one of embodiments 14 to 19, wherein the camera control is pan / tilt / zoom.
[0125]
[Embodiment 21] An imaging system comprising at least one or more mobile information terminal devices according to claims 1 to 9 and at least one or more camera server devices according to embodiments 10 to 20. .
[0126]
[Embodiment 22] The imaging system according to Embodiment 21, further comprising a camera server management unit that manages the camera server device.
[0127]
[Embodiment 23] The imaging system according to embodiment 22, wherein the camera server management unit manages an installation location of the camera server device, a camera image display location, recommended preset information according to a traveling direction, and the like. .
[0128]
[Embodiment 24] A position detection step of detecting a current position,
A route information setting management process for setting and managing route information;
A camera selection step of selecting one camera from a plurality of cameras according to the path information and the current position information,
An image display step of displaying an image by the camera selected in the camera selection step,
A communication control step for communicating the camera image;
A mobile information communication method comprising:
[0129]
[Embodiment 25] The mobile information communication method according to embodiment 24, wherein the camera selecting step has a function of considering a traveling direction.
[0130]
[Embodiment 26] The mobile information communication method according to embodiment 25, further comprising a camera control interface step for controlling the camera selected in the camera selection step.
[0131]
Embodiment 27 The mobile information communication method according to embodiment 26, wherein the camera control interface step performs different preset control according to a traveling direction.
[0132]
Embodiment 28 The mobile information communication method according to embodiment 27, further comprising a control right reservation step of reserving a control right of the camera in accordance with the route information and the current position information.
[0133]
[Embodiment 29] The mobile information communication method according to embodiment 28, wherein the control right reservation step can make a reservation using a plurality of reservation methods.
[0134]
Embodiment 30 The mobile information communication method according to embodiment 29, wherein the control right reservation step includes a preset reservation and a free control reservation.
[0135]
[Embodiment 31] The mobile information communication method according to any one of Embodiments 24 to 30, wherein in the camera selecting step, a camera is selected when the camera reaches a point designated by a camera server device. .
[0136]
[Embodiment 32] The mobile information communication method according to any one of Embodiments 23 to 31, wherein a request to acquire control right of the camera is issued when the camera reaches a predetermined position.
[0137]
[Embodiment 33] An imaging step of capturing an image,
A transmitting step of transmitting an image captured by the imaging step,
A communication control step for transmitting the image to the mobile information terminal or processing various requests from the mobile information terminal,
A camera server information management process for managing camera server information;
A camera server method, comprising:
[0138]
[Embodiment 34] The camera server method according to embodiment 33, wherein the camera server information management step manages information indicating a camera image display start / end location.
[0139]
[Embodiment 35] The camera server method according to embodiment 33 or 34, further comprising a camera control step of controlling a shooting direction in the imaging step.
[0140]
[Embodiment 36] The camera server method according to embodiment 35, wherein the camera server information management step manages a recommended camera preset number according to a traveling direction, a route, a current position, and the like.
[0141]
[Embodiment 37] The camera server method according to embodiment 35 or 36, wherein a camera control right management step for managing the camera control right is provided so that the camera control right can be reserved.
[0142]
Embodiment 38 The camera server method according to embodiment 37, wherein the reservation of the camera control right includes a preset reservation and a free control reservation.
[0143]
[Embodiment 39] The camera server method according to embodiment 38, characterized in that when the same preset reservation is made at the same time, it is regarded as the same reservation.
[0144]
[Embodiment 40] The camera server method according to embodiment 38, characterized in that, when the preset reservations are close in time, they are regarded as the same reservation.
[0145]
[Embodiment 41] The camera server method according to any one of embodiments 37 to 40, wherein, when the camera control right cannot be acquired, the immediately preceding stored image is transmitted.
[0146]
[Embodiment 42] The camera server method according to embodiment 41, wherein if the camera control right cannot be acquired, if the preset control is performed, the immediately preceding accumulated video corresponding to the preset is transmitted.
[0147]
Embodiment 43 The camera server method according to any one of embodiments 37 to 42, wherein the camera control is pan, tilt, and zoom.
[0148]
[Embodiment 44] An imaging method characterized by comprising at least one or more mobile information communication methods according to Embodiments 24 to 32 and at least one or more camera server methods according to Embodiments 33 to 43. .
[0149]
[Embodiment 45] The imaging method according to embodiment 44, further comprising a camera server management step of managing the camera server method.
[0150]
[Embodiment 46] The imaging method according to Embodiment 45, wherein the camera server management step manages an execution location of the camera server method, a camera image display location, recommended preset information according to a traveling direction, and the like. .
[0151]
[Embodiment 47] A computer-readable control program for controlling a mobile information terminal device, comprising:
A position detection step of detecting a current position, a path information setting management step of setting and managing path information, a camera selection step of selecting one camera from a plurality of cameras according to the path information and the current position information, A mobile information terminal device comprising a program code for causing a computer to execute an image display step of displaying an image by a camera selected in a camera selection step, and a communication control step of communicating the camera image. Control program.
[0152]
[Embodiment 48] A computer-readable control program for controlling a camera server device, comprising:
An imaging step of capturing an image, a transmission step of transmitting an image captured by the imaging step, a communication control step of transmitting the image to a mobile information terminal or processing various requests from the mobile information terminal, A control program for a camera server device, comprising: a program code for causing a computer to execute a camera server information management step of managing camera server information.
[0153]
[Embodiment 49] A storage medium storing the control program according to any one of Embodiments 48 and 49.
[0154]
【The invention's effect】
As described above, according to the present invention, it is possible to effectively switch and display a real-time image from a controllable camera installed in a remote place, and perform camera control.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of an imaging system having a mobile information terminal device according to an embodiment of the present invention.
FIG. 2 is a block diagram showing a configuration of a camera server device in the imaging system having the mobile information terminal device according to one embodiment of the present invention.
FIG. 3 is a diagram showing a screen display example of the mobile information terminal device according to one embodiment of the present invention.
FIG. 4 is a diagram showing a screen display example of the mobile information terminal device according to one embodiment of the present invention.
FIG. 5 is a flowchart showing a flow of a route setting processing operation of the mobile information terminal device according to one embodiment of the present invention.
FIG. 6 is a flowchart showing a flow of a display update processing operation of the mobile information terminal device according to one embodiment of the present invention.
FIG. 7 is a flowchart showing a flow of a camera server device search processing operation in the imaging system having the mobile information terminal device according to one embodiment of the present invention.
FIG. 8 is a flowchart showing a flow of a reservation processing operation of the mobile information terminal device according to one embodiment of the present invention.
FIG. 9 is a flowchart showing a flow of a control right acquisition / display processing operation of the mobile information terminal device according to one embodiment of the present invention.
FIG. 10 is a flowchart showing a flow of a control right reservation processing operation of the camera server device in the imaging system having the mobile information terminal device according to one embodiment of the present invention.
FIG. 11 is a flowchart showing a flow of a control right acquisition / display processing operation of the camera server device in the imaging system having the mobile information terminal device according to one embodiment of the present invention.
FIG. 12 is a flowchart showing a flow of a control right acquisition / display processing operation of the camera server device in the imaging system having the mobile information terminal device according to one embodiment of the present invention.
FIG. 13 is a diagram showing an example of a reservation list of a camera server device in an imaging system having a mobile information terminal device according to one embodiment of the present invention.
FIG. 14 is a diagram showing an example of a preset accumulation image list of a camera server device in an imaging system having a mobile information terminal device according to an embodiment of the present invention.
FIG. 15 is a flowchart showing a flow of an image transmission processing operation of the camera server device in the imaging system having the mobile information terminal device according to one embodiment of the present invention.
[Explanation of symbols]
101 Mobile information terminal device
102 Camera server device
103 Camera management unit
104 Network
105 Current position detector
106 route information setting management unit
107 Map information display section
108 Camera selection management unit
109 Camera control I / F (interface)
110 Image display unit
111 Communication control unit
301 ▲ mark
302 C
Column 303
Column 304
Column 305
401 Pop-up window
402 Operation User Interface
403 Pan operation
404 Tilt operation
405 Zoom operation

Claims

Position detection means for detecting the current position;
Route information setting management means for setting and managing route information;
Camera selection means for selecting one camera from a plurality of cameras according to the path information and current position information,
Image display means for displaying an image by the camera selected by the camera selection means,
A mobile information terminal device comprising: communication control means for communicating the camera image.