JP3748439B2 - ネットワーク接続カメラ及び画像表示方法 - Google Patents
ネットワーク接続カメラ及び画像表示方法 Download PDFInfo
- Publication number
- JP3748439B2 JP3748439B2 JP2003096302A JP2003096302A JP3748439B2 JP 3748439 B2 JP3748439 B2 JP 3748439B2 JP 2003096302 A JP2003096302 A JP 2003096302A JP 2003096302 A JP2003096302 A JP 2003096302A JP 3748439 B2 JP3748439 B2 JP 3748439B2
- Authority
- JP
- Japan
- Prior art keywords
- network
- information
- camera
- search message
- message
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/4143—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a Personal Computer [PC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
- H04N21/64322—IP
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/16—Analogue secrecy systems; Analogue subscription systems
- H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
- H04N7/17309—Transmission or handling of upstream communications
- H04N7/17318—Direct or substantially direct transmission and handling of requests
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Closed-Circuit Television Systems (AREA)
- Controls And Circuits For Display Device (AREA)
Description
【０００１】
【発明の属する技術分野】
この発明は、例えば複数台のカメラを用いた監視システム等に使用して好適するネットワーク接続カメラ及び画像表示方法に関する。
【０００２】
【従来の技術】
周知のように、首記の如き監視システムにあっては、クライアント側のＰＣ（Personal Computer）が、複数台のカメラで撮影された各画像をそれぞれネットワークを介して取り込み、マルチ画面表示する構成となっている。
【０００３】
この場合、各カメラのネットワーク上におけるアドレスを予めＰＣに登録しておき、ＰＣが登録されたアドレスに基づいて各カメラを順次アクセスすることにより、各カメラから得られる画像を時分割でマルチ画面表示している。
【０００４】
しかしながら、このようなネットワークを介したマルチ画面表示手段では、ネットワーク上でカメラの増設、削減、変更等があった場合に、その都度、ＰＣに対してアドレスの追加、消去、変更等を行なう必要が生じる。
【０００５】
また、このマルチ画面表示手段では、ネットワーク上に接続されているカメラの台数に応じて、マルチ画面表示を行なう際のレイアウトを予めＰＣに設定しておくようにしている。
【０００６】
このため、ネットワーク上でカメラの増設や削減等があった場合には、その都度、ＰＣに対して、マルチ画面表示のためのレイアウトの設定も変更する必要が生じてくる。
【０００７】
ここで、特許文献１は、複数のカメラによって得られた画像を、ネットワークを介してクライアントのWebブラウザに提供し表示させるカメラ監視システムを開示している。
【０００８】
このカメラ監視システムは、Webブラウザにより各カメラの設置位置に対応してアイコンを表示させ、所望のアイコンをクリックすることにより、そのアイコンに対応したカメラからの画像を表示させるものである。
【０００９】
そして、この特許文献１では、カメラの増減や設置位置の変更等が行なわれた場合に、クランアントが、Webブラウザ上におけるアイコンの表示位置を容易に変更することができるようにしている。
【００１０】
しかしながら、この特許文献１は、複数のカメラから得られる各画像をマルチ画面表示させる技術については全く記載がなく、上記したマルチ画面表示手段についての諸問題を何ら解決しているものでないことは明白である。
【００１１】
【特許文献１】
特開２００３−９１３２号公報
【００１２】
【発明が解決しようとする課題】
そこで、この発明は上記事情を考慮してなされたもので、ネットワーク上でカメラの増設、削減、変更等があっても、煩雑な操作を行なうことなく容易に各カメラから得られる画像をマルチ画面表示することを可能としたネットワーク接続カメラ及び画像表示方法を提供することを目的とする。
【００１３】
【課題を解決するための手段】
この発明に係るネットワーク接続カメラは、
自己の位置情報を含む検索メッセージをネットワーク上に周期的に送出する検索メッセージ送出手段と、
ネットワーク上から検索メッセージを検知した状態で、自己の位置情報を含む返信メッセージをネットワーク上に送出する返信メッセージ送出手段と、
ネットワーク上から検索メッセージ及び返信メッセージを検知し、該検索メッセージ及び返信メッセージに含まれる位置情報を記録する記録手段と、
ネットワークを介してマルチ画面表示が要求された状態で、記録手段の記録内容に基づいて、マルチ画面表示を行なわせるための情報をネットワークに送出する情報送出手段とを備えている。
【００１４】
また、この発明に係る画像表示方法は、
自己の位置情報を含む検索メッセージをネットワーク上に周期的に送出する検索メッセージ送出手段と、
ネットワーク上から検索メッセージを検知した状態で、自己の位置情報を含む返信メッセージをネットワーク上に送出する返信メッセージ送出手段と、
ネットワーク上から検索メッセージ及び返信メッセージを検知し、該検索メッセージ及び返信メッセージに含まれる位置情報を記録する記録手段と、
ネットワークを介してマルチ画面表示が要求された状態で、記録手段の記録内容に基づいて、マルチ画面表示を行なわせるための情報をネットワークに送出する情報送出手段とを備えたネットワーク接続カメラの画像を表示する方法であって、
マルチ画面表示のためのレイアウトを指定する第１の情報と、この第１の情報で指定されたレイアウトで示される各分割領域にそれぞれ表示させる画像の取得先を指定する第２の情報とを、前記ネットワークを介して取得する工程と、
第１の情報で指定されるレイアウトに基づいて表示画面を複数の領域に分割するとともに、第２の情報で指定される複数の取得先からネットワークを介して画像信号を取得する工程と、
ネットワークを介して複数の取得先から取得した各画像信号を、表示画面の各分割領域にそれぞれ対応させて表示する工程とを備えている。
【００１５】
上記のような構成及び方法によれば、カメラが、検索メッセージをネットワーク上に周期的に送出し、ネットワーク上で検知された返信メッセージに含まれる位置情報を記録することにより、ネットワーク上に接続された全てのカメラを認識することができる。このため、マルチ画面表示が要求された場合には、カメラの記録内容に基づいて、上記第１及び第２の情報を生成して容易にマルチ画面表示を行なうことが可能となる。
【００１６】
【発明の実施の形態】
以下、この発明の実施の形態について、図面を参照して詳細に説明する。図１は、この実施の形態で説明する監視システムの概略を示している。なお、この発明は、監視システムのみに限られるものでないことはもちろんである。
【００１７】
すなわち、この監視システムは、複数（図示の場合は３つ）のカメラ１１，１２，１３と、画像表示部１４ａ及び操作部１４ｂを備えたクライアントのＰＣ１４とを、ネットワーク１５上で接続することにより構成されている。
【００１８】
この監視システムでは、ネットワーク１５にＴＣＰ／ＩＰ（Transmission Control Protocol／Internet Protocol）を採用し、各カメラ１１，１２，１３及びＰＣ１４の相互間で任意にデータ通信が可能となっている。このネットワーク１５を介したデータ通信は、有線及び無線のいずれでも可能である。
【００１９】
この場合、各カメラ１１，１２，１３には、それぞれ、ネットワーク１５上に接続された図示しないＤＨＣＰ（Dynamic Host Configuration Protocol）サーバにより、位置を示す情報としてＩＰアドレスが割り振られている。
【００２０】
また、各カメラ１１，１２，１３は、詳細は後述するが、それぞれ、カメラ自動検索プロトコル（ＲＮＣＰ：Retrieve Neighbory Cameras Protocol）により、自己と同じネットワーク１５上に接続されている他のカメラを自動的に検索し、そのＩＰアドレスを取得することができる。
【００２１】
さらに、ＰＣ１４は、カメラ検索の専用アプリケーションをネットワーク１５上に投げることにより、各カメラ１１，１２，１３を選択的にアクセスし、そのアクセスしたカメラとデータ通信を行なうことができる。
【００２２】
図２は、カメラ１１の信号処理系を示している。なお、他のカメラ１２，１３については、カメラ１１と同様な構成であるため、その説明を省略する。
【００２３】
すなわち、撮像レンズ１６を介して入射された被写体の光学像は、例えばＣＣＤ（Charge Coupled Device）等でなる固体撮像素子１７に結像されて、光学像に対応した電気的な画像信号に変換される。
【００２４】
この固体撮像素子１７から出力された画像信号は、画像信号処理部１８に供給されて所定の画像信号処理が施された後、画像信号圧縮部１９に供給されて、例えばＭＰＥＧ（Moving Picture Experts Group）方式等に基づいた画像信号圧縮処理が施される。
【００２５】
そして、この画像信号圧縮部１９から出力された画像信号は、有線入出力制御部２０に供給されて有線によるネットワーク１５への送出に供される。また、画像信号圧縮部１９から出力された画像信号は、無線入出力制御部２１に供給されて無線によるネットワーク１５への送出に供される。
【００２６】
上記した一連の撮像動作は、ＭＰＵ（Micro Processing Unit）２２によって統括的に制御されている。このＭＰＵ２２は、メモリ２３に格納された制御プログラム及び各種の設定値等に基づいて、また、このメモリ２３をワークエリアとして、各部の制御を行なっている。
【００２７】
さらに、このＭＰＵ２２は、有線入出力制御部２０及び無線入出力制御部２１を介して、先に述べたように、他のカメラ１２，１３及びＰＣ１４等とデータ通信を行なうことができる。
【００２８】
図３は、カメラ１１が、カメラ自動検索プロトコル（ＲＮＣＰ）により、自己と同じネットワーク１５上に接続されている他のカメラ１２，１３を自動的に検索する動作を示している。
【００２９】
まず、カメラ１１のＭＰＵ２２は、時刻Ｔ１で、ネットワーク１５上に検索メッセージ（ＲＮＣＰＤＩＳＣＯＶＥＲメッセージ）を送出する。この検索メッセージには、自己のＩＰアドレスが含まれている。
【００３０】
そして、ネットワーク１５上に接続されている他のカメラ１２，１３は、それぞれ、ネットワーク１５上に送出されたカメラ１１からの検索メッセージを検知すると、検索メッセージが送出された時刻Ｔ１から所定時間（例えば９０秒）が経過する前の時刻Ｔ２で、返信メッセージ（ＲＮＣＰＨＥＬＬＯメッセージ）をネットワーク１５上に送出する。
【００３１】
この場合、カメラ１２，１３は、それぞれ、カメラ１１からの検索メッセージに含まれるカメラ１１のＩＰアドレスを取得して記録する。また、カメラ１２，１３は、返信メッセージに自己のＩＰアドレスを含めている。
【００３２】
このため、カメラ１１のＭＰＵ２２は、ネットワーク１５上に送出されたカメラ１２，１３からの返信メッセージを検知すると、その返信メッセージに含まれるカメラ１２，１３のＩＰアドレスを取得してメモリ２３に記録する。これにより、カメラ１１のＭＰＵ２２は、同じネットワーク１５上にカメラ１２，１３が存在することを認識することができる。
【００３３】
そして、カメラ１１のＭＰＵ２２は、所定時間（例えば９０秒）の周期でネットワーク１５上に検索メッセージを送出し、この送出した検索メッセージに対する返信メッセージを検知することにより、他のカメラ１２，１３の存在を認識する動作を繰り返している。
【００３４】
また、任意の時刻、例えば時刻Ｔ３でカメラ１１のＭＰＵ２２が検索メッセージを送出した後の時刻Ｔ４で、カメラ１３がネットワーク１５上から削除されたとする。
【００３５】
すると、カメラ１１のＭＰＵ２２は、それが時刻Ｔ３で送出した検索メッセージに対してカメラ１３からの返信メッセージが得られず、さらに、その次の時刻Ｔ５で送出した検索メッセージに対してカメラ１３からの返信メッセージが得られなくなる。
【００３６】
つまり、連続して送出された２つの検索メッセージに対して、２回ともカメラ１３からの返信メッセージが得られない場合、カメラ１１のＭＰＵ２２は、カメラ１３がネットワーク１５上から削除されたものと判断して、カメラ１３のＩＰアドレスをメモリ２３から消去する。
【００３７】
このように、カメラ１１のＭＰＵ２２は、ネットワーク１５上における他のカメラ１２，１３の有無を周期的に検知している。これにより、カメラ１１のＭＰＵ２２は、ネットワーク１５上における他のカメラの増設、削減等を容易に認識することができる。
【００３８】
また、このために、前記ＰＣ１４でカメラ１１にアクセスし、そのメモリ２３の内容を見るだけで、ネットワーク１５上に接続されている全てのカメラ１２，１３を認識することが可能となる。
【００３９】
なお、カメラ１２，１３も同様に、それぞれが、検索メッセージを送出し、それに対する返信メッセージを検知することによって、他のカメラの存在を検知し記録している。つまり、ネットワーク１５上に接続された各カメラ１１，１２，１３は、相互に認識し合っている。
【００４０】
このため、ＰＣ１４でいずれのカメラ１１，１２，１３にアクセスしても、ネットワーク１５上に接続されている全てのカメラ１２，１３を認識することが可能となっている。
【００４１】
図４は、上記したカメラ１１による他のカメラ１２，１３を認識する動作と、ＰＣ１４がカメラ１１をアクセスした場合の動作とをまとめたフローチャートを示している。
【００４２】
まず、開始（ステップＳ１１）されると、カメラ１１のＭＰＵ２２は、ステップＳ１２で、ネットワーク１５上に検索メッセージを送出する。そして、カメラ１１のＭＰＵ２２は、ステップＳ１３で、ネットワーク１５上の返信メッセージを検知すると、ステップＳ１４で、検知した返信メッセージに含まれるＩＰアドレスを記録する。
【００４３】
以上のステップＳ１２〜Ｓ１４の動作は、カメラ自動検索動作として、所定周期で繰り返し行なわれている。
【００４４】
このような状態で、カメラ１１のＭＰＵ２２は、ステップＳ１５で、ＰＣ１４からアクセスされ、マルチ画面表示が要求された場合、ステップＳ１６で、メモリ２３の内容を参照して、ネットワーク上１５に現在接続されているカメラの台数が、自己も含めて２つ以上であるか否かを判別する。
【００４５】
そして、ネットワーク上１５に現在接続されているカメラの台数が２つ以上でないと判断された場合（ＮＯ）、カメラ１１のＭＰＵ２２は、ステップＳ１７で、自己の撮影した画像信号をネットワーク１５を介してＰＣ１４に送出し、その画像表示部１４ａに表示させて、処理を終了（ステップＳ２２）する。
【００４６】
また、ステップＳ１６でネットワーク上１５に現在接続されているカメラの台数が２つ以上であると判断された場合（ＹＥＳ）、カメラ１１のＭＰＵ２２は、ステップＳ１８で、カメラの台数に応じてマルチ画面表示を行なうためのレイアウトを設定する。
【００４７】
このレイアウトとしては、ＰＣ１４の画像表示部１４ａの画面を、水平及び垂直方向にそれぞれ２分割して４画面を作成するモードと、水平及び垂直方向にそれぞれ３分割して９画面を作成するモードと、水平及び垂直方向にそれぞれ４分割して１６画面を作成するモードとが用意されている。
【００４８】
そして、ステップＳ１８では、カメラの台数に応じていずれかのモードを選定することになる。この実施の形態では、３台のカメラ１１，１２，１３がネットワーク１５上に接続されているので、４画面を作成するモードが選定され、そのモード情報がＰＣ１４に送出されることになる。
【００４９】
このため、ＰＣ１４では、カメラ１１から送出されたモード情報に応じて、図５に示すように、その画像表示部１４ａの画面を４つの領域ａ，ｂ，ｃ，ｄに分割する。
【００５０】
その後、カメラ１１のＭＰＵ２２は、ステップＳ１９で、ＰＣ１４に対して、その画像表示部１４ａの分割された４つの領域ａ，ｂ，ｃ，ｄにそれぞれ画像を表示させるための画像信号を、各カメラ１１，１２，１３から取得するように、指示を送出する。
【００５１】
この場合、カメラ１１のＭＰＵ２２は、領域ａに画像を表示させるための画像信号をカメラ１１から取得し、領域ｂに画像を表示させるための画像信号をカメラ１２から取得し、領域ｃに画像を表示させるための画像信号をカメラ１３から取得し、領域ｄを無表示状態にするように、ＰＣ１４に指示を発生する。
【００５２】
これにより、ＰＣ１４は、ステップＳ２０で、各カメラ１１，１２，１３から画像信号を送出させ、ステップＳ２１で、その画像表示部１４ａの領域ａにカメラ１１の画像を表示させ、領域ｂにカメラ１２の画像を表示させ、領域ｃにカメラ１３の画像を表示させ、領域ｄを無表示にして、処理を終了（ステップＳ２２）する。
【００５３】
上記した実施の形態によれば、カメラ自動検索プロトコルにより、ネットワーク１５上に接続されている全てのカメラ１１，１２，１３が相互に認識し合い、それぞれのカメラ１１，１２，１３が他のカメラのＩＰアドレス等の情報を記録するようにしている。
【００５４】
このため、ＰＣ１４によって任意の１台のカメラをアクセスし、そこに記録されている他のカメラのＩＰアドレス等の情報を読み取るだけで、ネットワーク１５に接続されている全てのカメラ１１，１２，１３を容易に認識することができるようになる。
【００５５】
そして、各カメラ１１，１２，１３同士の相互認識動作は、一定の周期を持って繰り返し行なわれ、認識結果に応じて記録されている情報が更新されるので、新たにネットワーク１５に接続されたカメラや、ネットワーク１５から削除されたカメラも容易に認識することが可能となる。
【００５６】
これにより、ネットワーク１５上でカメラの増設、削減、変更等があった場合に、その都度、ＰＣ１４に対してＩＰアドレスの追加、消去、変更等の操作を行なう必要がなくなるので、煩雑な操作を行なうことなく、ネットワーク１５上に存在するカメラを正確に把握することができる。
【００５７】
また、任意のカメラのＭＰＵは、ＰＣ１４によって自己が選択され、マルチ画面表示が要求された状態で、ネットワーク１５上に接続されている全てのカメラの台数からマルチ画面表示のためのレイアウトを示す情報と、そのレイアウトによって示される各分割領域に表示させる画像をどのカメラから取得するのかを示す情報とを、ＰＣ１４に与えるようにしている。
【００５８】
このため、ＰＣ１４は、任意の１台のカメラにアクセスし、マルチ画面表示を要求するだけで、そのカメラ側から提供された情報に基づいて、マルチ画面を作成して表示することができるので、煩雑な操作を行なうことなく容易に各カメラから得られる画像をマルチ画面表示することが可能となる。
【００５９】
なお、図４で示した動作説明では、カメラ１１のＭＰＵ２２が、ステップＳ１８でマルチ画面表示のためのレイアウトを示す情報を送出した後、ステップＳ１９で各分割領域に表示すべき画像をカメラ１１，１２，１３から取得させる指示を送出するようにしている。
【００６０】
しかしながら、これに限らず、例えば、ステップＳ１８で、カメラ１１のＭＰＵ２２がマルチ画面表示のためのレイアウトを示す情報を送出する際に、自己の撮影した画像信号とその画像信号を領域ａに表示させる指示とを送出し、以下のステップＳ１９では、分割領域ｂ，ｃに表示する画像をカメラ１２，１３から取得させる指示を送出するようにしても良いものである。
【００６１】
また、ＰＣ１４がカメラ１１にアクセスして、図５に示すようなマルチ画面表示が行なわれている状態で、図３で説明したように、カメラ１３がネットワーク１５上から削除されたとする。
【００６２】
この場合、カメラ１１のＭＰＵ２２は、カメラ１３がネットワーク１５上から削除されたことを検知すると、ＰＣ１４に対して、領域ｃを無表示状態にするように指示を送出する。
【００６３】
このため、クライアントは、カメラ１３の画像を表示していた領域ｃが無表示になったことにより、カメラ１３がネットワーク１５上から削除されたことを認識することができる。
【００６４】
なお、カメラ１１のＭＰＵ２２は、カメラ１３がネットワーク１５上から削除されたことを検知した場合、ＰＣ１４に対して、その旨を示すメッセージ等を表示させるようにしても良いものである。
【００６５】
図６は、上記した実施の形態の変形例を示している。すなわち、図１で示したカメラ１，１２，１３及びＰＣ１４が接続されたネットワーク１５に、カメラ２４，２５が接続された他のネットワーク２６が、ルータ２７によって接続されている。
【００６６】
この場合、ネットワーク１５上で機能しているカメラ自動検索プロトコル（ＲＮＣＰ）は、ルータ２７を通過することができないため、ネットワーク２７上に接続されているカメラ２４，２５の検索を行なうことはできない。つまり、ネットワーク１５上のカメラ１１，１２，１３が、ネットワーク２７上のカメラ２４，２５を認識することはできない。
【００６７】
このような場合、クライアントは、ネットワーク２７上に接続されているカメラ２４，２５のＩＰアドレスを、ネットワーク１５上に接続されている全てのカメラ１１，１２，１３にそれぞれ手動操作で記録させる。
【００６８】
これにより、ＰＣ１４で例えばカメラ１１にアクセスして、そのメモリ２３の内容を見ることにより、ネットワーク１５，２６に接続されている全てのカメラ１１，１２，１３，２４，２５を把握することが可能となる。
【００６９】
また、ＰＣ１４でカメラ１１にアクセスし、マルチ画面表示を要求した場合、カメラ１１のＭＰＵ２２は、まず、カメラの総数が５であることから、マルチ画面表示のためのレイアウトとして９画面を作成するモードを選定し、そのモード情報をＰＣ１４に送出する。
【００７０】
このため、ＰＣ１４では、カメラ１１から送出されたモード情報に応じて、図７に示すように、その画像表示部１４ａの画面を９個の領域ａ，ｂ，ｃ，ｄ，ｅ，ｆ，ｇ，ｈ，ｉに分割する。
【００７１】
その後、カメラ１１のＭＰＵ２２は、ＰＣ１４に対して、その画像表示部１４ａの分割された９個の領域ａ〜ｉにそれぞれ画像を表示させるための画像信号を、各カメラ１１，１２，１３，２４，２５から取得するように、指示を送出する。
【００７２】
この場合、カメラ１１のＭＰＵ２２は、領域ａ，ｂ，ｃ，ｄ，ｅに画像を表示させるための画像信号を、それぞれカメラ１１，１２，１３，２４，２５から取得し、領域ｆ，ｇ，ｈ，ｉをそれぞれ無表示状態にするように、ＰＣ１４に指示を発生する。
【００７３】
これにより、画像表示部１４ａの領域ａ，ｂ，ｃ，ｄ，ｅに、それぞれカメラ１１，１２，１３，２４，２５の画像が表示され、領域ｆ，ｇ，ｈ，ｉが無表示状態となる。
【００７４】
ここで、上記した実施の形態及びその変形例では、マルチ画面表示が要求された場合に、ネットワーク１５，２６に接続されている全てのカメラ１１，１２，１３，２４，２５の画像を分割表示させるようにしている。
【００７５】
しかしながら、これに限らず、例えばＰＣ１４で画像をマルチ画面表示させるカメラを指定することにより、その指定されたカメラの画像のみをマルチ画面表示させるようにすることも可能である。
【００７６】
なお、この発明は上記した実施の形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を種々変形して具体化することができる。
【００７７】
また、上記した実施の形態に開示されている複数の構成要素を適宜に組み合わせることにより、種々の発明を形成することができる。例えば、実施の形態に示される全構成要素から幾つかの構成要素を削除しても良いものである。
【００７８】
【発明の効果】
以上詳述したようにこの発明によれば、ネットワーク上でカメラの増設、削減、変更等があっても、煩雑な操作を行なうことなく容易に各カメラから得られる画像をマルチ画面表示することを可能としたネットワーク接続カメラ及び画像表示方法を提供することができる。
【図面の簡単な説明】
【図１】 この発明の実施の形態を示すもので、監視システムの概略を説明するために示す図。
【図２】 同実施の形態におけるカメラの信号処理系を説明するために示すブロック構成図。
【図３】 同実施の形態におけるネットワーク上でのカメラ自動検索動作を説明するために示す図。
【図４】 同実施の形態におけるマルチ画面表示動作を説明するために示すフローチャート。
【図５】 同実施の形態におけるマルチ画面表示のレイアウトの一例を説明するために示す図。
【図６】 同実施の形態における監視システムの変形例を説明するために示す図。
【図７】 同実施の形態におけるマルチ画面表示のレイアウトの他の例を説明するために示す図。
【符号の説明】
１１，１２，１３…カメラ、１４…ＰＣ、１５…ネットワーク、１６…撮像レンズ、１７…固体撮像素子、１８…画像信号処理部、１９…画像信号圧縮部、２０…有線入出力制御部、２１…無線入出力制御部、２２…ＭＰＵ、２３…メモリ、２４，２５…カメラ、２６…ネットワーク、２７…ルータ。
【発明の属する技術分野】
この発明は、例えば複数台のカメラを用いた監視システム等に使用して好適するネットワーク接続カメラ及び画像表示方法に関する。
【０００２】
【従来の技術】
周知のように、首記の如き監視システムにあっては、クライアント側のＰＣ（Personal Computer）が、複数台のカメラで撮影された各画像をそれぞれネットワークを介して取り込み、マルチ画面表示する構成となっている。
【０００３】
この場合、各カメラのネットワーク上におけるアドレスを予めＰＣに登録しておき、ＰＣが登録されたアドレスに基づいて各カメラを順次アクセスすることにより、各カメラから得られる画像を時分割でマルチ画面表示している。
【０００４】
しかしながら、このようなネットワークを介したマルチ画面表示手段では、ネットワーク上でカメラの増設、削減、変更等があった場合に、その都度、ＰＣに対してアドレスの追加、消去、変更等を行なう必要が生じる。
【０００５】
また、このマルチ画面表示手段では、ネットワーク上に接続されているカメラの台数に応じて、マルチ画面表示を行なう際のレイアウトを予めＰＣに設定しておくようにしている。
【０００６】
このため、ネットワーク上でカメラの増設や削減等があった場合には、その都度、ＰＣに対して、マルチ画面表示のためのレイアウトの設定も変更する必要が生じてくる。
【０００７】
ここで、特許文献１は、複数のカメラによって得られた画像を、ネットワークを介してクライアントのWebブラウザに提供し表示させるカメラ監視システムを開示している。
【０００８】
このカメラ監視システムは、Webブラウザにより各カメラの設置位置に対応してアイコンを表示させ、所望のアイコンをクリックすることにより、そのアイコンに対応したカメラからの画像を表示させるものである。
【０００９】
そして、この特許文献１では、カメラの増減や設置位置の変更等が行なわれた場合に、クランアントが、Webブラウザ上におけるアイコンの表示位置を容易に変更することができるようにしている。
【００１０】
しかしながら、この特許文献１は、複数のカメラから得られる各画像をマルチ画面表示させる技術については全く記載がなく、上記したマルチ画面表示手段についての諸問題を何ら解決しているものでないことは明白である。
【００１１】
【特許文献１】
特開２００３−９１３２号公報
【００１２】
【発明が解決しようとする課題】
そこで、この発明は上記事情を考慮してなされたもので、ネットワーク上でカメラの増設、削減、変更等があっても、煩雑な操作を行なうことなく容易に各カメラから得られる画像をマルチ画面表示することを可能としたネットワーク接続カメラ及び画像表示方法を提供することを目的とする。
【００１３】
【課題を解決するための手段】
この発明に係るネットワーク接続カメラは、
自己の位置情報を含む検索メッセージをネットワーク上に周期的に送出する検索メッセージ送出手段と、
ネットワーク上から検索メッセージを検知した状態で、自己の位置情報を含む返信メッセージをネットワーク上に送出する返信メッセージ送出手段と、
ネットワーク上から検索メッセージ及び返信メッセージを検知し、該検索メッセージ及び返信メッセージに含まれる位置情報を記録する記録手段と、
ネットワークを介してマルチ画面表示が要求された状態で、記録手段の記録内容に基づいて、マルチ画面表示を行なわせるための情報をネットワークに送出する情報送出手段とを備えている。
【００１４】
また、この発明に係る画像表示方法は、
自己の位置情報を含む検索メッセージをネットワーク上に周期的に送出する検索メッセージ送出手段と、
ネットワーク上から検索メッセージを検知した状態で、自己の位置情報を含む返信メッセージをネットワーク上に送出する返信メッセージ送出手段と、
ネットワーク上から検索メッセージ及び返信メッセージを検知し、該検索メッセージ及び返信メッセージに含まれる位置情報を記録する記録手段と、
ネットワークを介してマルチ画面表示が要求された状態で、記録手段の記録内容に基づいて、マルチ画面表示を行なわせるための情報をネットワークに送出する情報送出手段とを備えたネットワーク接続カメラの画像を表示する方法であって、
マルチ画面表示のためのレイアウトを指定する第１の情報と、この第１の情報で指定されたレイアウトで示される各分割領域にそれぞれ表示させる画像の取得先を指定する第２の情報とを、前記ネットワークを介して取得する工程と、
第１の情報で指定されるレイアウトに基づいて表示画面を複数の領域に分割するとともに、第２の情報で指定される複数の取得先からネットワークを介して画像信号を取得する工程と、
ネットワークを介して複数の取得先から取得した各画像信号を、表示画面の各分割領域にそれぞれ対応させて表示する工程とを備えている。
【００１５】
上記のような構成及び方法によれば、カメラが、検索メッセージをネットワーク上に周期的に送出し、ネットワーク上で検知された返信メッセージに含まれる位置情報を記録することにより、ネットワーク上に接続された全てのカメラを認識することができる。このため、マルチ画面表示が要求された場合には、カメラの記録内容に基づいて、上記第１及び第２の情報を生成して容易にマルチ画面表示を行なうことが可能となる。
【００１６】
【発明の実施の形態】
以下、この発明の実施の形態について、図面を参照して詳細に説明する。図１は、この実施の形態で説明する監視システムの概略を示している。なお、この発明は、監視システムのみに限られるものでないことはもちろんである。
【００１７】
すなわち、この監視システムは、複数（図示の場合は３つ）のカメラ１１，１２，１３と、画像表示部１４ａ及び操作部１４ｂを備えたクライアントのＰＣ１４とを、ネットワーク１５上で接続することにより構成されている。
【００１８】
この監視システムでは、ネットワーク１５にＴＣＰ／ＩＰ（Transmission Control Protocol／Internet Protocol）を採用し、各カメラ１１，１２，１３及びＰＣ１４の相互間で任意にデータ通信が可能となっている。このネットワーク１５を介したデータ通信は、有線及び無線のいずれでも可能である。
【００１９】
この場合、各カメラ１１，１２，１３には、それぞれ、ネットワーク１５上に接続された図示しないＤＨＣＰ（Dynamic Host Configuration Protocol）サーバにより、位置を示す情報としてＩＰアドレスが割り振られている。
【００２０】
また、各カメラ１１，１２，１３は、詳細は後述するが、それぞれ、カメラ自動検索プロトコル（ＲＮＣＰ：Retrieve Neighbory Cameras Protocol）により、自己と同じネットワーク１５上に接続されている他のカメラを自動的に検索し、そのＩＰアドレスを取得することができる。
【００２１】
さらに、ＰＣ１４は、カメラ検索の専用アプリケーションをネットワーク１５上に投げることにより、各カメラ１１，１２，１３を選択的にアクセスし、そのアクセスしたカメラとデータ通信を行なうことができる。
【００２２】
図２は、カメラ１１の信号処理系を示している。なお、他のカメラ１２，１３については、カメラ１１と同様な構成であるため、その説明を省略する。
【００２３】
すなわち、撮像レンズ１６を介して入射された被写体の光学像は、例えばＣＣＤ（Charge Coupled Device）等でなる固体撮像素子１７に結像されて、光学像に対応した電気的な画像信号に変換される。
【００２４】
この固体撮像素子１７から出力された画像信号は、画像信号処理部１８に供給されて所定の画像信号処理が施された後、画像信号圧縮部１９に供給されて、例えばＭＰＥＧ（Moving Picture Experts Group）方式等に基づいた画像信号圧縮処理が施される。
【００２５】
そして、この画像信号圧縮部１９から出力された画像信号は、有線入出力制御部２０に供給されて有線によるネットワーク１５への送出に供される。また、画像信号圧縮部１９から出力された画像信号は、無線入出力制御部２１に供給されて無線によるネットワーク１５への送出に供される。
【００２６】
上記した一連の撮像動作は、ＭＰＵ（Micro Processing Unit）２２によって統括的に制御されている。このＭＰＵ２２は、メモリ２３に格納された制御プログラム及び各種の設定値等に基づいて、また、このメモリ２３をワークエリアとして、各部の制御を行なっている。
【００２７】
さらに、このＭＰＵ２２は、有線入出力制御部２０及び無線入出力制御部２１を介して、先に述べたように、他のカメラ１２，１３及びＰＣ１４等とデータ通信を行なうことができる。
【００２８】
図３は、カメラ１１が、カメラ自動検索プロトコル（ＲＮＣＰ）により、自己と同じネットワーク１５上に接続されている他のカメラ１２，１３を自動的に検索する動作を示している。
【００２９】
まず、カメラ１１のＭＰＵ２２は、時刻Ｔ１で、ネットワーク１５上に検索メッセージ（ＲＮＣＰＤＩＳＣＯＶＥＲメッセージ）を送出する。この検索メッセージには、自己のＩＰアドレスが含まれている。
【００３０】
そして、ネットワーク１５上に接続されている他のカメラ１２，１３は、それぞれ、ネットワーク１５上に送出されたカメラ１１からの検索メッセージを検知すると、検索メッセージが送出された時刻Ｔ１から所定時間（例えば９０秒）が経過する前の時刻Ｔ２で、返信メッセージ（ＲＮＣＰＨＥＬＬＯメッセージ）をネットワーク１５上に送出する。
【００３１】
この場合、カメラ１２，１３は、それぞれ、カメラ１１からの検索メッセージに含まれるカメラ１１のＩＰアドレスを取得して記録する。また、カメラ１２，１３は、返信メッセージに自己のＩＰアドレスを含めている。
【００３２】
このため、カメラ１１のＭＰＵ２２は、ネットワーク１５上に送出されたカメラ１２，１３からの返信メッセージを検知すると、その返信メッセージに含まれるカメラ１２，１３のＩＰアドレスを取得してメモリ２３に記録する。これにより、カメラ１１のＭＰＵ２２は、同じネットワーク１５上にカメラ１２，１３が存在することを認識することができる。
【００３３】
そして、カメラ１１のＭＰＵ２２は、所定時間（例えば９０秒）の周期でネットワーク１５上に検索メッセージを送出し、この送出した検索メッセージに対する返信メッセージを検知することにより、他のカメラ１２，１３の存在を認識する動作を繰り返している。
【００３４】
また、任意の時刻、例えば時刻Ｔ３でカメラ１１のＭＰＵ２２が検索メッセージを送出した後の時刻Ｔ４で、カメラ１３がネットワーク１５上から削除されたとする。
【００３５】
すると、カメラ１１のＭＰＵ２２は、それが時刻Ｔ３で送出した検索メッセージに対してカメラ１３からの返信メッセージが得られず、さらに、その次の時刻Ｔ５で送出した検索メッセージに対してカメラ１３からの返信メッセージが得られなくなる。
【００３６】
つまり、連続して送出された２つの検索メッセージに対して、２回ともカメラ１３からの返信メッセージが得られない場合、カメラ１１のＭＰＵ２２は、カメラ１３がネットワーク１５上から削除されたものと判断して、カメラ１３のＩＰアドレスをメモリ２３から消去する。
【００３７】
このように、カメラ１１のＭＰＵ２２は、ネットワーク１５上における他のカメラ１２，１３の有無を周期的に検知している。これにより、カメラ１１のＭＰＵ２２は、ネットワーク１５上における他のカメラの増設、削減等を容易に認識することができる。
【００３８】
また、このために、前記ＰＣ１４でカメラ１１にアクセスし、そのメモリ２３の内容を見るだけで、ネットワーク１５上に接続されている全てのカメラ１２，１３を認識することが可能となる。
【００３９】
なお、カメラ１２，１３も同様に、それぞれが、検索メッセージを送出し、それに対する返信メッセージを検知することによって、他のカメラの存在を検知し記録している。つまり、ネットワーク１５上に接続された各カメラ１１，１２，１３は、相互に認識し合っている。
【００４０】
このため、ＰＣ１４でいずれのカメラ１１，１２，１３にアクセスしても、ネットワーク１５上に接続されている全てのカメラ１２，１３を認識することが可能となっている。
【００４１】
図４は、上記したカメラ１１による他のカメラ１２，１３を認識する動作と、ＰＣ１４がカメラ１１をアクセスした場合の動作とをまとめたフローチャートを示している。
【００４２】
まず、開始（ステップＳ１１）されると、カメラ１１のＭＰＵ２２は、ステップＳ１２で、ネットワーク１５上に検索メッセージを送出する。そして、カメラ１１のＭＰＵ２２は、ステップＳ１３で、ネットワーク１５上の返信メッセージを検知すると、ステップＳ１４で、検知した返信メッセージに含まれるＩＰアドレスを記録する。
【００４３】
以上のステップＳ１２〜Ｓ１４の動作は、カメラ自動検索動作として、所定周期で繰り返し行なわれている。
【００４４】
このような状態で、カメラ１１のＭＰＵ２２は、ステップＳ１５で、ＰＣ１４からアクセスされ、マルチ画面表示が要求された場合、ステップＳ１６で、メモリ２３の内容を参照して、ネットワーク上１５に現在接続されているカメラの台数が、自己も含めて２つ以上であるか否かを判別する。
【００４５】
そして、ネットワーク上１５に現在接続されているカメラの台数が２つ以上でないと判断された場合（ＮＯ）、カメラ１１のＭＰＵ２２は、ステップＳ１７で、自己の撮影した画像信号をネットワーク１５を介してＰＣ１４に送出し、その画像表示部１４ａに表示させて、処理を終了（ステップＳ２２）する。
【００４６】
また、ステップＳ１６でネットワーク上１５に現在接続されているカメラの台数が２つ以上であると判断された場合（ＹＥＳ）、カメラ１１のＭＰＵ２２は、ステップＳ１８で、カメラの台数に応じてマルチ画面表示を行なうためのレイアウトを設定する。
【００４７】
このレイアウトとしては、ＰＣ１４の画像表示部１４ａの画面を、水平及び垂直方向にそれぞれ２分割して４画面を作成するモードと、水平及び垂直方向にそれぞれ３分割して９画面を作成するモードと、水平及び垂直方向にそれぞれ４分割して１６画面を作成するモードとが用意されている。
【００４８】
そして、ステップＳ１８では、カメラの台数に応じていずれかのモードを選定することになる。この実施の形態では、３台のカメラ１１，１２，１３がネットワーク１５上に接続されているので、４画面を作成するモードが選定され、そのモード情報がＰＣ１４に送出されることになる。
【００４９】
このため、ＰＣ１４では、カメラ１１から送出されたモード情報に応じて、図５に示すように、その画像表示部１４ａの画面を４つの領域ａ，ｂ，ｃ，ｄに分割する。
【００５０】
その後、カメラ１１のＭＰＵ２２は、ステップＳ１９で、ＰＣ１４に対して、その画像表示部１４ａの分割された４つの領域ａ，ｂ，ｃ，ｄにそれぞれ画像を表示させるための画像信号を、各カメラ１１，１２，１３から取得するように、指示を送出する。
【００５１】
この場合、カメラ１１のＭＰＵ２２は、領域ａに画像を表示させるための画像信号をカメラ１１から取得し、領域ｂに画像を表示させるための画像信号をカメラ１２から取得し、領域ｃに画像を表示させるための画像信号をカメラ１３から取得し、領域ｄを無表示状態にするように、ＰＣ１４に指示を発生する。
【００５２】
これにより、ＰＣ１４は、ステップＳ２０で、各カメラ１１，１２，１３から画像信号を送出させ、ステップＳ２１で、その画像表示部１４ａの領域ａにカメラ１１の画像を表示させ、領域ｂにカメラ１２の画像を表示させ、領域ｃにカメラ１３の画像を表示させ、領域ｄを無表示にして、処理を終了（ステップＳ２２）する。
【００５３】
上記した実施の形態によれば、カメラ自動検索プロトコルにより、ネットワーク１５上に接続されている全てのカメラ１１，１２，１３が相互に認識し合い、それぞれのカメラ１１，１２，１３が他のカメラのＩＰアドレス等の情報を記録するようにしている。
【００５４】
このため、ＰＣ１４によって任意の１台のカメラをアクセスし、そこに記録されている他のカメラのＩＰアドレス等の情報を読み取るだけで、ネットワーク１５に接続されている全てのカメラ１１，１２，１３を容易に認識することができるようになる。
【００５５】
そして、各カメラ１１，１２，１３同士の相互認識動作は、一定の周期を持って繰り返し行なわれ、認識結果に応じて記録されている情報が更新されるので、新たにネットワーク１５に接続されたカメラや、ネットワーク１５から削除されたカメラも容易に認識することが可能となる。
【００５６】
これにより、ネットワーク１５上でカメラの増設、削減、変更等があった場合に、その都度、ＰＣ１４に対してＩＰアドレスの追加、消去、変更等の操作を行なう必要がなくなるので、煩雑な操作を行なうことなく、ネットワーク１５上に存在するカメラを正確に把握することができる。
【００５７】
また、任意のカメラのＭＰＵは、ＰＣ１４によって自己が選択され、マルチ画面表示が要求された状態で、ネットワーク１５上に接続されている全てのカメラの台数からマルチ画面表示のためのレイアウトを示す情報と、そのレイアウトによって示される各分割領域に表示させる画像をどのカメラから取得するのかを示す情報とを、ＰＣ１４に与えるようにしている。
【００５８】
このため、ＰＣ１４は、任意の１台のカメラにアクセスし、マルチ画面表示を要求するだけで、そのカメラ側から提供された情報に基づいて、マルチ画面を作成して表示することができるので、煩雑な操作を行なうことなく容易に各カメラから得られる画像をマルチ画面表示することが可能となる。
【００５９】
なお、図４で示した動作説明では、カメラ１１のＭＰＵ２２が、ステップＳ１８でマルチ画面表示のためのレイアウトを示す情報を送出した後、ステップＳ１９で各分割領域に表示すべき画像をカメラ１１，１２，１３から取得させる指示を送出するようにしている。
【００６０】
しかしながら、これに限らず、例えば、ステップＳ１８で、カメラ１１のＭＰＵ２２がマルチ画面表示のためのレイアウトを示す情報を送出する際に、自己の撮影した画像信号とその画像信号を領域ａに表示させる指示とを送出し、以下のステップＳ１９では、分割領域ｂ，ｃに表示する画像をカメラ１２，１３から取得させる指示を送出するようにしても良いものである。
【００６１】
また、ＰＣ１４がカメラ１１にアクセスして、図５に示すようなマルチ画面表示が行なわれている状態で、図３で説明したように、カメラ１３がネットワーク１５上から削除されたとする。
【００６２】
この場合、カメラ１１のＭＰＵ２２は、カメラ１３がネットワーク１５上から削除されたことを検知すると、ＰＣ１４に対して、領域ｃを無表示状態にするように指示を送出する。
【００６３】
このため、クライアントは、カメラ１３の画像を表示していた領域ｃが無表示になったことにより、カメラ１３がネットワーク１５上から削除されたことを認識することができる。
【００６４】
なお、カメラ１１のＭＰＵ２２は、カメラ１３がネットワーク１５上から削除されたことを検知した場合、ＰＣ１４に対して、その旨を示すメッセージ等を表示させるようにしても良いものである。
【００６５】
図６は、上記した実施の形態の変形例を示している。すなわち、図１で示したカメラ１，１２，１３及びＰＣ１４が接続されたネットワーク１５に、カメラ２４，２５が接続された他のネットワーク２６が、ルータ２７によって接続されている。
【００６６】
この場合、ネットワーク１５上で機能しているカメラ自動検索プロトコル（ＲＮＣＰ）は、ルータ２７を通過することができないため、ネットワーク２７上に接続されているカメラ２４，２５の検索を行なうことはできない。つまり、ネットワーク１５上のカメラ１１，１２，１３が、ネットワーク２７上のカメラ２４，２５を認識することはできない。
【００６７】
このような場合、クライアントは、ネットワーク２７上に接続されているカメラ２４，２５のＩＰアドレスを、ネットワーク１５上に接続されている全てのカメラ１１，１２，１３にそれぞれ手動操作で記録させる。
【００６８】
これにより、ＰＣ１４で例えばカメラ１１にアクセスして、そのメモリ２３の内容を見ることにより、ネットワーク１５，２６に接続されている全てのカメラ１１，１２，１３，２４，２５を把握することが可能となる。
【００６９】
また、ＰＣ１４でカメラ１１にアクセスし、マルチ画面表示を要求した場合、カメラ１１のＭＰＵ２２は、まず、カメラの総数が５であることから、マルチ画面表示のためのレイアウトとして９画面を作成するモードを選定し、そのモード情報をＰＣ１４に送出する。
【００７０】
このため、ＰＣ１４では、カメラ１１から送出されたモード情報に応じて、図７に示すように、その画像表示部１４ａの画面を９個の領域ａ，ｂ，ｃ，ｄ，ｅ，ｆ，ｇ，ｈ，ｉに分割する。
【００７１】
その後、カメラ１１のＭＰＵ２２は、ＰＣ１４に対して、その画像表示部１４ａの分割された９個の領域ａ〜ｉにそれぞれ画像を表示させるための画像信号を、各カメラ１１，１２，１３，２４，２５から取得するように、指示を送出する。
【００７２】
この場合、カメラ１１のＭＰＵ２２は、領域ａ，ｂ，ｃ，ｄ，ｅに画像を表示させるための画像信号を、それぞれカメラ１１，１２，１３，２４，２５から取得し、領域ｆ，ｇ，ｈ，ｉをそれぞれ無表示状態にするように、ＰＣ１４に指示を発生する。
【００７３】
これにより、画像表示部１４ａの領域ａ，ｂ，ｃ，ｄ，ｅに、それぞれカメラ１１，１２，１３，２４，２５の画像が表示され、領域ｆ，ｇ，ｈ，ｉが無表示状態となる。
【００７４】
ここで、上記した実施の形態及びその変形例では、マルチ画面表示が要求された場合に、ネットワーク１５，２６に接続されている全てのカメラ１１，１２，１３，２４，２５の画像を分割表示させるようにしている。
【００７５】
しかしながら、これに限らず、例えばＰＣ１４で画像をマルチ画面表示させるカメラを指定することにより、その指定されたカメラの画像のみをマルチ画面表示させるようにすることも可能である。
【００７６】
なお、この発明は上記した実施の形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を種々変形して具体化することができる。
【００７７】
また、上記した実施の形態に開示されている複数の構成要素を適宜に組み合わせることにより、種々の発明を形成することができる。例えば、実施の形態に示される全構成要素から幾つかの構成要素を削除しても良いものである。
【００７８】
【発明の効果】
以上詳述したようにこの発明によれば、ネットワーク上でカメラの増設、削減、変更等があっても、煩雑な操作を行なうことなく容易に各カメラから得られる画像をマルチ画面表示することを可能としたネットワーク接続カメラ及び画像表示方法を提供することができる。
【図面の簡単な説明】
【図１】 この発明の実施の形態を示すもので、監視システムの概略を説明するために示す図。
【図２】 同実施の形態におけるカメラの信号処理系を説明するために示すブロック構成図。
【図３】 同実施の形態におけるネットワーク上でのカメラ自動検索動作を説明するために示す図。
【図４】 同実施の形態におけるマルチ画面表示動作を説明するために示すフローチャート。
【図５】 同実施の形態におけるマルチ画面表示のレイアウトの一例を説明するために示す図。
【図６】 同実施の形態における監視システムの変形例を説明するために示す図。
【図７】 同実施の形態におけるマルチ画面表示のレイアウトの他の例を説明するために示す図。
【符号の説明】
１１，１２，１３…カメラ、１４…ＰＣ、１５…ネットワーク、１６…撮像レンズ、１７…固体撮像素子、１８…画像信号処理部、１９…画像信号圧縮部、２０…有線入出力制御部、２１…無線入出力制御部、２２…ＭＰＵ、２３…メモリ、２４，２５…カメラ、２６…ネットワーク、２７…ルータ。
Claims (6)
- 自己の位置情報を含む検索メッセージをネットワーク上に周期的に送出する検索メッセージ送出手段と、
前記ネットワーク上から検索メッセージを検知した状態で、自己の位置情報を含む返信メッセージをネットワーク上に送出する返信メッセージ送出手段と、
前記ネットワーク上から検索メッセージ及び返信メッセージを検知し、該検索メッセージ及び返信メッセージに含まれる位置情報を記録する記録手段と、
前記ネットワークを介してマルチ画面表示が要求された状態で、前記記録手段の記録内容に基づいて、マルチ画面表示を行なわせるための情報を前記ネットワークに送出する情報送出手段とを具備してなることを特徴とするネットワーク接続カメラ。 - 前記記録手段は、前記検索メッセージ送出手段により前記ネットワーク上に周期的に送出される各検索メッセージに対して、前記ネットワーク上で検知された返信メッセージに基づいて、記録内容を変更することを特徴とする請求項１記載のネットワーク接続カメラ。
- 前記記録手段は、前記検索メッセージ送出手段により前記ネットワーク上に周期的に送出される各検索メッセージに対して、前記ネットワーク上で新たな返信メッセージが検知された状態で、その新たな返信メッセージに含まれる位置情報を記録内容に追加することを特徴とする請求項１記載のネットワーク接続カメラ。
- 前記記録手段は、前記検索メッセージ送出手段により前記ネットワーク上に周期的に送出される各検索メッセージに対して、同じ返信メッセージが前記ネットワーク上で検知されない状態が所定の回数に達したとき、その検知されない返信メッセージに対応して既に記録されている位置情報を消去することを特徴とする請求項１記載のネットワーク接続カメラ。
- 前記情報送出手段は、マルチ画面表示のためのレイアウトを指定する情報と、この情報で指定されたレイアウトで示される各分割領域にそれぞれ表示させる画像の取得先を指定する情報とを、前記ネットワークに送出することを特徴とする請求項１記載のネットワーク接続カメラ。
- 自己の位置情報を含む検索メッセージをネットワーク上に周期的に送出する検索メッセージ送出手段と、
前記ネットワーク上から検索メッセージを検知した状態で、自己の位置情報を含む返信メッセージをネットワーク上に送出する返信メッセージ送出手段と、
前記ネットワーク上から検索メッセージ及び返信メッセージを検知し、該検索メッセージ及び返信メッセージに含まれる位置情報を記録する記録手段と、
前記ネットワークを介してマルチ画面表示が要求された状態で、前記記録手段の記録内容に基づいて、マルチ画面表示を行なわせるための情報を前記ネットワークに送出する情報送出手段とを備えたネットワーク接続カメラの画像を表示する方法であって、
前記マルチ画面表示のためのレイアウトを指定する第１の情報と、この第１の情報で指定されたレイアウトで示される各分割領域にそれぞれ表示させる画像の取得先を指定する第２の情報とを、前記ネットワークを介して取得する工程と、
前記第１の情報で指定されるレイアウトに基づいて表示画面を複数の領域に分割するとともに、前記第２の情報で指定される複数の取得先から前記ネットワークを介して画像信号を取得する工程と、
前記ネットワークを介して前記複数の取得先から取得した各画像信号を、前記表示画面の各分割領域にそれぞれ対応させて表示する工程とを具備してなることを特徴とする画像 表示方法。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003096302A JP3748439B2 (ja) | 2003-03-31 | 2003-03-31 | ネットワーク接続カメラ及び画像表示方法 |
| US10/805,248 US20040246339A1 (en) | 2003-03-31 | 2004-03-22 | Network-connected camera and image display method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003096302A JP3748439B2 (ja) | 2003-03-31 | 2003-03-31 | ネットワーク接続カメラ及び画像表示方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004304602A JP2004304602A (ja) | 2004-10-28 |
| JP3748439B2 true JP3748439B2 (ja) | 2006-02-22 |
Family
ID=33408408
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003096302A Expired - Fee Related JP3748439B2 (ja) | 2003-03-31 | 2003-03-31 | ネットワーク接続カメラ及び画像表示方法 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US20040246339A1 (ja) |
| JP (1) | JP3748439B2 (ja) |
Families Citing this family (96)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6658091B1 (en) | 2002-02-01 | 2003-12-02 | @Security Broadband Corp. | LIfestyle multimedia security system |
| US11811845B2 (en) | 2004-03-16 | 2023-11-07 | Icontrol Networks, Inc. | Communication protocols over internet protocol (IP) networks |
| US10375253B2 (en) | 2008-08-25 | 2019-08-06 | Icontrol Networks, Inc. | Security system with networked touchscreen and gateway |
| US10313303B2 (en) | 2007-06-12 | 2019-06-04 | Icontrol Networks, Inc. | Forming a security network including integrated security system components and network devices |
| US9191228B2 (en) | 2005-03-16 | 2015-11-17 | Icontrol Networks, Inc. | Cross-client sensor user interface in an integrated security network |
| US9609003B1 (en) | 2007-06-12 | 2017-03-28 | Icontrol Networks, Inc. | Generating risk profile using data of home monitoring and security system |
| US10444964B2 (en) | 2007-06-12 | 2019-10-15 | Icontrol Networks, Inc. | Control system user interface |
| US8963713B2 (en) | 2005-03-16 | 2015-02-24 | Icontrol Networks, Inc. | Integrated security network with security alarm signaling system |
| US11677577B2 (en) | 2004-03-16 | 2023-06-13 | Icontrol Networks, Inc. | Premises system management using status signal |
| US11244545B2 (en) | 2004-03-16 | 2022-02-08 | Icontrol Networks, Inc. | Cross-client sensor user interface in an integrated security network |
| US11316958B2 (en) | 2008-08-11 | 2022-04-26 | Icontrol Networks, Inc. | Virtual device systems and methods |
| US20090077623A1 (en) | 2005-03-16 | 2009-03-19 | Marc Baum | Security Network Integrating Security System and Network Devices |
| US11916870B2 (en) | 2004-03-16 | 2024-02-27 | Icontrol Networks, Inc. | Gateway registry methods and systems |
| US10200504B2 (en) | 2007-06-12 | 2019-02-05 | Icontrol Networks, Inc. | Communication protocols over internet protocol (IP) networks |
| US11190578B2 (en) | 2008-08-11 | 2021-11-30 | Icontrol Networks, Inc. | Integrated cloud system with lightweight gateway for premises automation |
| US10062273B2 (en) | 2010-09-28 | 2018-08-28 | Icontrol Networks, Inc. | Integrated security system with parallel processing architecture |
| US11159484B2 (en) | 2004-03-16 | 2021-10-26 | Icontrol Networks, Inc. | Forming a security network including integrated security system components and network devices |
| US11277465B2 (en) | 2004-03-16 | 2022-03-15 | Icontrol Networks, Inc. | Generating risk profile using data of home monitoring and security system |
| US9141276B2 (en) | 2005-03-16 | 2015-09-22 | Icontrol Networks, Inc. | Integrated interface for mobile device |
| US10156959B2 (en) | 2005-03-16 | 2018-12-18 | Icontrol Networks, Inc. | Cross-client sensor user interface in an integrated security network |
| US10721087B2 (en) | 2005-03-16 | 2020-07-21 | Icontrol Networks, Inc. | Method for networked touchscreen with integrated interfaces |
| US20170118037A1 (en) | 2008-08-11 | 2017-04-27 | Icontrol Networks, Inc. | Integrated cloud system for premises automation |
| US20160065414A1 (en) | 2013-06-27 | 2016-03-03 | Ken Sundermeyer | Control system user interface |
| US10522026B2 (en) | 2008-08-11 | 2019-12-31 | Icontrol Networks, Inc. | Automation system user interface with three-dimensional display |
| US10382452B1 (en) | 2007-06-12 | 2019-08-13 | Icontrol Networks, Inc. | Communication protocols in integrated systems |
| US10339791B2 (en) | 2007-06-12 | 2019-07-02 | Icontrol Networks, Inc. | Security network integrated with premise security system |
| US9531593B2 (en) | 2007-06-12 | 2016-12-27 | Icontrol Networks, Inc. | Takeover processes in security network integrated with premise security system |
| US9729342B2 (en) | 2010-12-20 | 2017-08-08 | Icontrol Networks, Inc. | Defining and implementing sensor triggered response rules |
| US11582065B2 (en) | 2007-06-12 | 2023-02-14 | Icontrol Networks, Inc. | Systems and methods for device communication |
| US10237237B2 (en) | 2007-06-12 | 2019-03-19 | Icontrol Networks, Inc. | Communication protocols in integrated systems |
| US11201755B2 (en) | 2004-03-16 | 2021-12-14 | Icontrol Networks, Inc. | Premises system management using status signal |
| US20050216302A1 (en) | 2004-03-16 | 2005-09-29 | Icontrol Networks, Inc. | Business method for premises management |
| US8988221B2 (en) | 2005-03-16 | 2015-03-24 | Icontrol Networks, Inc. | Integrated security system with parallel processing architecture |
| US7711796B2 (en) | 2006-06-12 | 2010-05-04 | Icontrol Networks, Inc. | Gateway registry methods and systems |
| US8635350B2 (en) | 2006-06-12 | 2014-01-21 | Icontrol Networks, Inc. | IP device discovery systems and methods |
| US11113950B2 (en) | 2005-03-16 | 2021-09-07 | Icontrol Networks, Inc. | Gateway integrated with premises security system |
| US11368429B2 (en) | 2004-03-16 | 2022-06-21 | Icontrol Networks, Inc. | Premises management configuration and control |
| US11489812B2 (en) | 2004-03-16 | 2022-11-01 | Icontrol Networks, Inc. | Forming a security network including integrated security system components and network devices |
| US11343380B2 (en) | 2004-03-16 | 2022-05-24 | Icontrol Networks, Inc. | Premises system automation |
| US10142392B2 (en) | 2007-01-24 | 2018-11-27 | Icontrol Networks, Inc. | Methods and systems for improved system performance |
| US20110128378A1 (en) | 2005-03-16 | 2011-06-02 | Reza Raji | Modular Electronic Display Platform |
| US11615697B2 (en) | 2005-03-16 | 2023-03-28 | Icontrol Networks, Inc. | Premise management systems and methods |
| US9450776B2 (en) | 2005-03-16 | 2016-09-20 | Icontrol Networks, Inc. | Forming a security network including integrated security system components |
| US10999254B2 (en) | 2005-03-16 | 2021-05-04 | Icontrol Networks, Inc. | System for data routing in networks |
| US20120324566A1 (en) | 2005-03-16 | 2012-12-20 | Marc Baum | Takeover Processes In Security Network Integrated With Premise Security System |
| US11700142B2 (en) | 2005-03-16 | 2023-07-11 | Icontrol Networks, Inc. | Security network integrating security system and network devices |
| US9306809B2 (en) | 2007-06-12 | 2016-04-05 | Icontrol Networks, Inc. | Security system with networked touchscreen |
| US20170180198A1 (en) | 2008-08-11 | 2017-06-22 | Marc Baum | Forming a security network including integrated security system components |
| US11496568B2 (en) | 2005-03-16 | 2022-11-08 | Icontrol Networks, Inc. | Security system with networked touchscreen |
| US9059863B2 (en) * | 2005-03-16 | 2015-06-16 | Icontrol Networks, Inc. | Method for data routing in networks |
| WO2007013231A1 (ja) * | 2005-07-29 | 2007-02-01 | Matsushita Electric Industrial Co., Ltd. | 撮影領域調整装置 |
| JP2007043390A (ja) * | 2005-08-02 | 2007-02-15 | Toshiba Corp | 映像配信システム及びその方法 |
| US10079839B1 (en) | 2007-06-12 | 2018-09-18 | Icontrol Networks, Inc. | Activation of gateway device |
| JP2008054061A (ja) * | 2006-08-24 | 2008-03-06 | Ikegami Tsushinki Co Ltd | ネットワークカメラ中継装置及びカメラ監視システム |
| US11706279B2 (en) | 2007-01-24 | 2023-07-18 | Icontrol Networks, Inc. | Methods and systems for data communication |
| TW200833091A (en) * | 2007-01-31 | 2008-08-01 | Etrovision Technology | Remote control method for IP (internet protocol) camera |
| US7633385B2 (en) | 2007-02-28 | 2009-12-15 | Ucontrol, Inc. | Method and system for communicating with and controlling an alarm system from a remote server |
| US8451986B2 (en) | 2007-04-23 | 2013-05-28 | Icontrol Networks, Inc. | Method and system for automatically providing alternate network access for telecommunications |
| US11601810B2 (en) | 2007-06-12 | 2023-03-07 | Icontrol Networks, Inc. | Communication protocols in integrated systems |
| US11316753B2 (en) | 2007-06-12 | 2022-04-26 | Icontrol Networks, Inc. | Communication protocols in integrated systems |
| US10616075B2 (en) | 2007-06-12 | 2020-04-07 | Icontrol Networks, Inc. | Communication protocols in integrated systems |
| US10423309B2 (en) | 2007-06-12 | 2019-09-24 | Icontrol Networks, Inc. | Device integration framework |
| US10051078B2 (en) | 2007-06-12 | 2018-08-14 | Icontrol Networks, Inc. | WiFi-to-serial encapsulation in systems |
| US10523689B2 (en) | 2007-06-12 | 2019-12-31 | Icontrol Networks, Inc. | Communication protocols over internet protocol (IP) networks |
| US12003387B2 (en) | 2012-06-27 | 2024-06-04 | Comcast Cable Communications, Llc | Control system user interface |
| US10389736B2 (en) | 2007-06-12 | 2019-08-20 | Icontrol Networks, Inc. | Communication protocols in integrated systems |
| US11423756B2 (en) | 2007-06-12 | 2022-08-23 | Icontrol Networks, Inc. | Communication protocols in integrated systems |
| US11646907B2 (en) | 2007-06-12 | 2023-05-09 | Icontrol Networks, Inc. | Communication protocols in integrated systems |
| US11237714B2 (en) | 2007-06-12 | 2022-02-01 | Control Networks, Inc. | Control system user interface |
| US11212192B2 (en) | 2007-06-12 | 2021-12-28 | Icontrol Networks, Inc. | Communication protocols in integrated systems |
| US10498830B2 (en) | 2007-06-12 | 2019-12-03 | Icontrol Networks, Inc. | Wi-Fi-to-serial encapsulation in systems |
| US10666523B2 (en) | 2007-06-12 | 2020-05-26 | Icontrol Networks, Inc. | Communication protocols in integrated systems |
| US11218878B2 (en) | 2007-06-12 | 2022-01-04 | Icontrol Networks, Inc. | Communication protocols in integrated systems |
| US11089122B2 (en) | 2007-06-12 | 2021-08-10 | Icontrol Networks, Inc. | Controlling data routing among networks |
| US11831462B2 (en) | 2007-08-24 | 2023-11-28 | Icontrol Networks, Inc. | Controlling data routing in premises management systems |
| US11916928B2 (en) | 2008-01-24 | 2024-02-27 | Icontrol Networks, Inc. | Communication protocols over internet protocol (IP) networks |
| US20170185278A1 (en) | 2008-08-11 | 2017-06-29 | Icontrol Networks, Inc. | Automation system user interface |
| US11792036B2 (en) | 2008-08-11 | 2023-10-17 | Icontrol Networks, Inc. | Mobile premises automation platform |
| US11758026B2 (en) | 2008-08-11 | 2023-09-12 | Icontrol Networks, Inc. | Virtual device systems and methods |
| US11729255B2 (en) | 2008-08-11 | 2023-08-15 | Icontrol Networks, Inc. | Integrated cloud system with lightweight gateway for premises automation |
| US11258625B2 (en) | 2008-08-11 | 2022-02-22 | Icontrol Networks, Inc. | Mobile premises automation platform |
| US9628440B2 (en) | 2008-11-12 | 2017-04-18 | Icontrol Networks, Inc. | Takeover processes in security network integrated with premise security system |
| US8638211B2 (en) | 2009-04-30 | 2014-01-28 | Icontrol Networks, Inc. | Configurable controller and interface for home SMA, phone and multimedia |
| AU2011250886A1 (en) | 2010-05-10 | 2013-01-10 | Icontrol Networks, Inc | Control system user interface |
| US8836467B1 (en) | 2010-09-28 | 2014-09-16 | Icontrol Networks, Inc. | Method, system and apparatus for automated reporting of account and sensor zone information to a central station |
| JP5724346B2 (ja) * | 2010-12-09 | 2015-05-27 | ソニー株式会社 | 映像表示装置、映像表示システム、映像表示方法およびプログラム |
| US11750414B2 (en) | 2010-12-16 | 2023-09-05 | Icontrol Networks, Inc. | Bidirectional security sensor communication for a premises security system |
| US9147337B2 (en) | 2010-12-17 | 2015-09-29 | Icontrol Networks, Inc. | Method and system for logging security event data |
| KR101183603B1 (ko) | 2011-06-20 | 2012-09-17 | 주식회사 아이티엑스시큐리티 | 네트워크 비디오 레코더의 화면 출력 제어장치 |
| US9928975B1 (en) | 2013-03-14 | 2018-03-27 | Icontrol Networks, Inc. | Three-way switch |
| US9287727B1 (en) | 2013-03-15 | 2016-03-15 | Icontrol Networks, Inc. | Temporal voltage adaptive lithium battery charger |
| US9867143B1 (en) | 2013-03-15 | 2018-01-09 | Icontrol Networks, Inc. | Adaptive Power Modulation |
| EP3031206B1 (en) | 2013-08-09 | 2020-01-22 | ICN Acquisition, LLC | System, method and apparatus for remote monitoring |
| WO2015040732A1 (ja) * | 2013-09-20 | 2015-03-26 | 株式会社日立国際電気 | 映像監視システム及び映像表示方法 |
| US11146637B2 (en) | 2014-03-03 | 2021-10-12 | Icontrol Networks, Inc. | Media content management |
| US11405463B2 (en) | 2014-03-03 | 2022-08-02 | Icontrol Networks, Inc. | Media content management |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5926210A (en) * | 1995-07-28 | 1999-07-20 | Kalatel, Inc. | Mobile, ground-based platform security system which transmits images that were taken prior to the generation of an input signal |
| JP3729660B2 (ja) * | 1998-09-04 | 2005-12-21 | 松下電器産業株式会社 | ネットワークカメラ監視システム |
| JP4235300B2 (ja) * | 1999-01-14 | 2009-03-11 | キヤノン株式会社 | 通信システム |
-
2003
- 2003-03-31 JP JP2003096302A patent/JP3748439B2/ja not_active Expired - Fee Related
-
2004
- 2004-03-22 US US10/805,248 patent/US20040246339A1/en not_active Abandoned
Also Published As
| Publication number | Publication date |
|---|---|
| US20040246339A1 (en) | 2004-12-09 |
| JP2004304602A (ja) | 2004-10-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3748439B2 (ja) | ネットワーク接続カメラ及び画像表示方法 | |
| KR101114796B1 (ko) | Ｄｌｎａ 시스템에서의 썸네일을 이용한 이미지 관리방법 및 그 시스템 | |
| JP4618325B2 (ja) | 情報処理装置及び情報処理方法並びにプログラム | |
| DE69906711T2 (de) | Abruf von Bildern von einer tragbaren Digitalkamera über das Internet | |
| US6856346B1 (en) | Camera operation apparatus | |
| US8466968B2 (en) | Image processing apparatus, method of controlling the apparatus and communication system | |
| JP6573297B1 (ja) | 監視カメラおよび検知方法 | |
| US6822676B1 (en) | Camera control system with electronic zoom processing | |
| GB2426652A (en) | Transmission of video frames having given characteristics | |
| CN106791703B (zh) | 基于全景视图来监视场景的方法和系统 | |
| JP2015154465A (ja) | 表示制御装置、表示制御方法及びプログラム | |
| EP4064647A1 (en) | Management system, communication system, information processing method, and carrier means | |
| KR102664027B1 (ko) | 인공지능에 기반하여 영상을 분석하는 카메라 및 그것의 동작 방법 | |
| JP4573244B2 (ja) | 情報処理装置、制御方法、及びプログラム | |
| JP6257197B2 (ja) | 情報処理装置及びその制御方法、プログラム、並びに記憶媒体 | |
| JP5045094B2 (ja) | 異常検出システム、その異常検出サーバ及び異常検出サーバプログラム | |
| JP7073120B2 (ja) | 映像送信装置、情報処理装置、システム、情報処理方法及びプログラム | |
| JP6492615B2 (ja) | 監視カメラ、画像管理サーバ及びシステム、並びに、監視カメラ及び画像管理サーバの制御方法 | |
| JP6252921B1 (ja) | 監視カメラシステム及び再生方法 | |
| JP6666557B2 (ja) | 画像管理システム、画像管理システムに用いられる情報処理装置、情報処理装置による情報提示方法及びプログラム | |
| JP4646780B2 (ja) | カメラシステム | |
| US11653087B2 (en) | Information processing device, information processing system, and information processing method | |
| US20240232300A1 (en) | Management system, communication system, and information processing method | |
| JP7284600B2 (ja) | 撮像装置、撮像装置の制御方法、情報処理装置、情報処理装置の制御方法 | |
| KR101271091B1 (ko) | 지도 정보를 이용한 영상처리 방법 및 그 장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050629 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050823 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051024 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20051122 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20051125 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091209 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091209 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101209 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111209 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121209 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121209 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131209 Year of fee payment: 8 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |