JP3905740B2 - Internet camera system - Google Patents

Internet camera system Download PDF

Info

Publication number
JP3905740B2
JP3905740B2 JP2001328628A JP2001328628A JP3905740B2 JP 3905740 B2 JP3905740 B2 JP 3905740B2 JP 2001328628 A JP2001328628 A JP 2001328628A JP 2001328628 A JP2001328628 A JP 2001328628A JP 3905740 B2 JP3905740 B2 JP 3905740B2
Authority
JP
Japan
Prior art keywords
internet
file server
internet camera
image
terminal device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2001328628A
Other languages
Japanese (ja)
Other versions
JP2002204317A (en
Inventor
清 根岸
雅雄 石川
Original Assignee
ペンタックス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ペンタックス株式会社 filed Critical ペンタックス株式会社
Priority to JP2001328628A priority Critical patent/JP3905740B2/en
Publication of JP2002204317A publication Critical patent/JP2002204317A/en
Application granted granted Critical
Publication of JP3905740B2 publication Critical patent/JP3905740B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、インターネット上のファイルサーバと、公衆電話回線網経由でインターネットに接続し前記ファイルサーバに画像データを転送可能な画像配信型インターネットカメラと、前記ファイルサーバに転送された画像データを閲覧可能な端末装置と、を有するインターネットカメラシステムに関する。
【0002】
【従来の技術】
従来のインターネットカメラシステムとしては、例えば特許3034243号に記載されたものがある。同公報記載のインターネットカメラシステムが備えるインターネットカメラは、所定のスケジュールに従って、デジタル画像データをインターネット上の所定のファイルサーバに転送する機能を有している。
【0003】
従って、前記所定のファイルサーバにアカウントを有するユーザは、インターネットに接続された前記所定のファイルサーバのクライアント機能を有する端末装置を操作して前記所定のファイルサーバに保管された画像データを閲覧することができる。
【0004】
しかしながら、従来のインターネットカメラシステムにおいては、例えば一時間間隔といった所定のスケジュールに従って前記インターネットカメラから転送される画像データを閲覧することのみ可能であり、前記インターネットカメラが撮像している映像をユーザが任意のタイミングで閲覧するといったことはできなかった。
【0005】
【発明が解決しようとする課題】
本発明は上記の問題に鑑み、端末装置よりインターネットカメラを操作して、インターネットカメラが撮像している映像を任意のタイミングで閲覧可能な、インターネットカメラシステムを提供することを目的とする。
【0006】
【課題を解決するための手段】
上記の目的を達成するために、本発明のインターネットカメラシステムは、
端末装置は、ファイルサーバに所定のデータを送信する送信手段を有し、
ファイルサーバは、端末装置から所定のデータを受信するとモデム装置に対して電話をかける発呼手段を有し、
インターネットカメラは、モデム装置に対する着信を検出すると、を撮像して前記ファイルサーバに撮像画像を配信する、配信制御手段を有する。
【0007】
従って、端末装置を操作することにより、所望のタイミングでインターネットカメラが撮像した画像を端末装置のモニタに表示させることができる。また、端末装置自身は公衆電話回線網に接続するモデム装置を必要としないため、公衆電話回線網経由で端末装置に侵入されるおそれが無いため、セキュリティ上好適である。
【0008】
また、ファイルサーバが、前記モデム装置に対する着信をトリガとする前記インターネットカメラからの撮像画像の転送が完了した後、画像転送完了を端末装置に報知することにより、インターネットカメラが画像をファイルサーバに転送後、直ちに端末装置はインターネットカメラがファイルサーバに転送した画像をモニタに表示させることができる。
【0009】
さらに、発呼手段が、ファイルサーバより操作されて前記モデム装置に電話を掛けた後、回線接続が確立される前に電話回線を切断する構成とすることにより、第1のモデム装置は公衆電話回線網の回線使用料なしでインターネットカメラに画像転送をリクエストすることができる。
【0010】
また、端末装置が入力手段を有し、かつこの入力手段が例えばマウス等のモニタに表示されたポインタを移動させる、ボタンを有するポインティングデバイスであり、
ポインティングデバイスを操作して、ポインタを所定の位置に移動させてボタンを押下することによって、端末装置がインターネット経由でファイルサーバに、インターネットカメラの画像転送をリクエストするデータを送信する構成としてもよい。
【0011】
さらに、インターネットカメラシステムが、インターネットカメラを複数台有し、
ポインティングデバイスのボタンを押下した時のポインタの位置に応じて、端末装置が異なるインターネットカメラの画像転送をリクエストするデータを、インターネット経由でファイルサーバに送信する構成としてもよい。
【0012】
このような構成とすることにより、平易な操作により、複数台のインターネットカメラのうち、所望のインターネットカメラが撮像した画像を閲覧することができる。
【0013】
また、インターネットカメラシステムが、インターネットカメラを複数台有し、
ポインティングデバイスを操作して、ポインタを所定の位置に移動させてボタンを押下することによって、端末装置がインターネット経由で前記ファイルサーバに、全てのインターネットカメラの画像転送をリクエストするデータを送信する構成としてもよい。
【0014】
このような構成とすることにより、単一の操作により、複数台のインターネットカメラの全てが撮像した画像を閲覧することができる。
【0015】
さらに、モデム装置が、モデム装置にかかってきた電話の発信元を特定する情報を検知する機能を有し、モデム装置にかかった電話の発信元が発呼手段ではない時は、インターネットカメラは撮像装置により撮像した画像を前記ファイルサーバに転送しない構成としてもよい。このような構成とすることにより、間違い電話等によって、前記端末装置のユーザの意図しない画像取り込みは防止される。
【0016】
なお、モデム装置にかかってきた電話の発信元を特定する情報としては、例えばNTTのナンバーディスプレイサービス等によって第2のモデム装置に通達される、発信元の電話番号がある。
【0017】
【発明の実施の形態】
本発明の実施の形態のインターネットカメラシステムを図1に模式的に示す。本発明のインターネットカメラシステムは、複数台(図1中では3台)のインターネットカメラ1、インターネット200上に配置されたファイルサーバ201、ローカル・エリア・ネットワーク(以下LANと称す)300上に配置された少なくとも1台のクライアントPC301を有している。
【0018】
ここで、インターネットカメラ1は撮像した画像データをファイルサーバに転送する装置である。また、インターネットカメラ1はモデム装置10を具備している。このモデム装置10が公衆電話回線網100経由でインターネット上の第1のゲートウェイ101と通信することにより、インターネットカメラ1はインターネット200への接続を確立する。インターネットカメラ1はインターネット200へ接続することにより、インターネット200上のファイルサーバ201に対してデータの送受信を行うことができる。
【0019】
また、インターネット200上のファイルサーバ201は、ファイル転送プロトコル(FTP)サービス、簡易メール転送プロトコル(SMTP)サービス、ポストオフィスプロトコル(POP)サービス、およびハイパーテキスト転送プロトコル(HTTP)を提供するものである。さらに、ファイルサーバ201はモデム装置210を具備し、公衆電話回線100を通じて電話をかける機能を有する。
【0020】
また、LAN300上のクライアントPC301は、イーサネット(R)カード等のネットワーク・インターフェイス303を具備している。このネットワーク・インターフェイス303が、インターネット200とLAN300の両方に接続されている第2のゲートウェイ320と交信することにより、クライアントPC301はインターネット200への接続を確立し、インターネット200上のファイルサーバ201に対してデータの送受信を行うことができる。
【0021】
図2はインターネットカメラ1を模式的に示したブロック図である。撮像装置3は対物光学系を介してCCD等の撮像素子上に結像された像をディジタル信号として出力する装置である。制御手段2はこの撮像装置3とメモリ4を制御して撮像装置3より出力されたディジタル信号を、JPEG等の所定の画像フォーマットの画像ファイルに変換し、メモリ4に保存することができる。
【0022】
また、メモリ4はまた、画像ファイルと共にスケジュールデータを保持可能であり、制御手段2はこのスケジュールデータに基づく時刻に撮像装置3より出力されたディジタル信号を画像ファイルに変換してメモリ4に保存する。
【0023】
さらにインターネットカメラ1のメモリ4にはFTPクライアントプログラムが展開されている。インターネットカメラ1の制御手段2は、画像ファイルがメモリ4に保存された後、インターネット200への接続を確立し、FTPクライアントプログラムにより前記画像ファイルをインターネット200上のファイルサーバ201に転送する。なお、画像ファイル転送後、インターネット200への接続は強制的に切断されるので、画像ファイルの転送に伴う通信コストは必要最低限に抑えられる。
【0024】
なお、インターネットカメラ1のメモリ4には、SMTPとPOPを用いて電子メールの送受信を行う電子メールクライアントプログラムが展開されている。ここで、インターネットカメラ1の制御手段2は所定の間隔でインターネット200への接続を確立して電子メールクライアントプログラムによりファイルサーバ201のSMTPサービスプログラムおよびPOPサービスプログラムの提供するメールボックスを確認し、インターネットカメラシステムの管理者よりスケジュールデータが含まれた電子メールを受信した場合はスケジュールデータを更新する。なお、メールボックス確認後、インターネット200への接続は強制的に切断される
【0025】
また、インターネットカメラ1はトリガスイッチボタン5をさらに有している。このトリガスイッチボタン5が押下されると、そのときに撮像装置3より出力されたディジタル信号は制御手段2によって直ちに画像ファイルに変換され、インターネット200への接続を確立した後、ファイルサーバ201に前記画像ファイルが転送される。なお、画像ファイル転送後、インターネット200への接続は強制的に切断される。
【0026】
図3はインターネット200上のファイルサーバ201を模式的に示したブロック図である。ファイルサーバ201はインターネット200を介してデータの送受信を行うネットワーク・インターフェイス203と、各種ファイルを保存するストレージ装置205を有する。ここで、ファイルサーバ201の制御手段202はネットワーク・インターフェイス203を制御してインターネット200を介してインターネットカメラ1から転送された画像ファイルを受信し、さらにストレージ装置205を制御して受信した画像ファイルをストレージ装置205の所定のディレクトリに保管する。
【0027】
この画像データの保管作業は、ファイルサーバ201のメモリ204に展開されたFTPサービスプログラムによって行われる。
【0028】
またメモリ204に展開されたHTTPサービスプログラムは、ストレージ装置205の所定のディレクトリに保管された画像データを、インターネット200に接続された任意のまたは特定の端末装置から閲覧可能にする。
【0029】
さらに、ファイルサーバ201はモデム装置210を有しており、ファイルサーバ201の制御手段202はモデム装置210を制御して任意の電話番号に電話をかけることができる。
【0030】
図4はLAN300上のクライアントPC301を模式的に示したブロック図である。クライアントPC301はLAN300へ常時接続し、LAN300上の第2のゲートウェイ320を経由してインターネット200に接続可能なネットワーク・インターフェイス303を備えている。さらにクライアントPC301はメモリ304を有している。このメモリ304には、HTTPを用いてファイルサーバ201からデータを送受信するHTTPクライアントプログラムが展開されている。クライアントPC301の制御手段302はこのHTTPクライアントプログラムを実行し、ネットワーク・インターフェイス303を制御してファイルサーバ201のストレージ装置205に保存された任意の画像ファイルをクライアントPC301のメモリ304に転送可能である。
【0031】
また、クライアントPC301はさらにモニタ305を備えている。さらに、クライアントPC301のメモリ304に展開されたHTTPクライアントプログラムはメモリに展開された画像ファイルをモニタ305上に表示する機能を有している。従って、HTTPクライアントプログラムの実行されているクライアントPC301は、前記スケジュールデータに従ってインターネットカメラ1からファイルサーバ201に転送された画像ファイルを逐次モニタ305に表示させることが可能である。すなわち、クライアントPC301のユーザは、前記スケジュールデータに従う時刻にインターネットカメラ1が撮像した画像を遠隔地のクライアントPC301のモニタ305上で閲覧することができる。
【0032】
さらに、クライアントPC301はモニタ305上に表示されたポインタを動かすポインティングデバイス306を有しており、クライアントPC301のユーザはこのポインティングデバイス306によってHTTPクライアントプログラムを操作することができる。さらに、このポインティングデバイス306は少なくとも1つのボタンを有しており、このボタンが押下された時の前記ポインタの画面上の位置を、クライアントPC301の制御手段302に通知することができる。
【0033】
クライアントPC301のモニタ305の画面を図5に示す。なお、本実施例ではモニタ305で画像を閲覧するインターネットカメラ1の台数を3台としているが、クライアントPC301のユーザが同時に監視可能なインターネットカメラ1の台数は何台であっても構わない。画面400には画像表示領域401、402、403が表示されており、そのそれぞれにはインターネットカメラ1のそれぞれがファイルサーバ201に転送している画像ファイルが表示されている。このHTTPクライアントプログラムは一定の間隔(例えば1分)でファイルサーバ201にアクセスしており、画像表示領域401、402、403には対応するインターネットカメラ1がファイルサーバ201に転送した最新の画像ファイルおよび、それぞれの画像ファイルの撮像時刻が表示されるようになっている。
【0034】
また、画像表示領域401、402、403のそれぞれの下部には第1の画像取り込みボタン411、412、413が配置されている。ここで、第1の画像取り込みボタン411、412、413のいずれかにポインタ404を重ねてポインティングデバイス306のボタンを押下する(以下、「第1の画像取り込みボタンを押下する」と略記)と、押下された第1の画像取り込みボタンに対応するインターネットカメラ1の撮像装置3より出力されたディジタル信号が、直ちに画像ファイルに変換され、その画像ファイルが押下された第1の画像取り込みボタンに対応する画像表示領域に表示されるようになっている。
【0035】
また、画面400の下部には第2の画像取り込みボタン420が配置されている。この第2の画像取り込みボタン420にポインタ404を重ねてポインティングデバイス306のボタンを押下する(以下、「第2の画像取り込みボタンを押下する」と略記)と、画像表示領域401、402、403に対応するインターネットカメラ1の撮像装置3より出力されたディジタル信号が、直ちに画像ファイルに変換され、その画像ファイルがそれぞれの画像表示領域401、402、403に表示されるようになっている。すなわち第2の画像取り込みボタン420を押下すると、第1の画像取り込みボタンの押下を全ての第1の画像取り込みボタンに対して実施するのと同様の効果が得られる。
【0036】
第1の画像取り込みボタンを押下した時の、クライアントPC301、ファイルサーバ201、およびインターネットカメラ1の動作手順を、図6〜8に示すフローチャートを用いて説明する。
【0037】
図6は第1の画像取り込みボタンを押下した時の、クライアントPC301で実行される割り込みルーチンを示したフローチャートである。第1の画像取り込みボタンが押下されると、クライアントPC301の制御手段302はステップS301に進み、ファイルサーバ201に第1の画像取り込みボタンに応じたインターネットカメラ1への画像取り込みをリクエストする。ファイルサーバ201の制御手段202はこのリクエストを受信すると、図7のフローチャートに示された割り込みルーチンを実行する。なお、クライアントPC301の制御手段302はステップS302を実行し、ファイルサーバ201からの取り込み完了メッセージを受信するまで(S302:Yes)、待機する(S302:No)。
【0038】
クライアントPC301からリクエストを受信したファイルサーバ201の制御手段202はステップS201を実行し、画像取り込みのリクエスト対象のインターネットカメラ1が画像ファイルをファイルサーバ201に送信しているかどうかを確認する。ここで画像ファイル転送中でなければ(S201:No)ステップS202に進む。一方画像ファイル転送中ならば(S201:Yes)インターネットカメラ1がさらに撮像動作を行わなくともよいので、ステップS203に進む。
【0039】
ステップS202においては、ファイルサーバ201の制御手段202はモデム装置210を制御して画像取り込みのリクエスト対象のインターネットカメラ1に電話をかけて、所定時間経過後(例えば呼び出し音が数回なった後に)電話呼び出しを停止する。ここで、画像取り込みのリクエスト対象のインターネットカメラ1のモデム装置10が電話呼び出しを着信すると、インターネットカメラ1の制御手段は図8のフローに示される割り込みルーチンを実行する。なお、ファイルサーバ201の制御手段202はステップS203を実行し、インターネットカメラ1からのファイル転送(後述)が終了するまで(S203:Yes)、待機する(S203:No)。
【0040】
インターネットカメラ1のモデム装置10が電話呼び出しを着信すると、インターネットカメラ1の制御手段2はステップS101を実行する。ステップS101では着信した電話呼び出しの発信元がファイルサーバ201であるかどうかの確認を行う。すなわち、NTTのナンバーディスプレイのような発信元電話番号報知サービスを利用して、発信元の電話番号がファイルサーバ201のモデム装置210が接続されている回線の電話番号と一致するかどうかのチェックを行っている。
【0041】
ここで、受信した電話呼び出しの発信元がファイルサーバ201でなければ(S101:No)、ステップS111に進んで電話回線を切断して本ルーチンを終了する。従って、間違い電話等による、クライアントPC301のユーザの意図しない画像取り込みは防止される。
【0042】
一方、着信した電話呼び出しの発信元がファイルサーバ201であれば(S101:Yes)、ステップS102に進み、電話呼び出しに応答せずに、ファイルサーバ201の制御手段202の制御によりモデム装置210が電話呼び出しを停止するまで待機する(S102:No)。したがって、回線が接続される前に(すなわち、呼び出し音が鳴り続けている間に)回線が切断されるので、ファイルサーバ201には回線使用料がかからない。
【0043】
一方、ステップ102にて電話回線の切断が確認されたら(S102:Yes)、ステップS103に進み、インターネットカメラ1の撮像装置3より出力されたディジタル信号を画像ファイルに変換し、メモリ4に保存する。次いでステップS104に進み、インターネットカメラ1の制御手段2はモデム装置10を制御してインターネット200への接続を確立する。次いで、ステップS105に進み前述の画像ファイルをファイルサーバ201に転送する。
【0044】
次いで、ステップS106に進み、インターネット200への接続を切断し、本ルーチンを終了する。
【0045】
この時点で、インターネットカメラ1はファイルサーバ201へのファイル転送を完了しているので、ファイルサーバ201の制御手段202は図7のフローチャートにおけるステップS204を実行する。ステップS204でファイルサーバ201の制御手段202はクライアントPC301に対して、インターネットカメラ1が画像ファイルの転送を終了したことを示す取り込み完了メッセージを送信し、本ルーチンを終了する。
【0046】
従って、クライアントPC301はファイルサーバ201から取り込み完了メッセージを受信したので、クライアントPC301の制御手段302は図6のフローチャートのステップS303を実行する。すなわち、クライアントPC301はファイルサーバ201にアクセスし、ステップS105においてインターネットカメラ1がファイルサーバ201に転送した画像ファイルをダウンロードする。
【0047】
次いで、ステップS304に進み、ステップS303でダウンロードした画像ファイルを、モニタ305の押下された第1の画像取り込みボタンに対応する画像表示領域に表示し、本ルーチンを終了する。
【0048】
なお、第2の画像取り込みボタン420が押下された時は、全てのインターネットカメラ1について、図6〜8記載の割り込みルーチンが実行され、その結果画像表示領域401、402、403のそれぞれに表示される画像は更新される。
【図面の簡単な説明】
【図1】本発明の実施の形態のインターネットカメラシステムを模式的に示したものである。
【図2】本発明の実施の形態におけるインターネットカメラを模式的に示したブロック図である。
【図3】本発明の実施の形態におけるファイルサーバを模式的に示したブロック図である。
【図4】本発明の実施の形態におけるクライアントPCを模式的に示したブロック図である。
【図5】本発明の実施の形態におけるクライアントPCのモニタに表示された画面を示したものである。
【図6】本発明の実施の形態において、クライアントPCが実行する割り込みルーチンを示したフローチャートである。
【図7】本発明の実施の形態において、ファイルサーバが実行する割り込みルーチンを示したフローチャートである。
【図8】本発明の実施の形態において、インターネットカメラが実行する割り込みルーチンを示したフローチャートである。
【符号の説明】
1 インターネットカメラ
2 制御手段
3 撮像装置
4 メモリ
5 トリガスイッチボタン
10 モデム装置
100 公衆電話回線網
101 第1のゲートウェイ
200 インターネット
201 インターネットカメラ
202 制御手段
203 ネットワーク・インターフェイス
204 メモリ
205 ストレージ装置
210 モデム装置
300 ローカル・エリア・ネットワーク
301 クライアントPC
302 制御手段
303 ネットワーク・インターフェイス
304 メモリ
305 モニタ
306 ポインティングデバイス
320 第2のゲートウェイ
[0001]
BACKGROUND OF THE INVENTION
The present invention provides a file server on the Internet, an image distribution type Internet camera that can connect to the Internet via a public telephone line network and transfer image data to the file server, and can view image data transferred to the file server The present invention relates to an Internet camera system having a terminal device.
[0002]
[Prior art]
An example of a conventional internet camera system is described in Japanese Patent No. 3034243. The Internet camera included in the Internet camera system described in the publication has a function of transferring digital image data to a predetermined file server on the Internet according to a predetermined schedule.
[0003]
Therefore, a user who has an account on the predetermined file server operates a terminal device having a client function of the predetermined file server connected to the Internet to browse image data stored in the predetermined file server. Can do.
[0004]
However, in the conventional internet camera system, it is only possible to browse image data transferred from the internet camera according to a predetermined schedule such as one hour interval, and the user can arbitrarily select the video captured by the internet camera. It was not possible to browse at the timing.
[0005]
[Problems to be solved by the invention]
In view of the above problems, an object of the present invention is to provide an Internet camera system in which an Internet camera is operated from a terminal device and an image captured by the Internet camera can be viewed at an arbitrary timing.
[0006]
[Means for Solving the Problems]
In order to achieve the above object, the Internet camera system of the present invention provides:
The terminal device has transmission means for transmitting predetermined data to the file server,
The file server has calling means for making a telephone call to the modem device when receiving predetermined data from the terminal device,
When detecting an incoming call to the modem device, the Internet camera has distribution control means for picking up an image and distributing the picked-up image to the file server.
[0007]
Therefore, by operating the terminal device, an image captured by the Internet camera at a desired timing can be displayed on the monitor of the terminal device. Further, since the terminal device itself does not require a modem device connected to the public telephone line network, there is no possibility of intrusion into the terminal apparatus via the public telephone line network, which is preferable in terms of security.
[0008]
In addition, after the file server completes the transfer of the captured image from the Internet camera triggered by the incoming call to the modem device, the Internet camera transfers the image to the file server by notifying the terminal device of the completion of the image transfer. Thereafter, the terminal device can immediately display the image transferred by the Internet camera to the file server on the monitor.
[0009]
Further, the calling means is configured to disconnect the telephone line before the line connection is established after making a call to the modem apparatus by operating from the file server, so that the first modem apparatus is a public telephone. It is possible to request image transfer to an internet camera without using a line usage fee.
[0010]
Further, the terminal device has an input means, and the input means is a pointing device having a button for moving a pointer displayed on a monitor such as a mouse,
By operating the pointing device to move the pointer to a predetermined position and pressing the button, the terminal device may transmit data requesting image transfer of the Internet camera to the file server via the Internet.
[0011]
Furthermore, the internet camera system has a plurality of internet cameras,
The terminal device may be configured to transmit data requesting image transfer of a different Internet camera to a file server via the Internet according to the position of the pointer when the button of the pointing device is pressed.
[0012]
With such a configuration, an image captured by a desired Internet camera among a plurality of Internet cameras can be browsed by a simple operation.
[0013]
The internet camera system has a plurality of internet cameras,
By operating the pointing device, moving the pointer to a predetermined position and pressing the button, the terminal device transmits data requesting image transfer of all Internet cameras to the file server via the Internet. Also good.
[0014]
By setting it as such a structure, the image which all the some internet cameras imaged can be browsed by single operation.
[0015]
Furthermore, when the modem device has a function of detecting information specifying the call originator of the call coming to the modem device, the internet camera picks up the image when the call origination call to the modem device is not the calling means. An image captured by the apparatus may not be transferred to the file server. By adopting such a configuration, image capture unintended by the user of the terminal device due to an erroneous call or the like is prevented.
[0016]
Note that the information specifying the call originator of the telephone that has come to the modem apparatus includes the caller telephone number notified to the second modem apparatus by, for example, the NTT number display service.
[0017]
DETAILED DESCRIPTION OF THE INVENTION
An internet camera system according to an embodiment of the present invention is schematically shown in FIG. The internet camera system of the present invention is arranged on a plurality of (three in FIG. 1) internet cameras 1, a file server 201 arranged on the internet 200, and a local area network (hereinafter referred to as LAN) 300. And at least one client PC 301.
[0018]
Here, the Internet camera 1 is a device that transfers captured image data to a file server. The internet camera 1 includes a modem device 10. When the modem device 10 communicates with the first gateway 101 on the Internet via the public telephone line network 100, the Internet camera 1 establishes a connection to the Internet 200. The internet camera 1 can transmit and receive data to and from the file server 201 on the internet 200 by connecting to the internet 200.
[0019]
The file server 201 on the Internet 200 provides a file transfer protocol (FTP) service, a simple mail transfer protocol (SMTP) service, a post office protocol (POP) service, and a hypertext transfer protocol (HTTP). . Further, the file server 201 includes a modem device 210 and has a function of making a call through the public telephone line 100.
[0020]
Further, the client PC 301 on the LAN 300 includes a network interface 303 such as an Ethernet (R) card. When the network interface 303 communicates with the second gateway 320 connected to both the Internet 200 and the LAN 300, the client PC 301 establishes a connection to the Internet 200 and connects to the file server 201 on the Internet 200. Can send and receive data.
[0021]
FIG. 2 is a block diagram schematically showing the Internet camera 1. The imaging device 3 is a device that outputs an image formed on an imaging device such as a CCD as a digital signal via an objective optical system. The control unit 2 can control the image pickup device 3 and the memory 4 to convert the digital signal output from the image pickup device 3 into an image file of a predetermined image format such as JPEG and store it in the memory 4.
[0022]
Further, the memory 4 can also hold schedule data together with the image file, and the control means 2 converts the digital signal output from the imaging device 3 at the time based on the schedule data into an image file and stores it in the memory 4. .
[0023]
Further, an FTP client program is developed in the memory 4 of the Internet camera 1. After the image file is stored in the memory 4, the control unit 2 of the Internet camera 1 establishes a connection to the Internet 200 and transfers the image file to the file server 201 on the Internet 200 using an FTP client program. Since the connection to the Internet 200 is forcibly disconnected after the image file transfer, the communication cost associated with the transfer of the image file can be minimized.
[0024]
In the memory 4 of the Internet camera 1, an e-mail client program that transmits and receives e-mails using SMTP and POP is developed. Here, the control means 2 of the internet camera 1 establishes a connection to the internet 200 at a predetermined interval, confirms the mailbox provided by the SMTP service program and the POP service program of the file server 201 by the e-mail client program, and When an email containing schedule data is received from the administrator of the camera system, the schedule data is updated. Note that after checking the mailbox, the connection to the Internet 200 is forcibly disconnected.
The internet camera 1 further has a trigger switch button 5. When the trigger switch button 5 is pressed, the digital signal output from the image pickup device 3 at that time is immediately converted into an image file by the control means 2, and after establishing a connection to the Internet 200, the file server 201 stores the above-mentioned digital signal. The image file is transferred. Note that after transferring the image file, the connection to the Internet 200 is forcibly disconnected.
[0026]
FIG. 3 is a block diagram schematically showing the file server 201 on the Internet 200. The file server 201 includes a network interface 203 that transmits and receives data via the Internet 200 and a storage device 205 that stores various files. Here, the control means 202 of the file server 201 controls the network interface 203 to receive the image file transferred from the Internet camera 1 via the Internet 200, and further controls the storage device 205 to receive the received image file. It is stored in a predetermined directory of the storage device 205.
[0027]
This image data storage operation is performed by an FTP service program developed in the memory 204 of the file server 201.
[0028]
The HTTP service program expanded in the memory 204 allows image data stored in a predetermined directory of the storage device 205 to be browsed from any or specific terminal device connected to the Internet 200.
[0029]
Further, the file server 201 includes a modem device 210, and the control unit 202 of the file server 201 can control the modem device 210 to make a call to any telephone number.
[0030]
FIG. 4 is a block diagram schematically showing the client PC 301 on the LAN 300. The client PC 301 has a network interface 303 that is always connected to the LAN 300 and can be connected to the Internet 200 via the second gateway 320 on the LAN 300. Further, the client PC 301 has a memory 304. In the memory 304, an HTTP client program for transmitting and receiving data from the file server 201 using HTTP is developed. The control unit 302 of the client PC 301 can execute this HTTP client program and control the network interface 303 to transfer an arbitrary image file stored in the storage device 205 of the file server 201 to the memory 304 of the client PC 301.
[0031]
The client PC 301 further includes a monitor 305. Further, the HTTP client program expanded in the memory 304 of the client PC 301 has a function of displaying the image file expanded in the memory on the monitor 305. Therefore, the client PC 301 on which the HTTP client program is executed can sequentially display the image file transferred from the Internet camera 1 to the file server 201 on the monitor 305 in accordance with the schedule data. That is, the user of the client PC 301 can view the image captured by the Internet camera 1 on the monitor 305 of the remote client PC 301 at the time according to the schedule data.
[0032]
Further, the client PC 301 has a pointing device 306 that moves a pointer displayed on the monitor 305, and the user of the client PC 301 can operate the HTTP client program by using the pointing device 306. Further, the pointing device 306 has at least one button, and can notify the control unit 302 of the client PC 301 of the position of the pointer on the screen when the button is pressed.
[0033]
A screen of the monitor 305 of the client PC 301 is shown in FIG. In the present embodiment, the number of Internet cameras 1 that browse images on the monitor 305 is three, but the number of Internet cameras 1 that can be monitored simultaneously by the user of the client PC 301 is not limited. The screen 400 displays image display areas 401, 402, and 403, each of which displays an image file that has been transferred to the file server 201 by the Internet camera 1. The HTTP client program accesses the file server 201 at regular intervals (for example, 1 minute), and the image display areas 401, 402, and 403 include the latest image file transferred to the file server 201 by the corresponding Internet camera 1 and The imaging time of each image file is displayed.
[0034]
In addition, first image capture buttons 411, 412, and 413 are arranged below the image display areas 401, 402, and 403, respectively. Here, when the pointer 404 is pushed over any of the first image capture buttons 411, 412, and 413 and the button of the pointing device 306 is pressed (hereinafter abbreviated as “press the first image capture button”), The digital signal output from the imaging device 3 of the Internet camera 1 corresponding to the pressed first image capture button is immediately converted into an image file, and the image file corresponds to the first image capture button pressed. It is displayed in the image display area.
[0035]
A second image capture button 420 is arranged at the bottom of the screen 400. When the pointer 404 is placed on the second image capture button 420 and the button of the pointing device 306 is pressed (hereinafter abbreviated as “press the second image capture button”), the image display areas 401, 402, and 403 are displayed. A digital signal output from the imaging device 3 of the corresponding internet camera 1 is immediately converted into an image file, and the image file is displayed in each of the image display areas 401, 402, and 403. That is, when the second image capture button 420 is pressed, the same effect as that when the first image capture button is pressed on all the first image capture buttons can be obtained.
[0036]
The operation procedure of the client PC 301, the file server 201, and the Internet camera 1 when the first image capture button is pressed will be described using the flowcharts shown in FIGS.
[0037]
FIG. 6 is a flowchart showing an interrupt routine executed by the client PC 301 when the first image capture button is pressed. When the first image capture button is pressed, the control unit 302 of the client PC 301 proceeds to step S301, and requests the file server 201 to capture an image to the Internet camera 1 according to the first image capture button. When the control unit 202 of the file server 201 receives this request, it executes the interrupt routine shown in the flowchart of FIG. Note that the control unit 302 of the client PC 301 executes step S302 and waits until receiving a capture completion message from the file server 201 (S302: Yes) (S302: No).
[0038]
The control unit 202 of the file server 201 that has received the request from the client PC 301 executes step S201, and checks whether the Internet camera 1 that is the target of the image capture request has transmitted the image file to the file server 201. If the image file is not being transferred (S201: No), the process proceeds to step S202. On the other hand, if the image file is being transferred (S201: Yes), the Internet camera 1 does not need to perform further imaging operation, and the process proceeds to step S203.
[0039]
In step S202, the control unit 202 of the file server 201 controls the modem device 210 to call the internet camera 1 that is the target of image capture, and after a predetermined time has elapsed (for example, after several ringing sounds). Stop a phone call. Here, when the modem device 10 of the internet camera 1 to be requested for image capture receives a telephone call, the control means of the internet camera 1 executes an interrupt routine shown in the flow of FIG. The control unit 202 of the file server 201 executes step S203 and waits until file transfer (described later) from the internet camera 1 is completed (S203: Yes) (S203: No).
[0040]
When the modem device 10 of the internet camera 1 receives a telephone call, the control means 2 of the internet camera 1 executes step S101. In step S101, it is confirmed whether or not the source of the incoming telephone call is the file server 201. That is, by using a caller telephone number notification service such as an NTT number display, it is checked whether the caller telephone number matches the telephone number of the line to which the modem device 210 of the file server 201 is connected. Is going.
[0041]
If the caller of the received telephone call is not the file server 201 (S101: No), the process proceeds to step S111 to disconnect the telephone line, and this routine is terminated. Therefore, image capture unintended by the user of the client PC 301 due to an erroneous call or the like is prevented.
[0042]
On the other hand, if the source of the incoming telephone call is the file server 201 (S101: Yes), the process proceeds to step S102, and the modem apparatus 210 makes a telephone call under the control of the control means 202 of the file server 201 without answering the telephone call. Wait until the call is stopped (S102: No). Accordingly, since the line is disconnected before the line is connected (that is, while the ringing tone continues to ring), the file server 201 does not incur a line usage fee.
[0043]
On the other hand, when the disconnection of the telephone line is confirmed in step 102 (S102: Yes), the process proceeds to step S103, where the digital signal output from the imaging device 3 of the Internet camera 1 is converted into an image file and stored in the memory 4. . In step S104, the control unit 2 of the internet camera 1 controls the modem device 10 to establish a connection to the internet 200. In step S105, the image file is transferred to the file server 201.
[0044]
Next, the process proceeds to step S106, the connection to the Internet 200 is disconnected, and this routine is terminated.
[0045]
At this point, since the internet camera 1 has completed the file transfer to the file server 201, the control unit 202 of the file server 201 executes step S204 in the flowchart of FIG. In step S204, the control unit 202 of the file server 201 transmits a capture completion message indicating that the Internet camera 1 has finished transferring the image file to the client PC 301, and the present routine is terminated.
[0046]
Accordingly, since the client PC 301 has received the capture completion message from the file server 201, the control unit 302 of the client PC 301 executes step S303 in the flowchart of FIG. That is, the client PC 301 accesses the file server 201 and downloads the image file transferred to the file server 201 by the Internet camera 1 in step S105.
[0047]
Next, the process proceeds to step S304, where the image file downloaded in step S303 is displayed in the image display area corresponding to the pressed first image capture button on the monitor 305, and this routine is terminated.
[0048]
When the second image capture button 420 is pressed, the interrupt routines shown in FIGS. 6 to 8 are executed for all the Internet cameras 1, and the results are displayed in the image display areas 401, 402, and 403, respectively. The image is updated.
[Brief description of the drawings]
FIG. 1 schematically shows an Internet camera system according to an embodiment of the present invention.
FIG. 2 is a block diagram schematically showing an Internet camera according to an embodiment of the present invention.
FIG. 3 is a block diagram schematically showing a file server in the embodiment of the present invention.
FIG. 4 is a block diagram schematically showing a client PC in the embodiment of the present invention.
FIG. 5 shows a screen displayed on the monitor of the client PC in the embodiment of the present invention.
FIG. 6 is a flowchart showing an interrupt routine executed by the client PC in the embodiment of the present invention.
FIG. 7 is a flowchart showing an interrupt routine executed by the file server in the embodiment of the present invention.
FIG. 8 is a flowchart showing an interrupt routine executed by the Internet camera in the embodiment of the present invention.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 Internet camera 2 Control means 3 Imaging device 4 Memory 5 Trigger switch button 10 Modem apparatus 100 Public telephone line network 101 First gateway 200 Internet 201 Internet camera 202 Control means 203 Network interface 204 Memory 205 Storage apparatus 210 Modem apparatus 300 Local・ Area Network 301 Client PC
302 Control means 303 Network interface 304 Memory 305 Monitor 306 Pointing device 320 Second gateway

Claims (9)

インターネット上のファイルサーバと、モデム装置を有し、撮像した撮像画像を所定のスケジュールに従って前記ファイルサーバに転送する画像配信型のインターネットカメラと、前記ファイルサーバに転送された画像を閲覧可能な端末装置と、を備えたインターネットカメラシステムであって、
前記端末装置は、前記インターネットカメラの画像取り込みをリクエストするための所定のデータを前記ファイルサーバに送信する送信手段を有し、
前記ファイルサーバは、前記端末装置から前記所定のデータを受信すると画像取り込みのリクエスト対象のインターネットカメラが撮影画像を転送中であるか否かを判断し、転送中でない場合に前記画像取り込みのリクエスト対象のインターネットカメラのモデム装置に対して電話をかけ、次いで回線接続が確立される前に電話回線を切断する、発呼手段を有し、
前記インターネットカメラは、前記モデム装置に対する着信を検出すると、着信の呼び出しに応答せずに電話回線の切断を待ち、次いで画像を撮像して前記ファイルサーバに撮像画像を転送する、配信制御手段を有する、ことを特徴とする、インターネットカメラシステム。
An image distribution-type Internet camera that has a file server on the Internet and a modem device and transfers captured images to the file server according to a predetermined schedule, and a terminal device that can view the images transferred to the file server An internet camera system comprising:
The terminal device has a transmission means for transmitting predetermined data for requesting image capture of the Internet camera to the file server,
Said file server, said terminal said predetermined data to receive the image capture subject to request Internet camera from the apparatus determines whether or not being transferred the captured image, the request target of the image capture when not being transferred Having a calling means for making a call to a modem device of the Internet camera and then disconnecting the telephone line before the line connection is established;
When the internet camera detects an incoming call to the modem device, the internet camera has distribution control means for waiting for the telephone line to be disconnected without answering the incoming call, and then taking an image and transferring the taken image to the file server. An internet camera system characterized by that.
前記端末装置がローカル・エリア・ネットワーク経由でインターネットに接続するネットワークインターフェイスと、前記ファイルサーバに転送された画像を表示するモニタと、前記端末装置を操作する入力手段とを備え、
前記入力手段の操作によって、前記端末装置の送信手段がインターネット経由で前記ファイルサーバに、前記所定のデータを送信し、
前記ファイルサーバは、前記画像取り込みのリクエスト対象のインターネットカメラが撮影画像を転送中でない場合に前記発呼手段を操作して、前記画像取り込みのリクエスト対象のインターネットカメラのモデム装置に電話をかけ、次いで回線接続が確立される前に電話回線を切断し、
前記インターネットカメラは、前記モデム装置に対する着信を検出すると、着信の呼び出しに応答せずに電話回線の切断を待ち、次いで画像を撮像して前記ファイルサーバに転送することを特徴とする、請求項1に記載のインターネットカメラシステム。
A network interface for connecting the terminal device to the Internet via a local area network, a monitor for displaying an image transferred to the file server, and an input means for operating the terminal device;
By the operation of the input means, the transmission means of the terminal device transmits the predetermined data to the file server via the Internet,
The file server operates the calling means when the Internet camera targeted for image capture is not transferring a photographed image, calls the modem device of the Internet camera targeted for image capture , and then Disconnect the phone line before the line connection is established,
2. The Internet camera according to claim 1, wherein when receiving an incoming call to the modem device, the Internet camera waits for disconnection of the telephone line without answering the incoming call, and then picks up an image and transfers it to the file server. Internet camera system described in 1.
前記ファイルサーバは、前記モデム装置に対する着信をトリガとする前記インターネットカメラからの撮像画像の転送が完了した後、画像転送完了を前記端末装置に報知することを特徴とする、請求項1または請求項2に記載のインターネットカメラシステム。  The file server notifies the terminal device of the completion of image transfer after the transfer of the captured image from the Internet camera triggered by an incoming call to the modem device is completed. 2. The internet camera system according to 2. 前記端末装置の入力手段が、前記モニタに表示されたポインタを移動させる、ボタンを有するポインティングデバイスであり、
前記ポインティングデバイスを操作して、前記ポインタを所定の位置に移動させて前記ボタンを押下することによって、前記端末装置がインターネット経由で前記ファイルサーバに、前記所定のデータを送信することを特徴とする、請求項2又は請求項3に記載のインターネットカメラシステム。
The input device of the terminal device is a pointing device having a button for moving a pointer displayed on the monitor,
The terminal device transmits the predetermined data to the file server via the Internet by operating the pointing device, moving the pointer to a predetermined position, and pressing the button. The internet camera system according to claim 2 or claim 3.
前記インターネットカメラシステムが、前記インターネットカメラを複数台有し、
前記ポインティングデバイスのボタンを押下した時のポインタの位置に応じて、異なるインターネットカメラを画像取り込みのリクエスト対象とする前記所定のデータを、前記端末装置はインターネット経由で前記ファイルサーバに送信することを特徴とする、請求項4に記載のインターネットカメラシステム。
The internet camera system has a plurality of internet cameras,
In accordance with the position of the pointer when the button of the pointing device is pressed, the terminal device transmits the predetermined data for which a different Internet camera is a request for image capture to the file server via the Internet. The internet camera system according to claim 4.
前記インターネットカメラシステムが、前記インターネットカメラを複数台有し、
前記ポインティングデバイスを操作して、前記ポインタを所定の位置に移動させて前記ボタンを押下することによって、前記端末装置がインターネット経由で前記ファイルサーバに、全てのインターネットカメラを画像取り込みのリクエスト対象とする前記所定のデータを送信することを特徴とする、請求項4または請求項5に記載のインターネットカメラシステム。
The internet camera system has a plurality of internet cameras,
By operating the pointing device, moving the pointer to a predetermined position and pressing the button, the terminal device makes all the Internet cameras subject to image capture requests to the file server via the Internet. 6. The internet camera system according to claim 4, wherein the predetermined data is transmitted.
前記モデム装置が、前記モデム装置にかかってきた電話の発信元を特定する情報を検知する機能を有し、
前記モデム装置にかかった電話の発信元が前記発呼手段ではない時は、前記インターネットカメラは撮像装置により撮像した画像を前記ファイルサーバに転送しないことを特徴とする、請求項1から請求項6のいずれかに記載のインターネットカメラシステム。
The modem device has a function of detecting information identifying a caller of a telephone that has been placed on the modem device;
The Internet camera does not transfer an image picked up by an image pickup device to the file server when a caller of the telephone set to the modem device is not the calling means. The internet camera system according to any one of the above.
前記モデム装置にかかってきた電話の発信元を特定する情報が電話番号であることを特徴とする、請求項7に記載のインターネットカメラシステム。  8. The Internet camera system according to claim 7, wherein the information specifying the call originator of the telephone that has come to the modem device is a telephone number. 前記ファイルサーバと、前記インターネットカメラと、前記端末装置のそれぞれが制御手段とメモリとを有し、
前記ファイルサーバと、前記インターネットカメラと、前記端末装置は、前記メモリに展開されたプログラムを前記制御手段が実行することによって動作することを特徴とする、請求項1から請求項のいずれかに記載のインターネットカメラシステム。
Each of the file server, the Internet camera, and the terminal device includes a control unit and a memory,
The said file server, the said internet camera, and the said terminal device operate | move when the said control means runs the program expand | deployed in the said memory, The one in any one of Claim 1-8 characterized by the above-mentioned. The described internet camera system.
JP2001328628A 2000-10-27 2001-10-26 Internet camera system Expired - Lifetime JP3905740B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001328628A JP3905740B2 (en) 2000-10-27 2001-10-26 Internet camera system

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2000328348 2000-10-27
JP2000-328348 2000-10-27
JP2001328628A JP3905740B2 (en) 2000-10-27 2001-10-26 Internet camera system

Publications (2)

Publication Number Publication Date
JP2002204317A JP2002204317A (en) 2002-07-19
JP3905740B2 true JP3905740B2 (en) 2007-04-18

Family

ID=26602896

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001328628A Expired - Lifetime JP3905740B2 (en) 2000-10-27 2001-10-26 Internet camera system

Country Status (1)

Country Link
JP (1) JP3905740B2 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3412119B2 (en) * 1991-11-19 2003-06-03 株式会社リコー Control method for ISDN terminal device
JP3870544B2 (en) * 1998-04-09 2007-01-17 村田機械株式会社 Communication terminal device
JP2002027427A (en) * 2000-07-05 2002-01-25 Fujitsu General Ltd Image data transmission system

Also Published As

Publication number Publication date
JP2002204317A (en) 2002-07-19

Similar Documents

Publication Publication Date Title
US7562380B2 (en) Internet camera system
JPH10155040A (en) Calling method for dial-up connection communication equipment and monitor control system using the same
JP2002344529A (en) Push type service system
US8639301B2 (en) Portable telephone, imaging system employing portable telephone and imaging method
WO2004057855A1 (en) Improvements relating to digital picture frames
US20060215637A1 (en) Visual communication server, visual communication program and visual communication method
JP3758808B2 (en) Communication terminal and communication method
JP3592234B2 (en) Remote image viewing system
JP3905740B2 (en) Internet camera system
EP4199491A1 (en) Methods and apparatuses of call implementation and storage medium
JP4103760B2 (en) COMMUNICATION SYSTEM, COMMUNICATION CONTROL DEVICE, AND TERMINAL DEVICE
JP4370808B2 (en) COMMUNICATION SYSTEM, TERMINAL DEVICE, AND COMMUNICATION METHOD
JP4140497B2 (en) COMMUNICATION SYSTEM, COMMUNICATION CONTROL DEVICE, AND TERMINAL DEVICE
JP2000513162A (en) Connecting telephones, facsimile machines, and computers in intelligent networks
JP3984125B2 (en) Network camera system
JP2002281180A (en) Television doorphone
JP6645608B1 (en) Telephone terminal, extension telephone system, computer readable program, and method of notifying incoming call from door phone with camera
JP5423099B2 (en) Telephone system and doorphone remote access control method
JP4692471B2 (en) Image transfer device
JP2008042413A (en) Cordless telephone
JP4670782B2 (en) Image transfer device
JP2002290598A (en) Communication connecting method, and communication terminal device, and home security system
JP2002152364A (en) Telephone information display device, telephone set connected thereto and telephone information display method
JP4640298B2 (en) Image transfer device
JP5162521B2 (en) Telephone device and telephone event information notification method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040818

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060525

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060601

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060713

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060821

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061006

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061027

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061207

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20061227

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070112

R150 Certificate of patent or registration of utility model

Ref document number: 3905740

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100119

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110119

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110119

Year of fee payment: 4

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110119

Year of fee payment: 4

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110119

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120119

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130119

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130119

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term