JP4479382B2 - カメラ付き携帯電話装置、およびカメラ付き携帯電話装置の制御プログラム - Google Patents

カメラ付き携帯電話装置、およびカメラ付き携帯電話装置の制御プログラム Download PDF

Info

Publication number
JP4479382B2
JP4479382B2 JP2004194908A JP2004194908A JP4479382B2 JP 4479382 B2 JP4479382 B2 JP 4479382B2 JP 2004194908 A JP2004194908 A JP 2004194908A JP 2004194908 A JP2004194908 A JP 2004194908A JP 4479382 B2 JP4479382 B2 JP 4479382B2
Authority
JP
Japan
Prior art keywords
incoming call
camera
mobile phone
communication terminal
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004194908A
Other languages
English (en)
Other versions
JP2006019978A5 (ja
JP2006019978A (ja
Inventor
豊 春名
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2004194908A priority Critical patent/JP4479382B2/ja
Publication of JP2006019978A publication Critical patent/JP2006019978A/ja
Publication of JP2006019978A5 publication Critical patent/JP2006019978A5/ja
Application granted granted Critical
Publication of JP4479382B2 publication Critical patent/JP4479382B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Telephonic Communication Services (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Alarm Systems (AREA)
  • Telephone Function (AREA)

Description

本発明は、監視カメラとしても利用できるようにしたカメラ付き携帯電話装置、およびカメラ付き携帯電話装置の制御プログラムに関する。
従来の監視カメラシステムは、監視専用のカメラを監視対象の屋内外に固定的に設置し、この専用カメラにより撮影される動画像を有線あるいは無線により別の場所にある表示用モニタまで転送し、このモニタ画面にて監視画像が見られるようにしている。
最近では、世界各地に設置された監視カメラによる撮影画像をインターネット経由で各自のパーソナルコンピュータに取り込んで閲覧することができるようになっている。
そして、各地に設置された監視カメラには、各自のパーソナルコンピュータの操作に応じて送出される撮影方向の制御信号によって、その撮影角度を変更駆動する遠隔制御機能が備えられている。
また最近では、監視カメラにより撮影した映像を異常の検知に伴い電話機によって監視ユーザの携帯電話機や警察署または消防署などに通報,転送できるようにしたセキュリティ電話機なるものも考えられている(例えば、特許文献1参照。)。
特開2001−167365号公報
しかしながら、前記従来の監視カメラシステムでは、監視対象を撮影するカメラは監視専用のカメラであって屋内外に固定設置され、耐水性,耐熱性,耐震性など、様々な耐候性能が要求されるため、非常に高価であるばかりでなく、監視以外の用途に適さず、監視の必要がない時間帯や監視そのものが不要になった場合など、無駄が多い問題がある。
また、前記従来の監視カメラシステムは、耐候性を有し頑強に設置される反面、監視対象の位置や場所を変えたい場合など、その設置位置を移動するのには大変な手間と費用が掛かり、特に一般家庭において安価に且つ手間暇掛けずに簡単に導入することは困難であった。
本発明は、このような課題に鑑みてなされたもので、監視専用のカメラシステムを導入することなく、必要に応じて簡単に監視対象の画像を撮影して取得することが可能になるカメラ付き携帯電話装置、およびカメラ付き携帯電話装置の制御プログラムを提供することを目的とする。
請求項1に記載の発明は、電話機能と電子メール機能と撮影機能とを有するカメラ付き携帯電話装置であって、他の通信端末からの着信に応答して画像データを撮影する撮影制御手段と、他の通信端末からの着信があった際に、電話の着信か電子メールの着信かを判断する第1の判断手段と、を備え、前記撮影制御手段は、前記他の通信端末からの着信に応答して画像データを撮影する際に、前記第1の判断手段により電話の着信であると判断された場合には動画データを撮影し、前記第1の判断手段により電子メールの着信であると判断された場合には静止画データを撮影する撮影方法選択手段を含むことを特徴とする
請求項2に記載の発明は更に、他の通信端末からの着信に応答して画像データを送信する送信制御手段を更に備えたことを特徴とする。
請求項3に記載の発明は更に、前記送信制御手段は、前記他の通信端末からの着信に応答して画像データを送信する際に、前記第1の判断手段により電話の着信であると判断された場合には動画データを送信し、前記第1の判断手段により電子メールの着信であると判断された場合には静止画データを送信する送信画像選択手段を含むことを特徴とする
請求項4に記載の発明は更に、前記送信制御手段は、前記他の通信端末からの着信に応答して画像データを送信する際に、前記第1の判断手段により電話の着信であると判断された場合には電話機能を用いて画像データを送信し、前記第1の判断手段により電子メールの着信であると判断された場合には電子メール機能を用いて画像データを送信する送信方法選択手段を含むことを特徴とする
請求項5に記載の発明は更に、他の通信端末からの着信があった際に、前記第1の判断手段により電話の着信であると判断された場合には、前記撮影制御手段の制御によりリアルタイムに撮影される動画データを、前記送信制御手段の制御により該着信があった他の通信端末へ電話機能を利用してリアルタイムに送信し、前記第1の判断手段により電子メールの着信であると判断された場合には、前記撮影制御手段の制御により非リアルタイムに撮影される静止画データを、前記送信制御手段の制御により該着信があった他の通信端末へ電子メール機能を利用して非リアルタイムに送信することを特徴とする
請求項6に記載の発明は更に、監視モードを設定するモード設定手段と、このモード設定手段により前記監視モードが設定されていない状態で、前記撮影機能によりシャッタボタンの操作に応じた撮影を行う通常撮影手段と、他の通信端末からの着信があった際に、前記監視モードが設定されているか否かを判断する第2の判断手段を備え、前記撮影制御手段は、前記判断手段により前記監視モードが設定されていると判断された場合には、他の通信端末からの着信に応答して画像データを撮影し、前記判断手段により前記監視モードが設定されていないと判断された場合には、他の通信端末からの着信に応答した画像データの撮影を行わないことを特徴とする
請求項7に記載の発明は更に、監視モードを設定するモード設定手段と、他の通信端末からの着信があった際に、前記監視モードが設定されているか否かを判断する第2の判断手段と、他の通信端末からの着信に応答して着信音を鳴らす着信音出力手段と、前記着信音出力手段は、前記判断手段により前記監視モードが設定されていると判断された場合には、他の通信端末からの着信に応答して着信音を鳴らし、前記判断手段により前記監視モードが設定されていないと判断された場合には、他の通信端末からの着信に応答して着信音を鳴らさないことを特徴とする
請求項19に記載の発明は、電話機能と電子メール機能と撮影機能とを有するカメラ付き携帯電話装置のコンピュータを制御するためのプログラムであって、前記コンピュータを、他の通信端末からの着信に応答して画像データを撮影する撮影制御手段と、他の通信端末からの着信があった際に、電話の着信か電子メールの着信かを判断する第1の判断手段と、として機能させ、前記撮影制御手段は、前記他の通信端末からの着信に応答して画像データを撮影する際に、前記第1の判断手段により電話の着信であると判断された場合には動画データを撮影し、前記第1の判断手段により電子メールの着信であると判断された場合には静止画データを撮影する撮影方法選択手段を含むことを特徴とする
本発明の請求項1(請求項19)に記載のカメラ付き携帯電話装置(制御プログラム)によれば、他の通信端末からの着信に応答して画像データを撮影することで、カメラ付き携帯電話装置を監視カメラとして利用することを可能にし、更に、他の通信端末からの着信があった際に、電話の着信か電子メールの着信かを判断し、電話の着信であると判断された場合には動画データを撮影し、電子メールの着信であると判断された場合には静止画データを撮影するようにしたので、外部の通信端末から電話または電子メールを選択してアクセスするだけで、静止画データと動画データを選択的に撮影させることが可能となる。
以下図面により本発明の実施の形態について説明する。
図1は、本発明の実施形態に係るカメラ付き携帯電話装置10の外観構成を示す正面図である。
このカメラ付き携帯電話装置10は、その正面の下半分の領域にキー入力部11、上半分の領域に液晶表示部12を有し、キー入力部11の下部には音声入力用のマイク13が設けられ、液晶表示部12の上部には音声出力用のスピーカ14が設けられる。また、装置本体の上端部右端にはアンテナ15が設けられ、さらに同上端部中央にはデジタルカメラの撮像部16が設けられる。
前記キー入力部11には、各種の数字,記号,文字を入力するための文字・記号入力キー群11aが備えられると共に、電源のON/OFF、カメラシャッタのレリーズ、通常の電話/電子メールモード、テレビ電話モード、監視カメラモード、常時監視モードなど、各種モードの切り替えや設定の切り替え、表示画面上でのカーソル移動による各種データや項目の選択、選択内容の確定などを行うための機能操作キー(操作ボタン)11bが備えられる。
このカメラ付き携帯電話装置10は、例えば通常の電話/電子メールモードや監視カメラモードにおいては内蔵の充電池によって独立で使用され、常時監視モードにおいては充電&回転用のクレードル(スタンド)20(図2参照)に装着されて使用される。
図2は、前記カメラ付き携帯電話装置10を装着した充電&回転用クレードル(スタンド)20の外観構成を示す斜視図である。
カメラ付き携帯電話装置10の充電&回転用クレードル20は、装着された携帯電話装置10への充電、および当該携帯電話装置10を水平方向Xおよび垂直方向Yに回動することによる撮像方向の変更を行うもので、円筒形状の固定台座21、この固定台座21の上部に水平方向Xに回転自在に載置された水平回転部22、この水平回転部22の上部中央に垂直方向Yの一定角度の範囲で回転自在に設けられた垂直回転部23からなる。
そして、前記垂直回転部23の上部中央の位置に、カメラ付き携帯電話装置10の装着スロット20Hが設けられる。
水平回転部22は、固定台座21に固定されて内蔵された水平回転モータ24により水平方向Xに回転駆動され、垂直回転部23は、水平回転部22に固定されて内蔵された垂直回転モータ25により垂直方向Yに回転駆動される。
前記水平回転モータ24および垂直回転モータ25に対する回転制御信号は、前記カメラ付き携帯電話装置10によるリアルタイムな撮影画像(動画像)が指定の番号の電話に対して通信転送されている場合に、当該撮影画像転送先の電話からのカメラ(撮像方向)回転の指示に従い本携帯電話装置10を経由して与えられる。
また、前記充電&回転用クレードル20は、音、光、煙、振動、温度、気圧などを検出するための各種のセンサ26a,26b,…を内蔵し、各種センサ26a,26b,…による検出データは当該クレードル20の設置された環境での状態変化データとして携帯電話装置10に与えられる。
なお、前記充電&回転用クレードル20には、ACコンセント27から電源電圧を供給し、カメラ付き携帯電話装置10への充電用の電源とする一方で、水平回転モータ24や垂直回転モータ25および各種センサ26a,26b,…の駆動用の電源とする。
図3は、前記カメラ付き携帯電話装置10および充電&回転用クレードル(スタンド)20の電子回路の構成を示すブロック図である。
カメラ付き携帯電話装置10は、コンピュータ等からなる制御部(CPU)10Aを備えている。
制御部(CPU)10Aは、キー入力部11から入力されるキー(ボタン)操作入力信号やアンテナ15および通信制御部15Aを介して受信される通信信号、あるいは前記充電&回転用クレードル20の各種のセンサ26a,26b,…から与えられる状態変化データに応じて、ROM17に予め記憶されているシステムプログラムを起動させ、あるいは小型メモリカードなどの外部記憶媒体18Mに予め記憶されている当該カメラ付き携帯電話装置10の制御プログラムを記憶媒体読書部18Aにより読み取らせて起動させ、あるいは公共通信ネットワーク(インターネットなど)上の他のコンピュータ端末から通信制御部15Aに受信されて読み込まれた同制御プログラムを起動させ、RAM18を作業用メモリとして本携帯電話装置10の回路各部および充電&回転用クレードル20の回路各部の動作制御を行なうものである。
この制御部(CPU)10Aには、前記キー入力部11、液晶表示部12、カメラ制御部16Aを介した撮像部16、ROM17、記憶媒体読書部18A、通信制御部15Aを介したアンテナ15、RAM18、時計回路19が接続され、また、通信制御部15Aにて送受信処理する通話音声信号を音声として入力および出力させるための音声変換部13Aおよびマイク13,スピーカ14が接続される。
また、制御部(CPU)10Aには、電源供給自動ON/OFF回路(EC)が接続され、電源のスリープ処理やウエイクアップ処理が必要に応じて自動で行われる。
さらに、制御部(CPU)10Aには、外部I/Oインターフェイス&充電部10Bが接続され、充電&回転用クレードル20側の外部I/Oインターフェイス&充電部20Bを介してその電子回路と接続される。
そして、カメラ付き携帯電話装置10の電子回路は、充電&回転用クレードル20との接続時には、当該クレードル20から供給される電源電圧によって直接駆動され、またクレードル20との非接続時には、当該クレードル20との接続時において充電された充電池10Eからの充電電圧によって駆動される。
充電&回転用クレードル20の電子回路には、制御部(CPU)20Aが備えられ、この制御部(CPU)20Aには前記外部I/Oインターフェイス&充電部20Bおよびセンサorモータ制御部28が接続される。
この充電&回転用クレードル20に内蔵される水平回転モータ24および垂直回転モータ25は、前記カメラ付き携帯電話装置10から外部I/Oインターフェイス&充電部20Bを介して入力される回転制御信号に応じてセンサorモータ制御部28によって回転駆動される。また各種のセンサ26a,26b,…は、センサorモータ制御部28によってその検出動作が制御され、各検出データは外部I/Oインターフェイス&充電部20Bを介して前記カメラ付き携帯電話装置10へ転送される。
そして、ACコンセント27からの電源電圧は充電回路29に供給され、この充電回路29によってカメラ付き携帯電話装置10への充電用の電源とする一方で、水平回転モータ24や垂直回転モータ25、各種センサ26a,26b,…の駆動電源とされる。
一方、前記カメラ付き携帯電話装置10のROM17には、本装置10の電子回路における全体の処理を司るシステムプログラムデータが予め記憶されると共に、電話通信モード、インターネット通信モード、電子メールモード、通常カメラ撮影モード、そして、電話による通話音声入出力と並行してリアルタイムな撮影画像を送受信するテレビ電話モード、指定の電話番号または指定のメールアドレスからの着信または受信に従いリアタイムな撮影動画像,音声データまたは1ショットの撮影画像データを送信するための監視カメラモード、前記充電&回転用クレードル20への装着時において常時撮影による動画像,音声データや各種センサ26a,26b,…からの状態変化データに基づき予め設定された状態変化条件となった際に指定の電話番号または指定のメールアドレスに対して発信またはアクセスし当該動画像,音声データまたは条件判断時前後の撮影画像データを送信するための常時監視モード等、各種の動作モードに対応した制御プログラムデータも予め記憶される。
図4は、前記携帯電話装置10のRAM18内に備えられる一部データメモリの内容を示す図である。
RAM18には、モードデータメモリ18a、監視指定アドレスメモリ18b、監視指定番号メモリ18c、撮像データメモリ18d、動画像・音声データメモリ18e、クレードル装着データメモリ18f、各種センサデータメモリ18g、通報条件データメモリ18h、電話帳データメモリ18i、そしてワークエリア18j等の各種のデータメモリが備えられる。
モードデータメモリ18aには、前記電話通信モード、インターネット通信モード、電子メールモード、通常カメラ撮影モード、テレビ電話モード、監視カメラモード、常時監視モード等、各種動作モードの選択設定データが記憶される。
監視指定アドレスメモリ18bには、監視カメラモードや常時監視モードにおいて監視通報のための通信先としてユーザにより指定される端末メールアドレスが記憶される。
監視指定番号メモリ18cには、監視カメラモードや常時監視モードにおいて監視通報のための通信先としてユーザにより指定される端末電話番号が記憶される。
撮像データメモリ18dには、カメラ制御部16Aの制御により撮像部16にて撮影された1ショットの撮影画像データが記憶される。
動画像・音声データメモリ18eには、カメラ制御部16Aの制御により撮像部16にてリアルタイムに撮影された動画像データおよび音声変換部13Aを介してマイク13から入力された音声データが記憶される。
クレードル装着データメモリ18fには、本カメラ付き携帯電話装置10の前記充電&回転用クレードル20に対する装着と接続が外部I/Oインターフェイス&充電部10Bを介して検出された状態でクレードル装着フラグが記憶される。
各種センサデータメモリ18gには、前記各種のセンサ26a,26b,…により検出される音、光、煙、振動、温度、気圧などの各検出データがリアルタイムに更新されて記憶される。
通報条件データメモリ18hには、常時監視モードにおいて前記動画像・音声データメモリ18eに記憶される常時撮影による動画像,音声データや前記撮像データメモリ18dに記憶される撮影画像データを前記監視指定番号メモリ18cに記憶される電話番号の端末や前記監視指定アドレスメモリ18bに記憶されるメールアドレスの端末へ通報するための条件データが、各種センサ26a,26b,…による検出条件データ、スケジュールデータ(時刻データ)、撮影画像の解析による移動物体の検出データなどを組み合わせて設定記憶される。
例えば各種のセンサ26a,26b,…の1つである音圧センサによる検出音圧データが一定音圧以上、光センサによる検出照度データが一定照度以上、煙センサによる検出煙データが一定煙(粒子)以上、振動センサによる検出振動データが一定振動以上、温度センサによる検出温度が一定温度以上、気圧センサによる検出気圧データが一定気圧以上など、またスケジュールデータ(時刻データ)では毎時、移動物体の検出データでは移動物体有りなど、それぞれ個々の条件データがユーザ任意に組み合わされて設定される。
電話帳データメモリ18iには、ユーザ自身の所有する他の通信端末の電話番号やメールアドレスをはじめ、友人,知人の電話番号やメールアドレスが記憶される。
ワークエリア18jには、各種動作モードの制御処理に伴ない制御部(CPU)10Aにより入出力されるデータが一時的に記憶される。
なお、充電&回転用クレードル20に内蔵された音、光、煙、振動、温度、気圧などを検出するための各種のセンサ26a,26b,…は、携帯電話装置10において各種センサ制御部26Aによって予め内蔵させる構成としてもよい。
次に、前記構成によるカメラ付き携帯電話装置10および充電&回転用クレードル20の動作について説明する。
(監視カメラモード)
図5は、前記カメラ付き携帯電話装置10を単独で使用した場合の着信対応監視処理を示すフローチャートである。
ユーザは本カメラ付き携帯電話装置10の他に監視指定アドレスメモリ18bおよび監視指定番号メモリ18cにそのメールアドレスおよび電話番号が記憶される少なくとも1台の携帯電話装置を所有し、本カメラ付き携帯電話装置10を、例えば自宅の定位置にいるペット(水槽の熱帯魚やかごの小鳥など)の監視のために外出の際に該ペットを撮影可能な位置に設置し、他の1台の携帯電話装置を携帯して外出する。
カメラ付き携帯電話装置10において、アンテナ15および通信制御部15Aを介して他の通信端末からの着信が検知されると、電源供給自動ON/OFF回路(EC)によってウエイクアップ状態となり、モードデータメモリ18aに記憶されているモード設定データに従い現在の動作モードが監視カメラモードであるか否か判断される(ステップS1,S2)。
ここで、現在の動作モードが監視カメラモードではなく、例えば通常の待ち受けモードであると判断されると(ステップS2(N))、着信音が鳴動された後(ステップS3)、電話着信の場合には通常の通話処理に移行され、電子メール着信の場合には通常の電子メール受信処理に移行される(ステップS4)。
一方、現在の動作モードが監視カメラモードであると判断されると(ステップS2(Y))、着信音は鳴動されずに、前記通信制御部15Aによる着信動作の種別が電子メールの着信であるかまたは電話の着信であるかが判断される(ステップS5)。
ここで、電子メールの着信であると判断された場合には、メール送信元端末のメールアドレスがRAM18内の監視指定アドレスメモリ18bに設定記憶されたユーザが外出携帯中のもう1台の携帯電話装置の指定メールアドレスであるか否か判断され(ステップS5→S6)、指定のメールアドレスではないと判断された場合には、前記通常の電子メール受信処理に移行される(ステップS6→S4)。
一方、前記メール着信元端末のメールアドレスが、ユーザが現在外出して携帯中のもう1台の携帯電話装置の指定メールアドレスであると判断された場合には(ステップS6(Y))、カメラ制御部16Aによって撮像部16の撮像動作が制御されて1ショットの撮影画像が取得されRAM18内の撮像データメモリ18dに記憶されると共に(ステップS7)、この撮影画像データが前記指定のメールアドレスであるメール着信元の携帯電話装置に対して電子メールで送信される(ステップS8)。すると、電源供給自動ON/OFF回路(EC)によってスリープ状態へ切り換えられる(ステップS9)。
これにより、本カメラ付き携帯電話装置10により撮影された例えば留守宅にいる現在のペットの状態を撮影した撮影画像を、外出中であるユーザの携帯電話装置からのメール送信によって非常に簡単に手元の端末に取得して見て確認できるようになる。
一方、前記ステップS5において、通信制御部15Aによる着信動作の種別が電話の着信であると判断された場合には、電話発信元の電話番号がRAM18内の監視指定番号メモリ18cに設定記憶されたユーザが外出携帯中のもう1台の携帯電話装置の指定の電話番号であるか否か判断される(ステップS5→S10)。
そして、電話発信元の電話番号がユーザが外出携帯中のもう1台の携帯電話装置の電話番号であると判断された場合には(ステップS10(Y))、カメラ制御部16Aによって撮像部16の撮像動作が制御されてリアルタイムな動画像が取得されると共に、マイク13から音声変換部13Aを介して周囲の音声が入力され、この動画像および音声データがRAM18内の動画像・音声データメモリ18eに逐次更新記憶されると共に、テレビ電話の機能によって現在通話状態にある電話発信元の携帯電話装置に対して転送される(ステップS11)。
これにより、本カメラ付き携帯電話装置10によりリアルタイムに撮影および音声入力された例えば留守宅にいる現在のペットの状態を撮影した動画像および音声を、外出中であるユーザの携帯電話装置からの電話によって非常に簡単に手元の端末に取得して見て聞いて確認できるようになる。
そして、電話発信元のであるユーザの携帯電話装置から接続が断たれた場合には、電源供給自動ON/OFF回路(EC)によってスリープ状態へ切り換えられる(ステップS12→S9)。
一方、前記ステップS10において、電話発信元の電話番号がユーザが外出携帯中のもう1台の携帯電話装置である指定の電話番号ではないと判断された場合には、不在案内の音声メッセージが予め設定された指定の秒数再生されて応答された後(ステップS10→S13)、電話の接続が切断され(ステップS14)、電源供給自動ON/OFF回路(EC)によってスリープ状態へ切り換えられる(ステップS9)。
従って、このようなカメラ付き携帯電話装置10による監視カメラ機能によれば、ユーザ外出先からの電子メールまたは電話の着信に応答してウエイクアップし、その時点で撮影した留守宅内の状態を見ることのできる撮影画像データ、またはリアルタイム撮影した動画像および音声データを、外出先ユーザの端末へ送信し容易に監視,確認させることができるようになる。
(常時監視モード)
図6は、前記カメラ付き携帯電話装置10を充電&回転用クレードル20に装着して使用した場合の常時監視処理を示すフローチャートである。
ユーザは本カメラ付き携帯電話装置10の他に監視指定アドレスメモリ18bおよび監視指定番号メモリ18cにそのメールアドレスおよび電話番号が記憶される少なくとも1台の携帯電話装置を所有し、本カメラ付き携帯電話装置10を、例えば自宅の部屋にいて動き回るペット(犬や猫など)の監視のため、外出の際に該ペットの居る部屋に設置した充電&回転用クレードル20に装着し(図2参照)、他の1台の携帯電話装置を携帯して外出する。
充電&回転用クレードル20に装着されたカメラ付き携帯電話装置10において、電源がONにされると、電源供給自動ON/OFF回路(EC)によってウエイクアップ状態となり、モードデータメモリ18aに記憶されているモード設定データに従い現在の動作モードが常時監視モードであるか否か判断される(ステップT1,T2)。
ここで、現在の動作モードが常時監視モードではないと判断された場合には、前記電源供給自動ON/OFF回路(EC)によってスリープ状態に切り換えられる(ステップT3)。
一方、現在の動作モードが常時監視モードであると判断された場合でも(ステップT2(Y))、RAM18内のクレードル装着データメモリ18fに記憶されているクレードル装着フラグの有無に従い、充電&回転用クレードル20への接続が無いと判断された場合には、前記電源供給自動ON/OFF回路(EC)によってスリープ状態に切り換えられる(ステップT4→T3)。
一方、現在の動作モードが常時監視モードであると判断されると共に(ステップT2(Y))、図2で示したように、充電&回転用クレードル20への接続が有ると判断された場合には(ステップT4(Y))、監視指定番号メモリ18cに記憶されている外出中ユーザの携帯電話装置である指定の電話番号からの着信の有無が判断される(ステップT5)。
ここで、外出中ユーザの携帯電話装置である指定の電話番号からの着信が無いと判断される状態では(ステップT5(N))、各種センサ26a,26b,…からの音、光、煙、振動、温度、気圧などの検出データがRAM18内の各種センサデータメモリ18gに逐次更新されながら記憶されると共に、時計回路19からの現在時刻データの取得や撮像部16によるリアルタイムな撮影動画像データを解析した移動物体の検出などが行われ(ステップT6)、これらの各種センサ検出データや現在時刻データおよび移動物体の検出データなどによる監視対象環境(部屋など)の状態変化データが、通報条件データメモリ18hに設定記憶された指定の端末への通報条件データに合致する状態となったか否か繰り返し判断される(ステップT7)。
そして、例えば温度検出データや煙(粒子)検出データによる状態変化データが一定以上の検出データ値となり、通報条件データに合致する状態になったと判断された場合には(ステップT7(Y))、監視指定番号メモリ18cに記憶されている外出中のユーザの携帯電話番号に対し電話による発信が行われ(ステップT8)、その着信応答があるか否か判断される(ステップT9)。
このステップT9において、外出中ユーザの携帯電話への発信に対しその着信応答があったと判断された場合には、カメラ制御部16Aによって撮像部16の撮像動作が制御されてリアルタイムな動画像が取得されると共に、マイク13から音声変換部13Aを介して周囲の音声が入力され、この動画像および音声データがRAM18内の動画像・音声データメモリ18eに逐次更新記憶されると共に、テレビ電話機能によって着信応答のあった外出ユーザの携帯電話装置に対して転送される(ステップT10)。
この際、外出ユーザの携帯電話装置には、留守宅の充電&回転用クレードル20に装着してきたカメラ付き携帯電話装置10によりリアルタイムに撮影されている動画像および音声データが表示再生され、監視対象環境(部屋など)の状態変化が実際に見聞きできる状態で通報される。
一方、前記通報条件データに合致する状態とならない場合でも(ステップT7(N))、外出ユーザの携帯電話装置である指定の電話番号からの着信が有ったと判断された場合には(ステップT5(Y))、前記同様に撮像部16の撮像動作が制御されてリアルタイムな動画像が取得されると共に、マイク13から音声変換部13Aを介して周囲の音声が入力され、この動画像および音声データがRAM18内の動画像・音声データメモリ18eに逐次更新記憶されると共に、テレビ電話機能によって着信のあった外出ユーザの携帯電話装置に対して転送される(ステップT10)。
この場合には、外出中であるユーザの携帯電話装置からの電話によって、本カメラ付き携帯電話装置10によりリアルタイムに撮影および音声入力された例えば留守宅の状態である動画像および音声を、非常に簡単に手元の端末に取得して見聞き確認できるようになる。
そして、現在通話状態となってリアタイムな撮影動画像および音声データを転送中にある前記外出中ユーザの携帯電話装置からの音声入力による指示あるいはキー(ボタン)操作による指示により、音声認識あるいはキーコード判断によってカメラ撮影方向の前後(上下)左右方向への回転の指示があったと判別された場合には(ステップT11,T12(Y))、接続中の充電&回転用クレードル20に対して前記ユーザ携帯電話からの指示に応じた前後(上下)左右方向への回転制御信号が送信される(ステップT13)。
図7は、前記充電&回転用クレードル20における充電・回転処理を示すフローチャートである。
充電&回転用クレードル20において、前記カメラ付き携帯電話装置10が装着され接続された状態では(ステップP1(Y))、外部I/Oインターフェイス&充電部20Bを介して検出される携帯電話装置10側の充電池10Eの電圧レベルが検出され、充電の必要な状態であるか否か判断されると共に(ステップP2)、カメラ撮影方向の回転制御信号が受信された否か判断される(ステップP4)。
そして、前記カメラ付き携帯電話装置10の充電池10Eの検出電圧レベルが充電の必要な状態であると判断された場合には、充電回路29から前記外部I/Oインターフェイス&充電部20Bを介してその充電電圧が供給され(ステップP2→P3)、また、カメラ撮影方向の回転制御信号が受信されたと判断された場合には、その前後(上下)または左右方向への回転制御信号に応じて、モータ制御部28を介し垂直回転モータ25または水平回転モータ24が回転駆動され(ステップP4→P5)、図2で示すように、リアルタイム撮影中にあるカメラ付き携帯電話装置10の設置方向(撮影方向)が、垂直方向Yまたは水平方向Xに回転される。
これにより、外出ユーザの携帯電話装置に対して、留守宅の充電&回転用クレードル20に装着してきたカメラ付き携帯電話装置10によりリアルタイムに撮影される動画像および音声データを表示再生させ、監視対象環境(部屋など)の状態変化を実際に見聞きできる状態で通報したり、逆に外出ユーザからの電話によって、本カメラ付き携帯電話装置10によりリアルタイムに撮影,音声入力される留守宅の動画像および音声データを送信させ、手元の端末に簡単に取得して見聞き確認できるだけでなく、外出ユーザの携帯電話装置からの指示により充電&回転用クレードル20を回転駆動させ、その撮影画像および音声データの取得方向を任意の方向に変更制御して、監視対象のペットなどの状態を確実に確認できるようになる。
そして、通話状態にある外出ユーザの携帯電話装置から接続が断たれた場合には(ステップT14(Y))、前記ステップT5からの処理に戻り、当該外出ユーザの携帯電話装置からの再着信待ちの状態、または各種センサ検出処理などに基づく通報条件合致待ちの状態に復帰する(ステップT5〜T7)。
一方、前記ステップT9において、外出中ユーザの携帯電話への発信に対しその着信応答がないと判断された場合には、前記通報条件の合致判断時期に対応して撮像部16により撮影されて撮像データメモリ18dに記憶された複数枚の撮影画像データが、監視指定アドレスメモリ18bに記憶されている指定のメールアドレスである外出ユーザの携帯電話装置に対して電子メールで送信される(ステップT9→T15)。
これにより、監視対象環境(部屋など)の状態変化データが指定の端末への通報条件データに合致することにより行った当該指定端末への電話発信に対し応答がない場合でも、その状態変化を伴う撮影画像データを電子メールとして指定の端末アドレスへ送信しておくことで、外出先のユーザに対し前記監視対象環境の状態変化を実際に見て確認できる状態で通報できるようになる。
なお、前記常時監視処理では、そのステップT2において本携帯電話装置10の動作モードが常時監視モードに設定されていないと判断された場合、また常時監視モードに設定されていると判断された場合でもステップT4において充電&回転用クレードル20に装着されていないと判断された場合には、ステップT3に進み、電源供給自動ON/OFF回路(EC)によってスリープ状態に切り換えられる手順としたが、このステップT3に代えて、前記図5における着信対応監視処理に移行する手順としてもよい。
また、本実施形態では、カメラ付き携帯電話装置10による監視カメラ機能や常時監視機能を留守宅のペットを監視するのに適用した場合について説明したが、これに限らず、監視が必要な場所なら何処に対しても同様に適用可能であるのは勿論である。
したがって、前記構成のカメラ付き携帯電話装置10によれば、通常時はシャッタカメラおよび携帯電話として機能し、監視カメラモードにおいて予め指定されたメールアドレスの外部端末からの電子メールの着信があると、撮像部16による1ショットの撮影画像データが電子メールとして前記メール発信元である指定のメールアドレスを有する外部端末へ送信され、また予め指定された電話番号の外部端末からの電話の着信があると、撮像部16によるリアルタイムの撮影動画像およびマイク13から入力される音声データが前記電話発信元である指定の電話番号の外部端末へ転送されるので、監視カメラモードでは、例えばユーザが外出時に携帯する携帯電話装置のメールアドレスおよび電話番号を前記指定のメールアドレスおよび電話番号として設定し、当該ユーザは外出先から何時でも監視対象場所に設置した本カメラ付き携帯電話装置10へ電子メールまたは電話でアクセスするだけで、監視対象の現在の状況を撮影静止画像またはリアルタイムな撮影動画像および音声として取得して確認することができる。
つまり、このカメラ付き携帯電話装置10によれば、1つの携帯電話を必要に応じて簡単に通常のカメラ付き携帯電話として利用したり、監視カメラとして利用したりすることができる。
また、前記構成のカメラ付き携帯電話装置10および充電&回転用クレードル20によれば、通常時はシャッタカメラおよび携帯電話として機能し、常時監視モードにおいて該携帯電話装置10がクレードル20に装着され外部電源の供給を受ける状態では、各種センサ26a,26b,…などにより監視対象場所周辺の状態変化が常時検出され、この状態変化が通報を要する条件となった場合には外出ユーザの携帯電話装置など指定の電話番号に電話を接続して、撮像部16によるリアルタイムの撮影動画像およびマイク13から入力される音声データを転送する一方で、前記指定の電話番号から電話の着信接続があった場合にも、同リアルタイムの撮影動画像および音声データを転送するので、常時監視モードでは、監視対象場所の状態変化を常時検出して通報条件となった場合に外出ユーザにリアルタイムの撮影動画像および音声データとして通報できるばかりでなく、外出ユーザが任意で必要とする場合でも、監視対象場所の現在の状態である撮影動画像および音声データを取得して確認することができる。
そして、前記常時監視モードにおいてカメラ付き携帯電話装置10から監視対象場所のリアルタイムの撮影動画像および音声データを外出ユーザなどの指定の電話へ転送している状態で、当該指定の電話からカメラ回転の指示が有ると、本カメラ付き携帯電話装置10を装着中の充電&回転用クレードル20に対して回転制御信号が出力され、当該クレードル20の水平回転部22や垂直回転部23が駆動されてカメラ付き携帯電話装置10の向きが変更制御されるので、外出ユーザはリアルタイムで撮影取得している監視対象場所の撮影動画像の撮影方向を自在に変化させて見ることができる。
さらに、前記常時監視モードにおいて、各種センサ26a,26b,…などにより監視対象場所周辺の状態変化を常時検出し、この状態変化が通報を要する条件となり外出ユーザの携帯電話装置など指定の電話番号に電話を発信した際に、その応答がない場合には、状態変化条件の検出前後に撮像部16により撮影された画像データが指定のアドレスとした前記外出ユーザの携帯電話装置などへ電子メールで送信されるので、電話による直接の接続が行えなくても、監視対象場所の状態変化が通報条件となったことを撮影画像によって指定のユーザへ確実に報知できるようになる。
つまり、このカメラ付き携帯電話装置10および充電&回転用クレードル20によれば、1つの携帯電話を必要に応じて簡単に通常のカメラ付き携帯電話として利用したり、高機能な監視カメラとして利用したりすることができる。
なお、前記各実施形態において記載したカメラ付き携帯電話装置10による各処理の手法、すなわち、図5のフローチャートに示す着信対応監視処理、図6のフローチャートに示す常時監視処理等の各手法は、何れもコンピュータに実行させることができるプログラムとして、メモリカード(ROMカード、RAMカード等)、磁気ディスク(フロッピディスク、ハードディスク等)、光ディスク(CD−ROM、DVD等)、半導体メモリ等の外部記録媒体(18M)に格納して配布することができる。そして、撮像機能および通信機能を備えた種々のコンピュータ端末は、この外部記録媒体(18M)に記憶されたプログラムを記録媒体読取部(18A)によって記憶装置(18)に読み込み、この読み込んだプログラムによって動作が制御されることにより、前記各実施形態において説明した通常の携帯電話機能から簡単に切り換えできる監視カメラ機能や常時監視機能を実現し、前述した手法による同様の処理を実行することができる。
また、前記各手法を実現するためのプログラムのデータは、プログラムコードの形態として通信ネットワーク(インターネット)上を伝送させることができ、この通信ネットワーク(インターネット)に接続されたコンピュータ端末(プログラムサーバ)の記憶装置から前記のプログラムデータを取り込み、前述した通常の携帯電話機能から簡単に切り換えできる監視カメラ機能や常時監視機能を実現することもできる。
なお、本願発明は、前記各実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。さらに、前記各実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適宜な組み合わせにより種々の発明が抽出され得る。例えば、各実施形態に示される全構成要件から幾つかの構成要件が削除されたり、幾つかの構成要件が組み合わされても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除されたり組み合わされた構成が発明として抽出され得るものである。
本発明の実施形態に係るカメラ付き携帯電話装置10の外観構成を示す正面図。 前記カメラ付き携帯電話装置10を装着した充電&回転用クレードル(スタンド)20の外観構成を示す斜視図。 前記カメラ付き携帯電話装置10および充電&回転用クレードル(スタンド)20の電子回路の構成を示すブロック図。 前記携帯電話装置10のRAM18内に備えられる一部データメモリの内容を示す図。 前記カメラ付き携帯電話装置10を単独で使用した場合の着信対応監視処理を示すフローチャート。 前記カメラ付き携帯電話装置10を充電&回転用クレードル20に装着して使用した場合の常時監視処理を示すフローチャート。 前記充電&回転用クレードル20における充電・回転処理を示すフローチャート。
符号の説明
10 …カメラ付き携帯電話装置
10A…携帯電話制御部(CPU)
10B…携帯電話側外部I/Oインターフェイス&充電部
10E…充電池
EC …電源供給自動ON/OFF回路
11 …キー入力部
11a…文字・記号入力キー群
11b…機能操作キー(操作ボタン)
12 …液晶表示部
13 …マイク
13A…音声変換部
14 …スピーカ
15 …アンテナ
15A…通信制御部
16 …撮像部
16A…カメラ制御部
17 …ROM
18 …RAM
18a…モードデータメモリ
18b…監視指定アドレスメモリ
18c…監視指定番号メモリ
18d…撮像データメモリ
18e…動画像・音声データメモリ
18f…クレードル装着データメモリ
18g…各種センサデータメモリ
18h…通報条件データメモリ
18i…電話帳データメモリ
18j…ワークエリア
18M…外部記憶媒体
18A…記憶媒体読書部
19 …時計回路
20 …充電&回転用クレードル
20A…クレードル制御部(CPU)
20B…クレードル側外部I/Oインターフェイス&充電部
20H…装着スロット
21 …固定台座
22 …水平回転部
23 …垂直回転部
24 …水平回転モータ
25 …垂直回転モータ
26a,26b,…各種センサ
26A…各種センサ制御部
27 …ACコンセント
28 …センサorモータ制御部
29 …充電回路

Claims (8)

  1. 電話機能と電子メール機能と撮影機能とを有するカメラ付き携帯電話装置であって、
    他の通信端末からの着信に応答して画像データを撮影する撮影制御手段と、
    他の通信端末からの着信があった際に、電話の着信か電子メールの着信かを判断する第1の判断手段と、
    を備え、
    前記撮影制御手段は、前記他の通信端末からの着信に応答して画像データを撮影する際に、前記第1の判断手段により電話の着信であると判断された場合には動画データを撮影し、前記第1の判断手段により電子メールの着信であると判断された場合には静止画データを撮影する撮影方法選択手段を含むことを特徴とするカメラ付き携帯電話装置。
  2. 他の通信端末からの着信に応答して画像データを送信する送信制御手段を更に備えたことを特徴とする請求項1に記載のカメラ付き携帯電話装置。
  3. 前記送信制御手段は、前記他の通信端末からの着信に応答して画像データを送信する際に、前記第1の判断手段により電話の着信であると判断された場合には動画データを送信し、前記第1の判断手段により電子メールの着信であると判断された場合には静止画データを送信する送信画像選択手段を含むことを特徴とする請求項2に記載のカメラ付き携帯電話装置。
  4. 前記送信制御手段は、前記他の通信端末からの着信に応答して画像データを送信する際に、前記第1の判断手段により電話の着信であると判断された場合には電話機能を用いて画像データを送信し、前記第1の判断手段により電子メールの着信であると判断された場合には電子メール機能を用いて画像データを送信する送信方法選択手段を含むことを特徴とする請求項2または3に記載のカメラ付き携帯電話装置。
  5. 他の通信端末からの着信があった際に、前記第1の判断手段により電話の着信であると判断された場合には、前記撮影制御手段の制御によりリアルタイムに撮影される動画データを、前記送信制御手段の制御により該着信があった他の通信端末へ電話機能を利用してリアルタイムに送信し、前記第1の判断手段により電子メールの着信であると判断された場合には、前記撮影制御手段の制御により非リアルタイムに撮影される静止画データを、前記送信制御手段の制御により該着信があった他の通信端末へ電子メール機能を利用して非リアルタイムに送信することを特徴とする請求項2乃至4に記載のカメラ付き携帯電話装置。
  6. 監視モードを設定するモード設定手段と、
    このモード設定手段により前記監視モードが設定されていない状態で、前記撮影機能によりシャッタボタンの操作に応じた撮影を行う通常撮影手段と、
    他の通信端末からの着信があった際に、前記監視モードが設定されているか否かを判断する第2の判断手段を備え、
    前記撮影制御手段は、前記判断手段により前記監視モードが設定されていると判断された場合には、他の通信端末からの着信に応答して画像データを撮影し、前記判断手段により前記監視モードが設定されていないと判断された場合には、他の通信端末からの着信に応答した画像データの撮影を行わないことを特徴とする請求項1に記載のカメラ付き携帯電話装置。
  7. 監視モードを設定するモード設定手段と、
    他の通信端末からの着信があった際に、前記監視モードが設定されているか否かを判断する第2の判断手段と、
    他の通信端末からの着信に応答して着信音を鳴らす着信音出力手段と、
    前記着信音出力手段は、前記判断手段により前記監視モードが設定されていると判断された場合には、他の通信端末からの着信に応答して着信音を鳴らし、前記判断手段により前記監視モードが設定されていないと判断された場合には、他の通信端末からの着信に応答して着信音を鳴らさないことを特徴とする請求項1に記載のカメラ付き携帯電話装置。
  8. 電話機能と電子メール機能と撮影機能とを有するカメラ付き携帯電話装置のコンピュータを制御するためのプログラムであって、
    前記コンピュータを、
    他の通信端末からの着信に応答して画像データを撮影する撮影制御手段と、
    他の通信端末からの着信があった際に、電話の着信か電子メールの着信かを判断する第1の判断手段と、
    として機能させ、
    前記撮影制御手段は、前記他の通信端末からの着信に応答して画像データを撮影する際に、前記第1の判断手段により電話の着信であると判断された場合には動画データを撮影し、前記第1の判断手段により電子メールの着信であると判断された場合には静止画データを撮影する撮影方法選択手段を含むことを特徴とするカメラ付き携帯電話装置の制御プログラム。
JP2004194908A 2004-06-30 2004-06-30 カメラ付き携帯電話装置、およびカメラ付き携帯電話装置の制御プログラム Expired - Fee Related JP4479382B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004194908A JP4479382B2 (ja) 2004-06-30 2004-06-30 カメラ付き携帯電話装置、およびカメラ付き携帯電話装置の制御プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004194908A JP4479382B2 (ja) 2004-06-30 2004-06-30 カメラ付き携帯電話装置、およびカメラ付き携帯電話装置の制御プログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2009231076A Division JP2010011488A (ja) 2009-10-05 2009-10-05 カメラ付き携帯電話装置、およびカメラ付き携帯電話装置の制御プログラム

Publications (3)

Publication Number Publication Date
JP2006019978A JP2006019978A (ja) 2006-01-19
JP2006019978A5 JP2006019978A5 (ja) 2007-06-07
JP4479382B2 true JP4479382B2 (ja) 2010-06-09

Family

ID=35793817

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004194908A Expired - Fee Related JP4479382B2 (ja) 2004-06-30 2004-06-30 カメラ付き携帯電話装置、およびカメラ付き携帯電話装置の制御プログラム

Country Status (1)

Country Link
JP (1) JP4479382B2 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4517819B2 (ja) * 2004-11-04 2010-08-04 日本電気株式会社 端末ホルダ
US8221008B2 (en) 2006-03-29 2012-07-17 Canon Kabushiki Kaisha Cradle having panhead function
JP6804627B2 (ja) * 2017-02-24 2020-12-23 シャープ株式会社 制御装置、端末装置、クレードル、通知システム、制御方法、および制御プログラム
JP6841171B2 (ja) * 2017-06-27 2021-03-10 日本精工株式会社 機器制御システム及び遠隔調整システム
WO2024185794A1 (ja) * 2023-03-05 2024-09-12 合同会社Pet LinQ Plus 見守りシステム、見守りプログラム及びシッターマッチングシステム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0662134A (ja) * 1992-08-10 1994-03-04 Nippon Telegr & Teleph Corp <Ntt> センサ電話機
JP4590726B2 (ja) * 2000-12-12 2010-12-01 仁 糸川 遠隔監視装置
JP2004048571A (ja) * 2002-07-15 2004-02-12 Ik System:Kk 映像を送受信できる携帯電話・phs等の携帯通信端末を使用した遠隔監視システム
JP3922999B2 (ja) * 2002-11-08 2007-05-30 シャープ株式会社 通信装置、プログラムおよび記録媒体

Also Published As

Publication number Publication date
JP2006019978A (ja) 2006-01-19

Similar Documents

Publication Publication Date Title
JP2003283696A (ja) テレビドアホンシステム
JP5656304B1 (ja) ホームセキュリティに用いられる監視カメラシステム
JP3889225B2 (ja) 携帯通信端末
JP5413958B2 (ja) 撮像装置及びプログラム
JP2006197593A (ja) 呼出しトリガによる画像取得および送信機能を有する移動通信装置ならびにその操作方法
JP2006262190A (ja) データ出力装置およびデータ出力方法
JP2006217478A (ja) 画像撮影装置及び画像撮影方法
KR20080073520A (ko) 통신이 가능한 촬영장치 및 그 제어방법
WO2014087157A1 (en) Communication device
JP4479382B2 (ja) カメラ付き携帯電話装置、およびカメラ付き携帯電話装置の制御プログラム
JP2010011488A (ja) カメラ付き携帯電話装置、およびカメラ付き携帯電話装置の制御プログラム
JP2004140710A (ja) 携帯電話端末および携帯電話端末の制御方法
JP2005294927A (ja) テレビドアホンシステム
KR101066339B1 (ko) 원격 감시 기능을 가진 유무선 단말기 및 그 방법
JP2003283677A (ja) 遠隔監視システム
JP2005318445A (ja) 遠隔見守りシステムの宅内装置
JP2007060015A (ja) インターホンシステム
JPH11298573A (ja) 電話機
JP2006184985A (ja) 外来者通知装置、インターホン装置およびインターホン対話方法
JP2003187354A (ja) 異常状況情報送信システム
JP2002152341A (ja) 携帯電話機および防犯装置
JP2001292442A (ja) 電話機による遠隔監視システム
JP2007235604A (ja) 録画転送コントローラ、およびそれを用いたインターホンシステム
JP2008187656A (ja) テレビドアホン装置
JP2005217549A (ja) カメラ制御機能付携帯電話機

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070413

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070413

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090302

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090310

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090424

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090901

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091005

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100223

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100308

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130326

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130326

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140326

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees