JP2005065118A - リモコン機能付き携帯端末及びリモコンサーバ - Google Patents

Abstract

【課題】 ユーザが制御対象とする電化製品を容易に特定することができるようにし、適切なリモコンプログラムを実行できるようにする。
【解決手段】 カメラ部４を制御対象とする電化製品に向けながら、入力部５の「電源ＯＮ」ボタンを押下すると、制御部２が記憶部のリモコンアプリケーションを実行し、カメラ部４がこの電化製品を撮影するように制御する。カメラ部４からの入力画像信号は制御部２に供給され、制御部２は記憶部３に記憶されている各電化製品のリモコンデータにおける登録画像データと比較して、この制御対象とする家電製品を特定する。そして、制御部２は、特定された制御対象とする家電製品のリモコンプログラムを実行して、この特定された制御対象とする家電製品の電源ＯＮ信号を作成し、制御データ送信部６から送信して制御対象とする家電製品を電源ＯＮにする。
【選択図】図１

Description

本発明は、被制御機器としての電化製品のリモートコントローラ（以下、リモコンという）として機能する携帯端末及び該リモコンの機能を補助するリモコンサーバに関する。

近頃、携帯電話を中心とした携帯端末の高機能化により、ユーザは、宅内においても、携帯端末を常備し、携帯端末の機能と通信サービスを活用している。その一方で、宅内で電化製品が増加するのに伴い、各電化製品特有のリモコンデータを送信する専用リモコンの数が増加してきている。以上のことからして、１つの携帯端末を複数の電化製品の遠隔制御に用いる汎用リモコンとするニーズが生まれており、また、提案されている（例えば、特許文献１参照）。

これは、サーバに蓄積されたリモコンデータを公衆回線を介して携帯電話にダウンロードすることにより、この携帯電話を様々な電化製品のリモコンとして機能させるものである。

さらに、電化製品のリモコンとして機能する通信ポートとアプリケーションを提供する携帯電話や携帯情報端末が、既に製品化されている。
特開２００１−２３７９２５号公報

上記特許文献１に記載の技術では、携帯端末を汎用性の高いリモコンとして機能させるために、この携帯端末に電化製品を遠隔制御するためのリモコンデータを容易にダウンロードできるようにしている。

ところで、このように、複数の電化製品に対して共通のリモコンとして機能する携帯端末を使用する場合には、複数の電化製品のうちの１つの制御対象とする電化製品を指定し、これに対して制御データを送信しなければならない。このために、この携帯端末には、テレビジョン受像機（以下、テレビという）やビデオデッキ（以下、ビデオという），エアコンディショナー（以下、エアコンという）などの電化製品毎の製品カテゴリやメーカなどからなるリモコンデータが保持されており、ユーザがこの携帯端末にリモコンモードを指定すると、リモコンアプリケーションが起動し、かかるリモコンデータを基に電化製品の製品カテゴリやメーカの選択画面が表示され、かかる選択画面で適宜選択操作することにより、制御対象とする電化製品を指定できるようにしている。

しかし、このように制御対象とする電化製品を製品カテゴリやメーカの選択画面での選択操作によって指定することは、リモコンの操作量が増加することになり、１つの電化製品に対してのみ使用される専用リモコンと比較して、ユーザにより多くの手間を強いることになって、使い勝手の点で問題となる。

本発明の目的は、かかる問題を解消し、制御対象となる電化製品の指定のための手間を簡略化し、使い勝手が優れたリモコン機能付き携帯端末及びリモコンサーバを提供することにある。

上記目的を達成するために、本発明は、携帯端末であって、被制御機器を撮影する撮影手段と、被制御機器毎の画像データを、登録画像データとして、予め記憶した記憶手段と、撮影手段で撮影して得られる画像データを入力画像データとし、入力画像データと記憶手段の登録画像データとを比較して、撮影手段で撮影される被制御機器を判定する制御手段とを有しており、ユーザの指示によって撮影手段が被制御機器を撮影したときには、制御手段が、撮影手段からの入力画像データと記憶手段の登録画像データとから撮影手段によって撮影された被制御機器をユーザが制御対象とする被制御機器と判定し、制御対象とする被制御機器を遠隔制御するリモコンプログラムを実行するものである。

また、本発明は、携帯端末であって、被制御機器を撮影する撮影手段と、制御機器毎のリモコンプログラムが登録された記憶手段と、撮影手段で得られた被制御対象とする被制御機器の画像データを通信手段を介してリモコンサーバに送信し、この画像データの送信に対するリモコンサーバからの応答データに該当する記憶手段の該リモコンプログラムを実行し、被制御対象とする被制御機器の制御データを形成する制御手段とを備え、制御データを被制御対象とする被制御機器に送信するものである。

また、本発明は、被制御機器を撮影する携帯端末と通信するリモコンサーバであって、被制御機器毎の画像データや製品情報からなるリモコンデータが登録されているサーバ記憶手段と、携帯端末から受信した被制御機器の画像データを記憶手段の登録画像データと比較して、被制御機器を被制御対象とする被制御機器と判定する制御手段とを有しており、ユーザの指示によって撮影手段が被制御機器を撮影したときには、制御手段が、撮影手段からの入力画像データと記憶手段の登録画像データとから撮影手段によって撮影された被制御機器をユーザが制御対象とする被制御機器と判定し、判定した制御対象とする被制御機器の製品情報をサーバ記憶手段から読み取って携帯端末に送信するものである。

以上説明したように、本発明による携帯端末によれば、ユーザがカメラ部を複数の電化製品のうちの制御したい電化製品に向けながら、特定のボタン操作をするだけでこの電化製品の制御を可能な状態とすることができることができるものであって、操作ボタンを増やすことなくリモコンを複数の電化製品に共用でき、その操作を簡略化できて使い勝手が向上する。

また、本発明による機器制御システムによれば、画像データによる制御対象とする電化製品を特定するための煩雑な処理を外部機器で行なわせるものであるから、携帯端末の負荷を軽減することができる。

さらに、本発明による機器制御システムによれば、リモコンプログラムを記憶する記憶部を外部機器に持たせることにより、必要に応じて携帯端末にリモコンプログラムをダウンロードすることができ、新たに追加した電化製品に対しても、容易に制御可能とすることができる。

以下、本発明の実施形態を図面を用いて説明する。
図１は本発明による携帯端末の第１の実施形態を示すブロック図であって、１はこの実施形態の携帯端末、２は制御部、３は記憶部、４はカメラ部、５は入力部、６は制御データ送信部、７は表示部である。

同図において、この実施形態の携帯端末１は、ユーザがカメラ部４を制御対象とする電化製品（図示せず）に向けながら、入力部５での後述する所定のボタンを押すだけでもって、適切なリモコンアプリケーションが起動してリモコンモードにするようにしたものである。

この携帯端末１は、被制御対象としての後述する電化製品を撮像するカメラ部４と、ユーザの操作によって指示信号などが入力される入力部５と、制御部２が実行するプログラムや各種データが記憶された記憶部３と、制御対象となる制御データを送信する制御データ送信部６と、タッチパネルを有し、ユーザが操作可能な画面も表示する表示部７と、ＣＰＵやメモリ（図示せず）などを備えてこれら各部を制御する制御部２とから構成されている。

記憶部３に記憶されるプログラムは、携帯端末１がリモコンとして機能するために制御部２で実行するリモコンアプリケーションプログラム（即ち、上記のリモコンアプリケーション）や画像データによって被制御対象とする電化製品を認識のための判定ソフトウェアプログラム（以下、判定プログラムという）などである。また。記憶部３に記憶されるデータは、リモコンアプリケーションの起動とともに使用されるものとして、電化製品毎のリモコンデータである。このリモコンアプリケーションは、制御部２で実行されて起動するとともに、携帯端末１はリモコンとして機能するリモコンモードとなる。また、このリモコンデータには、後述するように、制御対象とする電化製品を遠隔制御（リモートコントロール）するためのプログラム、即ち、リモコンプログラムが含まれている。

このリモコンアプリケーションの起動とともに、カメラ部４は撮影を行なうが、カメラ部４を制御対象とする電化製品に向けてリモコンアプリケーションを起動させると、このカメラ部４でこの制御対象とする電化製品を撮像し、その画像データが制御部２に供給される。なお、フラッシュランプを設け、この撮像時、これを点灯させるようにしてもよい。制御部２は、記憶部３の判定プログラム１２を実行し、これにより、記憶部３に記憶されているリモコンデータを用いて、カメラ部４から供給された画像データがいずれの電化製品のものであるかを判定し、制御対象とする電化製品を特定する。これとともに、制御部２は、この特定された制御対象とする電化製品に該当するリモコンデータのリモコンプログラムを実行し、制御対象とする電化製品の電源を立ち上げるための制御データ（即ち、電源ＯＮ信号）を形成して制御データ送信部６から赤外線送信させるとともに、表示部７にこの制御対象とする電化製品のための操作のためのアプリケーションの画面（以下、リモコン画面という）を表示させる。ユーザがこのリモコン画面を操作することにより、この操作に応じた制御データが生成され、制御データ送信部６から制御対象とする電化製品に赤外線送信させる。これにより、この制御対象とする電化製品では、この制御データによって制御され、ユーザの操作に応じた動作がなされることになる。

なお、カメラ部４から制御対象とする電化製品までの距離に応じて、このカメラ部４から得られる画像データによるこの電化製品の画像の大きさが異なる。このため、例えば、制御データ送信部６の赤外線発光手段を用いた赤外線による距離計測手段を設け、カメラ部４の撮影とともに、この距離計測手段によって制御対象とする電化製品までの距離を計測し、この計測距離と予め決められた基準距離（全ての電化製品で共通）との比率に応じた倍率でカメラ部４からの入力画像を拡大または縮小する。勿論、記憶部３に登録画像データは、この基準距離で撮影されてものである。これにより、入力画像データでの制御対象とする電化製品の画像は、記憶部３での該当する登録画像データの画像とほぼ同じ大きさとなり、両者の比較が容易となる。

図２は図１における携帯端末１の一具体例の前面部を示す平面図であって、１ａは携帯端末１の筐体、８は「電源ＯＮ」ボタンであり、図１に対応する部分には同一符号を付けて重複する説明を省略する。

同図において、携帯端末１の筐体１ａの前面部には、表示部７と各種の操作ボタンからなる入力部５とが設けられている。この入力部５での操作ボタンの１つが「電源ＯＮ」ボタン８である。また、この筐体１ａの上端面側には、カメラ部４と制御データ送信部６とが設けられている。

「電源ＯＮ」ボタン８を操作すると、制御部２（図１）は、上記のように、リモコンアプリケーションを実行開始し、これとともに、カメラ部４が撮影する。従って、カメラ部４を図示しない制御対象とする電化製品の方に向け、「電源ＯＮ」ボタン８を操作すると、カメラ部がこの制御対象とする電化製品を撮影し、上記のように、その画像データを制御部２（図１）に供給する。

また、上記のように、制御対象とする電化製品が特定されると、これに該当するリモコンデータにより、制御部２でこの制御対象とする電化製品の電源ＯＮン信号が作成され、制御データ送信部６から送信される。このときには、カメラ部４が制御対象とする電化製品に向けられたままにあり、従って、この電源ＯＮ信号がこの制御対象とする電化製品に伝送されて、この制御対象とする電化製品が電源ＯＮする。また、これとともに、表示部７にこの制御対象とする電化製品を操作するためのリモコン画面が表示される。このリモコン画面もしくは入力部５を操作することにより、この操作に応じた制御データが作成され、制御データ送信部６から制御対象とする電化製品に送信される。これにより、この電化製品が携帯端末１によって遠隔制御される。

なお、図２では、制御対象とする電化製品をテレビとし、表示部７にそのリモコン画面が表示されている場合を示しており、これをタッチ操作することにより、このテレビの電源のＯＮ，ＯＦＦやその他の操作を行なうことができる。

図３はこの実施形態での制御対象となる宅内に設置された電化製品の一具体例を示すものであって、ここでは、Ａ社製のテレビ１０，Ｂ社製のテレビ１１，Ｃ社製のビデオ１２及びＡ社製のエアコン１３としている。携帯端末１の記憶部３（図１）には、これら電化製品に対するリモコンデータが格納されている。

図４は図１における記憶部３に記憶されているリモコンデータの一具体例を一覧で示す図である。

同図において、リモコンデータ２０は、電化製品の制御や表示部７（図１）でのリモコン画面の表示のためのリモコンプログラム２１と、電化製品の種類を表わす製品カテゴリ２２と、電化製品の製造メーカ名２３と、カメラ部４（図１）からの画像データと比較するための電化製品の外観画像を表わす画像データ（以下、登録画像データという）２４とからなっている。これらが相互に対応付けられて登録されている。

ここでは、宅内に設置された制御対象となる電化製品を図３に示す電化製品１０〜１３としており、Ａ社製のテレビ１０に対しては、リモコンプログラム２１を「００１」とし、Ｂ社製のテレビ１１に対しては、リモコンプログラム２１を「００２」とし、Ｃ社製のビデオ１２に対しては、リモコンプログラム２１を「００３」とし、Ａ社製のエアコン１３に対しては、リモコンプログラム２１を「００４」としている。

また、携帯端末１の「電源ＯＮ」ボタン８（図２）が操作されてリモコンアプリケーションが起動したときには、このリモコンアプリケーションによって記憶部３（図１）から登録画像データ２４が読み出され、上記の判定プログラムにより、カメラ部４からの入力画像データと比較される。また、リモコンモードで制御対象とする電化製品が特定された場合には、そのリモコンプログラム２１が読み出されて実行され、この制御対象とする電化製品に電源ＯＮ信号が送信されるとともに、図２に示すように、携帯端末１の表示部７にそのリモコン画面が表示される。

なお、かかるリモコンデータ２０の登録画像データ２４は、この携帯端末１のカメラ部２で電化製品を撮影し、これを記憶部３に記憶したものである。この場合、かかる登録画像データ２４を記憶部３に登録する場合（即ち、電化製品を携帯端末１に登録する場合）、登録する全ての電化製品を上記の同じ基準距離から撮影することにより、携帯端末１の使用時での入力画像データの上記の倍率を設定することができる。

図５は図１，図２に示す携帯端末１を電化製品のリモコンとして用いた場合のリモコンアプリケーションの動作の一具体例を示すフローチャートである。この具体例を図１，図２も参照して説明する。

いま、ユーザが操作したい電化製品（即ち、制御対象とする電化製品）にカメラ部４を向けて「電源ＯＮ」ボタン８を押下すると（ステップ１００）、制御部２は記憶部３のリモコンアプリケーションを実行する。これにより、カメラ部４が制御されて、制御対象とする電化製品を撮影し、その画像データを制御部２に供給する（ステップ１０１）。

そこで、制御部２は、記憶部３に電化製品の登録画像データが記憶されているかどうか判定する（ステップ１０２）。ここでは、図３に示す電化製品１０〜１３が制御対象としてなり得る電化製品として設置されており、また、図４に示すリモコンデータ２０が記憶部３に記憶されているものとする。従って、制御部２は記憶部３に登録画像データが記憶されていると判定し（ステップ１０２）、その１つを取り出して（ステップ１０３）、カメラ部４からの入力画像データと比較する（ステップ１０４）。そして、これらが一致しない場合には、ステップ１０２〜１０４の動作を繰り返す。そして、この入力画像データと一致する登録画像データ２４があると（ステップ１０４）、制御部２はこの登録画像データ２４に対するリモコンデータ２０を記憶部３から読み取り、そのリモコンプログラム２１を実行する（ステップ１０５）。これにより、制御部２はこの制御対象とする電化製品の制御データ（この場合、電源ＯＮ信号）を作成し、リモコンデータ２０の製品カテゴリ２２や製造メーカ名２３などのデータから送信先（この制御対象とする電化製品のアドレス）が設定されて制御データ送信部６から送信される（ステップ１０６）。これにより、この制御対象とする電化製品の電源がＯＮする。

また、これとともに、実行されるリモコンプログラム２１により、この制御対象とする電化製品を操作するためのリモコン画面が表示部７に表示される。この制御対象とする電化製品がＡ社製のテレビ１０である場合には、このリモコン画面は、図２に示すように、このテレビ１０のリモコン画面となる。従って、このリモコン画面でもって、このテレビ１０の電源のＯＮ，ＯＦＦやその他の種々の操作を行なうことができる。

なお、記憶部３に登録画像データが記憶されていない場合、あるいは入力画像データに一致する登録画像データがない場合には（ステップ１０２）、リモコンプログラムは実行せずに終了する。

例えば、ユーザがカメラ部４をＡ社製のテレビ１０に向けて「電源ＯＮ」ボタン８を押下したとすると、カメラ部４はこのＡ社製のテレビ１０を撮影する。制御部２は、このＡ社製のテレビ１０の入力画像データを記憶部３のリモコンデータ２０での登録画像データ２４と順に比較していく。ここでは、記憶部３にＡ社製のテレビ１０の登録画像データ２４を記憶しているので、制御部２は入力画像データをＡ社製のテレビ１０と同一製品の画像データと判定し、Ａ社製のテレビ１０に対応した「００１」のリモコンプログラム２１が起動する。これにより、Ａ社製のテレビ１０の電源ＯＮ信号が形成され、リモコンデータ送信部６を介してＡ社製のテレビ１０に送信される。従って、Ａ社製のテレビ１０が電源ＯＮする。

以上のように、この実施形態では、ユーザがカメラ部４を遠隔制御したい電化製品に向けて「電源ＯＮ」ボタン８を押下すると、このカメラ部４からの入力画像データを用いて制御部２がこの電化製品を特定するので、ユーザは、遠隔制御したい電化製品の製品カテゴリや製造メーカ名を入力することなく、この電化製品の電源を入れることができる。

また、表示部７には、特定された制御対象とする電化製品のリモコン画面のみが表示されるので、電化製品のリモコン操作に制御対象とはなっていない電化製品の操作ボタンはなく、操作ボタンの数を減らすことができて操作がし易いものとなる。

なお、この実施形態では、入力部５での「電源ＯＮ」ボタン８を操作することにより、リモコンアプリケーションが起動し（即ち、リモコンモードが立上り）、カメラ部４が制御対象とする電化製品を撮影してこの電化製品を特定し、この電源をＯＮするようにしたが、携帯端末１はリモコン機能を表示部７での初期メニュー画面などで選択することにより、リモコンアプリケーションが起動し、これとともに、カメラ部４が制御対象とする電化製品を撮影し、以下、上記と同様の動作が行なわれるようにしてもよい。

また、表示部７に或る電化製品（例えば、Ａ社製のテレビ１０）のリモコン画面が表示されているとき、カメラ部４を他の電化製品（例えば、Ａ社製のエアコン１３）に向けて「電源ＯＮ」ボタン８を操作すると、新たに図５に示す動作が行なわれ、この他の電化製品に対して遠隔操作が可能となる。

また、電源がＯＮしている電化製品に新たにカメラ部４を向けて「電源ＯＮ」ボタン８を操作すると、図５に示す動作が行なわれてこの電化製品に電源ＯＮ信号が送信されるが（ステップ１０６）、この電化製品はそのまま電源ＯＮ状態に保たれる。従って、例えば、図３において、携帯端末１で、上記のように、Ａ社製のテレビ１０の電源ＯＮなどの操作を行なった後、他の電化製品であるＡ社製のエアコン１３の電源ＯＮの操作をしても、その後、再度Ａ社製のテレビ１０をチャンネル切替えなどの操作をしたい場合には、カメラ部４をこのＡ社製のテレビ１０の方に向けて「電源ＯＮ」ボタン８を操作することにより、その操作が可能となる。

さらに、この実施形態では、記憶部３の登録画像データ２４として、電化製品の画像の特徴とする部分だけのデータ（特徴データ）とすることができる。この場合には、これをカメラ部４からの入力画像データの特徴部分と比較することにより、制御対象とする電化製品を特定することができる。勿論、この入力画像データからその特徴データを抽出し、これを記憶部３での特徴データと比較するようにしてもよい。これによると、制御対象とする電化製品を特定する判定処理に要する時間を短縮することが可能となる。なお、かかる特徴データとしては、各電化製品の画像の特徴とする部分としてもよいし、また、各電化製品に特定の色付けなどがなされて容易に分離可能なマーカなどを付して、その画像データを特徴データとしてもよい。

さらにまた、例えば、図３でのＢ社製のテレビ１１とＣ社製のビデオ１２とのように、２つの電化製品が近接して設置されている場合もあるが、このような場合、カメラ部４をその一方の電化製品の方に向けたつもりでも、これら２つの電化製品が撮影されることもあり、制御部２は２つの入力画像データを取得してしまうことになる。このような場合には、制御部２は、制御対象とする電化製品がいずれであるかをユーザに決めさせるようにする。即ち、制御部２は、記憶部３のリモコンデータの登録画像データを用いて、夫々の入力画像データに対して電化製品を特定する。上記の場合、Ｂ社製のテレビ１１とＣ社製のビデオ１２とが特定される。そして、これらの画像データを、図６に示すように、表示部７で表示させ、そのいずれかをユーザに選択させる。ユーザが、携帯端末１の制御データ送信部６を選択する電化製品の方を向けながら、表示部７でこの電化製品を選択することにより、選択された電化製品が制御対象とする電化製品となり、この電化製品に対して図５のステップ１０５，１０６を実行する。

図７は本発明による携帯端末の第２の実施形態を示すブロック図であって、２ａは制御部、９は無線通信部であり、図１に対応する部分には同一符号を付けて重複する説明を省略する。

この第２の実施形態の携帯端末は、後述するリモコンサーバとで機器制御システムを構成し、図１に示した第１の実施形態の携帯端末１と同様のリモコン機能を持たせるものである。また、この携帯端末も、その前面部は図２の示す構成をなしている。

図７において、記憶部３には、図１に示す記憶部３と同様に、リモコンアプリケーションやリモコンデータが記憶されているが、このリモコンデータには、リモコンプログラムが含まれていないし、また、判定プログラムが記憶されていない。いま、この携帯端末１の制御対象となる電化製品を図３に示す製品１０〜１３とすると、記憶部３ａに記憶されるリモコンデータ２０ａは、図８に示すように、リモコンプログラム２１ａと製品カテゴリ２２ａと製造メーカ名２３ａとからなっている。

このため、制御部２ａは、カメラ部４からの入力画像データを、図１に示した第１の実施形態のような制御対象とする電化製品の特定に用いることなく、無線通信部９から後述のリモコンサーバに送信する。

図９は図７に示した携帯端末１と機器制御システムを構成するリモコンサーバの一実施形態を示すブロック図であって、３０はこの実施形態のリモコンサーバ、３１はサーバ制御部、３２はサーバ記憶部、３３は無線通信部である。

同図において、リモコンサーバ３０は、サーバ記憶部３２や無線通信部３３、これらを制御するサーバ制御部３１を備えている。この記憶部３２には、判定プログラムやリモコンデータが記憶されており、このリモコンデータには、制御対象となり得る電化製品の画像データ（登録画像データ）も含まれている。

いま、宅内に、図１０に示すように、Ａ社製のテレビ１０やＢ社製のテレビ１１，Ｃ社製のビデオ１２，Ａ社製のエアコン１３，Ａ社製のビデオ１４などの電化製品が、携帯端末１の制御対象となり得るものとして、設置されているものとすると、図１１に示すように、リモコンプログラム４１，製品カテゴリ４２，製造メーカ名４３及び登録画像データ４４からなるリモコンデータ４０がサーバ記憶部３２に記憶されている。

無線通信部３３は、図７に示す携帯端末１との無線通信を行なうものであって、この携帯端末の無線通信部９から送信されて画像データを受信し、サーバ制御部３１に供給する。

サーバ制御部３１は、無線通信部３３から画像データが受信されると、サーバ記憶部３２の判定プログラムを実行し、この受信画像データをサーバ記憶部３２のリモコンデータでの順次の登録画像データと比較して一致するか否かを判定し、両者が一致した電化製品を制御対象とする電化製品と特定する。そして、サーバ制御部３１は、制御対象とする電化製品を特定すると、サーバ記憶部３２のリモコンデータ４０から特定されたこの制御対象とする電化製品に対する製造カテゴリ４２と製造メーカ名４３とを読み取り、これを、製品データとして、無線通信部３３から携帯端末１に送信する。

図７に示す携帯端末１では、無線通信部９でこの製品データを受信すると、制御部２ａが、記憶部３ａのリモコンデータ２０ａ（図８）を用いて、この製品データに対する電化製品を制御対象とする電化製品として特定し、そのリモコンプログラム２１ａ（図８）を実行してこの制御対象とする電化製品の制御データ（この場合、電源ＯＮ信号）とリモコン画面を作成する。この電源ＯＮ信号は制御データ送信部６から送信され、また、リモコン画面は表示部７で、図２で示したように、表示される。

図１２は図７に示す携帯端末１と図９に示すリモコンサーバ３０の動作を示すフローチャートである。図７，図９及び図２を参照してこの動作を説明する。

図１２において、ユーザが携帯端末１を持ち、カメラ部４を制御対象とする電化製品に向けながら、「電源ＯＮ」ボタン８を押下すると（ステップ２００）、制御部２ａはリモコンアプリケーションを実行してカメラ部４を制御する。これにより、カメラ部４は制御対象とする電化製品を撮影する（ステップ２０１）。このとき、フラッシュランプが設けられているときには、このフラッシュランプを点灯させる。また、距離計測手段が設けられているときには、制御対象とする電化製品までの距離を計測する。カメラ部４からの入力画像データは、制御部２ａの制御の基に、無線通信部９を介して図９に示すリモコンサーバ３０に送信される（ステップ２０２）。このとき、距離計測手段で制御対象とする電化製品までの距離が計測されているときには、計測された距離情報もリモコンサーバ３０に送信される。

図９に示すリモコンサーバ３０では、無線通信部３３から入力画像データが受信されると、サーバ制御部３１が処理動作や各部の制御動作を開始し、判定プログラムを実行してサーバ記憶部３２にリモコンデータが記憶されているか否かを判定する。（ステップ２０３）。ここで、図１１に示すリモコンデータ４０が記憶されているとすると、このリモコンデータ４０の登録画像データ４４を順次１つずつ読み出して（ステップ２０４）、入力画像データと比較し（ステップ２０５）、入力画像データに一致する登録画像データ４４が得られるまで、このステップ２０３〜２０５の動作を繰り返す。このとき、携帯端末１から制御対象となる電化製品までの距離情報も受信した場合には、この距離情報と予め決められた上記の基準距離との比率に応じた倍率で入力画像データの画像を拡大もしくは縮小する。全てのリモコンデータ４０の登録画像データ４４が入力画像データに一致しない場合には（ステップ２０３）、この制御対象とする電化製品がリモコンサーバ３０に登録されていないことになり、このときには、「製品情報なし」という通知を無線送信部３３から携帯端末１（図７）に送信する（ステップ２０７）。

入力画像データに一致する登録画像データ４４があると（ステップ２０５）、サーバ制御部３１はこの登録画像データ４４に対応する電化製品を制御対象とする電化製品と特定し、これに対するリモコンデータ４０の製品カテゴリ４２と製造メーカ名４３とを製品情報とし、この製品情報を無線通信部３３から図１に示す携帯端末１に送信する（ステップ２０６）。

この携帯端末１では、リモコンサーバ３０から「製品情報なし」の通知を受けると（ステップ２０８）、制御部２ａはリモコンプログラムを起動させることができず、処理を終了する。

リモコンサーバ３０から製品情報を受信したときには（ステップ２０８）、制御部２ａは受信した製品情報を含むリモコンデータ２０ａ（図８）、従って、リモコンプログラム２１ａが記憶部３ａにあるか否かを判定する（ステップ２０９）。これがある場合には、制御部２ａはこのリモコンプログラム２１ａを実行して（ステップ２１０）、特定された上記の制御対象とする電化製品のための制御データ（この場合、電源ＯＮ信号）を作成し、制御データ送信部６から制御対象とする電化製品に送信する（ステップ２１１）。これとともに、制御部２ａはこの制御対象とする電化製品に対するリモコン画面を作成し、図２に示したように、表示部７に表示させる。

また、リモコンサーバ３０から受信した製品情報に対するリモコンプログラムが記憶部３ａにない場合には（ステップ）、制御部２ａはこの製品情報を無線通信部９から図９に示すリモコンサーバ３０に送り返す（ステップ２１２）。リモコンサーバ３０では、これを受信すると（ステップ２１３）、サーバ制御部３１がこの製品情報に該当するリモコンデータ４０（図１１）を、その登録画像データ４４を除いてサーバ記憶部３２から読み取り、無線通信部３３から図７に示す携帯端末１に送信する（ステップ２１４）。

この携帯端末１では、かかるリモコンデータ４０を無線受信部９で受信すると、制御部２ａがこのリモコンデータ４０を、リモコンデータ２０ａとして、記憶部３ａに記憶するとともに、このリモコンデータ４０のリモコンプログラム４１を実行し（ステップ２１０）、上記の制御対象とする電化製品の制御コード（この場合、電源ＯＮ信号）を作成して、制御データ送信部６から制御対象とする電化製品に送信する。これにより、この電化製品は電源ＯＮとなる（ステップ２１１）。これとともに、この制御対象となる家電製品のリモコン画面も作成され、表示部７で、図２に示すように、表示する。

このようにして、この実施形態においても、「電源ＯＮ」ボタン８を押下して制御対象とする電化製品をカメラ部４で撮影することにより、電化製品に関する情報を入力することなく、この電化製品をリモコン操作可能な状態とすることができる。

また、新たに電化製品を追加しても、リモコンサーバ３０のサーバ記憶部３２にこの電化製品に関するリモコンデータ４０を記憶しておくことにより、これを携帯端末１にダウンロードすることができ、これによってこの新たに追加した電化製品の遠隔制御を可能とすることができる。

ここで、図１０において、例えば、ユーザがカメラ部４をＡ社製のテレビ１０に向けて、「電源ＯＮ」ボタン８を押下した場合、携帯端末１は、撮影したＡ社製のテレビ１０の画像データをリモコンサーバ３０へ送信し、リモコンサーバ３０では、この受信画像データからこのＡ社製のテレビ１０を制御対象とする家電製品と特定し、Ａ社製のテレビ１０の製品情報を携帯端末１へ送信する。これにより、携帯端末１では、記憶部３ａにＡ社製のテレビ１０に対応したリモコンプログラム「００１」（図８）が記憶されており、制御部２ａはこのリモコンプログラム「００１」を起動するので、ユーザに対し、上記第１の実施例と同様の操作性を与えることができる。

一方で、例えば、ユーザがカメラ部４をＡ社製のビデオ１４に向けながら、「電源ＯＮ」ボタン８を押下した場合、リモコンサーバ３０では、図１１に示すリモコンデータ４０により、撮影した電化製品がＡ社製のビデオ１４であることを特定できるが、携帯端末１では、図８に示す記憶部３ａのリモコンデータ２０ａからして、Ａ社製のビデオ１４に対応したリモコンプログラムを記憶していない。しかし、ステップ２１２〜ステップ２１４により、リモコンサーバ３０からＡ社製のビデオ１４に対応したリモコンプログラム「００５」が携帯端末１にダウンロードされるので、携帯端末１をＡ社製のビデオ１４のリモコンとして機能させることもできる。

以上のように、この実施形態では、上記の第１の実施形態と異なり、受信画像データと登録画像データとの一致性の判定を、携帯端末１ではなく、リモコンサーバ３０で行なうものであるから、携帯端末１の負荷を軽減させることができるし、携帯端末１の記憶部３ａに該当するリモコンプログラムが記憶されていない電化製品に対しても、リモコンサーバ３０でのサーバ記憶部３２に多種の電化製品に対するリモコンプログラムを記憶しておくことにより、携帯端末１はリモコンサーバ３０からリモコンプログラムをダウンロードすることができ、携帯端末１は必要に応じて、様々な電化製品に対し、リモコンとして機能させることができる。

なお、この第２の実施形態では、入力部５での「電源ＯＮ」ボタン８を操作することにより、リモコンアプリケーションが起動し（即ち、リモコンモードが立上り）、カメラ部４が制御対象とする電化製品を撮影し、その画像データをリモコンサーバ３０に送信するようにしたが、携帯端末１はリモコン機能を表示部７での初期メニュー画面などで選択することにより、リモコンアプリケーションが起動し、これとともに、カメラ部４が制御対象とする電化製品を撮影し、その画像データをリモコンサーバ３０に送信するようにしてもよい。

また、表示部７に或る電化製品（例えば、Ａ社製のテレビ１０）のリモコン画面が表示されているとき、カメラ部４を他の電化製品（例えば、Ａ社製のエアコン１３）に向けて「電源ＯＮ」ボタン８を操作すると、新たに図１２に示す動作が行なわれ、この他の電化製品に対して遠隔操作が可能となる。

また、電源がＯＮしている電化製品に新たにカメラ部４を向けて「電源ＯＮ」ボタン８を操作すると、図１２に示す動作が行なわれてこの電化製品に電源ＯＮ信号が送信されるが（ステップ２１１）、この電化製品はそのまま電源ＯＮ状態に保たれる。従って、例えば、図１０において、携帯端末１で、上記のように、Ａ社製のテレビ１０の電源ＯＮなどの操作を行なった後、他の電化製品であるＡ社製のエアコン１３の電源ＯＮの操作をしても、その後、再度Ａ社製のテレビ１０をチャンネル切替えなどの操作をしたい場合には、カメラ部４をこのＡ社製のテレビ１０の方に向けて「電源ＯＮ」ボタン８を操作することにより、その操作が可能となる。

さらに、この実施形態では、リモコンサーバ３０でのサーバ記憶部３２の登録画像データ４４（図１１）として、電化製品の画像の特徴とする部分だけのデータ（特徴データ）とすることができる。この場合には、この登録特徴データをカメラ部４からの入力画像データのこの特徴部分と比較することにより、制御対象とする電化製品を特定することができる。勿論、携帯端末１において、撮影した画像データからその特徴部分を特徴データとして抽出してリモコンサーバ３０に送信し、リモコンサーバ３０では、これをサーバ記憶部３２で登録された特徴データと比較するようにしてもよい。これによると、制御対象とする電化製品を特定する判定処理に要する時間を短縮することが可能となる。なお、かかる特徴データとしては、各電化製品の画像の特徴とする部分としてもよいし、また、各電化製品に特定の色付けなどがなされて容易に分離可能なマーカなどを付して、その画像データを特徴データとしてもよい。

さらにまた、例えば、図３でのＢ社製のテレビ１１とＣ社製のビデオ１２とのように、２つの電化製品が近接して設置されている場合もあるが、このような場合、カメラ部４をその一方の電化製品の方に向けたつもりでも、これら２つの電化製品が撮影されることもあり、図９でのリモコンサーバ３０のサーバ制御部３１は２つの入力画像データを取得してしまうことになる。このような場合には、サーバ制御部３１は、制御対象とする電化製品がいずれであるかをユーザに決めさせるようにする。即ち、サーバ制御部３１は、サーバ記憶部３２のリモコンデータの登録画像データ４４を用いて、夫々の入力画像データに対して電化製品を特定する。上記の場合、Ｂ社製のテレビ１１とＣ社製のビデオ１２とが特定される。そして、これらの登録画像データ４４を携帯端末１に送信し、図６に示したように、その表示部７で表示させ、そのいずれかをユーザに選択させる。ユーザが、携帯端末１の制御データ送信部６を選択する電化製品の方を向けながら、表示部７でこの電化製品の画像を選択操作することにより、選択された電化製品が制御対象とする電化製品となり、携帯端末１において、図１２でのステッブ２０８からの動作が、この電化製品に対して行なわれる。

また、この第２の実施形態では、携帯端末１とリモコンサーバ３０との間は、無線で直接通信するようにしたが、通信できれば、無線でなくてもよい。また、携帯端末１とリモコンサーバ３０との間の通信に公衆回線を用いて行なうことにより、リモコンサーバ３０を屋外に設けても、リモコン操作性をユーザに提供することができる。

なお、以上の各実施形態では、被制御機器として、宅内の電化製品を例としたが、本発明はこれのみに限るものではなく、電化製品以外の被制御機も対象とすることができるし、また、遠隔制御の対象となり得るものであれば、宅外の被制御機器であってもよい。

本発明による携帯端末の第１の実施形態を示すブロック図である。 図１に示す携帯端末の前面部の一構成例を示す平面図である。 図１に示す実施形態での制御対象となり得る電化製品の例を示す図である。 図１における記憶部に登録されているリモコンデータの具体例を模式的に示す図である。 図１に示す実施形態の動作の一具体例を示すフローチャートである。 図１に示す実施形態で２以上の電化製品を同時に撮影したときの表示部で表示される選択画面の一具体例を示す図である。 本発明による携帯端末の第２の実施形態を示すブロック図である。 図７における記憶部に記憶されたリモコンデータの一具体例を模式的に示す図である。 図７に示す携帯端末と機器制御システムを構成するリモコンサーバの一具体例を示すブロック図である。 図７に示す携帯端末の制御対象となり得る電化製品の例を示す図である。 図９におけるサーバ記憶部に記憶されたリモコンデータの一具体例を模式的に示す図である。 図７に示す携帯端末と図９に示すリモコンサーバとからなる機器制御システムの動作の一具体例を示すフローチャートである。

符号の説明

１ 携帯端末
２，２ａ 制御部
３，３ａ 記憶部
４ カメラ部
５ 入力部
６ 制御データ送信部
７ 表示部
８ 「電源ＯＮ」ボタン
９ 無線通信部
２０，２０ａ リモコンデータ
２１，２１ａ リモコンプログラム
２２，２２ａ 製品カテゴリ
２３，２３ａ 製造メーカ名
２４，２４ａ 登録画像データ
３０ リモコンサーバ
３１ サーバ制御部
３２ サーバ記憶部
３３ 無線通信部
４０ リモコンデータ
４１ リモコンプログラム
４２ 製品カテゴリ
４３ 製造メーカ名
４４登録画像データ

Claims (15)

1. １つ以上の被制御機器を遠隔制御するリモコンプログラムを有する携帯端末において、
   該被制御機器を撮影する撮影手段と、
   該被制御機器毎の画像データを、登録画像データとして、予め記憶した記憶手段と、
   該撮影手段で撮影して得られる画像データを入力画像データとし、該入力画像データと該記憶手段の該登録画像データとを比較して、該撮影手段で撮影される該被制御機器を判定する制御手段と
   を有し、ユーザの指示によって該撮影手段が該被制御機器を撮影し、該制御手段が、該撮影手段からの入力画像データと該記憶手段の登録画像データとから該撮影手段によって撮影された該被制御機器を該ユーザが制御対象とする被制御機器と判定し、該制御対象とする被制御機器を遠隔制御するリモコンプログラムを実行することを特徴とする携帯端末。
2. 請求項１記載の携帯端末において、
   前記登録画像データは、前記被制御機器の画像の特徴部分を表わす画像データであって、
   前記撮影手段で撮影して得られる前記入力画像データから撮影された前記被制御機器の画像の特徴部分を抽出する抽出手段を設け、
   前記制御手段は、該抽出手段で抽出された該特徴部分を前記記憶手段の前記登録画像データと比較することにより、制御対象とする被制御機器を判定することを特徴とする携帯端末。
3. １つ以上の被制御機器を遠隔制御するリモコンプログラムを有し、リモコンサーバとの通信手段を備えた携帯端末において、
   該被制御機器を撮影する撮影手段と、
   該制御機器毎の該リモコンプログラムが登録された記憶手段と、
   該撮影手段で得られた被制御対象とする該被制御機器の画像データを該通信手段を介して該リモコンサーバに送信し、該画像データの送信に対する該リモコンサーバからの応答データに該当する該記憶手段の該リモコンプログラムを実行し、被制御対象とする該被制御機器の制御データを形成する制御手段と
   を備え、該制御データを被制御対象とする該被制御機器に送信することを特徴とする携帯端末。
4. 請求項３記載の携帯端末とのデータ通信をする通信手段を備えたリモコンサーバであって、
   該携帯端末で制御対象となり得る被制御機器の画像データや製品情報からなるリモコンデータが登録されたサーバ記憶手段と、
   該通信手段で受信された該携帯端末からの制御対象とする被制御機器の画像データと該サーバ記憶手段の登録されている該画像データとを比較して、該制御対象とする被制御機器を判定し、該制御対象とする被制御機器に対する製品情報を該サーバ記憶部から取得する制御手段と
   を備え、該制御手段で取得した該製品情報を、該通信手段を介し、該携帯端末からの該画像データの応答データとして該携帯端末に送信することを特徴とするリモコンサーバ。
5. １つ以上の被制御機器を遠隔制御するリモコンプログラムを有し、リモコンサーバとの通信手段を備えた携帯端末において、
   該被制御機器を撮影する撮影手段と、
   該制御機器毎の該リモコンプログラムが登録された記憶手段と、
   該撮影手段で得られた被制御対象とする該被制御機器の画像データを該通信手段を介して該リモコンサーバに送信し、該画像データの送信に対する該リモコンサーバからの応答データに該当する該記憶手段の該リモコンプログラムを実行して、被制御対象とする該被制御機器の制御データを形成し、該応答データに該当するリモコンプログラムが該記憶手段に登録されていないとき、該応答データを該リモコンサーバに返して該当するリモコンプログラムを要求する制御手段と
   を備え、該リモコンプログラムの実行によって形成した制御データを被制御対象とする該被制御機器に送信することを特徴とする携帯端末。
6. 請求項５記載の携帯端末とのデータ通信をする通信手段を備えたリモコンサーバであって、
   該携帯端末で制御対象となり得る被制御機器の画像データや製品情報，該被制御機器の制御のためのリモコンプログラムからなるリモコンデータが登録されたサーバ記憶手段と、
   該通信手段で受信された該携帯端末からの制御対象とする被制御機器の画像データと該サーバ記憶手段の登録されている該画像データとを比較して、該制御対象とする被制御機器を判定し、該制御対象とする被制御機器に対する製品情報を該サーバ記憶部から取得するとともに、該サーバ記憶手段から所望とする該リモコンプログラムを取得可能とする制御手段と
   を備え、該制御手段は、取得した該製品情報を、該通信手段を介し、該携帯端末からの該画像データの応答データとして該携帯端末に送信するとともに、該携帯端末から該応答データの送信があったときには、該サーバ記憶手段から該応答データに該当する該リモコンプログラムを取得して該携帯端末に送信することを特徴とするリモコンサーバ。
7. １つ以上の被制御機器を遠隔制御するリモコンプログラムを有し、リモコンサーバとの通信手段を備えた携帯端末において、
   該被制御機器を撮影する撮影手段と、
   該制御機器毎の該リモコンプログラムが登録された記憶手段と、
   該撮影手段で得られた被制御対象とする該被制御機器の画像の特徴データを該通信手段を介して該リモコンサーバに送信し、該画像データの送信に対する該リモコンサーバからの応答データに該当する該記憶手段の該リモコンプログラムを実行し、被制御対象とする該被制御機器の制御データを形成する制御手段と
   を備え、該制御データを被制御対象とする該被制御機器に送信することを特徴とする携帯端末。
8. 請求項７記載の携帯端末とのデータ通信をする通信手段を備えたリモコンサーバであって、
   該携帯端末で制御対象となり得る被制御機器の画像の特徴データや製品情報からなるリモコンデータが登録されたサーバ記憶手段と、
   該通信手段で受信された該携帯端末からの制御対象とする被制御機器の画像の特徴データと該サーバ記憶手段の登録されている該特徴データとを比較して、該制御対象とする被制御機器を判定し、該制御対象とする被制御機器に対する製品情報を該サーバ記憶部から取得する制御手段と
   を備え、該制御手段で取得した該製品情報を、該通信手段を介し、該携帯端末からの該特徴データの応答データとして該携帯端末に送信することを特徴とするリモコンサーバ。
9. １つ以上の被制御機器を遠隔制御するリモコンプログラムを有し、リモコンサーバとの通信手段を備えた携帯端末において、
   該被制御機器を撮影する撮影手段と、
   該制御機器毎の該リモコンプログラムが登録された記憶手段と、
   該撮影手段で得られた被制御対象とする該被制御機器の画像の特徴データを該通信手段を介して該リモコンサーバに送信し、該画像データの送信に対する該リモコンサーバからの応答データに該当する該記憶手段の該リモコンプログラムを実行し、被制御対象とする該被制御機器の制御データを形成し、該応答データに該当するリモコンプログラムが該記憶手段に登録されていないとき、該応答データを該リモコンサーバに返して該当するリモコンプログラムを要求する制御手段と
   を備え、該リモコンプログラムの実行によって形成した該制御データを被制御対象とする該被制御機器に送信することを特徴とする携帯端末。
10. 請求項９記載の携帯端末とのデータ通信をする通信手段を備えたリモコンサーバであって、
    該携帯端末で制御対象となり得る被制御機器の画像の特徴データや製品情報，該被制御機器の制御のためのリモコンプログラムからなるリモコンデータが登録されたサーバ記憶手段と、
    該通信手段で受信された該携帯端末からの制御対象とする被制御機器の画像の特徴データと該サーバ記憶手段の登録されている該特徴データとを比較して、該制御対象とする被制御機器を判定し、該制御対象とする被制御機器に対する製品情報を該サーバ記憶部から取得するとともに、該サーバ記憶手段から所望とする該リモコンプログラムを取得可能とする制御手段と
    を備え、該制御手段は、取得した該製品情報を、該通信手段を介し、該携帯端末からの該特徴データの応答データとして該携帯端末に送信するとともに、該携帯端末から該応答データの送信があったときには、該サーバ記憶手段から該応答データに該当する該リモコンプログラムを取得して該携帯端末に送信することを特徴とするリモコンサーバ。
11. 請求項１，２，３，５，７または９記載の携帯端末において、
    前記リモコンプログラムの実行により、前記制御対象とする被制御機器に電源立ち上げのための制御データを送ることを特徴とする携帯端末。
12. 請求項１，２，３，５，７または９記載の携帯端末において、
    前記登録画像データは、前記撮影手段で前記被制御機器を撮影して得られる画像データであることを特徴とする携帯端末。
13. 請求項１，２，３，５，７または９記載の携帯端末において、
    前記制御手段による前記リモコンプログラムの実行により、前記判定された制御対象とする被制御機器を操作するためのリモコン画面を表示する表示手段を有することを特徴とする携帯端末。
14. １つ以上の被制御機器を遠隔制御するリモコンプログラムを有する携帯端末のアプリケーションプログラムであって、
    該被制御機器を撮影するための撮影手段と、
    該被制御機器毎に画像データまたは該画像データの特徴データが登録されている記憶手段と、
    該撮影手段から入力される該被制御機器の画像データあるいは該画像データから抽出した特徴データと該記憶手段に登録されている画像データあるいは特徴データとを比較して、該撮影手段から入力される画像データあるいは特徴データの被制御機器を判定し、遠隔制御の対象とする被制御機器に特定する制御手段と
    を有し、ユーザの指示によって該撮影手段が被制御機器を撮影したとき、該制御手段は、該撮影手段からの画像データあるいは特徴データと該記憶手段に登録されている画像データあるいは特徴データとから遠隔制御の対象とする被制御機器を特定し、遠隔制御の対象として特定した該被制御機器のリモコンプログラムを実行することを特徴とする携帯端末のアプリケーションプログラム。
15. １つ以上の被制御機器を遠隔制御するリモコンプログラムを有する携帯端末と通信する通信手段を備えたリモコンサーバのプログラムであって、
    該被制御機器毎に画像データもしくは特徴データと製品情報とが登録されたサーバ記憶手段と、
    該通信手段で被制御機器の画像データあるいはその特徴データを受信すると、該受信した画像データあるいは特徴データと該サーバ記憶手段に登録されている画像データあるいは特徴データとを比較して、該撮影手段から入力される画像データあるいは特徴データの被制御機器を判定し、遠隔制御の対象とする被制御機器に特定するサーバ制御手段と
    を有し、該サーバ制御手段は、遠隔制御の対象と判定した該被制御機器に対する製品情報を該サーバ記憶手段から取得し、該通信手段を介して、該携帯端末に送信することを特徴とするリモコンサーバのプログラム。
    

Images