JP2001273213A - 情報入力システムにおける入力方法及び入力装置 - Google Patents

Abstract

(57)【要約】 【課題】システム全体の軽量化及びコンパクト化、さら
には製造コストの低減を図ることができる情報入力シス
テムの入力方法を提供する。 【解決手段】離間して存在する入力部と表示部が通信経
路を介して接続されている情報入力システムにおける入
力方法であって、表示部から入力部にエージェントプロ
グラムを送信する工程と、送信する工程で送信されたエ
ージェントプログラムに応じて、入力部で行なわれたボ
タン操作又はマウス操作の内容を所定のデータ列に変換
する工程と、変換する工程で変換したデータ列を表示部
に送信する工程と、表示部で表示している画面状態を判
断する工程と、判断する工程で判断した画面状態によっ
て、入力部から送信されてきたデータ列に対応する表示
部での動作内容に切り換える工程とを具備する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は情報入力システムに
おける入力方法及び入力装置に関するものである。

【０００２】

【従来の技術】モデム機能を有していない携帯端末を用
いてインターネット等のネットワークにアクセスする場
合には、携帯電話あるいはＰＨＳ等を利用することが行
なわれている。

【０００３】また、顔面装着型表示装置（ＦＭＤ）に接
続された携帯端末においても、インターネット等のネッ
トワークにアクセスする場合には、携帯電話あるいはＰ
ＨＳ等を利用することが行なわれている。

【０００４】一方、近年、Java Controlled 家電と呼ば
れる技術が提案されている。これは図１１に示すよう
に、テレビあるいは携帯電話等で実現されるコントロー
ラ５００がネットワークに接続された複数の家電機器５
０１、５０２、５０３に制御用コマンドを送るようにな
っている。この場合操作コマンドは各家電機器５０１、
５０２、５０３により異なるので、操作に応じて自らの
制御コマンドを発信するプログラム（アプレット）５０
４を、各家電機器５０１、５０２、５０３が予めコント
ローラ５００側に送信するようにしている。

【０００５】

【発明が解決しようとする課題】上記した携帯端末は概
して操作キーボードやマウス等を入力装置として備えて
いるので、携帯端末の入力装置と、携帯電話あるいはＰ
ＨＳの入力装置とを重複して有することになり、携帯性
及びコンパクト性を損なってしまうという問題がある。

【０００６】また、Java Controlled 家電において用い
られている操作コマンドの数は有限であり、各家電機器
に対応した操作コマンドを用いて限定された簡単な制御
しか行なうことができないという欠点がある。

【０００７】本発明はこのような課題に着目してなされ
たものであり、その目的とするところは、システム全体
の軽量化、コンパクト化及び製造コストの低減を図るこ
とができ、かつ画面状態と送信されたデータ列に応じて
任意の処理を行なうことができる情報入力システムの入
力方法及び入力装置を提供することにある。

【０００８】

【課題を解決するための手段】上記の目的を達成するた
めに、第１の発明は、離間して存在する入力部と表示部
が通信経路を介して接続されている情報入力システムに
おける入力方法であって、前記表示部から前記入力部に
所定のプログラムを送信する工程と、前記送信する工程
で送信された所定のプログラムに応じて、前記入力部で
行なわれたボタン操作又はマウス操作の内容を所定のデ
ータ列に変換する工程と、前記変換する工程で変換した
データ列を前記表示部に送信する工程と、前記表示部で
表示している画面状態を判断する工程と、前記判断する
工程で判断した画面状態によって、前記入力部から送信
されてきたデータ列に対応する前記表示部での動作内容
に切り換える工程とを具備する。

【０００９】また、第２の発明は、離間して存在する入
力部と表示部が通信経路を介して接続されている情報入
力システムにおける入力装置であって、前記表示部から
前記入力部に所定のプログラムを送信する第１の送信部
と、前記第１の送信部から送信された所定のプログラム
に応じて、前記入力部で行なわれたボタン操作又はマウ
ス操作の内容を所定のデータ列に変換する変換部と、前
記変換部で変換したデータ列を前記表示部に送信する第
２の送信部と、前記表示部で表示している画面状態を判
断する判断部と、前記判断部で判断した画面状態によっ
て、前記入力部から送信されてきたデータ列に対応する
前記表示部での動作内容に切り換える切り換え部とを具
備する。

【００１０】

【発明の実施の形態】以下、図面を参照して本発明の実
施形態を詳細に説明する。図１は本実施形態の情報入力
システムの概略構成を示す図であり、入力装置を有する
携帯電話１０００と、入力装置をもたない携帯端末１０
０１と、顔面装着型表示装置（ＦＭＤ）１００２とから
構成される。携帯電話１０００の代わりにＰＨＳや小型
ＰＤＡを使用してもよい。携帯電話１０００は文字及び
簡易の画像表示を行なえる表示部を備えており、ＦＭＤ
１００２は高精細な画像表示、指定フォント表示が可能
な表示部を備えているものとする。携帯電話１０００は
リモートアクセスを行なうためのモデムの機能と、デー
タ入力装置（キーボード、マウス等）の機能との両方を
備えている。

【００１１】図１１に示すJava Controlled 家電の構成
をＦＭＤに対応付けると、コントローラ５００は携帯電
話１０００、家電機器５０１〜５０３は携帯端末１００
１に対応付けることができる。この場合、携帯端末１０
０１はＰＤＡ機能やインターネットブラウジング機能な
どを持ち、操作が複雑で大画面を要する。携帯電話１０
００の画面の表示サイズは小さいので複雑な操作画面を
表示できない場合がある。また、インターネットから様
々なプログラムをダウンロードして実行する場合も考え
られ、操作コマンドとして処理するとその種類は無限大
になる。

【００１２】そこで本実施形態では、携帯電話１０００
の入力装置に備えてある操作ボタンを操作させて対応す
るキーコードを送信し、インテリジェンス機能を備えた
携帯端末１００１は、このキーコードを受けて当該キー
コードとＦＭＤ表示部の画面状態とに応じて、行なうべ
き任意の処理を判断して実行するようにする。このよう
な方法を用いることにより、携帯端末が通常備えている
入力装置を不要にして、システム全体を軽量かつコンパ
クトにするとともに入力装置分の製造コストを低減可能
にする。

【００１３】図２は上記した携帯端末１００１の概略構
成を示すブロック図である。全体の制御を行なうＣＰＵ
３４には、バス３６を介して、携帯電話１０００との通
信を可能にする通信処理部３０と、ＲＡＭ３１と、ＲＯ
Ｍ３２と、ＦＭＤドライバー３５とが接続されている。
さらに電源としての電池３３を有している。ＦＭＤドラ
イバー３５は表示部を有するＦＭＤ１００２に接続され
ている。

【００１４】携帯端末１００１は通信処理部３０により
携帯電話１０００と互いにプログラムの送受信を行なっ
たり、携帯端末１００１が携帯電話１０００のデータ通
信機能を制御したり、インターネットにアクセスするこ
とができる。

【００１５】また、ここでは携帯端末１００１、携帯電
話１０００のいずれもが特定のプラットフォームに依存
しないプログラムを動作させるシステム環境（ＪＡＶＡ
言語、Ｊａｖａバーチャルマシン（ＶＭ）、スクリプト
言語）を備えているものとする。

【００１６】図３は上記した携帯電話１０００の概略構
成を示すブロック図であり、全体の制御を行なう制御部
１００と、アンテナを含む無線部１０３と、電源の供給
を行なう電池１０４と、キー入力部１０２と、ディスプ
レイ１０１から構成される。キー入力部１０２はキーボ
ードあるいはマウスから構成される入力部である。

【００１７】全体の制御を行なうＣＰＵ１９には、バス
２１を介して通信処理部１０、ＳＲＡＭ１１、ディスプ
レイ１０１、フラッシュＲＯＭ１２、制御チャネルイン
タフェース（制御ＣＨ Ｉ／Ｆ）１６が接続されてい
る。さらにＣＰＵ１９はＥＥＰＲＯＭ１８及びキー入力
部１０２に接続されている。さらにＣＰＵ１９は、ＤＳ
Ｐ（音声処理部）２０を介して音声チャネルインタフェ
ース（音声ＣＨ Ｉ／Ｆ）１７及びアナログインタフェ
ース１４に接続されている。

【００１８】制御チャネルインタフェース１６及び音声
チャネルインタフェース１７はＴＤＭＡ処理部１５に接
続されている。ＴＤＭＡ処理部１５は直接及びモデム機
能部（ＭＯＤＥＭ）１３を介して無線部１０３に接続さ
れている。モデム機能部１３はアナログＩ／Ｆ１４に接
続されている。

【００１９】図４は、携帯端末１００１と携帯電話１０
００との間のデータ通信について説明するための図であ
る。また、図５は、エージェントプログラム（以下、エ
ージェントと呼ぶ）により所定のデータ列からなるキー
コードを獲得する手順を説明するためのフローチャート
である。図５の処理フローにおいて左側は携帯端末１０
０１の処理フローを示し、右側は携帯電話１０００の処
理フローを示している。

【００２０】まず携帯端末１００１において、携帯端末
１００１内のクライアント（第１の送信部）１００１−
１は携帯電話１０００に送信すべきエージェントを構築
する（ステップＳ１）。次に携帯電話１０００とネット
ワーク接続を行なう（ステップＳ２）。その後、構築し
たエージェントを携帯電話１０００に送信する（ステッ
プＳ３）。

【００２１】携帯端末１００１からのネットワーク接続
に応答して、携帯電話１０００のクラスローダ（外部か
らプログラムをロードする機能を有し、これによって、
ネットワークのサーバ、家電製品などの任意の機器から
もクラスのロードが可能である）は携帯端末１００１と
ネットワーク接続を行なう（ステップＳ４）。次に携帯
端末１００１から送信されたエージェントによりオブジ
ェクトをロードし（ステップＳ５）、実行可能な形式に
構築して起動する（ステップＳ６）。

【００２２】エージェント１０００−１はこれに応答し
てキー入力に対するリスナー登録を行なう（ステップＳ
７）。次にエージェント１０００−１はキー入力部１０
２からのキー操作イベントに応答してキーイベント処理
部（変換部）１０００−２で生成されたキーコードを獲
得し（ステップＳ８）、獲得したキーコードを統一コー
ドに変換する（ステップＳ９）。変換方法の詳細は後述
する。

【００２３】次にエージェント（第１の送信部）１００
０−１は変換したキーコードを携帯端末１００１のクラ
イアント１００１−１に送信する（ステップＳ１０）。
上記ステップＳ８、Ｓ９、Ｓ１０はすべてのキーコード
についての処理が終了するまで繰り返される。

【００２４】携帯端末１００１のクライアント（判断
部、切り換え部）１００１−１は携帯電話１０００から
キーコードを獲得し（ステップＳ１１）、ＦＭＤ表示部
の画面の状態と獲得したキーコードに応じて次に実行す
べき処理を求める（ステップＳ１２）。この時点での画
面の表示状態を図８に示すようなものとし、キー入力部
のＦ、Ｅ、Ｖ、Ｈキーが有効でそれぞれ、ファイル、編
集、表示、ヘルプサブメニューを表示させることを次に
実行すべき処理とする。ここでＶキーを押し下げると図
９の画面状態に移行する。この時点でＦ、Ｅ、Ｖ、Ｈキ
ーは無効となり、Ｇ、Ｍ、Ｌ、Ｄキーのどれが操作され
るかにより、“大きいアイコン”、“小さいアイコ
ン”、“一覧”、“詳細”に表示を変更する処理を次に
実行すべき処理と判断する。

【００２５】なお、ここでは携帯電話を対象としている
のでテンキーあるいは“＃”などを割り当てる。例えば
ファイル（１）、編集（２）、表示（３）、ヘルプ
（４）とすることにより、１〜４のキーでファイル、編
集、表示、ヘルプサブメニューを表示させることを次に
実行すべき処理とすることができる。

【００２６】ステップＳ１３では上記処理を実行する。
ここでの処理としては、ＦＭＤ表示部のメニュー画面の
状態に応じて、表示制御に加えて、新たなＨＴＭＬ文章
の獲得、メニュー画面の遷移、書き換え、ファイルのダ
ウンロード等のさまざまな処理が含まれる。

【００２７】次のステップＳ１４で上記処理が完了した
と判断された場合にはステップＳ１１に戻って次のキー
コードを獲得して上記の処理を繰り返す。

【００２８】図６はＪＡＶＡ技術でよく知られているア
プレットによりキーコードを獲得する手順を説明するた
めのフローチャートである。まず携帯端末１００１がサ
ーバー（携帯電話１０００）とネットワーク接続を行な
うと（ステップＳ２０）、携帯電話１０００はこれに応
答して携帯端末１００１（クライアント）とネットワー
ク接続を行なう（ステップＳ２２）。次に携帯端末１０
０１が携帯電話１０００にアプレットを送信すると、携
帯電話１０００は受け取ったアプレットをロードして起
動する（ステップＳ２３）。ここでユーザーのキー操作
によりキー操作イベントが発生するとキーイベント処理
部では対応するキーコードを出力する。起動されたアプ
レットはこのキーコードを獲得し（ステップＳ２４）、
獲得したキーコードを統一コードに変換する（ステップ
Ｓ２５）。変換の詳細については後述する。次に変換し
たキーコードを携帯端末１００１へ送信する（ステップ
Ｓ２６）。

【００２９】携帯端末１００１では送られてきたキーコ
ードを獲得し（ステップＳ２７）、ＦＭＤ表示部の画面
の状態と当該キーコードに応じて次に実行すべき処理を
求める（ステップＳ２８）。次に求めた処理を実行し
（ステップＳ２９）、処理が完了（ステップＳ３０）し
たと判断されたときにステップＳ２７に戻って次のキー
コードを獲得して上記した処理を繰り返す。ステップＳ
２８、Ｓ２９の処理の詳細はエージェントの場合と同様
である。

【００３０】図７は、キーコード取り込み処理とデータ
通信処理を同時に行なうマルチ処理の詳細を説明するた
めのフローチャートである。このフロ−は携帯端末及び
携帯電話で共通である。まずスレッドを生成し（ステッ
プＳ３０）、このスレッドに対してキーコードの取り込
み処理を依頼する（ステップＳ３１）。次に別のスレッ
ドを生成して（ステップＳ３２）、このスレッドに対し
てデータ通信処理を依頼する（ステップＳ３３）。以下
ではデータ通信処理（ステップＳ３４、Ｓ３５）と、キ
ーコード取り込み処理（ステップＳ３６、Ｓ３７）が同
時に行なわれる。このようなマルチ処理によれば、ユー
ザはシステムに対して２つの異なる処理を同時に行なわ
せることが可能になるので使い勝手の良いシステムを提
供できる。

【００３１】図１０は上記したコード変換処理について
説明するためのフローチャートである。コードには、１
バイトで表現するＡＳＣＩＩコード、ＥＢＳＩＤＩＣコ
ードや、２バイトで表現されるＪＩＳ、Ｕｎｉｃｏｄｅ
等があり、コード体系が異なっているので、これを合わ
せる必要がある。ここでは携帯電話内で行なわれるコー
ド変換について図１０を参照して説明する。まずエージ
ェントまたはアプレットは、入力データのイベントオブ
ジェクトを取得する（ステップＳ１００）。ここでイベ
ントオブジェクトとは、イベントに固有の情報をカプセ
ル化したものである。例えばマウスの場合には、どのボ
タンを押したか、ポインタの位置などの情報が含まれ
る。ボタンの場合にはラベル等が含まれる。

【００３２】次に上記ボタンのラベルをエージェント
（アプレット）が実行されるＯＳ（オペレーティングシ
ステム）の文字列に変換する（ステップＳ１０１）。Ｊ
ＡＶＡ技術ではボタンのラベルを取り出す機能、及びそ
のコードを特定のコード体系の文字列に変換する機能等
があるので、ここではこれらの機能を用いることにより
変換を行なう。

【００３３】上記した実施形態によれば、携帯端末の入
力装置が不要となるので、システム全体の軽量化及びコ
ンパクト化、さらには製造コストの低減を図ることがで
きるようになる。また、かつＦＭＤ表示の画面状態と送
信されたキーコードに応じて任意の処理を行なうことが
できる。

【００３４】

【発明の効果】本発明によれば、システム全体の軽量
化、コンパクト化及び製造コストの低減を図ることがで
き、かつ画面状態と送信されたデータ列に応じて任意の
処理を行なうことができる情報入力システムの入力方法
及び入力装置を提供することが可能になる。

【図面の簡単な説明】

【図１】本発明の一実施形態に係る情報入力システムの
概略構成を示す図である。

【図２】携帯端末１００１の概略構成を示すブロック図
である。

【図３】携帯電話１０００の概略構成を示すブロック図
である。

【図４】携帯端末１００１と携帯電話１０００との間の
データ通信について説明するための図である。

【図５】エージェントによりキーコードを獲得する手順
を説明するためのフローチャートである。

【図６】アプレットによりキーコードを獲得する手順を
説明するためのフローチャートである。

【図７】キーコード取り込み処理とデータ通信処理を同
時に行なうマルチ処理の詳細を説明するためのフローチ
ャートである。

【図８】実行すべき処理前の画面の表示状態を示す図で
ある。

【図９】実行すべき処理を実行したときの画面の表示状
態を示す図である。

【図１０】コード変換処理について説明するためのフロ
ーチャートである。

【図１１】Java Controlled 家電の概略を説明するため
の図である。

【符号の説明】

１０ 通信処理部 １１ ＳＲＡＭ １２ フラッシュＲＯＭ １３ ＭＯＤＥＭ １４ アナログＩ／Ｆ １５ ＴＤＭＡ処理部 １６ 制御ＣＨ ＩＦ １７ 音声ＣＨ ＩＦ １８ ＥＥＰＲＯＭ １９ ＣＰＵ ２０ ＤＳＰ（音声処理部） ２１ バス ３０ 通信処理部 ３１ ＲＡＭ ３２ ＲＯＭ ３３ 電池 ３４ ＣＰＵ ３５ ＦＭＤドライバー ３６ バス １００ 制御部 １０１ ディスプレイ １０２ キー入力部 １０３ 無線部 １０４ 電池 １０００ 携帯電話 １０００−１ エージェント １０００−２ キーイベント処理部 １００１ 携帯端末 １００１−１ クライアント １００２ ＦＭＤ（顔面装着型表示装置）

Claims (2)

【特許請求の範囲】
1. 【請求項１】 離間して存在する入力部と表示部が通信
   経路を介して接続されている情報入力システムにおける
   入力方法であって、 前記表示部から前記入力部に所定のプログラムを送信す
   る工程と、 前記送信する工程で送信された所定のプログラムに応じ
   て、前記入力部で行なわれたボタン操作又はマウス操作
   の内容を所定のデータ列に変換する工程と、 前記変換する工程で変換したデータ列を前記表示部に送
   信する工程と、 前記表示部で表示している画面状態を判断する工程と、 前記判断する工程で判断した画面状態によって、前記入
   力部から送信されてきたデータ列に対応する前記表示部
   での動作内容に切り換える工程と、 を具備することを特徴とする情報入力システムにおける
   入力方法。
2. 【請求項２】 離間して存在する入力部と表示部が通信
   経路を介して接続されている情報入力システムにおける
   入力装置であって、 前記表示部から前記入力部に所定のプログラムを送信す
   る第１の送信部と、 前記第１の送信部から送信された所定のプログラムに応
   じて、前記入力部で行なわれたボタン操作又はマウス操
   作の内容を所定のデータ列に変換する変換部と、 前記変換部で変換したデータ列を前記表示部に送信する
   第２の送信部と、 前記表示部で表示している画面状態を判断する判断部
   と、 前記判断部で判断した画面状態によって、前記入力部か
   ら送信されてきたデータ列に対応する前記表示部での動
   作内容に切り換える切り換え部と、 を具備することを特徴とする情報入力システムにおける
   入力装置。