JP2014146228A - 端末装置、外部表示装置及び端末装置と外部表示装置とからなる情報システム - Google Patents

Abstract

【課題】 端末装置と外部表示装置のタッチセンサの性能が異なっている場合にも、外部表示装置でのタッチによる入力操作が支障なく処理される端末装置を実現することにある。
【解決手段】 本発明に係る端末装置は、タッチセンサを備える外部表示装置と接続する端末装置であって、端末装置は、調整用データ生成部と通信部を備え、調整用データ生成部は、外部表示装置のタッチセンサの性能と端末装置のタッチ処理能力を比較して、外部表示装置から端末装置に送信されるタッチ操作データを調整するための調整用データを生成し、通信部は、調整用データを外部表示装置に送信することを特徴とする。
【選択図】 図２

Description

本発明は、端末装置、外部表示装置及び端末装置と外部表示装置とからなる情報システムに関するものである。

近年、タッチパネル式のディスプレイを備えたスマートフォンなどの携帯型の端末装置が急速に普及してきている。このような端末装置は、パーソナルコンピュータに近い機能を有するが、ディスプレイが小さいため、パーソナルコンピュータに比べると操作性及び視認性が低いという課題があった。そこで、携帯型の端末装置をサイズの大きい外部表示装置に接続し、端末装置の画像を外部表示装置に表示し、外部表示装置側で操作入力を行う技術が開発されている。

特許文献１には、携帯端末と車載ディスプレイ装置を備える画像表示システムが開示されている。図７は、特許文献１に係る画像表示システムの概略構成図である。車載ディスプレイ装置１０１は、表示部１０３とパネル内操作部１０４とから構成されるタッチパネル式ディスプレイ１０５を備えている。携帯端末１０２は、車載用画像生成部１０６を備えており、車載用画像生成部１０６より携帯端末１０２で表示されている画像の画像データを車載ディスプレイ装置１０１での画面表示に適した画像データに変換し、変換した画像データを車載ディスプレイ装置１０１に送信する。車載ディスプレイ装置１０１は、該画像データを受信してタッチパネル式ディスプレイ１０５に画像を表示する。

また、車載ディスプレイ装置１０１は、タッチパネル式ディスプレイ１０５が入力操作されたとき、座標データを携帯端末１０２に送信する。携帯端末１０２は、座標検出部１０７にて座標データを受信すると、その座標データを携帯端末１０２の表示画面の座標データに変換して制御処理部１０８に出力することで処理を行う。

この構成により、車載ディスプレイ装置１０１がグラフィカルユーザーインターフェースとなり、携帯端末１０２がユーザの操作に応じた制御処理を行う。

特開２０１２−１８５８７号公報（平成２４年１月２６日公開）

上述したように、特許文献１の技術では、車載ディスプレイ装置のタッチパネル式ディスプレイが操作されたとき、ディスプレイは入力情報を携帯端末に送信する。しかし、一般的にディスプレイのタッチセンサと携帯端末のタッチセンサは異なる性能を有する。

例えば、タッチセンサの性能としてはタッチセンサの分解能、サンプリング周波数や最大マルチタッチ数等がある。これらのタッチセンサの性能がタッチによる操作が行われる外部表示装置側と処理を行う端末装置側で異なっていると、誤動作や操作が反応しないといった不具合が生じることがある。しかし、特許文献１にはこれらの対応について何ら考慮されていないため、不具合が生じる可能性があるという問題があった。

本発明は、このような問題に鑑みてなされたものであり、その目的は、端末装置と外部表示装置のタッチセンサの性能が異なっている場合にも、外部表示装置でのタッチによる入力操作が支障なく処理される端末装置を実現することにある。

本発明に係る端末装置は、タッチセンサを備える外部表示装置と接続する端末装置であって、端末装置は、調整用データ生成部と通信部を備え、調整用データ生成部は、外部表示装置のタッチセンサの性能と端末装置のタッチ処理能力を比較して、外部表示装置から端末装置に送信されるタッチ操作データを調整するための調整用データを生成し、通信部は、調整用データを外部表示装置に送信することを特徴とする。

また、外部表示装置のタッチセンサの性能は、サンプリング周波数及び最大マルチタッチ数に関する情報であることを特徴としても良い。また、外部表示装置のタッチセンサの性能が端末装置のタッチ処理能力より高い場合、調整用データは、端末装置のタッチ処理能力の情報であることを特徴としても良い。

本発明に係る外部表示装置は、端末装置と接続する外部表示装置であって、外部表示装置は、通信部、タッチセンサ、制御部を備え、通信部は、端末装置に送信するタッチ操作データを調整するための調整用データを端末装置から受信し、タッチセンサは、タッチ操作が行われたことを検出し、制御部は、調整用データに基づいてタッチ操作データを調整することを特徴とする。

本発明に係る情報システムは、端末装置と、タッチセンサを備える外部表示装置とからなる情報システムであって、端末装置は、調整用データ生成部と端末装置側通信部を備え、調整用データ生成部は、外部表示装置のタッチセンサの性能と端末装置のタッチ処理能力を比較して、外部表示装置から端末装置に送信されるタッチ操作データを調整するための調整用データを生成し、端末装置側通信部は、調整用データを外部表示装置に送信するものであり、外部表示装置は、外部表示装置側通信部、タッチセンサ、制御部を備え、外部表示装置側通信部は、調整用データを受信し、タッチセンサは、タッチ操作が行われたことを検出し、制御部は、調整用データに基づいてタッチ操作データを調整することを特徴とする。

本発明によれば、端末装置と外部表示装置のタッチセンサの性能が異なっている場合にも、外部表示装置でのタッチによる入力操作が支障なく処理されることができる。

本実施形態の端末装置と外部表示装置との連携を説明する図である。 本実施形態に係る端末装置の機能構成の一例を示すブロック図である。 本実施形態の端末装置と外部表示装置との連携を説明する図である。 本実施形態に係る外部表示装置の機能構成の一例を示すブロック図である。 本実施形態に係る情報システムの処理手順の一例について説明するフローチャートである。 本実施形態に係る情報システムの処理手順の一例について説明するフローチャートである。 特許文献１に係る画像表示システムの概略構成図である。

以下、本発明の実施の形態について図面に基づいて説明する。なお、本発明の図面において、同一の参照符号は、同一部分又は相当部分を表わすものとする。

〔実施形態１〕
図１は、本実施形態の端末装置と外部表示装置との連携を説明する図である。端末装置１０と外部表示装置２０とは、例えば、ＭＨＬ（Mobile High-definition Link、登録商標）ケーブル３０を介して接続される。

端末装置１０は、例えば、タッチパネルを有するスマートフォンやパーソナルコンピュータ、タブレットＰＣなどの装置である。また、外部表示装置２０は、タッチパネルを有する液晶ディスプレイなどの表示装置である。

図１では、端末装置１０側の通信部と外部表示装置２０側の通信部を有線で接続することで、端末装置１０に表示された画像４０を拡大した画像５０が、外部表示装置２０に表示されている。さらに、外部表示装置２０側でタッチ操作入力を行うことが可能である。

なお、端末装置１０と外部表示装置２０とは、無線で接続されることとしてもよい。

図２は、本発明の実施形態に係る端末装置の機能構成の一例を示すブロック図である。端末装置１０は、アンテナ１１、無線通信部１２、有線通信部１３、タッチパネル部１４、記憶部１５、制御部１６を備える。

アンテナ１１は、基地局との間で無線通信を行うためのアンテナである。無線通信部１２は、アンテナ１１を介して、基地局との間で無線通信を行う通信デバイスであり、データ通信を行う。

有線通信部１３は、ＭＨＬケーブル３０などのネットワークケーブルを介して他の装置との間で有線通信を行う通信デバイスである。

タッチパネル部１４は、情報の表示を行うとともに、ユーザのタッチ操作により、ユーザから情報の入力を受け付ける表示・入力デバイスである。タッチパネル部１４は、表示部１４ａ、タッチセンサ部１４ｂを備える。表示部１４ａは、液晶ディスプレイなどの表示デバイスであり、所定の解像度を有する。タッチセンサ部１４ｂは、ユーザによりタッチされた位置を検出するセンサ部であり、所定の分解能を有する。表示部１４ａの画素、タッチの情報は、画面内の位置を特定するため解像度及びタッチセンサ部１４ｂの分解能に従って、それぞれの座標系を有しており、各座標系の原点は、４隅のいずれかに設定されている。

記憶部１５は、メモリやハードディスク装置などの記憶デバイスである。記憶部１５は、画像データ１５ａ、外部用画像データ１５ｂ、画面解像度データ１５ｃ、タッチ操作データ１５ｄ、タッチセンサ性能データ１５ｅ、タッチ操作データ調整用データ１５ｆなどを記憶する。

画像データ１５ａは、表示部１４ａに表示される画像のデータである。

外部用画像データ１５ｂは、外部表示装置２０に送信され、外部表示装置２０で表示される画像のデータである。外部用画像データ１５ｂは、端末装置１０の制御部１６により生成される。

画面解像度データ１５ｃは、外部表示装置２０の画面の解像度の情報である。

タッチ操作データ１５ｄは、外部表示装置２０から受信したタッチ操作に関する情報である。具体的にはタッチ操作データ１５ｄは、ユーザが外部表示装置２０にてタッチ操作したときのタッチ位置の座標情報を端末装置１０の処理能力に応じて調整された情報であり、この情報は、外部表示装置２０のタッチセンサの座標系で表されている。

タッチセンサ性能データ１５ｅは、外部表示装置２０側のタッチセンサの性能に関する情報である。タッチセンサの性能には、タッチセンサの分解能、サンプリング周波数、最大マルチタッチ数等が含まれる。タッチセンサの分解能は、タッチ操作の精度を示す性能であり、解像度とも言われる。サンプリング周波数は、１秒に何回処理できるかを示す性能である。最大マルチタッチ数は、同時にタッチして処理が行える最大の点数を示す性能である。

タッチ操作データ調整用データ１５ｆは、外部表示装置２０から端末装置１０にタッチ操作に関する情報を送信するときに、端末装置１０の処理能力に応じて、送信する情報を調整するために用いられる情報である。タッチ操作データ調整用データ１５ｆは、端末装置１０と外部表示装置２０が接続されたときに設定される。本実施形態において、タッチ操作データ調整用データ１５ｆは、サンプリング周波数及び最大マルチタッチ数に関する情報である。

画面解像度データ１５ｃ、タッチ操作データ１５ｄ及びタッチセンサ性能データ１５ｅは、外部表示装置２０から取得される。

制御部１６は、端末装置１０の各部を制御するＣＰＵ（Central Processing Unit）などの制御デバイスである。制御部１６は、調整用データ生成部１６ａ、外部画像生成部１６ｂ、位置座標変換部１６ｃ、タッチ操作実行部１６ｄを備える。

調整用データ生成部１６ａは、外部表示装置２０から端末装置１０に送信するタッチ操作に関する情報を調整するために用いるタッチ操作データ調整用データ１５ｆを設定する処理部である。具体的には、調整用データ生成部１６ａは、端末装置１０のタッチ操作に関する処理能力と外部表示装置２０のタッチセンサの性能を比較する。本実施形態では、サンプリング周波数及び最大マルチタッチ数に関して比較を行う。

比較した結果、外部表示装置２０のタッチセンサの性能が端末装置１０の処理能力よりも高い場合、外部表示装置２０から端末装置１０に送信されるタッチ操作に関する情報を端末装置１０で処理できるように情報量を制限する必要がある。そのため、調整用データ生成部１６ａは、端末装置１０のタッチ操作に関する処理能力を記憶部１５にタッチ操作データ調整用データ１５ｆとして記録する。

例えば、サンプリング周波数について、端末装置１０の処理能力が６０Ｈｚで、外部表示装置２０のタッチセンサが２４０Ｈｚである場合、外部表示装置２０で行われたタッチ操作の情報をすべて端末装置１０に送信したとしても、端末装置１０は処理しきれない。そのため、調整用データ生成部１６ａは、端末装置１０の処理能力が６０Ｈｚであることをタッチ操作データ調整用データ１５ｆとして記録する。

また、最大マルチタッチ数について、端末装置１０の処理能力が５点で、外部表示装置２０のタッチセンサが１０点である場合、外部表示装置２０で６点以上のタッチ操作が行われてすべての情報を端末装置１０に送信したとしても、端末装置１０は処理しきれない。そのため、調整用データ生成部１６ａは、端末装置１０の処理能力が５点であることをタッチ操作データ調整用データ１５ｆとして記録する。

一方、外部表示装置２０のタッチセンサの性能が端末装置１０の処理能力と同等あるいは低い場合、外部表示装置２０から端末装置１０に送信されるタッチ操作に関する情報を端末装置１０で処理できるため、情報量を制限する必要はない。そのため、調整用データ生成部１６ａは、外部表示装置２０のタッチセンサの性能の情報を記憶部１５にタッチ操作データ調整用データ１５ｆとして記録する。

外部画像生成部１６ｂは、外部表示装置２０に表示する画像を生成する処理部である。具体的には、外部画像生成部１６ｂは、記憶部１５に記憶された画面解像度データ１５ｃを読み出して、外部表示装置２０の画面の解像度の情報を取得する。そして、記憶部１５から画像４０の画像データ１５ａを読み出し、画面解像度データ１５ｃを参照して、画像４０のアスペクト比を保ったまま、画像４０の縦のピクセル数が外部表示装置２０の画面の縦のピクセル数と一致する拡大率を演算し、その拡大率にてその画像４０を拡大する。

ここで拡大後の画像５０の横のピクセル数が、外部表示装置２０の画像の横のピクセル数と一致する場合、外部画像生成部１６ｂは、画像５０のデータを記憶部１５に外部用画像データ１５ｂとして記憶する。

一方、拡大後の画像５０の横のピクセル数が、外部表示装置２０の画像の横のピクセル数と一致しない場合、図３のように、外部画像生成部１６ｂは、拡大後の画像５０の両側に黒画像５１を付け足して、外部表示装置２０の画像の横のピクセル数と一致する画像を生成し、生成した画像のデータを記憶部１５に外部用画像データ１５ｂとして記憶する。

位置座標変換部１６ｃは、外部表示装置２０のタッチセンサの座標系で表されたタッチ位置の座標を、端末装置１０のタッチセンサの座標系に変換する処理部である。具体的には、位置座標変換部１６ｃは、外部表示装置２０から受信したタッチ操作データ１５ｄに対して、端末装置１０のタッチセンサの分解能と外部表示装置２０のタッチセンサの分解能の情報を用いて、外部表示装置２０側の座標系から端末装置１０の座標系に変換する。

タッチ操作実行部１６ｄは、位置座標変換部１６ｃにて変換されたタッチ位置の座標を参照し、外部表示装置２０でのユーザによるタッチ操作に応じて処理を実行する処理部である。具体的には、タッチ操作実行部１６ｄは、変換後の座標を用いて、画像４０がユーザによりタッチされた場合に行われる処理を実行する。このような処理として、例えば、画像４０が地図画像である場合に、タッチされた位置に地図の中心を移動させる処理などがある。このように、ユーザは、外部表示装置２０においてタッチ操作をする場合に、端末装置１０においてタッチ操作をするのと同様の感覚で操作を行うことができる。

つぎに、図４を用いて、本発明の実施形態に係る外部表示装置２０の機能構成について説明する。図４は、本発明の実施形態に係る外部表示装置の機能構成の一例を示すブロック図である。外部表示装置２０は、アンテナ２１、無線通信部２２、有線通信部２３、タッチパネル部２４、記憶部２５、制御部２６を備える。

アンテナ２１は、基地局との間で無線通信を行うためのアンテナである。無線通信部２２は、アンテナ２１を介して、基地局との間で無線通信を行う通信デバイスでありデータ通信を行う。有線通信部２３は、ＭＨＬケーブル３０などのネットワークケーブルを介して他の装置との間で有線通信を行う通信デバイスである。

タッチパネル部２４は、情報の表示を行うとともに、ユーザのタッチ操作により、ユーザから情報の入力を受け付ける表示・入力デバイスである。タッチパネル部２４は、表示部２４ａ、タッチセンサ部２４ｂを備える。表示部２４ａは、液晶ディスプレイなどの表示デバイスであり、所定の解像度を有する。タッチセンサ部２４ｂは、ユーザによりタッチされた位置を検出するセンサ部であり、所定の分解能を有する。表示部２４ａの画素、タッチの情報は、画面内の位置を特定するため解像度及びタッチセンサ部２４ｂの分解能に従って、それぞれの座標系を有しており、各座標系の原点は、４隅のいずれかに設定されている。

記憶部２５は、メモリやハードディスク装置などの記憶デバイスである。記憶部２５は、画像データ２５ａ、画面解像度データ２５ｂ、タッチ操作元データ２５ｃ、タッチ操作データ２５ｄ、タッチセンサ性能データ２５ｅ、タッチ操作データ調整用データ２５ｆなどを記憶する。

画像データ２５ａ、タッチ操作データ調整用データ２５ｆは、図２で説明した端末装置１０の記憶部１５に記録される外部用画像データ１５ｂ、タッチ操作データ調整用データ１５ｆと同様のデータであり、端末装置１０から受信したものである。

画面解像度データ２５ｂ、タッチ操作データ２５ｄ、タッチセンサ性能データ２５ｅは、図２で説明した端末装置１０の記憶部１５に記録される画面解像度データ１５ｃ、タッチ操作データ１５ｄ、タッチセンサ性能データ１５ｅと同様のデータであり、端末装置１０に送信されるものである。タッチセンサ性能データ２５ｅは、タッチセンサ部２４ｂの性能である。

タッチ操作元データ２５ｃは、ユーザが外部表示装置２０にてタッチ操作したときのタッチ位置の座標情報からなり、外部表示装置２０のタッチセンサの性能に応じた情報である。この座標情報は、外部表示装置２０のタッチセンサの座標系で表されている。

タッチ操作データ２５ｄは、制御部２６がタッチ操作データ調整用データ２５ｆに基づいてタッチ操作元データ２５ｃを調整したものである。

制御部２６は、外部表示装置２０の各部を制御するＣＰＵなどの制御デバイスである。

つぎに、本発明の実施形態に係る端末装置１０と外部表示装置２０とからなる情報システムに関する処理手順の一例について図５と図６を用いて説明する。なお、図５及び図６の説明においては、「ステップ」を「Ｓ」で表し、各工程を数字で区別している。

図５は、端末装置１０と外部表示装置２０を接続してから端末装置１０と外部表示装置２０において情報システムの設定が完了するまでの処理手順の一例について説明するフローチャートである。

まず、端末装置１０と外部表示装置２０はＭＨＬケーブル３０などで接続されると、端末装置１０の有線通信部１３と、外部表示装置２０の有線通信部２３は、通信を確立する（Ｓ１０１、Ｓ１０２）。そして、外部表示装置２０の有線通信部２３は、端末装置１０に外部表示装置２０の画面の解像度の情報である画面解像度データ２５ｂを送信し（Ｓ１０３）、端末装置１０の有線通信部１３は、その情報を受信する（Ｓ１０４）。端末装置１０は、その情報を受信すると、記憶部１５に画面解像度データ１５ｃとして記録する。

なお、画面の解像度の情報の送信は、通信の確立後に自動的に行われることとしてもよいし、端末装置１０の有線通信部１３からの要求に応じて行われることとしてもよい。

続いて、外部表示装置２０の有線通信部２３は、端末装置１０に外部表示装置２０のタッチセンサの性能の情報であるタッチセンサ性能データ２５ｅを送信し（Ｓ１０５）、端末装置１０の有線通信部１３は、その情報を受信する（Ｓ１０６）。端末装置１０は、その情報を受信すると、記憶部１５にタッチセンサ性能データ１５ｅとして記録する。ここで、タッチセンサの性能とは、タッチセンサの分解能、サンプリング周波数、最大マルチタッチ数等が含まれる。

なお、タッチセンサの性能の情報の送信は、画面の解像度の情報の送受信のステップ１０３、１０４と同時に行われることとしてもよいし、端末装置１０の有線通信部１３からの要求に応じて行われることとしてもよい。

その後、端末装置１０の調整用データ生成部１６ａは、端末装置１０のタッチ操作に関する処理能力と外部表示装置２０のタッチセンサの性能を比較し、タッチ操作データ調整用データ１５ｆを設定し、記憶部１５に記録する（Ｓ１０７）。

端末装置１０の有線通信部１３は、タッチ操作データ調整用データ１５ｆを外部表示装置２０に送信し（Ｓ１０８）、外部表示装置２０の有線通信部２３は、その情報を受信する（Ｓ１０９）。外部表示装置２０は、その情報を受信すると、記憶部２５にタッチ操作データ調整用データ２５ｆとして記録する。

ステップ１０４〜１０９のように端末装置１０と外部表示装置２０の間でタッチ操作に関する情報について通信した後、端末装置１０の外部画像生成部１６ｂは、外部表示装置２０に表示する画像を生成する（Ｓ１１０）。同時に、外部画像生成部１６ｂは、生成した画像を記憶部１５に外部用画像データ１５ｂとして記録する。

端末装置１０の有線通信部１３は、生成した画像を外部表示装置２０に送信し（Ｓ１１１）、外部表示装置２０の有線通信部２３は、その画像を受信し、表示部２４ａに表示する（Ｓ１１２）。このとき、外部表示装置２０は、受信した画像の情報を記憶部２５に画像データ２５ａとして記録する。さらに、外部表示装置２０の制御部２６は、記憶部２５の画像データ２５ａを読み出し、表示部２４ａに表示する。

以上の工程により、端末装置１０の画像を外部表示装置２０に表示し、外部表示装置２０側でタッチ操作入力を行うことが可能となる。

図６は、図５に示されるフローチャートの続きであり、外部表示装置２０側でタッチ操作が行われてから、そのタッチ操作に応じた処理が実行されるまでの処理手順の一例について説明するフローチャートである。

タッチセンサ部２４ｂは、その画像上におけるユーザからのタッチ操作を受け付ける（Ｓ１１３）。外部表示装置２０の制御部２６は、ユーザからのタッチ操作を受け付けると、タッチ位置の座標情報を記憶部２５にタッチ操作元データ２５ｃとして記憶する。

制御部２６は、タッチ操作データ調整用データ２５ｆに基づいてタッチ操作元データ２５ｃを端末装置１０で処理できるように調整し、調整した情報をタッチ操作データ２５ｄとして記録する（Ｓ１１４）。

外部表示装置２０の有線通信部２３は、タッチされた画面上の位置の情報であるタッチ操作データ２５ｄを端末装置１０に送信し（Ｓ１１５）、端末装置１０の有線通信部１３は、その情報を受信する（Ｓ１１６）。端末装置１０は、その情報を受信すると、記憶部１５にタッチ操作データ１５ｄとして記録する。

なお、タッチ操作データ２５ｄの送信は、ユーザによるタッチ操作が検出された後に自動的に行われることとしてもよいし、端末装置１０の有線通信部１３からの要求に応じて行われることとしてもよい。

そして、端末装置１０の位置座標変換部１６ｃは、受信したタッチ操作データ１５ｄの座標を外部表示装置２０側のタッチセンサの座標系から端末装置１０側のタッチセンサの座標系に変換する（Ｓ１１７）。その後、タッチ操作実行部１６ｄは、位置座標変換部１６ｃにて変換されたタッチ位置の座標を参照し、外部表示装置２０で行われたユーザによるタッチ操作に応じて処理を実行する（Ｓ１１８）。タッチ操作に応じた処理が実行されることにより端末装置１０では表示部１４ａの画像が変化する。

端末装置１０の表示部１４ａに表示される画像が変わると、その画像を外部表示装置２０の表示部２４ａにも表示させるために、外部画像生成部１６ｂは、外部表示装置２０に表示する画像を生成する（Ｓ１１９）。端末装置１０の有線通信部１３は、生成した画像を外部表示装置２０に送信し（Ｓ１２０）、外部表示装置２０の有線通信部２３は、その画像を受信し、表示部２４ａに表示する（Ｓ１２１）。

以上の工程により、端末装置１０と外部表示装置２０を接続し、外部表示装置２０で行われたタッチ操作を支障なく端末装置１０で処理することができる。なお、図５に示す工程は端末装置１０と外部表示装置２０を接続した直後に行われるものであり、一度実行されれば、接続が切れるまで再度実行される必要はない。また、外部表示装置２０側でタッチ操作を受け付ける度、図６に示される工程が実行され、端末装置１０と外部表示装置２０の連携が保たれる。

以上のように、端末装置１０と外部表示装置２０を連携させたときに、外部表示装置２０から端末装置１０に送信するタッチ操作に関する情報を端末装置１０で処理できるように調整することで、タッチ操作の連携で不具合が生じないようすることが可能となる。

例えば、外部表示装置２０のタッチセンサの性能が端末装置１０のタッチ操作に関する処理能力より高く、端末装置１０の処理能力を超えるタッチ操作が外部表示装置２０で行われた場合、端末装置１０側で一部のタッチ操作の処理が実行されないといった不具合やユーザが所望しない処理が行われてしまうといった不具合が生じることがある。このような問題を防ぐために、端末装置１０と外部表示装置２０を接続したときに、端末装置１０のタッチ操作に関する処理能力と外部表示装置２０のタッチセンサの性能を比較し、端末装置１０に送信される情報が端末装置１０の処理能力を超えないように、外部表示装置２０にタッチ操作に関する情報を調整するための情報を予め記憶させておく。こうすることで、タッチ操作入力の連携で不具合が生じないようすることが可能となる。

また上記のように、ユーザによるタッチ操作のタッチ位置の情報をタッチセンサの座標系で送受信し、端末装置１０のタッチセンサの分解能と外部表示装置２０のタッチセンサの分解能の情報を用いて座標変換を行うことで、画面の解像度を考慮に入れず、スムーズに処理を実行することが可能となる。

また上記のように、端末装置１０と外部表示装置２０を連携させ、外部表示装置２０においてユーザによりタッチ操作された場合に、タッチ位置の情報を外部表示装置２０から端末装置１０に送信し、座標係を端末装置１０のタッチセンサに適応するために変換させ、タッチ操作の処理を実行することで、ユーザは外部表示装置２０においてタッチ操作をする場合に、端末装置１０においてタッチ操作をするのと同様の感覚で操作を行うことができる。そのため、比較的画面の小さい端末装置では、操作性及び視認性が低く、行いづらかった行為、例えば、書類作成やゲーム操作などを、より大きな画面を有する外部表示装置で行うことが可能となる。その結果、タッチ操作の操作性及び画面の視認性が向上し、ユーザはより良い状況で作業を行うことが可能となる。

また実施形態１では、調整用データ生成部１６ａは、端末装置１０のタッチ操作に関する処理能力と外部表示装置２０のタッチセンサの性能を比較し、タッチ操作データ調整用データ１５ｆを設定したが、さらに端末装置１０と外部表示装置２０を接続する通信の性能を考慮に入れてタッチ操作データ調整用データ１５ｆを設定するほうが好ましい。通信の性能とは、通信速度のことを指し、ステップ１０１、１０２で通信を確立するときに、端末装置１０は、通信の性能の情報を得ても良い。

なお、図５と図６において端末装置１０と外部表示装置２０間の通信を有線で行ったが、無線通信としても良い。

以上、本発明の実施形態について説明したが、本発明は上記の実施形態に限定されるものではなく、本発明の範囲は特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。

例えば、実施形態１では外部表示装置２０を横向きに設置した場合について説明したが、外部表示装置２０を９０度回転させて縦向きに設置しても良い。また外部表示装置２０に表示される画像やタッチ操作の連携を最適な状態にするために、外部表示装置２０は、表示の向きが横か縦のどちらであるかに関する情報を端末装置１０に送信することが好ましい。外部表示装置２０から端末装置１０に外部表示装置２０の表示に関する情報を送信するタイミングは、図５のステップ１０３あるいはステップ１０５と同時であっても良い。

１０ 端末装置
１１ アンテナ
１２ 無線通信部
１３ 有線通信部
１４ タッチパネル部
１４ａ 表示部
１４ｂ タッチセンサ部
１５ 記憶部
１５ａ 画像データ
１５ｂ 外部用画像データ
１５ｃ 画面解像度データ
１５ｄ タッチ操作データ
１５ｅ タッチセンサ性能データ
１５ｆ タッチ操作データ調整用データ
１６ 制御部
１６ａ 調整用データ生成部
１６ｂ 外部画像生成部
１６ｃ 位置座標変換部
１６ｄ タッチ操作実行部
２０ 外部表示装置
２１ アンテナ
２２ 無線通信部
２３ 有線通信部
２４ タッチパネル部
２４ａ 表示部
２４ｂ タッチセンサ部
２５ 記憶部
２５ａ 画像データ
２５ｂ 画面解像度データ
２５ｃ タッチ操作元データ
２５ｄ タッチ操作データ
２５ｅ タッチセンサ性能データ
２５ｆ タッチ操作データ調整用データ
２６ 制御部
３０ ＭＨＬケーブル
３０ ケーブル
４０ 画像
５０ 画像
５１ 黒画像

Claims (5)

1. タッチセンサを備える外部表示装置と接続する端末装置であって、
   前記端末装置は、調整用データ生成部と通信部を備え、
   前記調整用データ生成部は、前記外部表示装置のタッチセンサの性能と前記端末装置のタッチ処理能力を比較して、前記外部表示装置から前記端末装置に送信されるタッチ操作データを調整するための調整用データを生成し、
   前記通信部は、前記調整用データを前記外部表示装置に送信することを特徴とする端末装置。
2. 前記外部表示装置のタッチセンサの性能は、サンプリング周波数及び最大マルチタッチ数に関する情報であることを特徴とする請求項１に記載の端末装置。
3. 前記外部表示装置のタッチセンサの性能が前記端末装置のタッチ処理能力より高い場合、前記調整用データは、前記端末装置のタッチ処理能力の情報であることを特徴とする請求項１または２のいずれかに記載の端末装置。
4. 端末装置と接続する外部表示装置であって、
   前記外部表示装置は、通信部、タッチセンサ、制御部を備え、
   前記通信部は、前記端末装置に送信するタッチ操作データを調整するための調整用データを前記端末装置から受信し、
   前記タッチセンサは、タッチ操作が行われたことを検出し、
   前記制御部は、前記調整用データに基づいて前記タッチ操作データを変換することを特徴とする外部表示装置。
5. 端末装置と、タッチセンサを備える外部表示装置とからなる情報システムであって、
   前記端末装置は、調整用データ生成部と端末装置側通信部を備え、
   前記調整用データ生成部は、前記外部表示装置のタッチセンサの性能と前記端末装置のタッチ処理能力を比較して、前記外部表示装置から前記端末装置に送信されるタッチ操作データを調整するための調整用データを生成し、
   前記端末装置側通信部は、前記調整用データを前記外部表示装置に送信するものであり、
   前記外部表示装置は、外部表示装置側通信部、タッチセンサ、制御部を備え、
   前記外部表示装置側通信部は、前記調整用データを受信し、
   前記タッチセンサは、タッチ操作が行われたことを検出し、
   前記制御部は、前記調整用データに基づいて前記タッチ操作データを調整することを特徴とする情報システム。