JP6111480B2 - 表示装置、端末機器、表示システム、及び表示方法 - Google Patents

Description

本発明は、表示装置、端末機器、表示システム、及び表示方法に関し、より詳細には、タッチ操作可能な表示装置、端末機器、表示システム、及び表示方法に関する。

近年、スマートフォンやＰＤＡ(Personal Digital Assistant)などの携帯端末が急速に普及している。このような携帯端末は、省スペース性及び簡易操作性を実現するために、ユーザによる操作入力を受け付けるための操作部として、タッチパネルが採用されている。このタッチパネルでは、ユーザの指やタッチペン等によりタッチされた点の画面上における座標値を検出することにより、タッチにより描画された線等の画像を認識して、液晶表示装置等の画面上に表示することができる。また、タッチパネルの原理としては、例えば、抵抗膜方式、静電容量方式、光学方式（赤外線方式）など、種々存在する。

上記のタッチパネルにおけるタッチ操作の一つとして、ピンチ操作やフリック操作が知られている。ピンチ操作とは、ユーザがタッチパネル上で押下した２本の指の間隔を縮めたり（ピンチイン）、拡げたり（ピンチアウト）する操作であり、フリック操作とは、ユーザがタッチパネル上で押下した指を一定方向に移動させた後にタッチパネルから指を跳ねるようにして離す操作である。これらのタッチ操作により、表示画像の拡大縮小や、ページ送りなどの操作が可能となる。

従来、タッチパネルにおけるフリック操作に関して、例えば、特許文献１に記載の技術が提案されている。これは、フリック操作時にタッチ開始位置からタッチ終了位置までの移動速度を計測し、その移動速度とユーザの指の数とに基づいて、表示画像をスクロールさせる制御量を設定するものである。また、特許文献２には、複数の指によるマルチフリック操作が検出された場合、表示画像のページを、マルチフリック操作による接触点の数に応じた移動量で移動させる技術が記載されている。

特開２０１１−２４８４１６号公報 特開２０１１−１７０６０３号公報

ここで、スマートフォンなどの携帯端末の表示画面を、液晶モニタの大画面にそのまま表示させるＭｉｒａｃａｓｔ（登録商標）という技術が知られている。このＭｉｒａｃａｓｔは、Ｗｉ-Ｆｉ Ａｌｌｉａｎｃｅで策定された無線接続規格であり、無線ＬＡＮを使って液晶モニタと携帯端末とを１対１で接続する。そのため、無線ＬＡＮルータは不要となる。接続は簡単で、例えば、液晶モニタ側の所定の入力切替ボタンを選択し、接続の待受中になったら、対応する携帯端末側で、Ｍｉｒａｃａｓｔ用アプリケーションを起動させることにより、双方が相手を認識し、携帯端末の画面がそのまま液晶モニタの大画面に表示される。

上記において、液晶モニタが備えるタッチパネルからのタッチ操作情報を、携帯端末側に送信して操作内容を伝えることにより、液晶モニタ側から携帯端末を操作することが可能となっている。例えば、液晶モニタ側で画像の拡大／縮小を行うために、液晶モニタのタッチパネル上でピンチ操作を行う場合、このときのタッチ操作情報が携帯端末へ送信され、携帯端末はこのタッチ操作情報に応じて画像を拡大または縮小する操作を実行する。そして、ピンチ操作後の画像が携帯端末から液晶モニタに送信され、拡大または縮小された後の画像が液晶モニタに表示される。

しかしながら、上記の構成とした場合、次のような問題がある。通常、携帯端末の画面サイズは液晶モニタの画面サイズよりも小さいため、液晶モニタのタッチパネル上でのピンチ操作で携帯端末を操作しようとした場合、通常のピンチ操作では、携帯端末で行う場合と比べ指の移動量を多くしないとならない。例えば、図７において、液晶モニタ１０１と携帯端末１０２の画面上に同じ画像Ｐが表示されている場合について想定する。小画面の携帯端末１０２でのピンチ操作による指の移動量Ｌ２を、大画面の液晶モニタ１０１上で再現しようとすると、移動量Ｌ２よりも多い移動量Ｌ１だけ指を移動させる必要がある。この移動量Ｌ１は液晶モニタ１０１の画面サイズが大きくなるほど増加する。つまり、携帯端末１０２での所定の移動量を得るためには、液晶モニタ１０１での指の移動量を携帯端末１０２での指の移動量よりも多くしなければならず、ユーザに違和感を与えてしまう。

特に、液晶モニタ１０１でピンチアウト操作を行って、画像Ｐを拡大しようとした場合、ユーザの親指と人差し指では十分な移動量を確保できないことも考えられ、この場合、携帯端末１０２ではユーザが意図した拡大操作を行うことができないという事態も起こり得る。

本発明は、上述のような実情に鑑みてなされたもので、Ｍｉｒａｃａｓｔ接続等により端末機器と同じ画像を表示装置に表示させた場合に、表示装置側からの所定のタッチ操作によって端末機器を違和感なく操作できる表示装置、端末機器、表示システム、及び表示方法を提供することを目的とする。

上記課題を解決するために、本発明の第１の技術手段は、タッチ操作可能な端末機器と接続される表示装置であって、前記端末機器に表示されている画像データと同じ画像データを前記端末機器から受信する受信部と、該受信した画像データを表示する表示部と、該表示部に一体的に設けられたタッチパネルと、該タッチパネルにより検出されたタッチ操作が所定のタッチ操作であるか否かを判定するタッチ操作判定部と、該タッチ操作判定部により所定のタッチ操作と判定した場合、該所定のタッチ操作でのタッチ座標の第１のタッチ移動量を、前記表示装置の画面サイズと前記端末機器の画面サイズとの比率に応じた第２のタッチ移動量に変換するタッチ移動量変換部と、該タッチ移動量変換部により変換した第２のタッチ移動量に基づくタッチ操作情報を前記端末機器に送信する送信部とを備え、前記タッチ操作情報は、前記所定のタッチ操作でのタッチ座標と、前記第２のタッチ移動量とに基づいて算出される座標情報であり、前記タッチ移動量変換部は、前記座標情報の座標が、前記端末機器の座標範囲を超える場合に、該座標範囲内に収まるように前記第２のタッチ移動量を調整することを特徴としたものである。

第２の技術手段は、第１の技術手段において、前記所定のタッチ操作は、ピンチ操作またはフリック操作であることを特徴としたものである。

第３の技術手段は、第１または第２の技術手段において、前記タッチ移動量変換部は、該タッチ移動量変換部によるタッチ移動量変換処理を実行するか否かをユーザに選択させることを特徴としたものである。

第４の技術手段は、第１〜第３のいずれか１の技術手段における表示装置と接続される端末機器であって、前記画像データを表示する表示部と、前記表示装置から受信したタッチ操作情報に従って、前記表示部に表示されている画像データに対して所定の操作を実行する制御部とを備えたことを特徴としたものである。

第５の技術手段は、第４の技術手段において、前記制御部は、前記所定の操作として、前記画像データに対してページ送り操作を実行することを特徴としたものである。

第６の技術手段は、第４の技術手段において、前記制御部は、前記所定の操作として、前記画像データに対して拡大縮小操作を実行することを特徴としたものである。

第７の技術手段は、タッチ操作可能な端末機器と、タッチ操作可能な表示装置とが接続された表示システムであって、前記表示装置は、前記端末機器に表示されている画像データと同じ画像データを前記端末機器から受信する受信部と、該受信した画像データを表示する表示部と、該表示部に一体的に設けられたタッチパネルと、該タッチパネルにより検出されたタッチ操作が所定のタッチ操作であるか否かを判定するタッチ操作判定部と、該タッチ操作判定部により所定のタッチ操作と判定した場合、該所定のタッチ操作でのタッチ座標の第１のタッチ移動量を、前記表示装置の画面サイズと前記端末機器の画面サイズとの比率に応じた第２のタッチ移動量に変換するタッチ移動量変換部と、該タッチ移動量変換部により変換した第２のタッチ移動量に基づくタッチ操作情報を前記端末機器に送信する送信部とを備え、前記タッチ操作情報は、前記所定のタッチ操作でのタッチ座標と、前記第２のタッチ移動量とに基づいて算出される座標情報であり、前記タッチ移動量変換部は、前記座標情報の座標が、前記端末機器の座標範囲を超える場合に、該座標範囲内に収まるように前記第２のタッチ移動量を調整し、前記端末機器は、前記画像データを表示する表示部と、前記表示装置から受信したタッチ操作情報に従って、前記端末機器の前記表示部に表示されている画像データに対して所定の操作を実行する制御部とを備えたことを特徴としたものである。

第８の技術手段は、タッチ操作可能な端末機器と接続される表示装置による表示方法であって、前記表示装置が、前記端末機器に表示されている画像データと同じ画像データを前記端末機器から受信する受信ステップと、該受信した画像データを表示部に表示する表示ステップと、前記表示部に一体的に設けられたタッチパネルにより検出されたタッチ操作が所定のタッチ操作であるか否かを判定するタッチ操作判定ステップと、該タッチ操作判定ステップにて所定のタッチ操作と判定した場合、該所定のタッチ操作でのタッチ座標の第１のタッチ移動量を、前記表示装置の画面サイズと前記端末機器の画面サイズとの比率に応じた第２のタッチ移動量に変換するタッチ移動量変換ステップと、該タッチ移動量変換ステップにて変換した第２のタッチ移動量に基づくタッチ操作情報を前記端末機器に送信する送信ステップとを備え、前記タッチ操作情報は、前記所定のタッチ操作でのタッチ座標と、前記第２のタッチ移動量とに基づいて算出される座標情報であり、前記タッチ移動量変換ステップにおいては、前記座標情報の座標が、前記端末機器の座標範囲を超える場合に、該座標範囲内に収まるように前記第２のタッチ移動量を調整することを特徴としたものである。

本発明によれば、Ｍｉｒａｃａｓｔ接続等により端末機器と同じ画像を表示装置に表示させ、表示装置での所定のタッチ操作を検出した場合に、表示装置のタッチ座標の第１のタッチ移動量を、表示装置の画面サイズと端末機器の画面サイズとの比率に応じた第２のタッチ移動量に変換することができるため、表示装置側の所定のタッチ操作によって端末機器を違和感なく操作することができる。

本発明に係る表示システムの外観構成例を示す図である。 本発明の第１の実施形態に係る液晶モニタ及び携帯端末の機能的な構成例を示すブロック図である。 液晶モニタに表示されるタッチ移動量調整画面の一例を示す図である。 本発明に係る表示装置による表示方法の一例を説明するためのフロー図である。 本発明に係る表示装置による表示方法の他の例を説明するためのフロー図である。 本発明の第２の実施形態に係る液晶モニタ及び携帯端末の機能的な構成例を示すブロック図である。 従来技術を説明するための図である。

以下、添付図面を参照しながら、本発明の表示装置、端末機器、表示システム、及び表示方法に係る好適な実施の形態について説明する。

図１は、本発明に係る表示システムの外観構成例を示す図である。図中、１は表示装置の一例である液晶モニタ、２は端末機器の一例である携帯端末を示す。大画面の液晶モニタ１と小画面の携帯端末２とは、例えば、前述のＭｉｒａｃａｓｔ接続されており、携帯端末２で表示する画像Ｐを液晶モニタ１に送信し、液晶モニタ１では携帯端末２と同じ画像Ｐを表示する。なお、液晶モニタ１と携帯端末２との接続方法は、このＭｉｒａｃａｓｔ接続に限定されるのではなく、同様の機能を有する有線接続あるいは無線接続であってもよい。

そして、液晶モニタ１及び携帯端末２は共にタッチパネルを備え、タッチ操作を可能としている。本例の表示システムでは、液晶モニタ１でのタッチ操作情報が携帯端末２へ送信され、携帯端末２ではこのタッチ操作情報に従って所定の操作を実行する。例えば、画像データの拡大／縮小を行う場合、液晶モニタ１でのピンチ操作に応じて、携帯端末２が画像データの拡大／縮小操作を実行し、拡大／縮小後の画像データを液晶モニタ１へ送信し、液晶モニタ１ではこれを表示するように制御される。

（第１の実施形態）
図２は、本発明の第１の実施形態に係る液晶モニタ及び携帯端末の機能的な構成例を示すブロック図である。液晶モニタ１は、受信部１１、表示パネル制御部１２、表示パネル１３、タッチパネル１４、タッチパネル制御部１５、制御部１６、及び送信部１７を備える。携帯端末２は、例えば、スマートフォンなどであり、受信部２１、表示部２２、タッチパネル２３、制御部２４、及び送信部２５を備える。なお、本発明に係る表示装置としては、上記の液晶モニタ１以外の薄型表示装置であってもよく、例えば、液晶テレビをモニタとして利用するものであってもよい。また、本発明に係る端末機器としては、上記の携帯端末２以外であってもよく、例えば、タッチパネルを搭載したパーソナルコンピュータなどであってもよい。

液晶モニタ１の受信部１１は、携帯端末２から送られてくる画像データを受信、解析、デコードし、デコード後の画像データを表示パネル制御部１２に送る。表示パネル制御部１２は、表示パネル１３の駆動制御を行うためのもので、受信部１１からの画像データを可視できる状態で表示パネル１３に表示させる。表示パネル１３は、本例では液晶パネルで構成される。

タッチパネル１４は、液晶モニタ１の画面上をユーザの指またはスタイラスペンなどでタッチしたときに、そのタッチ位置（以下、タッチ座標ともいう）を入力するためのセンサである。タッチパネル制御部１５は、タッチパネル１４を介して入力されたタッチ座標を検出し、検出したタッチ座標を制御部１６に送る。制御部１６は、液晶モニタ１の動作を制御するためのＣＰＵやメモリなどで構成され、タッチパネル制御部１５からのタッチ座標によりタッチ操作情報を生成する。送信部１７は、制御部１６で生成したタッチ操作情報を送信用の所定のフォーマットに変換して携帯端末２へ送信する。

携帯端末２の送信部２５は、表示部２２に表示される画像データを液晶モニタ１に送信し、また、受信部２１は、液晶モニタ１からタッチ操作情報を受信する。そして、制御部２４は、液晶モニタ１から受信したタッチ操作情報により、表示部２２に表示中の画像データに対して、自身のタッチパネル２３を介して検出されるタッチ操作と同様の動作、処理を実行する。

すなわち、液晶モニタ１のタッチパネル１４上の座標位置と、携帯端末２のタッチパネル２３上の座標位置とは対応付けされており、液晶モニタ１でのタッチ座標位置がタッチ操作情報として携帯端末２へ送信される。携帯端末２では、液晶モニタ１でのタッチ座標位置を自身の対応座標位置に割り当てて認識する。このようにして、液晶モニタ１にてピンチ操作やフリック操作等のタッチ操作がなされた場合、携帯端末２ではこれらのタッチ操作の軌跡を、上記のタッチ操作情報により認識し、この軌跡に応じた操作を実行することができる。

本発明の主たる目的は、Ｍｉｒａｃａｓｔ接続等により端末機器と同じ画像を表示装置に表示させた場合に、表示装置側からの所定のタッチ操作によって端末機器を違和感なく操作できるようにすることにある。このための構成として、表示装置の一例である液晶モニタ１は、端末機器の一例である携帯端末２に表示されている画像データと同じ画像データを携帯端末２から受信する受信部１１と、受信した画像データを表示する表示部に相当する表示パネル１３と、表示パネル１３に一体的に設けられたタッチパネル１４と、タッチパネル１４により検出されたタッチ操作が所定のタッチ操作であるか否かを判定するタッチ操作判定部１６ａと、タッチ操作判定部１６ａにより所定のタッチ操作と判定した場合、所定のタッチ操作でのタッチ座標の第１のタッチ移動量を、液晶モニタ１の画面サイズと携帯端末２の画面サイズとの比率に応じた第２のタッチ移動量に変換するタッチ移動量変換部１６ｂと、タッチ移動量変換部１６ｂにより変換した第２のタッチ移動量に基づくタッチ操作情報を携帯端末２に送信する送信部１７とを備える。

ここで、所定のタッチ操作とは、例えば、ピンチ操作またはフリック操作などである。ピンチ操作とは、ユーザがタッチパネル上で押下した２本の指の間隔を縮めたり（ピンチイン）、拡げたり（ピンチアウト）する操作であり、フリック操作とは、ユーザがタッチパネル上で押下した指を一定方向に移動させた後にタッチパネルから指を跳ねるようにして離す操作である。

また、タッチ操作判定部１６ａ及びタッチ移動量変換部１６ｂは、制御部１６の一機能として実現される。具体的には、タッチ操作判定部１６ａ及びタッチ移動量変換部１６ｂとしての機能を実行するためのプログラムが制御部１６内のメモリ（図示せず）に格納されており、実行時に、制御部１６のＣＰＵ（図示せず）が、メモリから当該プログラムを読み出して実行する。

上記において、タッチ操作判定部１６ａは、タッチパネル１４に対するタッチ点の軌跡を検出し、所定のタッチ操作（ここでは、ピンチ操作またはフリック操作）であるか否かを判定する。ピンチ操作の場合、同時に２つのタッチ点が検出され、これら２つのタッチ点が近づく方向に移動する軌跡、あるいは、離れる方向に移動する軌跡となる。なお、ピンチ操作の軌跡としては、２つのタッチ点が両方移動する軌跡に限らず、一方のタッチ点が固定され、他方のタッチ点のみが移動する軌跡であってもよい。また、フリック操作の場合、少なくとも１つのタッチ点が連続的に一定方向に移動するような軌跡となる。従って、タッチ操作判定部１６ａは、このようなタッチ点の軌跡を検出した場合に、タッチ操作がピンチ操作またはフリック操作であると判定することができる。

次に、タッチ移動量変換部１６ｂの第１の処理例についてフリック操作の場合を例示して説明する。フリック操作でのタッチ座標の第１のタッチ移動量をａ１、調整量をｂ１、第２のタッチ移動量をａ１′とした場合、調整量ｂ１は、以下の式（１）により決定することができる。
ｂ１＝ａ１×ｃ …式（１）
但し、ｃは調整係数とする。そして、第２のタッチ移動量ａ１′は、
ａ１′＝ａ１＋ｂ１＝（１＋ｃ）×ａ１ …式（２）
と求めることができる。

タッチ移動量変換部１６ｂは、調整量ｂ１を、液晶モニタ１の画面サイズと携帯端末２の画面サイズとの比率（以下、画面サイズ比という）に基づき決定する。具体的には、液晶モニタ１の画面サイズが携帯端末２の画面サイズよりも縦横比にして例えば５０％大きい場合、調整量ｂ１は、第１のタッチ移動量ａ１に、調整係数ｃとして“０．５”を乗じることで算出される。そして、この場合、第２のタッチ移動量ａ１′は、上記式（２）より、
ａ１′＝（１＋０．５）×ａ１＝１．５×ａ１
と求めることができる。

上記において、第１のタッチ移動量ａ１は、フリック操作での指の移動量、つまり、タッチ開始座標からタッチ終了座標までの距離を検出することで求めることができる。なお、マルチフリック操作の場合、同時に複数点のタッチ座標が検出されることになるが、いずれか１つのタッチ点の開始座標と終了座標でもよく、また、複数のタッチ点の開始座標と終了座標それぞれの平均であってもよい。ここで、タッチ開始座標が（ｘ１，ｙ１）で、タッチ終了座標が（ｘ２，ｙ２）であった場合、タッチ開始座標とタッチ終了座標との距離は、ｘ方向に｜ｘ２−ｘ１｜、ｙ方向に｜ｙ２−ｙ１｜となる。従って、第１のタッチ移動量ａ１は、（｜ｘ２−ｘ１｜，｜ｙ２−ｙ１｜）と表すことができる。

この場合、第２のタッチ移動量ａ１′は、（１．５×｜ｘ２−ｘ１｜，１．５×｜ｙ２−ｙ１｜）と求めることができる。このようにして、フリック操作での第１のタッチ移動量ａ１（｜ｘ２−ｘ１｜，｜ｙ２−ｙ１｜）は、画面サイズ比に応じた第２のタッチ移動量ａ１′（１．５×｜ｘ２−ｘ１｜，１．５×｜ｙ２−ｙ１｜）に変換される。

そして、タッチ移動量変換部１６ｂは、第２のタッチ移動量ａ１′に応じたタッチ操作情報として、フリック操作でのタッチ開始座標（ｘ１，ｙ１）と、第２のタッチ移動量ａ１′（１．５×｜ｘ２−ｘ１｜，１．５×｜ｙ２−ｙ１｜）とに基づいて座標情報を算出する。ここでは、座標情報として、（ｘ１＋１．５×（ｘ２−ｘ１），ｙ１＋１．５×（ｙ２−ｙ１））が得られる。このようにして得られたタッチ操作情報（座標情報）は、液晶モニタ１の送信部１７から、携帯端末２へ送信される。このタッチ操作情報（座標情報）により、タッチ開始座標（ｘ１，ｙ１）からタッチ終了座標（ｘ２，ｙ２）までのフリック操作の軌跡が、タッチ開始座標（ｘ１，ｙ１）からタッチ終了座標（ｘ１＋１．５×（ｘ２−ｘ１），ｙ１＋１．５×（ｙ２−ｙ１））までのフリック操作の軌跡として伝えられる。

なお、タッチ移動量変換部１６ｂは、上記のタッチ操作情報として算出された座標情報の座標が、携帯端末２の座標範囲を超える場合に、座標範囲内に収まるように第２のタッチ移動量ａ１′を調整するようにしてもよい。具体的には、上記のタッチ終了座標（ｘ１＋１．５×（ｘ２−ｘ１），ｙ１＋１．５×（ｙ２−ｙ１））が、携帯端末２の座標範囲内に収まる上限（頭打ち）となるように、第２のタッチ移動量ａ１′（１．５×｜ｘ２−ｘ１｜，１．５×｜ｙ２−ｙ１｜）を調整する。

さらに、タッチ移動量変換部１６ｂの第２の処理例について説明する。フリック操作でのタッチ座標の第１のタッチ移動量をａ２、調整量をｂ２、第２のタッチ移動量をａ２′とした場合、第２のタッチ移動量ａ２′を、以下の式（３）により求めてもよい。
ａ２′＝ｂ２×ａ２ …式（３）

ここで、タッチ移動量変換部１６ｂは、調整量ｂ２を、液晶モニタ１の画面サイズと携帯端末２の画面サイズとの比率（画面サイズ比）に基づき決定する。具体的には、液晶モニタ１の画面サイズが携帯端末２の画面サイズに対して縦横比にして例えば３倍大きい場合、調整量ｂ２を“３”に設定する。そして、この場合、第２のタッチ移動量ａ２′は、上記式（３）より、
ａ２′＝３×ａ２
と求めることができる。

上記において、液晶モニタ１のタッチ座標として、例えば、タッチ開始座標が（ｘ１，ｙ１）で、タッチ終了座標が（ｘ２，ｙ２）であった場合、タッチ開始座標とタッチ終了座標との距離は、ｘ方向に｜ｘ２−ｘ１｜、ｙ方向に｜ｙ２−ｙ１｜となる。従って、第１のタッチ移動量ａ２は、（｜ｘ２−ｘ１｜，｜ｙ２−ｙ１｜）と表すことができる。

この場合、第２のタッチ移動量ａ２′は、（３×｜ｘ２−ｘ１｜，３×｜ｙ２−ｙ１｜）と求めることができる。このようにして、フリック操作での第１のタッチ移動量ａ２（｜ｘ２−ｘ１｜，｜ｙ２−ｙ１｜）は、画面サイズ比に応じた第２のタッチ移動量ａ２′（３×｜ｘ２−ｘ１｜，３×｜ｙ２−ｙ１｜）に変換される。

そして、タッチ移動量変換部１６ｂは、第２のタッチ移動量ａ２′に応じたタッチ操作情報として、フリック操作でのタッチ開始座標（ｘ１，ｙ１）と、第２のタッチ移動量ａ２′（３×｜ｘ２−ｘ１｜，３×｜ｙ２−ｙ１｜）とに基づいて座標情報を算出する。ここでは、座標情報として、（ｘ１＋３×（ｘ２−ｘ１），ｙ１＋３×（ｙ２−ｙ１））が得られる。

なお、上記ではフリック操作の場合について説明したが、ピンチ操作であっても同様の処理が可能である。ピンチ操作の場合、２本の指により２つのタッチ点が近づいたり、離れたりする軌跡となるが、例えば、２つのタッチ点それぞれについて、タッチ開始座標と、第２のタッチ移動量とを求め、それぞれ対応する座標情報を算出すればよい。なお、一方のタッチ点を固定し、固定した一方のタッチ点に対して他方のタッチ点が近づいたり、離れたりする軌跡となる場合もあるが、この場合、他方のタッチ点について、タッチ開始座標と、第２のタッチ移動量とを求め、これに対応する座標情報を算出すればよい。

次に、携帯端末２の構成例について説明する。携帯端末２は、液晶モニタ１に送信した画像データと同じ画像データを表示する表示部２２と、液晶モニタ１から受信したタッチ操作情報に従って、表示部２２に表示されている画像データに対して所定の操作を実行する制御部２４とを備える。ここでいう所定の操作とは、例えば、フリック操作の場合には画像データのページ送り操作などであり、ピンチ操作の場合には画像データの拡大縮小操作などとなる。そして、所定の操作の実行後の画像データは、携帯端末２から液晶モニタ１へ送信され、液晶モニタ１ではこの画像データを表示する。

以上のタッチ移動量調整処理（タッチ移動量変換処理）により、図１に示すように、液晶モニタ１に対してユーザがタッチ移動量Ｌ３（第１のタッチ移動量）の操作を行った場合、携帯端末２にはタッチ移動量Ｌ４（＞Ｌ３，第２のタッチ移動量）のタッチ操作の軌跡として入力される。つまり、ユーザは液晶モニタ１に対してタッチ移動量の少ないタッチ操作を行うことで、タッチ移動量の多いタッチ操作に変換され、変換後の操作内容が携帯端末２へ伝えられる。換言すれば、液晶モニタ１での少ないタッチ移動量であっても、携帯端末２にタッチ移動量を増加させて伝えることができるため、ユーザは液晶モニタ１から携帯端末２を違和感なく操作することができる。

なお、携帯端末２の画面サイズについては、液晶モニタ１と携帯端末２との間で通信プロトコルを確立する際に、液晶モニタ１が携帯端末２の画面サイズ情報を自動的に取得するようにしてもよい。あるいは、ユーザが液晶モニタ１に携帯端末２の画面サイズ情報を手動で入力するようにしてもよい。そして、液晶モニタ１では、携帯端末２の画面サイズ情報と、液晶モニタ１が持つ自身の画面サイズ情報とを比較し、両者の画面サイズの比率に基づき第１の処理例の調整量ｂ１あるいは第２の処理例の調整量ｂ２を決定することができる。

ここで、図３に示すように、液晶モニタ１に、タッチ移動量調整画面を表示させるようにしてもよい。図３の例において、ユーザの操作により、「調整しない」が選択された場合、タッチ移動量調整処理は実施されず、「画面サイズ比」が選択された場合、液晶モニタ１の画面サイズと携帯端末２の画面サイズとの比率に基づき調整係数ｃあるいは調整量ｂ２が決定される。また、「ユーザ設定」が選択された場合、ユーザの操作に従って、スライダーバー上でつまみＴを移動させることで、調整係数ｃあるいは調整量ｂ２が決定される。つまり、この「ユーザ設定」では、ユーザが液晶モニタ１の画面サイズと携帯端末２の画面サイズとを比較した結果に基づいて、おおよその画面サイズ比に応じた位置につまみＴを移動させればよい。なお、図３の例では、「画面サイズ比」が選択されている状態を示す。

図４は、本発明に係る表示装置による表示方法の一例を説明するためのフロー図である。本例では、図２の構成例に基づき説明するものとする。まず、表示装置の一例である液晶モニタ１は、タッチパネル１４に対して何らかのタッチイベント（以下、タッチ操作という）を検出した場合に、タッチ移動量調整モードがオンされているか否かを判定する（ステップＳ１）。例えば、前述の図３に示したタッチ移動量調整画面で、「画面サイズ比」が選択されている場合に、タッチ移動量調整モードがオンされていると判定し、「調整しない」が選択されている場合に、タッチ移動量調整モードがオフされていると判定する。そして、ステップＳ１において、タッチ移動量調整モードがオンされていないと判定した場合（ＮＯの場合）、ステップＳ４へ移行し、タッチ操作情報をそのまま携帯端末２へ送信する（ステップＳ４）。また、ステップＳ１において、タッチ移動量調整モードがオンされていると判定した場合（ＹＥＳの場合）、タッチ操作が所定のタッチ操作（ここではピンチ操作またはフリック操作とする）であるか否かを判定する（ステップＳ２）。

次に、液晶モニタ１は、ステップＳ２において、タッチ操作がピンチ操作またはフリック操作ではないと判定した場合（ＮＯの場合）、調整対象外のタッチ操作とし、ステップＳ４に移行して、タッチ操作情報をそのまま携帯端末２へ送信する。また、ステップＳ２において、タッチ操作がピンチ操作またはフリック操作であると判定した場合（ＹＥＳの場合）、タッチ操作終了イベント、具体的には、ピンチ動作またはフリック動作の終了を示すリリースイベントが発生したか否かを判定する（ステップＳ３）。

次に、液晶モニタ１は、ステップＳ３において、タッチ操作終了イベントが発生しない、すなわち、ピンチ動作またはフリック動作の終了ではなく、ピンチ動作またはフリック動作の継続中と判定した場合（ＮＯの場合）、ピンチ動作またはフリック動作に伴うタッチ操作情報を内部メモリに保存し（ステップＳ５）、ステップＳ３に戻り処理を繰り返す。また、ステップＳ３において、タッチ操作終了イベントが発生したと判定した場合（ＹＥＳの場合）、タッチ操作の開始位置と終了位置とから第１のタッチ移動量を算出する（ステップＳ６）。

次に、液晶モニタ１は、ステップＳ６で算出した第１のタッチ移動量を、画面サイズ比に応じた第２のタッチ移動量に変換する（ステップＳ７）。この画面サイズ比は、液晶モニタ１の画面サイズと携帯端末２の画面サイズとの比率であり、例えば、液晶モニタ１と携帯端末２それぞれの画面サイズ情報により算出することができる。前述したように、液晶モニタ１と携帯端末２との間で通信プロトコルを確立する際に、液晶モニタ１が携帯端末２の画面サイズ情報を自動的に取得するようにしてもよい。あるいは、ユーザが液晶モニタ１に携帯端末２の画面サイズ情報を手動で入力するようにしてもよい。

次に、液晶モニタ１は、ステップＳ７で求めた第２のタッチ移動量に応じたタッチ操作情報を携帯端末２に送信する（ステップＳ８）。このタッチ操作情報は、タッチ操作でのタッチ開始座標と、第２のタッチ移動量とに基づいて算出される座標情報である。そして、携帯端末２では、液晶モニタ１から受信したタッチ操作情報を解析し、操作内容が、タッチ開始座標から第２のタッチ移動量だけ移動したタッチ終了座標までのピンチ操作またはフリック操作であると認識する。そして、携帯端末２は、認識した操作内容に応じて、画像データの拡大縮小操作やページ送り操作などを実行する。

上記図４のフローでは、ピンチ操作またはフリック操作が終了した時点で、タッチ開始座標とタッチ終了座標とから第１のタッチ移動量を求め、これを第２のタッチ移動量に変換し、第２のタッチ移動量に応じたタッチ操作情報を携帯端末２へ送信していた。これに対して、以下の図５のフローでは、ピンチ操作またはフリック操作の途中で、タッチ操作の前回位置と今回位置とから第１のタッチ移動量を求め、これを第２のタッチ移動量に変換し、第２のタッチ移動量に応じたタッチ操作情報を携帯端末２へ送信する処理を、タッチ操作の軌跡上の複数のタッチ点について繰り返し行う。つまり、図４のフローでは、ピンチ操作またはフリック操作の終了後に１回だけ携帯端末にタッチ操作情報を送るのに対して、図５のフローでは、ピンチ操作またはフリック操作の途中で複数回に渡り携帯端末にタッチ操作情報を送る点で異なる。

図５は、本発明に係る表示装置による表示方法の他の例を説明するためのフロー図である。本例では、図４のフローと同様に、図２の構成例に基づき説明するものとする。まず、液晶モニタ１は、タッチパネル１４に対して何らかのタッチイベント（以下、タッチ操作という）を検出した場合に、タッチ移動量調整モードがオンされているか否かを判定する（ステップＳ１１）。図４の場合と同様に、前述の図３に示したタッチ移動量調整画面で、「画面サイズ比」が選択されている場合に、タッチ移動量調整モードがオンされていると判定し、「調整しない」が選択されている場合に、タッチ移動量調整モードがオフされていると判定する。そして、ステップＳ１１において、タッチ移動量調整モードがオンされていないと判定した場合（ＮＯの場合）、ステップＳ１４へ移行し、タッチ操作情報をそのまま携帯端末２へ送信する（ステップＳ１４）。また、ステップＳ１１において、タッチ移動量調整モードがオンされていると判定した場合（ＹＥＳの場合）、タッチ操作が所定のタッチ操作（ピンチ操作またはフリック操作）であるか否かを判定する（ステップＳ１２）。

次に、液晶モニタ１は、ステップＳ１２において、タッチ操作がピンチ操作またはフリック操作ではないと判定した場合（ＮＯの場合）、調整対象外のタッチ操作とし、ステップＳ１４に移行して、タッチ操作情報をそのまま携帯端末２へ送信する。また、ステップＳ１２において、タッチ操作がピンチ操作またはフリック操作であると判定した場合（ＹＥＳの場合）、タッチ操作の前回位置と今回位置とから第１のタッチ移動量を算出する（ステップＳ１３）。

次に、液晶モニタ１は、ステップＳ１３で算出した第１のタッチ移動量を、画面サイズ比に応じた第２のタッチ移動量に変換する（ステップＳ１５）。この画面サイズ比は、液晶モニタ１の画面サイズと携帯端末２の画面サイズとの比率であり、例えば、液晶モニタ１と携帯端末２それぞれの画面サイズ情報により算出することができる。

次に、液晶モニタ１は、ステップＳ１５で求めた第２のタッチ移動量に応じたタッチ操作情報を携帯端末２に送信し（ステップＳ１６）、タッチ操作終了イベント、具体的には、ピンチ動作またはフリック動作の終了を示すリリースイベントが発生したか否かを判定する（ステップＳ１７）。本例の場合、タッチ操作情報は、ピンチ操作またはフリック操作での前回タッチ座標と、第２のタッチ移動量とに基づいて算出される座標情報である。

次に、液晶モニタ１は、ステップＳ１７において、タッチ操作終了イベントが発生しない、すなわち、ピンチ動作またはフリック動作の終了ではなく、ピンチ動作またはフリック動作の継続中と判定した場合（ＮＯの場合）、ステップＳ１３に戻り処理を繰り返す。また、ステップＳ１７において、タッチ操作終了イベントが発生したと判定した場合（ＹＥＳの場合）、そのまま終了する。一方、携帯端末２では、液晶モニタ１から受信した複数のタッチ操作情報をそれぞれ解析し、操作内容が、タッチ開始座標からタッチ終了座標までのピンチ操作またはフリック操作であると認識し、この操作内容に応じて、画像データの拡大縮小操作やページ送り操作などを実行する。

このように、本実施形態によれば、液晶モニタ１でピンチ操作またはフリック操作を行う際に、液晶モニタ１での少ないタッチ移動量であっても、携帯端末２にタッチ移動量を増加させて伝えることができるため、ユーザは液晶モニタ１から携帯端末２を違和感なく操作することができる。

（第２の実施形態）
図６は、本発明の第２の実施形態に係る液晶モニタ及び携帯端末の機能的な構成例を示すブロック図で、図中、１′は液晶モニタ、２′は携帯端末を示す。なお、前述の図２に示した第１の実施形態における各部と同じ機能を有する部分には同じ符号を付し、繰り返しの説明は省略するものとする。本実施形態では、タッチ移動量変換部を携帯端末側に備えており、携帯端末側でタッチ移動量の変換処理が実行される。

すなわち、携帯端末２′は、画像データを表示する表示部２２と、表示部２２に一体的に設けられたタッチパネル２３と、表示部２２に表示されている画像データと同じ画像データを液晶モニタ１′に送信する送信部２５と、液晶モニタ１′から、送信部２５から送信した画像データに対する所定のタッチ操作でのタッチ操作情報を受信する受信部２１と、受信したタッチ操作情報から所定のタッチ操作でのタッチ座標の第１のタッチ移動量を求め、第１のタッチ移動量を、画面サイズ比に応じた第２のタッチ移動量に変換するタッチ移動量変換部２４ａと、タッチ操作情報と第２のタッチ移動量とに基づいて、表示部２２に表示されている画像データに対して所定の操作を実行する制御部２４とを備える。

上記において、液晶モニタ１′が送信するタッチ操作情報によれば、携帯端末２′に対して、タッチ点の座標情報と共に、タッチ操作がピンチ操作あるいはフリック操作であることが伝えられる。携帯端末２′のタッチ移動量変換部２４ａは、タッチ点の座標情報から第１のタッチ移動量を求め、画面サイズ比に応じた第２のタッチ移動量に変換する。この画面サイズ比は、携帯端末２′の画面サイズと液晶モニタ１′の画面サイズとの比率である。

上記において、携帯端末２′の画面サイズと液晶モニタ１′の画面サイズとの比率は、それぞれの画面サイズ情報から求めることができる。例えば、液晶モニタ１′と携帯端末２′との間で通信プロトコルを確立する際に、携帯端末２′が液晶モニタ１′の画面サイズ情報を自動的に取得するようにしてもよく、あるいは、ユーザが携帯端末２′に液晶モニタ１′の画面サイズ情報を手動で入力するようにしてもよい。携帯端末２′では、液晶モニタ１′の画面サイズ情報と、携帯端末２′が持つ自身の画面サイズ情報とを比較し、両者の画面サイズの比率を算出することができる。

そして、制御部２４は、上記タッチ操作情報から得られる座標情報からタッチ開始座標を特定し、特定したタッチ開始座標と、第２のタッチ移動量とに基づき、表示中の画像データに対して所定の操作を実行する。ここでいう所定の操作とは、例えば、画像データの拡大縮小操作や、画像データのページ送り操作などである。そして、所定の操作の実行後の画像データは、携帯端末２′から液晶モニタ１′へ送信され、液晶モニタ１′ではこの画像データを表示する。

このように、本実施形態によれば、前述の第１の実施形態と同様に、液晶モニタ１′にピンチ操作またはフリック操作を行う際に、液晶モニタ１′での少ないタッチ移動量であっても、携帯端末２′にてタッチ移動量を増加させることができるため、ユーザは液晶モニタ１′から携帯端末２′を違和感なく操作することができる。

１，１′…表示装置（液晶モニタ）、２，２′…端末機器（携帯端末）、１１，２１…受信部、１２…表示パネル制御部、１３…表示パネル、１４，２３…タッチパネル、１５…タッチパネル制御部、１６，２４…制御部、１６ａ…タッチ操作判定部、１６ｂ，２４ａ…タッチ移動量変換部、１７，２５…送信部、２２…表示部。

Claims (8)

1. タッチ操作可能な端末機器と接続される表示装置であって、
   前記端末機器に表示されている画像データと同じ画像データを前記端末機器から受信する受信部と、該受信した画像データを表示する表示部と、該表示部に一体的に設けられたタッチパネルと、該タッチパネルにより検出されたタッチ操作が所定のタッチ操作であるか否かを判定するタッチ操作判定部と、該タッチ操作判定部により所定のタッチ操作と判定した場合、該所定のタッチ操作でのタッチ座標の第１のタッチ移動量を、前記表示装置の画面サイズと前記端末機器の画面サイズとの比率に応じた第２のタッチ移動量に変換するタッチ移動量変換部と、該タッチ移動量変換部により変換した第２のタッチ移動量に基づくタッチ操作情報を前記端末機器に送信する送信部とを備え、
   前記タッチ操作情報は、前記所定のタッチ操作でのタッチ座標と、前記第２のタッチ移動量とに基づいて算出される座標情報であり、前記タッチ移動量変換部は、前記座標情報の座標が、前記端末機器の座標範囲を超える場合に、該座標範囲内に収まるように前記第２のタッチ移動量を調整することを特徴とする表示装置。
2. 請求項１に記載の表示装置において、前記所定のタッチ操作は、ピンチ操作またはフリック操作であることを特徴とする表示装置。
3. 請求項１または２に記載の表示装置において、前記タッチ移動量変換部は、該タッチ移動量変換部によるタッチ移動量変換処理を実行するか否かをユーザに選択させることを特徴とする表示装置。
4. 請求項１〜３のいずれか１項に記載の表示装置と接続される端末機器であって、
   前記画像データを表示する表示部と、前記表示装置から受信したタッチ操作情報に従って、前記表示部に表示されている画像データに対して所定の操作を実行する制御部とを備えたことを特徴とする端末機器。
5. 請求項４に記載の端末機器において、前記制御部は、前記所定の操作として、前記画像データに対してページ送り操作を実行することを特徴とする端末機器。
6. 請求項４に記載の端末機器において、前記制御部は、前記所定の操作として、前記画像データに対して拡大縮小操作を実行することを特徴とする端末機器。
7. タッチ操作可能な端末機器と、タッチ操作可能な表示装置とが接続された表示システムであって、
   前記表示装置は、前記端末機器に表示されている画像データと同じ画像データを前記端末機器から受信する受信部と、該受信した画像データを表示する表示部と、該表示部に一体的に設けられたタッチパネルと、該タッチパネルにより検出されたタッチ操作が所定のタッチ操作であるか否かを判定するタッチ操作判定部と、該タッチ操作判定部により所定のタッチ操作と判定した場合、該所定のタッチ操作でのタッチ座標の第１のタッチ移動量を、前記表示装置の画面サイズと前記端末機器の画面サイズとの比率に応じた第２のタッチ移動量に変換するタッチ移動量変換部と、該タッチ移動量変換部により変換した第２のタッチ移動量に基づくタッチ操作情報を前記端末機器に送信する送信部とを備え、前記タッチ操作情報は、前記所定のタッチ操作でのタッチ座標と、前記第２のタッチ移動量とに基づいて算出される座標情報であり、前記タッチ移動量変換部は、前記座標情報の座標が、前記端末機器の座標範囲を超える場合に、該座標範囲内に収まるように前記第２のタッチ移動量を調整し、
   前記端末機器は、前記画像データを表示する表示部と、前記表示装置から受信したタッチ操作情報に従って、前記端末機器の前記表示部に表示されている画像データに対して所定の操作を実行する制御部とを備えたことを特徴とする表示システム。
8. タッチ操作可能な端末機器と接続される表示装置による表示方法であって、
   前記表示装置が、前記端末機器に表示されている画像データと同じ画像データを前記端末機器から受信する受信ステップと、該受信した画像データを表示部に表示する表示ステップと、前記表示部に一体的に設けられたタッチパネルにより検出されたタッチ操作が所定のタッチ操作であるか否かを判定するタッチ操作判定ステップと、該タッチ操作判定ステップにて所定のタッチ操作と判定した場合、該所定のタッチ操作でのタッチ座標の第１のタッチ移動量を、前記表示装置の画面サイズと前記端末機器の画面サイズとの比率に応じた第２のタッチ移動量に変換するタッチ移動量変換ステップと、該タッチ移動量変換ステップにて変換した第２のタッチ移動量に基づくタッチ操作情報を前記端末機器に送信する送信ステップとを備え、前記タッチ操作情報は、前記所定のタッチ操作でのタッチ座標と、前記第２のタッチ移動量とに基づいて算出される座標情報であり、前記タッチ移動量変換ステップにおいては、前記座標情報の座標が、前記端末機器の座標範囲を超える場合に、該座標範囲内に収まるように前記第２のタッチ移動量を調整することを特徴とする表示方法。

Images