JP2015018300A - 表示装置、端末機器、表示システム、及び表示方法 - Google Patents

Abstract

【課題】Ｍｉｒａｃａｓｔ（登録商標）接続等により端末機器と同じ画像を表示装置に表示させた場合に、表示装置側からのマルチフリック操作によって端末機器を違和感なく操作可能とする。【解決手段】液晶モニタ１は、携帯端末２に表示されている画像データと同じ画像データを携帯端末２から受信する受信部１１と、受信した画像データを表示する表示パネル１３と、表示パネル１３に一体的に設けられたタッチパネル１４と、タッチパネル１４により検出されたタッチ操作がマルチフリック操作であるか否かを判定するマルチフリック操作判定部１６ａと、マルチフリック操作と判定した場合、マルチフリック操作でのタッチ座標の第１のフリック移動量を、予め規定された調整量に従って、シングルフリック操作での第２のフリック移動量に変換するフリック移動量変換部１６ｂと、変換した第２のフリック移動量に基づくタッチ操作情報を携帯端末２に送信する送信部１７とを備える。【選択図】図２

Description

本発明は、表示装置、端末機器、表示システム、及び表示方法に関し、より詳細には、タッチ操作可能な表示装置、端末機器、表示システム、及び表示方法に関する。

近年、スマートフォンやＰＤＡ(Personal Digital Assistant)などの携帯端末が急速に普及している。このような携帯端末は、省スペース性及び簡易操作性を実現するために、ユーザによる操作入力を受け付けるための操作部として、タッチパネルが採用されている。このタッチパネルでは、ユーザの指やタッチペン等によりタッチされた点の画面上における座標値を検出することにより、タッチにより描画された線等の画像を認識して、液晶表示装置等の画面上に表示することができる。また、タッチパネルの原理としては、例えば、抵抗膜方式、静電容量方式、光学方式（赤外線方式）など、種々存在する。

上記のタッチパネルにおけるタッチ操作の一つとして、フリック操作が知られている。このフリック操作とは、ユーザがタッチパネル上で押下した指を一定方向に移動させた後にタッチパネルから指を跳ねるようにして離す操作であり、これにより、表示画像のページ送りや、拡大縮小などの操作が可能となる。

従来、タッチパネルにおけるフリック操作に関して、例えば、特許文献１に記載の技術が提案されている。これは、フリック操作時にタッチ開始位置からタッチ終了位置までの移動速度を計測し、その移動速度とユーザの指の数とに基づいて、表示画像をスクロールさせる制御量を設定するものである。また、特許文献２には、複数の指によるマルチフリック操作が検出された場合、表示画像のページを、マルチフリック操作による接触点の数に応じた移動量で移動させる技術が記載されている。

特開２０１１−２４８４１６号公報 特開２０１１−１７０６０３号公報

ここで、スマートフォンなどの携帯端末の表示画面を、液晶モニタの大画面にそのまま表示させるＭｉｒａｃａｓｔ（登録商標）という技術が知られている。このＭｉｒａｃａｓｔは、Ｗｉ-Ｆｉ Ａｌｌｉａｎｃｅで策定された無線接続規格であり、無線ＬＡＮを使って液晶モニタと携帯端末とを１対１で接続する。そのため、無線ＬＡＮルータは不要となる。接続は簡単で、例えば、液晶モニタ側の所定の入力切替ボタンを選択し、接続の待受中になったら、対応する携帯端末側で、Ｍｉｒａｃａｓｔ用アプリケーションを起動させることにより、双方が相手を認識し、携帯端末の画面がそのまま液晶モニタの大画面に表示される。

上記において、液晶モニタが備えるタッチパネルからのタッチ操作情報を、携帯端末側に送信して操作内容を伝えることにより、液晶モニタ側から携帯端末を操作することが可能となっている。例えば、液晶モニタ側で画像のページ送りを行うために、液晶モニタのタッチパネル上でフリック操作を行う場合、このときのタッチ操作情報が携帯端末へ送信され、携帯端末はこのタッチ操作情報に応じて画像を前ページあるいは後ページに送る操作を実行する。そして、操作後の画像の前ページあるいは後ページが携帯端末から液晶モニタに送信され、ページ送り後の画像が液晶モニタに表示される。

しかしながら、上記の構成とした場合、次のような問題がある。通常、携帯端末の画面サイズは液晶モニタの画面サイズよりも小さいため、液晶モニタのタッチパネル上でのフリック操作で携帯端末を操作しようとした場合、通常のフリック操作では、携帯端末で行う場合と比べ指の移動量を多くしないとならない。例えば、図７において、液晶モニタ１０１と携帯端末１０２の画面上に同じ画像Ｐが表示されている場合について想定する。小画面の携帯端末１０２でのフリック操作による指の移動量Ｌ２を、大画面の液晶モニタ１０１上で再現しようとすると、移動量Ｌ２よりも多い移動量Ｌ１だけ指を移動させる必要がある。この移動量Ｌ１は液晶モニタ１０１の画面サイズが大きくなるほど増加する。つまり、携帯端末１０２での所定の移動量を得るためには、液晶モニタ１０１での指の移動量を携帯端末１０２での指の移動量よりも多くしなければならず、ユーザに違和感を与えてしまう。

本発明は、上述のような実情に鑑みてなされたもので、Ｍｉｒａｃａｓｔ接続等により端末機器と同じ画像を表示装置に表示させた場合に、表示装置側からのマルチフリック操作によって端末機器を違和感なく操作できる表示装置、端末機器、表示システム、及び表示方法を提供することを目的とする。

上記課題を解決するために、本発明の第１の技術手段は、タッチ操作可能な端末機器と接続される表示装置であって、前記端末機器に表示されている画像データと同じ画像データを前記端末機器から受信する受信部と、該受信した画像データを表示する表示部と、該表示部に一体的に設けられたタッチパネルと、該タッチパネルにより検出されたタッチ操作がマルチフリック操作であるか否かを判定するマルチフリック操作判定部と、該マルチフリック操作判定部によりマルチフリック操作と判定した場合、該マルチフリック操作でのタッチ座標の第１のフリック移動量を、予め規定された調整量に従って、シングルフリック操作での第２のフリック移動量に変換するフリック移動量変換部と、該フリック移動量変換部により変換した第２のフリック移動量に基づくタッチ操作情報を前記端末機器に送信する送信部とを備えたことを特徴としたものである。

第２の技術手段は、第１の技術手段において、前記フリック移動量変換部は、前記予め規定された調整量を、前記表示装置の画面サイズと前記端末機器の画面サイズとの比率に基づき決定することを特徴としたものである。

第３の技術手段は、第１の技術手段において、前記フリック移動量変換部は、前記予め規定された調整量を、前記マルチフリック操作時に同時入力されるタッチ点の数に基づき決定することを特徴としたものである。

第４の技術手段は、第１の技術手段において、前記フリック移動量変換部は、前記予め規定された調整量を、ユーザが設定した設定値に基づき決定することを特徴としたものである。

第５の技術手段は、第１〜第４のいずれか１の技術手段において、前記タッチ操作情報は、前記マルチフリック操作でのタッチ座標と、前記第２のフリック移動量とに基づいて算出される座標情報であることを特徴としたものである。

第６の技術手段は、第５の技術手段において、前記フリック移動量変換部は、前記座標情報の座標が、前記端末機器の座標範囲を超える場合に、該座標範囲内に収まるように前記第２のフリック移動量を調整することを特徴としたものである。

第７の技術手段は、第１〜第６のいずれか１の技術手段における表示装置と接続される端末機器であって、前記画像データを表示する表示部と、前記表示装置から受信したタッチ操作情報に従って、前記表示部に表示されている画像データに対して所定の操作を実行する制御部とを備えたことを特徴としたものである。

第８の技術手段は、第７の技術手段において、前記制御部は、前記所定の操作として、前記画像データに対してページ送り操作を実行することを特徴としたものである。

第９の技術手段は、第７の技術手段において、前記制御部は、前記所定の操作として、前記画像データに対して拡大縮小操作を実行することを特徴としたものである。

第１０の技術手段は、タッチ操作可能な表示装置と接続される端末機器であって、画像データを表示する表示部と、該表示部に一体的に設けられたタッチパネルと、前記表示部に表示されている画像データと同じ画像データを前記表示装置に送信する送信部と、前記表示装置から、前記送信した画像データに対するマルチフリック操作でのタッチ操作情報を受信する受信部と、該受信したタッチ操作情報から前記マルチフリック操作でのタッチ座標の第１のフリック移動量を求め、該第１のフリック移動量を、予め規定された調整量に従って、シングルフリック操作での第２のフリック移動量に変換するフリック移動量変換部と、前記タッチ操作情報と前記第２のフリック移動量とに基づいて、前記表示部に表示されている画像データに対して所定の操作を実行する制御部とを備えたことを特徴としたものである。

第１１の技術手段は、タッチ操作可能な端末機器と、タッチ操作可能な表示装置とが接続された表示システムであって、前記表示装置は、前記端末機器に表示されている画像データと同じ画像データを前記端末機器から受信する受信部と、該受信した画像データを表示する表示部と、該表示部に一体的に設けられたタッチパネルと、該タッチパネルにより検出されたタッチ操作がマルチフリック操作であるか否かを判定するマルチフリック操作判定部と、該マルチフリック操作判定部によりマルチフリック操作と判定した場合、該マルチフリック操作でのタッチ座標の第１のフリック移動量を、予め規定された調整量に従って、シングルフリック操作での第２のフリック移動量に変換するフリック移動量変換部と、該フリック移動量変換部により変換した第２のフリック移動量に基づくタッチ操作情報を前記端末機器に送信する送信部とを備え、前記端末機器は、前記画像データを表示する表示部と、前記表示装置から受信したタッチ操作情報に従って、前記端末機器の前記表示部に表示されている画像データに対して所定の操作を実行する制御部とを備えたことを特徴としたものである。

第１２の技術手段は、タッチ操作可能な端末機器と接続される表示装置による表示方法であって、
前記表示装置が、前記端末機器に表示されている画像データと同じ画像データを前記端末機器から受信する受信ステップと、該受信した画像データを表示部に表示する表示ステップと、前記表示部に一体的に設けられたタッチパネルにより検出されたタッチ操作がマルチフリック操作であるか否かを判定するマルチフリック操作判定ステップと、該マルチフリック操作判定ステップにてマルチフリック操作と判定した場合、該マルチフリック操作でのタッチ座標の第１のフリック移動量を、予め規定された調整量に従って、シングルフリック操作での第２のフリック移動量に変換するフリック移動量変換ステップと、該フリック移動量変換ステップにて変換した第２のフリック移動量に基づくタッチ操作情報を前記端末機器に送信する送信ステップとを備えたことを特徴としたものである。

本発明によれば、Ｍｉｒａｃａｓｔ接続等により端末機器と同じ画像を表示装置に表示させ、表示装置でのマルチフリック操作を検出した場合に、表示装置のタッチ座標の第１のフリック移動量を、予め規定された調整量に従って、シングルフリック操作での第２のフリック移動量に変換することができるため、表示装置側のマルチフリック操作によって端末機器を違和感なく操作することができる。

本発明に係る表示システムの外観構成例を示す図である。 本発明の第１の実施形態に係る液晶モニタ及び携帯端末の機能的な構成例を示すブロック図である。 液晶モニタに表示されるフリック移動量調整画面の一例を示す図である。 本発明に係る表示装置による表示方法の一例を説明するためのフロー図である。 本発明に係る表示装置による表示方法の他の例を説明するためのフロー図である。 本発明の第２の実施形態に係る液晶モニタ及び携帯端末の機能的な構成例を示すブロック図である。 従来技術を説明するための図である。

以下、添付図面を参照しながら、本発明の表示装置、端末機器、表示システム、及び表示方法に係る好適な実施の形態について説明する。

図１は、本発明に係る表示システムの外観構成例を示す図である。図中、１は表示装置の一例である液晶モニタ、２は端末機器の一例である携帯端末を示す。大画面の液晶モニタ１と小画面の携帯端末２とは、例えば、前述のＭｉｒａｃａｓｔ接続されており、携帯端末２で表示する画像Ｐを液晶モニタ１に送信し、液晶モニタ１では携帯端末２と同じ画像Ｐを表示する。なお、液晶モニタ１と携帯端末２との接続方法は、このＭｉｒａｃａｓｔ接続に限定されるのではなく、同様の機能を有する有線接続あるいは無線接続であってもよい。

そして、液晶モニタ１及び携帯端末２は共にタッチパネルを備え、タッチ操作を可能としている。本例の表示システムでは、液晶モニタ１でのタッチ操作情報が携帯端末２へ送信され、携帯端末２ではこのタッチ操作情報に従って所定の操作を実行する。例えば、画像データが複数頁からなる場合、液晶モニタ１でのフリック操作に応じて、携帯端末２が画像データのページ送り操作を実行し、ページ送り後の画像データを液晶モニタ１へ送信し、液晶モニタ１ではこれを表示するように制御される。

（第１の実施形態）
図２は、本発明の第１の実施形態に係る液晶モニタ及び携帯端末の機能的な構成例を示すブロック図である。液晶モニタ１は、受信部１１、表示パネル制御部１２、表示パネル１３、タッチパネル１４、タッチパネル制御部１５、制御部１６、及び送信部１７を備える。携帯端末２は、例えば、スマートフォンなどであり、受信部２１、表示部２２、タッチパネル２３、制御部２４、及び送信部２５を備える。なお、本発明に係る表示装置としては、上記の液晶モニタ１以外の薄型表示装置であってもよく、例えば、液晶テレビをモニタとして利用するものであってもよい。また、本発明に係る端末機器としては、上記の携帯端末２以外であってもよく、例えば、タッチパネルを搭載したパーソナルコンピュータなどであってもよい。

液晶モニタ１の受信部１１は、携帯端末２から送られてくる画像データを受信、解析、デコードし、デコード後の画像データを表示パネル制御部１２に送る。表示パネル制御部１２は、表示パネル１３の駆動制御を行うためのもので、受信部１１からの画像データを可視できる状態で表示パネル１３に表示させる。表示パネル１３は、本例では液晶パネルで構成される。

タッチパネル１４は、液晶モニタ１の画面上をユーザの指またはスタイラスペンなどでタッチしたときに、そのタッチ位置（以下、タッチ座標ともいう）を入力するためのセンサである。タッチパネル制御部１５は、タッチパネル１４を介して入力されたタッチ座標を検出し、検出したタッチ座標を制御部１６に送る。制御部１６は、液晶モニタ１の動作を制御するためのＣＰＵやメモリなどで構成され、タッチパネル制御部１５からのタッチ座標によりタッチ操作情報を生成する。送信部１７は、制御部１６で生成したタッチ操作情報を送信用の所定のフォーマットに変換して携帯端末２へ送信する。

携帯端末２の送信部２５は、表示部２２に表示される画像データを液晶モニタ１に送信し、また、受信部２１は、液晶モニタ１からタッチ操作情報を受信する。そして、制御部２４は、液晶モニタ１から受信したタッチ操作情報により、表示部２２に表示中の画像データに対して、自身のタッチパネル２３を介して検出されるタッチ操作と同様の動作、処理を実行する。

すなわち、液晶モニタ１のタッチパネル１４上の座標位置と、携帯端末２のタッチパネル２３上の座標位置とは対応付けされており、液晶モニタ１でのタッチ座標位置がタッチ操作情報として携帯端末２へ送信される。携帯端末２では、液晶モニタ１でのタッチ座標位置を自身の対応座標位置に割り当てて認識する。このようにして、液晶モニタ１にてフリック操作やピンチイン／ピンチアウト操作等のタッチ操作がなされた場合、携帯端末２ではこれらのタッチ操作の軌跡を、上記のタッチ操作情報により認識し、この軌跡に応じた操作を実行することができる。

本発明の主たる目的は、Ｍｉｒａｃａｓｔ接続等により端末機器と同じ画像を表示装置に表示させた場合に、表示装置側からのマルチフリック操作によって端末機器を違和感なく操作できるようにすることにある。このための構成として、表示装置の一例である液晶モニタ１は、端末機器の一例である携帯端末２に表示されている画像データと同じ画像データを携帯端末２から受信する受信部１１と、受信した画像データを表示する表示部に相当する表示パネル１３と、表示パネル１３に一体的に設けられたタッチパネル１４と、タッチパネル１４により検出されたタッチ操作がマルチフリック操作であるか否かを判定するマルチフリック操作判定部１６ａと、マルチフリック操作判定部１６ａによりマルチフリック操作と判定した場合、マルチフリック操作でのタッチ座標の第１のフリック移動量を、予め規定された調整量に従って、シングルフリック操作での第２のフリック移動量に変換するフリック移動量変換部１６ｂと、フリック移動量変換部１６ｂにより変換した第２のフリック移動量に基づくタッチ操作情報を携帯端末２に送信する送信部１７とを備える。

ここで、マルチフリック操作とは、ユーザがタッチパネル上で押下した複数本の指を一定方向に移動させた後にタッチパネルから複数本の指を跳ねるようにして離す操作である。また、シングルフリック操作とは、ユーザがタッチパネル上で押下した１本の指を一定方向に移動させた後にタッチパネルから１本の指を跳ねるようにして離す操作である。

また、マルチフリック操作判定部１６ａ及びフリック移動量変換部１６ｂは、制御部１６の一機能として実現される。具体的には、マルチフリック操作判定部１６ａ及びフリック移動量変換部１６ｂとしての機能を実行するためのプログラムが制御部１６内のメモリ（図示せず）に格納されており、実行時に、制御部１６のＣＰＵ（図示せず）が、メモリから当該プログラムを読み出して実行する。

上記において、マルチフリック操作判定部１６ａは、タッチパネル１４に対するタッチ点の軌跡を検出し、マルチフリック操作であるか否かを判定する。マルチフリック操作の場合、同時に複数のタッチ点が検出され、これら複数のタッチ点が連続的に移動するような軌跡となる。従って、マルチフリック操作判定部１６ａは、このようなタッチ点の軌跡を検出した場合に、タッチ操作がマルチフリック操作であると判定することができる。

次に、フリック移動量変換部１６ｂの第１の処理例について説明する。マルチフリック操作でのタッチ座標の第１のフリック移動量をａ１、予め規定された調整量をｂ１、シングルフリック操作での第２のフリック移動量をａ１′とした場合、調整量ｂ１は、以下の式（１）により決定することができる。
ｂ１＝ａ１×ｃ …式（１）
但し、ｃは調整係数とする。そして、第２のフリック移動量ａ１′は、
ａ１′＝ａ１＋ｂ１＝（１＋ｃ）×ａ１ …式（２）
と求めることができる。

フリック移動量変換部１６ｂは、調整量ｂ１を、例えば、液晶モニタ１の画面サイズと携帯端末２の画面サイズとの比率に基づき決定する。具体的には、液晶モニタ１の画面サイズが携帯端末２の画面サイズよりも縦横比にして例えば５０％大きい場合、調整量ｂ１は、第１のフリック移動量ａ１に、調整係数ｃとして“０．５”を乗じることで算出される。そして、この場合、第２のフリック移動量ａ１′は、上記式（２）より、
ａ１′＝（１＋０．５）×ａ１＝１．５×ａ１
と求めることができる。

上記において、第１のフリック移動量ａ１は、マルチフリック操作での指の移動量、つまり、タッチ開始座標からタッチ終了座標までの距離を検出することで求めることができる。なお、マルチフリック操作の場合、同時に複数点のタッチ座標が検出されることになるが、いずれか１つのタッチ点の開始座標と終了座標でもよく、また、複数のタッチ点の開始座標と終了座標それぞれの平均であってもよい。ここで、タッチ開始座標が（ｘ１，ｙ１）で、タッチ終了座標が（ｘ２，ｙ２）であった場合、タッチ開始座標とタッチ終了座標との距離は、ｘ方向に｜ｘ２−ｘ１｜、ｙ方向に｜ｙ２−ｙ１｜となる。従って、第１のフリック移動量ａ１は、（｜ｘ２−ｘ１｜，｜ｙ２−ｙ１｜）と表すことができる。

この場合、第２のフリック移動量ａ１′は、（１．５×｜ｘ２−ｘ１｜，１．５×｜ｙ２−ｙ１｜）と求めることができる。このようにして、マルチフリック操作での第１のフリック移動量ａ１（｜ｘ２−ｘ１｜，｜ｙ２−ｙ１｜）は、シングルフリック操作での第２のフリック移動量ａ１′（１．５×｜ｘ２−ｘ１｜，１．５×｜ｙ２−ｙ１｜）に変換される。

そして、フリック移動量変換部１６ｂは、第２のフリック移動量ａ１′に応じたタッチ操作情報として、マルチフリック操作でのタッチ開始座標（ｘ１，ｙ１）と、第２のフリック移動量ａ１′（１．５×｜ｘ２−ｘ１｜，１．５×｜ｙ２−ｙ１｜）とに基づいて座標情報を算出する。ここでは、座標情報として、（ｘ１＋１．５×（ｘ２−ｘ１），ｙ１＋１．５×（ｙ２−ｙ１））が得られる。このようにして得られたタッチ操作情報（座標情報）は、液晶モニタ１の送信部１７から、携帯端末２へ送信される。このタッチ操作情報（座標情報）により、タッチ開始座標（ｘ１，ｙ１）からタッチ終了座標（ｘ２，ｙ２）までのマルチフリック操作の軌跡が、タッチ開始座標（ｘ１，ｙ１）からタッチ終了座標（ｘ１＋１．５×（ｘ２−ｘ１），ｙ１＋１．５×（ｙ２−ｙ１））までのシングルフリック操作の軌跡として伝えられる。

なお、フリック移動量変換部１６ｂは、上記のタッチ操作情報として算出された座標情報の座標が、携帯端末２の座標範囲を超える場合に、座標範囲内に収まるように第２のフリック移動量ａ１′を調整するようにしてもよい。具体的には、上記のタッチ終了座標（ｘ１＋１．５×（ｘ２−ｘ１），ｙ１＋１．５×（ｙ２−ｙ１））が、携帯端末２の座標範囲内に収まる上限（頭打ち）となるように、第２のフリック移動量ａ１′（１．５×｜ｘ２−ｘ１｜，１．５×｜ｙ２−ｙ１｜）を調整する。

さらに、フリック移動量変換部１６ｂの第２の処理例について説明する。マルチフリック操作でのタッチ座標の第１のフリック移動量をａ２、予め規定された調整量をｂ２、シングルフリック操作での第２のフリック移動量をａ２′とした場合、第２のフリック移動量ａ２′を、以下の式（３）により求めてもよい。
ａ２′＝ｂ２×ａ２ …式（３）

ここで、フリック移動量変換部１６ｂは、調整量ｂ２を、例えば、液晶モニタ１の画面サイズと携帯端末２の画面サイズとの比率に基づき決定する。具体的には、液晶モニタ１の画面サイズが携帯端末２の画面サイズに対して縦横比にして例えば３倍大きい場合、調整量ｂ２を“３”に設定する。そして、この場合、第２のフリック移動量ａ２′は、上記式（３）より、
ａ２′＝３×ａ２
と求めることができる。

上記において、液晶モニタ１のタッチ座標として、例えば、タッチ開始座標が（ｘ１，ｙ１）で、タッチ終了座標が（ｘ２，ｙ２）であった場合、タッチ開始座標とタッチ終了座標との距離は、ｘ方向に｜ｘ２−ｘ１｜、ｙ方向に｜ｙ２−ｙ１｜となる。従って、第１のフリック移動量ａ２は、（｜ｘ２−ｘ１｜，｜ｙ２−ｙ１｜）と表すことができる。

この場合、第２のフリック移動量ａ２′は、（３×｜ｘ２−ｘ１｜，３×｜ｙ２−ｙ１｜）と求めることができる。このようにして、マルチフリック操作での第１のフリック移動量ａ２（｜ｘ２−ｘ１｜，｜ｙ２−ｙ１｜）は、シングルフリック操作での第２のフリック移動量ａ２′（３×｜ｘ２−ｘ１｜，３×｜ｙ２−ｙ１｜）に変換される。

そして、フリック移動量変換部１６ｂは、第２のフリック移動量ａ２′に応じたタッチ操作情報として、マルチフリック操作でのタッチ開始座標（ｘ１，ｙ１）と、第２のフリック移動量ａ２′（３×｜ｘ２−ｘ１｜，３×｜ｙ２−ｙ１｜）とに基づいて座標情報を算出する。ここでは、座標情報として、（ｘ１＋３×（ｘ２−ｘ１），ｙ１＋３×（ｙ２−ｙ１））が得られる。

次に、携帯端末２の構成例について説明する。携帯端末２は、液晶モニタ１に送信した画像データと同じ画像データを表示する表示部２２と、液晶モニタ１から受信したタッチ操作情報に従って、表示部２２に表示されている画像データに対して所定の操作を実行する制御部２４とを備える。ここでいう所定の操作とは、例えば、画像データのページ送り操作や、画像データの拡大縮小操作などである。そして、所定の操作の実行後の画像データは、携帯端末２から液晶モニタ１へ送信され、液晶モニタ１ではこの画像データを表示する。

以上のフリック移動量調整処理により、図１に示すように、液晶モニタ１に対してユーザがフリック移動量Ｌ３（第１のフリック移動量）のマルチフリック操作を行った場合、携帯端末２にはフリック移動量Ｌ４（＞Ｌ３，第２のフリック移動量）のシングルフリック操作の軌跡として入力される。つまり、ユーザは液晶モニタ１に対してフリック移動量の少ないマルチフリック操作を行うことで、フリック移動量の多いシングルフリック操作に変換され、変換後の操作内容が携帯端末２へ伝えられる。換言すれば、マルチフリック操作をトリガとして、液晶モニタ１での少ないフリック移動量であっても、携帯端末２にフリック移動量を増加させて伝えることができるため、ユーザは液晶モニタ１から携帯端末２を違和感なく操作することができる。

なお、携帯端末２の画面サイズについては、液晶モニタ１と携帯端末２との間で通信プロトコルを確立する際に、液晶モニタ１が携帯端末２の画面サイズ情報を自動的に取得するようにしてもよい。あるいは、ユーザが液晶モニタ１に携帯端末２の画面サイズ情報を手動で入力するようにしてもよい。そして、液晶モニタ１では、携帯端末２の画面サイズ情報と、液晶モニタ１が持つ自身の画面サイズ情報とを比較し、両者の画面サイズの比率に基づき第１の処理例の調整量ｂ１あるいは第２の処理例の調整量ｂ２を決定することができる。

また、第１の処理例の調整量ｂ１あるいは第２の処理例の調整量ｂ２は、マルチフリック操作時に同時入力されるタッチ点の数に基づき決定するようにしてもよい。具体的には、第１の処理例の場合、調整係数ｃをタッチ点の数に基づき決定する。例えば、同時入力されたタッチ点が２つ（指が２本）であれば、調整係数ｃを“０．５”とし、同様に、タッチ点が３つ（指が３本）であれば、調整係数ｃを“１．０”とすればよい。タッチ点の数と調整係数ｃとの対応関係は、この例に限定されるものではなく、適宜定めておくことができる。また、第２の処理例の場合、同時入力されたタッチ点が２つであれば、調整量ｂ２を“２”とし、同様に、タッチ点が３つであれば、調整量ｂ２を“３”とすればよい。

また、第１の処理例の調整量ｂ１あるいは第２の処理例の調整量ｂ２は、ユーザが設定した設定値に基づき決定するようにしてもよい。具体的には、図３に示すように、液晶モニタ１に、フリック移動量調整画面を表示させ、ユーザが任意に調整の程度を設定できるようにすればよい。図３の例において、ユーザの操作により、「調整しない」が選択された場合、フリック移動量調整処理は実施されず、「画面サイズ比」が選択された場合、液晶モニタ１の画面サイズと携帯端末２の画面サイズとの比率に基づき調整係数ｃあるいは調整量ｂ２が調整される。また、「タッチ点」が選択された場合、マルチフリック操作時に同時入力されるタッチ点数に基づき調整係数ｃあるいは調整量ｂ２が調整される。また、「ユーザ設定」が選択された場合、ユーザの操作に従って、スライダーバー上の任意の位置につまみＴを移動させることで、調整係数ｃあるいは調整量ｂ２が調整される。なお、図３の例では、「画面サイズ比」が選択されている状態を示す。

図４は、本発明に係る表示装置による表示方法の一例を説明するためのフロー図である。本例では、図２の構成例に基づき説明するものとする。まず、表示装置の一例である液晶モニタ１は、タッチパネル１４に対して何らかのタッチイベント（以下、タッチ操作という）を検出した場合に、フリック移動量調整モードがオンされているか否かを判定する（ステップＳ１）。例えば、前述の図３に示したフリック移動量調整画面で、「調整しない」以外が選択されている場合に、フリック移動量調整モードがオンされていると判定し、「調整しない」が選択されている場合に、フリック移動量調整モードがオフされていると判定する。そして、ステップＳ１において、フリック移動量調整モードがオンされていないと判定した場合（ＮＯの場合）、ステップＳ５へ移行し、タッチ操作情報をそのまま携帯端末２へ送信する（ステップＳ５）。また、ステップＳ１において、フリック移動量調整モードがオンされていると判定した場合（ＹＥＳの場合）、タッチ操作がシングルタッチであるか否かを判定する（ステップＳ２）。

次に、液晶モニタ１は、ステップＳ２において、タッチ操作がシングルタッチであると判定した場合（ＹＥＳの場合）、ステップＳ５に移行して、タッチ操作情報をそのまま携帯端末２へ送信する。また、ステップＳ２において、タッチ操作がシングルタッチではないと判定した場合（ＮＯの場合）、タッチ操作がマルチフリック操作であるか否かを判定する（ステップＳ３）。

次に、液晶モニタ１は、ステップＳ３において、タッチ操作がマルチフリック操作ではないと判定した場合（ＮＯ場合）、調整対象外のタッチ操作とし、ステップＳ５に移行して、タッチ操作情報をそのまま携帯端末２へ送信する。また、ステップＳ３において、タッチ操作がマルチフリック操作であると判定した場合（ＹＥＳの場合）、タッチ操作終了イベント、具体的には、フリック動作の終了を示すリリースイベントが発生したか否かを判定する（ステップＳ４）。

次に、液晶モニタ１は、ステップＳ４において、タッチ操作終了イベントが発生しない、すなわち、フリック動作の終了ではなく、フリック動作の継続中と判定した場合（ＮＯの場合）、フリック動作に伴うタッチ操作情報を内部メモリに保存し（ステップＳ６）、ステップＳ４に戻り処理を繰り返す。また、ステップＳ４において、タッチ操作終了イベントが発生したと判定した場合（ＹＥＳの場合）、タッチ操作の開始位置と終了位置とから第１のフリック移動量を算出する（ステップＳ７）。

次に、液晶モニタ１は、ステップＳ７で算出した第１のフリック移動量を、予め規定された調整量に従って、第２のフリック移動量に変換する（ステップＳ８）。ここでいう調整量とは、例えば、液晶モニタ１の画面サイズと携帯端末２の画面サイズとの比率に基づき決定される。また、マルチフリック操作時に同時入力されるタッチ点の数に基づき決定してもよく、あるいは、ユーザが設定した設定値に基づき決定してもよい。

次に、液晶モニタ１は、ステップＳ８で求めた第２のフリック移動量に応じたタッチ操作情報を携帯端末２に送信する（ステップＳ９）。このタッチ操作情報は、マルチフリック操作でのタッチ開始座標と、第２のフリック移動量とに基づいて算出される座標情報である。そして、携帯端末２では、液晶モニタ１から受信したタッチ操作情報を解析し、操作内容が、タッチ開始座標から第２のフリック移動量だけ移動したタッチ終了座標までのシングルフリック操作であると認識する。そして、携帯端末２は、認識した操作内容に応じて、画像データのページ送り操作や、拡大縮小操作などを実行する。

上記図４のフローでは、マルチフリック操作が終了した時点で、タッチ開始座標とタッチ終了座標とから第１のフリック移動量を求め、これを第２のフリック移動量に変換し、第２のフリック移動量に応じたタッチ操作情報を携帯端末２へ送信していた。これに対して、以下の図５のフローでは、マルチフリック操作の途中で、タッチ操作の前回位置と今回位置とから第１のフリック移動量を求め、これを第２のフリック移動量に変換し、第２のフリック移動量に応じたタッチ操作情報を携帯端末２へ送信する処理を、マルチフリック操作の軌跡上の複数のタッチ点について繰り返し行う。つまり、図４のフローでは、マルチフリック操作の終了後に１回だけ携帯端末にタッチ操作情報を送るのに対して、図５のフローでは、マルチフリック操作の途中で複数回に渡り携帯端末にタッチ操作情報を送る点で異なる。

図５は、本発明に係る表示装置による表示方法の他の例を説明するためのフロー図である。本例では、図４のフローと同様に、図２の構成例に基づき説明するものとする。まず、液晶モニタ１は、タッチパネル１４に対して何らかのタッチイベント（以下、タッチ操作という）を検出した場合に、フリック移動量調整モードがオンされているか否かを判定する（ステップＳ１１）。図４の場合と同様に、前述の図３に示したフリック移動量調整画面で、「調整しない」以外が選択されている場合に、フリック移動量調整モードがオンされていると判定し、「調整しない」が選択されている場合に、フリック移動量調整モードがオフされていると判定する。そして、ステップＳ１１において、フリック移動量調整モードがオンされていないと判定した場合（ＮＯの場合）、ステップＳ１５へ移行し、タッチ操作情報をそのまま携帯端末２へ送信する（ステップＳ１５）。また、ステップＳ１１において、フリック移動量調整モードがオンされていると判定した場合（ＹＥＳの場合）、タッチ操作がシングルタッチであるか否かを判定する（ステップＳ１２）。

次に、液晶モニタ１は、ステップＳ１２において、タッチ操作がシングルタッチであると判定した場合（ＹＥＳの場合）、ステップＳ１５に移行して、タッチ操作情報をそのまま携帯端末２へ送信する。また、ステップＳ１２において、タッチ操作がシングルタッチではないと判定した場合（ＮＯの場合）、タッチ操作がマルチフリック操作であるか否かを判定する（ステップＳ１３）。

次に、液晶モニタ１は、ステップＳ１３において、タッチ操作がマルチフリック操作ではないと判定した場合（ＮＯ場合）、調整対象外のタッチ操作とし、ステップＳ１５に移行して、タッチ操作情報をそのまま携帯端末２へ送信する。また、ステップＳ１３において、タッチ操作がマルチフリック操作であると判定した場合（ＹＥＳの場合）、タッチ操作の前回位置と今回位置とから第１のフリック移動量を算出する（ステップＳ１４）。

次に、液晶モニタ１は、ステップＳ１４で算出した第１のフリック移動量を、予め規定された調整量に従って、第２のフリック移動量に変換する（ステップＳ１６）。ここでいう調整量とは、例えば、液晶モニタ１の画面サイズと携帯端末２の画面サイズとの比率に基づき決定される。また、マルチフリック操作時に同時入力されるタッチ点の数に基づき決定してもよく、あるいは、ユーザが設定した設定値に基づき決定してもよい。

次に、液晶モニタ１は、ステップＳ１６で求めた第２のフリック移動量に応じたタッチ操作情報を携帯端末２に送信し（ステップＳ１７）、タッチ操作終了イベント、具体的には、フリック動作の終了を示すリリースイベントが発生したか否かを判定する（ステップＳ１８）。本例の場合、タッチ操作情報は、マルチフリック操作での前回タッチ座標と、第２のフリック移動量とに基づいて算出される座標情報である。

次に、液晶モニタ１は、ステップＳ１８において、タッチ操作終了イベントが発生しない、すなわち、フリック動作の終了ではなく、フリック動作の継続中と判定した場合（ＮＯの場合）、ステップＳ１４に戻り処理を繰り返す。また、ステップＳ１８において、タッチ操作終了イベントが発生したと判定した場合（ＹＥＳの場合）、そのまま終了する。一方、携帯端末２では、液晶モニタ１から受信した複数のタッチ操作情報をそれぞれ解析し、操作内容が、タッチ開始座標からタッチ終了座標までのシングルフリック操作であると認識し、この操作内容に応じて、画像データのページ送り操作や、拡大縮小操作などを実行する。

このように、本実施形態によれば、マルチフリック操作をトリガとして、液晶モニタ１での少ないフリック移動量であっても、携帯端末２にフリック移動量を増加させて伝えることができるため、ユーザは液晶モニタ１から携帯端末２を違和感なく操作することができる。

（第２の実施形態）
図６は、本発明の第２の実施形態に係る液晶モニタ及び携帯端末の機能的な構成例を示すブロック図で、図中、１′は液晶モニタ、２′は携帯端末を示す。なお、前述の図２に示した第１の実施形態における各部と同じ機能を有する部分には同じ符号を付し、繰り返しの説明は省略するものとする。本実施形態では、フリック移動量変換部を携帯端末側に備えており、携帯端末側でフリック移動量の変換処理が実行される。

すなわち、携帯端末２′は、画像データを表示する表示部２２と、表示部２２に一体的に設けられたタッチパネル２３と、表示部２２に表示されている画像データと同じ画像データを液晶モニタ１′に送信する送信部２５と、液晶モニタ１′から、送信部２５から送信した画像データに対するマルチフリック操作でのタッチ操作情報を受信する受信部２１と、受信したタッチ操作情報からマルチフリック操作でのタッチ座標の第１のフリック移動量を求め、第１のフリック移動量を、予め規定された調整量に従って、シングルフリック操作での第２のフリック移動量に変換するフリック移動量変換部２４ａと、タッチ操作情報と第２のフリック移動量とに基づいて、表示部２２に表示されている画像データに対して所定の操作を実行する制御部２４とを備える。

上記において、液晶モニタ１′が送信するタッチ操作情報によれば、携帯端末２′に対して、タッチ点の座標情報と共に、タッチ操作がマルチフリック操作であることが伝えられる。携帯端末２′のフリック移動量変換部２４ａは、タッチ点の座標情報から第１のフリック移動量を求め、予め規定された調整量に従って、第２のフリック移動量に変換する。ここでいう調整量とは、例えば、液晶モニタ１′の画面サイズと携帯端末２′の画面サイズとの比率に基づき決定される。また、マルチフリック操作時に同時入力されるタッチ点の数に基づき決定してもよく、あるいは、ユーザが設定した設定値に基づき決定してもよい。

上記において、携帯端末２′の画面サイズと液晶モニタ１′の画面サイズとの比率は、それぞれの画面サイズ情報から求めることができる。例えば、液晶モニタ１′と携帯端末２′との間で通信プロトコルを確立する際に、携帯端末２′が液晶モニタ１′の画面サイズ情報を自動的に取得するようにしてもよく、あるいは、ユーザが携帯端末２′に液晶モニタ１′の画面サイズ情報を手動で入力するようにしてもよい。携帯端末２′では、液晶モニタ１′の画面サイズ情報と、携帯端末２′が持つ自身の画面サイズ情報とを比較し、両者の画面サイズの比率に基づき調整量を決定することができる。また、マルチフリック操作時に同時入力されるタッチ点数は、タッチ操作情報から取得するようにすればよい。また、ユーザ設定値は、携帯端末２′に直接設定してもよく、あるいは、液晶モニタ１′から設定し、タッチ操作情報に含めて携帯端末２′に送信するようにしてもよい。

そして、制御部２４は、上記タッチ操作情報から得られる座標情報からタッチ開始座標を特定し、特定したタッチ開始座標と、第２のフリック移動量とに基づき、表示中の画像データに対して所定の操作を実行する。ここでいう所定の操作とは、例えば、画像データのページ送り操作や、画像データの拡大縮小操作などである。そして、所定の操作の実行後の画像データは、携帯端末２′から液晶モニタ１′へ送信され、液晶モニタ１′ではこの画像データを表示する。

このように、本実施形態によれば、前述の第１の実施形態と同様に、マルチフリック操作をトリガとして、液晶モニタ１′での少ないフリック移動量であっても、携帯端末２′にてフリック移動量を増加させることができるため、ユーザは液晶モニタ１′から携帯端末２′を違和感なく操作することができる。

１，１′…表示装置（液晶モニタ）、２，２′…端末機器（携帯端末）、１１，２１…受信部、１２…表示パネル制御部、１３…表示パネル、１４，２３…タッチパネル、１５…タッチパネル制御部、１６，２４…制御部、１６ａ…マルチフリック操作判定部、１６ｂ，２４ａ…フリック移動量変換部、１７，２５…送信部、２２…表示部。

Claims (12)

1. タッチ操作可能な端末機器と接続される表示装置であって、
   前記端末機器に表示されている画像データと同じ画像データを前記端末機器から受信する受信部と、該受信した画像データを表示する表示部と、該表示部に一体的に設けられたタッチパネルと、該タッチパネルにより検出されたタッチ操作がマルチフリック操作であるか否かを判定するマルチフリック操作判定部と、該マルチフリック操作判定部によりマルチフリック操作と判定した場合、該マルチフリック操作でのタッチ座標の第１のフリック移動量を、予め規定された調整量に従って、シングルフリック操作での第２のフリック移動量に変換するフリック移動量変換部と、該フリック移動量変換部により変換した第２のフリック移動量に基づくタッチ操作情報を前記端末機器に送信する送信部とを備えたことを特徴とする表示装置。
2. 請求項１に記載の表示装置において、前記フリック移動量変換部は、前記予め規定された調整量を、前記表示装置の画面サイズと前記端末機器の画面サイズとの比率に基づき決定することを特徴とする表示装置。
3. 請求項１に記載の表示装置において、前記フリック移動量変換部は、前記予め規定された調整量を、前記マルチフリック操作時に同時入力されるタッチ点の数に基づき決定することを特徴とする表示装置。
4. 請求項１に記載の表示装置において、前記フリック移動量変換部は、前記予め規定された調整量を、ユーザが設定した設定値に基づき決定することを特徴とする表示装置。
5. 請求項１〜４のいずれか１項に記載の表示装置において、前記タッチ操作情報は、前記マルチフリック操作でのタッチ座標と、前記第２のフリック移動量とに基づいて算出される座標情報であることを特徴とする表示装置。
6. 請求項５に記載の表示装置において、前記フリック移動量変換部は、前記座標情報の座標が、前記端末機器の座標範囲を超える場合に、該座標範囲内に収まるように前記第２のフリック移動量を調整することを特徴とする表示装置。
7. 請求項１〜６のいずれか１項に記載の表示装置と接続される端末機器であって、
   前記画像データを表示する表示部と、前記表示装置から受信したタッチ操作情報に従って、前記表示部に表示されている画像データに対して所定の操作を実行する制御部とを備えたことを特徴とする端末機器。
8. 請求項７に記載の端末機器において、前記制御部は、前記所定の操作として、前記画像データに対してページ送り操作を実行することを特徴とする端末機器。
9. 請求項７に記載の端末機器において、前記制御部は、前記所定の操作として、前記画像データに対して拡大縮小操作を実行することを特徴とする端末機器。
10. タッチ操作可能な表示装置と接続される端末機器であって、
    画像データを表示する表示部と、該表示部に一体的に設けられたタッチパネルと、前記表示部に表示されている画像データと同じ画像データを前記表示装置に送信する送信部と、前記表示装置から、前記送信した画像データに対するマルチフリック操作でのタッチ操作情報を受信する受信部と、該受信したタッチ操作情報から前記マルチフリック操作でのタッチ座標の第１のフリック移動量を求め、該第１のフリック移動量を、予め規定された調整量に従って、シングルフリック操作での第２のフリック移動量に変換するフリック移動量変換部と、前記タッチ操作情報と前記第２のフリック移動量とに基づいて、前記表示部に表示されている画像データに対して所定の操作を実行する制御部とを備えたことを特徴とする端末機器。
11. タッチ操作可能な端末機器と、タッチ操作可能な表示装置とが接続された表示システムであって、
    前記表示装置は、前記端末機器に表示されている画像データと同じ画像データを前記端末機器から受信する受信部と、該受信した画像データを表示する表示部と、該表示部に一体的に設けられたタッチパネルと、該タッチパネルにより検出されたタッチ操作がマルチフリック操作であるか否かを判定するマルチフリック操作判定部と、該マルチフリック操作判定部によりマルチフリック操作と判定した場合、該マルチフリック操作でのタッチ座標の第１のフリック移動量を、予め規定された調整量に従って、シングルフリック操作での第２のフリック移動量に変換するフリック移動量変換部と、該フリック移動量変換部により変換した第２のフリック移動量に基づくタッチ操作情報を前記端末機器に送信する送信部とを備え、
    前記端末機器は、前記画像データを表示する表示部と、前記表示装置から受信したタッチ操作情報に従って、前記端末機器の前記表示部に表示されている画像データに対して所定の操作を実行する制御部とを備えたことを特徴とする表示システム。
12. タッチ操作可能な端末機器と接続される表示装置による表示方法であって、
    前記表示装置が、前記端末機器に表示されている画像データと同じ画像データを前記端末機器から受信する受信ステップと、該受信した画像データを表示部に表示する表示ステップと、前記表示部に一体的に設けられたタッチパネルにより検出されたタッチ操作がマルチフリック操作であるか否かを判定するマルチフリック操作判定ステップと、該マルチフリック操作判定ステップにてマルチフリック操作と判定した場合、該マルチフリック操作でのタッチ座標の第１のフリック移動量を、予め規定された調整量に従って、シングルフリック操作での第２のフリック移動量に変換するフリック移動量変換ステップと、該フリック移動量変換ステップにて変換した第２のフリック移動量に基づくタッチ操作情報を前記端末機器に送信する送信ステップとを備えたことを特徴とする表示方法。

Images