JP3996427B2 - Application control display system, apparatus and method for computer screen display - Google Patents

Application control display system, apparatus and method for computer screen display Download PDF

Info

Publication number
JP3996427B2
JP3996427B2 JP2002109668A JP2002109668A JP3996427B2 JP 3996427 B2 JP3996427 B2 JP 3996427B2 JP 2002109668 A JP2002109668 A JP 2002109668A JP 2002109668 A JP2002109668 A JP 2002109668A JP 3996427 B2 JP3996427 B2 JP 3996427B2
Authority
JP
Japan
Prior art keywords
computer screen
position information
computer
input
cursor position
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002109668A
Other languages
Japanese (ja)
Other versions
JP2003303092A (en
Inventor
智 若杉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp NEC Display Solutions Ltd
Original Assignee
NEC Display Solutions Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Display Solutions Ltd filed Critical NEC Display Solutions Ltd
Priority to JP2002109668A priority Critical patent/JP3996427B2/en
Publication of JP2003303092A publication Critical patent/JP2003303092A/en
Application granted granted Critical
Publication of JP3996427B2 publication Critical patent/JP3996427B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【０００１】
【発明の属する技術分野】
本発明は、ディスプレイ装置の入力装置だけで、コンピュータ装置から送信されたコンピュータ画面上のアプリケーションを制御するとともに、その際のデータ転送量を軽減するコンピュータ画面表示におけるアプリケーション制御ディスプレイシステム、アプリケーション制御ディスプレイ装置、アプリケーション制御ディスプレイ方法に関する。
【０００２】
【従来の技術】
近年、コンピュータ装置によるコンピュータ画面をディスプレイ装置に表示させ、これを用いたプレゼンテーションなどが広く行われている。
この場合、ディスプレイ装置の制御とコンピュータ装置のアプリケーションソフトの制御を容易に行うためには、ディスプレイ装置のリモコンなどにより、ディスプレイ装置とコンピュータ装置のアプリケーションソフトの両方の制御を可能とすることが望ましい。
【０００３】
しかし、リモコンからの出力信号をディスプレイ装置の制御用と、コンピュータ装置の制御用とに分けた場合は、それぞれのカーソルが表示されるため、使用しずらいという問題があった。
このようなプレゼンテーションなどにおけるディスプレイ画面の表示制御を行うための手段としては、例えば、特開平６−３４８４１２号公報、特開平９−６２４４４号公報、特開平１１−１４３６２９号公報、特開２００１−１２５７３８号公報等に開示されているものを挙げることができる。
【０００４】
これらの方法によれば、指示装置によるポインタの位置情報やコマンドをビデオカメラなどによって入力し、これをコンピュータ装置で解析して、対応する処理を行うことが可能となる。
しかしながら、指示装置によるポインティング情報等をビデオカメラなどで受信して解析する構成であり、専用の機器を必要とするものであった。
このため、より簡易な構成で、ディスプレイ装置に表示されている内容を制御することが望まれるものであった。
【０００５】
また、所謂リモートディスクトップなどのように、通信回線を介してあるコンピュータ装置のディスクトップ画面を、別個のコンピュータ装置に表示させ、この別個のコンピュータ装置において制御する手段を用いることも可能である。
このような手段によれば、離れた場所にあるコンピュータ装置のコンピュータ画面を別のコンピュータ装置に接続されたディスプレイ装置に表示させることが可能であることに加え、もとのコンピュータ画面から制御可能な多くの機能をそのまま使用することができるものであった。
【０００６】
【発明が解決しようとする課題】
しかしながら、上述ような手段を用いた場合、通信回線を介して送受信されるデータ量が大きいため、十分な処理速度を得ることが困難であり、プレゼンテーションなどに最適であるとは言えなかった。
また、プレゼンテーションなどに用いる場合、その必要な機能は、限られているため、その範囲内で十分な機能を発揮できるような簡易な構成により、コンピュータ画面上のアプリケーションを制御可能とすることが望まれていた。
【０００７】
そして、上述のような手段を用いる場合には、コンピュータ画面を受信する側にもコンピュータ装置を用意するか、あるいは、ディスプレイ装置自体にコンピュータ装置の機能を保有させる必要があり、簡易なものではなかった。
【０００８】
本発明は、上記の事情にかんがみなされたものであり、ディスプレイ装置の入力装置だけで、コンピュータ装置から送信されたコンピュータ画面上のアプリケーションを制御するとともに、その際のデータ転送量を軽減することのできるコンピュータ画面表示におけるアプリケーション制御ディスプレイシステム、装置及びその方法の提供を目的とする。
【０００９】
【課題を解決するための手段】
上記目的を達成するため、本発明の請求項１記載のアプリケーション制御ディスプレイシステムは、入力装置からディスプレイ装置に入力される一定の実行コマンドに対し、当該ディスプレイ装置とコンピュータ装置間でデータの送受信を行うことなく、当該ディスプレイ装置に表示されたコンピュータ画面上で、カーソル及びアプリケーションを制御するアプリケーション制御ディスプレイシステムであって、入力装置から入力した第一の実行コマンドにもとづいて、カーソル位置情報を信号処理部に出力することにより、カーソル位置情報にもとづきコンピュータ画面を信号処理部により表示部に再表示させて、カーソルをコンピュータ画面上に表示し、当該カーソルを移動させる場合、入力装置から入力された第二の実行コマンドにもとづいて、移動後のカーソル位置情報を信号処理部に出力することにより、移動後のカーソル位置情報にもとづきコンピュータ画面を信号処理部により表示部に再表示させるとともに、入力装置から入力した第三の実行コマンド及びカーソル位置情報を送受信部に出力する制御部と、制御部から入力した第三の実行コマンド及びカーソル位置情報をコンピュータ装置に送信し、かつ、コンピュータ装置から送信されてきたコンピュータ画面の映像信号、又はコンピュータ装置から送信されてきた、第三の実行コマンド及びカーソル位置情報にもとづいて再描画されたコンピュータ画面の映像信号を受信して、当該映像信号を信号処理部に出力する送受信部と、送受信部から入力した映像信号又は制御部から入力したカーソル位置情報にもとづいて、コンピュータ画面を表示部に表示する信号処理部を備えたディスプレイ装置と、コンピュータ画面の映像信号をディスプレイ装置に送信するとともに、ディスプレイ装置から受信した第三の実行コマンド及びカーソル位置情報にもとづいてコンピュータ画面を再描画し、再描画したコンピュータ画面の映像信号をディスプレイ装置に送信するコンピュータ装置と、ディスプレイ装置に第一の実行コマンド、第二の実行コマンド、及び第三の実行コマンドを入力する入力装置を有する構成としてある。
【００１０】
アプリケーション制御ディスプレイシステムをこのような構成にすれば、ディスプレイ装置の入力装置だけで、コンピュータ装置から送信されたコンピュータ画面上のアプリケーションを制御することができる。
すなわち、入力装置から入力された実行コマンドがコンピュータ装置に送信され、これにもとづいて、再描画されたコンピュータ画面が、ディスプレイ装置に表示されることによって、ディスプレイ装置に制御後のアプリケーションを表示することができる。
【００１１】
例えば、リモコン装置からディスプレイ装置に表示されているコンピュータ画面上の、アプリケーションの終了ボタン上でカーソルの決定ボタンを押下したとする。
このとき、決定ボタンを押下したことを示す実行コマンドが、コンピュータ装置に送信されて処理され、再描画されたコンピュータ画面をディスプレイ装置に表示することが可能となる。
【００１２】
また、この際、コンピュータ装置用とディスプレイ装置用の二つのカーソルを表示させることなく、一つのみ表示させて制御することができるため、操作性を向上させることが可能となる。
さらに、コンピュータ装置によるコンピュータ画面の再描画は、所定の実行コマンドのみに対して行われ、単なるカーソルの移動などについては、ディスプレイ装置上のみで行われるため、コンピュータ装置とディスプレイ装置間のデータ送受信量を大きく軽減することができる。
このため、これらの装置の処理負荷が軽減されるとともに、高い処理速度を得ることができるため、プレゼンテーションに適したものとすることが可能となる。
【００１３】
なお、入力装置から入力される実行コマンドとしては、カーソルの表示・非表示コマンド、カーソルの上下左右の方向移動コマンド、決定コマンド、取消コマンド、移動コマンド等を挙げることができる。
また、コンピュータ画面とは、コンピュータによりディスプレイ装置に表示される画面全体の情報を意味する。
描画とは、コンピュータ画面を表示するための映像信号を作成する処理を意味する。
再表示とは、変更された情報を付加して、ディスプレイ装置に表示中の表示内容の更新を行うことを意味する。
【００１４】
本発明の請求項２記載のアプリケーション制御ディスプレイシステムは、入力装置からディスプレイ装置に入力される一定の実行コマンドに対し、当該ディスプレイ装置とコンピュータ装置間でデータの送受信を行うことなく、当該ディスプレイ装置に表示されたコンピュータ画面上で、カーソル及びアプリケーションを制御するアプリケーション制御ディスプレイシステムであって、入力装置から入力した第一の実行コマンドにもとづいて、カーソル位置情報を信号処理部に出力することにより、カーソル位置情報にもとづきコンピュータ画面を信号処理部により表示部に再表示させて、カーソルをコンピュータ画面上に表示し、当該カーソルを移動させる場合、入力装置から入力された第二の実行コマンドにもとづいて、移動後のカーソル位置情報を信号処理部に出力することにより、移動後のカーソル位置情報にもとづきコンピュータ画面を信号処理部により表示部に再表示させるとともに、入力装置から入力した第三の実行コマンド及びカーソル位置情報を送受信部に出力し、かつ、送受信部から入力した画像データを映像信号に変換して信号処理部に出力する制御部と、制御部から入力した第三の実行コマンド及びカーソル位置情報をコンピュータ装置に送信し、かつ、コンピュータ装置から送信されてきたコンピュータ画面の画像データ、又はコンピュータ装置から送信されてきた、第三の実行コマンド及びカーソル位置情報にもとづいて再描画されたコンピュータ画面の画像データを受信して、当該画像データを制御部に出力する送受信部と、制御部から入力した映像信号又は制御部から入力したカーソル位置情報にもとづいて、コンピュータ画面を表示部に表示する信号処理部を備えたディスプレイ装置と、コンピュータ画面の映像信号を画像データに変換し、この画像データをディスプレイ装置に送信するとともに、ディスプレイ装置から受信した第三の実行コマンド及びカーソル位置情報にもとづいてコンピュータ画面を再描画し、再描画したコンピュータ画面の映像信号を画像データに変換し、この画像データをディスプレイ装置に送信するコンピュータ装置と、ディスプレイ装置に第一の実行コマンド、第二の実行コマンド、及び第三の実行コマンドを入力する入力装置を有する構成としてある。
【００１５】
アプリケーション制御ディスプレイシステムをこのような構成にすれば、コンピュータ装置からのコンピュータ画面を映像信号のままではなく、画像データに変換して、ディスプレイ装置に送信することができる。
このため、コンピュータ画面データの送信の無線化が可能となるとともに、ディスプレイ装置におけるコンピュータ画面の処理に関し、高い拡張性を保有させることが可能となる。
【００１６】
本発明の請求項３記載のアプリケーション制御ディスプレイシステムは、コンピュータ装置が、ディスプレイ装置から送信されてきた第四の実行コマンド及びカーソル位置情報にもとづいて、当該カーソル位置情報に対応するフレーム情報を記憶部から取得し、このフレーム情報をディスプレイ装置に送信し、送受信部が、フレーム情報をコンピュータ装置から受信して制御部に出力し、制御部が、フレーム情報を信号処理部に出力し、フレーム情報にもとづきコンピュータ画面を表示部に再表示させ、フレーム情報にもとづき表示されたフレームを移動させる場合、入力装置から入力された第五の実行コマンドにもとづいて、移動後のカーソル位置情報及び移動後のフレーム情報を信号処理部に出力し、移動後のカーソル位置情報及び移動後のフレーム情報にもとづきコンピュータ画面を表示部に再表示させるとともに、入力装置から入力された第六の実行コマンド、カーソル位置情報及びフレーム情報を送受信部に出力し、送受信部が、第六の実行コマンド、カーソル位置情報及びフレーム情報をコンピュータ装置に送信して、コンピュータ装置が、送信されてきた第六の実行コマンド、カーソル位置情報及びフレーム情報にもとづきコンピュータ画面を再描画して、このコンピュータ画面をディスプレイ装置に送信し、送受信部が、再描画されたコンピュータ画面をコンピュータ装置から受信し、受信したコンピュータ画面が画像データである場合には、このコンピュータ画面を、制御部を介し、映像信号に変換して信号処理部に出力し、映像信号である場合には、直接信号処理部に出力し、信号処理部が、コンピュータ画面を表示部に表示する構成としてある。
【００１７】
アプリケーション制御ディスプレイシステムをこのような構成にすれば、コンピュータ装置からディスプレイ装置にアプリケーションのフレーム情報を送信し、ディスプレイ装置において、仮想フレームを表示することができる。
すなわち、コンピュータ装置からディスプレイ装置に送信されるデータとしては、コンピュータ画面のデータのみならず、フレーム情報である場合もある。
そして、ディスプレイ装置上で、このフレーム情報にもとづきアプリケーションの移動を行うことが可能となる。
【００１８】
ディスプレイ装置上でアプリケーションウィンドウの移動を行う際に、コンピュータ装置側は、何も処理を行う必要はない。
そして、アプリケーションの移動が終了し、入力装置から決定コマンドが入力されると、これがディスプレイ装置からコンピュータ装置に送信されて、再描画が行われ、描画後のコンピュータ画像が、ディスプレイ装置に送信されて表示される。
【００１９】
このように、本発明では、コンピュータ装置（サーバ側）は、移動の開始時に移動用の制御情報（フレーム情報）のディスプレイ装置への送信を行い、移動中には何もする必要はなく、終了時に再描画を実行してディスプレイ装置への送信を行うだけでよい。
【００２０】
また、ディスプレイ装置（クライアント側）は、移動開始時にコンピュータ装置から移動用の制御情報を受信し、移動中に自身の簡易フレーム表示機能を用いて仮想フレームの移動処理を行い、移動終了時に移動終了制御情報をコンピュータ装置へ送信し、コンピュータ装置からコンピュータ画面の受信を行うこととなる。
【００２１】
したがって、従来の技術に比較すると、サーバ、クライアントの処理が共に軽減されることとなる。
なお、本発明においては、ディスプレイ装置のみで操作可能なアプリケーションのフレームを、仮想フレームと称している。
【００２２】
本発明の請求項４記載のアプリケーション制御ディスプレイシステムは、ディスプレイ装置が、プロジェクタ装置であり、入力装置が、リモコン装置、ポインティング装置又はディスプレイ装置本体のコントロールキーである構成としてある。
【００２３】
アプリケーション制御ディスプレイシステムをこのような構成にすれば、プレゼンテーションなどにおいて、コンピュータ装置のコンピュータ画面をプロジェクタ表示させるとともに、リモコンなどによって、プロジェクタに入力情報を送信するだけで、コンピュータ画面上のアプリケーションの制御などを行うことが可能となる。
【００２４】
本発明の請求項５記載のアプリケーション制御ディスプレイ装置は、入力装置から入力される一定の実行コマンドに対し、コンピュータ装置とデータの送受信を行うことなく、コンピュータ画面上でカーソル及びアプリケーションを制御するアプリケーション制御ディスプレイ装置であって、入力装置から入力した第一の実行コマンドにもとづいて、カーソル位置情報を信号処理部に出力することにより、カーソル位置情報にもとづきコンピュータ画面を信号処理部により表示部に再表示させて、カーソルをコンピュータ画面上に表示し、当該カーソルを移動させる場合、入力装置から入力された第二の実行コマンドにもとづいて、移動後のカーソル位置情報を信号処理部に出力することにより、移動後のカーソル位置情報にもとづきコンピュータ画面を信号処理部により表示部に再表示させるとともに、入力装置から入力した第三の実行コマンド及びカーソル位置情報を送受信部に出力する制御部と、制御部から入力した第三の実行コマンド及びカーソル位置情報をコンピュータ装置に送信し、かつ、コンピュータ装置から送信されてきたコンピュータ画面の映像信号、又はコンピュータ装置から送信されてきた、第三の実行コマンド及びカーソル位置情報にもとづいて再描画されたコンピュータ画面の映像信号を受信して、当該映像信号を信号処理部に出力する送受信部と、送受信部から入力した映像信号又は制御部から入力したカーソル位置情報にもとづいて、コンピュータ画面を表示部に表示する信号処理部を有する構成としてある。
【００２５】
アプリケーション制御ディスプレイ装置をこのような構成にすれば、入力装置から入力された実行コマンドを、コンピュータ装置に送信することにより、再描画されたコンピュータ画面を、ディスプレイ装置に表示することができる。
また、このとき、カーソル移動は、ディスプレイ装置のみが行い、コンピュータ装置は、カーソル移動後の決定コマンドの送信に応じて、上記処理を実行することができる。
したがって、コンピュータ装置とディスプレイ装置間のデータ送受信量を軽減することができるとともに、高い処理速度を得ることが可能となる。また、簡易な構成で実現でき、コストを削減することも可能となる。
【００２６】
本発明の請求項６記載のアプリケーション制御ディスプレイ装置は、入力装置から入力される一定の実行コマンドに対し、コンピュータ装置とデータの送受信を行うことなく、コンピュータ画面上でカーソル及びアプリケーションを制御するアプリケーション制御ディスプレイ装置であって、入力装置から入力した第一の実行コマンドにもとづいて、カーソル位置情報を信号処理部に出力することにより、カーソル位置情報にもとづきコンピュータ画面を信号処理部により表示部に再表示させて、カーソルをコンピュータ画面上に表示し、当該カーソルを移動させる場合、入力装置から入力された第二の実行コマンドにもとづいて、移動後のカーソル位置情報を信号処理部に出力することにより、移動後のカーソル位置情報にもとづきコンピュータ画面を信号処理部により表示部に再表示させるとともに、入力装置から入力した第三の実行コマンド及びカーソル位置情報を送受信部に出力し、かつ、送受信部から入力した画像データを映像信号に変換して信号処理部に出力する制御部と、制御部から入力した第三の実行コマンド及びカーソル位置情報をコンピュータ装置に送信し、かつ、コンピュータ装置から送信されてきたコンピュータ画面の画像データ、又はコンピュータ装置から送信されてきた、第三の実行コマンド及びカーソル位置情報にもとづいて再描画されたコンピュータ画面の画像データを受信して、当該画像データを制御部に出力する送受信部と、制御部から入力した映像信号又は制御部から入力したカーソル位置情報にもとづいて、コンピュータ画面を表示部に表示する信号処理部を有する構成としてある。
【００２７】
アプリケーション制御ディスプレイシステムをこのような構成にすれば、コンピュータ装置からのコンピュータ画面を映像信号のままではなく、画像データに変換して、ディスプレイ装置に送信することができ、アプリケーション制御ディスプレイシステムに高い拡張性を保有させることが可能となる。
【００２８】
本発明の請求項７記載のアプリケーション制御ディスプレイ装置は、送受信部が、コンピュータ装置により第四の実行コマンド及びカーソル位置情報にもとづきコンピュータ装置における記憶部から取得された当該カーソル位置情報に対応するフレーム情報を受信して、このフレーム情報を制御部に出力し、制御部が、フレーム情報を信号処理部に出力し、フレーム情報にもとづきコンピュータ画面を表示部に再表示させ、フレーム情報にもとづき表示されたフレームを移動させる場合、入力装置から入力された第五の実行コマンドにもとづいて、移動後のカーソル位置情報及び移動後のフレーム情報を信号処理部に出力し、移動後のカーソル位置情報及び移動後のフレーム情報にもとづきコンピュータ画面を表示部に再表示させるとともに、入力装置から入力された第六の実行コマンド、カーソル位置情報及びフレーム情報を送受信部に出力し、送受信部が、第六の実行コマンド、カーソル位置情報及びフレーム情報をコンピュータ装置に送信して、コンピュータ装置により第六の実行コマンド、カーソル位置情報及びフレーム情報にもとづき再描画されたコンピュータ画面をコンピュータ装置から受信し、受信したコンピュータ画面が画像データである場合には、このコンピュータ画面を、制御部を介し、映像信号に変換して信号処理部に出力し、映像信号である場合には、直接信号処理部に出力し、信号処理部が、コンピュータ画面を表示部に表示する構成としてある。
【００２９】
アプリケーション制御ディスプレイ装置をこのような構成にすれば、コンピュータ装置に実行コマンドを送信するとともに、コンピュータ装置からアプリケーションのフレーム情報を受信することによって、仮想フレームを表示することができる。
そして、この仮想フレームをディスプレイ装置のみによって、操作することができる。
【００３０】
すなわち、ディスプレイ装置が従来から有する簡易フレーム表示機能を用いて、ディスプレイ装置において、アプリケーションの移動を行うことができる。
また、移動が終了した後に、決定コマンドを入力装置から入力し、これをコンピュータ装置に送信して、コンピュータ画面の再描画を行い、これをディスプレイ装置上に表示することが可能となる。
【００３１】
本発明の請求項８記載のアプリケーション制御ディスプレイ方法は、入力装置からディスプレイ装置に入力される一定の実行コマンドに対し、当該ディスプレイ装置とコンピュータ装置間でデータの送受信を行うことなく、当該ディスプレイ装置に表示されたコンピュータ画面上で、カーソル及びアプリケーションを制御するアプリケーション制御ディスプレイ方法であって、コンピュータ装置が、コンピュータ画面の映像信号をディスプレイ装置に送信し、ディスプレイ装置が、送信されてきた映像信号によるコンピュータ画面を表示するとともに、ディスプレイ装置が、入力装置から入力された第一の実行コマンドにもとづき、カーソルをコンピュータ画面上に表示し、ディスプレイ装置が、当該カーソルを移動させる場合、入力装置から入力された第二の実行コマンドと、カーソル位置情報にもとづいてコンピュータ画面情報を再表示し、ディスプレイ装置が、入力装置から入力された第三の実行コマンド、及びカーソル位置情報をコンピュータ装置に送信し、コンピュータ装置が、第三の実行コマンド及びカーソル位置情報にもとづきコンピュータ画面を再描画するとともに、再描画したコンピュータ画面の映像信号をディスプレイ装置に送信し、ディスプレイ装置が、再描画したコンピュータ画面を表示する方法としてある。
【００３２】
アプリケーション制御ディスプレイ方法をこのような方法にすれば、ディスプレイ装置の入力装置だけで、コンピュータ装置から送信されたコンピュータ画面上のアプリケーションを制御することができる。
【００３３】
本発明の請求項９記載のアプリケーション制御ディスプレイ方法は、入力装置からディスプレイ装置に入力される一定の実行コマンドに対し、当該ディスプレイ装置とコンピュータ装置間でデータの送受信を行うことなく、当該ディスプレイ装置に表示されたコンピュータ画面上で、カーソル及びアプリケーションを制御するアプリケーション制御ディスプレイ方法であって、コンピュータ装置が、コンピュータ画面の映像信号を画像データに変換してディスプレイ装置に送信し、ディスプレイ装置が、送信されてきた画像データによるコンピュータ画面を表示するとともに、ディスプレイ装置が、入力装置から入力された第一の実行コマンドにもとづき、カーソルをコンピュータ画面上に表示し、ディスプレイ装置が、当該カーソルを移動させる場合、入力装置から入力された第二の実行コマンドと、カーソル位置情報にもとづいてコンピュータ画面情報を再表示し、ディスプレイ装置が、入力装置から入力された第三の実行コマンド、及びカーソル位置情報をコンピュータ装置に送信し、コンピュータ装置が、第三の実行コマンド及びカーソル位置情報にもとづきコンピュータ画面を再描画するとともに、再描画したコンピュータ画面の映像信号を画像データに変換してディスプレイ装置に送信し、ディスプレイ装置が、再描画したコンピュータ画面を表示する方法としてある。
【００３４】
アプリケーション制御ディスプレイ方法をこのような方法にすれば、コンピュータ装置からのコンピュータ画面を映像信号のままではなく、画像データに変換して、ディスプレイ装置に送信することができる。
【００３５】
本発明の請求項１０記載のアプリケーション制御ディスプレイ方法は、コンピュータ装置が、ディスプレイ装置から送信されてきた第四の実行コマンド及びカーソル位置情報にもとづいて、当該カーソル位置情報に対応するフレーム情報を記憶部から取得し、このフレーム情報をディスプレイ装置に送信し、ディスプレイ装置が、送信されてきたフレーム情報にもとづきコンピュータ画面を再表示し、ディスプレイ装置が、フレーム情報にもとづき表示されたフレームを移動させる場合、入力装置から入力された第五の実行コマンドと、カーソル位置情報及びフレーム情報にもとづいてコンピュータ画面情報を再表示するとともに、ディスプレイ装置が、入力装置から入力された第六の実行コマンド、カーソル位置情報及びフレーム情報をコンピュータ装置に送信し、コンピュータ装置が、送信されてきた第六のコマンド、カーソル位置情報及びフレーム情報にもとづきコンピュータ画面を再描画して、このコンピュータ画面をディスプレイ装置に送信し、ディスプレイ装置が、送信されてきたコンピュータ画面を表示する方法としてある。
【００３６】
アプリケーション制御ディスプレイ方法をこのような方法にすれば、コンピュータ装置からディスプレイ装置にアプリケーションのフレーム情報を送信し、ディスプレイ装置において、仮想フレームを表示することができる。
すなわち、ディスプレイ装置上で、この仮想フレームを操作することによって、アプリケーションの移動等を行うことが可能となる。
そして、移動の終了の後、決定コマンドを押すことによって、コンピュータ装置にその情報が送信され、コンピュータ装置において再描画が実行されるとともに、これをディスプレイ装置上に表示させることが可能となる。
【００３７】
【発明の実施の形態】
以下、本発明の実施形態につき、図面を参照して説明する。
［第一実施形態］
まず、本発明の第一実施形態について、図１〜図６を参照して説明する。図１は、本発明の第一実施形態のアプリケーション制御ディスプレイシステムの構成の概略を示すブロック図であり、図２は、本発明の第一実施形態のアプリケーション制御ディスプレイシステムの構成を示すブロック図である。
【００３８】
また、図３は、本発明の第一実施形態のアプリケーション制御ディスプレイシステムにおいて表示されたコンピュータ画面の例を示す図であり、図４は、同システムにおいて設定されるカーソル位置情報の概念図である。
さらに、図５は、同システムにおいてカーソルが描画されたコンピュータ画面の例を示す図であり、図６は、同じくコマンドが実行されたコンピュータ画面の例を示す図である。
【００３９】
図１に示すように、コンピュータ画面表示におけるアプリケーション制御ディスプレイシステムは、ディスプレイ装置１０、コンピュータ装置２０及び入力装置３０を有している。
ディスプレイ装置１０は、コンピュータ装置２０から送信されるコンピュータ画面情報を表示するものであり、モニター装置や、液晶モニター装置、プロジェクタ装置等とすることができる。
【００４０】
このディスプレイ装置１０は、送受信部１１、制御部１２、記憶部１３、信号処理部１４及び表示部１５を有している。
送受信部１１は、コンピュータ装置２０との各種データ送受信を行う。
制御部１２は、入力装置３０から所定の実行コマンドが入力されると、記憶部１３からカーソル位置情報等を取得し、これらを信号処理部１４へ出力する。
また、制御部１２は、実行コマンドの種類によっては、記憶部１３からカーソル位置情報等を取得して、実行コマンドとともに送受信部１１に出力する。
【００４１】
記憶部１３は、カーソル位置情報やフレーム情報等を記憶する記憶装置である。この記憶部１３は、制御部１２からカーソル位置情報の取得を受けるとともに、カーソル位置情報等の変更があった場合には、その変更内容の更新を受ける。
信号処理部１４は、コンピュータ装置２０からの入力情報にもとづいて、表示部１５にコンピュータ画面を表示させたり、制御部１２からの入力情報にもとづいて、その画面上にカーソルを表示する。
表示部１５は、信号処理部１４からの入力信号を表示するものであり、ＣＲＴ画面や、液晶画面、光学装置等を用いることができる。
【００４２】
コンピュータ装置２０は、ディスプレイ装置１０に有線又は無線で接続され、ディスプレイ装置１０にそのコンピュータ画面を送信して表示させることのできる情報処理装置である。
このコンピュータ装置２０は、送受信部２１、制御情報処理部２２及び記憶部２３を有している。
【００４３】
送受信部２１は、ディスプレイ装置１０との各種データ送受信を行う。
制御情報処理部２２は、ディスプレイ装置１０から送受信部２１を介して入力されたデータに対し、そのデータの種類に応じた処理を実行する。また、このとき、記憶部２３から必要な情報の取得して、コンピュータ画面の再描画を行うこともできる。そして、これらを送受信部２１へ出力する。
【００４４】
入力装置３０は、ディスプレイ装置１０に、有線又は無線によって情報を入力することのできるものであり、リモコン装置３０ａや、マウス３０ｂ、その他ポインティング装置、ディスプレイ本体のコントロールキー等を挙げることができる。
【００４５】
次に、図２を用いて、本発明の構成についてより詳細に説明する。
同図において、本発明のコンピュータ画面表示におけるアプリケーション制御ディスプレイシステムのディスプレイ装置１０をプロジェクタ装置１０ａと、入力装置３０をリモコン装置３０ａとしてある。
【００４６】
プロジェクタ装置１０ａは、ディスプレイ装置１０と同様の構成として、送受信部１１ａ、制御部１２ａ、記憶部１３ａ、信号処理部１４ａ及び表示部１５ａを有している。
送受信部１１ａは、映像信号受信部１１ａ−１及び制御情報送信部１１ａ−２を有している。
【００４７】
映像信号受信部１１ａ−１は、コンピュータ装置２０から映像信号を受信し、これを信号処理部１４ａに出力する。
制御情報送信部１１ａ−２は、制御部１２ａから出力された実行コマンド、カーソル位置情報等をコンピュータ装置２０に送信する。
【００４８】
制御部１２ａは、入力情報制御部１２ａ−１、カーソル描画制御部１２ａ−２及び制御情報出力部１２ａ−３を有している。
入力情報制御部１２ａ−１は、リモコン装置３０ａから出力された実行コマンドを入力し、その種類に応じて、カーソル描画制御部１２ａ−２又は制御情報出力部１２ａ−３へ出力する。
【００４９】
例えば、実行コマンドが、カーソルの表示／非表示コマンドや移動コマンドである場合には、これをカーソル描画制御部１２ａ−２へ出力し、実行コマンドが決定コマンドである場合には、これを制御情報出力部１２ａ−３へ出力することができる。
【００５０】
カーソル描画制御部１２ａ−２は、入力した実行コマンドに応じて、必要な情報を記憶部１３ａから取得し、この取得データを信号処理部１４ａへ出力する。
例えば、実行コマンドが、カーソルの表示／非表示コマンドの場合には、カーソル位置情報を記憶部１３ａから取得して、これを信号処理部１４ａへ出力する。
【００５１】
制御情報出力部１２ａ−３は、入力情報制御部１２ａ−１から入力した実行コマンドに応じて、必要な情報を記憶部１３ａから取得し、この取得データと実行コマンドを制御情報送信部１１ａ−２へ出力する。
例えば、実行コマンドが、決定コマンドである場合には、カーソル位置情報を記憶部１３ａから取得して、これらを制御情報送信部１１ａ−２へ出力する。
記憶部１３ａ、信号処理部１４ａ、及び表示部１５ａは、上述のディスプレイ装置１０におけるものと同様の機能を有している。
【００５２】
コンピュータ装置２０における送受信部２１は、映像信号送信部２１−１及び制御情報受信部２１−２を有している。
映像信号送信部２１−１は、制御情報処理部２２から入力した映像信号をプロジェクタ装置１０ａへ送信する。
【００５３】
すなわち、制御情報処理部２２において作成されたコンピュータ装置２０におけるコンピュータ画面の映像信号をプロジェクタ装置１０ａへ送信する。
このコンピュータ画面は、プロジェクタ装置１０ａから送信されてくる制御情報にもとづき、制御情報処理部２２によって随時更新され、映像信号送信部２１−１へ入力されて、コンピュータ装置２０へ送信される。
【００５４】
リモコン装置３０ａは、電磁波や音波等によって、プロジェクタ装置１０ａに無線信号を入力することのできる入力装置であり、上方向移動ボタン３１ａ、左方向移動ボタン３２ａ、右方向移動ボタン３３ａ、下方向移動ボタン３４ａ、表示／非表示ボタン３５ａ及び決定ボタン３６ａを有している。
【００５５】
上方向移動ボタン３１ａ、左方向移動ボタン３２ａ、右方向移動ボタン３３ａ、下方向移動ボタン３４ａは、カーソル等を移動する実行コマンドをコンピュータ装置２０に送信するためのものである。
表示／非表示ボタン３５ａは、カーソルの表示／非表示を切り替える実行コマンドをコンピュータ装置２０に送信するためのものである。
また、決定ボタン３６ａは、カーソルが存在するカーソル位置において、対応する処理をコンピュータ装置２０に実行させるための実行コマンドをコンピュータ装置２０に送信するためのものである。
【００５６】
例えば、コンピュータ画面上のアプリケーションの終了アイコン上にカーソルが存在する場合に、この決定ボタン３６ａが押下されると、この実行コマンド等がコンピュータ装置２０に送信され、制御情報処理部２２によって、アプリケーションが終了された後のコンピュータ画面が描画される。
そして、映像信号送信部２１−１を介して、プロジェクタ装置１０ａに送信され、この再描画されたコンピュータ画面が表示される。
【００５７】
なお、リモコン装置３０ａからディスプレイ装置１０に送信する実行コマンドは、上記のものに限られず、アプリケーションの制御に必要なコマンドを適宜設定することができる。
例えば、複数ページを有するアプリケーションの操作を行う場合には、上記方向移動ボタンの左右ボタンなどをページ移動ボタンとして設定することも可能である。
【００５８】
次に、図２を用いて、コンピュータ画面表示におけるアプリケーション制御ディスプレイシステムの処理手順について説明する。
まず、コンピュータ装置２０の制御情報処理部２２が、コンピュータ画面の映像信号を、映像信号送信部２１−１を介して、プロジェクタ装置１０ａへ送信する。
【００５９】
プロジェクタ装置１０ａの映像信号受信部１１ａ−１は、送信されてきた映像信号を信号処理部１４ａに出力し、信号処理部１４ａは、この映像信号にもとづいて表示部１５ａにコンピュータ画面を表示する。図３は、このようにして表示されたコンピュータ画面の例を示している。
【００６０】
同図において、コンピュータ画面上には、二つのアプリケーションＡ４１及びアプリケーションＢ４２が表示されており、それぞれのタイトルバーの右端には、終了ボタン４３が設けられている。
次に、リモコン装置３０ａが、カーソルの表示／非表示コマンドをプロジェクタ装置１０ａに送信すると、プロジェクタ装置１０ａの入力情報制御部１２ａ−１が、これを受信して、カーソル描画制御部１２ａ−２へ出力する。
【００６１】
カーソル描画制御部１２ａ−２は、記憶部１３ａからカーソル位置情報を取得し、このカーソル位置情報を信号処理部１４ａに出力して設定を行う。図４は、このようにして設定されるカーソル位置情報の概念図である。
同図は、例として、カーソル４４の位置情報が、座標（４００，１００）であることを示しており、信号処理部１４ａに対して、コンピュータ画面上の座標（４００，１００）にカーソル４４を表示させるように設定が行われる。
【００６２】
信号処理部１４ａは、設定されたカーソル位置情報にもとづいて、コンピュータ画面の映像信号上の対応する画面位置に、カーソルを描画して、これを表示部１５ａに出力し、表示させる。図５は、このようにしてカーソル４４が表示されたコンピュータ画面の例を示している。
【００６３】
次に、リモコン装置３０ａから、プロジェクタ装置１０ａに決定コマンドが送信されると、これをプロジェクタ装置１０ａの入力情報制御部１２ａ−１が受信し、制御情報出力部１２ａ−３へ出力する。
制御情報出力部１２ａ−３は、記憶部１３ａからカーソル位置情報を取得して、この決定コマンド及びカーソル位置情報を、制御情報送信部１１ａ−２を介してコンピュータ装置２０に送信する。
【００６４】
コンピュータ装置２０の制御情報受信部２１−２は、プロジェクタ装置１０ａから決定コマンド及びカーソル位置情報を受信すると、これを制御情報処理部２２に出力する。
制御情報処理部２２は、入力された決定コマンド及びカーソル位置情報と、記憶部２３に記憶されている、コンピュータ画面に表示中のアプリケーションの位置情報等にもとづいて、上記カーソル位置におけるコンピュータ画面内容を分析し、その位置に実行コマンドを適用した場合の処理を演算する。
【００６５】
図５においては、カーソルは、アプリケーションＡ４１の終了アイコン上に位置しているため、制御情報処理部２２は、アプリケーションＡ４１をコンピュータ画面上から消去した画面の再描画を行い、これを映像信号送信部２１−１に出力する。
【００６６】
映像信号送信部２１−１は、アプリケーションＡ４１を消去したコンピュータ画面の映像信号をプロジェクタ装置１０ａに送信し、このコンピュータ画面が、プロジェクタ装置１０ａの映像信号受信部１１ａ−１、信号処理部１４ａを介して、表示部１５ａに表示される。
図６は、このようにして表示されたコンピュータ画面を示している。同図において、アプリケーションＡ４１は終了され、カーソル４４及びアプリケーションＢ４２のみが表示されている。
【００６７】
なお、リモコン装置３０ａの各方向移動ボタンを押下し、各方向移動コマンドをプロジェクタ装置１０ａに送信することにより、プロジェクタ装置１０ａに表示されているコンピュータ画面上で、カーソルの移動処理を行うことができる。
このとき、その実行コマンドは入力情報制御部１２ａ−１を介して、カーソル描画制御部１２ａ−２に入力される。そして、カーソル描画制御部１２ａ−２によって、移動後の位置情報が算出され、記憶部１３ａに記憶されるとともに、信号処理部１４ａに設定されて、移動後のカーソルが表示部１５ａに表示される。
【００６８】
［第二実施形態］
次に、本発明の第二実施形態につき、図７を参照して説明する。同図は、本発明の第二実施形態におけるアプリケーション制御ディスプレイシステムの構成を示すブロック図である。
【００６９】
本実施形態のアプリケーション制御ディスプレイシステムは、コンピュータ装置２０からプロジェクタ装置１０ａに送信されるコンピュータ画面の情報が、映像信号ではなく、一度画像データに変換されてからプロジェクタ装置１０ａに送信される点で、第一実施形態と異なる。
【００７０】
すなわち、図７において、本実施形態のアプリケーション制御ディスプレイシステムは、第一実施形態におけるコンピュータ装置２０の映像信号送信部２１−１が、画像データ送信部２１−３となっており、プロジェクタ装置１０ａの映像信号受信部１１ａ−１が、画像データ受信部１１ａ−３となっている。
【００７１】
また、本実施形態の制御部１２ａは、第一実施形態における構成に加え、画像データ制御部１２ａ−４を有しており、画像データ受信部１１ａ−３に入力されたデータは、この画像データ制御部１２ａ−４を介して、信号処理部１４ａへ出力される構成となっている。
その他の構成については、第一実施形態における各構成要素と同様であり、その機能も第一実施形態における機能と同様である。
【００７２】
画像データ送信部２１−３は、制御情報処理部２２によって作成された画像データを、プロジェクタ装置１０ａに送信する。
このとき、制御情報処理部２２は、コンピュータ画面の映像信号を画像データに変換し、圧縮して画像データ送信部２１−３へ出力する。この画像データには、解像度情報を含めることができる。
なお、映像信号の画像データへの変換機能及び圧縮機能を、画像データ送信部２１−３にもたせるようにすることも可能である。
【００７３】
画像データ受信部１１ａ−３は、画像データ送信部２１−３から画像データを受信し、これを画像データ制御部１２ａ−４に出力する。
画像データ制御部１２ａ−４は、入力した画像データを展開（解凍）するとともに、映像信号に変換し、これを信号処理部１４ａへ出力する。
なお、この画像データの展開機能や変換機能は、画像データ受信部１１ａ−３にもたせるようにすることもできる。
【００７４】
このようにして、本実施形態によれば、コンピュータ装置２０からプロジェクタ装置１０ａに送信されるコンピュータ画面を、映像信号ではなく、画像データとして扱うことができる。
このため、プロジェクタ装置１０ａ上において、その利用上の拡張性を期待することができるとともに、コンピュータ画面データの無線送信が可能となる。
【００７５】
［第三実施形態］
次に、本発明の第三実施形態につき、図８を参照して説明する。同図は、本発明の第三実施形態におけるアプリケーション制御ディスプレイシステムの構成を示すブロック図である。
【００７６】
本実施形態のアプリケーション制御ディスプレイシステムは、入力装置３０が、マウス３０ｂとされている点で、第二実施形態と異なる。その他の各構成や機能については、第二実施形態と同様である。
本実施形態においては、プロジェクタ装置１０ａへの実行コマンドの入力は、マウス３０ｂを用いて行われる。
【００７７】
このとき、第二実施形態における方向移動コマンドの入力は、マウス３０ｂが有する回転体の回転により入力される。
第二実施形態における決定ボタン３６ａは、マウス３０ｂの左クリックによって行うことができる。また、表示／非表示ボタン３５ａは、例えば、右クリックによって表示切り替え可能としたり、いずれかのボタンの所定時間以上のクリックによって、切り替え可能とすることもできる。
【００７８】
さらに、入力装置３０として、マウス３０ｂ以外にポインタデバイスやタッチパッドなどの各種ポインティング装置や、プロジェクタ装置１０ａ本体のコントロールキーを用いることもできる。
このとき、ポインティング装置の操作は、マウス３０ｂと同様に行うことが可能である。また、プロジェクタ装置１０ａ本体のコントロールキーによる操作は、リモコン装置３０ａと同様に行うことが可能である。
【００７９】
［第四実施形態］
次に、本発明の第四実施形態につき、図９〜図１５を参照して説明する。図９は、本発明の第四実施形態のアプリケーション制御ディスプレイシステムの構成を示すブロック図である。
【００８０】
また、図１０は、本発明の第四実施形態のアプリケーション制御ディスプレイシステムにおいて表示されたコンピュータ画面の例を示す図であり、図１１は、同システムにおいて設定されるカーソル位置情報の概念図である。
さらに、図１２は、同システムにおいてカーソルが描画されたコンピュータ画面の例を示す図であり、図１３は、フレーム情報を示す概念図である。そして、図１４は、仮想フレームの移動を示す図であり、図１５は、コマンドが実行されたコンピュータ画面の例を示す図である。
【００８１】
本実施形態は、プロジェクタ装置１０ａ上で、コンピュータ装置２０のアプリケーションの移動を行う点で、第二実施形態と異なる。
図９において、プロジェクタ装置１０ａは、第二実施形態の構成に加え、送受信部１１ａにフレーム情報受信部１１ａ−４を有するとともに、制御部１２ａにフレーム描画制御部１２ａ−５を有している。
【００８２】
また、コンピュータ装置２０は、第二実施形態の構成に加え、送受信部２１にフレーム情報送信部２１−４を有している。さらに、記憶部１３ａは、カーソル位置情報の他、フレーム情報等も記憶する。
そして、リモコン装置３０ａは、第二実施形態の構成に加え、移動ボタン３７ａ及び取消ボタン３８ａを有している。その他の構成及びその機能は、第二実施形態におけるものと同様である。
【００８３】
フレーム情報受信部１１ａ−４は、コンピュータ装置２０からフレーム情報を受信し、これをフレーム描画制御部１２ａ−５へ出力する。
このフレーム情報とは、カーソル位置に配置されているアプリケーションのタイトルバーが選択されたことを示す情報、フレーム位置情報、及びアプリケーションのフレームサイズ等の情報である。
【００８４】
カーソル位置に配置されているアプリケーションのタイトルバーが選択されたことを示す情報とは、例えば、そのアプリケーション名などとすることができる。
あるいは、より詳細に、選択されたことを示すフラグ情報や、アプリケーションにおけるタイトルバーを示す情報等を有するようにしてもよく、実現しようとするアプリケーション制御の内容に併せて、より詳細なものとすることができる。また、省略することも可能である。
フレーム位置情報は、例えば、フレームの左上及び右下の座標によって表現することができる。また、フレームサイズは、フレームの横幅及び高さによって表現することができる。
【００８５】
フレーム描画制御部１２ａ−５は、フレーム情報受信部１１ａ−４からフレーム情報を入力すると、カーソル位置情報及びフレーム位置情報及びフレームサイズを信号処理部１４ａに設定し、この設定した画面位置にカーソル及びフレームを描画させ、表示部１５ａに表示させる。
コンピュータ装置２０のフレーム情報送信部２１−４は、制御情報処理部２２から入力した上記のフレーム情報をプロジェクタ装置１０ａへ送信する。
【００８６】
リモコン装置３０ａの移動ボタン３７ａは、コンピュータ画面上のアプリケーションを移動する際に用いるものである。
通常、各方向異動ボタンを押下すると、その押下に応じて、カーソルの移動を行うことができるが、カーソルをアプリケーションのタイトルバーの上に移動させて、決定ボタン３６ａを押すことによって選択し、移動ボタン３７ａを押下した後に、各方向異動ボタンを押下することによって、アプリケーションを移動させるようにすることができる。
【００８７】
取消ボタン３８ａは、カーソルがアプリケーションのタイトルバーを選択し、ドラッグ可能状態となっている場合に、これを解除することができる実行コマンドである。その他、実行したコマンドをキャンセルする機能をもたせることもできる。
【００８８】
次に、図９を用いて、コンピュータ画面表示におけるアプリケーション制御ディスプレイシステムの処理手順について説明する。
まず、コンピュータ装置２０の制御情報処理部２２が、コンピュータ画面の映像信号を画像データに変換し、圧縮して画像データ送信部２１−３へ出力する。
【００８９】
画像データ送信部２１−３は、この画像データをプロジェクタ装置１０ａの画像データ受信部１１ａ−３に送信する。
なお、上記変換機能及び圧縮機能を、制御情報処理部２２ではなく、画像データ送信部２１−３にもたせるようにしてもよい。
【００９０】
プロジェクタ装置１０ａの画像データ受信部１１ａ−３が、画像データを受信すると、これを制御部１２ａの画像データ制御部１２ａ−４へ出力する。
そして、画像データ制御部１２ａ−４が、入力した画像データを展開し、映像信号に変換して、これを信号処理部１４ａへ出力する。そして、信号処理部１４ａが、これを表示部１５ａに表示させる。このとき、上記展開機能及び変換機能を画像データ受信部１１ａ−３にもたせるようにしてもよい。
図１０は、このようにして表示されたコンピュータ画面の例を示している。同図には、タイトルバー４５を有するアプリケーションＡ４１が表示されている。
【００９１】
次に、リモコン装置３０ａからカーソルの表示コマンドが入力されると、入力情報制御部１２ａ−１がこれを受信し、カーソル描画制御部１２ａ−２へ出力する。
カーソル描画制御部１２ａ−２は、記憶部１３ａからカーソル位置情報を取得して信号処理部１４ａに設定し、信号処理部１４ａが、この設定された画面位置にカーソルを描画して、これを表示部１５ａに表示させる。図１１は、このようにして設定されるカーソル位置情報の概念図である。
同図は、例として、カーソル４４の位置情報が、座標（４００，１００）であることを示しており、信号処理部１４ａに対して、コンピュータ画面上の座標（４００，１００）にカーソル４４を表示させるように設定が行われる。
【００９２】
信号処理部１４ａは、設定されたカーソル位置情報にもとづいて、コンピュータ画面の映像信号上の対応する画面位置に、カーソルを描画して、これを表示部１５ａに出力し、表示させる。図１２は、このようにしてカーソル４４が表示されたコンピュータ画面の例を示している。
【００９３】
次に、カーソル４４によって、タイトルバー４５を選択するため、リモコン装置３０ａから決定コマンドが入力されると、入力情報制御部１２ａ−１がこれを受信して、制御情報出力部１２ａ−３へ出力する。
制御情報出力部１２ａ−３は、記憶部１３ａからカーソル位置情報を取得し、このカーソル位置情報と決定コマンドの情報を制御情報送信部１１ａ−２へ出力し、制御情報送信部１１ａ−２がこれらをコンピュータ装置２０に送信する。
【００９４】
コンピュータ装置２０の制御情報受信部２１−２は、プロジェクタ装置１０ａからカーソル位置情報と決定コマンドの情報を受信し、これらを制御情報処理部２２へ出力する。
制御情報処理部２２は、入力されたカーソル位置にアプリケーションが存在するか否かを記憶部２３に対して確認し、存在する場合には、そのアプリケーションＡ４１のフレーム位置情報やフレームサイズ情報等を記憶部２３から取得する。
そして、これらのフレーム情報を、フレーム情報送信部２１−４を介してプロジェクタ装置１０ａに送信する。
【００９５】
プロジェクタ装置１０ａのフレーム情報受信部１１ａ−４は、フレーム情報を受信して、これをフレーム描画制御部１２ａ−５に出力する。
フレーム描画制御部１２ａ−５は、フレーム情報を記憶部１３ａに記憶するとともに、フレーム情報を信号処理部１４ａに設定する。また、カーソル描画制御部１２ａ−２は、記憶部１３ａからカーソル位置情報を取得して、これを信号処理部１４ａに設定する。
【００９６】
そして、信号処理部１４ａは、これらの情報にもとづいて、それぞれの画面位置にフレーム及びカーソルを描画して、これを表示部１５ａに表示する。
図１３は、このようにして信号処理部１４ａに設定されるフレーム情報の概念図である。同図においては、フレームＡ４１ａを設定するものとしている。
【００９７】
このフレームＡ４１ａは、図１０に示すように、はじめにプロジェクタ装置１０ａ上にアプリケーションＡ４１として既に表示されているものである。
しかし、この時点において、プロジェクタ装置１０ａは、アプリケーションＡ４１のフレームを認識してはおらず、コンピュータ画面全体をイメージとして認識しているだけであり、本実施形態でフレームＡ４１ａを信号処理部１４ａに設定することによって、アプリケーションＡ４１を独立して把握することが可能となる。
【００９８】
したがって、このようにして表示されたコンピュータ画面は、図１０に示すコンピュータ画面と見た目には同一であるが、フレームＡ４１ａを設定後に表示されたコンピュータ画面は、アプリケーションＡ４１を制御することが可能な状態となっている。
【００９９】
次に、図１４に示すようにフレームＡ４１ａを移動させるものとする。このとき、リモコン装置３０ａから移動コマンドを入力した後に、各方向移動コマンドを操作することによって、フレームＡ４１ａを移動させるための情報をプロジェクタ装置１０ａに入力することができる。
【０１００】
そして、この入力された実行コマンドにもとづいて、入力情報制御部１２ａ−１、カーソル描画制御部１２ａ−２、フレーム描画制御部１２ａ−５を通じて、移動後のフレーム及びカーソルの位置情報が信号処理部１４ａに設定され、移動後のフレーム及びカーソルが表示部１５ａに表示される。
【０１０１】
次に、リモコン装置３０ａから決定コマンドが入力されると、この決定コマンドは入力情報制御部１２ａ−１を介して制御情報出力部１２ａ−３に出力される。そして、制御情報出力部１２ａ−３は、この決定コマンドを、記憶部１３ａのカーソル位置情報、フレーム情報等とともに制御情報送信部１１ａ−２を介してコンピュータ装置２０に送信する。
【０１０２】
コンピュータ装置２０の制御情報受信部２１−２は、これらを受信して、制御情報処理部２２へ出力し、記憶部２３に記憶するとともに、これらの情報にもとづいてコンピュータ画面を再描画し、画像データに変換して圧縮し、画像データ送信部２１−３へ出力する。
そして、画像データ送信部２１−３からプロジェクタ装置１０ａへ送信され、上述の場合と同様に表示される。
【０１０３】
図１５は、このようにしてプロジェクタ装置１０ａに表示されたコンピュータ画面の例を示している。同図において、アプリケーションＡ４１は、リモコン装置３０ａからプロジェクタ装置１０ａに入力された実行コマンドにもとづいて、図１０の位置から移動した位置に表示されている。
【０１０４】
なお、本実施形態においては、アプリケーションＡ４１の移動後のコンピュータ画面を再描画してプロジェクタ装置１０ａに表示させるようにしているが、これは、移動前のアプリケーションＡ４１の下のディスクトップ画面などのデータをプロジェクタ装置１０ａが保有していないことによる。
【０１０５】
したがって、例えば、はじめにコンピュータ画面のディスクトップ画面をプロジェクタ装置１０ａに送信して保有させるような処理を行うことによって、上記再描画工程を省略することも可能である。
すなわち、プロジェクタ装置１０ａから送信されてきた移動後のフレーム情報等にもとづいて、コンピュータ装置２０における記憶部２３の情報を更新するのみで、コンピュータ画面の再描画を省略することができる。
【０１０６】
［第五実施形態］
次に、本発明の第五実施形態につき、図１６を参照して説明する。同図は、本発明の第五実施形態におけるアプリケーション制御ディスプレイシステムの構成を示すブロック図である。
【０１０７】
本実施形態のアプリケーション制御ディスプレイシステムは、第三実施形態と同様に、入力装置３０が、マウス３０ｂとされている点で、第四実施形態と異なる。その他の各構成や機能については、第四実施形態と同様である。
また、入力装置３０として、マウス３０ｂ以外にポインタデバイスやタッチパッドなどの各種ポインティング装置や、プロジェクタ装置１０ａ本体のコントロールキーを用いることもできる点についても、第三実施形態と同様である。
【０１０８】
上記実施形態においては、アプリケーションの制御として終了や、移動を行ったが、その他の制御、例えば、複数ページを有するアプリケーションなどの場合には、そのページの切り替えを行うようにすることもできる。
この場合、リモコン装置３０ａに「次のページ」や「前のページ」の実行コマンドをもたせ、その制御をプロジェクタ装置１０ａにおける入力情報制御部１２ａ−１、制御情報出力部１２ａ−３、及びコンピュータ装置２０の制御情報処理部２２等にもたせることによって、行うことが可能である。
【０１０９】
なお、本発明は以上の実施形態に限定されるものではなく、例えば、第一実施形態と第四実施形態を組合せて、コンピュータ画面を映像信号として扱い、かつアプリケーションを移動可能とすることができる。
また、入力装置３０をキーボード入力可能なものとして、ディスプレイ装置１０に文字入力を行い、特別な制御を追加するなど適宜設計変更できるものである。
【０１１０】
【発明の効果】
以上のように、本発明によれば、コンピュータ装置からディスプレイ装置に送信され、表示されたコンピュータ画面上のアプリケーションを、ディスプレイ装置の入力装置だけで制御することが可能となる。
【０１１１】
また、この際、コンピュータ装置用とディスプレイ装置用の二つのカーソルを表示させることなく、一つのみ表示させて制御することができるため、操作性を向上させることが可能となる。
さらに、コンピュータ装置とディスプレイ装置間のデータ送受信量を軽減することができるため、高い処理速度を得ることができ、プレゼンテーションに適したものとすることが可能となる。
【図面の簡単な説明】
【図１】本発明の第一実施形態のアプリケーション制御ディスプレイシステムの構成の概略を示すブロック図である。
【図２】本発明の第一実施形態のアプリケーション制御ディスプレイシステムの構成を示すブロック図である。
【図３】本発明の第一実施形態のアプリケーション制御ディスプレイシステムにおいて表示されたコンピュータ画面の例を示す図である。
【図４】本発明の第一実施形態のアプリケーション制御ディスプレイシステムにおいて設定されるカーソル位置情報の概念図である。
【図５】本発明の第一実施形態のアプリケーション制御ディスプレイシステムにおいてカーソルが描画されたコンピュータ画面の例を示す図である。
【図６】本発明の第一実施形態のアプリケーション制御ディスプレイシステムにおいてコマンドが実行されたコンピュータ画面の例を示す図である。
【図７】本発明の第二実施形態のアプリケーション制御ディスプレイシステムの構成を示すブロック図である。
【図８】本発明の第三実施形態のアプリケーション制御ディスプレイシステムの構成を示すブロック図である。
【図９】本発明の第四実施形態のアプリケーション制御ディスプレイシステムの構成を示すブロック図である。
【図１０】本発明の第四実施形態のアプリケーション制御ディスプレイシステムにおいて表示されたコンピュータ画面の例を示す図である。
【図１１】本発明の第四実施形態のアプリケーション制御ディスプレイシステムにおいて設定されるカーソル位置情報を示す概念図である。
【図１２】本発明の第四実施形態のアプリケーション制御ディスプレイシステムにおいてカーソルが描画されたコンピュータ画面の例を示す図である。
【図１３】本発明の第四実施形態のアプリケーション制御ディスプレイシステムにおけるフレーム情報を示す概念図である。
【図１４】本発明の第四実施形態のアプリケーション制御ディスプレイシステムにおけるフレームの移動を示す図である。
【図１５】本発明の第四実施形態のアプリケーション制御ディスプレイシステムにおいてコマンドが実行されたコンピュータ画面の例を示す図である。
【図１６】本発明の第五実施形態のアプリケーション制御ディスプレイシステムの構成を示すブロック図である。
【符号の説明】
１０ ディスプレイ装置
１０ａ プロジェクタ装置
１１，１１ａ 送受信部
１１ａ−１ 映像信号受信部
１１ａ−２ 制御情報送信部
１１ａ−３ 画像データ受信部
１１ａ−４ フレーム情報受信部
１２，１２ａ 制御部
１２ａ−１ 入力情報制御部
１２ａ−２ カーソル描画制御部
１２ａ−３ 制御情報出力部
１２ａ−４ 画像データ制御部
１２ａ−５ フレーム描画制御部
１３，１３ａ 記憶部
１４，１４ａ 信号処理部
１５，１５ａ 表示部
２０ コンピュータ装置
２１ 送受信部
２１−１ 映像信号送信部
２１−２ 制御情報受信部
２１−３ 画像データ送信部
２１−４ フレーム情報送信部
２２ 制御情報処理部
２３ 記憶部
３０ 入力装置
３０ａ リモコン装置
３０ｂ マウス
３１ａ 上方向移動ボタン
３２ａ 左方向移動ボタン
３３ａ 右方向移動ボタン
３４ａ 下方向移動ボタン
３５ａ 表示／非表示ボタン
３６ａ 決定ボタン
３７ａ 移動ボタン
３８ａ 取消ボタン
４１ アプリケーションＡ
４１ａ フレームＡ（移動前）
４１ｂ フレームＡ（移動後）
４２ アプリケーションＢ
４３ 終了ボタン
４４ カーソル
４５ タイトルバー[0001]
BACKGROUND OF THE INVENTION
The present invention controls an application on a computer screen transmitted from a computer device only by an input device of the display device, and reduces an amount of data transfer at the time, and an application control display system and application control display device in a computer screen display Application control display method.
[0002]
[Prior art]
In recent years, a computer screen by a computer device is displayed on a display device, and presentations using the same are widely performed.
In this case, in order to easily control the display device and the application software of the computer device, it is desirable to be able to control both the display device and the application software of the computer device by a remote control of the display device.
[0003]
However, when the output signals from the remote control are divided into those for controlling the display device and those for controlling the computer device, there is a problem that it is difficult to use because the respective cursors are displayed.
Examples of means for performing display control of the display screen in such a presentation include, for example, Japanese Patent Laid-Open Nos. 6-348412, 9-62444, 11-143629, and 2001-125738. The thing currently disclosed by gazette etc. can be mentioned.
[0004]
According to these methods, it is possible to input the pointer position information and commands by the pointing device using a video camera or the like, and analyze them with a computer device to perform corresponding processing.
However, the pointing information and the like by the pointing device are received and analyzed by a video camera or the like, and a dedicated device is required.
For this reason, it has been desired to control the contents displayed on the display device with a simpler configuration.
[0005]
It is also possible to use a means for displaying a desktop screen of a certain computer device via a communication line on a separate computer device and controlling it on this separate computer device, such as a so-called remote desktop.
According to such means, in addition to being able to display a computer screen of a remote computer device on a display device connected to another computer device, it can be controlled from the original computer screen Many functions can be used as they are.
[0006]
[Problems to be solved by the invention]
However, when the above-described means is used, it is difficult to obtain a sufficient processing speed because the amount of data transmitted / received via a communication line is large, and it cannot be said that it is optimal for a presentation or the like.
Moreover, since the necessary functions are limited when used for presentations, etc., it is hoped that applications on a computer screen can be controlled with a simple configuration capable of exhibiting sufficient functions within that range. It was rare.
[0007]
When using the above-described means, it is necessary to prepare a computer device on the computer screen receiving side or to have the computer device function in the display device itself, which is not simple. It was.
[0008]
The present invention has been considered in view of the above circumstances, and it is possible to control an application on a computer screen transmitted from a computer device only by an input device of a display device, and to reduce a data transfer amount at that time. An object of the present invention is to provide an application control display system, apparatus and method for displaying computer screens.
[0009]
[Means for Solving the Problems]
To achieve the above object, an application-controlled display system according to claim 1 of the present invention is input from an input device to a display device. In response to certain execution commands, the cursor and application are controlled on the computer screen displayed on the display device without transmitting / receiving data between the display device and the computer device. An application controlled display system, Based on the first execution command input from the input device, the cursor position information is output to the signal processing unit, so that the computer screen is displayed again on the display unit by the signal processing unit based on the cursor position information. When moving the cursor displayed on the screen and moving the cursor, the cursor position information after movement is output to the signal processor based on the second execution command input from the input device. Based on the above, the signal processing unit redisplays the computer screen on the display unit, and outputs the third execution command and cursor position information input from the input device to the transmission / reception unit, and the third execution input from the control unit Command and cursor position information is transmitted to and transmitted from the computer device. A video signal of the computer screen received or a video signal of the computer screen redrawn based on the third execution command and the cursor position information transmitted from the computer device and receiving the video signal And a signal processing unit for displaying the computer screen on the display unit based on the video signal input from the transmission / reception unit or the cursor position information input from the control unit. The display device and the video signal of the computer screen are transmitted to the display device, the computer screen is redrawn based on the third execution command and the cursor position information received from the display device, and the redrawn video signal of the computer screen is displayed. The computer device transmits to the display device, and the input device inputs the first execution command, the second execution command, and the third execution command to the display device.
[0010]
If the application control display system is configured as described above, the application on the computer screen transmitted from the computer device can be controlled only by the input device of the display device.
That is, an execution command input from the input device is transmitted to the computer device, and based on this, the redrawn computer screen is displayed on the display device, thereby displaying the controlled application on the display device. Can do.
[0011]
For example, it is assumed that the cursor determination button is pressed on the application end button on the computer screen displayed on the display device from the remote control device.
At this time, an execution command indicating that the enter button has been pressed is transmitted to the computer device for processing, and the redrawn computer screen can be displayed on the display device.
[0012]
At this time, since only one cursor can be displayed and controlled without displaying two cursors for the computer device and the display device, the operability can be improved.
Furthermore, the redrawing of the computer screen by the computer device is performed only for a predetermined execution command, and mere movement of the cursor is performed only on the display device. Therefore, the amount of data transmitted and received between the computer device and the display device Can be greatly reduced.
For this reason, the processing load of these apparatuses is reduced, and a high processing speed can be obtained. Therefore, it is possible to make the apparatus suitable for presentation.
[0013]
Examples of the execution command input from the input device include a cursor display / non-display command, a cursor up / down / left / right movement command, a determination command, a cancel command, and a movement command.
The computer screen means information on the entire screen displayed on the display device by the computer.
Drawing means a process of creating a video signal for displaying a computer screen.
Redisplay means adding the changed information and updating the display content being displayed on the display device.
[0014]
The application controlled display system according to claim 2 of the present invention is input from the input device to the display device. In response to certain execution commands, the cursor and application are controlled on the computer screen displayed on the display device without transmitting / receiving data between the display device and the computer device. An application controlled display system, Based on the first execution command input from the input device, the cursor position information is output to the signal processing unit, so that the computer screen is displayed again on the display unit by the signal processing unit based on the cursor position information. When moving the cursor displayed on the screen and moving the cursor, the cursor position information after movement is output to the signal processor based on the second execution command input from the input device. The computer screen is re-displayed on the display unit by the signal processing unit, the third execution command and the cursor position information input from the input device are output to the transmission / reception unit, and the image data input from the transmission / reception unit is a video signal. A control unit that converts the data into a signal processing unit and outputs it to the signal processing unit; -The cursor position information is transmitted to the computer device, and the image is redrawn based on the image data of the computer screen transmitted from the computer device or the third execution command and the cursor position information transmitted from the computer device. The computer screen is displayed on the display unit based on the transmission / reception unit that receives the image data of the computer screen and outputs the image data to the control unit, and the video signal input from the control unit or the cursor position information input from the control unit. Equipped with a signal processing unit The video signal of the display device and the computer screen is converted into image data, the image data is transmitted to the display device, and the computer screen is redrawn based on the third execution command and cursor position information received from the display device. A computer device for converting the redrawn video signal of the computer screen into image data and transmitting the image data to the display device; a first execution command, a second execution command, and a third execution command for the display device; It has a configuration having an input device for inputting.
[0015]
If the application control display system has such a configuration, the computer screen from the computer apparatus can be converted into image data instead of the video signal and transmitted to the display apparatus.
For this reason, it is possible to wirelessly transmit computer screen data, and it is possible to maintain high extensibility regarding the processing of the computer screen in the display device.
[0016]
In the application control display system according to claim 3 of the present invention, the computer device stores the frame information corresponding to the cursor position information based on the fourth execution command and the cursor position information transmitted from the display device. And send this frame information to the display device, The transmission / reception unit receives the frame information from the computer device and outputs the frame information to the control unit, and the control unit outputs the frame information to the signal processing unit, and redisplays the computer screen on the display unit based on the frame information. When moving the originally displayed frame, based on the fifth execution command input from the input device, the cursor position information after the movement and the frame information after the movement are output to the signal processing unit, and the cursor position after the movement Based on the information and the frame information after movement, the computer screen is displayed again on the display unit, and the sixth execution command, the cursor position information, and the frame information input from the input device are output to the transmission / reception unit. Six execution commands, cursor position information and frame information are transmitted to the computer device, and the computer device , Has been sent 6th Redraw the computer screen based on the execution command, cursor position information and frame information, and send the computer screen to the display device. The transmission / reception unit receives the redrawn computer screen from the computer device, and when the received computer screen is image data, the computer screen is converted into a video signal via the control unit and is sent to the signal processing unit. If it is an image signal, it is output directly to the signal processing unit, and the signal processing unit displays the computer screen on the display unit. As a configuration.
[0017]
If the application control display system has such a configuration, the frame information of the application can be transmitted from the computer device to the display device, and the virtual frame can be displayed on the display device.
That is, the data transmitted from the computer device to the display device may be frame information as well as computer screen data.
Then, the application can be moved on the display device based on the frame information.
[0018]
When moving the application window on the display device, the computer device does not need to perform any processing.
When the movement of the application is completed and a determination command is input from the input device, this is transmitted from the display device to the computer device, redrawing is performed, and the computer image after drawing is transmitted to the display device. Is displayed.
[0019]
As described above, in the present invention, the computer device (server side) transmits control information (frame information) for movement to the display device at the start of movement, and does not need to do anything during the movement, but ends. Sometimes it is only necessary to redraw and send to the display device.
[0020]
In addition, the display device (client side) receives movement control information from the computer device at the start of movement, performs virtual frame movement processing using its simple frame display function during movement, and ends movement at the end of movement. The control information is transmitted to the computer device, and the computer screen is received from the computer device.
[0021]
Therefore, both server and client processes are reduced as compared with the conventional technique.
In the present invention, a frame of an application that can be operated only by a display device is referred to as a virtual frame.
[0022]
According to a fourth aspect of the present invention, the display device is a projector device, and the input device is a remote control device. , The control key of the pointing device or the display device body is used.
[0023]
If the application control display system has such a configuration, the computer screen of the computer device is displayed on the projector for presentations, etc., and the application information on the computer screen can be controlled simply by transmitting input information to the projector using a remote control or the like. Can be performed.
[0024]
The application control display device according to claim 5 of the present invention is input from an input device. Controls the cursor and application on the computer screen without sending / receiving data to / from the computer device for certain execution commands Application control display device, the first execution command input from the input device Based on By outputting the cursor position information to the signal processing unit, the signal processing unit displays the computer screen again on the display unit based on the cursor position information. When the cursor is displayed on the computer screen and the cursor is moved, the cursor is moved by outputting the moved cursor position information to the signal processing unit based on the second execution command input from the input device. The computer screen is redisplayed on the display by the signal processor based on the later cursor position information. And input from the input device Third The control unit that outputs the execution command and cursor position information to the transmission / reception unit, and input from the control unit Third The execution command and the cursor position information are transmitted to the computer device, and the video signal of the computer screen transmitted from the computer device or the computer device is transmitted from the computer device. Third A video signal of a computer screen redrawn based on the execution command and cursor position information, and a transmission / reception unit that outputs the video signal to the signal processing unit, and a video signal input from the transmission / reception unit or an input from the control unit Based on the cursor position information, a signal processing unit for displaying a computer screen on the display unit is provided.
[0025]
If the application control display device has such a configuration, the redrawn computer screen can be displayed on the display device by transmitting the execution command input from the input device to the computer device.
At this time, the cursor is moved only by the display device, and the computer device can execute the above-described processing in response to the transmission of the determination command after the cursor is moved.
Therefore, it is possible to reduce the data transmission / reception amount between the computer device and the display device, and to obtain a high processing speed. Further, it can be realized with a simple configuration, and the cost can be reduced.
[0026]
The application control display device according to claim 6 of the present invention is input from an input device. Controls the cursor and application on the computer screen without sending / receiving data to / from the computer device for certain execution commands Application control display device, the first execution command input from the input device Based on By outputting the cursor position information to the signal processing unit, the signal processing unit displays the computer screen again on the display unit based on the cursor position information. When the cursor is displayed on the computer screen and the cursor is moved, the cursor is moved by outputting the moved cursor position information to the signal processing unit based on the second execution command input from the input device. The computer screen is redisplayed on the display by the signal processor based on the later cursor position information. And input from the input device Third The execution command and the cursor position information are output to the transmission / reception unit, the image data input from the transmission / reception unit is converted into a video signal and output to the signal processing unit, and the control unit inputs Third The execution command and the cursor position information are transmitted to the computer device, and the image data of the computer screen transmitted from the computer device or the computer device is transmitted from the computer device. Third The image data of the computer screen redrawn based on the execution command and the cursor position information is received, the transmission / reception unit that outputs the image data to the control unit, and the video signal input from the control unit or the control unit The signal processing unit is configured to display a computer screen on the display unit based on the cursor position information.
[0027]
If the application control display system is configured in this way, the computer screen from the computer device can be converted into image data and sent to the display device instead of being a video signal, and the application control display system is highly expanded. It becomes possible to have sex.
[0028]
The application control display device according to claim 7 of the present invention is such that the transmission / reception unit is a computer device. Fourth The frame information corresponding to the cursor position information acquired from the storage unit in the computer device is received based on the execution command and the cursor position information, and the frame information is output to the control unit. The control unit signals the frame information. When it is output to the processing unit, the computer screen is displayed again on the display unit based on the frame information, and the frame displayed based on the frame information is moved from the input device. Fifth To the execution command Based on the movement Cursor position information and After moving Output the frame information to the signal processor, After moving Cursor position information and After moving The computer screen is redisplayed on the display unit based on the frame information, and input from the input device. Sixth The execution command, cursor position information and frame information are output to the transmission / reception unit. Sixth Execution command, cursor position information and frame information are transmitted to the computer device, and the computer device Sixth When the computer screen redrawn based on the execution command, the cursor position information and the frame information is received from the computer device and the received computer screen is image data, the computer screen is transmitted to the video signal via the control unit. When it is a video signal, it is directly output to the signal processing unit, and the signal processing unit displays the computer screen on the display unit.
[0029]
With such a configuration of the application control display device, a virtual frame can be displayed by transmitting an execution command to the computer device and receiving frame information of the application from the computer device.
The virtual frame can be operated only by the display device.
[0030]
That is, the application can be moved in the display device using the simple frame display function that the display device has conventionally.
In addition, after the movement is completed, a determination command is input from the input device, and this is transmitted to the computer device so that the computer screen can be redrawn and displayed on the display device.
[0031]
The application control display method according to claim 8 of the present invention is input from the input device to the display device. In response to certain execution commands, the cursor and application are controlled on the computer screen displayed on the display device without transmitting / receiving data between the display device and the computer device. An application control display method, wherein a computer device transmits a video signal of a computer screen to the display device, and the display device displays a computer screen by the transmitted video signal, Display device Based on the first execution command input from the input device, the cursor is displayed on the computer screen. Display device When moving the cursor, redisplay the computer screen information based on the second execution command input from the input device and the cursor position information, Display device The third execution command input from the input device and the cursor position information are transmitted to the computer device, and the computer device redraws the computer screen based on the third execution command and the cursor position information and redraws the computer. There is a method in which a video signal of a screen is transmitted to a display device, and the display device displays a redrawn computer screen.
[0032]
If the application control display method is such a method, the application on the computer screen transmitted from the computer device can be controlled only by the input device of the display device.
[0033]
The application-controlled display method according to claim 9 of the present invention is input from the input device to the display device. In response to certain execution commands, the cursor and application are controlled on the computer screen displayed on the display device without transmitting / receiving data between the display device and the computer device. An application-controlled display method, wherein a computer device converts a video signal of a computer screen into image data and transmits the image data to the display device, and the display device displays a computer screen based on the transmitted image data, Display device Based on the first execution command input from the input device, the cursor is displayed on the computer screen. Display device When moving the cursor, redisplay the computer screen information based on the second execution command input from the input device and the cursor position information, Display device The third execution command input from the input device and the cursor position information are transmitted to the computer device, and the computer device redraws the computer screen based on the third execution command and the cursor position information and redraws the computer. There is a method in which a video signal of a screen is converted into image data and transmitted to a display device, and the display device displays a redrawn computer screen.
[0034]
If the application-controlled display method is such a method, the computer screen from the computer device can be converted into image data instead of a video signal and transmitted to the display device.
[0035]
In the application control display method according to claim 10 of the present invention, the computer device stores frame information corresponding to the cursor position information based on the fourth execution command and cursor position information transmitted from the display device. The frame information is transmitted to the display device, and the display device redisplays the computer screen based on the transmitted frame information. Display device When moving the displayed frame based on the frame information, redisplay the computer screen information based on the fifth execution command input from the input device, the cursor position information and the frame information, Display device The sixth execution command, the cursor position information, and the frame information input from the input device are transmitted to the computer device, and the computer device replays the computer screen based on the transmitted sixth command, the cursor position information, and the frame information. There is a method of drawing and transmitting the computer screen to a display device, and the display device displays the transmitted computer screen.
[0036]
If the application control display method is such a method, the frame information of the application can be transmitted from the computer device to the display device, and the virtual frame can be displayed on the display device.
That is, by operating this virtual frame on the display device, it is possible to move an application or the like.
When the determination command is pressed after the movement is completed, the information is transmitted to the computer device, and redrawing is executed in the computer device, which can be displayed on the display device.
[0037]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments of the present invention will be described below with reference to the drawings.
[First embodiment]
First, a first embodiment of the present invention will be described with reference to FIGS. FIG. 1 is a block diagram showing an outline of a configuration of an application control display system according to the first embodiment of the present invention. FIG. 2 is a block diagram showing a configuration of an application control display system according to the first embodiment of the present invention. is there.
[0038]
FIG. 3 is a diagram showing an example of a computer screen displayed in the application control display system of the first embodiment of the present invention, and FIG. 4 is a conceptual diagram of cursor position information set in the system. .
Further, FIG. 5 is a diagram showing an example of a computer screen on which a cursor is drawn in the system, and FIG. 6 is a diagram showing an example of a computer screen on which a command is similarly executed.
[0039]
As shown in FIG. 1, the application control display system for displaying a computer screen includes a display device 10, a computer device 20, and an input device 30.
The display device 10 displays computer screen information transmitted from the computer device 20, and can be a monitor device, a liquid crystal monitor device, a projector device, or the like.
[0040]
The display device 10 includes a transmission / reception unit 11, a control unit 12, a storage unit 13, a signal processing unit 14, and a display unit 15.
The transmission / reception unit 11 performs various data transmission / reception with the computer device 20.
When a predetermined execution command is input from the input device 30, the control unit 12 acquires cursor position information and the like from the storage unit 13 and outputs them to the signal processing unit 14.
In addition, depending on the type of execution command, the control unit 12 acquires cursor position information and the like from the storage unit 13 and outputs the information to the transmission / reception unit 11 together with the execution command.
[0041]
The storage unit 13 is a storage device that stores cursor position information, frame information, and the like. The storage unit 13 receives the acquisition of the cursor position information from the control unit 12, and receives an update of the change contents when the cursor position information or the like is changed.
The signal processing unit 14 displays a computer screen on the display unit 15 based on the input information from the computer device 20 or displays a cursor on the screen based on the input information from the control unit 12.
The display unit 15 displays an input signal from the signal processing unit 14, and a CRT screen, a liquid crystal screen, an optical device, or the like can be used.
[0042]
The computer device 20 is an information processing device that is connected to the display device 10 in a wired or wireless manner and that can display the computer screen on the display device 10 for display.
The computer device 20 includes a transmission / reception unit 21, a control information processing unit 22, and a storage unit 23.
[0043]
The transmission / reception unit 21 performs various data transmission / reception with the display device 10.
The control information processing unit 22 executes processing corresponding to the type of data input from the display device 10 via the transmission / reception unit 21. At this time, it is also possible to acquire necessary information from the storage unit 23 and redraw the computer screen. These are output to the transmitting / receiving unit 21.
[0044]
The input device 30 can input information to the display device 10 by wire or wirelessly, and examples thereof include a remote control device 30a, a mouse 30b, other pointing devices, and control keys for the display body.
[0045]
Next, the configuration of the present invention will be described in more detail with reference to FIG.
In the figure, the display device 10 of the application control display system in the computer screen display of the present invention is a projector device 10a, and the input device 30 is a remote control device 30a.
[0046]
The projector device 10a has a transmission / reception unit 11a, a control unit 12a, a storage unit 13a, a signal processing unit 14a, and a display unit 15a as the same configuration as the display device 10.
The transmission / reception unit 11a includes a video signal reception unit 11a-1 and a control information transmission unit 11a-2.
[0047]
The video signal receiving unit 11a-1 receives a video signal from the computer device 20, and outputs it to the signal processing unit 14a.
The control information transmission unit 11a-2 transmits the execution command, cursor position information, and the like output from the control unit 12a to the computer device 20.
[0048]
The control unit 12a includes an input information control unit 12a-1, a cursor drawing control unit 12a-2, and a control information output unit 12a-3.
The input information control unit 12a-1 inputs the execution command output from the remote control device 30a, and outputs it to the cursor drawing control unit 12a-2 or the control information output unit 12a-3 according to the type.
[0049]
For example, if the execution command is a cursor display / non-display command or a movement command, this is output to the cursor drawing control unit 12a-2, and if the execution command is a decision command, this is output as control information. It can output to the output part 12a-3.
[0050]
The cursor drawing control unit 12a-2 acquires necessary information from the storage unit 13a according to the input execution command, and outputs the acquired data to the signal processing unit 14a.
For example, when the execution command is a cursor display / non-display command, the cursor position information is acquired from the storage unit 13a and is output to the signal processing unit 14a.
[0051]
The control information output unit 12a-3 acquires necessary information from the storage unit 13a according to the execution command input from the input information control unit 12a-1, and transmits the acquired data and the execution command to the control information transmission unit 11a-2. Output to.
For example, when the execution command is a determination command, the cursor position information is acquired from the storage unit 13a, and these are output to the control information transmission unit 11a-2.
The storage unit 13a, the signal processing unit 14a, and the display unit 15a have functions similar to those in the display device 10 described above.
[0052]
The transmission / reception unit 21 in the computer device 20 includes a video signal transmission unit 21-1 and a control information reception unit 21-2.
The video signal transmission unit 21-1 transmits the video signal input from the control information processing unit 22 to the projector device 10a.
[0053]
That is, the video signal of the computer screen in the computer device 20 created in the control information processing unit 22 is transmitted to the projector device 10a.
This computer screen is updated as needed by the control information processing unit 22 based on the control information transmitted from the projector device 10 a, input to the video signal transmission unit 21-1, and transmitted to the computer device 20.
[0054]
The remote control device 30a is an input device that can input a radio signal to the projector device 10a by electromagnetic waves, sound waves, or the like, and includes an upward movement button 31a, a leftward movement button 32a, a rightward movement button 33a, and a downward movement button. 34a, a display / non-display button 35a, and an enter button 36a.
[0055]
The upward movement button 31a, the leftward movement button 32a, the rightward movement button 33a, and the downward movement button 34a move a cursor or the like. Ru Run command For transmission to the computer device 20 .
The display / non-display button 35a is an execution command for switching display / non-display of the cursor. Is transmitted to the computer device 20 .
The decision button 36a is an execution command for causing the computer device 20 to execute a corresponding process at the cursor position where the cursor exists. Is transmitted to the computer device 20 .
[0056]
For example, when the cursor is on the application end icon on the computer screen and the determination button 36a is pressed, the execution command or the like is transmitted to the computer device 20, and the control information processing unit 22 executes the application. The finished computer screen is drawn.
Then, the image is transmitted to the projector device 10a via the video signal transmission unit 21-1, and the redrawn computer screen is displayed.
[0057]
The execution command transmitted from the remote control device 30a to the display device 10 is not limited to the above-described command, and a command necessary for application control can be set as appropriate.
For example, when an application having a plurality of pages is operated, the left and right buttons of the direction moving button can be set as page moving buttons.
[0058]
Next, the processing procedure of the application control display system in the computer screen display will be described with reference to FIG.
First, the control information processing unit 22 of the computer device 20 transmits the video signal of the computer screen to the projector device 10a via the video signal transmission unit 21-1.
[0059]
The video signal receiving unit 11a-1 of the projector apparatus 10a outputs the transmitted video signal to the signal processing unit 14a, and the signal processing unit 14a displays a computer screen on the display unit 15a based on the video signal. FIG. 3 shows an example of the computer screen displayed in this way.
[0060]
In the figure, two applications A41 and B42 are displayed on the computer screen, and an end button 43 is provided at the right end of each title bar.
Next, when the remote control device 30a transmits a cursor display / non-display command to the projector device 10a, the input information control unit 12a-1 of the projector device 10a receives the command and sends it to the cursor drawing control unit 12a-2. Output.
[0061]
The cursor drawing control unit 12a-2 acquires cursor position information from the storage unit 13a, and outputs the cursor position information to the signal processing unit 14a to perform setting. FIG. 4 is a conceptual diagram of the cursor position information set in this way.
This figure shows that the position information of the cursor 44 is coordinates (400, 100) as an example, and the cursor 44 is placed at coordinates (400, 100) on the computer screen with respect to the signal processing unit 14a. Settings are made to display.
[0062]
Based on the set cursor position information, the signal processing unit 14a draws a cursor at the corresponding screen position on the video signal of the computer screen, and outputs this to the display unit 15a for display. FIG. 5 shows an example of a computer screen on which the cursor 44 is displayed in this way.
[0063]
Next, when a determination command is transmitted from the remote control device 30a to the projector device 10a, the input information control unit 12a-1 of the projector device 10a receives this and outputs it to the control information output unit 12a-3.
The control information output unit 12a-3 acquires the cursor position information from the storage unit 13a, and transmits the determination command and the cursor position information to the computer device 20 via the control information transmission unit 11a-2.
[0064]
When receiving the determination command and the cursor position information from the projector device 10 a, the control information receiving unit 21-2 of the computer device 20 outputs this to the control information processing unit 22.
The control information processing unit 22 determines the contents of the computer screen at the cursor position based on the input determination command and cursor position information and the position information of the application currently displayed on the computer screen stored in the storage unit 23. Analyze and calculate the processing when the execution command is applied to that position.
[0065]
In FIG. 5, since the cursor is positioned on the end icon of the application A41, the control information processing unit 22 redraws the screen from which the application A41 is erased from the computer screen, and displays this as a video signal transmission unit. It outputs to 21-1.
[0066]
The video signal transmission unit 21-1 transmits the video signal of the computer screen from which the application A41 is deleted to the projector device 10a, and this computer screen passes through the video signal reception unit 11a-1 and the signal processing unit 14a of the projector device 10a. Is displayed on the display unit 15a.
FIG. 6 shows the computer screen displayed in this way. In the figure, application A41 is terminated, and only cursor 44 and application B42 are displayed.
[0067]
It should be noted that the cursor moving process can be performed on the computer screen displayed on the projector device 10a by pressing each direction moving button on the remote control device 30a and transmitting each direction moving command to the projector device 10a. .
At this time, the execution command is input to the cursor drawing control unit 12a-2 via the input information control unit 12a-1. Then, the position information after movement is calculated by the cursor drawing control unit 12a-2, stored in the storage unit 13a, set in the signal processing unit 14a, and the cursor after movement is displayed on the display unit 15a. .
[0068]
[Second Embodiment]
Next, a second embodiment of the present invention will be described with reference to FIG. This figure is a block diagram showing the configuration of the application control display system in the second embodiment of the present invention.
[0069]
In the application control display system of the present embodiment, the computer screen information transmitted from the computer device 20 to the projector device 10a is not converted into a video signal, but is converted into image data and then transmitted to the projector device 10a. Different from the first embodiment.
[0070]
That is, in FIG. 7, in the application control display system of the present embodiment, the video signal transmission unit 21-1 of the computer device 20 in the first embodiment is an image data transmission unit 21-3, and the projector device 10a The video signal receiving unit 11a-1 is an image data receiving unit 11a-3.
[0071]
In addition to the configuration in the first embodiment, the control unit 12a of the present embodiment includes an image data control unit 12a-4, and the data input to the image data receiving unit 11a-3 is the image data. It is configured to be output to the signal processing unit 14a via the control unit 12a-4.
About another structure, it is the same as that of each component in 1st embodiment, The function is also the same as that of 1st embodiment.
[0072]
The image data transmission unit 21-3 transmits the image data created by the control information processing unit 22 to the projector device 10a.
At this time, the control information processing unit 22 converts the video signal of the computer screen into image data, compresses it, and outputs it to the image data transmission unit 21-3. This image data can include resolution information.
Note that the image data transmission unit 21-3 can be provided with a function of converting a video signal into image data and a compression function.
[0073]
The image data receiving unit 11a-3 receives the image data from the image data transmitting unit 21-3 and outputs it to the image data control unit 12a-4.
The image data control unit 12a-4 expands (decompresses) the input image data, converts it into a video signal, and outputs it to the signal processing unit 14a.
It should be noted that this image data expansion function and conversion function can also be provided to the image data receiving unit 11a-3.
[0074]
Thus, according to the present embodiment, the computer screen transmitted from the computer apparatus 20 to the projector apparatus 10a can be handled as image data instead of a video signal.
For this reason, on the projector device 10a, it is possible to expect scalability in use, and it is possible to wirelessly transmit computer screen data.
[0075]
[Third embodiment]
Next, a third embodiment of the present invention will be described with reference to FIG. This figure is a block diagram showing the configuration of the application control display system in the third embodiment of the present invention.
[0076]
The application control display system of this embodiment is different from the second embodiment in that the input device 30 is a mouse 30b. Other configurations and functions are the same as those in the second embodiment.
In the present embodiment, the execution command is input to the projector device 10a using the mouse 30b.
[0077]
At this time, the input of the direction movement command in the second embodiment is input by the rotation of the rotating body of the mouse 30b.
The determination button 36a in the second embodiment can be performed by left clicking the mouse 30b. The display / non-display button 35a can be switched by right-clicking, for example, or can be switched by clicking any button for a predetermined time or longer.
[0078]
Further, in addition to the mouse 30b, various pointing devices such as a pointer device and a touch pad, and control keys of the projector device 10a main body can be used as the input device 30.
At this time, the pointing device can be operated in the same manner as the mouse 30b. Further, the operation by the control key of the projector device 10a main body can be performed in the same manner as the remote control device 30a.
[0079]
[Fourth embodiment]
Next, a fourth embodiment of the present invention will be described with reference to FIGS. FIG. 9 is a block diagram showing a configuration of an application control display system according to the fourth embodiment of the present invention.
[0080]
FIG. 10 is a diagram showing an example of a computer screen displayed in the application control display system of the fourth embodiment of the present invention, and FIG. 11 is a conceptual diagram of cursor position information set in the system. .
Further, FIG. 12 is a diagram showing an example of a computer screen on which a cursor is drawn in the system, and FIG. 13 is a conceptual diagram showing frame information. FIG. 14 is a diagram illustrating movement of a virtual frame, and FIG. 15 is a diagram illustrating an example of a computer screen on which a command is executed.
[0081]
This embodiment is different from the second embodiment in that an application of the computer device 20 is moved on the projector device 10a.
In FIG. 9, in addition to the configuration of the second embodiment, the projector device 10a includes a frame information receiving unit 11a-4 in the transmission / reception unit 11a and a frame drawing control unit 12a-5 in the control unit 12a.
[0082]
In addition to the configuration of the second embodiment, the computer device 20 includes a frame information transmission unit 21-4 in the transmission / reception unit 21. Furthermore, the storage unit 13a stores frame information and the like in addition to the cursor position information.
The remote control device 30a has a move button 37a and a cancel button 38a in addition to the configuration of the second embodiment. Other configurations and functions thereof are the same as those in the second embodiment.
[0083]
The frame information receiving unit 11a-4 receives the frame information from the computer device 20, and outputs it to the frame drawing control unit 12a-5.
The frame information is information indicating that the title bar of the application arranged at the cursor position has been selected, frame position information, and information such as the application frame size.
[0084]
The information indicating that the title bar of the application placed at the cursor position has been selected can be, for example, the application name.
Alternatively, in more detail, flag information indicating selection, information indicating a title bar in the application, and the like may be included, and the details should be combined with the contents of application control to be realized. be able to. It can also be omitted.
The frame position information can be expressed by, for example, upper left and lower right coordinates of the frame. The frame size can be expressed by the horizontal width and height of the frame.
[0085]
When the frame drawing control unit 12a-5 receives the frame information from the frame information receiving unit 11a-4, the frame drawing control unit 12a-5 sets the cursor position information, the frame position information, and the frame size in the signal processing unit 14a. A frame is drawn and displayed on the display unit 15a.
The frame information transmission unit 21-4 of the computer device 20 transmits the frame information input from the control information processing unit 22 to the projector device 10a.
[0086]
The move button 37a of the remote control device 30a is used when moving an application on a computer screen.
Normally, when each direction change button is pressed, the cursor can be moved in response to the press. However, the cursor is moved to the title bar of the application, and the selection button 36a is selected and moved. The application can be moved by pressing each direction change button after pressing the button 37a.
[0087]
The cancel button 38a is an execution command that can be canceled when the cursor selects the application title bar and is in a draggable state. In addition, a function for canceling the executed command can be provided.
[0088]
Next, the processing procedure of the application control display system in computer screen display will be described with reference to FIG.
First, the control information processing unit 22 of the computer device 20 converts the video signal of the computer screen into image data, compresses it, and outputs it to the image data transmission unit 21-3.
[0089]
The image data transmitting unit 21-3 transmits this image data to the image data receiving unit 11a-3 of the projector device 10a.
The conversion function and the compression function may be provided not on the control information processing unit 22 but on the image data transmission unit 21-3.
[0090]
When the image data receiving unit 11a-3 of the projector device 10a receives the image data, it outputs this to the image data control unit 12a-4 of the control unit 12a.
Then, the image data control unit 12a-4 expands the input image data, converts it into a video signal, and outputs this to the signal processing unit 14a. And the signal processing part 14a displays this on the display part 15a. At this time, the expansion function and the conversion function may be provided to the image data receiving unit 11a-3.
FIG. 10 shows an example of the computer screen displayed in this way. In the figure, an application A41 having a title bar 45 is displayed.
[0091]
Next, when a cursor display command is input from the remote control device 30a, the input information control unit 12a-1 receives this and outputs it to the cursor drawing control unit 12a-2.
The cursor drawing control unit 12a-2 acquires the cursor position information from the storage unit 13a and sets it in the signal processing unit 14a. The signal processing unit 14a draws the cursor at the set screen position and displays the cursor. Display on the unit 15a. FIG. 11 is a conceptual diagram of cursor position information set in this way.
This figure shows that the position information of the cursor 44 is coordinates (400, 100) as an example, and the cursor 44 is placed at coordinates (400, 100) on the computer screen with respect to the signal processing unit 14a. Settings are made to display.
[0092]
Based on the set cursor position information, the signal processing unit 14a draws a cursor at the corresponding screen position on the video signal of the computer screen, and outputs this to the display unit 15a for display. FIG. 12 shows an example of a computer screen on which the cursor 44 is displayed in this way.
[0093]
Next, in order to select the title bar 45 with the cursor 44, when a determination command is input from the remote control device 30a, the input information control unit 12a-1 receives this and outputs it to the control information output unit 12a-3. To do.
The control information output unit 12a-3 acquires the cursor position information from the storage unit 13a, outputs the cursor position information and the information of the determination command to the control information transmission unit 11a-2, and the control information transmission unit 11a-2 Is transmitted to the computer device 20.
[0094]
The control information receiving unit 21-2 of the computer device 20 receives the cursor position information and the determination command information from the projector device 10 a and outputs them to the control information processing unit 22.
The control information processing unit 22 stores whether or not an application exists at the input cursor position. 23 If it exists, the frame position information and frame size information of the application A41 are stored in the storage unit. 23 Get from.
Then, the frame information is transmitted to the projector device 10a via the frame information transmission unit 21-4.
[0095]
The frame information receiving unit 11a-4 of the projector device 10a receives the frame information and outputs it to the frame drawing control unit 12a-5.
The frame drawing control unit 12a-5 stores the frame information in the storage unit 13a and sets the frame information in the signal processing unit 14a. In addition, the cursor drawing control unit 12a-2 acquires the cursor position information from the storage unit 13a and sets it in the signal processing unit 14a.
[0096]
Then, the signal processing unit 14a draws a frame and a cursor at each screen position based on these pieces of information, and displays them on the display unit 15a.
FIG. 13 is a conceptual diagram of the frame information set in the signal processing unit 14a in this way. In the figure, a frame A 41a is set.
[0097]
As shown in FIG. 10, the frame A41a is already displayed as the application A41 on the projector device 10a first.
However, at this time, the projector device 10a does not recognize the frame of the application A41, but only recognizes the entire computer screen as an image, and sets the frame A41a in the signal processing unit 14a in this embodiment. Thus, the application A41 can be grasped independently.
[0098]
Therefore, the computer screen displayed in this manner is visually the same as the computer screen shown in FIG. 10, but the computer screen displayed after setting the frame A41a is capable of controlling the application A41. It has become.
[0099]
Next, it is assumed that the frame A 41a is moved as shown in FIG. At this time, after the movement command is input from the remote control device 30a, the information for moving the frame A41a can be input to the projector device 10a by operating each direction movement command.
[0100]
Then, based on the input execution command, the position information of the moved frame and the cursor is obtained as a signal processing unit through the input information control unit 12a-1, the cursor drawing control unit 12a-2, and the frame drawing control unit 12a-5. The frame and the cursor after being set are displayed on the display unit 15a.
[0101]
Next, when a determination command is input from the remote control device 30a, the determination command is output to the control information output unit 12a-3 via the input information control unit 12a-1. Then, the control information output unit 12a-3 transmits this determination command to the computer device 20 through the control information transmission unit 11a-2 together with the cursor position information, frame information, and the like in the storage unit 13a.
[0102]
The control information receiving unit 21-2 of the computer device 20 receives these, outputs them to the control information processing unit 22, stores them in the storage unit 23, redraws the computer screen based on these information, The data is converted into data, compressed, and output to the image data transmitter 21-3.
And it transmits to the projector apparatus 10a from the image data transmission part 21-3, and is displayed similarly to the above-mentioned case.
[0103]
FIG. 15 shows an example of the computer screen displayed on the projector device 10a in this way. In the figure, the application A41 is displayed at a position moved from the position of FIG. 10 based on the execution command input from the remote control device 30a to the projector device 10a.
[0104]
In the present embodiment, the computer screen after the application A41 is moved is redrawn and displayed on the projector device 10a. However, this is because data such as a desktop screen under the application A41 before the movement is displayed. This is because the projector apparatus 10a does not have the above.
[0105]
Therefore, for example, the redrawing step can be omitted by first performing a process of transmitting and holding the desktop screen of the computer screen to the projector device 10a.
That is, it is possible to omit redrawing of the computer screen only by updating the information in the storage unit 23 in the computer device 20 based on the frame information after movement transmitted from the projector device 10a.
[0106]
[Fifth embodiment]
Next, a fifth embodiment of the present invention will be described with reference to FIG. This figure is a block diagram showing the configuration of the application control display system in the fifth embodiment of the present invention.
[0107]
Similar to the third embodiment, the application control display system of the present embodiment is different from the fourth embodiment in that the input device 30 is a mouse 30b. Other configurations and functions are the same as those in the fourth embodiment.
In addition to the mouse 30b, various pointing devices such as a pointer device and a touch pad, and control keys of the projector device 10a main body can be used as the input device 30 as in the third embodiment.
[0108]
In the above embodiment, the application is terminated or moved as the control of the application. However, in the case of other control, for example, an application having a plurality of pages, the page can be switched.
In this case, an execution command of “next page” or “previous page” is given to the remote control device 30a, and the control is performed by the input information control unit 12a-1, the control information output unit 12a-3, and the computer device in the projector device 10a. This can be done by giving 20 control information processing units 22 or the like.
[0109]
The present invention is not limited to the above embodiment. For example, the computer screen can be handled as a video signal and the application can be moved by combining the first embodiment and the fourth embodiment. .
In addition, the input device 30 can be input from the keyboard, and the design can be changed as appropriate by inputting characters to the display device 10 and adding special control.
[0110]
【The invention's effect】
As described above, according to the present invention, an application on a computer screen transmitted and displayed from a computer device to a display device can be controlled only by the input device of the display device.
[0111]
At this time, since only one cursor can be displayed and controlled without displaying two cursors for the computer device and the display device, the operability can be improved.
Furthermore, since the amount of data transmitted and received between the computer device and the display device can be reduced, a high processing speed can be obtained and it can be made suitable for presentation.
[Brief description of the drawings]
FIG. 1 is a block diagram showing an outline of a configuration of an application control display system according to a first embodiment of the present invention.
FIG. 2 is a block diagram showing a configuration of an application control display system according to the first embodiment of this invention.
FIG. 3 is a diagram showing an example of a computer screen displayed in the application control display system of the first embodiment of the present invention.
FIG. 4 is a conceptual diagram of cursor position information set in the application control display system of the first embodiment of the present invention.
FIG. 5 is a diagram showing an example of a computer screen on which a cursor is drawn in the application control display system of the first embodiment of the present invention.
FIG. 6 is a diagram showing an example of a computer screen on which a command is executed in the application control display system of the first embodiment of the present invention.
FIG. 7 is a block diagram showing a configuration of an application control display system according to a second embodiment of the present invention.
FIG. 8 is a block diagram showing a configuration of an application control display system according to a third embodiment of the present invention.
FIG. 9 is a block diagram showing a configuration of an application control display system according to a fourth embodiment of the present invention.
FIG. 10 is a diagram showing an example of a computer screen displayed in the application control display system of the fourth embodiment of the present invention.
FIG. 11 is a conceptual diagram showing cursor position information set in the application control display system of the fourth embodiment of the present invention.
FIG. 12 is a diagram showing an example of a computer screen on which a cursor is drawn in the application control display system according to the fourth embodiment of the present invention.
FIG. 13 is a conceptual diagram showing frame information in the application control display system of the fourth embodiment of the present invention.
FIG. 14 is a diagram showing frame movement in the application control display system according to the fourth embodiment of the present invention;
FIG. 15 is a diagram showing an example of a computer screen on which a command is executed in the application control display system according to the fourth embodiment of the present invention.
FIG. 16 is a block diagram showing a configuration of an application control display system according to a fifth embodiment of the present invention.
[Explanation of symbols]
10 Display device
10a Projector device
11, 11a transceiver
11a-1 video signal receiver
11a-2 Control information transmitter
11a-3 Image data receiver
11a-4 Frame information receiver
12, 12a control unit
12a-1 Input information control unit
12a-2 Cursor drawing control unit
12a-3 Control information output unit
12a-4 Image data control unit
12a-5 Frame drawing control unit
13, 13a storage unit
14, 14a Signal processor
15, 15a Display section
20 Computer equipment
21 Transceiver
21-1 Video signal transmitter
21-2 Control information receiver
21-3 Image data transmission unit
21-4 Frame information transmitter
22 Control information processing section
23 Memory unit
30 Input device
30a Remote control device
30b mouse
31a Upward movement button
32a Move left button
33a Move right button
34a Downward movement button
35a Show / Hide button
36a OK button
37a Move button
38a Cancel button
41 Application A
41a Frame A (before movement)
41b Frame A (after movement)
42 Application B
43 Exit button
44 cursor
45 Title bar

Claims (10)

入力装置からディスプレイ装置に入力される一定の実行コマンドに対し、当該ディスプレイ装置とコンピュータ装置間でデータの送受信を行うことなく、当該ディスプレイ装置に表示されたコンピュータ画面上で、カーソル及びアプリケーションを制御するアプリケーション制御ディスプレイシステムであって、
入力装置から入力した第一の実行コマンドにもとづいて、カーソル位置情報を信号処理部に出力することにより、前記カーソル位置情報にもとづき前記コンピュータ画面を信号処理部により表示部に再表示させて、カーソルを前記コンピュータ画面上に表示し、当該カーソルを移動させる場合、前記入力装置から入力された第二の実行コマンドにもとづいて、移動後のカーソル位置情報を信号処理部に出力することにより、前記移動後のカーソル位置情報にもとづき前記コンピュータ画面を信号処理部により表示部に再表示させるとともに、前記入力装置から入力した第三の実行コマンド及びカーソル位置情報を送受信部に出力する制御部と、前記制御部から入力した前記第三の実行コマンド及び前記カーソル位置情報を前記コンピュータ装置に送信し、かつ、前記コンピュータ装置から送信されてきたコンピュータ画面の映像信号、又は前記コンピュータ装置から送信されてきた、前記第三の実行コマンド及び前記カーソル位置情報にもとづいて再描画されたコンピュータ画面の映像信号を受信して、当該映像信号を信号処理部に出力する送受信部と、前記送受信部から入力した前記映像信号又は前記制御部から入力したカーソル位置情報にもとづいて、前記コンピュータ画面を前記表示部に表示する前記信号処理部を備えた前記ディスプレイ装置と、
前記コンピュータ画面の映像信号を前記ディスプレイ装置に送信するとともに、前記ディスプレイ装置から受信した前記第三の実行コマンド及び前記カーソル位置情報にもとづいてコンピュータ画面を再描画し、再描画したコンピュータ画面の映像信号を前記ディスプレイ装置に送信する前記コンピュータ装置と、
前記ディスプレイ装置に前記第一の実行コマンド、前記第二の実行コマンド、及び前記第三の実行コマンドを入力する前記入力装置を有する
ことを特徴とするアプリケーション制御ディスプレイシステム。 To certain execution commands from an input device are entered into the display device, without performing transmission and reception of data between the display device and the computer device, in the display device to display computer screen, to control the cursor and applications An application controlled display system,
Based on the first execution command input from the input device, the cursor position information is output to the signal processing unit, and the computer screen is redisplayed on the display unit by the signal processing unit based on the cursor position information. Is displayed on the computer screen and the cursor is moved, the cursor position information after the movement is output to the signal processing unit on the basis of the second execution command input from the input device. A control unit for causing the signal processing unit to re-display the computer screen based on subsequent cursor position information on the display unit, and outputting a third execution command and cursor position information input from the input device to the transmission / reception unit; The third execution command and the cursor position information input from the computer And the computer screen redrawn based on the video signal of the computer screen transmitted from the computer device or the third execution command and the cursor position information transmitted from the computer device. The computer screen based on the video signal input from the transmission / reception unit or the cursor position information input from the control unit. The display device including the signal processing unit to be displayed on a display unit;
The computer screen image signal is transmitted to the display device, the computer screen is redrawn based on the third execution command and the cursor position information received from the display device, and the redrawed image signal of the computer screen is displayed. The computer device for transmitting to the display device;
The display device in the first execution command, the second execution command, and application control display system that comprises said input device for inputting the third execution command. 入力装置からディスプレイ装置に入力される一定の実行コマンドに対し、当該ディスプレイ装置とコンピュータ装置間でデータの送受信を行うことなく、当該ディスプレイ装置に表示されたコンピュータ画面上で、カーソル及びアプリケーションを制御するアプリケーション制御ディスプレイシステムであって、
入力装置から入力した第一の実行コマンドにもとづいて、カーソル位置情報を信号処理部に出力することにより、前記カーソル位置情報にもとづき前記コンピュータ画面を信号処理部により表示部に再表示させて、カーソルを前記コンピュータ画面上に表示し、当該カーソルを移動させる場合、前記入力装置から入力された第二の実行コマンドにもとづいて、移動後のカーソル位置情報を信号処理部に出力することにより、前記移動後のカーソル位置情報にもとづき前記コンピュータ画面を信号処理部により表示部に再表示させるとともに、前記入力装置から入力した第三の実行コマンド及びカーソル位置情報を送受信部に出力し、かつ、前記送受信部から入力した画像データを映像信号に変換して前記信号処理部に出力する制御部と、前記制御部から入力した前記第三の実行コマンド及び前記カーソル位置情報を前記コンピュータ装置に送信し、かつ、前記コンピュータ装置から送信されてきたコンピュータ画面の画像データ、又は前記コンピュータ装置から送信されてきた、前記第三の実行コマンド及び前記カーソル位置情報にもとづいて再描画されたコンピュータ画面の画像データを受信して、当該画像データを制御部に出力する送受信部と、前記制御部から入力した前記映像信号又は前記制御部から入力したカーソル位置情報にもとづいて、前記コンピュータ画面を前記表示部に表示する前記信号処理部を備えた前記ディスプレイ装置と、
前記コンピュータ画面の映像信号を画像データに変換し、この画像データを前記ディスプレイ装置に送信するとともに、前記ディスプレイ装置から受信した前記第三の実行コマンド及び前記カーソル位置情報にもとづいてコンピュータ画面を再描画し、再描画したコンピュータ画面の映像信号を画像データに変換し、この画像データを前記ディスプレイ装置に送信する前記コンピュータ装置と、
前記ディスプレイ装置に前記第一の実行コマンド、前記第二の実行コマンド、及び前記第三の実行コマンドを入力する前記入力装置を有する
ことを特徴とするアプリケーション制御ディスプレイシステム。 To certain execution commands from an input device are entered into the display device, without performing transmission and reception of data between the display device and the computer device, in the display device to display computer screen, to control the cursor and applications An application controlled display system,
Based on the first execution command input from the input device, the cursor position information is output to the signal processing unit, and the computer screen is redisplayed on the display unit by the signal processing unit based on the cursor position information. Is displayed on the computer screen and the cursor is moved, the cursor position information after the movement is output to the signal processing unit on the basis of the second execution command input from the input device. Based on the subsequent cursor position information, the signal processing unit redisplays the computer screen on the display unit, and outputs a third execution command and cursor position information input from the input device to the transmission / reception unit, and the transmission / reception unit A control unit that converts the image data input from the video signal into a video signal and outputs the video signal; The third execution command input from the control unit and the cursor position information are transmitted to the computer device, and image data of a computer screen transmitted from the computer device, or transmitted from the computer device, A transmission / reception unit that receives image data of a computer screen redrawn based on the third execution command and the cursor position information and outputs the image data to the control unit; and the video signal input from the control unit Or the display device comprising the signal processing unit for displaying the computer screen on the display unit based on the cursor position information input from the control unit ;
The video signal of the computer screen is converted into image data, the image data is transmitted to the display device, and the computer screen is redrawn based on the third execution command and the cursor position information received from the display device. The computer device that converts the image signal of the redrawn computer screen into image data and transmits the image data to the display device;
The display device in the first execution command, the second execution command, and application control display system that comprises said input device for inputting the third execution command. 前記コンピュータ装置が、前記ディスプレイ装置から送信されてきた第四の実行コマンド及びカーソル位置情報にもとづいて、当該カーソル位置情報に対応するフレーム情報を記憶部から取得し、このフレーム情報を前記ディスプレイ装置に送信し、
前記送受信部が、前記フレーム情報を前記コンピュータ装置から受信して前記制御部に出力し、
前記制御部が、前記フレーム情報を前記信号処理部に出力し、前記フレーム情報にもとづき前記コンピュータ画面を前記表示部に再表示させ、前記フレーム情報にもとづき表示されたフレームを移動させる場合、前記入力装置から入力された第五の実行コマンドにもとづいて、移動後のカーソル位置情報及び移動後のフレーム情報を前記信号処理部に出力し、前記移動後のカーソル位置情報及び前記移動後のフレーム情報にもとづき前記コンピュータ画面を前記表示部に再表示させるとともに、前記入力装置から入力された第六の実行コマンド、前記カーソル位置情報及び前記フレーム情報を前記送受信部に出力し、
前記送受信部が、前記第六の実行コマンド、前記カーソル位置情報及び前記フレーム情報を前記コンピュータ装置に送信して、
前記コンピュータ装置が、送信されてきた前記第六の実行コマンド、前記カーソル位置情報及び前記フレーム情報にもとづき前記コンピュータ画面を再描画して、このコンピュータ画面を前記ディスプレイ装置に送信し、
前記送受信部が、再描画されたコンピュータ画面を前記コンピュータ装置から受信し、受信したコンピュータ画面が画像データである場合には、このコンピュータ画面を、前記制御部を介し、映像信号に変換して前記信号処理部に出力し、映像信号である場合には、直接前記信号処理部に出力し、
前記信号処理部が、前記コンピュータ画面を前記表示部に表示する
ことを特徴とする請求項１又は２記載のアプリケーション制御ディスプレイシステム。Based on the fourth execution command and cursor position information transmitted from the display device, the computer device acquires frame information corresponding to the cursor position information from the storage unit, and sends the frame information to the display device. Send
The transmission / reception unit receives the frame information from the computer device and outputs the frame information to the control unit;
When the control unit outputs the frame information to the signal processing unit, causes the computer screen to be redisplayed on the display unit based on the frame information, and moves the displayed frame based on the frame information, the input Based on the fifth execution command input from the apparatus, the cursor position information after movement and the frame information after movement are output to the signal processing unit, and the cursor position information after movement and the frame information after movement are output. Based on the above, the computer screen is redisplayed on the display unit, and the sixth execution command input from the input device, the cursor position information, and the frame information are output to the transmission / reception unit,
The transmission / reception unit transmits the sixth execution command, the cursor position information, and the frame information to the computer device,
The computer device redraws the computer screen based on the transmitted sixth execution command, the cursor position information and the frame information, and transmits the computer screen to the display device.
The transmission / reception unit receives the redrawn computer screen from the computer device, and when the received computer screen is image data, the computer screen is converted into a video signal via the control unit, and the Output to the signal processing unit, if it is a video signal, directly output to the signal processing unit,
The application control display system according to claim 1 , wherein the signal processing unit displays the computer screen on the display unit . 前記ディスプレイ装置が、プロジェクタ装置であり、
前記入力装置が、リモコン装置、ポインティング装置又はディスプレイ装置本体のコントロールキーである
ことを特徴とする請求項１〜３のいずれかに記載のアプリケーション制御ディスプレイシステム。The display device is a projector device;
The application control display system according to any one of claims 1 to 3, wherein the input device is a control key of a remote control device, a pointing device, or a display device main body. 入力装置から入力される一定の実行コマンドに対し、コンピュータ装置とデータの送受信を行うことなく、コンピュータ画面上でカーソル及びアプリケーションを制御するアプリケーション制御ディスプレイ装置であって、
入力装置から入力した第一の実行コマンドにもとづいて、カーソル位置情報を信号処理部に出力することにより、前記カーソル位置情報にもとづき前記コンピュータ画面を信号処理部により表示部に再表示させて、カーソルを前記コンピュータ画面上に表示し、当該カーソルを移動させる場合、前記入力装置から入力された第二の実行コマンドにもとづいて、移動後のカーソル位置情報を信号処理部に出力することにより、前記移動後のカーソル位置情報にもとづき前記コンピュータ画面を信号処理部により表示部に再表示させるとともに、前記入力装置から入力した第三の実行コマンド及びカーソル位置情報を送受信部に出力する制御部と、
前記制御部から入力した前記第三の実行コマンド及びカーソル位置情報を前記コンピュータ装置に送信し、かつ、前記コンピュータ装置から送信されてきたコンピュータ画面の映像信号、又は前記コンピュータ装置から送信されてきた、前記第三の実行コマンド及び前記カーソル位置情報にもとづいて再描画されたコンピュータ画面の映像信号を受信して、当該映像信号を信号処理部に出力する送受信部と、
前記送受信部から入力した前記映像信号又は前記制御部から入力したカーソル位置情報にもとづいて、前記コンピュータ画面を前記表示部に表示する前記信号処理部を有する
ことを特徴とするアプリケーション制御ディスプレイ装置。 To certain execution commands are entered from the input device, without performing transmission and reception of computer equipment and data, an application control display apparatus for controlling a cursor and applications on a computer screen,
Based on the first execution command input from the input device, by outputting the cursor position information to the signal processing unit, by re-displayed on the display unit by the signal processing unit of the computer screen based on the cursor position information, the cursor Is displayed on the computer screen and the cursor is moved, the cursor position information after the movement is output to the signal processing unit on the basis of the second execution command input from the input device. a controller for outputting Rutotomoni re displayed on the display unit, the third execution commands and cursor position information inputted from the input device to the transceiver unit by the signal processing unit of the computer screen based on the cursor position information after,
The third execution command and cursor position information input from the control unit are transmitted to the computer device, and a video signal of a computer screen transmitted from the computer device, or transmitted from the computer device, A transmission / reception unit that receives a video signal of a computer screen redrawn based on the third execution command and the cursor position information, and outputs the video signal to a signal processing unit;
Based on the video signal or the cursor position information input from the control unit inputted from the transceiver unit, the application control display device you comprises said signal processing unit for displaying the computer screen on the display unit. 入力装置から入力される一定の実行コマンドに対し、コンピュータ装置とデータの送受信を行うことなく、コンピュータ画面上でカーソル及びアプリケーションを制御するアプリケーション制御ディスプレイ装置であって、
入力装置から入力した第一の実行コマンドにもとづいて、カーソル位置情報を信号処理部に出力することにより、前記カーソル位置情報にもとづき前記コンピュータ画面を信号処理部により表示部に再表示させて、カーソルを前記コンピュータ画面上に表示し、当該カーソルを移動させる場合、前記入力装置から入力された第二の実行コマンドにもとづいて、移動後のカーソル位置情報を信号処理部に出力することにより、前記移動後のカーソル位置情報にもとづき前記コンピュータ画面を信号処理部により表示部に再表示させるとともに、前記入力装置から入力した第三の実行コマンド及びカーソル位置情報を送受信部に出力し、かつ、前記送受信部から入力した画像データを映像信号に変換して前記信号処理部に出力する制御部と、
前記制御部から入力した前記第三の実行コマンド及びカーソル位置情報を前記コンピュータ装置に送信し、かつ、前記コンピュータ装置から送信されてきたコンピュータ画面の画像データ、又は前記コンピュータ装置から送信されてきた、前記第三の実行コマンド及び前記カーソル位置情報にもとづいて再描画されたコンピュータ画面の画像データを受信して、当該画像データを制御部に出力する送受信部と、
前記制御部から入力した前記映像信号又は前記制御部から入力したカーソル位置情報にもとづいて、前記コンピュータ画面を前記表示部に表示する前記信号処理部を有する
ことを特徴とするアプリケーション制御ディスプレイ装置。 To certain execution commands are entered from the input device, without performing transmission and reception of computer equipment and data, an application control display apparatus for controlling a cursor and applications on a computer screen,
Based on the first execution command input from the input device, by outputting the cursor position information to the signal processing unit, by re-displayed on the display unit by the signal processing unit of the computer screen based on the cursor position information, the cursor Is displayed on the computer screen and the cursor is moved, the cursor position information after the movement is output to the signal processing unit on the basis of the second execution command input from the input device. Rutotomoni re displayed on the display unit, the third execution commands and cursor position information inputted from the input device and outputs to the receiving unit by the signal processing unit of the computer screen based on the cursor position information after, and the transceiver A control unit that converts image data input from the unit into a video signal and outputs the video signal to the signal processing unit;
The third execution command and the cursor position information input from the control unit are transmitted to the computer device, and image data of a computer screen transmitted from the computer device, or transmitted from the computer device; A transmission / reception unit that receives the image data of the computer screen redrawn based on the third execution command and the cursor position information, and outputs the image data to the control unit;
Based on the video signal or the cursor position information input from the control unit inputted from the control section, the application control display device you comprises said signal processing unit for displaying the computer screen on the display unit. 前記送受信部が、前記コンピュータ装置により第四の実行コマンド及びカーソル位置情報にもとづき前記コンピュータ装置における記憶部から取得された当該カーソル位置情報に対応するフレーム情報を受信して、このフレーム情報を前記制御部に出力し、
前記制御部が、前記フレーム情報を前記信号処理部に出力し、前記フレーム情報にもとづき前記コンピュータ画面を前記表示部に再表示させ、前記フレーム情報にもとづき表示されたフレームを移動させる場合、前記入力装置から入力された第五の実行コマンドにもとづいて、移動後のカーソル位置情報及び移動後のフレーム情報を前記信号処理部に出力し、前記移動後のカーソル位置情報及び前記移動後のフレーム情報にもとづき前記コンピュータ画面を前記表示部に再表示させるとともに、前記入力装置から入力された第六の実行コマンド、前記カーソル位置情報及び前記フレーム情報を前記送受信部に出力し、
前記送受信部が、前記第六の実行コマンド、前記カーソル位置情報及び前記フレーム情報を前記コンピュータ装置に送信して、前記コンピュータ装置により前記第六の実行コマンド、前記カーソル位置情報及び前記フレーム情報にもとづき再描画されたコンピュータ画面を前記コンピュータ装置から受信し、受信したコンピュータ画面が画像データである場合には、このコンピュータ画面を、前記制御部を介し、映像信号に変換して前記信号処理部に出力し、映像信号である場合には、直接前記信号処理部に出力し、
前記信号処理部が、前記コンピュータ画面を前記表示部に表示する
ことを特徴とする請求項５又は６記載のアプリケーション制御ディスプレイ装置。The transmission / reception unit receives frame information corresponding to the cursor position information acquired from the storage unit in the computer device based on a fourth execution command and cursor position information by the computer device, and controls the frame information. Output to
When the control unit outputs the frame information to the signal processing unit, causes the computer screen to be redisplayed on the display unit based on the frame information, and moves the displayed frame based on the frame information, the input Based on the fifth execution command input from the apparatus , the cursor position information after movement and the frame information after movement are output to the signal processing unit, and the cursor position information after movement and the frame information after movement are output. Based on the above, the computer screen is redisplayed on the display unit, and the sixth execution command input from the input device, the cursor position information, and the frame information are output to the transmission / reception unit,
The transmission / reception unit transmits the sixth execution command, the cursor position information, and the frame information to the computer device, and the computer device uses the sixth execution command, the cursor position information, and the frame information based on the sixth execution command. When the redrawn computer screen is received from the computer device and the received computer screen is image data, the computer screen is converted into a video signal via the control unit and output to the signal processing unit. If it is a video signal, it is output directly to the signal processing unit,
The application control display device according to claim 5, wherein the signal processing unit displays the computer screen on the display unit. 入力装置からディスプレイ装置に入力される一定の実行コマンドに対し、当該ディスプレイ装置とコンピュータ装置間でデータの送受信を行うことなく、当該ディスプレイ装置に表示されたコンピュータ画面上で、カーソル及びアプリケーションを制御するアプリケーション制御ディスプレイ方法であって、
前記コンピュータ装置が、コンピュータ画面の映像信号を前記ディスプレイ装置に送信し、
前記ディスプレイ装置が、送信されてきた前記映像信号によるコンピュータ画面を表示するとともに、
前記ディスプレイ装置が、前記入力装置から入力された第一の実行コマンドにもとづき、カーソルを前記コンピュータ画面上に表示し、
前記ディスプレイ装置が、当該カーソルを移動させる場合、前記入力装置から入力された第二の実行コマンドと、カーソル位置情報にもとづいて前記コンピュータ画面情報を再表示し、
前記ディスプレイ装置が、前記入力装置から入力された第三の実行コマンド、及びカーソル位置情報を前記コンピュータ装置に送信し、
前記コンピュータ装置が、前記第三の実行コマンド及び前記カーソル位置情報にもとづきコンピュータ画面を再描画するとともに、再描画したコンピュータ画面の映像信号を前記ディスプレイ装置に送信し、
前記ディスプレイ装置が、前記再描画したコンピュータ画面を表示する
ことを特徴とするアプリケーション制御ディスプレイ方法。 To certain execution commands from an input device are entered into the display device, without performing transmission and reception of data between the display device and the computer device, in the display device to display computer screen, to control the cursor and applications Application controlled display method comprising:
The computer device transmits a video signal of a computer screen to the display device;
The display device displays a computer screen by the transmitted video signal,
The display device displays a cursor on the computer screen based on a first execution command input from the input device,
When the display device moves the cursor, the computer screen information is displayed again based on the second execution command input from the input device and the cursor position information,
The display device transmits a third execution command input from the input device and cursor position information to the computer device;
The computer device redraws the computer screen based on the third execution command and the cursor position information, and transmits a video signal of the redrawn computer screen to the display device.
It said display device, the application control display how to and displaying the redrawn computer screen. 入力装置からディスプレイ装置に入力される一定の実行コマンドに対し、当該ディスプレイ装置とコンピュータ装置間でデータの送受信を行うことなく、当該ディスプレイ装置に表示されたコンピュータ画面上で、カーソル及びアプリケーションを制御するアプリケーション制御ディスプレイ方法であって、
前記コンピュータ装置が、コンピュータ画面の映像信号を画像データに変換して前記ディスプレイ装置に送信し、
前記ディスプレイ装置が、送信されてきた前記画像データによるコンピュータ画面を表示するとともに、
前記ディスプレイ装置が、前記入力装置から入力された第一の実行コマンドにもとづき、カーソルを前記コンピュータ画面上に表示し、
前記ディスプレイ装置が、当該カーソルを移動させる場合、前記入力装置から入力された第二の実行コマンドと、カーソル位置情報にもとづいて前記コンピュータ画面情報を再表示し、
前記ディスプレイ装置が、前記入力装置から入力された第三の実行コマンド、及びカーソル位置情報を前記コンピュータ装置に送信し、
前記コンピュータ装置が、前記第三の実行コマンド及び前記カーソル位置情報にもとづきコンピュータ画面を再描画するとともに、再描画したコンピュータ画面の映像信号を画像データに変換して前記ディスプレイ装置に送信し、
前記ディスプレイ装置が、前記再描画したコンピュータ画面を表示する
ことを特徴とするアプリケーション制御ディスプレイ方法。 To certain execution commands from an input device are entered into the display device, without performing transmission and reception of data between the display device and the computer device, in the display device to display computer screen, to control the cursor and applications Application controlled display method comprising:
The computer device converts a video signal of a computer screen into image data and transmits it to the display device,
The display device displays a computer screen based on the transmitted image data,
The display device displays a cursor on the computer screen based on a first execution command input from the input device,
When the display device moves the cursor, the computer screen information is displayed again based on the second execution command input from the input device and the cursor position information,
The display device transmits a third execution command input from the input device and cursor position information to the computer device;
The computer device redraws the computer screen based on the third execution command and the cursor position information, converts the redrawn computer screen video signal into image data, and transmits the image data to the display device.
It said display device, the application control display how to and displaying the redrawn computer screen. 前記コンピュータ装置が、前記ディスプレイ装置から送信されてきた第四の実行コマンド及びカーソル位置情報にもとづいて、当該カーソル位置情報に対応するフレーム情報を記憶部から取得し、このフレーム情報を前記ディスプレイ装置に送信し、
前記ディスプレイ装置が、送信されてきた前記フレーム情報にもとづき前記コンピュータ画面を再表示し、
前記ディスプレイ装置が、前記フレーム情報にもとづき表示されたフレームを移動させる場合、前記入力装置から入力された第五の実行コマンドと、カーソル位置情報及びフレーム情報にもとづいて前記コンピュータ画面情報を再表示するとともに、
前記ディスプレイ装置が、前記入力装置から入力された第六の実行コマンド、前記カーソル位置情報及び前記フレーム情報を前記コンピュータ装置に送信し、
前記コンピュータ装置が、送信されてきた前記第六のコマンド、前記カーソル位置情報及び前記フレーム情報にもとづき前記コンピュータ画面を再描画して、このコンピュータ画面を前記ディスプレイ装置に送信し、
前記ディスプレイ装置が、送信されてきた前記コンピュータ画面を表示する
ことを特徴とする請求項８又は９記載のアプリケーション制御ディスプレイ方法。Based on the fourth execution command and cursor position information transmitted from the display device, the computer device acquires frame information corresponding to the cursor position information from the storage unit, and sends the frame information to the display device. Send
The display device redisplays the computer screen based on the transmitted frame information,
When the display device moves the displayed frame based on the frame information, the computer screen information is redisplayed based on the fifth execution command input from the input device, the cursor position information, and the frame information. With
The display device transmits a sixth execution command inputted from the input device, the cursor position information and the frame information to the computer device;
The computer device redraws the computer screen based on the transmitted sixth command, the cursor position information and the frame information, and transmits the computer screen to the display device.
The application control display method according to claim 8 or 9, wherein the display device displays the transmitted computer screen.
JP2002109668A 2002-04-11 2002-04-11 Application control display system, apparatus and method for computer screen display Expired - Fee Related JP3996427B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002109668A JP3996427B2 (en) 2002-04-11 2002-04-11 Application control display system, apparatus and method for computer screen display

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002109668A JP3996427B2 (en) 2002-04-11 2002-04-11 Application control display system, apparatus and method for computer screen display

Publications (2)

Publication Number Publication Date
JP2003303092A JP2003303092A (en) 2003-10-24
JP3996427B2 true JP3996427B2 (en) 2007-10-24

Family

ID=29393069

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002109668A Expired - Fee Related JP3996427B2 (en) 2002-04-11 2002-04-11 Application control display system, apparatus and method for computer screen display

Country Status (1)

Country Link
JP (1) JP3996427B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8843591B2 (en) 2005-03-17 2014-09-23 International Business Machines Corporation Selectable repainting of updatable network distributable imagery
JP5115496B2 (en) * 2009-02-25 2013-01-09 大日本印刷株式会社 Content remote control system and remote control terminal

Also Published As

Publication number Publication date
JP2003303092A (en) 2003-10-24

Similar Documents

Publication Publication Date Title
JP5372357B2 (en) KVM switch, control method therefor, multi-monitor compatible switching system, and multi-monitor compatible switching method
JP5259772B2 (en) Electronic device, operation support method, and program
US20110225537A1 (en) Equipment with dual screens for controlling multi-computers and the operating method thereof
JP6089454B2 (en) Image distribution apparatus, display apparatus, and image distribution system
CN103502055A (en) Information display processing device
US20130176254A1 (en) Input apparatus, display apparatus, control method thereof and display system
KR100736040B1 (en) Method and apparatus for displaying movement of input device in OSD area
JP2006155327A (en) Remote operation system for computer
WO2019188532A1 (en) Display system and program
WO2017081991A1 (en) Ultrasonic diagnostic system
KR101943419B1 (en) Input apparatus, display apparatus, control method thereof and display system
JP6031750B2 (en) Display control apparatus, image display system, display control method, and program
US20060069764A1 (en) Computer switching device
JP2013239137A (en) Information processing apparatus, control method of information processing apparatus, and control program of information processing apparatus
JP2009205492A (en) Computer remote operation system
CN111061381A (en) Screen global input control system and method
JP6222124B2 (en) Image processing system, image processing device, terminal device, and program
JP2018137571A (en) Image processing device, program, and image processing method
JP2010182134A (en) Remote control system, control terminal device, and selection status display alternation method
JP3996427B2 (en) Application control display system, apparatus and method for computer screen display
JP6392573B2 (en) Multi display system
JPWO2014034189A1 (en) Display control method, computer program, display control apparatus, and image display system
CN104285199B (en) Cursor movement control method, computer program, cursor movement control device, and image display system
JP5115457B2 (en) Cursor movement control method, apparatus, and program
WO2019188531A1 (en) Display system and program

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20050818

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060307

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060508

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061226

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070226

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070724

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070802

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100810

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100810

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110810

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110810

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120810

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120810

Year of fee payment: 5

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120810

Year of fee payment: 5

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130810

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees