JP6135203B2 - 表示システムとその制御方法及び表示装置と画面制御サーバ並びにプログラム - Google Patents

表示システムとその制御方法及び表示装置と画面制御サーバ並びにプログラム Download PDF

Info

Publication number
JP6135203B2
JP6135203B2 JP2013047708A JP2013047708A JP6135203B2 JP 6135203 B2 JP6135203 B2 JP 6135203B2 JP 2013047708 A JP2013047708 A JP 2013047708A JP 2013047708 A JP2013047708 A JP 2013047708A JP 6135203 B2 JP6135203 B2 JP 6135203B2
Authority
JP
Japan
Prior art keywords
display
mode
image
terminal
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2013047708A
Other languages
English (en)
Other versions
JP2014174800A (ja
Inventor
一寿 有ヶ谷
一寿 有ヶ谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2013047708A priority Critical patent/JP6135203B2/ja
Priority to US14/167,233 priority patent/US9223433B2/en
Publication of JP2014174800A publication Critical patent/JP2014174800A/ja
Application granted granted Critical
Publication of JP6135203B2 publication Critical patent/JP6135203B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Description

この発明は、表示システムとその制御方法及び表示装置と画面制御サーバ並びにプログラムに関する。
従来から、大きな映像を表示する際、液晶ディスプレイやプロジェクタを複数並べて配置し、それらに協働して一つの映像を表示させるマルチディスプレイ技術が知られている。
また、昨今急速に普及しているタブレット型の携帯情報端末を表示装置として用いて同様のマルチディスプレイを実現する技術も知られている。このような技術については、例えば特許文献1に記載されている。
ところで、タブレット型のものをはじめとする従来の小型の携帯情報端末は、単体の場合には手で持って使用することを前提としているため、画面の外側に、比較的幅の広い額縁(ベゼル)を設けることが一般的である。
図13Aに、このような従来のタブレット型携帯情報端末の一例を示す。図13Bに、その携帯情報端末を用いてマルチディスプレイを行った例を示す。
図13Aからわかるように、従来のタブレット型携帯情報端末200には、ディスプレイの表示領域203の外側に、幅の広い額縁201を設けている。この額縁の部分には、見切り板を配置する等して、ディスプレイがユーザから視認できないようにしている。また、ディスプレイの表示画面に対する操作を受け付けるためのタッチパネルも、この額縁201の部分には設けていない。
したがって、ユーザは、この額縁201の部分を手に持つことにより、表示領域203に表示される画像を隠してしまうことなく、またタッチパネルに対して意図しない操作を行ってしまうことなく、タブレット型携帯情報端末200を安定して保持できる。
また、額縁201の内部に操作子としてボタン202を設け、ユーザからの操作を受け付け可能とすることも行われている。
しかしながら、このような幅広の額縁201を有するタブレット型携帯情報端末200でマルチディスプレイを行うと、図13Bに示すように、隣接する端末間において、額縁201が存在するため画像を表示できない領域が広く存在してしまう。このため、表示された画像の視認性が悪いという問題がある。
このような問題は、タブレットPC以外でも、ユーザが手に持って使用する表示装置を用いてマルチディスプレイを行おうとする場合には、同様に発生するものである。
このような問題を解決するためには、額縁の幅が狭い装置を用いることが考えられる。
図14に、額縁の狭いタブレット型パーソナルコンピュータ(以下「タブレットPC」という)の例を示す。図15に、図14に示したタブレットPCを用いてマルチディスプレイを行った例を示す。
図14に示すタブレットPC10は、装置の一面のほぼ全領域を、ディスプレイの表示領域52が占め、額縁51の幅を狭く構成している。装置を構成する素子のサイズや配置を工夫することにより、このような装置を製造すること自体は可能である。
そして、このようなタブレットPC10によりマルチディスプレイを行うと、図15に示すように、隣接する端末間で画像を表示できない領域の幅が狭く、図13Bの例と比べて表示される画像の視認性を改善することができる。
しかしながら、図14に示したような額縁51の幅が狭い構成では、単体で使用する際に、ユーザがディスプレイの表示領域52に触れないように装置を安定して手に持つことが難しいという問題がある。装置を安定して保持するためには指をディスプレイ側の面にあてがう必要があり、額縁51の幅が狭いと、この際に額縁51の領域をはみ出してしまうためである。その結果、ディスプレイに表示される画面の一部が指で隠れてしまうことになる。片手で装置の両側面を掴めるサイズでない場合には特にこの傾向が顕著である。
さらに、ディスプレイの表示領域52全体に対して操作を受け付け可能なように操作検出用センサを配置した場合、指がディスプレイ側の面に触れると、それがセンサにより操作と検出され、意図しない操作を行ってしまう可能性もある。この点も問題である。
この発明は、以上のような背景によりなされたものであり、表示システムが有する複数の表示装置によるマルチディスプレイと各表示装置の単体での使用とを快適に利用できるようにすることを目的とする。
この発明による表示システムは、画面制御サーバと複数の表示装置を有する表示システムであって、上記の目的を達成するため、
上記複数の表示装置はそれぞれ、
表示領域に対する操作を検出するセンサを備えたディスプレイと、上記画面制御サーバから受信するモードの移行要求に応じて、第1のモードと第2のモードを含む複数のモードを切り換える切換手段と、上記ディスプレイの表示領域のうち画像を表示させる有効領域の範囲を決定する決定手段と、上記有効領域以外では、上記センサによる操作の検出を無効化する第1の制御手段とを備え、
上記決定手段は、上記モードが上記切換手段によって上記第1のモードに切り換えられた場合には、上記ディスプレイの表示領域全体を、画像を表示させる有効領域の範囲と決定し、上記第2のモードに切り換えられた場合には、上記ディスプレイの表示領域の周縁部を除いた領域を、画像を表示させる有効領域の範囲と決定する手段であり、
上記画面制御サーバは、
上記複数の表示装置をそれぞれ端末装置として、該端末装置の数とその各端末装置の送信宛先を示す宛先情報を登録する端末情報記憶部と、
該端末情報記憶部に登録された上記宛先情報に基づいて上記各端末装置へ上記第1のモードへの移行要求を送信する手段と、
表示すべき全体画像のデータを、上記端末情報記憶部に登録されている上記端末装置の数に基づいて上記各端末装置に表示させるべき分割画像に分割し、その各分割画像を上記端末情報記憶部に登録されている上記宛先情報に基づいて、表示させるべき各端末装置に送信する分割画像生成送信部とを備えたものである。
上記構成によれば、表示システムが有する複数の表示装置によるマルチディスプレイと各表示装置の単体での使用とを快適に利用できるようにすることができる。
この発明の表示システムの実施形態における表示装置であるタブレットPCのハードウェア構成を示すブロック図である。 図1に示したタブレットPCにおける全体表示モードの表示例を示す図である。 部分表示モードの表示例を示す図である。 図1に示したタブレットPCの機能構成を示す図である。 図3に示した仮想操作子制御部の機能構成をより詳細に示す図である。 仮想操作子データの例を示す図である。 この発明の表示システムの実施形態における画面制御サーバのハードウェア構成を示す図である。 図6に示した画面制御サーバの機能構成を示す図である。 マルチディスプレイ登録要求を検出した場合に画面制御サーバのCPUが実行する処理のフローチャートである。 マルチディスプレイ終了指示を検出した場合に画面制御サーバのCPUが実行する処理のフローチャートである。 タブレットPCが部分表示モードから全体表示モードへの移行に係る処理のシーケンス例を示す図である。 タブレットPCが全体表示モードから部分表示モードへの移行に係る処理のシーケンスの第1例を示す図である。 タブレットPCが全体表示モードから部分表示モードへの移行に係る処理のシーケンスの第2例を示す図である。 従来のタブレット型携帯情報端末の一例を示す図である。 図13Aに示す携帯情報端末を用いてマルチディスプレイを行った例を示す図である。 額縁の狭いタブレットPCの例を示す外観図である。 図14に示すタブレットPCを用いてマルチディスプレイを行った例を示す図である。
以下、この発明を実施するための形態を図面に基づいて具体的に説明する。
まず、図1に、この発明の表示システムの実施形態における表示装置であるタブレットPCのハードウェア構成を示す。
図1に示すように、表示装置であるタブレットPC10は、CPU11、フラッシュメモリ12、RAM13、通信インタフェース(I/F)14、ディスプレイ15、タッチセンサ16、加速度センサ17を備え、これらをシステムバス18により接続して構成している。
そして、CPU11がRAM13をワークエリアとしてフラッシュメモリ12に記憶されたプログラムを実行することにより、タブレットPC10全体の動作を制御し、後述する額縁及び仮想操作子に関する制御をはじめとする種々の機能を実現することができる。
フラッシュメモリ12は、CPU11が実行するプログラムや、電源を切っても保存しておくべきデータを記憶する、書き換え可能な不揮発性記憶手段である。
RAM13は、CPU11のワークエリアとして用いたり、一時的に記憶すべきデータを記憶したりする揮発性記憶手段である。
通信I/F14は、後述の画面制御サーバ100をはじめ、種々の外部装置と通信を行うためのインタフェースである。ここでは無線通信が可能であるとするが、これには限られない。通信に用いるプロトコルも任意であるし、複数のI/Fを備えていてもよい。
ディスプレイ15は、所定の表示領域に画像を表示させる表示手段である。
タッチセンサ16は、ディスプレイ15に積層され、ディスプレイ15の表示領域に対する操作を検出する検出手段である。タッチセンサ16は、ここでは、ディスプレイ15の表示領域を覆うカバーガラスへのタッチ操作を検出するセンサとしているが、非接触で操作を検出するセンサを用いてもよい。
加速度センサ17は、タブレットPC10に対して働く加速度の向き及び大きさを計測するためのセンサである。検出する加速度には重力加速度も含む。従って加速度センサ17は、重力の向きを通じて、タブレットPC10の向きを検出することができる。例えば、ディスプレイ15の表示面が重力方向に対して垂直(表示面を上に向けて水平な机に置かれている場合など)か、傾いているか、等を検出することができる。また、タブレットPC10が動かされた場合、加速度変化を通じてその向きや大まかな距離を測定することができる。
以上のタブレットPC10の外観は、図14に示したものと同様である。すなわち、タブレットPC10の一面のほぼ全領域をディスプレイ15の表示領域52が占めるように構成し、額縁51の幅を狭くしている。
ここで、図2A及び図2Bに、タブレットPC10における2つのモードでの表示例を示す。
図2Aに示すのは、ディスプレイ15の表示領域52全体で画面の表示を行う全体表示モード(第1のモード)の表示例である。このモードは、複数のタブレットPC10が協働して大きなサイズの画面を表示するマルチディスプレイに適するモードである。
図2Bに示すのは、ディスプレイ15の表示領域52の周縁部53を額縁として用い、それ以外の部分で表示を行う部分表示モード(第2のモード)である。このモードは、タブレットPC10を単独で手に持って使用する場合に適するモードである。この部分表示モードにおいては、額縁とする周縁部53においては、タッチセンサ16による操作の検出を無効化すると共に、ディスプレイ15には、所定の額縁画像を表示させる。額縁画像は、何らかの固定の画像であっても、何の表示もせずに点灯していない画素をそのまま見せるものであってもよい。あるいは、何らかの動きのある画像であってもよい。
また、周縁部53には、表示部品による操作子として、仮想ボタン54を設けている。そして、周縁部53の中で、この仮想ボタン54を表示した部分のみはタッチセンサ16による操作の検出を有効にし、仮想ボタン54に対する操作があった場合に、CPU11がこれを検出できるようにする。
以上の全体表示モードと部分表示モードを設け、これを切換可能とした点が、タブレットPC10の一つの特徴である。
次に、このモード切換を実現するためのタブレットPC10の機能について説明する。
図3は、その機能構成を示す機能ブロック図である。図3には、上記のモード切換に関連する部分のみ示している。
図3に示すように、タブレットPC10は、オペレーティングシステム(OS)20の機能として、ディスプレイ制御部21、仮想操作子制御部22、タッチセンサ制御部23、加速度センサ制御部24、仮想額縁制御部30を備える。また、これ以外に、マルチディスプレイアプリ40を備える。ディスプレイ15、タッチセンサ16及び加速度センサ17は、図1に示したハードウェアである。
これらのうちディスプレイ制御部21は、ディスプレイ15の制御を行う機能を備える。具体的には、不図示の表示制御手段から渡される、各種アプリケーション(マルチディスプレイアプリ40も含む)からの要求により表示させる画面や、OS20の機能により表示させる画面のデータに基づき、所定の画素数の画像を生成してディスプレイ15に表示させる。
所定の画素数は、全体表示モードではディスプレイ15の表示領域全体の画素数である。部分表示モードでは、ディスプレイ15の表示領域のうち当該モードにおいて画像を表示させる有効領域の画素数である。従って、部分表示モードでは、全体表示モードの場合よりも縮小した画像をディスプレイに表示させることになる。また、部分表示モードでは、画像の表示位置が周縁部53を除いた表示領域の位置になるようディスプレイ15を制御する。
また、ディスプレイ制御部21は、部分表示モードでは、周縁部53への額縁画像の表示及び、仮想ボタン54の表示も、ディスプレイ15を制御して実行させる。
仮想操作子制御部22は、部分表示モードにおいて周縁部53に設ける仮想ボタン54等の操作子に関する制御を行う機能を備える。この制御の内容については、図4及び図5を用いて後述する。
タッチセンサ制御部23は、タッチセンサ16の制御を行う機能を備える。具体的には、タッチセンサ16が検出した操作の内容を示す情報を、表示中の画面を生成したアプリケーションあるいはOS20に渡す。ただし、部分表示モードでは、周縁部53に対する操作の情報は、アプリケーションやOS20に渡さず読み捨てることにより、周縁部53における操作の検出を無効化する。どの範囲が周縁部53かを示す情報は、部分表示モードの移行時に移行指示と共に仮想額縁制御部30から渡される。
ただし、周縁部53に設ける仮想ボタン54等の仮想操作子の位置への操作は、その操作子に対する操作として取り扱い、操作の内容を示す情報を、仮想操作子制御部22へ渡す。操作子の位置の情報は、仮想操作子制御部22から提供される。
加速度センサ制御部24は、加速度センサ17の制御を行う機能を備える。ここでは、加速度センサ17による加速度の検出結果から、タブレットPC10が傾けられたと判断した場合に、その旨を仮想額縁制御部30へ通知する。
例えば、一定時間の間、加速度の向き又は大きさが、「ディスプレイ15の表示領域と垂直で裏面に向かう方向かつ1G」から一定程度以上ずれた場合に、タブレットPC10が傾けられたと判断することができる。またその他にも、タブレットPC10を机の上で素早く回転させたり手に持って上下に振ったり等、タブレットPC10に人の力が加わっていると考えられる動きを検出した場合にも、仮想額縁制御部30へ通知するようにしてもよい。これらの動きを判定するための基準値は、加速度センサ制御部24に設定しておく。
仮想額縁制御部30は、全体表示モードと部分表示モードとの間でのモードの切換を行う切換手段である。この切換は、マルチディスプレイアプリ40を介して受け取る後述する画面制御サーバ100(図6及び図7に示す)からの要求や、加速度センサ制御部24から渡される、タブレットPC10が動かされた旨の通知に基づき行う。
そして、切換を行う場合、仮想額縁制御部30は、ディスプレイ制御部21、仮想操作子制御部22及びタッチセンサ制御部23に対してそれぞれ、新たなモードへの移行指示を送信し、変更後のモードに応じた制御を開始させる。
この制御については、図10乃至図12を用いて後述する。
マルチディスプレイアプリ40は、タブレットPC10においてOS20上で動作するアプリケーションにより実現される機能を示し、後述の画面制御サーバ100と連動して、タブレットPC10にマルチディスプレイを行わせる機能を備える。
具体的には、マルチディスプレイアプリ40は、画面制御サーバ100から送信されるモードの切り換え要求を仮想額縁制御部30に渡す機能を備える。また、画面制御サーバ100から送信されるマルチディスプレイのための分割画像をディスプレイ制御部21に渡し、その画像をディスプレイ15に表示させる機能も備える。
また、マルチディスプレイを行うためにタブレットPC10を画面制御サーバ100に登録すべく、ユーザの操作に従って又は自動的に必要なデータを画面制御サーバ100へ送信する機能も備える。この機能については、図7の説明において後述する。
次に、図4に、仮想操作子制御部22の機能をより詳細に示す。図5に、図4の仮想操作子データ記憶部26に記憶させる仮想操作子データの例を示す。
図4に示すように、仮想操作子制御部22は、仮想操作子データ記憶部26、データ管理部27及び機能実行部28を備える。
このうち仮想操作子データ記憶部26は、部分表示モードにおいて周縁部53に設ける仮想操作子の情報を示す仮想操作子データを記憶する。
仮想操作子データは図5に示す通りであり、仮想操作子ID、位置・サイズ情報、機能、操作子画像の情報を含む。
これらのうち仮想操作子IDは、仮想操作子を特定するための識別情報である。
位置・サイズ情報は、仮想操作子の画像を表示させるディスプレイ15上の位置及び画像のサイズを示す情報である。
機能は、仮想操作子が操作された場合に実行すべき処理を示す。この処理の内容は実行すべきコマンドやプログラムにより特定することが考えられる。ここでは、OS20が提供するOS_API(アプリケーションプログラムインタフェース)25に渡す関数により処理を特定している。
操作子画像は、仮想操作子の表示に用いる画像データである。画像ファイルへのリンクやパスであってもよい。
なお、ここでは仮想操作子はボタンのみとしているが、スライダ、トグルスイッチ等、種々のタイプの操作子を利用できるようにしてもよい。この場合、仮想操作子データに、各操作子のタイプを示す情報も含めるとよい。
また、データ管理部27は、仮想操作子データ記憶部26が記憶する仮想操作子データを管理する機能を備える。
機能実行部28は、仮想操作子が操作された場合に、その操作に応じて仮想操作子データに従った処理をOS20に要求する機能を備える。
図4において、A1〜A3が、全体表示モードから部分表示モードへの移行時に上記各部が実行する動作を示す。B1〜B3が、部分表示モードにおいて、タッチセンサ制御部23が仮想操作子への操作を検出した場合に各部が実行する動作を示す。
タブレットPC10においては、仮想額縁制御部30が部分表示モードへの移行を仮想操作子制御部22へ指示すると、データ管理部27が全仮想操作子のデータを仮想操作子データ記憶部26から読み出す(A1)。
次に、データ管理部27が、位置・サイズ情報及び操作子画像に基づき、ディスプレイ制御部21に各仮想操作子の表示を要求する(A2)。この要求を受けたディスプレイ制御部21は、要求に従い、ディスプレイ15に仮想操作子の画像を表示させる。
また、データ管理部27は、タッチセンサ制御部23に、仮想操作子IDと位置・サイズ情報とを対応付けて登録させる(A3)。
この登録を行ったタッチセンサ制御部23は、タッチセンサ16がその登録した位置への操作を検出すると、それを、その位置と対応する仮想操作子IDを持つ仮想操作子に対する操作であると判断し、機能実行部28へその仮想操作子IDを通知する(B1)。
機能実行部28は、仮想操作子IDの通知を受けると、仮想操作子データ記憶部26から、そのIDと対応する機能の情報を取得する(B2)。そして、機能の情報に従い、OS_API25へその機能を実行するために必要な関数のコール(図4ではB3の機能呼び出し)を行う。
以上により、タブレットPC10は、部分表示モードにおいては、仮想操作子への操作に応じて予め登録しておいた動作を行うことができる。
次に、複数のタブレットPC10と共に表示システムを構成してマルチディスプレイを実行させる機能を備える画面制御サーバ100について説明する。
図6は、その画面制御サーバ100のハードウェア構成を示す図である。
画面制御サーバ100は、ハードウェアとしては公知のPCでよい。例えば、CPU101、ROM102、RAM103、通信I/F104、HDD(ハードディスクドライブ)105、ユーザI/F106を備え、これらをシステムバス107により接続した構成とすることができる。
そして、CPU101がRAM103をワークエリアとしてROM102あるいはHDD105に記憶されたプログラムを実行することにより、画面制御サーバ100全体の動作を制御し、マルチディスプレイに関する制御をはじめとする種々の機能を実現することができる。
ROM102は、CPU101が実行するプログラムや、電源を切っても保存しておくべきデータを記憶する、書き換え可能な不揮発性記憶手段である。
RAM103は、CPU101のワークエリアとして用いたり、一時的に記憶すべきデータを記憶したりする揮発性記憶手段である。
通信I/F104は、タブレットPC10をはじめ、種々の外部装置と通信を行うためのインタフェースである。ここでは無線通信が可能であるとするが、これには限られない。通信に用いるプロトコルも任意であるし、複数のI/Fを備えていてもよい。
HDD105は、大容量のデータを記憶する書き換え可能な不揮発性記憶手段である。
ユーザI/F106は、ディスプレイ、キーボード、マウス等、ユーザが画面制御サーバ100を操作するための機器である。
図7に、以上の画面制御サーバ100が備える、マルチディスプレイを実現するための機能の構成を示す。
図7に示すように、画面制御サーバ100は、マルチディスプレイ管理部111、端末情報記憶部112、全体画像取得部113,分割画像生成送信部114を備える。
これらのうちマルチディスプレイ管理部111は、ユーザからマルチディスプレイの実行指示及びマルチディスプレイに使用する端末数の指定を受け付ける機能を有する。そして、マルチディスプレイの実行指示があった場合、複数の表示装置であるタブレットPC10をそれぞれ端末装置として、指定された端末装置の数である端末数を端末情報記憶部112へ登録すると共に、その端末数分の、端末情報登録領域を確保する。図7の例では、#1から#4までの4台分の情報を登録する領域を確保している。
なお、各端末装置の位置は、マルチディスプレイの実行時に、該当の端末装置が何行目の何列目に配置されるべきであるかを示す。そして、各端末装置の情報としては、少なくとも、当該端末装置へ表示用の分割画像のデータを送信するための宛先情報を登録する。
この登録は、端末情報記憶部112に端末情報登録領域を確保した後、タブレットPC10等の端末装置からの登録要求に応じて必要な情報を取得して行う。図7ではタブレットPC10と端末情報登録領域とを矢印で結んでいるが、実際にはこの登録は、マルチディスプレイ管理部111が登録要求を受け付けて行う。
そして、マルチディスプレイ管理部111は、必要台数分の端末情報が登録されるとマルチディスプレイを開始する。
具体的には、マルチディスプレイ管理部111は、表示すべき全体画像のデータを、その画像データを提供するアプリケーション等から入手し、全体画像取得部113に渡す。すると、全体画像取得部113が、その画像データを分割画像生成送信部114に渡す。
分割画像生成送信部114は、その画像データを端末情報記憶部112に登録されている端末数の情報に基づき、各端末装置に表示させるべき分割画像に分割する。端末数が4であれば4分割する。そして、各分割画像のパーツを、端末情報記憶部112に登録されている宛先情報に基づき、そのパーツを表示させるべき端末装置(ここではタブレットPC10)に送信する。
これを受信した各タブレットPC10が、それぞれ受信した各パーツを表示することにより、図7の右下に示すようなマルチディスプレイを行うことができる。すなわち、複数台の各タブレットPC10が協働して1台分の画面サイズよりも大きな画像を表示することができる。このとき、タブレットPC10側では、図3に示したマルチディスプレイアプリ40が分割画像のデータを取得し、ディスプレイ制御部21へその表示を要求する。
なお、各タブレットPC10は、ユーザの手により予め端末情報記憶部112への登録に従った適切な位置に配置しておく必要がある。
また、マルチディスプレイ管理部111は、マルチディスプレイの開始に先立ち、端末情報記憶部112に登録されている各端末装置に対し、全体表示モードへの移行を要求し、全体表示モードへ移行させる。マルチディスプレイは、額縁の細い全体表示モードで行うと高い視認性が得られる一方、マルチディスプレイ中はユーザがタブレットPC10を手に持って使用する可能性は低いためである。
また、マルチディスプレイを終了する場合、マルチディスプレイ管理部111が終了指示を受け付け、それに応じて、分割画像生成送信部114から各端末装置への画像データの送信を停止させる。これにより、各端末装置では、分割画像の表示を終了し、それまでの表示に戻る。
なお、ここでは画面制御サーバ100が一組のマルチディスプレイを制御する例を示したが、複数組のマルチディスプレイを同時に制御できるようにしてもよい。その場合、端末情報記憶部112への端末数や端末情報の登録を、マルチディスプレイの組を特定するセッションIDを付して行うようにすればよい。また、全体画像及び分割画像の管理も、マルチディスプレイの組毎にセッションIDを用いて行うようにすればよい。
次に、マルチディスプレイの実行のために画面制御サーバ100のCPU101が実行する処理について説明する。
図8は、マルチディスプレイ登録要求を検出した場合にCPU101が実行する処理のフローチャートである。
いずれかのタブレットPC10(あるいはその他の外部装置)から、マルチディスプレイの実行指示であるマルチディスプレイ登録要求を受信すると、CPU101はそれを検出して図8のフローチャートに示す処理を開始する。ユーザI/F106を介してマルチディスプレイの実行を指示された場合も同様である。
この処理において、CPU101はまず、検出した要求に含まれる端末数の情報を、端末情報記憶部112に登録する(S11)。そして、タブレットPC10からの端末登録要求を待つ(S12)。
そして、端末登録要求があると、要求が示す端末番号(ここでは#1〜#4のいずれか)と対応させて、要求元端末装置へ画像データを送信するための送信宛先(宛先情報)を、端末情報記憶部112に登録する(S13)。この端末登録要求は、タブレットPC10のマルチディスプレイアプリ40が、ユーザの操作に応じて送信してくるものである。なお、要求自体に端末番号の指定が含まれていなくても、ステップS13で要求を受信した順に端末番号を割り当てることができる。この場合、割り当て結果を該当の端末装置に通知するとよい。
次に、CPU101は、ステップS11で登録した端末数分の送信宛先(宛先情報)の登録が完了したか否か判断する(S14)。そして、完了していなければ、ステップS12に戻って次の端末登録要求を待つ。完了していれば、マルチディスプレイが開始できる状態になったと判断し、表示を開始すべくステップS15以下に進む。
そして、CPU101は、端末情報記憶部112に登録された各宛先情報の送信宛先へ、全体表示モード(額縁OFF)への移行要求を送信する(S15)。マルチディスプレイに係る画像は、全体表示モードで表示させることが好適であるためである。タブレットPC10においては、マルチディスプレイアプリ40がその移行要求を受信し、仮想額縁制御部30に伝えて、全体表示モードへ移行させる。
次に、CPU101は、分割画像生成送信部114に、各端末装置と対応する分割画像の生成及び、登録した宛先情報に従った送信の開始を指示する(S16)。この指示に従って送信される分割画像を各タブレットPC10のマルチディスプレイアプリ40が受け取ってディスプレイ制御部21に渡し、ディスプレイ15(図1)に表示させることにより、マルチディスプレイを実行することができる。
以上で図8の処理を終了する。その後、分割画像生成送信部114が分割画像の送信を継続し、タブレットPC10側でマルチディスプレイアプリ40が動作し続ける限り、マルチディスプレイが継続される。
次に、図9に、マルチディスプレイ終了指示を検出した場合にCPU101が実行する処理のフローチャートを示す。
CPU101は、ユーザI/F106を介してマルチディスプレイの終了を指示されたことを検出すると、図9のフローチャートに示す処理を開始する。マルチディスプレイを実行中のいずれかのタブレットPC10から、マルチディスプレイの終了を要求された場合も同様である。
この処理において、CPU101はまず、分割画像生成送信部114に、分割画像の生成及び送信の停止を指示する(S21)。分割画像生成送信部114は、この指示に応じて分割画像の生成及び送信を停止する。このことにより、マルチディスプレイは終了する。
CPU101は次に、端末情報記憶部112に登録された各宛先情報の送信宛先へ、部分表示モード(額縁ON)への移行要求を送信する(S22)。マルチディスプレイの終了後は、各タブレットPC10を単独で使用することが想定され、これには部分表示モードが好適であるためである。タブレットPC10においては、マルチディスプレイアプリ40が移行要求を受信し、仮想額縁制御部30に伝えて、部分表示モードへ移行させる。
以上で図9の処理を終了する。このとき、端末情報記憶部112に登録されている端末装置の情報は、削除してもよいが、マルチディスプレイの再開に備えて保持しておいてもよい。
次に、モード切換のためにタブレットPC10の各部が実行する処理について説明する。
まず図10に、部分表示モードから全体表示モードへの移行に係る処理のシーケンス例を示す。これらの各部の処理は、CPU11が所要のプログラムを実行することにより実現されるものである。以降の図11及び図12についても同様である。
図10の処理においては、マルチディスプレイアプリ40が、画面制御サーバ100からの額縁OFF要求(全体表示モードへの移行要求)の受信を監視する(S31)。そして受信すると、この要求を仮想額縁制御部30へ渡す(S32)。
仮想額縁制御部30は、額縁OFF要求を受け取ると、現在額縁ON中(部分表示モード)であるか否か判断する(S33)。ここで額縁ON中でなければ、すなわち額縁OFF中(全体表示モード)であれば、モード移行処理は不要であるので何もしない。しかし、額縁ON中であれば、タブレットPC10全体表示モードへ移行させるべく、ディスプレイ制御部21、仮想操作子制御部22及びタッチセンサ制御部23へ、それぞれ全体表示モード移行指示を送信する(S34)。
ディスプレイ制御部21は、この指示を受けると、ディスプレイ15の表示領域全体に画像を表示させるよう、ディスプレイ15を制御する(S35)。これに伴い、額縁及び仮想操作子の表示は終了する。また、有効な表示領域に表示させる画像のサイズも変更する。しかし、有効な表示領域に表示させる画像の内容自体を変更する必要はない。
また、タッチセンサ制御部23は、ステップS34の指示を受けると、タッチセンサ16全体の操作検出を有効化する(S36)。また、仮想操作子制御部22からの指示で行った仮想操作子の登録(図11,図12参照)を解除する(S37)。これらの処理により、仮想操作子の機能は無効化されることになる。
また、仮想操作子制御部22は、ステップS34の指示を受けると、仮想操作子の機能を無効化する(S38)。すなわち、仮想操作子が操作されてもそれに応じた動作を行わないように自分自身を設定する。ステップS37の処理により、もはや仮想操作子が操作された旨の情報は仮想操作子制御部22に供給されなくなるが、念のためここでも無効化を行っておくものである。
以上のステップS35乃至S38の処理により、タブレットPC10は全体表示モードへ移行する。以上の処理において、ステップS34で仮想額縁制御部30が切換手段として機能する。ステップS34で仮想額縁制御部30が、ステップS35でディスプレイ制御部21が決定手段として機能する。
なお、画面制御サーバ100からの要求によるほか、タブレットPC10自身を操作して全体表示モードへ移行させられるようにしてもよい。タブレットPC10を置いたり器具に固定したりして動画等のコンテンツを見る場合、必ずしもユーザが手に持つ必要はなく、かつ画面は大きい方が好ましい。したがって、このような場合にユーザが指示して全体表示モードへ移行させたり、または加速度センサ17によりタブレットPC10が一定時間静止している場合に全体表示モードへ移行させたりできるようにすることが考えられる。これらの移行機能は、OS20に設けても、不図示のコンテンツ再生アプリに設けてもよい。いずれにせよ、図10の場合と同様に仮想額縁制御部30に額縁OFF要求を送信すれば、それをトリガにモードの移行を行うことができる。
次に図11に、全体表示モードから部分表示モードへの移行に係る処理のシーケンスの第1例を示す。
図11の処理においては、マルチディスプレイアプリ40が、画面制御サーバ100からの額縁ON要求(部分表示モードへの移行要求)の受信を監視する(S41)。そして受信すると、この要求を仮想額縁制御部30へ渡す(S42)。
仮想額縁制御部30は、額縁ON要求を受け取ると、現在額縁OFF中(全体表示モード)であるか否か判断する(S43)。ここで額縁OFF中でなければ、すなわち額縁ON中(部分表示モード)であれば、モード移行処理は不要であるので何もしない。しかし、額縁OFF中であれば、タブレットPC10部分表示モードへ移行させるべく、ディスプレイ制御部21、仮想操作子制御部22及びタッチセンサ制御部23へ、それぞれ部分表示モード移行指示を送信する(S44)。
ディスプレイ制御部21は、この指示を受けると、ディスプレイ15の画面に額縁部(図2Bにおける周縁部53)を示す枠線を表示させ、画像をその内側の画像領域に縮小して表示させる(S45)。すなわち、額縁部の内側を、仮想額縁制御部30以外のアプリケーションやOSが生成する画面を表示させる有効領域の範囲と決定する。どの範囲を有効領域とするかを指定する情報は、部分表示モード移行指示に含めて仮想額縁制御部30からディスプレイ制御部21へ通知するようにするとよい。なお、このステップS45の処理において、有効な表示領域に表示させる画像の内容自体を変更する必要はない。
そして、ディスプレイ制御部21は次に、ディスプレイ15の額縁部に、所定の額縁画像を表示させる(S46)。この額縁画像については、仮想額縁制御部30から渡してもよいが、ディスプレイ制御部21が独自に参照できる位置に記憶させておくとよい。
また、タッチセンサ制御部23は、ステップS44の指示を受けると、タッチセンサ16における額縁部の操作検出を無効化する(S47)。すなわち、額縁部に対する操作が検出された場合には、その検出結果を読み捨て、操作に応じた動作をしないようにする。どの範囲を額縁部(有効領域以外、と見ることもできる)とするかを指定する情報は、部分表示モード移行指示に含めて仮想額縁制御部30からディスプレイ制御部21へ通知するようにするとよい。
また、仮想操作子制御部22は、ステップS44の指示を受けると、仮想操作子データ記憶部26から、有効にすべき全ての仮想操作子の情報を取得する(S48)。そして、各仮想操作子の位置、サイズ及び画像をディスプレイ制御部21に通知する(S49)。
ディスプレイ制御部21は、ステップS49で受け取った情報に基づき、ディスプレイ15に仮想操作子の画像を表示させる(S50)。この仮想操作子は、額縁部に設けるものであるので、表示位置が額縁部内にあるか否かを、ディスプレイ制御部21が判定し、額縁部内にない場合にエラー処理を行うようにしてもよい。
また、仮想操作子制御部22は、各仮想操作子の仮想操作子ID、位置及びサイズをタッチセンサ制御部23に通知する(S51)。
タッチセンサ制御部23は、ステップS51で受け取った情報を、有効な仮想操作子の情報として登録する(S52)と共に、タッチセンサ16における該当位置の操作検出を有効化する(S53)。このことにより、ステップS52での登録と合わせて、タッチセンサ16の仮想操作子を設ける位置への操作がなされた場合に、タッチセンサ制御部23がその仮想操作子の仮想操作子IDを仮想操作子制御部22へ渡す状態となる。
以上のステップS45乃至S53の処理により、タブレットPC10は部分表示モードへ移行する。以上の処理において、ステップS44で仮想額縁制御部30が切換手段として機能する。ステップS44で仮想額縁制御部30が、ステップS45でディスプレイ制御部21が決定手段として機能する。ステップS46でディスプレイ制御部21が第3の制御手段として機能する。ステップS47でタッチセンサ制御部23が第1の制御手段として機能する。ステップS53でタッチセンサ制御部23が第2の制御手段として機能する。
次に図12に、全体表示モードから部分表示モードへの移行に係る処理のシーケンスの第2例を示す。
この例は、加速度センサ17による加速度の検出結果に基づきモードの切換を行う例である。そして、ステップS41及びS42をステップSA及びSBに置き換えた点以外は図11の処理と同じであるため、この部分についてのみ説明する。
加速度センサ制御部24は、随時加速度センサ17による加速度の検出結果をモニタしており、その結果に基づき、タブレットPC10の傾きを検出したか否か判断する(SA)。そして、検出していれば、仮想額縁制御部30に対し、額縁ON要求を行う(SB)。
これを受けた仮想額縁制御部30は、図11のステップS43以下と同様に、タブレットPC10を部分表示モードへ移行させる。
全体表示モードは、マルチディスプレイに適したモードであり、タブレットPC10を机に複数並べて置いた状態で使用することが想定される。この状態では、タブレットPC10は、ディスプレイ15の表示面が水平になるように置かれることが多いと考えられる。
一方、この状態からタブレットPC10が傾けられた場合、ユーザがタブレットPC10を手に持って使おうとしていることが考えられる。従って、これをトリガに、手に持って使う場合に有用な部分表示モードへ移行させるようにすれば、ユーザの移行操作の手間を軽減することができ、快適な利用を実現できると考えられる。
なお、モードの切換を行う基準は、「傾きの検出」に限られない。タブレットPC10を器具に固定してマルチディスプレイを行う場合など、傾いた状態で全体表示モードの表示を行う場合もあり得るので、タブレットPC10が移動されたこと、向きが変えられたこと、回転されたこと等を基準にしてもよい。
以上説明してきたタブレットPC10によれば、ディスプレイ15の表示領域のうち画像を表示させる有効領域の範囲を決定すると共に、その有効領域以外では、タッチセンサ16による操作の検出を無効化するようにしている。そして、このことにより、マルチディスプレイでの利便性を考慮して額縁51の幅を狭くした場合であっても、ユーザがタブレットPC10を手に持つ際に触れると想定される部分を、選択的に画像表示や操作検出の対象から除外できる。従って、単体使用の場合でも、画像の参照に支障なく、かつ意図しない操作を行ってしまうことがないようにでき、マルチディスプレイと単体での使用を、いずれも快適に行えるようにすることができる。
また、有効領域をディスプレイ15の表示領域全体とする第1のモードと、有効領域をディスプレイ15の表示領域の一部分とする第2のモードとの間で切換を行うことができる。そして、このことにより、マルチディスプレイの場合には第1のモードを選択し、単体使用の場合には第2のモードを選択する等、外部装置からでも容易にタブレットPC10を制御して、用途に合った表示及び操作検出を行わせることができる。
また、このモードの切換を、加速度センサによる加速度の検出結果に基づき行うことができる。このことにより、ユーザが切換操作を行わなくても、切り換えの必要な状況を適切に検出して自動的にモード切換を行うことができる。
また、ディスプレイ15の上記有効領域以外の表示領域に、操作子の画像を表示させると共に、その操作子の画像を表示した箇所では、タッチセンサ16による操作の検出を有効にすることができる。このことにより、有効領域外に仮想的な操作子を設けてユーザの操作を受け付けることができるので、有効領域以外の領域も有効に活用することができる。
また、第2のモードでは、ディスプレイ15の表示領域の周縁部を除いた領域を上記有効領域としている。ユーザの手が触れるのは主に周縁部であると考えられるから、手に持った状態で快適に利用できるようにするためには、この部分を有効領域から除外することが有用である。
さらに、第2のモードにおいて、ディスプレイ15の有効領域以外の表示領域に、所定の額縁画像を表示させている。このことにより、有効領域とそうでない領域を容易に認識可能とすると共に、ディスプレイ15の一部にしか画像を表示させない場合でも表示を自然なものとすることができる。
以上で実施形態の説明を終了するが、この発明において、各装置の具体的な構成、処理の内容、データの構成、使用する装置の台数等は、実施形態で説明したものに限るものではない。
例えば、上述した画面制御サーバ100の機能を、いずれかのタブレットPC10に設けてもよい。この場合、画面制御サーバ100の機能を備えるタブレットPC10は、自身の参加するマルチディスプレイを制御することができる。そして、分割画像生成送信部114による分割画像の送信先が自分自身となる場合には、当該送信は、画面制御サーバ100の機能を実現するプロセスと、マルチディスプレイアプリ40の機能を実現するプロセスとの間の、プロセス間通信で行えばよい。
なお、この構成を採る場合、タブレットPC10は、全体表示モードでマルチディスプレイの実行中は、ディスプレイ15上に操作子を設ける場所がないため、マルチディスプレイの終了指示を受け付けることが困難である。そこで、図12に示したように、加速度センサ17による加速度の検出結果に基づき部分表示モードへ切り換える場合に、これをマルチディスプレイの終了指示として取り扱うようにするとよい。
画面制御サーバ100の機能を備えるタブレットPC10だけでなく、マルチディスプレイに参加しているいずれかのタブレットPC10においてこのモード切換が行われた場合も、マルチディスプレイの終了指示として取り扱うようにするとよい。
このようにすれば、タブレットPC10に常設の操作部がない場合でも、容易にマルチディスプレイの終了を指示することができる。
また、画面制御サーバ100あるいはタブレットPC10の機能を、複数の装置に分散して設け、これらの装置に協働してその機能を実現させるようにしてもよい。これは、画面制御サーバ100の機能の一部をタブレットPC10に設けたり、タブレットPC10の機能の一部を画面制御サーバ100に設けたりすることを含む。
また、上述した実施形態では、表示のモードとして全体表示モードと部分表示モードの2つのモードを設ける例について説明した。しかし、3以上のモードを設けることも妨げられない。この場合において、モード毎に設ける仮想操作子の種類や機能が異なっていてもよい。
なお、仮想操作子を設けることは必須ではない。
また、この発明の表示システムは、表示装置としてタブレットPC10を用いるものに限らず、画像を表示する機能を備える任意の装置を用いるものに適用可能である。
また、以上説明してきた各実施形態、動作例及び変形例の構成は、相互に矛盾しない限り任意に組み合わせて実施可能であることは勿論である。
10:タブレットPC、11,101:CPU、12:フラッシュメモリ、13,103:RAM、14,104:通信I/F、15:ディスプレイ、16:タッチセンサ、17:加速度センサ、18,107:システムバス、20:OS、21:ディスプレイ制御部、22:仮想操作子制御部、23:タッチセンサ制御部、24:加速度センサ制御部、25:OS_API、26:仮想操作子データ記憶部、27:データ管理部、28:機能実行部、30:仮想額縁制御部、40:マルチディスプレイアプリ、51:額縁、52:表示領域、53:周縁部、54:仮想ボタン、100:画面制御サーバ、102:ROM、105:HDD、106:ユーザI/F、111:マルチディスプレイ管理部、112:端末情報記憶部、113:全体画像取得部、114:分割画像生成送信部、
特開2003−271118号公報

Claims (9)

  1. 画面制御サーバと複数の表示装置を有する表示システムであって、
    前記複数の表示装置はそれぞれ、
    表示領域に対する操作を検出するセンサを備えたディスプレイと、
    前記画面制御サーバから受信するモードの移行要求に応じて、第1のモードと第2のモードを含む複数のモードを切り換える切換手段と、
    前記ディスプレイの表示領域のうち画像を表示させる有効領域の範囲を決定する決定手段と、
    前記有効領域以外では、前記センサによる操作の検出を無効化する第1の制御手段とを備え
    前記決定手段は、前記モードが前記切換手段によって前記第1のモードに切り換えられた場合には、前記ディスプレイの表示領域全体を、画像を表示させる有効領域の範囲と決定し、前記第2のモードに切り換えられた場合には、前記ディスプレイの表示領域の周縁部を除いた領域を、画像を表示させる有効領域の範囲と決定する手段であり、
    前記画面制御サーバは、
    前記複数の表示装置をそれぞれ端末装置として、該端末装置の数とその各端末装置の送信宛先を示す宛先情報を登録する端末情報記憶部と、
    該端末情報記憶部に登録された前記宛先情報に基づいて前記各端末装置へ前記第1のモードへの移行要求を送信する手段と、
    表示すべき全体画像のデータを、前記端末情報記憶部に登録されている前記端末装置の数に基づいて前記各端末装置に表示させるべき分割画像に分割し、その各分割画像を前記端末情報記憶部に登録されている前記宛先情報に基づいて、表示させるべき各端末装置に送信する分割画像生成送信部と、
    を備えていることを特徴とする表示システム。
  2. 請求項1に記載の表示システムであって、
    前記画面制御サーバが、前記分割画像生成送信部に前記分割画像の生成及び送信を停止させ、前記端末情報記憶部に登録されている前記宛先情報に基づいて、前記各端末装置へ前記第2のモードへの移行要求を送信する手段を備えていることを特徴とする表示システム。
  3. 請求項1又は2に記載の表示システムであって、
    前記ディスプレイは加速度センサを備え、
    前記切換手段は、前記加速度センサによる加速度の検出結果に基づいても前記モードの切換を行うことを特徴とする表示システム。
  4. 請求項1乃至3のいずれか一項に記載の表示システムであって、
    前記複数の表示装置はそれぞれ、
    前記ディスプレイの前記有効領域以外の表示領域に、操作子の画像を表示させると共に、該操作子の画像を表示した箇所では、前記センサによる操作の検出を有効にする第2の制御手段とを備えることを特徴とする表示システム。
  5. 請求項1乃至4のいずれか一項に記載の表示システムであって、
    前記複数の表示装置はそれぞれ、
    前記第2のモードにおいて、前記ディスプレイの前記表示領域の周縁部に所定の額縁画像を表示させる第3の制御手段を備えることを特徴とする表示システム。
  6. 画面制御サーバと複数の表示装置を有する表示システムの制御方法であって、
    前記画面制御サーバが、
    前記複数の表示装置をそれぞれ端末装置として、該端末装置の数とその各端末装置の送信宛先を示す宛先情報を端末情報記憶部に登録し、
    該端末情報記憶部に登録している前記宛先情報に基づいて前記各端末装置へ第1のモードへの移行要求を送信し、
    表示すべき全体画像のデータを、前記端末情報記憶部に登録している前記端末装置の数に基づいて前記各端末装置に表示させるべき分割画像に分割し、その各分割画像を前記端末情報記憶部に登録している前記宛先情報に基づいて、表示させるべき各端末装置に送信し、
    前記複数の表示装置がそれぞれ、
    前記画面制御サーバから受信するモードの移行要求に応じて、第1のモードと第2のモードを含む複数のモードを切り換え、
    前記モードを、前記第1のモードに切り換えた場合には、表示領域に対する操作を検出するセンサを備えたディスプレイの表示領域全体を、画像を表示させる有効領域の範囲と決定し、前記第2のモードに切り換えた場合には、前記ディスプレイの表示領域のうち周縁部を除いた領域を、画像を表示させる有効領域の範囲と決定し、
    前記有効領域以外では、前記センサによる操作の検出を無効化する
    ことを特徴とする表示システムの制御方法。
  7. 複数の表示装置をそれぞれ端末装置として、該端末装置の数とその各端末装置の送信宛先を示す宛先情報を登録する端末情報記憶部と、
    該端末情報記憶部に登録された前記宛先情報に基づいて前記各端末装置へ第1のモードへの移行要求を送信する手段と、
    表示すべき全体画像のデータを、前記端末情報記憶部に登録されている前記端末装置の数に基づいて前記各端末装置に表示させるべき分割画像に分割し、その各分割画像を前記端末情報記憶部に登録されている前記宛先情報に基づいて、表示させるべき各端末装置に送信する分割画像生成送信部と、を備える画面制御サーバと前記複数の表示装置を有する表示システムにおける表示装置であって、
    表示領域に対する操作を検出するセンサを備えたディスプレイと、
    前記画面制御サーバから受信するモードの移行要求に応じて、前記第1のモードと第2のモードを含む複数のモードを切り換える切換手段と、
    前記ディスプレイの表示領域のうち画像を表示させる有効領域の範囲を決定する決定手段と、
    前記有効領域以外では、前記センサによる操作の検出を無効化する第1の制御手段とを備え
    前記決定手段は、前記モードが前記切換手段によって前記第1のモードに切り換えられた場合には、前記ディスプレイの表示領域全体を、画像を表示させる有効領域の範囲と決定し、前記第2のモードに切り換えられた場合には、前記ディスプレイの表示領域の周縁部を除いた領域を、画像を表示させる有効領域の範囲と決定する手段であって、前記第1のモードに切り換えられた場合に、前記ディスプレイに前記画面制御サーバから受信した前記分割画像を表示することを特徴とする表示装置。
  8. 画面制御サーバと複数の表示装置を有し、該複数の表示装置がそれぞれ、
    表示領域に対する操作を検出するセンサを備えたディスプレイと、
    前記画面制御サーバから受信するモードの移行要求に応じて、第1のモードと第2のモードを含む複数のモードを切り換える切換手段と、
    前記ディスプレイの表示領域のうち画像を表示させる有効領域の範囲を決定する決定手段と、
    前記有効領域以外では、前記センサによる操作の検出を無効化する第1の制御手段とを備え、
    前記決定手段は、前記モードが前記切換手段によって前記第1のモードに切り換えられた場合には、前記ディスプレイの表示領域全体を、画像を表示させる有効領域の範囲と決定し、前記第2のモードに切り換えられた場合には、前記ディスプレイの表示領域の周縁部を除いた領域を、画像を表示させる有効領域の範囲と決定する手段である
    表示システムにおける画面制御サーバであって、
    前記複数の表示装置をそれぞれ端末装置として、該端末装置の数とその各端末装置の送信宛先を示す宛先情報を登録する端末情報記憶部と、
    該端末情報記憶部に登録された前記宛先情報に基づいて前記各端末装置へ前記第1のモードへの移行要求を送信する手段と、
    表示すべき全体画像のデータを、前記端末情報記憶部に登録されている前記端末装置の数に基づいて前記各端末装置に表示させるべき分割画像に分割し、その各分割画像を前記端末情報記憶部に登録されている前記宛先情報に基づいて、前記第1のモードへの移行要求によって前記第1のモードに切り換えられた際に前記分割画像を表示させるべき各端末装置に送信する分割画像生成送信部と、
    を備えていることを特徴とする画面制御サーバ。
  9. 複数の表示装置をそれぞれ端末装置として、該端末装置の数とその各端末装置の送信宛先を示す宛先情報を登録する端末情報記憶部と、
    該端末情報記憶部に登録された前記宛先情報に基づいて前記各端末装置へ第1のモードへの移行要求を送信する手段と、
    表示すべき全体画像のデータを、前記端末情報記憶部に登録されている前記端末装置の数に基づいて前記各端末装置に表示させるべき分割画像に分割し、その各分割画像を前記端末情報記憶部に登録されている前記宛先情報に基づいて、表示させるべき各端末装置に送信する分割画像生成送信部と、を備える画面制御サーバと前記複数の表示装置を有する表示システムにおける表示装置に設けられ、表示領域に対する操作を検出するセンサを備えたディスプレイを制御するコンピュータを、
    前記画面制御サーバから受信するモードの移行要求に応じて、前記第1のモードと第2のモードを含む複数のモードを切り換える切換手段と、
    前記ディスプレイの表示領域のうち画像を表示させる有効領域の範囲を決定する決定手段と、
    前記有効領域以外では、前記センサによる操作の検出を無効化する第1の制御手段として機能させるためのプログラムであって、
    前記決定手段は、前記モードが前記切換手段によって前記第1のモードに切り換えられた場合には、前記ディスプレイの表示領域全体を、画像を表示させる有効領域の範囲と決定し、前記第2のモードに切り換えられた場合には、前記ディスプレイの表示領域の周縁部を除いた領域を、画像を表示させる有効領域の範囲と決定する手段であって、前記第1のモードに切り換えられた場合に、前記ディスプレイに前記画面制御サーバから受信した前記分割画像を表示させることを特徴とするプログラム
JP2013047708A 2013-03-11 2013-03-11 表示システムとその制御方法及び表示装置と画面制御サーバ並びにプログラム Expired - Fee Related JP6135203B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2013047708A JP6135203B2 (ja) 2013-03-11 2013-03-11 表示システムとその制御方法及び表示装置と画面制御サーバ並びにプログラム
US14/167,233 US9223433B2 (en) 2013-03-11 2014-01-29 Display system and display method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013047708A JP6135203B2 (ja) 2013-03-11 2013-03-11 表示システムとその制御方法及び表示装置と画面制御サーバ並びにプログラム

Publications (2)

Publication Number Publication Date
JP2014174800A JP2014174800A (ja) 2014-09-22
JP6135203B2 true JP6135203B2 (ja) 2017-05-31

Family

ID=51487274

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013047708A Expired - Fee Related JP6135203B2 (ja) 2013-03-11 2013-03-11 表示システムとその制御方法及び表示装置と画面制御サーバ並びにプログラム

Country Status (2)

Country Link
US (1) US9223433B2 (ja)
JP (1) JP6135203B2 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015038695A (ja) * 2013-08-19 2015-02-26 ソニー株式会社 情報処理装置および情報処理方法
CN105785749B (zh) * 2014-12-24 2018-11-13 联想(北京)有限公司 一种显示方法及电子设备

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4178484B2 (ja) * 1998-04-06 2008-11-12 富士フイルム株式会社 モニタ付きカメラ
JP2003005947A (ja) * 2001-06-25 2003-01-10 Toshiba Corp サーバ装置、携帯端末、コンテンツ配信方法、コンテンツ受信方法及びプログラム
JP3638561B2 (ja) 2002-03-15 2005-04-13 株式会社東芝 マルチ画面設定方法
KR100522940B1 (ko) * 2003-07-25 2005-10-24 삼성전자주식회사 활성영역을 설정 가능한 터치스크린 시스템 및 그 제어방법
US7614011B2 (en) * 2004-10-21 2009-11-03 International Business Machines Corporation Apparatus and method for display power saving
US20060227122A1 (en) * 2005-04-07 2006-10-12 Microsoft Corporation Implementing multiple display modes on one display panel
JP2007300353A (ja) * 2006-04-28 2007-11-15 Fujifilm Corp 撮像装置
DE602007006828D1 (de) * 2007-11-30 2010-07-08 Ericsson Telefon Ab L M Tragbare elektronische Vorrichtung mit mehr als einem Anzeigebereich und Verfahren zur Steuerung einer Benutzerschnittstelle dafür
JP5669169B2 (ja) * 2009-07-28 2015-02-12 Necカシオモバイルコミュニケーションズ株式会社 端末装置及びプログラム
US20120038571A1 (en) * 2010-08-11 2012-02-16 Marco Susani System and Method for Dynamically Resizing an Active Screen of a Handheld Device
JP5813991B2 (ja) * 2011-05-02 2015-11-17 埼玉日本電気株式会社 携帯端末、入力制御方法及びプログラム
JP2012248137A (ja) * 2011-05-31 2012-12-13 Sharp Corp 表示装置および表示方法
US20130009915A1 (en) * 2011-07-08 2013-01-10 Nokia Corporation Controlling responsiveness to user inputs on a touch-sensitive display
JP5708555B2 (ja) * 2012-04-25 2015-04-30 コニカミノルタ株式会社 操作表示装置及び操作表示方法プログラム

Also Published As

Publication number Publication date
JP2014174800A (ja) 2014-09-22
US20140253480A1 (en) 2014-09-11
US9223433B2 (en) 2015-12-29

Similar Documents

Publication Publication Date Title
JP5495813B2 (ja) 表示制御装置、表示制御方法、及びプログラム、並びに記憶媒体
JP5966596B2 (ja) 情報処理装置、投影システム及び情報処理プログラム
JP6410584B2 (ja) 画像処理装置、画像処理装置の制御方法、並びにプログラム
JP5344651B2 (ja) 情報処理装置、制御方法、プログラム、および情報処理システム
JP6022703B2 (ja) 携帯型電子機器用のユーザインターフェース
JP6380689B2 (ja) 携帯端末装置及び携帯端末装置の制御方法
US10241662B2 (en) Information processing apparatus
JP2013120439A (ja) 携帯端末、出力制御システム、出力制御プログラム、出力制御方法
JP2019114050A (ja) 処理装置、表示システム、及びプログラム
JP2004171131A (ja) 情報処理装置および表示装置切り替え方法
JP2019109802A (ja) 表示装置、画像処理装置及びプログラム
JP5540793B2 (ja) 機能提供装置及びプログラム
JP2014157553A (ja) 情報表示装置および表示制御プログラム
JP6135203B2 (ja) 表示システムとその制御方法及び表示装置と画面制御サーバ並びにプログラム
JP5384706B2 (ja) マルチタッチの操作方法及びそのシステム
JPWO2017022031A1 (ja) 情報端末装置
JP6187546B2 (ja) 操作表示システム、操作表示装置および操作表示プログラム
BR102014011754A2 (pt) aparelho de processamento de informação e método de processamento de informação
JP2019029814A (ja) 通信システム、通信方法、電子機器
JP4648217B2 (ja) 画像装置、処理画像の選択方法
JP2014232415A (ja) 表示装置、画像処理装置及びプログラム
JP2014146233A (ja) 資料共有プログラム、端末装置、資料共有方法
TW200910179A (en) Handheld electronic apparatus and control method thereof
JP5660379B2 (ja) シンクライアント用プロキシサーバおよび通信制御方法
JP2008014961A (ja) 情報処理装置および表示制御方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160218

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20161207

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161220

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170220

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170328

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170410

R151 Written notification of patent or utility model registration

Ref document number: 6135203

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees