JP2018181182A - 表示制御プログラム、表示制御方法、及び表示制御装置 - Google Patents

Abstract

【課題】表示されたオブジェクトの操作性を向上することができる表示制御プログラムを提供する。【解決手段】表示制御プログラムは、表示エリアに重ねて表示された複数のオブジェクトの選択を受け付けると、オブジェクトの表示レイヤに関する情報を記憶する記憶部を参照して、選択された前記複数のオブジェクトそれぞれの表示レイヤを特定し、選択された前記複数のオブジェクトそれぞれの識別情報が表記された複数の操作部品を、特定した前記表示レイヤに応じた順序で並べて前記表示エリアに表示する、処理をコンピュータに実行させることを特徴とする。【選択図】図７

Description

本件は、表示制御プログラム、表示制御方法、及び表示制御装置に関する。

会議室の天井に設置されたプロジェクタがテーブルの表面に、例えばアイコンのようなオブジェクトを表示又は投影（以下、単に表示という）する技術が知られている（例えば、特許文献１参照）。また、表示面に画像が相互に重なり合った状態で表示されると、ユーザが操作したい画像と異なる画像を選択してしまう場合があることも知られている（例えば、特許文献２参照）。

特開２０１６−１７７４２８号公報 特開２０１６−１６２１２８号公報

そこで、１つの側面では、表示されたオブジェクトの操作性を向上することができる表示制御プログラム、表示制御方法、及び表示制御装置を提供することを目的とする。

１つの実施態様では、表示制御プログラムは、表示エリアに重ねて表示された複数のオブジェクトの選択を受け付けると、オブジェクトの表示レイヤに関する情報を記憶する記憶部を参照して、選択された前記複数のオブジェクトそれぞれの表示レイヤを特定し、選択された前記複数のオブジェクトそれぞれの識別情報が表記された複数の操作部品を、特定した前記表示レイヤに応じた順序で並べて前記表示エリアに表示する、処理をコンピュータに実行させることを特徴とする。

表示されたオブジェクトの操作性を向上することができる。

図１は表示制御システムの一例を説明するための図である。 図２はサーバ装置のハードウェア構成の一例である。 図３はサーバ装置の機能ブロック図の一例である。 図４はオブジェクト情報記憶部の一例である。 図５は操作チップ情報記憶部の一例である。 図６は第１実施形態に係るサーバ装置の動作の一例を示すフローチャートである。 図７（ａ）から（ｄ）は操作チップを表示するまでの操作と表示した後の操作を説明するための図である。 図８は操作チップ表示処理の一例を示すフローチャートである。 図９（ａ）及び（ｂ）は操作チップの表示を説明するための図である。 図１０は第２実施形態に係るサーバ装置の動作の一例を示すフローチャートである。 図１１（ａ）及び（ｂ）は表示レイヤを変更する操作の一例を説明するための図である。 図１２（ａ）から（ｃ）は更新手法の一例を説明するための図である。 図１３（ａ）及び（ｂ）はオブジェクトの編集を説明するための図である。 図１４は操作チップに表記する表示名を説明するための図である。 図１５（ａ）から（ｃ）は操作チップの編集を説明するための図である。 図１６（ａ）及び（ｂ）はオブジェクトの移動の一例を説明するための図である。 図１７（ａ）及び（ｂ）はオブジェクトの移動の他の一例を説明するための図である。

以下、本件を実施するための形態について図面を参照して説明する。

（第１実施形態）
図１は表示制御システムＳの一例を説明するための図である。表示制御システムＳはプロジェクタ１００とカメラ２００と電子ペン３００とサーバ装置４００とを備えている。プロジェクタ１００とカメラ２００とサーバ装置４００は有線又は無線により互いに接続されている。

プロジェクタ１００はテーブル１０上の表示エリア１１内に操作可能な種々のオブジェクト１１ａ，１１ｂ，１１ｃを表示する。表示エリア１１はプロジェクタ１００の表示可能領域である。表示エリア１１は例えば壁面やスクリーンなどであってもよい。図１において、表示エリア１１の左下を原点Ｏとし、テーブル１０の長手方向をＸ軸、短手方向をＹ軸としているが、原点Ｏの位置やＸ軸、Ｙ軸の方向については適宜定めればよい。

ここで、図１に示すオブジェクト１１ａ，１１ｂ，１１ｃは、例えば付箋や写真を表している。オブジェクト１１ａ，１１ｂ，１１ｃが例えばグラフ、アイコン、ウィンドウなどを表していてもよい。オブジェクト１１ａ，１１ｂ，１１ｃは予め定められた大きさ又はユーザ１２が指定した大きさで表示される。プロジェクタ１００がオブジェクト１１ａ，１１ｂ，１１ｃを表示する際、ユーザ１２によるオブジェクト１１ａ，１１ｂ，１１ｃに対する操作によっては、プロジェクタ１００は互いに重畳するオブジェクト１１ａ，１１ｂ，１１ｃを表示する場合がある。

電子ペン３００は先端に赤外線を発光する発光素子を備えている。電子ペン３００の電源が投入されると発光素子は発光する。例えばユーザ１２が発光した電子ペン３００を用いて表示エリア１１内で矩形を描く行動をとると、カメラ２００はその赤外線の軌跡を撮像する。例えばユーザ１２が発光した電子ペン３００を用いてオブジェクト１１ａを指定した状態で移動させると、カメラ２００はその赤外線の軌跡を撮像する。

サーバ装置４００はプロジェクタ１００の動作を制御する。例えば、サーバ装置４００が上述した赤外線の軌跡をカメラ２００から受け付けると、サーバ装置４００は受け付けた赤外線の軌跡を判定し、判定結果に応じて、プロジェクタ１００にオブジェクト１１ａを表示させたり、オブジェクト１１ａの表示位置を変更させたりする。これにより、プロジェクタ１００はオブジェクト１１ａを表示したり、電子ペン３００の移動先を表す位置にオブジェクト１１ａを表示したりする。

ところで、上述したオブジェクト１１ａ，１１ｂ，１１ｃが互いに重畳していても、重畳度合が低い、言い換えれば、あまり重畳していなければ、オブジェクト１１ａ，１１ｂ，１１ｃのいずれかを指定する操作はさほど難しくない。しかしながら、重畳度合が高い、言い換えれば、非常に重畳している又は完全に重畳している場合、オブジェクト１１ａ，１１ｂ，１１ｃのいずれかを指定する操作は極めて難しくなる。

例えば、オブジェクト１１ａによりオブジェクト１１ｂの大部分が隠れている状態で、オブジェクト１１ｂを移動させる場合、オブジェクト１１ｂを指定できる部分が非常に小さいため、オブジェクト１１ａを移動させた上で、オブジェクト１１ｂを指定する操作を行うことが求められる。例えば、オブジェクト１１ａとオブジェクト１１ｂとによってオブジェクト１１ｃが隠れている状態で、オブジェクト１１ｃを移動させる場合、オブジェクト１１ａとオブジェクト１１ｂのいずれかを移動させた上で、オブジェクト１１ｃを指定する操作を行うことが要求される。

このような場合、例えばサーバ装置４００がオブジェクト１１ａ，１１ｂ，１１ｃの重畳度合を判断して、動的に重畳度合を下げる制御を行うことも想定される。しかしながら、ブレインストーミングといった目的で表示制御システムＳを利用する場合、オブジェクト１１ａ，１１ｂ，１１ｃの位置関係により類似性が表されていたり、オブジェクト１１ａ，１１ｂ，１１ｃの上下関係により重要度が表されていたりすることがある。このような場合、サーバ装置４００が動的に重畳度合を下げる制御を行うことは望ましくない。したがって、以下では、オブジェクト１１ａ，１１ｂ，１１ｃの位置関係や上下関係といった相関関係を動的に変更せずに、重畳するオブジェクト１１ａ，１１ｂ，１１ｃの操作性を向上できる手法を説明する。

次に、図２を参照して、サーバ装置４００のハードウェア構成について説明する。

図２はサーバ装置４００のハードウェア構成の一例である。図２に示すように、サーバ装置４００は、少なくともプロセッサとしてのCentral Processing Unit（ＣＰＵ）４００Ａ、Random Access Memory（ＲＡＭ）４００Ｂ、Read Only Memory（ＲＯＭ）４００Ｃ、及びネットワークＩ／Ｆ（インタフェース）４００Ｄを含んでいる。サーバ装置４００は、必要に応じて、Hard Disk Drive（ＨＤＤ）４００Ｅ、入力Ｉ／Ｆ４００Ｆ、出力Ｉ／Ｆ４００Ｇ、入出力Ｉ／Ｆ４００Ｈ、ドライブ装置４００Ｉの少なくとも１つを含んでいてもよい。ＣＰＵ４００Ａからドライブ装置４００Ｉまでは、内部バス４００Ｊによって互いに接続されている。少なくともＣＰＵ４００ＡとＲＡＭ４００Ｂとが協働することによってコンピュータが実現される。尚、ＣＰＵ２００Ａに代えてMicro Processing Unit（ＭＰＵ）をプロセッサとして利用してもよい。

入力Ｉ／Ｆ４００Ｆには、カメラ２００が接続される。カメラ２００としては、例えば赤外線カメラなどがある。
出力Ｉ／Ｆ４００Ｇには、プロジェクタ１００が接続される。
入出力Ｉ／Ｆ４００Ｈには、半導体メモリ７３０が接続される。半導体メモリ７３０としては、例えばUniversal Serial Bus（ＵＳＢ）メモリやフラッシュメモリなどがある。入出力Ｉ／Ｆ４００Ｈは、半導体メモリ７３０に記憶されたプログラムやデータを読み取る。
入力Ｉ／Ｆ４００Ｆ、出力Ｉ／Ｆ４００Ｇ、及び入出力Ｉ／Ｆ４００Ｈは、例えばＵＳＢポートを備えている。

ドライブ装置４００Ｉには、可搬型記録媒体７４０が挿入される。可搬型記録媒体７４０としては、例えばCompact Disc（ＣＤ）−ＲＯＭ、Digital Versatile Disc（ＤＶＤ）といったリムーバブルディスクがある。ドライブ装置４００Ｉは、可搬型記録媒体７４０に記録されたプログラムやデータを読み込む。
ネットワークＩ／Ｆ４００Ｄは、例えばポートとPhysical Layer Chip（ＰＨＹチップ）とを備えている。

上述したＲＡＭ４００Ｂには、ＲＯＭ４００ＣやＨＤＤ４００Ｅに記憶されたプログラムがＣＰＵ４００Ａによって格納される。ＲＡＭ４００Ｂには、可搬型記録媒体７４０に記録されたプログラムがＣＰＵ４００Ａによって格納される。格納されたプログラムをＣＰＵ４００Ａが実行することにより、サーバ装置４００は後述する各種の機能を実現し、また、後述する各種の処理を実行する。尚、プログラムは後述するフローチャートに応じたものとすればよい。

次に、図３乃至図５を参照して、サーバ装置４００が実行又は実現する各機能について説明する。

図３はサーバ装置４００の機能ブロック図の一例である。図４はオブジェクト情報記憶部４１０の一例である。図５は操作チップ情報記憶部４２０の一例である。図３に示すように、サーバ装置４００は、オブジェクト情報記憶部４１０、操作チップ情報記憶部４２０、画像読込部４３０、処理部としての情報処理部４４０、及び表示制御部４５０を含んでいる。画像読込部４３０及び表示制御部４５０の少なくとも一方を情報処理部４４０と併せて処理部としてもよい。尚、オブジェクト情報記憶部４１０及び操作チップ情報記憶部４２０は、例えば上述したＲＡＭ４００Ｂ、ＲＯＭ４００Ｃ又はＨＤＤ４００Ｅによって実現される。画像読込部４３０、情報処理部４４０、及び表示制御部４５０は、例えば上述したＣＰＵ４００Ａによって実現される。

オブジェクト情報記憶部４１０はオブジェクト１１ａ，１１ｂ，１１ｃの属性を特定するオブジェクト情報を記憶する。具体的には、図４に示すように、オブジェクト情報はオブジェクトテーブルＴ１によって管理される。オブジェクト情報はオブジェクトＩＤ、オブジェクト名、データ形式、オブジェクト種別、位置座標、横幅及び縦幅（図４において横幅，縦幅と表記）、並びに表示レイヤを構成要素として含んでいる。

オブジェクトＩＤはオブジェクト情報を識別する識別情報である。オブジェクト名はオブジェクト１１ａ，１１ｂ，１１ｃの名称である。データ形式はオブジェクト１１ａ，１１ｂ，１１ｃを表すデータの形式である。オブジェクト１１ａ，１１ｂ，１１ｃは例えばストリング形式であったり、バイナリ形式であったりする。オブジェクト種別はオブジェクト１１ａ，１１ｂ，１１ｃの種別を表している。例えば表示エリア１１内に表示されるオブジェクト１１ａ，１１ｂが付箋を表していれば、オブジェクト種別「付箋」が登録される。例えば表示エリア１１に表示されるオブジェクト１１ｃが写真やグラフなどを表していれば、オブジェクト種別「画像」が登録される。位置座標はオブジェクト１１ａ，１１ｂ，１１ｃが表示される位置のＸ座標及びＹ座標を表している。より詳しくは、位置座標はオブジェクト１１ａ，１１ｂ，１１ｃの四隅のいずれかの位置（例えば左上の位置）又は中心の位置のＸ座標及びＹ座標を表している。横幅及び縦幅はオブジェクト１１ａ，１１ｂ，１１ｃのＸ方向の長さ及びＹ方向の長さを表している。表示レイヤはオブジェクト１１ａ，１１ｂ，１１ｃのレイヤ（層）を表している。表示レイヤ「１」は最上位のレイヤを表しており、表示レイヤの数値が大きくなるにつれて、下位のレイヤが表される。

操作チップ情報記憶部４２０は操作チップの属性を特定する操作チップ情報を記憶する。操作部品としての操作チップはプロジェクタ１００によって表示エリア１１内に予め定めた大きさで表示される矩形のオブジェクトの一種である。そして、操作チップはオブジェクト１１ａ，１１ｂ，１１ｃに付随する補助的なオブジェクトである。操作チップにはオブジェクト１１ａ，１１ｂ，１１ｃそれぞれの表示名が識別情報として表記される。操作チップ情報は、図５に示すように、操作チップテーブルＴ２によって管理される。操作チップ情報はチップＩＤ、位置座標、表示レイヤ、及び表示名を構成要素として含んでいる。

チップＩＤは操作チップ情報を識別する識別情報である。チップＩＤにはオブジェクトＩＤと同一の値が登録される。位置座標は操作チップが表示される位置のＸ座標及びＹ座標を表している。より詳しくは、位置座標は操作チップの四隅のいずれかの位置（例えば左上の位置）又は中心の位置のＸ座標及びＹ座標を表している。表示レイヤは操作チップと関連付けられたオブジェクト１１ａ，１１ｂ，１１ｃの表示レイヤを表している。表示名は操作チップの内部に表記される識別情報を表している。

図３に戻り、画像読込部４３０はカメラ２００が撮像した赤外線を撮像画像としてカメラ２００から定期的に読み込んで保持する。情報処理部４４０は画像読込部４３０が保持する撮像画像を取得する。情報処理部４４０は撮像画像を取得し、取得した撮像画像に基づいて種々の情報処理を実行し、実行結果に応じて表示制御部４５０の動作を制御する。例えば、情報処理部４４０は撮像画像内にオブジェクト１１ａ，１１ｂ，１１ｃを選択する赤外線の軌跡を検出した場合、オブジェクト１１ａ，１１ｂ，１１ｃの表示態様を変更する指示及び操作チップを表示させる指示を表示制御部４５０に出力する。表示制御部４５０は情報処理部４４０から出力された指示を受け付けると、オブジェクト１１ａ，１１ｂ，１１ｃの表示態様を変更し、変更後のオブジェクト１１ａ，１１ｂ，１１ｃ及び操作チップをプロジェクタ１００に表示させる。すなわち、情報処理部４４０は表示制御部４５０及びプロジェクタ１００を通じてオブジェクト１１ａ，１１ｂ，１１ｃ及び操作チップを表示する。尚、情報処理部４４０が実行するその他の情報処理については後述する。

続いて、図６から図９を参照して、第１実施形態に係るサーバ装置４００の動作について説明する。

図６は第１実施形態に係るサーバ装置４００の動作の一例を示すフローチャートである。図７（ａ）から（ｄ）は操作チップ１５ａ，１５ｂ，１５ｃを表示するまでの操作と表示した後の操作を説明するための図である。図８は操作チップ表示処理の一例を示すフローチャートである。図９（ａ）及び（ｂ）は操作チップの表示を説明するための図である。

まず、図６に示すように、サーバ装置４００の情報処理部４４０はオブジェクト１１ａ，１１ｂ，１１ｃの選択を受け付けたか否かを判断する（ステップＳ１０１）。例えば、図７（ａ）に示すように、表示エリア１１内にオブジェクト１１ａ，１１ｂ，１１ｃが重畳した状態で表示されている場合に、図７（ｂ）に示すように、赤外線を発光している電子ペン３００が始点位置Ｐから終点位置Ｑまで移動すると、情報処理部４４０は始点位置Ｐから終点位置Ｑまでの線分を対角線とする矩形領域Ｒを赤外線の軌跡に基づいて検出する。情報処理部４４０は検出した矩形領域Ｒ内にオブジェクト１１ａ，１１ｂ，１１ｃが含まれていれば、矩形領域Ｒ内に含まれるオブジェクト１１ａ，１１ｂ，１１ｃの選択を受け付けたと判断する（ステップＳ１０１：ＹＥＳ）。

情報処理部４４０はオブジェクト１１ａ，１１ｂ，１１ｃの選択を受け付けたと判断すると、オブジェクト１１ａ，１１ｂ，１１ｃの表示態様を変更する指示を表示制御部４５０に出力する。これにより、表示制御部４５０はオブジェクト１１ａ，１１ｂ，１１ｃの表示態様を変更する。例えば、表示制御部４５０はオブジェクト１１ａ，１１ｂ，１１ｃがそれぞれ含む文字や画像の表示を中止して、オブジェクト１１ａ，１１ｂ，１１ｃを透過状態で表示する。例えば、表示制御部４５０はオブジェクト１１ａ，１１ｂ，１１ｃのそれぞれの外形を定める枠を表示する。これにより、ユーザ１２はオブジェクト１１ａ，１１ｂ，１１ｃの選択がサーバ装置４００に受け付けられたと認識することができる。

尚、情報処理部４４０は検出した矩形領域Ｒ内にオブジェクト１１ａ，１１ｂ，１１ｃが全く含まれていない場合、以後の処理を中止する（ステップＳ１０１：ＮＯ）。一方、情報処理部４４０は検出した矩形領域Ｒ内に例えばオブジェクト１１ｂが部分的に含まれていれば、オブジェクト１１ｂの選択を受け付けたと判断する。オブジェクト１１ａ，１１ｃについてもオブジェクト１１ｂと同様である。

情報処理部４４０は指示を出力すると、次いで、配列Ａ［］にオブジェクト１１ａ，１１ｂ，１１ｃを格納する（ステップＳ１０２）。より詳しくは、情報処理部４４０は配列Ａ［］に選択されたオブジェクト１１ａ，１１ｂ，１１ｃを選択された順に格納する。配列Ａ［］は選択されたオブジェクト１１ａ，１１ｂ，１１ｃを管理する配列である。例えば、図７（ｂ）に示すように、オブジェクト１１ｂ、オブジェクト１１ａ、オブジェクト１１ｃの順に選択された場合、情報処理部４４０は配列Ａ［］にオブジェクト１１ａ，１１ｂ，１１ｃをオブジェクト１１ｂ、オブジェクト１１ａ、オブジェクト１１ｃの順に格納する。

ステップＳ１０２の処理が完了すると、次いで、情報処理部４４０は配列Ａ［］の要素についてループ処理を開始する（ステップＳ１０３）。まず、情報処理部４４０は配列Ａ［ｉ］のオブジェクト情報を取得する（ステップＳ１０４）。より詳しくは、情報処理部４４０は配列Ａ［ｉ］のオブジェクト情報に含まれるオブジェクトＩＤと表示レイヤとを取得する。ここで、ｉは例えば１から開始するカウンタ変数である。すなわち、情報処理部４４０はオブジェクト１１ａ，１１ｂ，１１ｃの中からｉ番目に位置するオブジェクト１１ａ，１１ｂ，１１ｃのいずれかを後続の処理対象として特定し、処理対象のオブジェクト情報をオブジェクト情報記憶部４１０から取得する。例えば、図７（ｂ）に示すように、オブジェクト１１ｂ、オブジェクト１１ａ、オブジェクト１１ｃの順に選択された場合、最初に、情報処理部４４０はオブジェクト１１ｂのオブジェクト情報を取得する。

ステップＳ１０４の処理が完了すると、次いで、情報処理部４４０は配列Ｂ［ｉ］にオブジェクト情報を格納する（ステップＳ１０５）。より詳しくは、情報処理部４４０はステップＳ１０４の処理で取得したオブジェクトＩＤと表示レイヤとを配列Ｂ［ｉ］に格納する。配列Ｂ［］は操作チップを管理する配列である。

ステップＳ１０５の処理が完了すると、情報処理部４４０はループ処理を終了する（ステップＳ１０６）。したがって、情報処理部４４０は上述したステップＳ１０４及びＳ１０５の処理を終えていない処理対象が存在する場合、ｉをカウントアップして次の処理対象を特定し、ステップＳ１０４及びＳ１０５の処理を繰り返す。これにより、配列Ｂ［］にはオブジェクト１１ａ，１１ｂ，１１ｃ全てのオブジェクトＩＤと表示レイヤが格納される。

ステップＳ１０６の処理が完了すると、次いで、情報処理部４４０は配列Ｂ［］を表示レイヤによりソートする（ステップＳ１０７）。例えば、オブジェクト１１ａ，１１ｂ，１１ｃがオブジェクト１１ｂ、オブジェクト１１ａ、オブジェクト１１ｃの順に配列Ｂ［］に格納されている場合、オブジェクト１１ｂは表示レイヤ「２」、オブジェクト１１ａは表示レイヤ「１」、オブジェクト１１ｃは表示レイヤ「３」であるため（図４参照）、情報処理部４４０はオブジェクト１１ａ、オブジェクト１１ｂ、オブジェクト１１ｃの順に並び替える。ステップＳ１０７の処理が完了すると、次いで、情報処理部４４０はソートされたオブジェクト情報に基づいて操作チップ表示処理を実行する（ステップＳ１０８）。操作チップ表示処理は表示エリア１１内に操作チップを表示する処理である。

より詳しくは、図８に示すように、情報処理部４４０は、まず、最初に表示する操作チップの位置座標Ｘを、Ｘ＝ｍａｘ（Ａ［］．Ｘ＋Ａ［］．Ｘｌｅｎｇｔｈ）＋αと決定する（ステップＳ１１１）。ステップＳ１１１の処理が完了すると、次いで、最初に表示する操作チップの位置座標Ｙを、Ｙ＝ｍａｘ（Ａ［］．Ｙ＋Ａ［］．Ｙｌｅｎｇｔｈ）と決定する（ステップＳ１１２）。尚、Ｘｌｅｎｇｔｈ及びＹｌｅｎｇｔｈはそれぞれオブジェクト１１ａ，１１ｂ，１１ｃのＸ方向及びＹ方向の長さを表している。

例えば図９（ａ）に示すように、選択されたオブジェクト１１ａ，１１ｂ，１１ｃの枠１１ａ´，１１ｂ´，１１ｃ´が表示された場合、情報処理部４４０は位置座標及び横幅に基づき枠１１ａ´，１１ｂ´，１１ｃ´のＸ座標の中から最大のＸ座標を決定する。本実施形態の場合、情報処理部４４０は枠１１ｃ´の右上又は右下のＸ座標を特定し、特定したＸ座標から所定値α離れた位置を操作チップ１５ａの表示位置のＸ座標と決定する。すなわち、所定値αは枠１１ａ´，１１ｂ´，１１ｃ´を囲う最小の矩形領域Ｒ´と操作チップ１５ａの余白領域を規定する値に相当する。同様に、情報処理部４４０は位置座標及び縦幅に基づき枠１１ａ´，１１ｂ´，１１ｃ´のＹ座標の中から最大のＹ座標を特定する。本実施形態の場合、情報処理部４４０は枠１１ｂ´のＹ座標を特定し、特定したＹ座標の位置を操作チップ１５ａの表示位置のＹ座標と決定する。

ステップＳ１１２の処理が完了すると、図８に示すように、次いで、情報処理部４４０は配列Ｂ［］の要素についてループ処理を開始する（ステップＳ１１３）。まず、情報処理部４４０は位置座標（Ｘ，Ｙ）にｉ番目の操作チップを表示する（ステップＳ１１４）。より詳しくは、情報処理部４４０は表示制御部４５０を制御して、ステップＳ１１１及びＳ１１２で決定した位置座標（Ｘ，Ｙ）に操作チップの左上の頂点を合わせてｉ番目の操作チップをプロジェクタ１００に表示させる。これにより、図９（ａ）に示すように、プロジェクタ１００は表示エリア１１内に操作チップ１５ａを表示する。

尚、情報処理部４４０は操作チップ１５ａを表示する際、操作チップ１５ａにオブジェクト１１ａを識別する表示名を表記して表示する。情報処理部４４０は表示名を例えばオブジェクト種別に基づいて決定する。また、情報処理部４４０は操作チップ１５ａを表示する際、オブジェクト１１ａと操作チップ１５ａとを対応付ける対応線１６ａを併せて表示する。情報処理部４４０は例えば対応線１６ａの一端をオブジェクト１１ａの中心に指定して表示する。

ステップＳ１１４の処理が完了すると、次いで、情報処理部４４０は位置座標Ｙからβを引いた位置を新たな位置座標Ｙと決定する（ステップＳ１１５）。ステップＳ１１５の処理が完了すると、情報処理部４４０はループ処理を終了する（ステップＳ１１６）。したがって、情報処理部４４０は上述したステップＳ１１４及びＳ１１５の処理を終えていない処理対象が存在する場合、ｉをカウントアップして次の処理対象を特定し、ステップＳ１１４及びＳ１１５の処理を繰り返す。これにより、図９（ｂ）に示すように、プロジェクタ１００は表示エリア１１内に操作チップ１５ａの左上の頂点から所定値β離れた位置に操作チップ１５ｂを表示する。すなわち、所定値βは操作チップ１５ａの縦方向の長さに操作チップ１５ａ，１５ｂ間の余白領域分の長さを加えた値に相当する。尚、操作チップ１５ｃは図示しないが、同様の手法により、プロジェクタ１００は操作チップ１５ｂを基準に操作チップ１５ｃを表示する。情報処理部４４０は全ての操作チップを表示すると、処理を終える。

以上の処理により、表示エリア１１内には、図７（ｃ）に示すように、オブジェクト１１ａ，１１ｂ，１１ｃに対応する枠１１ａ´，１１ｂ´，１１ｃ´と対応付けられた操作チップ１５ａ，１５ｂ，１５ｃが表示レイヤに応じた順序に並んで表示される。例えば、図７（ｃ）に示すように、赤外線を発光している電子ペン３００により操作チップ１５ｂを指定する操作（例えばタップなど）が行われると、情報処理部４４０は操作チップ１５ｂに対する指定を赤外線に基づいて検出する。情報処理部４４０は操作チップ１５ｂに対する指定を検出すると、図７（ｄ）に示すように、指定された操作チップ１５ｂと対応付けられた枠１１ｂ´をオブジェクト１１ｂに変更して表示する。その際、情報処理部４４０は指定された操作チップ１５ｂの表示態様も変更して表示する。例えば、情報処理部４４０は指定された操作チップ１５ｂの外形に応じた太枠１５ｂ´を表示したり、外形の濃度を濃く表示したりする。

このように、オブジェクト１１ｂの大部分がオブジェクト１１ａに隠れていることによりオブジェクト１１ｂを指定する操作が難しい場合であっても、操作チップ１５ｂを指定する操作により、情報処理部４４０はオブジェクト１１ｂを操作可能な状態（以下、活性化した状態という）で表示するため、オブジェクト１１ｂの操作性を向上することができる。仮にオブジェクト１１ｂの全てがオブジェクト１１ａに隠れている場合であっても同様である。

（第２実施形態）
続いて、図１０から図１２を参照して、本件の第２実施形態について説明する。図１０は第２実施形態に係るサーバ装置４００の動作の一例を示すフローチャートである。図１１（ａ）及び（ｂ）は表示レイヤを変更する操作の一例を説明するための図である。図１２（ａ）から（ｃ）は更新手法の一例を説明するための図である。

まず、図１０に示すように、情報処理部４４０は配列Ｂ´［］に現在の配列Ｂ［］を設定する（ステップＳ２０１）。配列Ｂ´［］は操作チップの表示位置の変更を管理する配列である。例えば、上述した図７（ｄ）に示す状態から、図１１（ａ）に示すように、赤外線を発光している電子ペン３００により操作チップ１５ｂの表示位置を操作チップ１５ａの位置より上の位置に移動させる操作をユーザ１２が行うと、情報処理部４４０は赤外線の軌跡を検出し、配列Ｂ´［］に現在の配列Ｂ［］を設定する。

ステップＳ２０１の処理が完了すると、次いで、情報処理部４４０は操作チップ１５ｂの表示順位Ｎ，Ｍの大きさを判断する（ステップＳ２０２）。表示順位Ｎは例えば操作チップ１５ｂの移動元の順位であり、表示順位Ｍは例えば操作チップ１５ｂの移動先の順位である。本実施形態では、図１１（ａ）に示すように、操作チップ１５ｂは表示順位「２」から表示順位「１」に移動するため、情報処理部４４０はＮ＝２、Ｍ＝１として表示順位Ｎ，Ｍの大きさを判断する。

情報処理部４４０は表示順位Ｎが表示順位Ｍより大きいと判断した場合（ステップＳ２０２：ＮＯ）、ｉにＭを設定し、ループ処理を開始する（ステップＳ２０３）。まず、情報処理部４４０は配列Ｂ［ｉ］．Ｙに配列Ｂ´［ｉ＋１］．Ｙを設定する（ステップＳ２０４）。ステップＳ２０４の処理により、表示順位「１」の操作チップ１５ａの表示位置が表示順位「２」に変更される。

ステップＳ２０４の処理が完了すると、情報処理部４４０はループ処理を終了する（ステップＳ２０５）。したがって、情報処理部４４０は上述したステップＳ２０４の処理を終えていない処理対象が存在する場合、ｉをカウントアップして次の処理対象を特定し、ステップＳ２０４の処理を繰り返す。本実施形態では表示順位が繰り下がる対象は操作チップ１５ａのみであるため、情報処理部４４０はカウントアップせずに処理を終了するが、例えば操作チップ１５ａ以外の別の操作チップ（不図示）が操作チップ１５ｂの表示順位より上位に表示されていれば、情報処理部２０４はステップＳ２０４の処理を繰り返す。これにより、別の操作チップ（不図示）の表示順位も繰り下がる。

ステップＳ２０５の処理が完了すると、次いで、情報処理部４４０は配列Ｂ［Ｎ］．ＹにＢ´［Ｍ］．Ｙを設定する（ステップＳ２０６）。ステップＳ２０６の処理により、表示順位「２」の操作チップ１５ｂの表示位置が表示順位「１」に変更される。ステップＳ２０６の処理が完了すると、次いで、情報処理部４４０は操作チップ１５ａ，１５ｂの表示を更新する（ステップＳ２０７）。これにより、図１１（ｂ）に示すように、操作チップ１５ａと操作チップ１５ｂの表示位置が入れ替わる。

ステップＳ２０７の処理が完了すると、次いで、情報処理部４４０は表示レイヤを更新する（ステップＳ２０８）。より詳しくは、情報処理部４４０は操作チップ情報記憶部４２０にアクセスして、操作チップ情報の表示レイヤを変更する。そして、情報処理部４４０はオブジェクト情報記憶部４１０にアクセスして、オブジェクト情報の表示レイヤを変更する。本実施形態の場合、情報処理部４４０は操作チップ情報及びオブジェクト情報のそれぞれにおけるチップＩＤ「Ｋ００１」の表示レイヤ「１」を表示レイヤ「２」に変更し、チップＩＤ「Ｋ００２」の表示レイヤ「２」を表示レイヤ「１」に変更する。

尚、上述したステップＳ２０２の処理において、情報処理部４４０は表示順位Ｎが表示順位Ｍより小さいと判断した場合（ステップＳ２０２：ＹＥＳ）、ｉにＮ＋１を設定し、ループ処理を開始する（ステップＳ２０９）。例えば、操作チップ１５ａの表示位置を操作チップ１５ｃの表示位置より下位に移動させた場合、情報処理部４４０は表示順位Ｎが表示順位Ｍより小さいと判断する。この場合、まず、情報処理部４４０は配列Ｂ［ｉ］．Ｙに配列Ｂ´［ｉ−１］．Ｙを設定する（ステップＳ２１０）。ステップＳ２１０の処理により、表示順位「２」の操作チップ１５ｂの表示位置が表示順位「１」に変更される。

ステップＳ２１０の処理が完了すると、情報処理部４４０はループ処理を終了する（ステップＳ２１１）。したがって、情報処理部４４０は上述したステップＳ２１０の処理を終えていない処理対象が存在する場合、ｉをカウントアップして次の処理対象を特定し、ステップＳ２１０の処理を繰り返す。これにより、例えば操作チップ１５ｃの表示順位が繰り上がる。ステップＳ２１１の処理が完了すると、情報処理部４４０は上述したステップＳ２０６からＳ２０８の処理を実行する。

このように、第２実施形態によれば、操作チップ１５ａ，１５ｂ，１５ｃの表示位置を移動させる操作をユーザ１２が電子ペン３００を用いて行えば、操作チップ１５ａ，１５ｂ，１５ｃと対応付けられたオブジェクト１１ａ，１１ｂ，１１ｃの表示レイヤを変更することができる。したがって、例えば付箋を表すオブジェクト１１ａ，１１ｂの重要度をユーザ１２が変更したい場合、操作チップ１５ａ，１５ｂの表示位置を変更する操作を電子ペン３００で行うことにより、オブジェクト１１ａ，１１ｂの上下関係を変更して重要度を変更することができる。

尚、第２実施形態ではオブジェクト１１ａ，１１ｂ，１１ｃを選択し、操作チップ１５ａ，１５ｂ，１５ｃの表示位置を変更することにより表示レイヤを更新する場合を説明したが、表示レイヤの更新には種々の更新手法がある。例えば、図１２（ａ）に示すように、オブジェクト名「Ａ」〜「Ｈ」の８つのオブジェクトが表示レイヤ「１」〜「８」の順に重畳している状態を説明する。仮にオブジェクト名「Ｂ」，「Ｄ」，「Ｅ」の各オブジェクトをユーザ１２が選択し、選択したオブジェクト名「Ｂ」，「Ｄ」，「Ｅ」の各オブジェクトの表示順序をオブジェクト名「Ｅ」，「Ｂ」，「Ｄ」の順にユーザ１２が変更する場合、情報処理部４４０は選択されたオブジェクトの元の位置関係を利用して表示レイヤを更新してもよい。具体的には、図１２（ｂ）に示すように、情報処理部４４０はオブジェクト名「Ｅ」のオブジェクトを表示レイヤ「２」に更新し、オブジェクト名「Ｂ」のオブジェクトを表示レイヤ「４」に更新し、オブジェクト名「Ｄ」のオブジェクトを表示レイヤ「５」に更新してもよい。

一方、情報処理部４４０は選択されたオブジェクトの中で最上位又は最下位のオブジェクトに寄せる方式で表示レイヤを更新してもよい。具体的には、図１２（ｃ）に示すように、情報処理部４４０はオブジェクト名「Ｅ」のオブジェクトを表示レイヤ「３」に更新し、オブジェクト名「Ｂ」のオブジェクトを表示レイヤ「４」に更新し、オブジェクト名「Ｄ」のオブジェクトを表示レイヤ「５」に更新してもよい。このように、種々の更新手法で表示レイヤを更新することができる。

（その他の実施形態）
以下、図１３から図１７を参照して、本件のその他の実施形態について説明する。図１３（ａ）及び（ｂ）はオブジェクト１１ｂの編集を説明するための図である。図７（ｄ）を参照して説明したように、操作チップ１５ｂを指定する操作によりオブジェクト１１ｂが活性化した状態で表示されると、情報処理部４４０は活性化した状態で表示したオブジェクト１１ｂを編集対象として編集可能に制御する。例えば図１３（ａ）に示すように、オブジェクト１１ｂに「案：ＤＥＦ・・・」が記載されている場合、ユーザ１２は赤外線を発光している電子ペン３００を用いて、図１３（ｂ）に示すように、オブジェクト１１ｂの記載内容を「案：ＰＱＲ・・・」に編集することができる。

図１４は操作チップ１５ａ，１５ｂ，１５ｃに表記する表示名を説明するための図である。第１実施形態では、情報処理部４４０が例えばオブジェクト種別に基づいて決定した表示名を操作チップ１５ａ，１５ｂ，１５ｃの内部に表記する形態を説明した。例えば、図１４に示すように、情報処理部４４０はオブジェクト１１ａ，１１ｂ，１１ｃの記載内容を表示名として操作チップ１５ａ，１５ｂ，１５ｃの内部に表記するようにしてもよい。情報処理部４４０は記載内容に代えて、オブジェクト情報に含まれる構成要素のいずれかを表記するようにしてもよい。

図１５（ａ）から（ｃ）は操作チップ１５ｂの編集を説明するための図である。ユーザ１２が操作チップ１５ｂを指定する操作を行うと、情報処理部４４０は指定された操作チップ１５ｂを編集可能に制御する。そして、ユーザ１２が操作チップ１５ｂを編集する操作を行うと、情報処理部４４０は操作チップ１５ｂに対する編集内容を操作チップ１５ｂに対応付けられたオブジェクト１１ｂに反映させる制御を実行する。

具体的には、図１５（ａ）に示すように、ユーザ１２が操作チップ１５ｂを指定する操作を行うと、指定された操作チップ１５ｂの内部に表記された「付箋２」が編集可能になる。これにより、ユーザ１２は、図１５（ｂ）に示すように、「付箋２」を「案：ＰＱＲ・・・」などに編集することができる。ユーザ１２が操作チップ１５ｂを編集する操作を終えると、情報処理部４４０は操作チップ１５ｂに対する編集内容を操作チップ１５ｂに対応付けられたオブジェクト１１ｂに反映させる。これにより、図１５（ｃ）に示すように、オブジェクト１１ｂに「案：ＰＱＲ・・・」が反映される。

図１６（ａ）及び（ｂ）はオブジェクト１１ｂの移動の一例を説明するための図である。例えば、図１６（ａ）に示すように、活性化した状態で表示されたオブジェクト１１ｂを、赤外線を発光している電子ペン３００で移動対象として指定すると、情報処理部４４０は指定されたオブジェクト１１ｂを移動可能に制御する。これにより、図１６（ｂ）に示すように、指定されたオブジェクト１１ｂを移動させることができる。

図１７（ａ）及び（ｂ）はオブジェクト１１ｂの移動の他の一例を説明するための図である。例えば、図１７（ａ）に示すように、指定された操作チップ１５ｂを、赤外線を発光している電子ペン３００で操作チップ１５ｂを指定する操作と異なる特定の操作（例えばロングタップなど）で指定すると、情報処理部４４０は特定の操作で指定されたオブジェクト１１ｂを、図１７（ｂ）に示すように、特定の操作で指定された位置に引き寄せる制御を行う。情報処理部４４０は操作チップ１５ｂとオブジェクト１１ｂが重畳すると判定すると、オブジェクト１１ｂを操作チップ１５ｂの背面に表示する制御を行う。

さらに、図示しないが、表示レイヤで指定された表示順位に基づき、表示されたオブジェクトの背面にそのオブジェクトの大きさより小さなオブジェクトが隠れて表示されている場合がある。このような場合、ユーザ１２は小さなオブジェクトを直接指定する操作を行うことができず、見逃されるおそれがある。したがって、情報処理部４４０は小さなオブジェクトの前面に表示されたオブジェクトを選択する操作を検出した場合、小さなオブジェクトも併せて選択する操作が行われたと判断してもよい。

以上、本発明の好ましい実施形態について詳述したが、本発明に係る特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。例えば、操作チップの形状は適宜定めてもよい。

なお、以上の説明に関して更に以下の付記を開示する。
（付記１）表示エリアに重ねて表示された複数のオブジェクトの選択を受け付けると、オブジェクトの表示レイヤに関する情報を記憶する記憶部を参照して、選択された前記複数のオブジェクトそれぞれの表示レイヤを特定し、選択された前記複数のオブジェクトそれぞれの識別情報が表記された複数の操作部品を、特定した前記表示レイヤに応じた順序で並べて前記表示エリアに表示する、処理をコンピュータに実行させることを特徴とする表示制御プログラム。
（付記２）表示した前記複数の操作部品のうち、何れかの操作部品の選択を受け付けると、選択された前記何れかの操作部品に対応するオブジェクトを移動対象又は編集対象のオブジェクトとして選択する、ことを特徴とする付記１に記載の表示制御プログラム。
（付記３）表示した前記複数の操作部品のうち、何れかの操作部品と他の操作部品との間で、前記順序を入れ替える操作を受け付けると、前記何れかの操作部品に応じたオブジェクトの表示レイヤと、前記他の操作部品に応じたオブジェクトの表示レイヤとを入れ替える、ことを特徴とする付記１に記載の表示制御プログラム。
（付記４）選択された前記複数のオブジェクトの位置に応じた位置に、前記複数の操作部品を表示する、ことを特徴とする付記１に記載の表示制御プログラム。
（付記５）前記表示エリア上の範囲を指定する操作を受け付けた場合、指定された前記範囲に含まれる複数のオブジェクトを、選択された前記複数のオブジェクトであると判定する、ことを特徴とする付記１に記載の表示制御プログラム。
（付記６）指定された前記範囲に応じた位置に、前記複数の操作部品を表示する、ことを特徴とする付記５に記載の表示制御プログラム。
（付記７）前記表示エリア上の範囲を指定する操作を受け付けた場合、指定された前記範囲に含まれる複数のオブジェクトが含む文字及び画像のいずれか一方の表示を中止する、ことを特徴とする付記１に記載の表示制御プログラム。
（付記８）前記表示エリア上の範囲を指定する操作を受け付けた場合、指定された前記範囲に含まれる複数のオブジェクトを、前記複数のオブジェクトの外形を定める枠に変更する、ことを特徴とする付記１に記載の表示制御プログラム。
（付記９）表示エリアに重ねて表示された複数のオブジェクトの選択を受け付けると、オブジェクトの表示レイヤに関する情報を記憶する記憶部を参照して、選択された前記複数のオブジェクトそれぞれの表示レイヤを特定し、選択された前記複数のオブジェクトそれぞれの識別情報が表記された複数の操作部品を、特定した前記表示レイヤに応じた順序で並べて前記表示エリアに表示する、処理をコンピュータが実行することを特徴とする表示制御方法。
（付記１０）表示エリアに重ねて表示された複数のオブジェクトの選択を受け付けると、オブジェクトの表示レイヤに関する情報を記憶する記憶部を参照して、選択された前記複数のオブジェクトそれぞれの表示レイヤを特定し、選択された前記複数のオブジェクトそれぞれの識別情報が表記された複数の操作部品を、特定した前記表示レイヤに応じた順序で並べて前記表示エリアに表示する、処理を実行する処理部を備えることを特徴とする表示制御装置。
（付記１１）前記処理部は、表示した前記複数の操作部品のうち、何れかの操作部品の選択を受け付けると、選択された前記何れかの操作部品に対応するオブジェクトを移動対象又は編集対象のオブジェクトとして選択する、ことを特徴とする付記１０に記載の表示制御装置。
（付記１２）前記処理部は、表示した前記複数の操作部品のうち、何れかの操作部品と他の操作部品との間で、前記順序を入れ替える操作を受け付けると、前記何れかの操作部品に応じたオブジェクトの表示レイヤと、前記他の操作部品に応じたオブジェクトの表示レイヤとを入れ替える、ことを特徴とする付記１０に記載の表示制御装置。
（付記１３）前記処理部は、選択された前記複数のオブジェクトの位置に応じた位置に、前記複数の操作部品を表示する、ことを特徴とする付記１０に記載の表示制御装置。
（付記１４）前記処理部は、前記表示エリア上の範囲を指定する操作を受け付けた場合、指定された前記範囲に含まれる複数のオブジェクトを、選択された前記複数のオブジェクトであると判定する、ことを特徴とする付記１０に記載の表示制御装置。
（付記１５）前記処理部は、指定された前記範囲に応じた位置に、前記複数の操作部品を表示する、ことを特徴とする付記１４に記載の表示制御装置。
（付記１６）前記処理部は、前記表示エリア上の範囲を指定する操作を受け付けた場合、指定された前記範囲に含まれる複数のオブジェクトが含む文字及び画像のいずれか一方の表示を中止する、ことを特徴とする付記１０に記載の表示制御装置。
（付記１７）前記処理部は、前記表示エリア上の範囲を指定する操作を受け付けた場合、指定された前記範囲に含まれる複数のオブジェクトを、前記複数のオブジェクトの外形を定める枠に変更する、ことを特徴とする付記１０に記載の表示制御装置。

Ｓ 表示制御システム
１００ プロジェクタ
２００ カメラ
３００ 電子ペン
４００ サーバ装置
４１０ オブジェクト情報記憶部
４２０ 操作チップ情報記憶部
４３０ 画像読込部
４４０ 情報処理部
４５０ 表示制御部

Claims (10)

1. 表示エリアに重ねて表示された複数のオブジェクトの選択を受け付けると、オブジェクトの表示レイヤに関する情報を記憶する記憶部を参照して、選択された前記複数のオブジェクトそれぞれの表示レイヤを特定し、
   選択された前記複数のオブジェクトそれぞれの識別情報が表記された複数の操作部品を、特定した前記表示レイヤに応じた順序で並べて前記表示エリアに表示する、
   処理をコンピュータに実行させることを特徴とする表示制御プログラム。
2. 表示した前記複数の操作部品のうち、何れかの操作部品の選択を受け付けると、選択された前記何れかの操作部品に対応するオブジェクトを移動対象又は編集対象のオブジェクトとして選択する、
   ことを特徴とする請求項１に記載の表示制御プログラム。
3. 表示した前記複数の操作部品のうち、何れかの操作部品と他の操作部品との間で、前記順序を入れ替える操作を受け付けると、前記何れかの操作部品に応じたオブジェクトの表示レイヤと、前記他の操作部品に応じたオブジェクトの表示レイヤとを入れ替える、
   ことを特徴とする請求項１に記載の表示制御プログラム。
4. 選択された前記複数のオブジェクトの位置に応じた位置に、前記複数の操作部品を表示する、
   ことを特徴とする請求項１に記載の表示制御プログラム。
5. 前記表示エリア上の範囲を指定する操作を受け付けた場合、指定された前記範囲に含まれる複数のオブジェクトを、選択された前記複数のオブジェクトであると判定する、
   ことを特徴とする請求項１に記載の表示制御プログラム。
6. 指定された前記範囲に応じた位置に、前記複数の操作部品を表示する、
   ことを特徴とする請求項５に記載の表示制御プログラム。
7. 前記表示エリア上の範囲を指定する操作を受け付けた場合、指定された前記範囲に含まれる複数のオブジェクトが含む文字及び画像のいずれか一方の表示を中止する、
   ことを特徴とする請求項１に記載の表示制御プログラム。
8. 前記表示エリア上の範囲を指定する操作を受け付けた場合、指定された前記範囲に含まれる複数のオブジェクトを、前記複数のオブジェクトの外形を定める枠に変更する、
   ことを特徴とする請求項１に記載の表示制御プログラム。
9. 表示エリアに重ねて表示された複数のオブジェクトの選択を受け付けると、オブジェクトの表示レイヤに関する情報を記憶する記憶部を参照して、選択された前記複数のオブジェクトそれぞれの表示レイヤを特定し、
   選択された前記複数のオブジェクトそれぞれの識別情報が表記された複数の操作部品を、特定した前記表示レイヤに応じた順序で並べて前記表示エリアに表示する、
   処理をコンピュータが実行することを特徴とする表示制御方法。
10. 表示エリアに重ねて表示された複数のオブジェクトの選択を受け付けると、オブジェクトの表示レイヤに関する情報を記憶する記憶部を参照して、選択された前記複数のオブジェクトそれぞれの表示レイヤを特定し、
    選択された前記複数のオブジェクトそれぞれの識別情報が表記された複数の操作部品を、特定した前記表示レイヤに応じた順序で並べて前記表示エリアに表示する、
    処理を実行する処理部を備えることを特徴とする表示制御装置。

Images