JP2021033805A - 表示装置、表示方法、表示プログラム - Google Patents

Abstract

【課題】画像の消去を容易にすること目的とする。【解決手段】表示部に対する入力手段の接触位置の座標を取得する座標取得部と、前記座標に基づき、前記表示部に対して行われた操作を検知する操作検知部と、検知された操作が、前記表示部に表示された第一の画像を消去する第一の操作であるか、又は、前記表示部に表示された第二の画像を消去する第二の操作であるかを判定する消去判定部と、前記消去判定部による判定の結果に応じて、前記第一の画像又は前記第二の画像を前記表示部から消去する表示制御部と、を有する表示装置である。【選択図】図２

Description

本発明は、表示装置、表示方法、表示プログラムに関する。

従来から、手書きよって入力されたストローク画像等を描画する電子黒板等の表示装置が知られている。また、従来の表示装置では、描画されたストローク画像に対して、決められたタッチ操作が行われたると、このストローク画像が消去される。

上述した従来の技術では、ストローク画像が図形等と重なって描画されているストローク画像に対して消去するためのタッチ操作を行った場合、ストローク画像と共に、ストローク画像と重なって描画されている他の画像も消去されてしまう。このため、従来では、タッチ操作でストローク画像のみを消去することが考えられているが、その場合には、ストローク画像と重なっている画像を消去するための操作が煩雑になる。このように、従来の技術では、ストローク画像と、ストローク画像と重なっている画像とのそれぞれを容易に消去することが困難であった。

開示の技術は、画像の消去を容易にすること目的とする。

開示の技術は、表示部に対する入力手段の接触位置の座標を取得する座標取得部と、前記座標に基づき、前記表示部に対して行われた操作を検知する操作検知部と、検知された操作が、前記表示部に表示された第一の画像を消去する第一の操作であるか、又は、前記表示部に表示された第二の画像を消去する第二の操作であるかを判定する消去判定部と、前記消去判定部による判定の結果に応じて、前記第一の画像又は前記第二の画像を前記表示部から消去する表示制御部と、を有する表示装置である。

画像の消去を容易にすることができる。

電子黒板について説明する図である。 ストローク画像とオブジェクトの消去の概要を説明する図である。 電子黒板のハードウェア構成の一例を示す図である。 電子黒板の機能構成を説明する図である。 電子黒板のディスプレイに表示される画像について説明する図である。 ページデータを説明する図である。 ストローク配列データの一例を示す図である。 オブジェクト領域情報の一例を示す図である。 第一の実施形態の電子黒板の動作を説明するフローチャートである。 オブジェクトの消去について説明する図である。 ストローク画像とオブジェクトの消去について説明する図である。 第二の実施形態の電子黒板の動作を説明するフローチャートである。 電子黒板を含む情報処理システムのシステム構成の一例を示す図である。 情報処理システムの変形例を示す第一の図である。 情報処理システムの変形例を示す第二の図である。 情報処理システムの変形例を示す第三の図である。

（第一の実施形態）
以下に図面を参照して、本実施形態について説明する。図１は、電子黒板について説明する図である。

本実施形態の電子黒板２００は、近距離通信回路２１９、電源スイッチ２２２、ディスプレイ２８０、カメラ２６０を有する。電子黒板２００は、電源スイッチ２２２が押下されると、後述する表示制御部が、ディスプレイ２８０に、電子ペンやユーザの指によって描画が可能な描画画面を表示させる表示部である。

また、本実施形態の電子黒板２００は、ディスプレイ２８０に、電子ペンやユーザの指によって入力されたストローク画像や、オブジェクトを表示させる。

ストローク画像とは、ユーザのストロークによって描画される画像である。ストロークとは、電子黒板２００の有するタッチパネルに電子ペンやユーザの指等の先端を押付け、そのままタッチパネル上を移動させた後、タッチパネルからペン等の先端を離す、という一連の操作を意味する。

オブジェクトとは、コンピュータ上で操作や処理の対象となる何らかの実体を示す。具体的には、例えば、オブジェクトは、ディスプレイ２８０上でアイコンなどの形で表示されるデータ集合や操作要素、個々の図形等を含む。また、Microsoft Office（登録商標）のアプリケーションでは、文書に挿入できる図表やワードアート等がオブジェクトと呼ばれている。また、本実施形態のオブジェクトには、例えば、文字に加え、気持ちやメッセージをイラストで表したスタンプ画像を含む。

本実施形態の電子黒板２００は、ディスプレイ２８０において、オブジェクトと重ねて描画されたストローク画像に対しては、ストローク画像上において消去するためのタッチ操作が１度検出されれば、このストローク画像を消去する。また、電子黒板２００は、オブジェクトに対しては、電子ペンやユーザの指等の先端の移動の軌跡が、オブジェクトを複数回通り過ぎたことが検出された場合に、オブジェクトを消去する。

以下に、図２を参照して、ストローク画像とオブジェクトの消去について説明する。図２は、ストローク画像とオブジェクトの消去の概要を説明する図である。

図２に示すオブジェクトｓｐ１とストローク画像ｓｔ１とは、ディスプレイ２８０において、重ねられて描画されている。ストローク画像ｓｔ１は、オブジェクトｓｐ１が描画された領域内（オブジェクトｓｐ１の描画領域内）に描画されている。

また、図２の例では、電子黒板２００は、ディスプレイ２８０から画像を消去するモードとされている。

また、図２では、ユーザが、電子ペン等によって、点Ｐ１にペンダウンし、点Ｐ２、点Ｐ３を経由して、点Ｐ４でペンアップする操作を行ったとする。

この場合、本実施形態の電子黒板２００では、電子ペンの先端の座標がオブジェクトｓｐ１と重なり始める点Ｐ１１となった場合には、オブジェクトｓｐ１もストローク画像ｓｔ１も消去されない。

また、本実施形態では、電子ペンの先端の座標が、ストローク画像ｓｔ１と重なる点Ｐ１２となった場合に、ストローク画像ｓｔ１のみを消去する。つまり、電子黒板２００は、ストローク画像に電子ペンの先端を重ねる操作を、ストローク画像を消去するための操作と判定する。

このとき、オブジェクトｓｐ１は消去されない。したがって、ディスプレイ２８０には、オブジェクトｓｐ１のみが描画された状態となる。

電子ペンの先端の座標は、オブジェクトｓｐ１が描画領域外である点Ｐ２まで到達した後、再びオブジェクトｓｐ１が描画領域内を通って点Ｐ３へ到達し、さらにオブジェクトｓｐ１の描画領域内を通り、オブジェクトｓｐ１の描画領域外となる点Ｐ１３へ到達する。

このとき、電子黒板２００は、この一連の電子ペンの先端の座標の軌跡を、オブジェクトｓｐ１に対する消去の操作と判定し、オブジェクトｓｐ１を消去する。

つまり、本実施形態では、電子ペンの先端の座標が、ストローク画像上に１度重なると、このストローク画像を消去する。

そして、本実施形態では、電子ペンの先端の座標の軌跡が、複数回オブジェクトの描画領域を通り過ぎた場合に、オブジェクトを消去する。言い換えれば、本実施形態では、電子ペンの先端の座標が、オブジェクトの描画領域外の座標からオブジェクトの描画領域内の座標となることを複数回繰り返した場合に、オブジェクトを消去する。

このように、本実施形態では、ストローク画像（第一の画像）に対する消去の操作（第一の操作）と、オブジェクト（第二の画像）に対する消去の操作（第二の操作）とを異ならせる。本実施形態では、これによって、ストローク画像に対する消去の操作を行った場合に、ストローク画像と重なって描画されたオブジェクトまで消去されることがなく、ストローク画像のみを消去できる。また、本実施形態では、オブジェクトを消去する操作を行った場合には、オブジェクトのみを消去することができる。

したがって、本実施形態によれば、画像の消去を容易にでき、操作性を向上させることができる。

以下に、図３を参照して、本実施形態の電子黒板２００のハードウェア構成について説明する。図３は、電子黒板のハードウェア構成の一例を示す図である。図３に示されているように、電子黒板２は、ＣＰＵ(Central Processing Unit)２０１、ＲＯＭ(Read Only Memory)２０２、ＲＡＭ(Random Access Memory)２０３、ＳＳＤ(Solid State Drive)２０４、ネットワークＩ／Ｆ２０５、及び、外部機器接続Ｉ／Ｆ(Interface)２０６を備えている。

これらのうち、ＣＰＵ２０１は、電子黒板２全体の動作を制御する。ＲＯＭ２０２は、ＣＰＵ２０１やＩＰＬ(Initial Program Loader)等のＣＰＵ２０１の駆動に用いられるプログラムを記憶する。ＲＡＭ２０３は、ＣＰＵ２０１のワークエリアとして使用される。ＳＳＤ２０４は、電子黒板用のプログラム等の各種データを記憶する。

ネットワークＩ／Ｆ２０５は、通信ネットワークとの通信を制御する。外部機器接続Ｉ／Ｆ２０６は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢ(Universal Serial Bus)メモリ２３０、外付け機器（マイク２４０、スピーカ２５０、カメラ２６０）である。

また、電子黒板２００は、キャプチャデバイス２１１、ＧＰＵ２１２、ディスプレイコントローラ２１３、接触センサ２１４、センサコントローラ２１５、電子ペンコントローラ２１６、近距離通信回路２１９、及び近距離通信回路２１９のアンテナ２１９ａ、電源スイッチ２２２及び選択スイッチ類２２３を備えている。

これらのうち、キャプチャデバイス２１１は、外付けのＰＣ（Personal Computer）２７０のディスプレイに対して映像情報を静止画または動画として表示させる。ＧＰＵ（Graphics Processing Unit）２１２は、グラフィクスを専門に扱う半導体チップである。
ＧＰＵ２１２は、ＣＰＵ２０１に内蔵されてよいし、ＣＰＵ２０１と統合されていてもよい。

ディスプレイコントローラ２１３は、ＧＰＵ２１２からの出力画像をディスプレイ２８０等へ出力するために画面表示の制御及び管理を行う。接触センサ２１４は、ディスプレイ２８０上に電子ペン２９０やユーザの手Ｈ等の入力手段が接触したことを検知する。センサコントローラ２１５は、接触センサ２１４の処理を制御する。

接触センサ２１４は、赤外線遮断方式による座標の入力及び座標の検出を行う。この座標の入力及び座標の検出する方法は、ディスプレイ２８０の上側両端部に設置された２つ受発光装置が、ディスプレイ２８０に平行して複数の赤外線を放射し、ディスプレイ２８０の周囲に設けられた反射部材によって反射されて、受光素子が放射した光の光路と同一の光路上を戻って来る光を受光する方法である。接触センサ２１４は、物体によって遮断された２つの受発光装置が放射した赤外線のＩＤをセンサコントローラ２１５に出力し、センサコントローラ２１５が、物体（入力手段）の接触位置である座標位置を特定する。

電子ペンコントローラ２１６は、電子ペン２９０と通信することで、ディスプレイ２８０へのペン先のタッチやペン尻のタッチの有無を判断する。近距離通信回路２１９は、ＮＦ（Near Field Communication）やＢｌｕｅｔｏｏｔｈ（登録商標）等の通信回路である。電源スイッチ２２２は、電子黒板２の電源のＯＮ／ＯＦＦを切り換えるためのスイッチである。選択スイッチ類２２３は、例えば、ディスプレイ２８０の表示の明暗や色合い等を調整するためのスイッチ群である。

更に、電子黒板２は、バスライン２１０を備えている。バスライン２１０は、図２に示されているＣＰＵ２０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

尚、接触センサ２１４は、赤外線遮断方式に限らず、静電容量の変化を検知することにより接触位置を特定する静電容量方式のタッチパネル、対向する２つの抵抗膜の電圧変化によって接触位置を特定する抵抗膜方式のタッチパネル、接触物体（入力手段）が表示部に接触することによって生じる電磁誘導を検知して接触位置を特定する電磁誘導方式のタッチパネルなどの種々の検出手段を用いてもよい。また、電子ペンコントローラ２１６が、電子ペン２９０のペン先及びペン尻だけでなく、電子ペン２９０のユーザが握る部分や、その他の電子ペンの部分のタッチの有無を判断するようにしてもよい。

また、本実施形態では、カメラ２６０は、ディスプレイ２８０に電子ペン２９０や手Ｈが接近したことを検出する近接センサの一例としたが、電子黒板２００は、近接センサとして、投影型静電容量方式タッチパネルや赤外線センサ等を有していても良い。

次に、図４を参照して、本実施形態の電子黒板２００の機能構成について説明する。図４は、電子黒板の機能構成を説明する図である。

本実施形態の電子黒板２００は、ページ記憶部３２０、入力部３４１、ページ生成部３４２、表示制御部３４３、座標取得部３４４、操作検知部３４５、モード判定部３４６、消去判定部３４７を有する。

本実施形態のページ記憶部３２０は、例えば、ＲＡＭ２０３、ＳＳＤ２０４、またはＵＳＢメモリ２３０によって構築される。また、本実施形態の入力部３４１、ページ生成部３４２、表示制御部３４３、座標取得部３４４、操作検知部３４５、モード判定部３４６、消去判定部３４７は、図３に示されている各構成要素のいずれかが、ＳＳＤ２０４からＲＡＭ２０３上に展開されたプログラムに従ったＣＰＵ２０１からの命令によって動作することで実現される機能、または機能する手段である。

ページ記憶部３２０は、電子黒板２００のディスプレイ２８０に表示されるページデータが記憶される。ページ記憶部３２０に記憶されるページデータは、例えば、ディスプレイ２８０において描画されたストローク画像を示すストローク画像データであっても良いし、外部から取得した画像データであっても良い。また、ページデータは、ディスプレイ２８０に表示された画像と、ディスプレイ２８０に入力されたストローク画像とを重畳した重畳画像の画像データであっても良い。ディスプレイ２８０に表示される画像データの詳細は後述する。

入力部３４１は、ディスプレイ２８０に対して手書き入力された文字や画像を示すストローク画像や、ディスプレイ２８０に設けられたタッチパネルに表示された画像の画像データ等を取得する。

また、入力部３４１は、カメラ２６０により撮影された動画データ等を取得する。本実施形態では、動画データは、画像データに含まれる。また、入力部３４１は、電子黒板２００に対する各種の指示を受け付ける。また、入力部３４１は、ＰＣ２７０等から出力され、電子黒板２００に入力される入力画像データ等を取得する。

ページ生成部３４２は、ディスプレイ２８０に表示された１ページの画像（表示画像）の画像データを取得する。また、ページ生成部３４２は、１ページの画像にストローク画像が入力された場合には、ストローク画像を示すストローク画像データを取得する。

具体的には、ページ生成部３４２は、ディスプレイ２８０に入力された入力画像やストローク画像等を重畳させた重畳画像の画像データを取得し、ページ記憶部３２０に格納する。尚、ページ生成部３４２は、ディスプレイ２８０に対してストローク画像が入力されていない場合には、ディスプレイ２８０に表示された画像を画像データとする。

また、ページ生成部３４２は、ディスプレイ２８０に対してストローク画像が入力された場合には、ストローク画像を示すストローク画像データを画像データとして、ページ記憶部３２０に格納する。

また、ページ生成部３４２は、ディスプレイ２８０に対して、オブジェクトが入力された場合には、オブジェクトを示す画像データを、ページデータと対応付けて
ページ記憶部３２０に格納する。

表示制御部３４３は、画像データをディスプレイ２８０に表示させる。また、表示制御部３４３は、ディスプレイ２８０に対する各種の表示を制御する。例えば、表示制御部３４３は、ディスプレイ２８０に表示された画像から、消去判定部３４７の判定結果に応じてストローク画像やオブジェクトを消去する。

座標取得部３４４は、ディスプレイ２８０に対して電子ペン２９０の先端やユーザの指先等が接触した点の座標を取得する。

操作検知部３４５は、座標取得部３４４によって検知される座標に基づき、ディスプレイ２８０に対して行われた操作を検知する。具体的には、操作検知部３４５は、タッチダウン操作、タッチムーブ操作、タッチアップ操作等を検知する。

タッチダウン操作とは、電子ペン２９０の先端や、手Ｈ等が接触センサ２１４に検知されることである。以下の説明では、接触センサ２１４によって接触が検知される対象となる電子ペン２９０の先端や手Ｈ等の入力手段を、検知対象と呼ぶ場合がある。

タッチムーブ操作は、タッチダウン操作において検知された検知対象の座標が移動することである。座標が移動するとは、時刻ｔｎに検出された座標と時刻ｔｎ＋１に検出された座標が所定範囲内（時刻ｔｎから時刻ｔｎ＋１の間に手Ｈなどの検知対象が移動しうる所定距離）にあることをいう。

タッチアップ操作は、タッチダウン操作又はタッチムーブ操作であると判定された検知対象が接触センサ２１４に検知されなくなることである。

モード判定部３４６は、操作検知部３４５によって検知された操作に基づいて操作モードを判定する。

より具体的には、モード判定部３４６は、操作検知部３４５によって検知されたタッチダウン操作における検知対象の座標が、ディスプレイ２８０に表示された消去モード選択ボタンの内部であった場合に、操作モードが画像の消去モードとされたものと判定する。また、モード判定部３４６は、ディスプレイ２８０に対する、電子ペン２９０の先端とは反対側の他端（ペン尻）の接触を検知した場合に、操作モードが画像の消去モードとされたものと判定しても良い。

消去判定部３４７は、モード判定部３４６によって消去モードであると判定された場合に、座標取得部３４４によって検知される検知対象の座標と、操作検知部３４５によって検知される操作と、に基づき、ストローク画像やオブジェクトを消去するか否かを判定する。

言い換えれば、本実施形態の消去判定部３４７は、座標取得部３４４によって取得された座標に基づき、操作検知部３４５によって検知された操作が、ストローク画像を消去する操作であるか、又は、オブジェクトを消去する操作であるかを判定する。

消去判定部３４７は、検知された操作が、ストローク画像を消去する操作である場合、表示制御部３４３によって、操作の対象となったストローク画像をディスプレイ２８０から消去させる。また、消去判定部３４７は、検知された操作が、オブジェクトを消去する操作である場合、表示制御部３４３によって、操作の対象となったオブジェクトをディスプレイ２８０から消去させる。

つまり、本実施形態の消去判定部３４７は、座標取得部３４４が取得した座標に基づき、操作検知部３４５が検知した操作が、ストローク画像（第一の画像）を消去する操作(第一の操作)であるか、オブジェクト（第二の画像）を消去する操作であるか否かを判定する。

本実施形態の表示制御部３４３は、消去判定部３４７による判定結果が、第一の操作であった場合には、第一の画像であるストローク画像を消去し、判定結果が、第二の操作であった場合には、第二の画像であるオブジェクトを消去する。

次に、図５を参照して、ディスプレイ２８０に表示される画像について説明する。図５は、電子黒板のディスプレイに表示される画像について説明する図である。

図５（Ａ）は、重畳される画像を説明する図であり、図５（Ｂ）は、重畳画像の一例を示す図である。

本実施形態の電子黒板２００において、表示制御部３４３は、入力部３４１により取得される入力画像や、ストローク画像、ＵＩ（User Interface）画像及び背景画像を予め指定されたレイアウトにしたがって重畳して表示させる。

尚、ＵＩ画像とは、予め設定された画像である。また、背景画像は、例えば、無地の画像やグリッド線を含む画像等であり、重畳画像に含まれるメディアデータである。メディアデータとは、背景画像をディスプレイ２８０に表示させるためのデータである。

表示制御部３４３は、図５に示すように、ＵＩ画像を表示させるためのレイヤ４１、オブジェクトを表示させるためのレイヤ４２、ストローク画像を表示させるためのレイヤ４３、ＰＣから出力されて電子黒板２００に入力される入力画像を表示させるレイヤ４４、背景画像を表示させるためのレイヤ４５を有する。

本実施形態の表示制御部３４３は、電子黒板２００のユーザからディスプレイ２８０を見たとき、レイヤ４１が１層目、レイヤ４２が２層目、レイヤ４３が３層目、レイヤ４４が４層目、レイヤ４５が５層目となるように、各レイヤを重畳させる。

そして、表示制御部３４３は、ＵＩ画像の画像データ（ＵＩ画像データ）、オブジェクトを示す画像データ、ストローク画像データ、入力画像の画像データ（入力画像データ）、背景画像の画像データ（背景画像データ）を合成することで、５層の重畳画像４０の画像データを生成する。

つまり、本実施形態の重畳画像とは、ディスプレイ２８０の各レイヤに表示された画像を合成した画像である。

次に、図６を参照して、本実施形態のページデータについて説明する。図６は、ページデータを説明する図である。

本実施形態の電子黒板２００のページ生成部３４２は、図６に示すような構造のページデータを生成して、ページ記憶部３２０に格納しても良い。

本実施形態のページデータは、情報の項目として、ページデータＩＤ、開始時刻、終了時刻、ストロークＩＤ、オブジェクトＩＤ、メディアデータＩＤを有する。

項目「開始時刻」の値は、ページの表示が開始された時刻を示す。項目「終了時刻」の値は、ページデータの更新が終了した時刻を示す。項目「ストロークＩＤ」の値は、ストローク画像の入力により生成されたストローク配列データを識別するための識別情報を示す。本実施形態のストローク配列データは、特定の形状を示す点群の座標情報を含む。つまり、本実施形態のストローク配列データが、一画毎の軌跡を示す点群であるストローク情報である。

項目「オブジェクトＩＤ」の値は、オブジェクトを識別するための識別情報を示す。オブジェクトＩＤは、例えば、オブジェクトが描画される度に、各オブジェクトに付与されても良い。オブジェクトＩＤは、オブジェクトの描画領域を示す情報を含むオブジェクト領域情報と対応付けられる。

項目「メディアデータＩＤ」の値は、メディアデータを識別するための識別情報を示す。メディアデータとは、背景画像をディスプレイ２８０に表示させるためのデータである。

このように、本実施形態では、ページデータを保存する際に、入力されたストローク画像をディスプレイ２８０に表示させるためのストローク配列データを、ページデータと対応付ける。

また、本実施形態では、ストローク画像が入力されなかった場合には、ページデータと対応付けられるストローク配列データが存在しないため、ページデータにおける項目「ストローク配列データＩＤ」の値が空欄となる。

次に、図７と図８を参照して、ストローク配列データと、オブジェクト領域情報について説明する。図７は、ストローク配列データの一例を示す図である。

本実施形態のストローク配列データ３２０−１は、情報の項目として、ページＩＤと、ストロークＩＤと、座標群とを有し、これらは対応付けられている。項目「座標群」の値は、特定の形状を示す点群の座標情報である。

図８は、オブジェクト領域情報の一例を示す図である。オブジェクト領域情報３２０−２は、情報の項目として、ページＩＤ、オブジェクトＩＤ、座標、幅、高さ、カウンタを有する。

項目「座標」の値は、オブジェクトの描画領域において基準とされる点の座標を示す。具体的には、項目「座標」の値は、オブジェクトの外接矩形の左上の頂点の座標であっても良い。

項目「幅」の値は、オブジェクトの描画領域の幅を示し、項目「高さ」の値は、オブジェクトの描画領域の高さを示す。

項目「カウンタ」の値は、モード判定部３４６によって消去モードと判定された場合に、検知対象の座標が、オブジェクトの描画領域内を通った回数を示す。本実施形態では、項目「カウンタ」の値が、所定の閾値以上となったときに、対応するオブジェクトＩＤによって特定されるオブジェクトが消去されても良い。

次に、図９を参照して、本実施形態の電子黒板２００の動作について説明する。図９は、第一の実施形態の電子黒板の動作を説明するフローチャートである。

本実施形態の電子黒板２００は、操作検知部３４５により、タッチダウン操作を検知したか否かを判定する（ステップＳ９０１）。

ステップＳ９０１において、タッチダウン操作が検知されない場合、電子黒板２００は、タッチダウン操作が検知されるまで待機する。

ステップＳ９０１において、タッチダウン操作が検知されると、電子黒板２００は、モード判定部３４６により、操作モードが画像を消去する消去モードであるか否かを判定する（ステップＳ９０２）。ステップＳ９０２において、消去モードでない場合、電子黒板２００は、操作に応じた他の処理を実行し（ステップＳ９０３）、ステップＳ９０１へ戻る。

ステップＳ９０２において、消去モードである場合、電子黒板２００は、操作検知部３４５により、タッチアップ操作を検知したか否かを判定する（ステップＳ９０４）。

ステップＳ９０４において、タッチアップ操作が検知された場合、電子黒板２００は、後述するステップＳ９１１へ進む。

ステップＳ９０４において、タッチアップ操作が検知されない場合、電子黒板２００は、ステップＳ９０５とステップＳ９０７へ進む。尚、ステップＳ９０４において、タッチアップ操作が検知されない場合とは、タッチダウン操作もしくはタッチムーブ操作が検知されることを示す。

ステップＳ９０４において、タッチアップ操作が検知されない場合、電子黒板２００は、消去判定部３４７により、ディスプレイ２８０において、検知対象によるタッチダウン操作が検知された座標が、ディスプレイ２８０に描画されたストローク画像と重なっているか否かを判定する（ステップＳ９０５）。

以下の説明では、検知対象のタッチが検知された座標を、タッチ座標と呼ぶ。

具体的には、消去判定部３４７は、座標取得部３４４によって検知されたタッチ座標を取得する。続いて、消去判定部３４７は、ページ記憶部３２０に格納されたストローク配列データ３２０−１を参照し、ストローク配列データ３２０−１に含まれる座標群に、タッチ座標と一致する座標があるか否かを判定している。

そして、消去判定部３４７は、ストローク配列データ３２０−１に含まれる座標群に、タッチ座標と一致する座標が存在する場合に、タッチ座標がストローク画像と重なるものと判定する。

ステップＳ９０５において、タッチ座標がストローク画像と重なっていた場合、電子黒板２００は、表示制御部３４３によって、タッチ座標と重なっているストローク画像をディスプレイ２８０から消去し（ステップＳ９０６）、ステップＳ９０４へ戻る。

ステップＳ９０５において、タッチ座標がストローク画像と重なっていない場合、電子黒板２００は、ステップＳ９０１へ戻る。

また、ステップＳ９０４において、タッチアップ操作が検知されない場合、電子黒板２００は、消去判定部３４７により、タッチ座標がオブジェクトと重おり、且つ、直前のタッチ座標がオブジェクトと重なっていないか否かを判定する（ステップＳ９０７）。

言い換えれば、消去判定部３４７は、ステップＳ９０７において、検知対象の座標が、オブジェクトの描画領域外から、オブジェクトの描画領域内へ移動したか否かを判定している。

具体的には、消去判定部３４７は、オブジェクト領域情報３２０−２を参照し、オブジェクトの描画領域内に、座標取得部３４４によって検知されたタッチ座標を含むオブジェクトが存在するか否かを判定する。

また、消去判定部３４７は、該当するオブジェクトが存在する場合に、オブジェクト領域情報３２０−２を参照し、座標取得部３４４が直前に検知したタッチ座標が、該当するオブジェクトの描画領域内に含まれるか否かを判定する。

そして、消去判定部３４７は、直前に検知したタッチ座標が、該当するオブジェクトの描画領域内に含まれない場合、タッチ座標がオブジェクトと重なり、且つ、直前のタッチ座標がオブジェクトと重なっていない、という条件を満たすものと判定する。

また、消去判定部３４７は、描画領域内にタッチ座標を含むオブジェクトが存在しない場合や、描画領域内に座標取得部３４４が直前に検知したタッチ座標を含むオブジェクトが存在する場合には、タッチ座標がオブジェクトと重おり、且つ、直前のタッチ座標がオブジェクトと重なっていない、という条件を満たさないものと判定する。

ステップＳ９０７において、タッチ座標がオブジェクトと重おり、且つ、直前のタッチ座標がオブジェクトと重なっていない、という条件を満たさない場合、電子黒板２００は、ステップＳ９０４へ戻る。

ステップＳ９０７において、タッチ座標がオブジェクトと重おり、且つ、直前のタッチ座標がオブジェクトと重なっていない、という条件を満たす場合、消去判定部３４７は、オブジェクト領域情報３２０−２を参照し、タッチ座標を描画領域内に含むオブジェクトのカウンタの値をインクリメントする（ステップＳ９０８）。

続いて、消去判定部３４７は、インクリメントしたカウンタの値が、所定の閾値以上であるか否かを判定する（ステップＳ９０９）。

言い換えれば、消去判定部３４７は、検知対象の座標が、所定の閾値と同じ回数。オブジェクトの描画領域外から、オブジェクトの描画領域内へ移動したか否かを判定している。つまり、消去判定部３４７は、検知対象の座標の軌跡が、オブジェクトの描画領域を、閾値と同じ回数を通り過ぎたか否かを判定している。尚、所定の閾値は、電子黒板２００に対して設定された値であっても良い。

ステップＳ９０９において、カウンタの値が所定の閾値以上でない場合、つまり、カウンタの値が所定の閾値未満である場合、電子黒板２００は、ステップＳ９０４へ戻る。

ステップＳ９０９において、カウンタの値が所定の閾値以上である場合、表示制御部３４３は、タッチ座標を描画領域内に含むオブジェクトを消去し（ステップＳ９１０）、ステップＳ９０４へ戻る。

ステップＳ９０４において、操作検知部３４５がタッチアップ操作を検知した場合、消去判定部３４７は、オブジェクト領域情報３２０−２において、削除されたオブジェクトと対応するカウンタをリセットし（ステップＳ９１１）、処理を終了する。

尚、このとき、電子黒板２００は、オブジェクト領域情報３２０−２から、ステップＳ９１０で消去されたオブジェクトのオブジェクト領域情報を削除しても良い。

以下に、図１０及び図１１を参照して、ストローク画像とオブジェクトの消去について、具体的に説明する。

図１０は、オブジェクトの消去について説明する図である。図１０では、電子黒板２００のディスプレイ２８０に描画された、オブジェクトｓｐ１０と、オブジェクトｓｐ２０とを示している。また、図１０の例では、オブジェクトｓｐ２０の描画領域は、オブジェクトｓｐ１０の描画領域内に含まれる。

図１０において、操作検知部３４５によりタッチダウン操作が検知されたときのタッチ座標が示す位置が点Ｐ２１であったとする。この場合、点Ｐ２１は、ストローク画像とは重なっていない。また、点Ｐ２１から、検知対象のタッチ座標が移動し、オブジェクトｓｐ２０の描画領域外からオブジェクトｓｐ２０の描画領域内に移動した場合、消去判定部３４７は、オブジェクト領域情報３２０−２において、オブジェクトｓｐ２０と対応するカウンタの値をインクリメントし、「１」とする。

次に、消去判定部３４７は、タッチ座標が点Ｐ２２まで移動し、点Ｐ２２から折り返して、検知対象のタッチ座標が、再び、オブジェクトｓｐ２０の描画領域外からオブジェクトｓｐ２０の描画領域内に移動した場合に、オブジェクトｓｐ２０と対応するカウンタの値をインクリメントし、「２」とする。

このように、図１０の例では、タッチ座標が点２１から点２２、点２２から点２３、点２３から点２４と移動する度に、タッチ座標は、オブジェクトの描画領域外から描画領域内へ移動することになり、カウンタがインクリメントされる。

したがって、検知対象の座標の移動の軌跡１０２は、オブジェクトｓｐ２０の描画領域を３回通り過ぎたことになる。ここで、所定の閾値を「３」とした場合、検知対象の座標の移動の軌跡１０２は、所定の閾値以上、オブジェクトｓｐ２０の描画領域を通り過ぎたことになるため、オブジェクトｓｐ２０は消去される。

尚、この場合、軌跡１０２は、オブジェクトｓｐ１０の描画領域を通り過ぎていない。したがって、軌跡１０２によって消去されるオブジェクトは、オブジェクトｓｐ２０のみであり、オブジェクトｓｐ１０は消去されない。

また、図１０において、操作検知部３４５によりタッチダウン操作が検知されたときのタッチ座標が点Ｐ３１であったとする。そして、タッチ座標が点３１から点３２、点３２から点３３、点３３から点３４と移動したとする。

この場合、タッチ座標の移動の軌跡１０１は、３回オブジェクトｓｐ１０を通り過ぎることになる。したがって、オブジェクトｓｐ１０は、消去される。尚、軌跡１０１は、オブジェクトｓｐ２０の描画領域を通り過ぎていないため、オブジェクトｓｐ２０は消去されず、オブジェクトｓｐ１０のみが消去される。

尚、図１０において、オブジェクトｓｐ１０とオブジェクトｓｐ２０の両方を同時に消去する場合には、タッチ座標の移動の軌跡が、オブジェクトｓｐ１０とオブジェクトｓｐ２０の両方を通り過ぎるようにすれば良い。

このように、本実施形態によれば、オブジェクトが重ねられて描画されていた場合でも、特定のオブジェクトを消去することができる。

図１１は、ストローク画像とオブジェクトの消去について説明する図である。図１１では、電子黒板２００のディスプレイ２８０に描画された、オブジェクトｓｐ１１と、オブジェクトｓｐ１２とを示しており、オブジェクトｓｐ１１の描画領域と、オブジェクトｓｐ２１の描画領域とは、一部が重なっている。

また、図１１の例では、オブジェクトｓｐ１１の描画領域内に、ストローク画像「ａｂｃ」が描画され、オブジェクトｓｐ２１の描画領域内には、ストローク画像「ｄｅｆｇｈ」が描画されている。

図１１において、操作検知部３４５によりタッチダウン操作が検知されたときのタッチ座標が点Ｐ４１であったとする。この場合、点Ｐ４１は、ストローク画像とは重なっていない。また、消去判定部３４７は、タッチ座標が、点Ｐ４１から移動して、オブジェクトｓｐ１１の描画領域内に入ると、オブジェクト領域情報３２０−２におけるオブジェクトｓｐ１のカウンタをインクリメントする。

また、タッチ座標がさらに点Ｐ４２へ移動した場合、タッチ座標は、オブジェクトｓｐ１１の描画領域内に描画されたストローク画像「ａ」と重なる。したがって、ストローク画像「ａ」は、タッチ座標が点Ｐ４２を示す位置となったときに、消去される。

続いて、タッチ座標が点Ｐ４２から点Ｐ４３へ移動し、点Ｐ４３から折り返して再びオブジェクトｓｐ１１の描画領域内に入ると、消去判定部３４７は、オブジェクト領域情報３２０−２におけるオブジェクトｓｐ１のカウンタをインクリメントする。

また、タッチ座標が、点Ｐ４３から点Ｐ４４まで移動すると、タッチ座標がストローク画像「ｃ」と重なる。したがって、ストローク画像「ｃ」は、タッチ座標が示す位置が点Ｐ４４となったときに消去される。

また、タッチ座標が点Ｐ４４から点Ｐ４５へ移動し、さらに、点Ｐ４５から点Ｐ４６へ移動すると、タッチ座標の移動の軌跡１１１は、オブジェクトｓｐ１１の描画領域を３回通り過ぎたことになる。したがって、オブジェクトｓｐ１１は消去される。

このとき、オブジェクトｓｐ１１の描画領域内のストローク画像「ｂ」と、オブジェクトｓｐ１２と、オブジェクトｓｐ１２の描画領域内のストローク画像は、消去されない。

また、操作検知部３４５によりタッチが検知されたときのタッチ座標が点Ｐ５１であったとする。この場合、点Ｐ５１は、ストローク画像とは重なっていない。

また、消去判定部３４７は、タッチ座標が、点Ｐ５１から点Ｐ５２、点Ｐ５２から点Ｐ５３、点Ｐ５３から点Ｐ５４と移動した場合、タッチ座標の移動の軌跡１１２は、オブジェクトｓｐ１２の描画領域内を所定の閾値以上通り過ぎたと判定する。したがって、オブジェクトｓｐ１２は消去される。

このとき、軌跡１１２は、ストローク画像と重なっていないため、オブジェクトｓｐ１２の描画領域内に描画されたストローク画像は消去されない。

さらに、操作検知部３４５によりタッチダウン操作が検知されたときのタッチ座標が点Ｐ６１であり、点Ｐ６１からタッチアップがされたとする。この場合、消去されるのは、点６１と重なっていたストローク画像「ｅ」である。したがって、この場合には、ストローク画像「ｅ」のみが消去される。

このように、本実施形態によれば、ストローク画像を消去する際の操作と、オブジェクトを消去する際の操作とを異ならせる。言い換えれば、本実施形態によれば、タッチダウン後のタッチムーブ中にストローク画像に１回重なった場合に、このストローク画像を削除し、オブジェクトに複数回重なった場合にこのオブジェクトを削除する。

このため、本実施形態によれば、オブジェクトとストローク画像とが重なって描画されている場合であっても、ストローク画像とオブジェクトとをそれぞれ独立して、簡単な操作で消去することができ、操作性を向上させることができる。

（第二の実施形態）
以下に図面を参照して、第二の実施形態について説明する。第二の実施形態では、オブジェクトを消去するための操作を、第一の実施形態に示す方法に限定しない点で、第一の実施形態と相違する。以下の第二の実施形態の説明では、第一の実施形態との相違点について説明し、第一の実施形態と同様の機能構成を有するものには、第一の実施形態と同様の符号を付与し、その説明を省略する。

図１２は、第二の実施形態の電子黒板の動作を説明するフローチャートである。図１２のステップＳ１２０１からステップＳ１２０４までの処理は、図９のステップＳ９０１からステップＳ９０４までの処理と同様であるから、説明を省略する。

ステップＳ１２０４において、タッチアップ操作が検知されない場合、電子黒板２００は、消去判定部３４７により、ストローク画像を消去するための操作を受け付けたか否かを判定する（ステップＳ１２０５）。

ステップＳ１２０５において、ストローク画像を消去する操作を受け付けた場合、電子黒板２００は、表示制御部３４３により、操作を受け付けたストローク画像を消去し（ステップＳ１２０６）、ステップＳ１２０４へ戻る。

ステップＳ１２０５において、ストローク画像を消去する操作を受け付けない場合、電子黒板２００は、消去判定部３４７により、オブジェクトを消去するための操作を受け付けたか否かを判定する（ステップＳ１２０７）。ステップＳ１２０７において、オブジェクトを消去する操作を受け付けない場合、電子黒板２００は、ステップＳ１２０４へ戻る。

ステップＳ１２０７において、オブジェクトを消去する操作を受け付けた場合、電子黒板２００は、表示制御部３４３により、オブジェクトを消去し（ステップＳ１２０８）、ステップＳ１２０４へ戻る。

以下に、ストローク画像を消去する操作と、オブジェクトを消去する操作について説明する。

本実施形態では、例えば、タッチ座標が重なる回数によって、ストローク画像を消去する操作と、オブジェクトを消去する操作とを区別しても良い。

具体的には、例えば、描画されたストローク画像上を所定時間内に１回タッチすることを、ストローク画像を消去する操作（第一の操作）とし、描画されたオブジェクトを所定回数タッチすることを、オブジェクトを消去する操作（第二の操作）としても良い。所定時間は、例えば、予め設定された時間であって良い。

この場合、電子黒板２００は、ステップＳ１２０１で検知したタッチ座標がストローク画像と重なる場合には、このストローク画像を消去する。そして、電子黒板２００は、ストローク画像と重ならない場合には、タッチ座標がオブジェクトと重なるか否かを判定する。言い換えれば、電子黒板２００は、タッチ座標がオブジェクトの描画領域内に含まれるか否かを判定する。

次に、電子黒板２００は、タッチ座標がオブジェクトと重なる場合、電子黒板２００は、このオブジェクトと重なるタッチ座標が、所定時間内に所定回数検知されたか否かを判定する。そして、電子黒板２００は、オブジェクトの描画領域内において、所定時間内に所定回数のタッチ座標が検知された場合に、このオブジェクトを消去する。

このように、本実施形態によれば、ストローク画像を消去するための操作と、オブジェクトを消去するための操作とを異ならせることで、ストローク画像と、オブジェクトとをそれぞれ独立して消去できるようにする。

したがって、本実施形態によれば、オブジェクトとストローク画像とが重なって描画されていた場合であっても、それぞれを個別に消去することができ、操作性を向上させることができる。

また、本実施形態の電子黒板２００は、サーバ装置と通信を行うシステムに含まれていても良い。

図１３は、電子黒板を含む情報処理システムのシステム構成の一例を示す図である。情報処理システム５００は、電子黒板（電子情報ボード）２００と、サーバ装置５５０と、を有する。情報処理システム５００において、電子黒板２００とサーバ装置５５０とは、ネットワークを介して接続される。

本実施形態の情報処理システム５００において、電子黒板２００は、ページ記憶部３２０に格納されたページデータをサーバ装置５５０に送信し、サーバ装置５５０においてページデータを保存しても良い。この場合、電子黒板２００の消去判定部３４７は、サーバ装置５５０に格納されたストローク配列データとオブジェクト領域情報とを参照してもよい。

尚、本実施形態の電子黒板２００は、マイクによって集音した音声データや、各種のデータを取得したときの日時を、サーバ装置５５０に送信しても良い。

また、電子黒板２００は、複数の端末装置と通信が可能であり、各端末装置から画像データや音声データを取得しても良い。この場合、電子黒板２００に表示される画像は、複数の端末装置によって共有されても良く、電子黒板２００は、複数の端末装置に共有される画面を表示させる共有端末となる。

次に、図１４乃至図１６を参照して、上述した情報処理システムの変形例について説明する。

図１４は、情報処理システムの変形例を示す第一の図である。図１４の例では、電子黒板２００の代わりに、端末装置６００、画像投影装置７００、ペン動作検出装置８１０を有する。

端末装置６００は、画像投影装置７００及びペン動作検出装置８１０と有線で接続されている。

画像投影装置７００は、端末装置６００により入力された画像データをスクリーン８００に投影させる。

ペン動作検出装置８１０は、電子ペン８２０と通信を行っており、スクリーン８００の近傍における電子ペン８２０の動作を検出する。具体的には、電子ペン８２０は、スクリーン８００上において、電子ペン８２０が示している点を示す座標情報を検出し、端末装置６００へ送信する。

端末装置６００は、ペン動作検出装置８１０から受信した座標情報に基づき、電子ペン８２０によって入力されるストローク画像を示すストローク画像データを生成し、画像投影装置７００によってストローク画像をスクリーン８００に描画させる。

また、端末装置６００は、画像投影装置７００に投影させている画像を示す重畳画像データを含むページデータを生成し、サーバ装置５５０に送信する。

図１５は、情報処理システムの変形例を示す第二の図である。図１５の例では、電子黒板２００の代わりに、端末装置６００とディスプレイ８００Ａと、ペン動作検出装置８１０とを有する。

ペン動作検出装置８１０は、ディスプレイ８００Ａの近傍に配置され、ディスプレイ８００Ａ上に、電子ペン８２０Ａが示している点を示す座標情報を検出し、端末装置６００へ送信する。尚、図１５の例では、電子ペン８２０Ａは、端末装置６００によってＵＳＢコネクタを介して充電されても良い。

端末装置６００は、ペン動作検出装置８１０から受信した座標情報に基づき、電子ペン８２０Ａによって入力されるストローク画像の画像データを生成し、ディスプレイ８００Ａに表示させる。

また、本実施形態の端末装置６００は、画像投影装置７００に投影させている画像を示す重畳画像データを含むページデータを生成し、サーバ装置５５０に送信する。

図１６は、情報処理システムの変形例を示す第三の図である。図１６の例では、電子黒板２００の代わりに、端末装置６００と、画像投影装置７００とを有する。

端末装置６００は、電子ペン８２０Ｂと無線通信（Ｂｌｕｅｔｏｏｔｈ等）を行って、スクリーン８００上において電子ペン８２０Ｂが示す点の座標情報を受信する。そして、端末装置６００は、受信した座標情報に基づき、電子ペン８２０Ｂにより入力されるストローク画像の画像データを生成し、画像投影装置７００によって、スクリーン８００上にストローク画像を投影させる。

また、端末装置６００は、画像投影装置７００に投影させている画像を示す重畳画像データを含むページデータを生成し、サーバ装置５５０に送信する。

以上のように、上述した各実施形態は、様々なシステム構成において適用することができる。

上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC（Application Specific Integrated Circuit）、DSP（digital signal processor）、FPGA（field programmable gate array）や従来の回路モジュール等のデバイスを含むものとする。

尚、本実施形態が適用される装置は、タッチ操作によって、オブジェクトを操作する機能を備えた表示装置であれば良く、電子黒板２００に限定されにない。本実施形態が適用される装置は、例えば、ネットワーク家電、自動車（Connected Car）、ノートＰＣ（Personal Computer）、携帯電話、スマートフォン、タブレット端末、ゲーム機、ＰＤＡ（Personal Digital Assistant）、ウェアラブルＰＣ等であってもよい。

また、実施形態に記載された装置群は、本明細書に開示された実施形態を実施するための複数のコンピューティング環境のうちの１つを示すものにすぎない。

ある実施形態では、第１の装置は、サーバクラスタといった複数のコンピューティングデバイスを含む。複数のコンピューティングデバイスは、ネットワークや共有メモリなどを含む任意のタイプの通信リンクを介して互いに通信するように構成されており、本明細書に開示された処理を実施する。同様に、第２の装置は、互いに通信するように構成された複数のコンピューティングデバイスを含むことができる。

さらに、第１の装置および第２の装置は、図９に示す処理のステップを様々な組み合わせで共有するように構成できる。例えば、所定のユニットによって実行されるプロセスは、第２の装置によって実行され得る。同様に、所定のユニットの機能は、第２の装置によって実行することができる。また、第１の装置と第２の装置の各要素は、１つのサーバ装置にまとめられていても良いし、複数の装置に分けられていても良い。

以上、各実施形態に基づき本発明の説明を行ってきたが、上記実施形態に示した要件に本発明が限定されるものではない。これらの点に関しては、本発明の主旨をそこなわない範囲で変更することができ、その応用形態に応じて適切に定めることができる。

２００ 電子黒板
３２０ ページ記憶部
３４１ 入力部
３４２ ページ生成部
３４３ 表示制御部
３４４ 座標取得部
３４５ 操作検知部
３４６ モード判定部
３４７ 消去判定部

特開２０１８−１８４７４号公報

Claims (7)

1. 表示部に対する入力手段の接触位置の座標を取得する座標取得部と、
   前記座標に基づき、前記表示部に対して行われた操作を検知する操作検知部と、
   検知された操作が、前記表示部に表示された第一の画像を消去する第一の操作であるか、又は、前記表示部に表示された第二の画像を消去する第二の操作であるかを判定する消去判定部と、
   前記消去判定部による判定の結果に応じて、前記第一の画像又は前記第二の画像を前記表示部から消去する表示制御部と、を有する表示装置。
2. 前記第一の画像は、入力手段により手書き入力によって入力されたストローク画像であり、
   前記操作検知部は、
   前記座標取得部が取得した座標が前記ストローク画像と一度重なることを、前記第一の操作として検知する、請求項１記載の表示装置。
3. 前記第二の画像は、オブジェクトであり、
   前記操作検知部は、
   前記座標取得部が取得した座標の軌跡が、前記オブジェクトの描画領域を、複数回通り過ぎることを、前記第二の操作として検知する、請求項２記載の表示装置。
4. 前記第二の画像は、オブジェクトであり、
   前記操作検知部は、
   前記座標取得部が取得した座標が、所定時間内に、前記オブジェクトの描画領域で複数回重なることを、前記第二の操作として検知する、請求項２記載の表示装置。
5. 前記表示制御部は、
   前記操作検知部によって、前記ストローク画像に対する前記第一の操作が検知された場合に、前記ストローク画像を前記表示部から消去し、
   前記操作検知部によって、前記オブジェクトに対する前記第二の操作が検知された場合に、前記オブジェクトを前記表示部から消去する、請求項３又は４記載の表示装置。
6. 表示装置による表示方法であって、前記表示装置が、
   表示部に対する入力手段の接触位置の座標を取得し、
   前記座標に基づき、前記表示部に対して行われた操作を検知し、
   検知された操作が、前記表示部に表示された第一の画像を消去する第一の操作であるか、又は、前記表示部に表示された第二の画像を消去する第二の操作であるかを判定し、
   前記判定の結果に応じて、前記第一の画像又は前記第二の画像を前記表示部から消去する、表示方法。
7. 表示部に対する入力手段の接触位置の座標を取得し、
   前記座標に基づき、前記表示部に対して行われた操作を検知し、
   検知された操作が、前記表示部に表示された第一の画像を消去する第一の操作であるか、又は、前記表示部に表示された第二の画像を消去する第二の操作であるかを判定し、
   前記判定の結果に応じて、前記第一の画像又は前記第二の画像を前記表示部から消去する、処理をコンピュータに実行させる表示プログラム。

Images