JP5983367B2 - 情報処理装置、およびプログラム - Google Patents

Description

本発明は、情報処理装置、およびプログラムに関する。

特許文献１には、表示手段に表示されたオブジェクトが指定された状態で、スクロール操作が行われた場合に、該オブジェクト以外のオブジェクトをスクロールさせる情報処理装置が開示されている。特許文献２には、表面に平面ディスプレイがはめ込まれた机に設置されたカメラが、平面ディスプレイの表示内容、平面ディスプレイ上に置かれた現実物、および平面ディスプレイ上における操作者の動作を撮影し、撮影された操作者の動作に基づく処理を実行する情報処理装置が開示されている。特許文献３には、表示画面への第１のタッチに基づいて、該第１のタッチの位置を中心として環状に複数のメニューを表示し、続く第２のタッチの位置の、第１のタッチの位置に対する相対位置関係に基づいて選択されたメニューを決定する表示装置が開示されている。特許文献４には、タッチパネルにおける複数の接触点を検出し、これらの接触点の接触の順番に基づいてプログラムの判定やプログラムの実行命令の生成等の処理を行う入力装置が開示されている。

特開２０１０−８６５１９号公報 特開平７−１７５５８７号公報 特開２００６−１３９６１５号公報 特開２０００−２２２１３０号公報

本発明の目的の１つは、書面が表示されている表示画面（タッチパネルディスプレイ）において取得される２つの接触位置（タッチ操作位置）の座標に基づいて、書面に含まれる表示要素（オブジェクト）を、特定の表示態様または通常の表示態様で表示する情報処理装置、およびプログラムを提供することにある。

上記目的を達成するために、請求項１に記載の発明は、文書情報に基づく書面が表示されている表示画面における、２つ以上の接触位置の、座標を取得する座標取得手段と、前記座標取得手段により取得される座標のうち、取得された期間の少なくとも一部が重複する２つの座標の間隔を取得する座標間隔取得手段と、前記座標間隔取得手段により取得される前記間隔が、予め定められる期間内に、予め定められる値以上減少した場合に、前記２つの座標の間に表示される、前記書面に含まれる表示要素を、その時点における表示位置に基づく位置に、前記書面における表示態様と異なる特定の表示態様で表示し、前記座標間隔取得手段により取得される前記間隔が、予め定められる期間内に、予め定められる値以上増大した場合に、前記特定の表示態様で表示されている表示要素を、その時点における表示位置に基づく位置に、前記書面における表示態様で表示する表示手段と、を有することを特徴とする情報処理装置である。

また、請求項２に記載の発明は、請求項１に記載の情報処理装置であって、前記表示手段は、前記表示要素が前記特定の表示態様で表示されている期間内に、操作者の操作に基づいて、前記書面の表示態様を変更する書面表示制御手段をさらに有することを特徴とする情報処理装置である。

また、請求項３に記載の発明は、請求項２に記載の情報処理装置であって、前記書面は複数のページを含み、前記書面表示制御手段は、前記表示要素が前記特定の表示態様で表示されている期間内に、前記操作者の操作に基づいて、前記表示画面に表示されるページを変更する、ことを特徴とする情報処理装置である。

また、請求項４に記載の発明は、請求項１ないし３のいずれかに記載の情報処理装置であって、前記表示手段は、前記特定の表示態様で表示されている表示要素の表示位置を、前記２つの座標の変化に基づいて変更する、ことを特徴とする情報処理装置である。

また、請求項５に記載の発明は、請求項１ないし４のいずれかに記載の情報処理装置であって、前記表示手段が、前記書面における表示態様で表示される表示要素を、前記特定の表示態様で表示する場合、該表示要素に対応する情報を前記文書情報から削除し、前記表示手段が、前記特定の表示態様で表示されている表示要素を、前記書面における表示態様で表示する場合、該表示要素に対応する情報を前記文書情報に追加する文書情報編集手段、をさらに有することを特徴とする情報処理装置である。

また、請求項６に記載の発明は、請求項１ないし５のいずれかに記載の情報処理装置であって、前記表示手段は、前記書面における表示態様で表示される表示要素を、前記特定の表示態様で表示する場合、該表示要素の、前記書面における表示態様による表示を停止する、ことを特徴とする情報処理装置である。

また、請求項７に記載の発明は、コンピュータを、文書情報に基づく書面が表示されている表示画面における、２つ以上の接触位置の、座標を取得する座標取得手段と、前記座標取得手段により取得される座標のうち、取得された期間の少なくとも一部が重複する２つの座標の間隔を取得する座標間隔取得手段と、前記座標間隔取得手段により取得される前記間隔が、予め定められる期間内に、予め定められる値以上減少した場合に、前記２つの座標の間に表示される、前記書面に含まれる表示要素を、その時点における表示位置に基づく位置に、前記書面における表示態様と異なる特定の表示態様で表示し、前記座標間隔取得手段により取得される前記間隔が、予め定められる期間内に、予め定められる値以上増大した場合に、前記特定の表示態様で表示されている表示要素を、その時点における表示位置に基づく位置に、前記書面における表示態様で表示する表示手段と、として機能させるプログラムである。

請求項１、および７に係る発明によれば、書面が表示されている表示画面において取得される２つの接触位置の座標に基づいて、書面に含まれる表示要素を、特定の表示態様または通常の表示態様で表示する情報処理装置およびプログラムが提供される。

請求項２に係る発明によれば、表示要素が特定の表示態様で表示されている期間内に、書面の表示態様が、操作者の操作に基づいて変更される。

請求項３に係る発明によれば、表示要素が特定の表示態様で表示されている期間内に、表示画面に表示されるページが、操作者の操作に基づいて変更される。

請求項４に係る発明によれば、特定の表示態様で表示されている表示要素の表示位置が、２つの座標の変化に基づいて変更される。

請求項５に係る発明によれば、書面における表示態様で表示される表示要素が特定の表示態様で表示され場合、該表示要素に対応する情報が文書情報から削除され、特定の表示態様で表示されている表示要素が書面における表示態様で表示される場合、該表示要素に対応する情報が文書情報に追加される。

請求項６に係る発明によれば、書面における表示態様で表示される表示要素が特定の表示態様で表示される場合、該表示要素の、書面における表示態様による表示が停止される。

本発明の一実施形態に係る情報処理装置を示す図である。 本実施形態に係る情報処理装置の表示部において表示されている画面、およびタッチ操作を示す図である。 本実施形態に係る情報処理装置の表示部において表示されている画面、およびタッチ操作を示す図である。 本実施形態に係る情報処理装置の表示部において表示されている画面、およびタッチ操作を示す図である。 本実施形態に係る情報処理装置の表示部において表示されている画面、およびタッチ操作を示す図である。 本実施形態に係る情報処理装置１００の動作を示すフローチャートである。

図１は、本発明の一実施形態に係る情報処理装置１００を示す図である。情報処理装置１００は、入力部１１０、入力情報取得部１２０、入力情報処理部１３０、文書情報編集部１４０、表示処理部１５０、表示部１６０、および記憶部１７０を有する。入力情報処理部１３０は、さらに、座標間隔取得部１３１、および判定部１３２を有する。表示処理部１５０は、さらに、選択表示要素表示処理部１５１、および書面表示制御部１５２を有する。

入力情報取得部１２０、入力情報処理部１３０、文書情報編集部１４０、および表示処理部１５０は、例えばＣＰＵの一機能として実現される。記憶部１７０は、例えばメモリー等の記憶素子により実現される。

表示部１６０は、液晶ディスプレイ等の表示装置であり、表示処理部１５０からの入力信号に基づく画像を表示する。入力部１１０は、表示部１６０の表示画面に設けられる静電容量式または感圧式等の一般的な方式のタッチパネルであり、操作者の指等によるその表面への接触（タッチ操作）を検出し、その検出内容に基づく電気信号を入力情報取得部１２０に出力する。

入力情報取得部１２０は、入力部１１０から入力される、操作者のタッチ操作に基づく信号に基づいて、操作者による１又は複数の接触位置（タッチ操作位置）の座標を示す座標情報を、予め定められる期間ごと（例えば０．１秒ごと）に取得し、入力情報処理部１３０に出力する。

入力情報処理部１３０は、入力情報取得部１２０により取得された座標情報に対する処理を実行する。具体的には、入力情報処理部１３０の座標間隔取得部１３１は、取得された期間の少なくとも一部が重複する２つの座標について、その間隔を予め定められる期間ごと（例えば０．１秒ごと）に算出して取得する。そして入力情報処理部１３０の判定部１３２は、座標間隔取得部１３１により算出される間隔を逐次取得して過去に取得された間隔との比較を行い、予め定められる期間内に予め定められる値以上増大しているか否か、および予め定められている値以上減少しているか否か、を判定する。

間隔が予め定められる値以上増大している場合、入力情報処理部１３０は、判定の対象となった２つの座標を示す座標情報および増大した旨を通知する増大通知信号を表示処理部１５０に出力する。間隔が予め定められる値以上減少している場合、入力情報処理部１３０は、判定の対象となった２つの座標を示す座標情報および減少した旨を通知する減少通知信号を表示処理部１５０に出力する。

また、入力情報処理部１３０は、入力情報取得部１２０により取得された座標情報に基づき、表示部１６０において表示されている書面について表示態様の変更を命令する信号を生成し、表示処理部１５０に出力する。これらの処理の詳細については後述する。

文書情報編集部１４０は、入力情報処理部１３０からの入力信号に基づいて、表示処理部１５０による表示内容の変更に対応した、文書情報の編集処理を行う。これらの処理の詳細については後述する。

表示処理部１５０は、記憶部１７０に記憶される文書情報や、入力情報処理部１３０から入力される信号に基づいて、表示部１６０における表示内容を示す信号を生成し、表示部１６０に出力する。

表示処理部１５０の選択表示要素表示処理部１５１は、入力情報処理部１３０から入力される信号に基づいて、表示部１６０で表示される書面２１０において、通常の表示態様で表示されている表示要素を半透明等の特定の表示態様で表示する処理や、特定の表示態様で表示されている表示要素を通常の表示態様で表示する処理を実行する。

表示処理部１５０の書面表示制御部１５２は、入力情報処理部１３０から入力される信号に基づいて、表示部１６０で表示される書面２１０について、スクロールやページ変更等の処理を実行する。

以下、入力部１１０、入力情報取得部１２０、入力情報処理部１３０、文書情報編集部１４０、および表示処理部１５０における処理を具体的に説明する。

図２〜図５は、本実施形態に係る情報処理装置１００の表示部１６０において表示されている画面２００、およびタッチ操作を示す図である。画面２００には、記憶部１７０に記憶される文書情報に基づく書面２１０が表示されている。書面２１０は複数のページからなり、また表示されているページには、表示要素（オブジェクト）である付箋２１１が付されている。

ここで、表示部１６０の表示面に設けられる入力部１１０（タッチパネル。図示しない。）に対し、操作者の２本の指３００，３１０がタッチ操作を行うと、入力情報取得部１２０は、２本の指３００，３１０によるタッチ操作が行われた位置（接触位置３０１，３１１）の座標を取得し、入力情報処理部１３０に出力する。

入力情報処理部１３０の座標間隔取得部１３１は、入力情報取得部１２０から入力される２つの座標について、その間隔を予め定められる期間ごとに算出する。そして入力情報処理部１３０の判定部１３２は、座標間隔取得部１３１により算出される間隔を逐次取得して過去に取得された間隔との比較を行う。

間隔が予め定められる期間内に予め定められる幅以上増大している場合、入力情報処理部１３０は、判定の対象となった２つの座標（接触位置３０１，３１１の座標）を示す座標情報および増大通知信号を表示処理部１５０に出力する。間隔が予め定められる期間内に予め定められる幅以上減少している場合、入力情報処理部１３０は、判定の対象となった２つの座標（接触位置３０１，３１１の座標）を示す座標情報および減少通知信号を表示処理部１５０に出力する。

図２の状態で、入力情報処理部１３０から、座標情報および減少通知信号が入力されると、表示処理部１５０は、判定の対象となった２つの座標（接触位置３０１，３１１の座標）の間の表示要素（付箋２１１）の有無を確認し、表示要素が存在する場合には、該表示要素を通常と異なる特定の表示態様で、その時点での表示位置から予め定められる幅だけずれた位置に表示する。付箋２１１および特定の表示態様で表示された付箋２１２を、図３に示す。一方、判定の対象となった２つの座標の間に表示要素が存在しない場合、表示処理部１５０は表示されている書面２１０を縮小する。

一方、図３のように付箋２１１が特定の表示態様で表示されている状態で、入力情報処理部１３０から、判定の対象となった２つの座標を示す座標情報および増大通知信号が入力されると、表示処理部１５０は、判定の対象となった２つの座標（接触位置３０１，３１１の座標）の間の、特定の表示態様で表示された表示要素（付箋２１２）の有無を確認し、表示要素が存在する場合には、該表示要素を、その時点での表示位置から予め定められる幅だけずれた位置に通常の表示態様で表示する。なお、この場合のずれ幅は、上述の通常の表示形態から特定の表示形態に変更する場合と同じ幅であり、かつずれる方向は逆方向である。これで付箋２１２に対する選択は解除され、以降、付箋２１２は書面２１０において、通常の表示形態で表示された位置に固定される。一方、判定の対象となった２つの座標の間に特定の表示態様で表示された表示要素が存在しない場合、表示処理部１５０は表示されている書面２１０を拡大する。

また、操作者が１本の指で入力部１１０（タッチパネル）上において、予め定められる操作（予め定められた領域で、指を滑らせる等）と行った場合、表示処理部１５０の書面表示制御部１５２は、書面２１０において表示されるページの変更、画面のスクロール等の表示態様の変更を行う。

ここで、図３のように特定の表示態様で表示される付箋２１２が存在する状態で、ページの変更、画面のスクロール等の表示態様の変更が行われても、特定の表示態様で表示された付箋２１２の表示の位置および表示態様は変更されない（図４参照）。一方、２本の指３００，３１０が入力部１１０に触れたまま同じ方向に移動した場合、特定の表示態様で表示された付箋２１２は、タッチ操作位置の座標の変化に応じて移動する（図５参照）。

表示処理部１５０により付箋２１１が特定の表示態様で表示された場合、文書情報編集部１４０は、書面２１０の基となる文書情報から、付箋２１１を示す情報を削除してもよい。すなわち、この状態で文書情報の保存が行われた場合、付箋２１１のない書面２１０を示す文書情報が記憶部１７０に保存される。

一方、表示処理部１５０により付箋２１１の表示態様が特定の表示態様から通常の表示態様に変更された場合、文書情報編集部１４０は、書面２１０の基となる文書情報に、付箋２１１を示す情報を追加してもよい。すなわち、この状態で文書情報の保存が行われた場合、付箋２１１がその時点における位置に付された書面２１０を示す文書情報が記憶部１７０に保存される。

次に、情報処理装置１００の動作を、フローチャートを用いて説明する。図６は、本実施形態に係る情報処理装置１００の動作を示すフローチャートである。

表示部１６０に書面２１０が表示されている状態で、入力部１１０がタッチ操作を検出すると（Ｓ６０１）、表示処理部１５０は、検出された期間の少なくとも一部が重複する接触位置の数が２であるか判定する（Ｓ６０２）。接触位置の数が１であった場合には、以降、表示処理部１５０は、接触位置の座標に基づいてページ変更や表示位置の移動等の通常の表示制御を行う（Ｓ６１４）。

接触位置の数が２である場合、入力情報処理部１３０の座標間隔取得部１３１は、２つの接触位置の座標について、その間隔を所定の期間ごとに算出する（Ｓ６０３）。入力情報処理部１３０の判定部１３２は、座標間隔取得部１３１により算出される間隔について、間隔が予め定められる期間に予め定められる幅以上減少したか判定を行い（Ｓ６０４）、間隔が所定の幅以上減少していない場合には、間隔が予め定められる期間に予め定められる幅以上増加したか判定を行う（Ｓ６０５）。

Ｓ６０４において間隔が予め定められる幅以上減少していた場合、表示処理部１５０は、判定の対象となった２つの座標の間の、通常の表示態様で表示（通常表示）されている表示要素の有無を確認し（Ｓ６０６）、表示要素が存在する場合には、該表示要素を通常と異なる特定の表示態様で表示（特定表示）する（Ｓ６０７）。一方、Ｓ６０６において表示要素が存在しない場合、表示処理部１５０は表示されている書面２１０を縮小する（Ｓ６０８）。

Ｓ６０５において間隔が予め定められる幅以上増大していた場合、表示処理部１５０は、判定の対象となった２つの座標の間の、特定表示された表示要素の有無を確認し（Ｓ６０９）、表示要素が存在する場合には、該表示要素を通常表示し（Ｓ６１０）、表示要素は書面上に固定される。一方、Ｓ６０９において特定表示された表示要素が存在しない場合、表示処理部１５０は表示されている書面２１０を拡大する（Ｓ６１１）。

Ｓ６０５において間隔が予め定められる幅以上増大していなかった場合（すなわち、間隔が予め定められる幅以上減少しておらず、かつ予め定められる幅以上増大していない場合）、表示処理部１５０は、判定の対象となった２つの座標の間の、特定表示された表示要素の有無を確認する（Ｓ６１２）。特定表示された表示要素が存在する場合には、表示処理部１５０は、２つの座標に応じて該表示要素の表示位置の変更等を行い（Ｓ６１３）、特定表示された表示要素が存在しない場合には、例えば一方の座標、もしくは２つの座標の中間の座標、等に基づいて、接触位置が１つであった場合と同様の表示制御処理を行う（Ｓ６１４）。以上で、情報処理装置１００における処理は終了する。

以上の構成により、書面２１０が表示されている表示部１６０において取得される２つの接触位置の座標に基づいて、書面２１０に含まれる表示要素を、特定の表示態様または通常の表示態様で表示する情報処理装置１００が提供される。

ここで、表示要素の選択（通常表示から特定表示への変更）および選択の解除（特定表示から通常表示への変更）は、表示要素を掴む／離す動作に近い、接触位置の間隔の変更に基づいて行われるため、操作方法が直感的であり、また「選択」「解除」等の操作メニューの表示／消去操作も不要である。

ここで、選択される表示要素は半透明等の特定の表示態様で表示されるため、選択中においても、選択されている表示要素の内容が操作者に対し視覚的に示される。

また、表示要素が選択された状態でページの変更等の処理を行うことで、当初表示されていたページと異なるページにおける該表示要素の表示および固定が行われる。

なお、上記の実施形態においては、２つの接触位置の座標間の間隔の増減に基づいて表示要素の選択や選択の解除を行う構成が示されたが、さらに間隔が予め定められる数値範囲内でない場合に、表示要素の選択や選択の解除を制限する構成を設けてもよい。この構成により、例えば画面の端と端など離れた２つの接触位置における操作を表示要素の選択操作と認識することが回避される。

また、上記の実施形態のように書面２１０の表示倍率が変更される情報処理装置１００においては、特定の表示態様による表示を行う場合に、その時点での書面２１０の表示倍率を取得し、取得された倍率に基づいて特定の表示態様による表示における倍率を決定する構成を設けてもよい。

また、上記の実施形態では２つの接触位置の座標間の間隔が増大した場合に表示要素の選択が解除される構成が示されたが、例えば指３００，３１０がタッチパネルから離れた時に選択が解除される構成としてもよい。また、表示要素が選択された状態で予め定められる操作を行うことで、指３００，３１０がタッチパネルから離れても選択された状態が維持される構成としてもよく、この場合、ある表示要素を選択したまま、さらに別の表示要素の選択処理が行われる構成としてもよい。

また、タッチパネルの予め定められる位置への接触状態を維持することでページの表示位置等を固定する構成を有する情報処理装置の場合には、他の接触位置との間隔が増大／減少した際に、２つの接触位置のいずれかが表示位置の固定のための接触位置であるか否かの判定を行い、いずれかが表示位置の固定のための接触位置であった場合には選択および選択解除の処理を行わない構成としてもよい。

さらに、ある表示要素を選択した状態で書面の表示位置もしくはページが変更された場合、該表示要素が表示されていた位置（以下、元位置）に関する情報と、新たに表示されている書面の表示位置やページとの情報と、を照合し、新たに表示されている領域のうち、構成や内容が元位置と類似している位置を、該表示要素の表示または固定が推奨される位置として表示する構成を設けてもよい。

さらに、ある表示要素が選択された時点で、文書情報全体に対して構成や内容の探索処理を行い、構成や内容が元位置と類似している位置があった場合にその旨を通知する構成を設けてもよい。

なお、上記の実施形態においては、タッチパネルに対する操作者の接触（タッチ）操作により表示要素の選択や選択の解除が行われる構成が示されたが、本発明はこれに限定されず、２つ以上の操作位置に基づく操作者の挙動に応じて表示要素の選択や選択の解除を行うものであれば他の構成としてもよい。例えばディスプレイの近傍における操作者の指の動きを、その表面に直接接触されることなく検出する静電容量式等のタッチパネルや、モーションキャプチャリング技術を利用した情報処理装置において、操作者の特定の挙動を検出して、検出結果に応じて表示要素の選択や選択の解除を行う構成としてもよい。

なお、ここで述べた情報処理装置１００の動作は、記憶部１７０に記憶されるプログラムを動作させることで実現される。このプログラムは通信によって提供されてもよいし、コンピュータによる読み取りが可能な、ＣＤ−ＲＯＭ等の記憶媒体に格納されて提供されてもよい。

１００ 情報処理装置、１１０ 入力部、１２０ 入力情報取得部、１３０ 入力情報処理部、１３１ 座標間隔取得部、１３２ 判定部、１４０ 文書情報編集部、１５０ 表示処理部、１５１ 選択表示要素表示処理部、１５２ 書面表示制御部、１６０ 表示部、１７０ 記憶部、２００ 画面、２１０ 書面、２１１，２１２ 付箋、３００，３１０ 指、３０１，３１１ 接触位置。

Claims (7)

1. 文書情報に基づく書面が表示されている表示画面における、２つ以上の接触位置の間隔が、予め定められる期間内に、予め定められる値以上減少した場合に、前記２つ以上の接触位置の間に表示される、前記書面に含まれる表示要素を、前記書面における表示態様と異なる特定の表示態様で表示する制御を行い、
   前記２つ以上の接触位置の間隔が、予め定められる期間内に、予め定められる値以上増大した場合に、前記特定の表示態様で表示されている表示要素を、前記書面における前記表示態様で表示する制御を行う表示制御手段、
   を有することを特徴とする情報処理装置。
2. 請求項１に記載の情報処理装置であって、
   前記表示制御手段は、前記表示要素が前記特定の表示態様で表示されている期間内に、操作者の操作に基づいて、前記書面の表示態様を変更する、
   ことを特徴とする情報処理装置。
3. 請求項２に記載の情報処理装置であって、
   前記書面は複数のページを含み、
   前記表示制御手段は、前記表示要素が前記特定の表示態様で表示されている期間内に、前記操作者の操作に基づいて、前記表示画面に表示されるページを変更する、
   ことを特徴とする情報処理装置。
4. 請求項１ないし３のいずれかに記載の情報処理装置であって、
   前記表示制御手段は、前記特定の表示態様で表示されている表示要素の表示位置を、前記２つの座標の変化に基づいて変更する、
   ことを特徴とする情報処理装置。
5. 請求項１ないし４のいずれかに記載の情報処理装置であって、
   前記表示制御手段が、前記書面における前記表示態様で表示される表示要素を、前記特定の表示態様で表示する場合、該表示要素に対応する情報を前記文書情報から削除し、
   前記表示制御手段が、前記特定の表示態様で表示されている表示要素を、前記書面における前記表示態様で表示する場合、該表示要素に対応する情報を前記文書情報に追加する文書情報編集手段、
   をさらに有することを特徴とする情報処理装置。
6. 請求項１ないし５のいずれかに記載の情報処理装置であって、
   前記表示制御手段は、
   前記書面における前記表示態様で表示される表示要素を、前記特定の表示態様で表示する場合、該表示要素の、前記書面における前記表示態様による表示を停止する、
   ことを特徴とする情報処理装置。
7. コンピュータを、
   文書情報に基づく書面が表示されている表示画面における、２つ以上の接触位置の間隔が、予め定められる期間内に、予め定められる値以上減少した場合に、前記２つ以上の接触位置の間に表示される、前記書面に含まれる表示要素を、前記書面における表示態様と異なる特定の表示態様で表示する制御を行い、
   前記２つ以上の接触位置の間隔が、予め定められる期間内に、予め定められる値以上増大した場合に、前記特定の表示態様で表示されている表示要素を、前記書面における前記表示態様で表示する制御を行う表示制御手段、
   として機能させるプログラム。

Images