JP2020173583A - 情報処理装置、情報処理方法、及び情報処理プログラム - Google Patents

Abstract

【課題】ユーザから入力される入力情報を第１表示画面に表示可能な情報処理装置において、第２表示画面に表示された情報を容易に閲覧可能な情報処理装置、情報処理方法、及び情報処理プログラムを提供する。【解決手段】情報処理装置１は、第１表示画面を操作可能な第１操作モードにおいて入力される入力情報を検出する入力検出部２１１と、第１操作モードと、第２表示画面を操作可能な第２操作モードとを相互に切り替える操作モード切替部２１２と、第２操作モードにおいて第２表示画面において選択される選択画像を取得する画像取得部２１３と、第１操作モードから第２操作モードに切り替えられた場合に第１表示画面と第２表示画面とを表示させ、第２操作モードから第１操作モードに切り替えられた場合に選択画像を第１表示画面に表示させる表示処理部２１５と、を備える。【選択図】図１

Description

本発明は、表示部にタッチペン等により入力（描画）される情報を表示可能な情報処理装置、情報処理方法、及び情報処理プログラムに関する。

従来、タッチパネルを用いてユーザからの指示入力（タッチ）を受け付ける表示装置（情報処理装置）の１つとして、電子ボード（電子白板又は電子黒板ともいう。）が知られている（例えば特許文献１参照）。前記電子ボードは、タッチパネル上においてタッチペン等によって手書きされた入力情報の位置を読み取り、読み取った位置の情報に基づいて入力情報を文字認識してテキスト変換し、変換したテキストを表示部に表示する。

特開２０１５−１９４８５０号公報

ユーザは前記電子ボードの機能を利用する際には特定のアプリケーションを起動させる。ここで、ユーザは、前記電子ボードを使用している際に、表示画面に表示されていない他の情報（例えば資料、ウェブ情報など）を表示させることを望む場合がある。従来、このような場合に、ユーザは、例えば前記特定のアプリケーションの表示画面を一旦閉じてデスクトップ画面に表示される他のアプリケーションを起動させて所望の情報を閲覧するなどの操作を行う。また、前記所望の情報を前記特定のアプリケーションの表示画面に取り込む際には、ユーザは、さらにデスクトップ画面において前記所望の情報をコピーした後、前記特定のアプリケーションを再起動させて前記所望の情報を前記表示画面に貼り付けるなどの操作を行う。このため、ユーザの操作が煩雑になり利便性が低下する問題が生じる。

本発明の目的は、ユーザから入力される入力情報を第１表示画面に表示可能な情報処理装置において、第２表示画面に表示された情報を容易に閲覧可能な情報処理装置、情報処理方法、及び情報処理プログラムを提供することにある。

本発明の一の態様に係る情報処理装置は、第１表示画面を操作可能な第１操作モードにおいて入力される入力情報を検出する入力検出部と、前記第１操作モードと、第２表示画面を操作可能な第２操作モードとを相互に切り替える操作モード切替部と、前記第２操作モードにおいて前記第２表示画面において選択される選択画像を取得する画像取得部と、前記操作モード切替部により前記第１操作モードから前記第２操作モードに切り替えられた場合に、前記入力検出部により検出された前記入力情報に対応する入力画像が表示された前記第１表示画面と、前記第２表示画面とを表示させ、前記操作モード切替部により前記第２操作モードから前記第１操作モードに切り替えられた場合に、前記画像取得部により取得された前記選択画像を前記第１表示画面に表示させる表示処理部と、を備える。

本発明の他の態様に係る情報処理方法は、第１表示画面を操作可能な第１操作モードにおいて入力される入力情報を検出する入力検出ステップと、前記第１操作モードと、第２表示画面を操作可能な第２操作モードとを相互に切り替える操作モード切替ステップと、前記第２操作モードにおいて前記第２表示画面において選択される選択画像を取得する画像取得ステップと、前記操作モード切替ステップにより前記第１操作モードから前記第２操作モードに切り替えられた場合に、前記入力検出ステップにより検出された前記入力情報に対応する入力画像が表示された前記第１表示画面と、前記第２表示画面とを表示させ、前記操作モード切替ステップにより前記第２操作モードから前記第１操作モードに切り替えられた場合に、前記画像取得ステップにより取得された前記選択画像を前記第１表示画面に表示させる表示ステップと、を一又は複数のプロセッサにより実行する。

本発明の他の態様に係る情報処理プログラムは、第１表示画面を操作可能な第１操作モードにおいて入力される入力情報を検出する入力検出ステップと、前記第１操作モードと、第２表示画面を操作可能な第２操作モードとを相互に切り替える操作モード切替ステップと、前記第２操作モードにおいて前記第２表示画面において選択される選択画像を取得する画像取得ステップと、前記操作モード切替ステップにより前記第１操作モードから前記第２操作モードに切り替えられた場合に、前記入力検出ステップにより検出された前記入力情報に対応する入力画像が表示された前記第１表示画面と、前記第２表示画面とを表示させ、前記操作モード切替ステップにより前記第２操作モードから前記第１操作モードに切り替えられた場合に、前記画像取得ステップにより取得された前記選択画像を前記第１表示画面に表示させる表示ステップと、を一又は複数のプロセッサにより実行させるための情報処理プログラムである。

本発明によれば、ユーザから入力される入力情報を第１表示画面に表示可能な情報処理装置において、第２表示画面に表示された情報を容易に閲覧可能となる。

図１は、本発明の実施形態に係る情報処理装置の構成を示すブロック図である。 図２は、本発明の実施形態に係る情報処理装置の表示部に表示される背面画面の一例を示す図である。 図３は、本発明の実施形態に係る情報処理装置の表示部に表示される描画画面の一例を示す図である。 図４は、本発明の実施形態に係る情報処理装置の表示部に表示される背面画面の他の例を示す図である。 図５は、本発明の実施形態に係る情報処理装置の表示部に表示される背面画面の他の例を示す図である。 図６は、本発明の実施形態に係る情報処理装置の表示部に表示される描画画面の他の例を示す図である。 図７は、本発明の実施形態に係る情報処理装置の表示部に表示される描画画面の他の例を示す図である。 図８は、本発明の実施形態に係る情報処理装置の表示部に表示される描画画面の他の例を示す図である。 図９は、本発明の実施形態に係る情報処理装置の表示部に表示される描画画面の他の例を示す図である。 図１０は、本発明の実施形態に係る情報処理装置における画像表示処理の手順の一例を説明するためのフローチャートである。

以下、添付図面を参照しながら、本発明の実施形態について説明する。なお、以下の実施形態は、本発明を具体化した一例であって、本発明の技術的範囲を限定する性格を有さない。

図１に示すように、本発明の実施形態に係る情報処理装置１は、タッチディスプレイ１００と、制御装置２００と、タッチペン３００とを備えている。制御装置２００は、タッチディスプレイ１００に接続され、タッチディスプレイ１００を制御するコンピュータである。タッチペン３００は、制御装置２００にネットワーク（有線通信又は無線通信）を介して接続されている。なお、タッチペン３００は、省略されてもよい。

タッチディスプレイ１００は、タッチパネル１１０と、表示部１２０と、を備えている。タッチパネル１１０は、静電容量方式のタッチパネルであってもよいし、感圧式又は赤外線遮断方式のタッチパネルであってもよい。すなわち、タッチパネル１１０は、タッチ等、ユーザの操作入力を適宜受け付けることが可能な装置であればよい。タッチパネル１１０は、表示部１２０に設けられている。表示部１２０は、例えば液晶ディスプレイである。なお、表示部１２０は、液晶ディスプレイに限定されず、ＬＥＤ（Light Emitting Diode）ディスプレイ、有機ＥＬ（Electro-Luminescence）ディスプレイ、プロジェクタ等であってもよい。

タッチディスプレイ１００は、コンピュータ、タブレット端末、スマートフォン、カーナビゲーションなどの装置であってもよい。

タッチペン３００は、ユーザがタッチディスプレイ１００に対してタッチ（入力）するためのペン（例えば電子ペン）である。タッチペン３００が省略される場合は、ユーザは指によりタッチディスプレイ１００に対してタッチ（入力）する。例えばユーザは、タッチペン３００又は指により、文字、図形などのオブジェクトを手書き入力（描画）する。タッチペン３００は、本発明の入力ペンの一例である。

図１に示すように、制御装置２００は、記憶部２２０と、制御部２１０とを備えている。

記憶部２２０は、各種の情報を記憶するＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）又はＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）などの不揮発性の記憶部である。記憶部２２０には、制御装置２００が実行可能な情報処理プログラム２２１が格納されている。例えば、情報処理プログラム２２１は、ＵＳＢ、ＣＤ又はＤＶＤなどのコンピュータ読取可能な記録媒体に非一時的に記録されており、制御装置２００に電気的に接続されるＵＳＢドライブ、ＣＤドライブ又はＤＶＤドライブなどの読取装置（不図示）で読み取られて記憶部２２０に記憶される。また、情報処理プログラム２２１は、制御装置２００からアクセス可能なサーバからダウンロードされて、記憶部２２０に記憶されてもよい。制御部２１０は、ＣＰＵ（Central Processing Unit）で構成されている。ユーザの操作により制御装置２００の起動が指示された場合（例えば、図示しない電源ボタンが押下された場合）、制御部２１０は、記憶部２２０から情報処理プログラム２２１を読み出して実行する。これにより、制御装置２００が起動する。

また、記憶部２２０には、制御装置２００が実行可能な情報処理プログラム２２１として、ペンソフトウェア（アプリケーション）がインストールされている。制御装置２００が起動しているときに、ユーザの操作によりペンソフトウェアの起動が指示された場合、制御部２１０は、記憶部２２０からペンソフトウェアを読み出して実行する。これにより、ペンソフトウェアが制御装置２００上で起動する。

また、記憶部２２０には、ユーザがタッチディスプレイ１００のペンソフトウェアに応じた描画画面１０ｂ（本発明の第１表示画面に対応）において入力した文字、図形などの手書きオブジェクトに関する情報、及び、手書き文字をテキスト形式に変換したオブジェクトであるテキストオブジェクトに関する情報を含む入力情報２２２（本発明の入力情報の一例）が記憶される。入力情報２２２には、手書きオブジェクト及びテキストオブジェクトの入力画像、手書きオブジェクトの位置座標、及び、オブジェクト（手書きオブジェクト、テキストオブジェクト）のフォントサイズが含まれる。また入力情報２２２には、ユーザにより手書きオブジェクトが入力された順（時系列）に各情報が記憶される。

制御部２１０は、入力検出部２１１と、操作モード切替部２１２と、画像取得部２１３と、領域比較部２１４と、表示処理部２１５とを備えている。制御部２１０は、例えば、タッチディスプレイ１００の描画画面１０ｂ（図３参照）に対して入力された文字、図形などの手書きオブジェクトの画像（入力画像Ｔ１）の表示を制御したり、タッチディスプレイ１００の背面画面１０ａ（図２参照）において受け付けたユーザの操作に応じた画像（選択画像Ｆ１１）の表示を制御したりする。

例えば、制御部２１０は、ペンソフトウェアが起動されていない場合、タッチディスプレイ１００の表示部１２０に、図２に示す背面画面１０ａ（デスクトップ画面）を表示させる。図２に示す背面画面１０ａには、所定のアプリケーションに対応するファイル（例えばワードファイル、エクセルファイル、ＰＤＦファイルなど）、フォルダなどのアイコンＦ１〜Ｆ３が表示されている。アイコンＦ１〜Ｆ３は本発明の選択対象の一例である。ユーザが所望のアイコンを選択すると、対応するアプリケーションが起動して、当該アイコンに対応する情報（選択画像）が背面画面１０ａに表示される。このように、ペンソフトウェアが起動されていない場合には、ユーザは、タッチディスプレイ１００のデスクトップ画面（背面画面１０ａ）において公知の操作を行うことが可能である。以下では、この場合の操作モードを、背面操作モード（本発明の第２操作モードに対応）と称す。

一方、ユーザの操作によりペンソフトウェアの起動が指示された場合、制御部２１０は、タッチディスプレイ１００の表示部１２０に、図３に示す描画画面１０ｂを表示させる。図３に示す描画画面１０ｂには、ユーザにより入力された入力情報に応じた入力画像Ｔ１（テキスト画像）が描画（表示）されている。ユーザは、ペンソフトウェアを起動させて、描画画面１０ｂにおいて所望の情報を入力する操作を行う。以下では、この場合の操作モードを、描画操作モード（本発明の第１操作モードに対応）と称す。背面操作モード及び描画操作モードは、ユーザの操作に応じて相互に切り替え可能となっている。

入力検出部２１１は、描画画面１０ｂを操作可能な描画操作モードにおいて描画画面１０ｂに入力される入力情報を検出する。具体的には、入力検出部２１１は、ユーザの操作によりペンソフトウェアが起動して、タッチディスプレイ１００の表示部１２０に描画画面１０ｂが表示されている場合、すなわち操作モードが描画操作モードに設定されている場合において、タッチディスプレイ１００に対するタッチペン３００の入力を検出する。例えば、入力検出部２１１は、タッチパネル１１０上においてタッチペン３００又はユーザの指によって手書き入力（指定）された位置座標を検出する。入力検出部２１１は、検出した位置座標を記憶部２２０の入力情報２２２に記憶する。なお、入力検出部２１１は、タッチパネル１１０においてタッチペン３００又はユーザの指により入力される入力情報に限定されず、他のユーザインタフェースにより入力される入力情報を検出してもよい。例えば、入力検出部２１１は、マウス、キーボード、マイクにより入力される入力情報を検出してもよい。

制御部２１０は、入力情報２２２に基づいて入力画像Ｔ１を表示部１２０の描画画面１０ｂに表示させる。具体的には、制御部２１０は、入力検出部２１１により検出された前記位置座標に基づいて、手書きオブジェクトを文字認識し、テキスト情報に変換するテキスト変換処理を行う。例えば、タッチディスプレイ１００において、ユーザが文字を手書き入力し、テキスト変換コマンドを選択した場合、制御部２１０は、手書き入力された位置座標に基づいて文字認識し、テキスト情報に変換する。

また制御部２１０は、入力検出部２１１により検出された前記位置座標に基づいて、描画画面１０ｂに表示するオブジェクトを生成する。例えば、制御部２１０は、手書き入力された手書きオブジェクトの位置座標に基づいて、手書きオブジェクトを生成する。また、制御部２１０は、変換したテキスト情報に基づいて、テキストオブジェクトを生成する。制御部２１０は、生成したオブジェクトの画像、フォントサイズの情報を記憶部２２０の入力情報２２２に記憶する。

また制御部２１０は、生成したオブジェクト（手書きオブジェクト、テキストオブジェクト）の画像（入力画像Ｔ１）などを描画画面１０ｂに表示させる。例えば、制御装置２００においてペンソフトウェアが起動しているときに、ユーザがタッチペン３００により手書きで「会議議事」を入力した場合、制御部２１０は、ユーザの筆跡に応じた手書きオブジェクト（入力画像Ｔ１）を描画画面１０ｂに表示させる（図３参照）。なお、制御部２１０は、マウス、キーボード、マイクなどにより入力された入力情報に応じた入力画像を描画画面１０ｂ（本発明の第１表示画面の一例）に表示させてもよい。

なお、図３に示すように、表示部１２０の描画画面１０ｂは、描画領域とツールバー領域とを含んでいる。描画領域は、描画画面１０ｂの上方に配置され、ツールバー領域は、描画画面１０ｂの下方に配置される。

ユーザは、描画領域においてタッチペン３００により文字等の描画情報を描画（入力）することができる。図３には、ユーザがタッチペン３００により描画した入力画像Ｔ１（「会議議事」）を示している。ユーザが描画領域においてタッチペン３００により描画情報を描画した場合、入力検出部２１１はタッチペン３００の入力（位置座標）を検出し、制御部２１０は、入力検出部２１１により検出された位置座標に基づいて、入力の軌跡を表示部１２０の描画画面１０ｂに表示させる。

前記ツールバーには、描画画面１０ｂを操作するための機能を実行するための複数の操作ボタンが配置されている。図３には、操作ボタン１３〜１５を例示している。操作ボタン１３は、描画画面１０ｂに表示される複数のシート（ページ）をサムネイル画像で一覧表示させるための操作ボタンである。操作ボタン１４は、描画画面１０ｂに拡張機能のメニュー（図示せず）を表示させるための操作ボタンである。操作ボタン１５は、描画画面１０ｂに表示されたシートの番号（シート番号）を繰り上げる又は繰り下げる（ページをめくる）ための操作ボタンである。２つの操作ボタン１５の間には、描画画面１０ｂに現在表示されているシート（ページ）の番号が表示される。

前記ツールバーに、その他の操作ボタンが配置されてもよい。例えば、ペンソフトウェアの設定画面を表示させる操作ボタン、ペンソフトウェアをタスクトレイに格納するための操作ボタン、ペンソフトウェアを終了するための操作ボタンなどが、前記ツールバーに配置されてもよい。

操作モード切替部２１２は、タッチディスプレイ１００における操作モードを、描画画面１０ｂにおける操作を受け付け可能（有効）とする描画操作モード、又は、背面画面１０ａにおける操作を受け付け可能（有効）とする背面操作モードに切り替える。具体的には、操作モード切替部２１２は、制御装置２００と通信可能なタッチペン３００において受け付けられるユーザの操作に基づいて、描画操作モード及び背面操作モードを相互に切り替える。例えば、タッチペン３００は、操作モードを切り替えるための切替ボタン３１０を備えている。ユーザにより切替ボタン３１０が所定時間継続して押下（長押し）された場合に、タッチペン３００は制御装置２００に第１切替信号を送信する。また、切替ボタン３１０の長押し状態が解除された場合に、タッチペン３００は制御装置２００に第２切替信号を送信する。例えば、操作モード切替部２１２は、操作モードが描画操作モードに設定されている場合にタッチペン３００から第１切替信号を取得すると、操作モードを背面操作モードに切り替える。また、操作モード切替部２１２は、操作モードが背面操作モードに設定されている場合にタッチペン３００から第２切替信号を取得すると、操作モードを描画操作モードに切り替える。

操作モード切替部２１２は、タッチディスプレイ１００に入力される操作情報に基づいて前記操作モードを切り替えてもよい。例えば、操作モード切替部２１２は、表示部１２０に表示された所定のアイコン（コマンドアイコン）がユーザにより選択された場合に前記操作モードを切り替えてもよい。

表示処理部２１５は、操作モード切替部２１２により前記操作モードが描画操作モードから背面操作モードに切り替えられた場合に、表示部１２０に入力画像Ｔ１が表示された描画画面１０ｂと背面画面１０ａ（デスクトップ画面）とを表示させる。ここで、例えば背面画面１０ａが描画画面１０ｂの後方に配置されるなど、背面画面１０ａ及び描画画面１０ｂが互いに重なるように配置される場合、表示処理部２１５は、図４に示すように、前方の描画画面１０ｂを透過表示（例えば半透明表示）させた状態で、後方の背面画面１０ａを見かけ上前方に表示させる。図４に示すように、描画画面１０ｂに含まれる入力画像Ｔ１、メニューバーに含まれる複数の操作ボタン１３〜１５及びページ番号１６は、半透明状態で表示され（図４の点線枠囲み部分）、背面画面１０ａが前方に表示される。

画像取得部２１３は、前記操作モードが描画操作モードから背面操作モードに切り替えられた場合において、背面画面１０ａ（デスクトップ画面）において選択される選択画像を取得する。例えば、図３に示す描画画面１０ｂにおいてユーザがタッチペン３００の切替ボタン３１０を長押しすると、図４に示す背面画面１０ａに切り替わる。図４に示す背面画面１０ａにおいてユーザが切替ボタン３１０を長押ししたままアイコンＦ１を選択すると、表示処理部２１５は、図５に示すように、アイコンＦ１に対応する選択画像Ｆ１１を背面画面１０ａに表示させる。ユーザが切替ボタン３１０から指を離す（長押しを解除する）と、前記操作モードが描画操作モードに切り替えられる。このとき、画像取得部２１３は、背面画面１０ａに表示されている選択画像Ｆ１１（図５参照）の画像データを取得する。すなわち、画像取得部２１３は、操作モード切替部２１２により背面操作モードから描画操作モードに切り替えられた時点で背面画面１０ａに表示されている選択画像を取得する。

表示処理部２１５は、前記操作モードが背面操作モードから描画操作モードに切り替えられると、画像取得部２１３により取得された画像データに応じた選択画像を描画画面１０ｂに表示させる。例えば図６に示すように、表示処理部２１５は、図５に示す選択画像Ｆ１１を描画画面１０ｂに表示させる。これにより、描画画面１０ｂに、他のアプリケーションにより他の表示画面（背面画面１０ａ）に表示される情報を取り込むことが可能となる。なお、描画画面１０ｂに表示される選択画像Ｆ１１に関する情報（画像データ、位置座標など）が記憶部２２０に記憶される。

領域比較部２１４は、入力検出部２１１により検出された入力情報に応じて描画画面１０ｂに表示された入力画像の第１表示領域ＡＲ１と、表示処理部２１５により描画画面１０ｂに表示された選択画像の第２表示領域ＡＲ２とを比較する。例えば、領域比較部２１４は、描画画面１０ｂに表示された入力画像Ｔ１の第１表示領域ＡＲ１と、描画画面１０ｂに表示された選択画像Ｆ１１の第２表示領域ＡＲ２とを比較する。領域比較部２１４は、記憶部２２０に記憶された入力画像Ｔ１の位置座標に基づいて第１表示領域ＡＲ１を算出し、記憶部２２０に記憶された選択画像Ｆ１１の位置座標に基づいて第２表示領域ＡＲ２を算出する。

表示処理部２１５は、領域比較部２１４による比較結果に基づいて、選択画像Ｆ１１を描画画面１０ｂに表示させる。例えば図７に示すように、表示処理部２１５は、第１表示領域ＡＲ１及び第２表示領域ＡＲ２が互いに重なる場合に、描画画面１０ｂにおいて、選択画像Ｆ１１を入力画像Ｔ１に重なるようにして透過表示（例えば半透明表示）させる。これにより、入力画像Ｔ１及び選択画像Ｆ１１の両方を確認することが可能となる。

また他の実施形態として、表示処理部２１５は、第１表示領域ＡＲ１及び第２表示領域ＡＲ２が互いに重なる場合に、描画画面１０ｂにおいて、選択画像Ｆ１１の表示位置を入力画像Ｔ１に重ならない位置に変更してもよい。例えば図８に示すように入力画像Ｔ１の右側の領域に空白領域（余白領域）が存在する場合に、表示処理部２１５は、選択画像Ｆ１１を空白領域に移動させて表示させる。この場合、表示処理部２１５は、半透明表示を行わなくてもよい。

また他の実施形態として、表示処理部２１５は、第１表示領域ＡＲ１及び第２表示領域ＡＲ２が互いに重なる場合に、描画画面１０ｂにおいて、選択画像Ｆ１１を入力画像Ｔ１に重ならない大きさに縮小して表示させてもよい。例えば図９に示すように、描画画面１０ｂに空白領域（余白領域）が存在する場合に、表示処理部２１５は、選択画像Ｆ１１を縮小して空白領域に表示させる。なお、表示処理部２１５は、前記空白領域に応じて選択画像Ｆ１１を拡大して表示させてもよい。

［画像表示処理］
以下、図１０を参照しつつ、制御装置２００の制御部２１０によって実行される画像表示処理の手順の一例について説明する。例えば、制御装置２００の制御部２１０は、タッチディスプレイ１００において、ユーザの操作によりペンソフトウェアの起動が指示されて、ペンソフトウェアが起動されることにより前記情報処理プログラムの実行を開始することによって、前記画像表示処理の実行を開始する。なお、本発明は、前記画像表示処理に含まれる一又は複数のステップを実行する情報処理方法の発明として捉えることができる。

なお、ここで説明する前記画像表示処理に含まれる一又は複数のステップが適宜省略されてもよい。また、前記画像表示処理における各ステップは、同様の作用効果を生じる範囲で実行順序が異なってもよい。さらに、ここでは制御部２１０によって前記画像表示処理における各ステップが実行される場合を例に挙げて説明するが、他の実施形態では、複数のプロセッサーによって前記画像表示処理における各ステップが分散して実行されてもよい。

先ずステップＳ１１において、制御部２１０は、描画操作モードにおいて、ユーザが使用するタッチペン３００により描画画面１０ｂに描画入力される手書きオブジェクトに関する入力情報を検出する。制御部２１０が前記入力情報（描画入力）を検出すると（Ｓ１１：ＹＥＳ）、処理はステップＳ１２に移行し、制御部２１０が前記入力情報を検出しない場合（Ｓ１１：ＮＯ）、処理はステップＳ１３に移行する。ステップＳ１１は、本発明の入力検出ステップの一例である。

ステップＳ１２において、制御部２１０は、検出した入力情報に対応する入力画像を描画画面１０ｂに表示させる（図３参照）。

次にステップＳ１３において、制御部２１０は、操作モードが背面操作モードに切り替えられたか否かを判定する。例えば、ユーザによりタッチペン３００の切替ボタン３１０が所定時間継続して押下（長押し）された場合に、制御部２１０は、タッチペン３００から第１切替信号を取得して、操作モードを描画操作モードから背面操作モードに切り替える。操作モードが背面操作モードに切り替えられた場合（Ｓ１３：ＹＥＳ）、処理はステップＳ１４に移行する。操作モードが背面操作モードに切り替えられない場合（Ｓ１３：ＮＯ）、処理はステップＳ１１に移行する。ステップＳ１３は、本発明の操作モード切替ステップの一例である。

ステップＳ１４において、制御部２１０は、描画画面１０ｂを透過表示（例えば半透明化）させて、後方の背面画面１０ａを表示させる（図４参照）。

次にステップＳ１５において、制御部２１０は、背面画面１０ａにおいて所定のアプリケーションを起動させるためのアイコン（図４のアイコンＦ１〜Ｆ３等）が選択されたか否かを判定する。前記アイコンが選択された場合（Ｓ１５：ＹＥＳ）、処理はステップＳ１６に移行し、前記アイコンが選択されない場合（Ｓ１５：ＮＯ）、処理はステップＳ１７に移行する。

ステップＳ１６において、制御部２１０は、選択されたアイコンに対応する選択画像を背面画面１０ａに表示させる。例えば、制御部２１０は、図５に示すように、選択されたアイコンＦ１に対応する選択画像Ｆ１１を取得して背面画面１０ａに表示させる。ステップＳ１６は、本発明の画像取得ステップの一例である。

次にステップＳ１７において、制御部２１０は、操作モードが描画操作モードに切り替えられたか否かを判定する。例えば、ユーザによりタッチペン３００の切替ボタン３１０が長押し状態から解除された場合に、制御部２１０は、タッチペン３００から第２切替信号を取得して、操作モードを背面操作モードから描画操作モードに切り替える。操作モードが描画操作モードに切り替えられた場合（Ｓ１７：ＹＥＳ）、処理はステップＳ１８に移行する。操作モードが描画操作モードに切り替えられない場合（Ｓ１７：ＮＯ）、処理はステップＳ１５に移行する。ステップＳ１３は、本発明の操作モード切替ステップの一例である。

ステップＳ１８において、制御部２１０は、描画画面１０ｂの半透明表示を解除し通常の表示状態に戻す。すなわち、制御部２１０は、描画画面１０ｂにおける操作の受け付けを可能な状態に戻す。

ステップＳ１９において、制御部２１０は、選択画像を描画画面１０ｂに表示させる（図６参照）。ステップＳ１９は、本発明の表示ステップの一例である。

ステップＳ２０において、制御部２１０は、描画画面１０ｂにおいて、選択画像が入力画像に重なるか否かを判定する。具体的には、制御部２１０は、描画画面１０ｂに表示された入力画像Ｔ１の第１表示領域ＡＲ１と、描画画面１０ｂに表示された選択画像Ｆ１１の第２表示領域ＡＲ２とを比較して、選択画像Ｆ１１が入力画像Ｔ１に重なるか否かを判定する。選択画像Ｆ１１が入力画像Ｔ１に重なる場合（Ｓ２０：ＹＥＳ）、処理はステップＳ２１に移行する。選択画像Ｆ１１が入力画像Ｔ１に重ならない場合（Ｓ２０：ＮＯ）、処理はステップＳ１１に移行する。

ステップＳ２１において、制御部２１０は、描画画面１０ｂにおいて、選択画像Ｆ１１を半透明表示させる。なお、制御部２１０は、描画画面１０ｂにおいて、選択画像Ｆ１１を入力画像Ｔ１に重ならない位置に移動させて表示させてもよい。また、制御部２１０は、描画画面１０ｂに空白領域が存在する場合に、選択画像Ｆ１１を縮小して空白領域に表示させてもよい。ステップＳ２１は、本発明の表示ステップの一例である。その後、処理はステップＳ１１に戻り、上述の処理を繰り返す。

以上のように、本発明の実施形態に係る情報処理装置１によれば、ユーザがペンソフトウェアを使用して描画画面１０ｂにおいて手書き入力している場合に、操作モードを切り替える所定の操作を行うことにより、描画画面１０ｂを表示させた状態で、描画画面１０ｂとは異なる表示画面（背面画面１０ａ）が操作可能となる。また、背面画面１０ａにおいて、再度、操作モードを切り替える所定の操作を行うことにより、背面画面１０ａに表示された画像（選択画像Ｆ１１）の情報を描画画面１０ｂに反映させることができる。よって、ユーザは、描画画面１０ｂを表示させた状態で、背面画面１０ａに表示された情報を容易に閲覧することが可能である。また、背面画面１０ａの情報を容易に描画画面１０ｂに取り込むことが可能である。

なお、本発明の情報処理装置は、タッチパネルの機能を備えていない装置、すなわち画像表示装置に適用することもできる。このため、本発明の第１表示画面は、タッチパネルを動作させるアプリケーションにより表示される表示画面に限定されず、他のアプリケーション、例えば文書作成アプリケーション、表計算アプリケーションなどにより表示される表示画面であってもよい。また、本発明の第２表示画面は、デスクトップ画面に表示されるアイコンに対応するアプリケーションにより表示される表示画面に限定されず、他のアプリケーション、例えばウェブアプリケーションにより表示されるウェブ情報（ウェブサイト、ウェブページ）であってもよい。また、本発明の情報処理装置は、タッチディスプレイ１００を備えていない装置、すなわち制御装置２００単体で構成されてもよい。すなわち、本発明の情報処理装置は、例えば、表示部又はタッチディスプレイに対して、前記第１表示画面及び前記第２表示画面を表示させることが可能である。

尚、本発明に係る情報処理装置１は、各請求項に記載された発明の範囲において、以上に示された各実施形態を自由に組み合わせること、或いは各実施形態を適宜、変形又は一部を省略することによって構成されることも可能である。

１ ：情報処理装置
１０ａ ：背面画面
１０ｂ ：描画画面
１００ ：タッチディスプレイ
１１０ ：タッチパネル
１２０ ：表示部
２００ ：制御装置
２１０ ：制御部
２１１ ：入力検出部
２１２ ：操作モード切替部
２１３ ：画像取得部
２１４ ：領域比較部
２１５ ：表示処理部
２２０ ：記憶部
２２１ ：情報処理プログラム
２２２ ：入力情報
３００ ：タッチペン
３１０ ：切替ボタン

Claims (10)

1. 第１表示画面を操作可能な第１操作モードにおいて入力される入力情報を検出する入力検出部と、
   前記第１操作モードと、第２表示画面を操作可能な第２操作モードとを相互に切り替える操作モード切替部と、
   前記第２操作モードにおいて前記第２表示画面において選択される選択画像を取得する画像取得部と、
   前記操作モード切替部により前記第１操作モードから前記第２操作モードに切り替えられた場合に、前記入力検出部により検出された前記入力情報に対応する入力画像が表示された前記第１表示画面と、前記第２表示画面とを表示させ、前記操作モード切替部により前記第２操作モードから前記第１操作モードに切り替えられた場合に、前記画像取得部により取得された前記選択画像を前記第１表示画面に表示させる表示処理部と、
   を備える情報処理装置。
2. 前記第１表示画面及び前記第２表示画面は互いに重なるように配置されており、
   前記表示処理部は、前記操作モード切替部により前記第１操作モードから前記第２操作モードに切り替えられた場合に、前記第１表示画面を透過表示させる、
   請求項１に記載の情報処理装置。
3. 前記表示処理部は、前記第１表示画面が透過表示された状態で、前記第２表示画面において選択された選択対象に対応する前記選択画像を前記第２表示画面に表示させ、
   前記画像取得部は、前記操作モード切替部により前記第２操作モードから前記第１操作モードに切り替えられた時点で前記第２表示画面に表示されている前記選択画像を取得する、
   請求項２に記載の情報処理装置。
4. 前記操作モード切替部により前記第２操作モードから前記第１操作モードに切り替えられた場合に、前記第１表示画面に表示された前記入力画像の第１表示領域と、前記第１表示画面に表示された前記選択画像の第２表示領域とを比較する領域比較部をさらに備え、
   前記表示処理部は、前記領域比較部による比較結果に基づいて、前記選択画像を前記第１表示画面に表示させる、
   請求項１から請求項３の何れか１項に記載の情報処理装置。
5. 前記表示処理部は、前記第１表示領域及び前記第２表示領域が互いに重なる場合に、前記第１表示画面において、前記選択画像を透過表示させる、
   請求項４に記載の情報処理装置。
6. 前記表示処理部は、前記第１表示領域及び前記第２表示領域が互いに重なる場合に、前記第１表示画面において、前記選択画像の表示位置を前記入力画像に重ならない位置に変更する、
   請求項４に記載の情報処理装置。
7. 前記表示処理部は、前記第１表示領域及び前記第２表示領域が互いに重なる場合に、前記第１表示画面において、前記選択画像を前記入力画像に重ならない大きさに縮小する、
   請求項４に記載の情報処理装置。
8. 前記操作モード切替部は、ユーザの操作に基づいて、前記第１操作モードと前記第２操作モードとを相互に切り替える、
   請求項１から請求項７の何れか１項に記載の情報処理装置。
9. 第１表示画面を操作可能な第１操作モードにおいて入力される入力情報を検出する入力検出ステップと、
   前記第１操作モードと、第２表示画面を操作可能な第２操作モードとを相互に切り替える操作モード切替ステップと、
   前記第２操作モードにおいて前記第２表示画面において選択される選択画像を取得する画像取得ステップと、
   前記操作モード切替ステップにより前記第１操作モードから前記第２操作モードに切り替えられた場合に、前記入力検出ステップにより検出された前記入力情報に対応する入力画像が表示された前記第１表示画面と、前記第２表示画面とを表示させ、前記操作モード切替ステップにより前記第２操作モードから前記第１操作モードに切り替えられた場合に、前記画像取得ステップにより取得された前記選択画像を前記第１表示画面に表示させる表示ステップと、
   を一又は複数のプロセッサにより実行する情報処理方法。
10. 第１表示画面を操作可能な第１操作モードにおいて入力される入力情報を検出する入力検出ステップと、
    前記第１操作モードと、第２表示画面を操作可能な第２操作モードとを相互に切り替える操作モード切替ステップと、
    前記第２操作モードにおいて前記第２表示画面において選択される選択画像を取得する画像取得ステップと、
    前記操作モード切替ステップにより前記第１操作モードから前記第２操作モードに切り替えられた場合に、前記入力検出ステップにより検出された前記入力情報に対応する入力画像が表示された前記第１表示画面と、前記第２表示画面とを表示させ、前記操作モード切替ステップにより前記第２操作モードから前記第１操作モードに切り替えられた場合に、前記画像取得ステップにより取得された前記選択画像を前記第１表示画面に表示させる表示ステップと、
    を一又は複数のプロセッサにより実行させるための情報処理プログラム。

Images