JP5440374B2 - 情報処理装置及びプログラム - Google Patents

Description

本発明は、情報処理装置、及びプログラムに関する。

下記非特許文献１の情報処理装置では、文書表示アプリケーションによってアプリケーション文書が表示されるようになっており、電子ペンがペントレイに置かれている場合は、アプリケーション文書に関する処理の実行指示（例えば、ページ変更処理）を受け入れ、電子ペンがペントレイに置かれていない場合は、電子ペンでの軌跡の入力を受け付けるようになっている。そして、電子ペンがペントレイに置かれていない場合は、文書表示アプリケーションにより軌跡が画面に表示されるようになっている。

ユーザは、例えば追記を付加したいページを変更したい場合、電子ペンをペントレイにおいた状態でページ変更に関する操作を行う。そして、ユーザは、ページ変更後、電子ペンを手にとって画面に軌跡を入力する。

上記情報処理装置では、軌跡の画像が文書表示アプリケーションに準じたデータ形式のデータに変換され、文書自体に埋め込まれるようになっている。これにより、軌跡を含む文書の画像を再現するためのデータが、軌跡の画像が埋め込まれた文書として生成されるようになっている。

パイオニア株式会社，[online]，［２０１０年４月２５日検索］，インターネット<URL:http://pioneer.jp/ccs/catalog/pdf/ccs/CCS-SV.pdf>

本発明の目的は、ユーザが画面に軌跡を入力する際に操作する操作部材を操作しなくても、文書表示状態と手書き状態とを切り替えることができるようにすることである。

上記課題を解決するための請求項１の発明は、第１画像を画面に表示させる第１表示制御手段と、第２画像を前記画面に表示させる第２表示制御手段と、前記画面にユーザが入力した軌跡を取得する軌跡取得手段と、ユーザが前記画面に軌跡を入力する際に操作する操作部材に関する状態を示す情報を取得する状態取得手段と、前記第１表示制御手段が前記第１画像を表示させているときに、前記画面に表示される前記第１画像を更新する第１更新手段と、前記第１表示制御手段が前記第１画像を表示させているときに前記軌跡取得手段により軌跡が取得された場合に、前記画面に表示されている画像である画面画像を取得する画像取得手段と、前記第１表示制御手段が前記第１画像を表示させているときに前記軌跡取得手段により軌跡が取得された場合に、前記画面の表示を、前記画面画像に当該軌跡を示す軌跡画像を描画してなる画像である前記第２画像の前記第２表示制御手段による表示に切り替える制御を行う第１切替制御手段と、前記第２表示制御手段が前記第２画像を表示させているときに前記軌跡取得手段により軌跡が取得された場合に、前記第２画像を、当該第２画像に当該軌跡を示す軌跡画像を描画してなる画像に更新する第２更新手段と、前記第２表示制御手段が前記第２画像を表示させているときに所与の操作が行われた場合に、前記画面の表示を前記第１表示制御手段による前記第１画像の表示に切り替える制御を行う第２切替制御手段と、前記第２表示制御手段が前記第２画像を表示させているときに前記所与の操作が行われた場合に、前記第２画像を記憶手段に記憶させる手段と、を含み、前記画像取得手段は、前記軌跡取得手段により軌跡が取得された場合において、前記状態取得手段により取得される前記情報が示す状態が予め定められた基準状態である場合に、前記画面画像を取得し、前記第２切替制御手段は、前記軌跡取得手段により軌跡が取得された場合において、前記状態取得手段により取得される前記情報が示す状態が前記基準状態である場合に、前記第２表示制御手段に前記第２画像を表示させること、を特徴とする情報処理装置である。

また、請求項２の発明は、請求項１の発明において、前記画像取得手段は、前記軌跡取得手段により取得された軌跡が軌跡条件を満足し、且つ、前記情報が示す状態が前記基準状態である場合に、前記画面画像を取得し、前記第２切替制御手段は、前記軌跡取得手段により取得された軌跡が軌跡条件を満足し、且つ、前記情報が示す状態が前記基準状態である場合に、前記第２表示制御手段に前記第２画像を表示させる前記画面に表示させ、前記軌跡条件は、前記軌跡取得手段により取得された軌跡の長さに関する条件、当該軌跡の位置に関する条件、当該軌跡の入力速度に関する条件、又は当該軌跡の少なくとも一部の基準線との角度に関する条件であることを特徴とする。

また、請求項３の発明は、請求項２の発明において、前記第２表示制御手段が前記第２画像を表示させているときにユーザによって消去操作が行われた場合に、前記第２画像に含まれる軌跡画像の少なくとも一部を消去する消去手段と、前記軌跡条件を満足する軌跡が前記第１表示制御手段が前記第１画像を表示させているときに取得されてから所定期間内に当該軌跡を示す軌跡画像の少なくとも一部が消去された場合に、前記軌跡条件を更新する条件更新手段と、をさらに含むことを特徴とする。

また、請求項４の発明は、請求項２の発明において、前記軌跡条件が、前記第１画像の基礎となっているデータのデータ形式に応じて変化する条件であることを特徴とする。

また、上記課題を解決するための請求項５の発明は、画面にユーザが入力した軌跡を取得する軌跡取得手段、ユーザが前記画面に軌跡を入力する際に操作する操作部材に関する状態を示す情報を取得する状態取得手段、第１画像を前記画面に表示させる第１表示制御手段が前記第１画像を表示させているときに、前記画面に表示される前記第１画像を更新する第１更新手段、前記第１表示制御手段が前記第１画像を表示させているときに前記軌跡取得手段により軌跡が取得された場合に、前記画面に表示されている画像である画面画像を取得する画像取得手段、前記第１表示制御手段が前記第１画像を表示させているときに前記軌跡取得手段により軌跡が取得された場合に、前記画面の表示を、前記画面画像に当該軌跡を示す軌跡画像を描画してなる画像である第２画像の第２表示制御手段による表示に切り替える制御を行う第１切替制御手段、前記第２表示制御手段が前記第２画像を表示させているときに前記軌跡取得手段により軌跡が取得された場合に、前記第２画像を、当該第２画像に当該軌跡を示す軌跡画像を描画してなる画像に更新する第２更新手段、前記第２表示制御手段が前記第２画像を表示させているときに所与の操作が行われた場合に、前記画面の表示を、前記第１表示制御手段による前記第１画像の表示に切り替える制御を行う第２切替制御手段、前記第２表示制御手段が前記第２画像を表示させているときに前記所与の操作が行われた場合に、前記第２画像を記憶手段に記憶させる手段、としてコンピュータを機能させ、前記画像取得手段は、前記軌跡取得手段により軌跡が取得された場合において、前記状態取得手段により取得される前記情報が示す状態が予め定められた基準状態である場合に、前記画面画像を取得し、前記第２切替制御手段は、前記軌跡取得手段により軌跡が取得された場合において、前記状態取得手段により取得される前記情報が示す状態が前記基準状態である場合に、前記第２表示制御手段に前記第２画像を表示させることを特徴とするプログラムである。

なお、上記プログラムは、インターネットなどの通信ネットワークを介して提供されてもよいし、フレキシブルディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭなどのコンピュータ読み取り可能な各種情報記録媒体に格納されて提供されてもよい。

また、上記プログラムは、コンピュータ読み取り可能な情報記録媒体に記憶されてもよい。情報記録媒体としては、例えば、磁気テープ、フレキシブルディスク、ハードディスク、ＣＤ−ＲＯＭ、ＭＯ、ＭＤ、ＤＶＤ−ＲＯＭ、ＩＣカードなどを用いてもよい。

請求項１及び５の発明によれば、ユーザが画面に軌跡を入力する際に操作する操作部材を操作しなくても、文書表示状態と手書き状態とを切り替えることができる。

請求項２の発明によれば、ユーザが追記を意図して軌跡を入力していないにもかからわず画像に追記がなされる事態の発生が、ユーザが入力した軌跡が軌跡条件を満たすかの判断に応じた制御を行わないものと比較して、抑制される。

請求項３の発明によれば、本構成を有しない場合に比して、上記事態の発生がより抑制される。

請求項４の発明によれば、画像の表示の基礎となっているデータのデータ形式によらず、上記事態の発生が抑制される。

会議システムの一例を示す図である。 本発明の実施形態に係る情報処理装置の構成を示す図である。 画面領域の一例を示す図である。 文書一覧表示画面の一例を示す図である。 第１画面制御用画面の一例を示す図である。 第１画面に表示されている文書画像の一例を示す図である。 会議システムの使用方法を説明するための図である。 第１画面に表示されている文書画像の一例を示す図である。 第１画面の表示内容を示す図である。 第１画面の表示内容を示す図である。 情報処理装置にて実行される処理の一例を示すフロー図である。 情報処理装置にて実行される処理の一例を示すフロー図である。 条件テーブルの一例を示す図である。

以下、本発明の実施形態の例について図面に基づき詳細に説明する。

図１は、会議システム２の一例を示す図である。会議システム２は、例えば会議室に設置される。同図に示すように、会議システム２は、情報処理装置４と、第１ディスプレイ６と、第２ディスプレイ８と、を含む。情報処理装置４は、第１ディスプレイ６と第２ディスプレイ８とにデータ授受可能に接続されている。なお、ユーザ１０は、会議において発表を行う発表者である。

第１ディスプレイ６には、ペントレイ１２が配備されている。ペントレイ１２には、３本の電子ペン１４ａ，１４ｂ，１４ｃが収容される。ペントレイ１２は、感圧センサを内蔵しており、感圧センサにより各電子ペンがペントレイ１２に収容されている状態にあるか否かが検知されるようになっている。

なお、以下、電子ペン１４ａのことを、黒ペン１４ａと呼び、電子ペン１４ｂのことを、赤ペン１４ｂと呼び、電子ペン１４ｃのことを、消しゴムペン１４ｃと呼ぶ。また、電子ペン１４ａ，１４ｂ，１４ｃを総称して、電子ペン１４と記載する場合がある。

また、第１ディスプレイ６には、タッチパネルが配備されている。タッチパネルにより、ユーザ１０が押圧した第１画面１６上の位置が検知される。

第２ディスプレイ８には、タッチパネルが配備されている。タッチパネルにより、ユーザ１０が押圧した第２画面１８上の位置が検知される。

図２は、本発明の実施形態に係る情報処理装置４の構成を示す図である。同図に示すように、情報処理装置４は、制御部２０と、記憶部２２と、画像処理部２３と、ハードディスク２４と、操作入力部２６と、Ｉ／Ｏインタフェース２８と、を含む。

制御部２０は、例えばマイクロプロセッサである。制御部２０は、記憶部２２に記憶されるプログラムに従って情報処理を実行する。

記憶部２２は、例えばＲＡＭである。記憶部２２には上記プログラムとして、会議制御プログラム（後述）、文書表示アプリケーションのプログラム（後述）、及び手書き編集アプリケーションのプログラム（後述）が格納される。これらのプログラムは、ＤＶＤ（登録商標）−ＲＯＭ等のコンピュータ読取可能な情報記憶媒体から読み出されて記憶部２２に格納されてもよいし、ネットワーク等の通信網から供給されて記憶部２２に格納されてもよい。

また、記憶部２２には情報処理の過程で必要となる各種データも格納される。

画像処理部２３はＶＲＡＭを含み、制御部２０の指示に従ってＶＲＡＭ上に第１画面１６の画像や第２画面１８の画像を描画し、映像信号を第１ディスプレイ６や第２ディスプレイ８に供給する。

ハードディスク２４は、各種データを記憶している。本実施形態の場合、ハードディスク２４は、複数の文書を記憶している。ここでは、ハードディスク２４には、文書Ｘ、文書Ｙ、文書Ｚ、及び文書Ｗを含む複数の文書が格納されている。文書Ｘは、文書表示アプリケーションＸで用いられるデータ形式Ｘを有するデータであり、文書Ｙは、文書表示アプリケーションＹで用いられるデータ形式Ｙを有するデータであり、文書Ｚは、文書表示アプリケーションＺで用いられるデータ形式Ｚを有するデータであり、文書Ｗは、文書表示アプリケーションＷで用いられるデータ形式Ｗを有するデータである。ここで、文書表示アプリケーションとは、文書の表示を制御する機能を実現するためのプログラムである。文書表示アプリケーションにより、表示されている文書に関する操作に応じて当該文書の拡大・縮小、スクロールや表示対象ページの変更等が行われる。

なお、ハードディスク２４は、情報処理装置４の外部に備えられてもよい。また、ハードディスク２４には、文書以外のデータも格納される（後述）。

操作入力部２６は、例えばキーボードやマウスである。

Ｉ／Ｏインタフェース２８は、第１ディスプレイ６及び第２ディスプレイ８とデータ授受を行うためのインタフェースである。Ｉ／Ｏインタフェース２８は、第１画面１６に表示すべき画像を示す映像信号を第１ディスプレイ６に出力したり、第２画面１８に表示すべき画像を示す映像信号を第２ディスプレイ８に出力したりする。また、Ｉ／Ｏインタフェース２８（状態取得手段）は、ユーザ１０が押圧した第１画面１６上の位置を示す情報や各電子ペン１４の状態を示す情報（情報）を第１ディスプレイ６から受け取り、制御部２０に出力する。また、Ｉ／Ｏインタフェース２８は、ユーザ１０が押圧した第２画面１８上の位置を示す情報を第２ディスプレイ８から受け取り、制御部２０に出力する。

この情報処理装置４には、画面領域３０が内部的に設定されている。図３は、画面領域３０の一例を示す図である。同図に示すように、画面領域３０には、第１画面領域３２と、第２画面領域３４と、が含まれる。第１画面領域３２は、第１画面１６に対応し、第２画面領域３４は、第２画面１８に対応する。ユーザは、第１画面１６又は第２画面１８を押圧してなぞることにより、画面領域３０内に軌跡を入力する。

また、画面領域３０には、Ｘ軸とＹ軸とが設定されている。制御部２０（軌跡取得手段）は、会議制御プログラムに従い、第１ディスプレイ６や第２ディスプレイ８から供給される位置情報に基づいて、ユーザが入力した軌跡を取得する。より詳しくは、制御部２０は、ユーザ１０が入力した軌跡を示す位置座標列を取得する。

会議システム２では、制御部２０が、会議制御プログラムに従って、第２画面１８に文書一覧表示画面を表示させるようになっている。文書一覧表示画面は、ハードディスク２４に格納されている文書のうちから第１画面１６に表示させたい文書をユーザ１０が選択するための画面である。図４Ａは、文書一覧表示画面の一例を示す。同図に示すように、文書一覧表示画面には、文書の縮小画像が表示されている。

ユーザが縮小画像を選択して所望の文書を指定すると、制御部２０は、会議制御プログラムに従い、指定された文書に対応する文書表示アプリケーションを起動する。そして、制御部２０（第１表示制御手段）は、起動された文書表示アプリケーションに従い、指定された文書を開き、該文書の文書画像（第１画像）を第１画面１６に表示させる。

例えば、ユーザが文書Ｘの縮小画像を選択して文書Ｘを指定すると、制御部２０は、会議制御プログラムに従って指定された文書Ｘに対応する文書表示アプリケーションＸを起動する。そして、制御部２０は、文書表示アプリケーションＸに従って文書Ｘを開き、文書Ｘの文書画像を第１画面１６に表示させる。例えば、一ページ目の文書画像が第１画面１６に表示される。図５は、第１画面１６に表示されている文書画像の一例を示し、より詳しくは、第１画面１６に表示されている一ページ目の文書画像の一例を示す。なお、符号３９ａ，３９ｂにより指し示されるボタンは、第１ページ送りボタン３９ａ，３９ｂを示す。以下、第１ページ送りボタン３９ａ，３９ｂを総称して、第１ページ送りボタン３９と記載する場合がある。

なお、制御部２０は、文書が指定されると、文書表示アプリケーションＸを起動するだけでなく、会議制御プログラムに従って、第２画面１８に第１画面制御用画面を表示するようになっている。図４Ｂは、第１画面制御用画面の一例を示す図である。同図に示すように、第１画面制御用画面の履歴表示領域３８には、現時点までに開かれた文書の縮小画像の一覧が表示される。また、第１画面制御用画面には、第２ページ送りボタン３６ａ、３６ｂ、文書一覧ボタン３７が表示される。以下、第２ページ送りボタン３６ａ、３６ｂを総称して、第２ページ送りボタン３６と記載する場合がある。

会議システム２では、ユーザ１０は現時点までに開かれた文書のうちからも第１画面１６に表示させたい文書を選択できるようになっている。すなわち、ユーザ１０が履歴表示領域３８に表示された縮小画像の一つを選択して文書を指定した場合にも、制御部２０は、会議制御プログラムに従って、指定された文書に対応する文書表示アプリケーションを起動する。そして、制御部２０（第１表示制御手段）は、文書表示アプリケーションに従って指定された文書を開き、当該文書の文書画像を第１画面１６に表示させる。なお、ユーザ１０により文書一覧ボタン３７が押下された場合、上記文書一覧表示画面が再び第２画面１８に表示される。

第２ページ送りボタン３６の意義については後述する。

以上のようにして、ユーザ１０は、文書一覧表示画面又は第１画面制御用画面において、第１画面１６に表示させたい文書を指定することにより、当該文書の文書表示アプリケーションを起動させる。文書表示アプリケーションを起動させた上で、ユーザ１０は発表を開始することとなる。

以下、ユーザ１０が発表を行う際の会議システム２の基本的な使用方法について図６を参照しながら説明する。

[Ｓ１０１]
会議の進行に従い、ユーザ１０は、軌跡を入力して、文書表示アプリケーションに関する操作を行う。例えば、ユーザ１０は、軌跡を入力してページ送り操作を行い、ページ送りを指示する（Ｓ１０１）。具体的には、ユーザ１０は、第1画面１６の第１ページ送りボタン３９（図５参照）付近を指でなぞり軌跡を入力することによってページ送り操作を行う。

文書表示アプリケーションが起動されている場合、制御部２０（第１更新手段）は、文書表示アプリケーションに従い、入力された軌跡の位置座標列に基づき第１画面１６に表示される文書画像を更新するようになっている。例えば、上述のようにページ送り操作が行われた場合、制御部２０は、入力された軌跡（詳しくは、位置座標列）からページ送り操作がなされたことを検知し、他のページ（例えば、二ページ目）の文書画像を描画する。図７は、第１画面１６に表示されている二ページ目の文書画像の一例を示す。

なお、ページ送り操作は、以上の操作だけに限らず、文書表示アプリケーションによって様々である。例えば、文書表示アプリケーションＹでは、ユーザ１０は、第１画面１６に指先を当てて指先を水平方向に移動させることで、ページ送り操作を行う。また、例えば、文書表示アプリケーションＺでは、ユーザ１０は、第１画面１６に指先を当てて指先を垂直方向に所定距離以上移動させることで、ページ送り操作を行う。また、例えば、文書表示アプリケーションＷでは、ユーザ１０は、第１画面１６に指先を当てて所望の方向へ素早く移動させることで、表示範囲を移動させる操作を行う。また、文書表示アプリケーションの一つであるＷｅｂブラウザでは、表示しているＷｅｂページ上のリンクやボタンを押し下げることでページ移動などが行われる。

[Ｓ１０２]
会議の進行に応じて、ユーザは、文書画像に追記を行うべく、ペントレイ１２からいずれかの電子ペン１４を取り上げる。例えば、ユーザは、黒ペン１４ａをペントレイ１２から取り上げる（Ｓ１０２）。

制御部２０は、会議制御プログラムに従って、いずれかの電子ペン１４がペントレイ１２から取り上げられたことを第１ディスプレイ６から供給される情報から検知するようになっている。すなわち、制御部２０は、第１ディスプレイ６から取得した情報に基づき、すべての電子ペン１４がペントレイ１２に収容されている状態から、いずれかの電子ペン１４がペントレイ１２に収容されていない状態に変化したことを検知するようになっている。制御部２０は、いずれかの電子ペン１４がペントレイ１２から取り上げられたことを検知すると、会議制御プログラムに従って、第１画面１６に表示されている画像の取り込み（キャプチャ）を行うとともに、手書き編集アプリケーションを起動する。手書き編集アプリケーションが起動されている間、制御部２０（第２表示制御手段）は、文書表示アプリケーションに従って文書画像を第１画面１６に表示させるのではなく、手書き編集アプリケーションに従って、キャプチャした画像（以下、キャプチャ画像と記載する）に基づく表示対象画像（第２画像）を第１画面１６に表示させる。つまり、第１画面１６の表示内容を制御するアプリケーションが、文書表示アプリケーションから手書き編集アプリケーションに切り替わる。ここで、キャプチャ画像及び表示対象画像はビットマップ画像である。なお、この段階では、制御部２０は、表示対象画像として、キャプチャ画像自身を第１画面１６に表示させる。

[Ｓ１０３]
電子ペン１４をペントレイ１２から取り上げたユーザ１０は、電子ペン１４を用いて追記を行う。すなわち、ユーザ１０は、電子ペン１４の先を第１画面１６に当てて移動させることにより、手書き入力を行う（Ｓ１０３）。

手書き編集アプリケーションが起動している場合、制御部２０（第２更新手段）は、手書き編集アプリケーションに従い、入力された軌跡に基づいて表示対象画像を更新するようになっている。すなわち、制御部２０は、入力された軌跡を示す軌跡画像を表示対象画像に描画するようになっている。その結果、ユーザ１０が電子ペンで押圧したところに、軌跡画像が表示される。黒ペン１４ａが用いられた場合、黒色の軌跡画像が表示され、赤ペン１４ｂが用いられた場合、赤色の軌跡画像が表示される。図８は、このときの第１画面１６の表示内容を示す。

さらに追記を行う場合、ユーザ１０は、次に追記を行う位置に電子ペン１４で軌跡を入力する。すると、今回入力された軌跡を示す軌跡画像が描画され、その結果、当該軌跡画像が第１画面１６に表示される。図９は、このときの第１画面１６の表示内容を示す。

なお、２回目の追記内容が誤りである場合、ユーザ１０は、誤った追記を消去するための操作（以下、消去操作）を行うことになる。具体的には、ユーザ１０は、消しゴムペン１４ｃをペントレイ１２から取り上げ、消しゴムペン１４ｃの先で、消去したい軌跡画像の付近をこする。この場合、制御部２０（消去手段）は、手書き編集アプリケーションに従って、表示対象画像に含まれる軌跡画像の少なくとも一部を消去する。こうすることにより、第１画面１６から、消しゴムペン１４ｃの先でこすられた軌跡画像の部分が消去される。

[Ｓ１０４]
二ページ目への追記が完了したら、ユーザ１０は、他のページや他の文書を第１画面１６に表示させるために、文書表示アプリケーションを起動させる（Ｓ１０４）。具体的には、ユーザ１０は、第２画面１８に表示される第２ページ送りボタン３６（図４Ｂ参照）を押下する操作（所与の操作）を行ったり、第２画面１８に表示される他の文書の縮小画像を選択する操作（所与の操作）を行ったりする。

第２ページ送りボタン３６の押下や他の文書の縮小画像の選択が行われると、制御部２０は、手書き編集アプリケーションに従って、表示対象画像をハードディスク２４に保存する。こうして、ユーザ１０によって追記がなされた文書の画像を再現するための表示対象画像が保存される。ハードディスク２４に保存される表示対象画像により、ユーザ１０によって追記がなされた文書の画像が再現される。

そして、制御部２０（第２切替制御手段）は、文書表示アプリケーションを起動する。これにより、第１画面１６の表示内容を制御するアプリケーションが、手書き編集アプリケーションから文書表示アプリケーションに切り替わる。その結果、制御部２０は、文書表示アプリケーションに従って、他のページの文書画像や他の文書の文書画像を第１画面１６に表示させる。

ところで、上述のように、すべての電子ペン１４がペントレイ１２に収容されている状態から、いずれかの電子ペン１４がペントレイ１２に収容されていない状態に変化した場合に、手書き編集アプリケーションが起動されるようになっている。そのため、例えば、ユーザ１０が次のＳ１０１のステップにおいていずれかの電子ペン１４を持ったままページ送り操作を行った場合、ユーザ１０は、手書き編集アプリケーションを起動させて追記を行うために、一旦電子ペン１４をペントレイ１２に収納してから電子ペン１４をペントレイ１２から取り上げる必要がある。この点、この情報処理装置４では、ユーザ１０が電子ペン１４を持ったままページ送り操作を行った場合に、そのまま電子ペン１４で第１画面１６に軌跡を入力しても、手書き編集アプリケーションが起動されるようになっている。以下、この点について説明する。

図１０は、情報処理装置４にて実行される処理を示すフロー図である。図１０に示す処理は、文書表示アプリケーションが起動している場合において軌跡（以下、軌跡Ｐと記載する）の位置座標列が取得された場合に実行される。

まず、制御部２０は、会議制御プログラムに従って、第１ディスプレイ６から供給される情報が示す状態が、いずれかの電子ペン１４がペントレイ１２に収容されていない状態（基準状態）であるか否かを判定する（Ｓ２０１）。Ｓ２０１のステップにより、以前ユーザ１０が電子ペン１４を持ったまま文書表示アプリケーションに関する操作（例えば、ページ送り操作）を行ったか否かが判定される。

すべての電子ペン１４がペントレイ１２に収容されている場合（Ｓ２０１のＮ）、文書表示アプリケーションに関する操作（例えば、ページ送り操作）が行われたと考えられるので、制御部２０（第１更新手段）は、文書表示アプリケーションに従い、文書画像（第１画像）を更新する（Ｓ２０５）。例えば、次のページの文書画像を第１画面１６に表示させる。

一方、いずれかの電子ペン１４がペントレイ１２に収容されていない場合（Ｓ２０１のＹ）、制御部２０（画像取得手段）は、第１画面１６に表示されている画像を取り込むことにより、ビットマップ画像である上記キャプチャ画像を取得する（Ｓ２０２）。

そして、制御部２０（第１切替制御手段）は、手書き編集アプリケーションを起動させる（Ｓ２０３）。そして、制御部２０（第２表示制御手段）は、手書き編集アプリケーションに従って、軌跡Ｐを示す軌跡画像を上記キャプチャ画像に描画してなるビットマップ画像を生成し、当該ビットマップ画像を表示対象画像として第１画面１６に表示させる（Ｓ２０４）。例えば、黒ペン１４ａがペントレイ１２に収容されていない場合、軌跡画像は黒色となり、赤ペン１４ｂがペントレイ１２に収容されていない場合、軌跡画像は赤色となる。なお、本実施形態では、消しゴムペン１４ｃがペントレイ１２に収容されていない場合、Ｓ２０２以降のステップが省略される。

図１０に示す処理が行われる結果、ユーザ１０が電子ペン１４を持ったままページ送り操作を行った場合に、そのまま電子ペン１４で第１画面１６に軌跡を入力しても、手書き編集アプリケーションが起動されるようになる。また、ハードディスク２４に保存される表示対象画像によって、ユーザ１０により追記がなされた文書の画像が再現されるようにもなる。

なお、本発明の実施形態は上記実施形態だけに限らない。

例えば、制御部２０は、いずれかの電子ペン１４がペントレイ１２に収容されていない場合に（Ｓ２０１のＹ）、Ｓ２０２のステップを実行する前に、ユーザ１０が追記を意図して軌跡Ｐを入力したか否かを判別するためのステップＳ３０１（後述の図１１参照）を実行するようにしてもよい。以下、この態様について図１１を参照しながら説明する。

この態様では、制御部２０は、いずれかの電子ペン１４がペントレイ１２に収容されていない場合に（Ｓ２０１のＹ）、Ｓ３０１のステップに進む。そして、制御部２０は、Ｓ３０１のステップにおいて、会議制御プログラムに従って、以下に説明する処理を実行する。

すなわち、制御部２０は、まず、ハードディスク２４（条件記憶手段）から条件テーブルを読み出す。図１２は、条件テーブルを示す図である。図１２に示すように、条件テーブルでは、現在開かれている文書（図１２の文書Ｐ）のデータ形式に関する条件と、軌跡条件と、が関連づけられている。同図に示すように、軌跡条件は、現在開かれている文書Ｐのデータ形式に応じて変化するようになっている。

軌跡条件Ａは、軌跡Ｐの位置（範囲）に関する条件であり、文書表示アプリケーションＸに対応する。軌跡Ｐが予め設定された範囲内にある場合、軌跡Ｐは軌跡条件Ａを満足することになる。

軌跡条件Ｂは、文書表示アプリケーションＹに対応する。上述のように文書表示アプリケーションＹの文書では指先を水平方向に移動させることでページ送り操作が行なわれることから、軌跡条件Ｂは、軌跡Ｐの少なくとも一部の基準線との角度に関する条件として設定されている。例えば、軌跡Ｐ（位置座標列）の隣接する二点間を結ぶ直線の基準線（ここでは、Ｘ軸）との角度の平均角度が基準角度（例えば、５度）以上である場合に、軌跡Ｐは軌跡条件Ｂを満足することとなる。

軌跡条件Ｃは、文書表示アプリケーションＺに対応する。上述のように、文書表示アプリケーションＺの文書では指先を垂直方向に所定距離以上移動させることでページ送り操作が行われることから、軌跡条件Ｃは、軌跡ＰのＸ軸（図３参照）方向の長さに関する条件として設定されている。軌跡ＰのＸ軸方向の長さが基準値より小さい場合、軌跡Ｐは軌跡条件Ｃを満足することとなる。

また、軌跡条件Ｄは、文書表示アプリケーションＷに対応する。文書表示アプリケーションＷの文書では第１画面１６に指先を当てて素早く移動させることでページ送り操作が行われることから、軌跡条件Ｄは、軌跡Ｐの入力速度に関する条件として設定されている。軌跡Ｐ（位置座標列）の隣接する二点間の距離の平均が基準値以下である場合に、軌跡Ｐは軌跡条件Ｄを満足することとなる。このように軌跡条件Ｄが設定されているので、ユーザが文字等の下に下線を引くことを意図して軌跡Ｐをゆっくり入力した場合と、ユーザがページ送り操作を行うために素早く軌跡Ｐを入力した場合と、が区別される。

なお、以下、軌跡条件Ａ〜軌跡条件Ｄを総称して、「軌跡条件」と記載する場合がある。

条件テーブルを読み出すと、制御部２０は、会議制御プログラムに従い、現在開かれている文書が満足する上記条件に関連づけられた軌跡条件を、軌跡Ｐが満足するか否かを判定する。すなわち、ユーザ１０が追記を意図して軌跡Ｐを入力したか否かを判定する。

軌跡Ｐが軌跡条件を満足しない場合（Ｓ３０１のＮ）、制御部２０は、Ｓ２０５のステップに進み、軌跡Ｐが軌跡条件を満足する場合（Ｓ３０１のＹ）、制御部２０は、Ｓ２０２以降のステップに進むこととなる。

なお、Ｓ３０１のステップが行われても、ユーザ１０が追記を意図して軌跡Ｐを入力していないにもかかわらず追記が行われる場合がある。このような場合、軌跡条件に問題があると考えられる。

そこで、制御部２０（条件更新手段）は、文書表示アプリケーションが起動しているときに軌跡条件を満足する軌跡が取得された後、所定期間内に当該軌跡を示す軌跡画像が消去操作によって消去された場合に、当該文書表示アプリケーションに対応する軌跡条件を更新するようにしてもよい。以下、この点につき説明する。

この場合、制御部２０は、Ｓ３０１のステップを実行するだけでなく、Ｓ２０４のステップの直後、会議制御プログラムに従って、軌跡Ｐの軌跡画像に現在の時刻を関連づける。また、Ｓ２０３のステップで手書き編集アプリケーションが起動される前に起動していた文書表示アプリケーションの識別情報も、軌跡Ｐの軌跡画像に関連づける。こうした上で、制御部２０は、手書き編集アプリケーションに従って軌跡Ｐの軌跡画像の少なくとも一部を消去した場合、会議制御プログラムに従って、軌跡Ｐの軌跡画像に関連づけられた時刻からの経過時間が所定時間以下であるか否かを判定する。そして、上記経過時間が所定時間以下である場合、制御部２０は、会議制御プログラムに従って、軌跡Ｐの軌跡画像に関連づけられた文書表示アプリケーションに対応する軌跡条件を更新する。これにより、軌跡条件が厳しく設定し直されることになる。

また、例えば、以上では、文書表示アプリケーションが起動しているときに第１ページ送りボタン３９を押下によってページ送りが行われる場合について述べたが、第２ページ送りボタン３６の押下によりページ送りが行われてもよい。この場合、会議制御プログラムよって、ページ送り（文書画像の更新）の指示が、文書表示アプリケーションに対してなされる。ここで、ページ送りの指示は文書表示アプリケーションのＡＰＩ（Ａｐｐｌｉｃａｔｉｏｎ Ｐｒｏｇｒａｍ Ｉｎｔｅｒｆａｃｅ）を通じてなされる。その結果、制御部２０が、文書表示アプリケーションに従いページ送りを行うこととなる。なお、第２ページ送りボタン３６は、文書表示アプリケーションがＡＰＩを通じてのページ送りに対応している場合にのみ有効である。例えば、文書表示アプリケーションがＡＰＩを通じてのページ送りに対応していない場合、その旨がユーザ１０に示唆されるべく、第２ページ送りボタン３６が薄く表示されてもよい。

２ 会議システム、４ 情報処理装置、６ 第１ディスプレイ、８ 第２ディスプレイ、１０ ユーザ、１２ ペントレイ、１４ａ 黒ペン、１４ｂ 赤ペン、１４ｃ 消しゴムペン、１６ 第１画面、１８ 第２画面、２０ 制御部、２２ 記憶部、２３ 画像処理部、２４ ハードディスク、２６ 操作入力部、２８ Ｉ／Ｏインタフェース、３０ 画面領域、３２ 第１画面領域、３４ 第２画面領域、３６ａ、３６ｂ 第２ページ送りボタン、３７ 文書一覧ボタン、３８ 履歴表示領域、３９ａ，３９ｂ 第１ページ送りボタン。

Claims (5)

1. 第１画像を画面に表示させる第１表示制御手段と、
   第２画像を前記画面に表示させる第２表示制御手段と、
   前記画面にユーザが入力した軌跡を取得する軌跡取得手段と、
   ユーザが前記画面に軌跡を入力する際に操作する操作部材に関する状態を示す情報を取得する状態取得手段と、
   前記第１表示制御手段が前記第１画像を表示させているときに、前記画面に表示される前記第１画像を更新する第１更新手段と、
   前記第１表示制御手段が前記第１画像を表示させているときに前記軌跡取得手段により軌跡が取得された場合に、前記画面に表示されている画像である画面画像を取得する画像取得手段と、
   前記第１表示制御手段が前記第１画像を表示させているときに前記軌跡取得手段により軌跡が取得された場合に、前記画面の表示を、前記画面画像に当該軌跡を示す軌跡画像を描画してなる画像である前記第２画像の前記第２表示制御手段による表示に切り替える制御を行う第１切替制御手段と、
   前記第２表示制御手段が前記第２画像を表示させているときに前記軌跡取得手段により軌跡が取得された場合に、前記第２画像を、当該第２画像に当該軌跡を示す軌跡画像を描画してなる画像に更新する第２更新手段と、
   前記第２表示制御手段が前記第２画像を表示させているときに所与の操作が行われた場合に、前記画面の表示を前記第１表示制御手段による前記第１画像の表示に切り替える制御を行う第２切替制御手段と、
   前記第２表示制御手段が前記第２画像を表示させているときに前記所与の操作が行われた場合に、前記第２画像を記憶手段に記憶させる手段と、
   を含み、
   前記画像取得手段は、
   前記軌跡取得手段により軌跡が取得された場合において、前記状態取得手段により取得される前記情報が示す状態が予め定められた基準状態である場合に、前記画面画像を取得し、
   前記第２切替制御手段は、
   前記軌跡取得手段により軌跡が取得された場合において、前記状態取得手段により取得される前記情報が示す状態が前記基準状態である場合に、前記第２表示制御手段に前記第２画像を表示させること、
   を特徴とする情報処理装置。
2. 前記画像取得手段は、
   前記軌跡取得手段により取得された軌跡が軌跡条件を満足し、且つ、前記情報が示す状態が前記基準状態である場合に、前記画面画像を取得し、
   前記第２切替制御手段は、
   前記軌跡取得手段により取得された軌跡が軌跡条件を満足し、且つ、前記情報が示す状態が前記基準状態である場合に、前記第２表示制御手段に前記第２画像を表示させる前記画面に表示させ、
   前記軌跡条件は、前記軌跡取得手段により取得された軌跡の長さに関する条件、当該軌跡の位置に関する条件、当該軌跡の入力速度に関する条件、又は当該軌跡の少なくとも一部の基準線との角度に関する条件であること、
   を特徴とする請求項１に記載の情報処理装置。
3. 前記第２表示制御手段が前記第２画像を表示させているときにユーザによって消去操作が行われた場合に、前記第２画像に含まれる軌跡画像の少なくとも一部を消去する消去手段と、
   前記軌跡条件を満足する軌跡が前記第１表示制御手段が前記第１画像を表示させているときに取得されてから所定期間内に当該軌跡を示す軌跡画像の少なくとも一部が消去された場合に、前記軌跡条件を更新する条件更新手段と、をさらに含むこと、
   を特徴とする請求項２に記載の情報処理装置。
4. 前記軌跡条件は、前記第１画像の基礎となっているデータのデータ形式に応じて変化する条件であること、
   を特徴とする請求項２に記載の情報処理装置。
5. 画面にユーザが入力した軌跡を取得する軌跡取得手段、
   ユーザが前記画面に軌跡を入力する際に操作する操作部材に関する状態を示す情報を取得する状態取得手段、
   第１画像を前記画面に表示させる第１表示制御手段が前記第１画像を表示させているときに、前記画面に表示される前記第１画像を更新する第１更新手段、
   前記第１表示制御手段が前記第１画像を表示させているときに前記軌跡取得手段により軌跡が取得された場合に、前記画面に表示されている画像である画面画像を取得する画像取得手段、
   前記第１表示制御手段が前記第１画像を表示させているときに前記軌跡取得手段により軌跡が取得された場合に、前記画面の表示を、前記画面画像に当該軌跡を示す軌跡画像を描画してなる画像である第２画像の第２表示制御手段による表示に切り替える制御を行う第１切替制御手段、
   前記第２表示制御手段が前記第２画像を表示させているときに前記軌跡取得手段により軌跡が取得された場合に、前記第２画像を、当該第２画像に当該軌跡を示す軌跡画像を描画してなる画像に更新する第２更新手段、
   前記第２表示制御手段が前記第２画像を表示させているときに所与の操作が行われた場合に、前記画面の表示を、前記第１表示制御手段による前記第１画像の表示に切り替える制御を行う第２切替制御手段、
   前記第２表示制御手段が前記第２画像を表示させているときに前記所与の操作が行われた場合に、前記第２画像を記憶手段に記憶させる手段、
   としてコンピュータを機能させ、
   前記画像取得手段は、
   前記軌跡取得手段により軌跡が取得された場合において、前記状態取得手段により取得される前記情報が示す状態が予め定められた基準状態である場合に、前記画面画像を取得し、
   前記第２切替制御手段は、
   前記軌跡取得手段により軌跡が取得された場合において、前記状態取得手段により取得される前記情報が示す状態が前記基準状態である場合に、前記第２表示制御手段に前記第２画像を表示させること、
   を特徴とするプログラム。

Images