JP5768777B2 - 手書き入力システム、入力内容管理サーバ、入力内容管理プログラム - Google Patents

Description

本発明は、複数台の各手書き入力装置が受け付けた手書き入力に係る情報を管理する手書き入力システム、入力内容管理サーバ、入力内容管理プログラムに関する。

電子ペーパのような表示装置を複数台並べて配置し、これらの表示装置が備えるディスプレイを使用して１つの画像を大きく表示する技術が提案されている（特許文献１参照）。この方法では、複数台の表示装置の表示内容を連携させることで、表示領域を拡張し、１つの画像を大きく表示することができる（図７参照）。

また、複数台の表示装置が表示する表示内容を連携させた際に、そのうちの１台が、連携している複数台の表示装置全体の表示を制御する技術が提案されている（特許文献２参照）。

特開２０１１−４８４３１号公報 特開２０１１−１１４３５２号公報 特開２０１０−００３２１８号公報

ところで、表示装置ではなく、ペンタブレットのような手書き入力装置を複数台並置して、大きな手書き入力面を形成して、会議などで使用することが考えられる。この場合、各手書き入力装置が受け付けた手書き入力（追記、修正等）の内容をそれぞれの手書き入力装置が保持していると、たとえば、その手書き入力の内容を１つのデータ（たとえば１枚の画像データ）として管理することができず、他装置での表示や、印刷出力等が不便になる。

本発明は、上記の問題を解決するものであり、隣接配置された複数台の各手書き入力装置が受け付けた手書き入力に係る情報を一括管理する手書き入力システム、入力内容管理サーバ、及び入力内容管理プログラムを提供することを目的としている。

かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。

［１］手書き入力を受け付ける入力面を備えたＮ（Ｎ＝２以上の整数）台の隣接配置される手書き入力装置と、前記手書き入力装置と通信可能に接続される情報管理部とを備え、
前記手書き入力装置は、前記入力面で受け付けた手書き入力による描画内容を示す描画データを前記情報管理部に送信し、
前記情報管理部は、前記隣接配置されたＮ台の手書き入力装置の相対位置情報を取得し、前記Ｎ台の手書き入力装置から受信した描画データを、前記相対位置情報が示す相対位置に並べて結合し、
前記手書き入力装置は、画像を表示する表示面上に前記入力面が形成された表示部をさらに備え、自装置が保有する画像を前記表示部に表示させ、前記入力面で手書き入力を受け付け、
前記情報管理部は、前記Ｎ台の手書き入力装置からそれぞれが表示する画像を取得し、該Ｎ個の画像を前記相対位置情報が示す相対位置に並べて結合し、前記結合した画像と、前記結合した描画データを関連付けて保存する
ことを特徴とする手書き入力システム。

上記発明では、隣接配置された複数台の各手書き入力装置が受け付けた手書き入力の描画内容を示す描画データを、情報管理部が取得する。また、情報管理部は、該隣接配置された複数台の手書き入力装置の相対位置情報を取得し、該複数台の手書き入力装置から取得した描画データを、該相対位置情報が示す相対位置に並べて結合する。これにより、各手書き入力装置が受け付けた手書き入力の描画内容を示す描画データの管理が容易になる。

上記発明では、隣接配置された複数の手書き入力装置がそれぞれ保有している画像をそれぞれの手書き入力装置に表示した状態で手書き入力を受け付ける。そして、各手書き入力装置で受け付けた手書き入力の内容を示す描画データを、その手書き入力装置の相対位置と同じ相対位置関係となるように並べて結合する。また、各手書き入力装置が表示していた画像を上記相対位置に並べて結合する。その後、その結合した画像と、その結合した描画データを関連付けて保存する。これにより、保存した画像と描画データを読み出して、たとえば、結合した画像の上に結合した描画データを重ね合わせて再生することができる。

［２］前記情報管理部は、前記結合した画像を一の手書き入力装置で表示可能なサイズに縮小して保存し、前記結合した描画データを前記一の手書き入力装置で表示可能なサイズに縮小して保存し、
前記縮小後の画像と描画データを、前記一の手書き入力装置の表示面に表示させる
ことを特徴とする［１］に記載の手書き入力システム。

上記発明では、隣接する複数台の手書き入力装置に表示されていた画像、および手書き入力の内容を結合し縮小して、一台の手書き入力装置に表示することができる。

［３］前記手書き入力装置は、前記入力面が１ストロークの手書き入力を受け付ける毎に、当該手書き入力による描画内容を示す描画データを前記情報管理部に送信し、
前記情報管理部は、一の手書き入力装置から受信した最新の１ストロークの描画データと、他の一の手書き入力装置から受信した最新の１ストロークの描画データとに時間的連続性がある場合は、それらのストロークを１つにグループ化して連続ストロークとし、
前記連続ストロークを、１回の戻る操作で戻す対象にする
ことを特徴とする［１］または［２］に記載の手書き入力システム。

上記発明では、ユーザが複数の手書き入力装置に跨るように線分を描いた場合、この線分は、それぞれの手書き入力装置で別々のストロークとして検出されるが、これらに時間的連続性がある場合は、それら別々に検出された複数のストロークをグループ化して１つの連続ストロークに纏める。そして、連続ストロークを、１回の戻る操作で戻す対象にする。たとえば、１回の戻る操作を受けると、直前に入力された連続ストロークの入力前に入力内容を戻す。

［４］手書き入力を受け付ける入力面と、画像を表示する表示面上に前記入力面が形成された表示部とを備えるＮ（Ｎ＝２以上の整数）台の隣接配置された各手書き入力装置から、前記入力面で受け付けた手書き入力による描画内容を示す描画データと前記表示部に表示された画像を取得する取得部と、
前記隣接配置されたＮ台の手書き入力装置の相対位置情報を取得する配置情報取得部と、
記憶部と、
前記Ｎ台の手書き入力装置から取得した描画データを、前記相対位置情報が示す相対位置に並べて結合すると共に、前記Ｎ台の手書き入力装置から取得した画像を、前記相対位置情報が示す相対位置に並べて結合する結合部と、
前記結合した描画データと前記結合した画像を関連付けて前記記憶部に保存する制御部と、
を備える
ことを特徴とする入力内容管理サーバ。
［５］前記制御部は、前記結合した描画データと前記結合した画像とを一の手書き入力装置で表示可能なサイズに縮小し、これらを関連付けて前記記憶部に保存する
ことを特徴とする［４］記載の入力内容管理サーバ。

［６］前記手書き入力装置は、１ストロークの手書き入力を受け付ける毎に、当該手書き入力による描画内容を示す描画データを送信し、
前記結合部は、一の手書き入力装置から取得した最新の１ストロークの描画データと、他の一の手書き入力装置から取得した最新の１ストロークの描画データとに時間的連続性がある場合は、それらのストロークを１つにグループ化して連続ストロークとし、前記連続ストロークを、１回の戻る操作で戻す対象にする
ことを特徴とする［４］または［５］に記載の入力内容管理サーバ。

［７］情報処理装置を、
手書き入力を受け付ける入力面と、画像を表示する表示面上に前記入力面が形成された表示部とを備えるＮ（Ｎ＝２以上の整数）台の隣接配置された各手書き入力装置から、前記入力面で受け付けた手書き入力による描画内容を示す描画データと前記表示部に表示された画像を取得する取得部、
前記隣接配置されたＮ台の手書き入力装置の相対位置情報を取得する配置情報取得部、
前記Ｎ台の手書き入力装置から取得した描画データを、前記相対位置情報が示す相対位置に並べて結合すると共に、前記Ｎ台の手書き入力装置から取得した画像を、前記相対位置情報が示す相対位置に並べて結合する結合部、
前記結合した描画データと前記結合した画像を関連付けて保存する制御部、
として機能させる
ことを特徴とする入力内容管理プログラム。
［８］前記制御部は、前記結合した描画データと前記結合した画像と一の手書き入力装置で表示可能なサイズに縮小し、これらを関連付けて保存する
ことを特徴とする［７］に記載の入力内容管理プログラム。

［９］前記手書き入力装置は、１ストロークの手書き入力を受け付ける毎に、当該手書き入力による描画内容を示す描画データを送信するものであり、
前記結合部を、一の手書き入力装置から取得した最新の１ストロークの描画データと、他の一の手書き入力装置から取得した最新の１ストロークの描画データとに時間的連続性がある場合は、それらのストロークを１つにグループ化して連続ストロークとし、前記連続ストロークを、１回の戻る操作で戻す対象にするように動作させる
ことを特徴とする［７］または［８］に記載の入力内容管理プログラム。

本発明の実施の形態に係る電子ペーパの使用方法を示す説明図である。 本発明の実施の形態に係る電子ペーパの概略構成を示すブロック図である。 電子ペーパが、外部装置から受信した表示データに基づいて画面を表示するまでの処理の流れを示す流れ図である。 手書き入力システムを構成する電子ペーパを連携モードにて連携させる際に、その配置位置を認識する様子を示す説明図である。 手書き入力システムを構成する電子ペーパを連携モードにて連携させる際に、電子ペーパ１０Ｍ（マスター機）が他のスレーブ機に識別番号を割り振る様子を示す説明図である。 連携した複数台の電子ペーパで全画面表示する為の画像を作成する際の様子を示す説明図である。 連携した複数台の電子ペーパで全画面表示を行う様子を示す説明図である。 連携モードによる連携を開始してから、全画面表示を行うまでに電子ペーパ１０Ｍ（マスター機）が行う処理の流れを示す流れ図である。 手書き入力に係る情報を管理する様子を示す説明図である。 連携した複数台の電子ペーパで、手書き入力に係る情報を管理する様子を示す説明図である。 連携中の電子ペーパ１０Ｍ（マスター機）が、各電子ペーパが受け付けた手書き入力に係る情報を管理する処理の流れを示す流れ図である。 連携中の電子ペーパ１０Ｍ（マスター機）が、各電子ペーパが受け付けた手書き入力に係る情報を、元画像と関連付けて管理する様子を示す説明図である。 連携中の電子ペーパ１０Ｍ（マスター機）が、各電子ペーパが受け付けた手書き入力に係る情報を、元画像と関連付けて管理する処理の流れを示す説明図である。 連携中の手書き入力システムが、手書きラインＬ１、手書きラインＬ２、手書きラインＬ３の手書き入力を受け付けた様子を示す説明図である。 手書きラインＬ１、手書きラインＬ２、手書きラインＬ３の入力を受け付けた際に作成、保存されたＴｅｍｐ１、Ｔｅｍｐ２、Ｔｅｍｐ３を示す説明図である。 手書きラインＬ１が入力されてから、暫定画像が作成されるまでの流れを示す説明図である。 手書き入力から、暫定画像を作成し、保存する処理の流れを示す流れ図である。 態様例３において、連携した複数台の電子ペーパで、手書き入力を受け付けた際の様子を示す説明図である。 図１８の後に、各電子ペーパが表示している画像を保存する際の様子を示す説明図である。 電子ペーパの配置例を示す説明図である。

以下、図面に基づき本発明の実施の形態を説明する。

図１は、手書き入力装置としての機能を備えた複数台の電子ペーパ１０と外部端末５０を示す。各電子ペーパ１０と、外部端末５０はＬＡＮ(Local Area Network)等のネットワークで接続されている。

電子ペーパ１０は、持ち歩きが可能なＢ５サイズ程の矩形の平板形状を成した携帯端末であり、表示部３１と操作部３２を含む操作パネル３０（図２参照）を備えた、所謂、操作表示装置である。電子ペーパ１０は、他の電子ペーパ１０や外部端末５０から受信した画像、および自装置の保有する画像を表示部３１に表示する。そして、ユーザは操作パネル３０を使用して、表示部３１に表示されている画面に対する追記や、修正等の手書き入力を行うことができる。

また、本実施の形態の電子ペーパ１０は、複数台を隣接配置し、無線通信によって操作内容、および表示内容を連携させることで、表示領域、操作領域の拡張を図り、視認性と操作性を向上させることができる。たとえば、複数台の電子ペーパ１０の表示部３１の表示内容を連携させることで、１つの画像を、隣接配置した複数台の電子ペーパ１０に大きく表示することができる（図７参照）。

外部端末５０は、電子ペーパ１０の表示部３１に表示させる画像の表示データを送信する機能を備えた、所謂、ＰＣ（Personal Computer）端末である。電子ペーパ１０は外部端末５０から受信した文書等を表示し、これに対する手書き入力を受け付け、この文書と手書き入力の内容とを関連付けて外部端末５０に送信する機能を有する。たとえば、電子ペーパ１０は、外部端末５０で作成された文書に対する校正を手書きで行う、といった用途に利用される。

図２は、本発明の実施の形態に係る電子ペーパ１０の概略構成を示すブロック図である。電子ペーパ１０は、当該電子ペーパ１０の動作を統括的に制御する制御部としてのＣＰＵ(Central Processing Unit)１１を有している。ＣＰＵ１１にはバスを通じてＲＯＭ(Read Only Memory)１２と、ＲＡＭ(Random Access Memory)１３と、不揮発メモリ１４と、画像処理部１５と、無線通信部１６と、センサ１７と、手書き情報管理部１８と、時刻管理部１９と、操作パネル３０とを備えている。

ＲＯＭ１２には、起動プログラムのほか、各種のプログラムが格納されている。ＣＰＵ１１が、ＲＯＭ１２に格納されているプログラムをＲＡＭ１３にロードし、このプログラムに従って各種の処理を実行することで、電子ペーパ１０としての各機能を実現する。また、ＲＯＭ１２には、電子ペーパ１０の一連の制御をＣＰＵ１１が実行するためのプログラムが格納されている。

ＲＡＭ１３は、プログラムのロードエリアのほか、ＣＰＵ１１がプログラムを実行する際に各種のデータを一時的に格納するワークエリアとして使用される。

不揮発メモリ１４は、電源をオフにしても記憶内容が破壊されないメモリ（フラッシュメモリ）であり、各種設定情報の保存などに使用される。本実施の形態では、画像に係る表示データや、手書き入力の描画内容を示す描画データ等が保存される。表示データと描画データは、別のレイヤに保存されて管理される。表示データが保存されるレイヤを画像レイヤ、描画データが保存されるレイヤを手書きレイヤとする。画像レイヤと手書きレイヤは重ね合わせて（ビデオメモリ上で合成して）表示部３１に表示される。

画像処理部１５は、ＲＡＭ１３に格納された表示データおよび描画データから、表示部３１に表示する画像（画像レイヤと手書きレイヤとを重ね合わせた重畳画像７０（図９参照））を作成する。また、画像の拡大縮小、回転などの処理のほか、画像の分割、結合、圧縮、伸張等の処理を行う。

無線通信部１６は、ＬＡＮなどのネットワークを通じて他の電子ペーパ１０や、外部端末５０との間でデータを通信する機能を果たす。

センサ１７は、電子ペーパ１０の側面において、上下左右の異なる方向に１つずつ、計４か所に設置されており、隣に他の電子ペーパ１０が配置されているか否かを判別する。センサ１７は、複数の電子ペーパ１０を隣接配置した際に、隣り合う電子ペーパ１０のセンサ１７と対向する位置に設置されている。

たとえば、センサ１７は、センサ１７が臨む方向の中心軸から±１５度の方向にある他のセンサ１７とのみ通信可能である。実施の形態では、センサ１７は通信可能な距離が極めて短く、他のセンサ１７と接触する位の距離でなければ通信不可能であるものとする。ＣＰＵ１１は、センサ１７が他の電子ペーパ１０のセンサ１７と通信可能である場合は、そのセンサ１７が臨む方向に他の電子ペーパ１０が隣接配置されていると判断する（図４参照）。上記は一例であり、他の電子ペーパ１０が隣接配置されていることの検知は別のセンサや方法を使用してもかまわない。

操作パネル３０は、表示部３１と、操作部３２とを備えている。このうち操作部３２は、スタートボタンなどのスイッチ部３３とタッチパネル部３４とを備えている。表示部３１は、粒子移動型の電子ペーパで構成され、ＣＰＵ１１の指示に従って画像を表示する機能を果たす。なお、カラーフィルタを使用することでカラー表示にも対応可能になっている。表示部３１は縦横の行列状に画素を配列しており、所謂、ドットマトリクス型の表示装置である。

本実施の形態では、操作パネル３０が表示する表示内容（画像）の制御、操作パネル３０による操作の受け付けに関する制御はＣＰＵ１１が行う。

タッチパネル部３４は、表示部３１上に設けられている。タッチパネル部３４は、タッチペンや指などで押下された表示部３１上のタッチ位置（座標位置）を検出する。ＣＰＵ１１は、継続的に検出されるタッチ位置の変化（操作情報）から、ユーザによる追記や、修正等の手書き入力を認識する。

手書き情報管理部１８は、タッチパネル部３４から入力された手書き入力に基づいて、その手書き入力の描画内容を示す描画データを作成する。描画データは、描画データ専用の手書きレイヤに作成される。

時刻管理部１９は、電子ペーパ１０が所定の処理を行う際の時間に係る情報を管理する。たとえば、描画データを作成する際に、その描画データに係る手書き入力を受け付けた時刻に係る情報を、描画データに付与する。

まず、電子ペーパ１０が単独の一台で画像を表示する場合の動作を説明する。この動作モードを単独モードとする。図３は、単独モードで動作する電子ペーパ１０が、外部端末５０から受信した表示データに基づいて、表示部３１に画面を表示するまでの流れを示す。

まず、電子ペーパ１０が、外部端末５０から、表示データを受信する（ステップＳ１０１）。その表示データの形式がそのままで、表示可能な形式であれば（ステップＳ１０２：Ｙｅｓ）、そのまま表示データを保存する（ステップＳ１０４）。

そのままでは、表示できない形式であれば（ステップＳ１０２：Ｎｏ）、表示可能な形式の表示データに画像処理部１５で変換し（ステップＳ１０３）、その変換後の表示データを保存する（ステップＳ１０４）。ここでは、たとえば、ステップＳ１０１で受信した表示データが、文字コードや書式データで構成される文書ファイルのように、そのままでは画像としての表示が不可能な形式の表示データであれば、ＰＤＦ（Portable Document Format）ファイル等のように画像としての表示が可能なデータ（イメージデータ）に変換する。

ステップＳ１０４で保存した表示データに基づいて画像を表示部３１に表示させたら（ステップＳ１０５）、処理を終了する。

次に、複数台の電子ペーパ１０を連携させて画像を表示する場合について、各種の態様例を示して説明する。

＜態様例１＞
本実施の形態では、複数台の電子ペーパ１０の操作内容と表示内容を連携させる際には、その内の１台がマスター機（電子ペーパ１０Ｍとする）となって、そのマスター機となった電子ペーパ１０Ｍが他の電子ペーパ１０に指示等を送信する。このとき、電子ペーパ１０Ｍ（マスター機）からの指示等を受信する電子ペーパ１０をスレーブ機と呼ぶ。また、当該連携を行う場合における電子ペーパ１０の動作モードを連携モードと呼ぶものとする。

まず、連携モードを開始させる際の流れについて説明する。

ユーザは、図４に示すように、複数台の電子ペーパ１０を並べて配置（隣接配置）する。その後、ユーザは、電子ペーパ１０Ｍ（マスター機）となる電子ペーパ１０を選び、その選んだ電子ペーパ１０Ｍ（マスター機）に対して、連携モードの開始操作を行う。この開始操作を受け付けた電子ペーパ１０Ｍ（マスター機）は、他の電子ペーパ１０との通信状況、及び配置位置をチェックし、通信可能な電子ペーパ１０と通信を確立し、連携モードを開始する。本実施の形態では、複数台の電子ペーパ１０を並べて配置する際には、隙間やズレ等がないように並べるものとする。

図４は、複数台の電子ペーパ１０を隣接配置して構成された手書き入力システム５を示す。この例の手書き入力システム５は、４台の電子ペーパ１０を２行２列に配置して構成される。

図４では、ユーザが、左上に配置された電子ペーパ１０を電子ペーパ１０Ｍ（マスター機）として選択したものとする。まず、電子ペーパ１０Ｍ（マスター機）が、無線通信部１６による周囲の電子ペーパ１０ａ、１０ｂ、１０ｃとの通信状況を確認する。そして、無線通信部１６による通信が可能な電子ペーパ１０の中から、電子ペーパ１０Ｍ（マスター機）に隣接配置されている（スレーブ機として利用可能な）電子ペーパ１０ａ、１０ｂ、１０ｃの相対位置を把握する。各電子ペーパ１０は、通信が可能なセンサ１７の臨む方向に他の電子ペーパ１０が隣接配置されていると認識する。

図４では、電子ペーパ１０Ｍ（マスター機）は、自装置の下側面、および右側面に設けられているセンサ１７が、他の電子ペーパ１０と通信が可能であることによって、自装置の下、および右方向に他の電子ペーパ１０ｃ、１０ａが隣接配置されていると判断する。

次に、電子ペーパ１０Ｍ（マスター機）の下側に隣接配置された電子ペーパ１０ｃは、自装置の上側面と右側面に設けられているセンサ１７が、他の電子ペーパ１０Ｍ（マスター機）、電子ペーパ１０ｂと通信が可能であることによって、自装置の上方向と右方向に他の電子ペーパ１０Ｍ（マスター機）、電子ペーパ１０ｂが隣接配置されていると判断し、その旨（配置情報）を電子ペーパ１０Ｍ（マスター機）に送信する。また、電子ペーパ１０Ｍ（マスター機）の右方向に並んで配置された電子ペーパ１０ａは、自装置の左側面と下側面に設置されているセンサ１７が、他の電子ペーパ１０Ｍ（マスター機）、電子ペーパ１０ｂと通信が可能であることによって、自装置の左方向と下方向に他の電子ペーパ１０Ｍ（マスター機）、電子ペーパ１０ｂが隣接配置されていると判断し、その旨（配置情報）を電子ペーパ１０Ｍ（マスター機）に送信する。電子ペーパ１０Ｍ（マスター機）の斜め右下方向に配置された電子ペーパ１０ｂは、自装置の左側面と上側面に設置されているセンサ１７が、他の電子ペーパ１０ａ、電子ペーパ１０ｃと通信が可能であることによって、自装置の左方向と上方向に他の電子ペーパ１０ａ、電子ペーパ１０ｃが隣接していると判断し、その旨（配置情報）を電子ペーパ１０Ｍ（マスター機）に送信する。

これらの配置情報を受信した電子ペーパ１０Ｍ（マスター機）は、自機で判断した配置情報と、他の電子ペーパ１０から受信した配置情報に基づいて、何台の電子ペーパ１０が、どのような配置で並んでいるのかを認識する。ここでは、電子ペーパ１０Ｍ（マスター機）は、自機の下方向、右方向及び、斜め右下方向に１台ずつ、電子ペーパ１０ｃ、１０ａ、１０ｂが隣接配置されていると認識する。

なお、センサ１７が他の電子ペーパ１０のセンサ１７と通信を行う際には、電子ペーパ１０の個体識別情報を送受信する。各電子ペーパ１０は、隣接する他の電子ペーパ１０から受信した個体識別情報に基づき、その隣接配置されている電子ペーパ１０を特定する。スレーブ機は、自装置の個体識別情報と、自装置に隣接配置されている各電子ペーパの隣接方向および個体識別情報を含む配置情報を電子ペーパ１０Ｍ（マスター機）に送信する。電子ペーパ１０Ｍ（マスター機）は受信した配置情報に含まれる個体識別情報によって、自機と１つの島を成すよう隣接配置されている各電子ペーパ１０の配置（相対位置）を特定する。

電子ペーパ１０Ｍ（マスター機）は、無線通信部１６による通信が可能であっても、自機と１つの島を成す様に隣接配置されていない電子ペーパ１０とは連携を行わない。たとえば、図４に示した、１つの島をなす４台の電子ペーパ１０Ｍ（マスター機）、１０ａ、１０ｂ、１０ｃ以外に、これらから少し離れた位置に別の電子ペーパ１０（図示せず）があり、電子ペーパ１０Ｍ（マスター機）がこれと無線通信部１６で通信可能とする。この場合、この少し離れた電子ペーパ１０からも配置情報を受信するが、受信した配置情報からこの電子ペーパ１０が電子ペーパ１０Ｍ（マスター機）と１つの島を成すように隣接していないことが分かるので、この電子ペーパ１０は連携の対象に含めない。

図５は、手書き入力システム５において、電子ペーパ１０Ｍ（マスター機）が、連携を行う電子ペーパ１０の配置位置を認識した後に、スレーブ機となる各電子ペーパ１０に、識別番号を割り振る様子を示す。図５では、電子ペーパ１０Ｍ（マスター機）の右方向に隣接する電子ペーパ１０には「ＳＡ（slave A）」、斜め右下方向に隣接する電子ペーパ１０には「ＳＢ（slave B）」、下方向に隣接する電子ペーパ１０には「ＳＣ（slave
C）」の識別番号が割り振られている。

次に、１つの画像（元画像）を、連携させた４台の電子ペーパ１０の表示部３１全てを使用して大きく表示（全画面表示と呼ぶ）させる場合の流れについて説明する。まず、電子ペーパ１０Ｍ（マスター機）は、自装置が保有している表示データのうち、全画面表示させる予定の表示データの画像を、連携している電子ペーパ１０の数に合わせて分割する。

図６は、図５の配置状態で、電子ペーパ１０Ｍ（マスター機）の画像処理部１５が、表示対象に選択された元画像６０（図６（ａ）参照）を４つに分割する様子を示す。元画像６０を分割する際には、連携モードで連携させる４台の電子ペーパ１０の配置に応じた形に分割する。たとえば、図５のように２行２列に電子ペーパ１０が配置されていた場合は、分割後の画像も２行２列になるように分割する（図６（ｂ）参照）。分割によって得た分割画像のうち、元画像６０の右上部分に該当する分割画像を分割画像６１Ａ、右下部分に該当する分割画像を分割画像６１Ｂ、左下部分に該当する分割画像を分割画像６１Ｃ、左上部分に該当する分割画像を分割画像６１Ｄとする。

その後、電子ペーパ１０Ｍ（マスター機）は、各分割画像６１Ａ〜６１Ｄを、１台の電子ペーパ１０で表示可能なサイズに拡大する。拡大によって得た４つの表示データを、異なるスレーブ機に送信する。各表示データは、元画像６０における相対位置と、同じ相対位置関係に配置されている電子ペーパ１０に送信される。たとえば、右上部分にあたる表示データは、右上に配置された電子ペーパ１０ＳＡに送信される。

ここでは、元画像６０の右上部分に該当する表示データ（分割画像６１Ａを拡大した表示データ）は、連携中の電子ペーパ１０のうち、右上に配置されている電子ペーパ１０ＳＡに送信される。元画像６０の右下部分に該当する表示データ（分割画像６１Ｂを拡大した表示データ）は、連携中の電子ペーパ１０のうち、右下に配置されている電子ペーパ１０ＳＢに送信される。元画像６０の左下部分に該当する表示データ（分割画像６１Ｃを拡大した表示データ）は、連携中の電子ペーパ１０のうち、左下に配置されている電子ペーパ１０ＳＣに送信される。元画像６０の左上部分に該当する表示データ（分割画像６１Ｄを拡大した表示データ）は、連携中の電子ペーパ１０のうち、左上に配置されている電子ペーパ１０Ｍ（マスター機）が、そのまま保持する。

各スレーブ機は、電子ペーパ１０Ｍ（マスター機）から表示データを受信したら、その表示データに係る画像をそのスレーブ機の表示部３１全体に表示されるように表示する。電子ペーパ１０Ｍ（マスター機）も自機が保持する表示データに係る画像を自機の表示部３１全体に表示する。図７は、図６に示すように分割・拡大して作成した表示データに基づいて各電子ペーパ１０が画像を連携して表示した様子を示す。電子ペーパ１０Ｍ（マスター機）は拡大された分割画像６１Ｄを、電子ペーパ１０ＳＡは拡大された分割画像６１Ａを、電子ペーパ１０ＳＢは拡大された分割画像６１Ｂを、電子ペーパ１０ＳＣは拡大された分割画像６１Ｃを表示している。これにより、拡張された表示領域に、元画像６０が拡大表示される。

図８は、電子ペーパ１０Ｍ（マスター機）が連携モードを開始してから、その連携している複数台の電子ペーパ１０に１つの元画像を拡大して全画面表示させるまでの処理の流れを示す。

まず、電子ペーパ１０Ｍ（マスター機）が連携モードの開始操作を受け付けたら（ステップＳ２０１）、前述の方法で、連携が可能な隣接配置されている電子ペーパ１０の配置を１台ずつ特定する（ステップＳ２０２）。１台分の配置を特定したら、連携する電子ペーパ１０の台数のカウントを１プラスする（ステップＳ２０３）。

連携が可能な電子ペーパ１０の配置を全て特定するまで（ステップＳ２０４：Ｎｏ）、ステップＳ２０２に戻って処理を継続する。連携可能な電子ペーパ１０の配置を全て特定したら（ステップＳ２０４；Ｙｅｓ）、連携対象の複数台の電子ペーパ１０を確定する。このとき、連携を行う各電子ペーパの配置位置を示す情報（配置位置情報）を記憶する。

次に、電子ペーパ１０Ｍ（マスター機）は、全画面表示させる予定の元画像を、連携する電子ペーパの配置情報に応じて分割し（ステップＳ２０５）、その分割によって得た分割画像を拡大した表示データを作成する（ステップＳ２０６）。

分割画像を拡大して得た各表示データを、元画像内での相対位置と、同じ相対位置関係に配置されている電子ペーパ１０に送信する（ステップＳ２０７）。なお、この際に、その表示データに基づく画像の連携モードでの表示指示も送信する。電子ペーパ１０Ｍ（マスター機）が使用する表示データは不揮発メモリ１４の画像レイヤに保存する（ステップＳ２０８）。その後、電子ペーパ１０Ｍ（マスター機）は、ステップＳ２０８で画像レイヤに保存した表示データに基づく画像と、自機の手書きレイヤにある描画データに基づく画像とを重ね合わせた画像を表示部３１に表示し（ステップＳ２０９）、処理を終了する。なお、初期状態の手書きレイヤには描画データは存在しない。

なお、ステップＳ２０９にて、連携する他の電子ペーパ１０は、電子ペーパ１０Ｍ（マスター機）から送信されてきた表示データを自機の画像レイヤに保存し、この表示データに基づく画像と、自機の手書きレイヤにある描画データに基づく画像とを重ね合わせた画像を表示部３１に表示する。なお、初期状態の手書きレイヤには描画データは存在しない。これにより、分割前の画像が全画面表示される。

次に、電子ペーパ１０での手書き入力に係る情報の取り扱いについて説明する。図９は、単独モードで動作する１台の電子ペーパ１０が追記や修正等の手書き入力を受け付け、その手書き入力に係る情報の管理を行う様子を示す。

電子ペーパ１０は表示部３１に元画像６０を表示し、ユーザから元画像６０に対しての手書き入力を受け付ける。なお、元画像６０は、画像レイヤに保存され、手書き入力に基づいて作成された描画データである手書きデータ７２は手書きレイヤに保存する。手書きレイヤの内容（手書きデータ７２）は、手書き入力における１ストローク等の規定の単位の手書き入力を受け付ける度に更新される。なお、表示部３１には、画像レイヤに保存されている元画像６０の上に、手書きレイヤに保存されている手書きデータ７２を重ねた重畳画像７０が表示される。

次に、複数台の電子ペーパ１０を連携させる連携モードにおいて、各電子ペーパ１０が受け付けた手書き入力に係る情報を管理する方法について説明する。

まず、連携している電子ペーパ１０は、ユーザから手書き入力を受け付けたら、その受け付けた手書き入力に基づく描画データを手書きレイヤに作成する。この電子ペーパ１０がスレーブ機であれば、手書きレイヤに記憶されている描画データ（手書きレイヤ一面全体の描画データ）を、自装置に割り振られた識別番号を付与して（図５参照）、電子ペーパ１０Ｍ（マスター機）に送信する。連携モードにおいてそれぞれの電子ペーパ１０がそれぞれの手書きレイヤに作成した一面分の描画データを手書きレイヤ画像７３と呼ぶものとする。

図１０（ａ）は、図５の配置状態で各電子ペーパ１０（１０Ｍ、１０ＳＡ、１０ＳＢ、１０ＳＣ）が受け付けた手書き入力に基づいて作成された手書きレイヤ画像７３（７３Ａ、７３Ｂ、７３Ｃ、７３Ｄ）を示す。電子ペーパ１０Ｍ（マスター機）は手書きレイヤ画像７３Ｄを、電子ペーパ１０ＳＡは手書きレイヤ画像７３Ａを、電子ペーパ１０ＳＢは手書きレイヤ画像７３Ｂを、電子ペーパ１０ＳＣは手書きレイヤ画像７３Ｃをそれぞれ作成する。

電子ペーパ１０Ｍ（マスター機）は、各スレーブ機から受信した手書きレイヤ画像７３Ａ〜７３Ｃと、自機の保持する手書きレイヤ画像７３Ｄを、これらの手書きレイヤ画像７３Ａ〜７３Ｄを作成した各電子ペーパ１０の配置位置（相対位置）に関連付けて保存する。ここでは、図１０（ｂ）に示すように、電子ペーパ１０Ｍ（マスター機）は連携モードで動作するすべての電子ペーパ１０が作成した手書きレイヤ画像７３を保存するための記憶エリアを備えており、各電子ペーパ１０の相対位置に対応して割り当てたこの記憶エリア内の領域８０Ａ〜８０Ｄにそれぞれの電子ペーパ１０によって作成された手書きレイヤ画像７３を保存する。

各電子ペーパ１０は、１ストローク等の規定の単位の手書き入力を受け付ける度に、手書きレイヤ画像７３を更新する。スレーブ機は、更新の都度、最新の手書きレイヤ画像７３を電子ペーパ１０Ｍ（マスター機）に送信する。

電子ペーパ１０Ｍ（マスター機）は新たな手書きレイヤ画像７３を受信したら、その送信元の電子ペーパ１０に割り当てられている記録エリア内の領域８０に、この受信した手書きレイヤ画像７３を上書き保存する。

図１１は、図８の処理に続いて行われる処理であって、電子ペーパ１０Ｍ（マスター機）が手書き入力に係る情報を管理する処理の流れを示す。電子ペーパ１０Ｍ（マスター機）が手書き入力に係る情報の管理を開始したら（ステップＳ３０１）、手書き入力情報の受け付けを監視する（ステップＳ３０２；Ｎｏ）。手書き入力情報の受付けには２タイプある。１つは電子ペーパ１０Ｍ（マスター機）での手書き入力の受け付けであり、他の１つはスレーブ機からの識別番号が付与された手書きレイヤ画像７３の受信である。

前述のいずれかの方法で手書き入力情報を受け付けたら（ステップＳ３０２：Ｙｅｓ）、その手書き入力情報を作成した電子ペーパ１０を特定しその配置位置を特定する（ステップＳ３０３）。手書き入力情報として手書きレイヤ画像７３をスレーブ機から受信した場合は、この手書きレイヤ画像７３に付されている識別番号に基づいて、当該手書き入力情報を作成した電子ペーパ１０を特定する。

電子ペーパ１０Ｍ（マスター機）は、受け付けた手書き入力情報（手書きレイヤ画像７３）を記憶エリア内の該当する領域８０に上書き保存し（ステップＳ３０４）、ステップＳ３０２に戻って処理を継続する。

本処理は手書き入力を終了する操作を受け付ける時、もしくは連携モードを終了する時まで継続して行われる。なお、手書き入力を終了する場合や連携モードを終了する際にのみ、各スレーブ機から最新の手書きレイヤ画像７３を収集して記憶エリア内の領域８０に保存するように構成されてもよい。

次に、連携が解除された際（連携モードが終了するとき）に、それまでに受け付けた手書き入力の内容を確定し、保存する方法について説明する。

電子ペーパ１０Ｍ（マスター機）は、すべての手書き入力を完了する操作を受け付けた時、もしくは、連携モードが解除される時に、その時点で、記憶エリア内の領域８０に保存している複数の手書きレイヤ画像７３を１枚の画像に結合し、その結合した画像を１台の電子ペーパ１０で表示可能なサイズに縮小した結合縮小画像７４を作成する。なお、結合は、各手書きレイヤ画像７３が、その作成元の電子ペーパ１０の相対位置と同じ相対位置関係に配置されるようにして行われる。

さらに、結合縮小画像７４と、全画面表示を行っていた画像（元画像６０）を関連付けて保存する。たとえば、結合縮小画像７４を手書きレイヤの画像とし、元画像６０を画像レイヤの画像として有する複数レイヤ構造のデータとして保存する。あるいは、元画像６０の上に結合縮小画像７４を重ね合わせた合成画像として保存してもよい。図１２は、元画像６０の上に結合縮小画像７４を重ね合わせた合成画像を作成して保存する様子を示す。

図１３は、電子ペーパ１０Ｍ（マスター機）が結合縮小画像７４を作成し元画像と関連付けて保存する際の処理の流れを示す。まず、手書き入力を終了（確定）する操作の受け付け、もしくは連携モードの解除があった場合、手書き入力の内容を確定し、その内容を保存する処理を開始する（ステップＳ４０１）。電子ペーパ１０Ｍ（マスター機）は、保持する複数の手書きレイヤ画像７３を、その作成元の電子ペーパ１０の相対位置と同じ相対位置関係に並べて１枚の画像に結合する（ステップＳ４０２）。

ステップＳ４０２の結合によって得た画像を１台の電子ペーパ１０で表示可能なサイズに縮小した結合縮小画像７４を作成する（ステップＳ４０３）。そして、電子ペーパ１０Ｍ（マスター機）は、この結合縮小画像７４を、元画像６０と関連付ける（ステップＳ４０４）。関連付けでは、たとえば、結合縮小画像７４を、元画像の識別情報（ファイル名、もしくは、複数ページの画像が１つのファイルに含まれる場合はファイル名とページ番号）と対応付ける。そして、元画像に関連付けされた結合縮小画像７４を、電子ペーパ１０Ｍ（マスター機）の不揮発メモリ１４内の予め定められた保存領域に保存し（ステップＳ４０５）、処理を終了する。

なお、元画像と結合縮小画像７４とを関連付けして保存する電子ペーパ１０を、電子ペーパ１０Ｍ（マスター機）から他のスレーブ機に変更することも可能である。その場合、電子ペーパ１０Ｍ（マスター機）が図１３の処理を行った後に、関連付けした元画像と結合縮小画像７４とを、ユーザから指定された電子ペーパ１０に送信して保存させればよい。

＜態様例２＞
態様例２では、ユーザが複数の電子ペーパ１０に跨って線分を連続的に描いた場合に、それぞれの電子ペーパ１０で別々のストロークとして検出されたその跨った線分に係る描画データをグループ化し、１つの連続ストロークとして扱う。

図１４は、手書き入力システム５が連携中に受け付けた手書き入力の描画内容の一例を示す。図１４では、ユーザが連携中の電子ペーパ１０（１０Ｍ、１０ＳＡ、１０ＳＢ、１０ＳＣ）に対して複数の電子ペーパ１０に跨る３回の手書き入力を行っている。入力を行った順番にその描画内容を、手書きラインＬ１、手書きラインＬ２、手書きラインＬ３とする。

各電子ペーパ１０は、１ストロークの手書き入力を受け付ける度に、その１ストロークの手書き入力の描画データを書き込んで更新した手書きレイヤ１面分の描画データである手書きレイヤ画像７３を作成する。その際に、その手書き入力の受け付け開始時刻と受け付け終了時刻の時刻情報を手書きレイヤ画像７３に付与する。スレーブ機は１ストロークの手書き入力を受けて手書きレイヤ画像７３を作成する度にその作成した手書きレイヤ画像７３を電子ペーパ１０Ｍ（マスター機）に送信する。電子ペーパ１０Ｍ（マスター機）は、各電子ペーパ１０の相対位置に対応して割り当てた記憶エリア内の領域８０Ａ〜８０Ｄ（図１０（ｂ）参照）にそれぞれの電子ペーパ１０によって作成された手書きレイヤ画像７３を保存する。

電子ペーパ１０Ｍ（マスター機）は、複数の手書きレイヤ画像７３を受信した場合、その複数の手書きレイヤ画像７３に時間的連続性がある場合は、その複数の手書きレイヤ画像７３に係るストローク（それぞれの手書きレイヤ画像７３内の最新のストローク）が、一連の連続したストローク（連続ストローク）であると判断する。

たとえば、図１４の手書きラインＬ３は、電子ペーパ１０ＳＡ上から入力を開始し、電子ペーパ１０ＳＢ上を経由して、電子ペーパ１０ＳＣ上で入力を終了した連続ストロークの手書き入力である。手書きラインＬ３に係るストロークを受け付けた電子ペーパ１０ＳＡ、電子ペーパ１０ＳＢ、電子ペーパ１０ＳＣは、それぞれ手書きレイヤ画像７３（Ｌ３a、Ｌ３b、Ｌ３c）を作成し、電子ペーパ１０Ｍ（マスター機）に送信する。なお、手書きレイヤ画像７３の（）内はその手書きレイヤ画像７３における最新のストローク、及びそのストローク内での描画順（abcの順に示す）を表すものとする。

手書きラインＬ３に係る３つの手書きレイヤ画像７３（Ｌ３a、Ｌ３b、Ｌ３c）に付与された時間情報は以下のようになる。
・電子ペーパ１０ＳＡが作成した手書きレイヤ画像７３（Ｌ３a）
：開始時刻Ｔ０、終了時刻Ｔ１
・電子ペーパ１０ＳＢが作成した手書きレイヤ画像７３（Ｌ３b）
：開始時刻Ｔ２、終了時刻Ｔ３
・電子ペーパ１０ＳＣが作成した手書きレイヤ画像７３（Ｌ３c）
：開始時刻Ｔ４、終了時刻Ｔ５
電子ペーパ１０Ｍ（マスター機）は、電子ペーパ１０ＳＡから受信した手書きレイヤ画像７３（Ｌ３a）に付与された終了時刻Ｔ１と、電子ペーパ１０ＳＢから受信した手書きレイヤ画像７３（Ｌ３b）に付与された開始時刻Ｔ２の時間差（ここでは（Ｔ２−Ｔ１））が所定の時間内である場合は、電子ペーパ１０ＳＡから受信した手書きレイヤ画像７３（Ｌ３a）と、電子ペーパ１０ＳＢから受信した手書きレイヤ画像７３（Ｌ３b）に時間的連続性があるとし、２つの手書きレイヤ画像７３（Ｌ３a、Ｌ３b）に係る２つのストロークが、一連の連続したストロークであると判断する。

同様にして、（Ｔ４−Ｔ３）が所定の時間内である場合は、電子ペーパ１０ＳＢから受信した手書きレイヤ画像７３（Ｌ３b）と、電子ペーパ１０ＳＣから受信した手書きレイヤ画像７３（Ｌ３c）に時間的連続性があるとし、２つの手書きレイヤ画像７３（Ｌ３b、Ｌ３c）に係るストロークが、一連の連続したストロークであると判断する。また、これにより、３つの手書きレイヤ画像７３（Ｌ３a、Ｌ３b、Ｌ３c）に係るストロークが全て一連の連続したストロークであると判断する。

また、電子ペーパ１０Ｍ（マスター機）は、連続ストロークが完成したとき、もしくは、連続ストロークにならない単独のストロークを受け付ける度に、暫定画像（Temp）を作成する。暫定画像は、暫定画像の作成時に記憶エリアの領域８０（８０Ａ〜８０Ｄ）に保存されている手書きレイヤ画像７３を、その作成元の電子ペーパ１０の相対位置と同じ相対位置関係に配置した画像である。本実施の形態では、記憶エリアの領域８０とは別の領域に、暫定画像を保存する領域を３つ用意しておき、最新の３つの暫定画像を、この領域に保存する。３つの領域すべてに暫定画像が記憶されている状態でさらに新たな暫定画像を作成したときは、最も古い暫定画像を消去して、新たな暫定画像を保存する。

暫定画像が作成され、保存されるまでの流れについて概要を説明する。まず、電子ペーパ１０Ｍ（マスター機）が手書きレイヤ画像７３を受信（もしくは自装置で作成）したら、記憶エリアの領域８０にその手書きレイヤ画像７３を保存する。

その後、電子ペーパ１０Ｍ（マスター機）が新たに手書きレイヤ画像７３を受信（作成）したら、その受信した手書きレイヤ画像７３に付与されている開始時刻と、記憶エリアの領域８０に保存されている中で最新の手書きレイヤ画像７３に付与されている終了時刻との時間差が、所定の時間内である場合は、その２つの手書きレイヤ画像７３に係る手書き入力のストローク（それぞれの手書きレイヤ画像７３内の最新のストローク）が、一連の連続したストロークであると判断し、受信した手書きレイヤ画像７３を記憶エリアの領域８０に保存する。

受信した手書きレイヤ画像７３に付与されている開始時刻と、保存されている中で最新の手書きレイヤ画像７３に付与されている終了時刻との時間差が、所定の時間を超える場合は、今回受信した手書きレイヤ画像に含まれる最新のストロークが、それ以前のストロークと連続しないストロークなので、その時点で記憶エリアの領域８０に保存されている手書きレイヤ画像７３から暫定画像を作成し、予め決められた記憶領域に保存する。その後、その受信した手書きレイヤ画像７３を記憶エリアの領域８０に保存する。

これにより、連続ストロークが完成したとき、もしくは、連続ストロークにならない単独のストロークを受け付ける度に、新たな暫定画像が作成される。

図１５には、ユーザが手書きラインＬ１、手書きラインＬ２、手書きラインＬ３を順番に入力した際に、作成、保存された３つの暫定画像（Temp１、Temp２、Temp３）を示す。これより、暫定画像が作成、保存されるまでの流れについて具体例を挙げて説明する。図１６は、手書きラインＬ１の入力を受け付けてから暫定画像（Temp１）を作成、保存するまでの流れの概要を示す。

Temp１（図１５参照）は、手書きラインＬ１の入力に応じて作成された暫定画像である。手書きラインＬ１は、電子ペーパ１０ＳＡ上からスタートし、電子ペーパ１０Ｍ（マスター機）上を経由して、電子ペーパ１０ＳＣ上で終了する。手書きラインＬ１の入力が行われた際には、電子ペーパ１０（１０ＳＡ、１０Ｍ、１０ＳＣ）で手書きレイヤ画像７３（Ｌ１a、Ｌ１b、Ｌ１c）が作成される。

まず、電子ペーパ１０Ｍ（マスター機）は、電子ペーパ１０ＳＡで作成された手書きレイヤ画像７３（Ｌ１a）を受信し、記憶エリアの領域８０Ａに保存する（図１６（Ａ）参照）。

次に、電子ペーパ１０Ｍ（マスター機）で手書きレイヤ画像７３（Ｌ１b）が作成される。手書きレイヤ画像７３（Ｌ１b）に付与された開始時刻と、手書きレイヤ画像７３（Ｌ１a）に付与された終了時刻の時間差が所定の時間以内なので、手書きレイヤ画像７３（Ｌ１b）を記憶エリアの領域８０Ｂに保存する（図１６（Ｂ）参照）。

その後、電子ペーパ１０ＳＣから手書きレイヤ画像７３（Ｌ１c）を受信する。手書きレイヤ画像７３（Ｌ１c）に付与された開始時刻と、手書きレイヤ画像７３（Ｌ１b）に付与された終了時刻の時間差が所定の時間以内なので、手書きレイヤ画像７３（Ｌ１c）を記憶エリアの領域８０Ｃに保存する（図１６（Ｃ）参照）。

その後、手書きラインＬ２の描画が始まると、電子ペーパ１０Ｍ（マスター機）は、電子ペーパ１０ＳＡから、新たに手書きレイヤ画像７３（Ｌ２a）を受信する。この手書きレイヤ画像７２（Ｌ２a）に付与されている開始時刻と、電子ペーパ１０ＳＣで作成された手書きレイヤ画像７３（Ｌ１c）に付与されている終了時刻の時間差が所定の時間を超えるので、記憶エリアの領域８０に保存されている手書きレイヤ画像７３（Ｌ１a、Ｌ１b、Ｌ１c）から暫定画像（Temp１）を作成し、保存する（図１６（Ｅ）参照）。

その後、電子ペーパ１０Ｍ（マスター機）は手書きレイヤ画像７３（Ｌ１Ｃ）を記憶エリアの領域８０Ａに保存（手書きレイヤ画像７３Ｌ１Ａに上書き）する（図１６（Ｄ）参照）。

Temp２、Temp３も同様にして作成、保存される。所定の時間は、１秒等、タッチペンや指が２つの電子ペーパ１０をまたいで移動するのに十分な時間に設定しておけばよい。

なお、新たな手書きレイヤ画像７３を受信（作成）することなく、一定の時間が経過した場合も、その時点で記憶エリアの領域８０に保存されている手書きレイヤ画像７３に基づいて暫定画像を作成し、保存する。
ストロークに係る手書きレイヤ画像７３は、そのストロークの受け付けを終了してから作成され、送信されるため、長いストロークの場合は電子ペーパ１０Ｍ（マスター機）がその長いストロークに係る手書きレイヤ画像７３を受信するまでに長い時間がかかる。よって、ＣＰＵ１１は、ある手書きレイヤ画像７３を受信した場合、その手書きレイヤ画像７３に係るストロークとともに連続ストロークを構成する長いストロークに係る手書きレイヤ画像７３が次に送られて来るのか、来ないのかを、当該受信直後に判断することができない。そこで、ある手書きレイヤ画像７３の受信後に、前述のような長いストロークに係る手書きレイヤ画像７３が作成、送信されるまでの時間として考え得る最長の時間に、少しの猶予時間を足した時間が経過した場合、当該受信した手書きレイヤ画像７３に係るストロークとともに連続ストロークを構成する長いストロークに係る手書きレイヤ画像７３を後々受信する可能性が低いと判断し、それまでに受信した手書きレイヤ画像７３に係るストロークで連続ストロークが完成した、もしくは、連続ストロークにならない単独のストロークであったとして暫定画像を作成する。

電子ペーパ１０は、このようにして作成した暫定画像を最大３つまで保存しておく。既に暫定画像が３つ保存されている状態で新たな暫定画像が作成された場合は、作成時刻が最も古い暫定画像を消去して、その新たな暫定画像データを保存する。

この保存されている暫定画像から、表示内容を、当該暫定画像作成時まで戻すことができる。たとえば、ユーザが手書きラインＬ１、手書きラインＬ２、手書きラインＬ３を順番に入力し、３つの暫定画像（Temp１、Temp２、Temp３）が作成された後（図１５参照）に、１回の戻る操作を行うと、Temp２の内容に、つまり、手書きラインＬ３の入力前まで表示内容が戻る。

表示内容を戻す時は、電子ペーパ１０Ｍ（マスター機）は、Temp２を構成する４つの手書きレイヤ画像７３を、作成元の電子ペーパ１０に送信し、これを受信した各電子ペーパ１０は、この手書きレイヤ画像７３の内容を自装置の手書きレイヤに上書き保存する。なお、その後、もう一回戻る操作を行うと、Temp１の内容に、つまり、手書きラインＬ２と手書きラインＬ３の入力前まで表示内容が戻る（図１５参照）。

図１７は、図８の続きの処理であり、複数台の電子ペーパ１０で連携モードによる連携を開始し、電子ペーパ１０Ｍ（マスター機）となる電子ペーパ１０が暫定画像を作成し、保存する処理の詳細な流れを示す。

連携モードを開始すると共に、電子ペーパ１０Ｍ（マスター機）が手書き入力情報の管理を開始し（ステップＳ４０１）、手書き入力情報の受け付けを監視する（ステップＳ４０２）。手書き入力情報の受付けは２タイプある。一方は電子ペーパ１０Ｍ（マスター機）での手書き入力を受け付けであり、他方はスレーブ機からの識別番号が付与された手書きレイヤ画像７３の受信である。なお、電子ペーパ１０Ｍ（マスター機）が手書き入力を受け付けた場合も、識別番号の付与された手書きレイヤ画像７３が作成され、スレーブ機から受信した手書きレイヤ画像７３と同等に扱う。

前述のいずれかの方法で手書き入力情報を受け付けたら（ステップＳ４０２：Ｙｅｓ）、その手書き入力情報を作成した電子ペーパ１０を特定しその配置位置を特定する（ステップＳ４０３）。手書き入力情報として手書きレイヤ画像７３をスレーブ機から受信した場合は、この手書きレイヤ画像７３に付されている識別番号に基づいて、当該手書き入力情報を作成した電子ペーパ１０を特定する。

ステップＳ４０４にて、記憶エリア内の領域８０に手書きレイヤ画像７３が１つも保存されていなければ、ステップＳ４０５に進む。ステップＳ４０４にて、記憶エリア内の領域８０に保存した手書きレイヤ画像７３がある場合は、保存されている手書きレイヤ画像７３のうち最近に保存された手書きレイヤ画像７３に付与されている最終時刻と、ステップＳ４０２で受信した新たな手書きレイヤ画像７３に付与されている開始時刻の時間差が所定時間内か否かを調べる。

前述の時間差が所定時間内であれば（ステップＳ４０４：Ｙｅｓ）、ステップＳ４０２で受信した新たな手書きレイヤ画像７３を、記憶エリア内の領域８０のうち、ステップＳ４０２で特定した配置位置に対応する記憶エリアに保存する（ステップＳ４０５）。また、その保存した手書きレイヤ画像７３に付与されている識別番号を記録する（ステップＳ４０６）。その後、ステップＳ４０２に戻って処理を継続する。なお、ステップＳ４０４において、ステップ４０６（もしくは後述のステップＳ４０９）で記録した識別番号が付与されている手書きレイヤ画像７３を、最近に保存された手書きレイヤ画像７３として認識する。

前述の時間差が所定時間を超える場合は（ステップＳ４０４：Ｎｏ）、その時点で記憶エリア内の領域８０に保存されている手書きレイヤ画像７３に基づいて暫定画像を作成し（ステップＳ４０７）、保存する。その後、ステップＳ４０２で受信した新たな手書きレイヤ画像７３を、記憶エリア内の領域８０に保存し（ステップＳ４０８）、その保存した手書きレイヤ画像７３に付与されている識別番号を記録する（ステップＳ４０９）。その後、ステップＳ４０２に戻って処理を継続する。なお、本処理は手書き入力を終了する操作を受け付けるまで、もしくは連携モードが終了するまで継続して行われる。

なお、ステップＳ４０７にて、既に暫定画像を保存限界数だけ保存していた場合は、最も更新時間の古い暫定画像を消去し、その領域に今回の新たな暫定画像を保存する。

電子ペーパ１０Ｍ（マスター機）が、時間的連続性のある複数の手書きレイヤ画像７３に係るストロークを連続ストローク化して管理することで、ユーザが複数台の電子ペーパ１０に跨る線分を描いた場合に、このユーザが意図する１つの線分と、電子ペーパ１０Ｍ（マスター機）が管理する連続ストロークとが一致する。たとえば、入力内容を戻す操作を行った場合に、ユーザの期待する戻るストローク量と、電子ペーパ１０Ｍ（マスター機）が戻すストローク量が一致する。

＜態様例３＞
態様例１では、複数台の電子ペーパ１０を連携モードにて連携させた際に、電子ペーパ１０Ｍ（マスター機）で１つの画像を拡大して分割した分割画像を各電子ペーパ１０に割り当てて表示させていたが、態様例３では、連携させた際に、各電子ペーパ１０が元々保有している画像を、各電子ペーパ１０の表示部３１に表示させる。

図１８は、態様例３において、手書き入力システム５の電子ペーパ１０（複数台であることが分かり難い）を連携モードにて連携させ、各電子ペーパ１０が手書き入力を受け付けた場合の様子を示す。図１８では、４台の電子ペーパ１０（１０Ｍ、１０ＳＡ、１０ＳＢ、１０ＳＣ）は、電子ペーパ１０Ｍ（マスター機）で１つの画像を拡大して分割した分割画像を各電子ペーパ１０に割り当てて表示するのではなく、各電子ペーパ１０が元々保有している画像（第３画像６２Ｄ、６２Ａ、６２Ｂ、６２Ｃ）をそれぞれの表示部３１に表示する（図１８（ａ）参照）。

各電子ペーパ１０は表示部３１に表示している画像に対しての手書き入力を受け付ける。各電子ペーパ１０は、手書き入力を受け付けたら、受け付けた手書き入力に基づく手書きデータ７２（図９参照）を手書きレイヤに作成する。手書きレイヤの内容は、手書き入力における１ストローク等の規定の単位の手書き入力を受け付ける度に更新される。表示部３１には、画像レイヤに保存されている画像の上に、手書きレイヤに保存されている手書きデータ７２を重ねた重畳画像６３（６３Ａ、６３Ｂ、６３Ｃ、６３Ｄ）が表示される（図１８（ｂ）参照）。

その後、連携を終了し、各電子ペーパ１０の表示内容を保存する処理を開始する。

図１９は、図１８で開始した保存処理を行う様子を示す。まず、４台の電子ペーパ１０のうち、電子ペーパ１０Ｍ（マスター機）となる電子ペーパ１０が、他の電子ペーパ１０（スレーブ機）に対して、重畳画像６３の送信指示を送信する。この送信指示を受け付けたスレーブ機は、電子ペーパ１０Ｍ（マスター機）に重畳画像６３を送信し、電子ペーパ１０Ｍ（マスター機）がこれを取得する（図１９（ａ）参照）。

次に、電子ペーパ１０Ｍ（マスター機）は、スレーブ機から受信した重畳画像６３を、その受信元の電子ペーパ１０の相対位置関係と同等の相対位置関係に並べて１枚の画像に結合する（図１９（ｂ）参照）。図１９（ｂ）では、右上に配置された電子ペーパ１０ＳＡから送信された重畳画像６３Ａを右上に、右下に配置された電子ペーパ１０ＳＢから送信された重畳画像６３Ｂを右下に、左下に配置された電子ペーパ１０ＳＣから送信された重畳画像６３Ｃを左下に、左上に配置された電子ペーパ１０Ｍ（マスター機）の保有する重畳画像６３Ｄを左上に並べて結合させている。

その後、その結合によって得た画像を、１つの電子ペーパ１０で表示するサイズに縮小して保存する（図１９（ｃ）参照）。

なお、重畳画像６３ではなく、それぞれの電子ペーパ１０から画像レイヤの画像と、手書きレイヤの画像を分けて受信し、それぞれ別々のレイヤにおいて結合して縮小した画像を関連付けて保存してもよい。

以上、本発明の実施の形態を図面によって説明してきたが、具体的な構成は実施の形態に示したものに限られるものではなく、本発明の要旨を逸脱しない範囲における変更や追加があっても本発明に含まれる。

本発明の実施の形態では電子ペーパ１０を手書き入力装置の例として説明したが、手書き入力装置はこれに限らない。タブレット端末や、携帯端末等の形態であってもよい。

本発明の実施の形態の手書き入力システム５では、電子ペーパ１０Ｍ（マスター機）として選ばれた電子ペーパ１０が、連携している複数台の各電子ペーパ１０の表示部３１に表示させる画像や、手書き入力に係る情報を管理していたが、電子ペーパ１０から独立した装置として、入力内容管理サーバを設け、この入力内容管理サーバに連携制御を行わせてもよい。たとえば、連携している各電子ペーパ１０の表示部３１に表示させる画像を送信したり、各電子ペーパ１０が受け付けた手書き入力に係る描画内容を集めて一括管理する。また、本発明は入力内容管理サーバを、当該制御を行うように動作させるプログラムであってもよい。

態様例１〜３は組み合わせてもよい。ただし整合性の取れる範囲内で行う。たとえば、態様例１と３と組み合わせた場合、全画面表示させる表示方法と、各装置が保有する画像を表示させる表示方法を同時に実現させることは不可能なので、切り替え釦等を設け、２つの表示方法（態様例１として動作させるか態様例３として動作させるか）を切り替え可能にすればよい。

本発明の実施の形態では、連携させる４台の電子ペーパ１０を２行２列で並べて配置したが、１行４列等異なる配置でもよい。また、４台に限らず、複数台であればよい。なお、図２０（ａ）のような配置では、電子ペーパ１０Ｍ（マスター機）が配置を認識することができないので、連携モードでの動作は不可能である。図２０（ｂ）のような配置では、態様例３による表示（各電子ペーパ１０が保有する画像の表示）は可能であるが、態様例１の全画面表示は不可能となる。全画面表示を行うために、１台の電子ペーパ１０に表示される画像と相似の形になるように配置するのが好ましい。

５…手書き入力システム
１０（１０ａ〜１０ｃ）…電子ペーパ
１０Ｍ…電子ペーパ（マスター機））
１０ＳＡ〜１０ＳＣ…電子ペーパ（スレーブ機）
１１…ＣＰＵ
１２…ＲＯＭ
１３…ＲＡＭ
１４…不揮発メモリ
１５…画像処理部
１６…無線通信部
１７…センサ
１８…手書き情報管理部
１９…時刻管理部
３０…操作パネル
３１…表示部
３２…操作部
３３…スイッチ部
３４…タッチパネル部
５０…外部端末
６０…元画像
６１Ａ〜６１Ｄ…分割画像
６２（６２Ａ〜６２Ｄ）…第３画像
６３（６３Ａ〜６３Ｄ）…重畳画像
７０…重畳画像
７２…手書きデータ
７３（７３Ａ〜７３Ｄ）…手書きレイヤ画像
７３（Ｌ１a、Ｌ１b、Ｌ１c）手書きレイヤ画像（手書きラインＬ１に係る手書きレイヤ画像）
７３（Ｌ２a）手書きレイヤ画像（手書きラインＬ２に係る手書きレイヤ画像）
７３（Ｌ３a、Ｌ３b、Ｌ３c）手書きレイヤ画像（手書きラインＬ３に係る手書きレイヤ画像）
７４…結合縮小画像
８０（８０Ａ〜８０Ｄ）…領域

Claims (9)

1. 手書き入力を受け付ける入力面を備えたＮ（Ｎ＝２以上の整数）台の隣接配置される手書き入力装置と、前記手書き入力装置と通信可能に接続される情報管理部とを備え、
   前記手書き入力装置は、前記入力面で受け付けた手書き入力による描画内容を示す描画データを前記情報管理部に送信し、
   前記情報管理部は、前記隣接配置されたＮ台の手書き入力装置の相対位置情報を取得し、前記Ｎ台の手書き入力装置から受信した描画データを、前記相対位置情報が示す相対位置に並べて結合し、
   前記手書き入力装置は、画像を表示する表示面上に前記入力面が形成された表示部をさらに備え、自装置が保有する画像を前記表示部に表示させ、前記入力面で手書き入力を受け付け、
   前記情報管理部は、前記Ｎ台の手書き入力装置からそれぞれが表示する画像を取得し、該Ｎ個の画像を前記相対位置情報が示す相対位置に並べて結合し、前記結合した画像と、前記結合した描画データを関連付けて保存する
   ことを特徴とする手書き入力システム。
2. 前記情報管理部は、前記結合した画像を一の手書き入力装置で表示可能なサイズに縮小して保存し、前記結合した描画データを前記一の手書き入力装置で表示可能なサイズに縮小して保存し、
   前記縮小後の画像と描画データを、前記一の手書き入力装置の表示面に表示させる
   ことを特徴とする請求項１に記載の手書き入力システム。
3. 前記手書き入力装置は、前記入力面が１ストロークの手書き入力を受け付ける毎に、当該手書き入力による描画内容を示す描画データを前記情報管理部に送信し、
   前記情報管理部は、一の手書き入力装置から受信した最新の１ストロークの描画データと、他の一の手書き入力装置から受信した最新の１ストロークの描画データとに時間的連続性がある場合は、それらのストロークを１つにグループ化して連続ストロークとし、
   前記連続ストロークを、１回の戻る操作で戻す対象にする
   ことを特徴とする請求項１または２に記載の手書き入力システム。
4. 手書き入力を受け付ける入力面と、画像を表示する表示面上に前記入力面が形成された表示部とを備えるＮ（Ｎ＝２以上の整数）台の隣接配置された各手書き入力装置から、前記入力面で受け付けた手書き入力による描画内容を示す描画データと前記表示部に表示された画像を取得する取得部と、
   前記隣接配置されたＮ台の手書き入力装置の相対位置情報を取得する配置情報取得部と、
   記憶部と、
   前記Ｎ台の手書き入力装置から取得した描画データを、前記相対位置情報が示す相対位置に並べて結合すると共に、前記Ｎ台の手書き入力装置から取得した画像を、前記相対位置情報が示す相対位置に並べて結合する結合部と、
   前記結合した描画データと前記結合した画像を関連付けて前記記憶部に保存する制御部と、
   を備える
   ことを特徴とする入力内容管理サーバ。
5. 前記制御部は、前記結合した描画データと前記結合した画像とを一の手書き入力装置で表示可能なサイズに縮小し、これらを関連付けて前記記憶部に保存する
   ことを特徴とする請求項４に記載の入力内容管理サーバ。
6. 前記手書き入力装置は、１ストロークの手書き入力を受け付ける毎に、当該手書き入力による描画内容を示す描画データを送信し、
   前記結合部は、一の手書き入力装置から取得した最新の１ストロークの描画データと、他の一の手書き入力装置から取得した最新の１ストロークの描画データとに時間的連続性がある場合は、それらのストロークを１つにグループ化して連続ストロークとし、前記連続ストロークを、１回の戻る操作で戻す対象にする
   ことを特徴とする請求項４または５に記載の入力内容管理サーバ。
7. 情報処理装置を、
   手書き入力を受け付ける入力面と、画像を表示する表示面上に前記入力面が形成された表示部とを備えるＮ（Ｎ＝２以上の整数）台の隣接配置された各手書き入力装置から、前記入力面で受け付けた手書き入力による描画内容を示す描画データと前記表示部に表示された画像を取得する取得部、
   前記隣接配置されたＮ台の手書き入力装置の相対位置情報を取得する配置情報取得部、
   前記Ｎ台の手書き入力装置から取得した描画データを、前記相対位置情報が示す相対位置に並べて結合すると共に、前記Ｎ台の手書き入力装置から取得した画像を、前記相対位置情報が示す相対位置に並べて結合する結合部、
   前記結合した描画データと前記結合した画像を関連付けて保存する制御部、
   として機能させる
   ことを特徴とする入力内容管理プログラム。
8. 前記制御部は、前記結合した描画データと前記結合した画像と一の手書き入力装置で表示可能なサイズに縮小し、これらを関連付けて保存する
   ことを特徴とする請求項７に記載の入力内容管理プログラム。
9. 前記手書き入力装置は、１ストロークの手書き入力を受け付ける毎に、当該手書き入力による描画内容を示す描画データを送信するものであり、
   前記結合部を、一の手書き入力装置から取得した最新の１ストロークの描画データと、他の一の手書き入力装置から取得した最新の１ストロークの描画データとに時間的連続性がある場合は、それらのストロークを１つにグループ化して連続ストロークとし、前記連続ストロークを、１回の戻る操作で戻す対象にするように動作させる
   ことを特徴とする請求項７または８に記載の入力内容管理プログラム。

Images