JP2009140159A - 画像処理システム、位置検出装置およびプログラム - Google Patents
画像処理システム、位置検出装置およびプログラム Download PDFInfo
- Publication number
- JP2009140159A JP2009140159A JP2007314765A JP2007314765A JP2009140159A JP 2009140159 A JP2009140159 A JP 2009140159A JP 2007314765 A JP2007314765 A JP 2007314765A JP 2007314765 A JP2007314765 A JP 2007314765A JP 2009140159 A JP2009140159 A JP 2009140159A
- Authority
- JP
- Japan
- Prior art keywords
- captured image
- display element
- defective
- display
- position information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Electrochromic Elements, Electrophoresis, Or Variable Reflection Or Absorption Elements (AREA)
- Position Input By Displaying (AREA)
Abstract
【課題】表示装置側に位置検出のための多数のセンサや印刷パターンなどの構成を設けなくても、その表示面上で操作者によって指定された位置を検出する。
【解決手段】電子ペン１は表示面の撮像画像データを所定周期毎に電子ペーパー２に送信する。電子ペーパー２は、取得した撮像画像データが表す撮像画像を、同一色の連続領域にそれぞれ分離し、分離された複数の領域から、予め決められた大きさの範囲内に収まる領域を、不良表示素子に相当する領域として抽出し、その領域の重心の座標値を割り出して、不良表示素子の配置パターンとして記憶する。そして、電子ペーパー２は、この不良表示素子の配置パターンと、予め記憶した不良表示素子の位置情報とを逐一照合することで、電子ペン１が撮像した位置を、電子ペーパー２における座標として検出する。そして、電子ペーパー２は、この座標に応じた処理を行う。
【選択図】図１
【解決手段】電子ペン１は表示面の撮像画像データを所定周期毎に電子ペーパー２に送信する。電子ペーパー２は、取得した撮像画像データが表す撮像画像を、同一色の連続領域にそれぞれ分離し、分離された複数の領域から、予め決められた大きさの範囲内に収まる領域を、不良表示素子に相当する領域として抽出し、その領域の重心の座標値を割り出して、不良表示素子の配置パターンとして記憶する。そして、電子ペーパー２は、この不良表示素子の配置パターンと、予め記憶した不良表示素子の位置情報とを逐一照合することで、電子ペン１が撮像した位置を、電子ペーパー２における座標として検出する。そして、電子ペーパー２は、この座標に応じた処理を行う。
【選択図】図１
Description
本発明は、複数の表示素子からなる表示面上の位置を検出するための技術に関する。
電子データに基づいて何度でも表示内容を書き換えることができる表示装置が開発されている。特に薄型の表示装置は電子ペーパーなどと呼ばれているが、この種の薄型の表示装置に適した表示方式として、電気泳動方式がある。この電気泳動方式は、着色した帯電粒子を分散させた有機溶媒等の液体をマイクロカプセルに封入し、このマイクロカプセルに対する電界を変化させることにより、帯電粒子をマイクロカプセル内で移動させて表示を行うというものである。電気泳動方式に基づく表示に関する技術は、例えば特許文献１に開示されている。
また、ペン先の軌跡を認識してこれに応じたデータを出力する電子ペンが開発されている。例えば特許文献２には、紙に特殊なパターンを印刷しておき、電子ペンに備えられたカメラがこれを撮像してパターン解析することにより、ペン先がその紙のどの部分に置かれているかを認識するという技術が開示されている。このような電子ペンによれば、書いた文字や図形等を電子データとして直接扱うことができるため、これらの文字等の加工、解析および再利用に適している。
特許第３７１９１７２号
特表２００３−５１１７６１号公報
ところで、上記のような電子ペーパーに対し、電子データとして直接扱うことができる文字等を書き込むことを可能にするためには、電子ペーパー側か電子ペン側のいずれかにペン先の位置を認識するための構成を設ける必要がある。例えば電子ペーパーによりペン先の位置を認識する場合には、例えば感圧素子などの、表示方式に影響を与えないセンサを電子ペーパーに多数設けなければならない。しかし、このような多数のセンサを設けようとすると、電子ペーパーの製造工程が複雑化して製造コストが上昇するほか、電子ペーパーの重量が増すので、電子ペーパー自体の携帯性が損なわれてしまうという問題がある。一方、電子ペンによりペン先の位置を認識させるためには、電子ペーパー側に上述したような特殊なパターンを目立たないように予め印刷しておく必要がある。よって、この場合も、電子ペーパーの製造工程が増えるという問題がある。
本発明は、このような背景に鑑みてなされたものであり、その目的は、電子ペーパーなどの表示手段側に位置検出のための多数のセンサや印刷パターンなどの構成を設けなくても、その表示面上で操作者によって指定された位置を検出することにある。
上述した課題を解決するため、本発明に係る画像処理システムは、複数の表示素子が並べられた表示面を有し、当該複数の表示素子をそれぞれ駆動手段により駆動して画像を表示する表示手段と、前記表示面の一部の領域を撮像し、撮像画像を表す撮像画像データを生成する撮像手段と、前記撮像画像データが表す撮像画像に含まれる色の違いに基づいて、前記駆動手段によって駆動することができない不良表示素子の位置を検出し、各々の当該位置を表す複数の第１位置情報を生成する不良表示素子検出手段と、前記表示面の全面における各々の前記不良表示素子の位置を表す複数の第２位置情報を記憶した記憶手段と、前記不良表示素子検出手段が生成した第１位置情報と、前記記憶手段が記憶している複数の第２位置情報と不良表示素子検出手段を照合して、前記表示面における前記撮像画像の位置を特定する位置特定手段とを具備することを特徴とする。
本発明によれば、駆動手段によって駆動することができない不良表示素子の位置を検出するので、表示手段側に位置検出のための多数のセンサや印刷パターンなどの構成を設けなくても、その表示面上で操作者によって指定された位置を検出することができる。
本発明によれば、駆動手段によって駆動することができない不良表示素子の位置を検出するので、表示手段側に位置検出のための多数のセンサや印刷パターンなどの構成を設けなくても、その表示面上で操作者によって指定された位置を検出することができる。
好ましくは、前記表示素子には、着色された複数の帯電粒子を分散させた液体が封入されており、前記表示手段は、前記表示素子に対する電界の方向を変化させて、当該表示素子に封入されている液体内の前記帯電粒子を移動させることにより、画像を表示するとよい。
この態様によれば、表示手段の表示面に、位置の検出に充分な程度の割合で不良表示素子をランダムに散在させることができる。
この態様によれば、表示手段の表示面に、位置の検出に充分な程度の割合で不良表示素子をランダムに散在させることができる。
また、好ましくは、前記表示面の全面を撮像し、撮像した撮像画像を表す撮像画像データを生成する全面撮像手段と、前記全面撮像手段によって生成された撮像画像データに含まれる色の違いに基づいて、前記不良表示素子の位置を検出し、各々の当該位置を表す情報を、前記第２位置情報として生成する全面不良表示素子検出手段とを備え、前記記憶手段は、前記全面不良表示素子検出手段によって生成された第２位置情報を記憶するとよい。
この態様によれば、表示手段の表示面上で操作者によって指定された位置を検出するにあたり、表示手段の表示面全面における不良表示素子の位置が予め記憶手段に記憶されていなくても、ユーザが適宜その位置を記憶手段に記憶させることができる。
この態様によれば、表示手段の表示面上で操作者によって指定された位置を検出するにあたり、表示手段の表示面全面における不良表示素子の位置が予め記憶手段に記憶されていなくても、ユーザが適宜その位置を記憶手段に記憶させることができる。
また、好ましくは、前記位置特定手段によって特定された位置に応じた処理を行う処理手段を備えるとよい。
この態様によれば、表示手段の表示面上で操作者によって指定された位置に応じた処理を行うことができる。
この態様によれば、表示手段の表示面上で操作者によって指定された位置に応じた処理を行うことができる。
また、本発明に係る位置検出装置は、駆動手段により駆動させられる複数の表示素子が並べられた表示面を撮像して撮像画像を表す撮像画像データを生成する撮像手段から、当該撮像画像データを取得する取得手段と、前記撮像画像データが表す撮像画像に含まれる色の違いに基づいて、前記駆動手段によって駆動することができない不良表示素子の位置を検出し、各々の当該位置を表す複数の第１位置情報を生成する不良表示素子検出手段と前記表示面の全面における各々の前記不良表示素子の位置を表す複数の第２位置情報を予め記憶する記憶手段と、前記不良表示素子検出手段が生成した第１位置情報と、前記記憶手段が記憶している複数の第２位置情報とを照合して、前記表示面における前記撮像画像の位置を特定する位置特定手段とを備えることを特徴とする。
本発明によれば、駆動手段によって駆動することができない不良表示素子の位置を検出するので、表示手段側に位置検出のための多数のセンサや印刷パターンなどの構成を設けなくても、その表示面上で操作者によって指定された位置を検出することができる。
本発明によれば、駆動手段によって駆動することができない不良表示素子の位置を検出するので、表示手段側に位置検出のための多数のセンサや印刷パターンなどの構成を設けなくても、その表示面上で操作者によって指定された位置を検出することができる。
好ましくは、前記不良表示素子検出手段は、前記撮像画像データが表す撮像画像を色毎の画像領域に分離し、分離した複数の画像領域のうち、予め決められた大きさの範囲内に収まる複数の画像領域の位置を、前記不良表示素子の位置として検出するとよい。
この態様によれば、表示手段の表示面に画像が表示されていても、その表示に関わらず、駆動手段により駆動させられる表示素子と、駆動手段により駆動することができない不良表示素子とを識別することができる。
この態様によれば、表示手段の表示面に画像が表示されていても、その表示に関わらず、駆動手段により駆動させられる表示素子と、駆動手段により駆動することができない不良表示素子とを識別することができる。
また、好ましくは、前記不良表示素子検出手段は、前記表示素子を駆動するための電極の形状を記憶しており、前記撮像画像データが表す撮像画像において、それぞれ異なる色の画像領域の境界線を特定し、特定した当該境界線と記憶しておいた前記電極の形状とが一致しない位置を、前記不良表示素子の位置として検出するとよい。
この態様によれば、上述した表示素子と不良表示素子との識別を、より精度良く行うことができる。
この態様によれば、上述した表示素子と不良表示素子との識別を、より精度良く行うことができる。
また、好ましくは、前記位置特定手段によって特定された位置に応じた処理を行う処理手段を備えるとよい。
この態様によれば、表示手段の表示面上で操作者によって指定された位置に応じた処理を行うことができる。
この態様によれば、表示手段の表示面上で操作者によって指定された位置に応じた処理を行うことができる。
また、好ましくは、前記記憶手段は、前記第２位置情報に加えて、各々の前記不良表示素子の大きさ又は形状の少なくとも一方を記憶しており、前記不良表示素子検出手段は、複数の前記第１位置情報を生成するとともに、前記撮像画像において色毎に分離した複数の画像領域のうち、予め決められた大きさの範囲内に収まる複数の画像領域の大きさ又は形状を表す情報を生成し、前記位置特定手段は、前記記憶手段が記憶する第２位置情報及び各々の前記不良表示素子の大きさ又は形状と、前記不良表示素子検出手段が生成した第１位置情報及び前記大きさ又は前記形状を表す情報とを照合することにより、前記表示面における前記撮像画像の位置を特定するとよい。
この態様によれば、表示手段不良表示素子を精度良く照合することができる。
この態様によれば、表示手段不良表示素子を精度良く照合することができる。
また、本発明に係るプログラムは、コンピュータを、駆動手段により駆動させられる複数の表示素子が並べられた表示面を撮像して撮像画像を表す撮像画像データを生成する撮像手段から、当該撮像画像データを取得する取得手段と、前記撮像画像データが表わす撮像画像に含まれる色の違いに基づいて、前記駆動手段によって駆動することができない不良表示素子の位置を検出し、各々の当該位置を表す複数の第１位置情報を生成する不良表示素子検出手段と前記表示面の全面における各々の前記不良表示素子の位置を表す複数の第２位置情報を予め記憶する記憶手段と、前記不良表示素子検出手段が生成した第１位置情報と、前記記憶手段が記憶している複数の第２位置情報とを照合して、前記表示面における前記撮像画像の位置を特定する位置特定手段として機能させるためのプログラムである。
本発明によれば、駆動手段によって駆動することができない不良表示素子の位置を検出するので、表示手段側に位置検出のための多数のセンサや印刷パターンを設けなくても、その表示面上で操作者により指定された位置を検出することができる。
本発明によれば、駆動手段によって駆動することができない不良表示素子の位置を検出するので、表示手段側に位置検出のための多数のセンサや印刷パターンを設けなくても、その表示面上で操作者により指定された位置を検出することができる。
以下、図面を参照して本発明の実施の形態を説明する。
（Ａ：構成）
（Ａ−１：画像処理システムの全体構成）
図１は、画像処理システム９の全体構成を示す図である。
画像処理システム９は、電子ペン１と、電子ペーパー２と、スキャナ３とを有する。電子ペン１は、操作者が文字や図形等を記入するべく電子ペーパー２の表示面上を移動させられる筆記具として機能する。この電子ペン１は、電子ペーパー２と通信可能に構成されているとともに、ペン先部分にカメラを備えており、このカメラによって撮像された画像を表す撮像画像データを電子ペーパー２に送信する。スキャナ３は、図中破線で示した通信ケーブルにより、必要に応じて電子ペーパー２と通信可能に接続される。このスキャナ３は、電子ペーパー２の表示面の全面を撮像し、その撮像画像を表す撮像画像データを電子ペーパー２に送信する。電子ペーパー２は、電気泳動方式で画像を表示する表示装置である。この電子ペーパー２は、電子ペン１から送信されてくる撮像画像データと、スキャナ３から送信されてくる撮像画像データとを用いて、表示面における電子ペン１のペン先の位置を検出し、その検出した位置を順次連ねた軌跡を表示することで、操作者が描いた文字や図形を表現する。
（Ａ：構成）
（Ａ−１：画像処理システムの全体構成）
図１は、画像処理システム９の全体構成を示す図である。
画像処理システム９は、電子ペン１と、電子ペーパー２と、スキャナ３とを有する。電子ペン１は、操作者が文字や図形等を記入するべく電子ペーパー２の表示面上を移動させられる筆記具として機能する。この電子ペン１は、電子ペーパー２と通信可能に構成されているとともに、ペン先部分にカメラを備えており、このカメラによって撮像された画像を表す撮像画像データを電子ペーパー２に送信する。スキャナ３は、図中破線で示した通信ケーブルにより、必要に応じて電子ペーパー２と通信可能に接続される。このスキャナ３は、電子ペーパー２の表示面の全面を撮像し、その撮像画像を表す撮像画像データを電子ペーパー２に送信する。電子ペーパー２は、電気泳動方式で画像を表示する表示装置である。この電子ペーパー２は、電子ペン１から送信されてくる撮像画像データと、スキャナ３から送信されてくる撮像画像データとを用いて、表示面における電子ペン１のペン先の位置を検出し、その検出した位置を順次連ねた軌跡を表示することで、操作者が描いた文字や図形を表現する。
（Ａ−２：電子ペンの構成）
次に、図２は、電子ペン１の機能構成の一例を示すブロック図である。
図２に示すように、電子ペン１は、ＣＰＵ（Central Processing Unit）１１、ＲＯＭ（Read Only Memory）１２、ＲＡＭ（Random Access Memory）１３、センサ１４、カメラ１５、通信部１６および電源部１７を備えている。これらの各構成１１〜１６は、バス１９に接続されているとともに、図示しない電力線により電源部１７に接続されている。ＣＰＵ１１は、ＲＯＭ１２に記憶されているコンピュータプログラムを読み出して実行することにより、電子ペン１の各部を制御する。ＲＯＭ１２は、読み出し専用の不揮発性記憶装置であり、上述のコンピュータプログラムが記憶されている。ＲＡＭ１３はＣＰＵ１１がプログラムを実行する際のワークエリアとして利用される。センサ１４は、ペン先に連動した感圧装置であり、図示しない弾性体等により外部方向へ付勢力を与えられたペン先が対象物と接触して反力を受け、ペンの内部へ押される力を検知して、オン信号を出力する。つまり、このセンサ１４は、ペン先が電子ペーパー２の表示面に接触するとオン信号を出力することになる。カメラ１５は、ペン先が向けられた方向を撮像する撮像手段であり、電子ペーパー２の表示面の領域の一部（例えば直径５ｍｍ程度の円形領域）を撮像する。このカメラ１５は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等の固体撮像素子により、ペン先に備えられたレンズから撮りこまれる光を電気信号に変換して、その光に応じた撮像画像データを生成して出力する。通信部１６は、赤外線やＢｌｕｅｔｏｏｔｈ（登録商標）などの通信規格に従った無線通信を行う無線通信回路を備えており、電子ペーパー２とデータ通信を行う。電源部１７は、例えば充電可能なバッテリを備え、上述の電力線を介して上記の各構成１１〜１６に電力を供給する。
次に、図２は、電子ペン１の機能構成の一例を示すブロック図である。
図２に示すように、電子ペン１は、ＣＰＵ（Central Processing Unit）１１、ＲＯＭ（Read Only Memory）１２、ＲＡＭ（Random Access Memory）１３、センサ１４、カメラ１５、通信部１６および電源部１７を備えている。これらの各構成１１〜１６は、バス１９に接続されているとともに、図示しない電力線により電源部１７に接続されている。ＣＰＵ１１は、ＲＯＭ１２に記憶されているコンピュータプログラムを読み出して実行することにより、電子ペン１の各部を制御する。ＲＯＭ１２は、読み出し専用の不揮発性記憶装置であり、上述のコンピュータプログラムが記憶されている。ＲＡＭ１３はＣＰＵ１１がプログラムを実行する際のワークエリアとして利用される。センサ１４は、ペン先に連動した感圧装置であり、図示しない弾性体等により外部方向へ付勢力を与えられたペン先が対象物と接触して反力を受け、ペンの内部へ押される力を検知して、オン信号を出力する。つまり、このセンサ１４は、ペン先が電子ペーパー２の表示面に接触するとオン信号を出力することになる。カメラ１５は、ペン先が向けられた方向を撮像する撮像手段であり、電子ペーパー２の表示面の領域の一部（例えば直径５ｍｍ程度の円形領域）を撮像する。このカメラ１５は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等の固体撮像素子により、ペン先に備えられたレンズから撮りこまれる光を電気信号に変換して、その光に応じた撮像画像データを生成して出力する。通信部１６は、赤外線やＢｌｕｅｔｏｏｔｈ（登録商標）などの通信規格に従った無線通信を行う無線通信回路を備えており、電子ペーパー２とデータ通信を行う。電源部１７は、例えば充電可能なバッテリを備え、上述の電力線を介して上記の各構成１１〜１６に電力を供給する。
（Ａ−３：電子ペーパーの構成）
次に、図３は、電子ペーパー２の機能構成の一例を示すブロック図である。
図３に示すように、電子ペーパー２は、ＣＰＵ２１、ＲＯＭ２２、ＲＡＭ２３、記憶部２４、表示部２５、第１通信部２６、第２通信部２７および電源部２８を備えている。これらの各構成２１〜２７は、バス２９に接続されているとともに、図示しない電力線により電源部２８に接続されている。ＣＰＵ２１は、ＲＯＭ２２に記憶されているコンピュータプログラムを読み出して実行することにより、電子ペーパー２の各部を制御する。ＲＯＭ２２は、読み出し専用の不揮発性記憶装置であり、上述のコンピュータプログラムが記憶されている。ＲＡＭ２３は、ＣＰＵ２１がプログラムを実行する際のワークエリアとして利用される。記憶部２４は、例えばフラッシュメモリなどの書き換え可能な不揮発性記憶装置であり、後述する不良表示素子の位置が記述された不良表示素子位置テーブル２４１、および後述する画素電極ＰＥの位置が記述された電極位置テーブル２４２とを記憶している。第１通信部２６は、電子ペン１の通信部１６と同様の通信規格に従った無線通信を行う無線通信回路を備えており、電子ペン１とデータ通信を行う。第２通信部２７は、通信ケーブルのコネクタが接続される挿入口や通信回路を備えており、この通信ケーブルを介してスキャナ３とデータ通信を行う。電源部２８は、例えば充電可能なバッテリを備え、上述の電力線を介して各構成２１〜２７に電力を供給する。表示部２５は、ＣＰＵ２１の制御の下で画像を表示する表示手段である。表示部２５は、多数の電気泳動素子や電極を備えた反射型の表示体２５２と、ＣＰＵ２１が送信する描画命令を駆動信号に変換し、この駆動信号により各電気泳動素子を駆動する駆動部２５１とを備えている。
次に、図３は、電子ペーパー２の機能構成の一例を示すブロック図である。
図３に示すように、電子ペーパー２は、ＣＰＵ２１、ＲＯＭ２２、ＲＡＭ２３、記憶部２４、表示部２５、第１通信部２６、第２通信部２７および電源部２８を備えている。これらの各構成２１〜２７は、バス２９に接続されているとともに、図示しない電力線により電源部２８に接続されている。ＣＰＵ２１は、ＲＯＭ２２に記憶されているコンピュータプログラムを読み出して実行することにより、電子ペーパー２の各部を制御する。ＲＯＭ２２は、読み出し専用の不揮発性記憶装置であり、上述のコンピュータプログラムが記憶されている。ＲＡＭ２３は、ＣＰＵ２１がプログラムを実行する際のワークエリアとして利用される。記憶部２４は、例えばフラッシュメモリなどの書き換え可能な不揮発性記憶装置であり、後述する不良表示素子の位置が記述された不良表示素子位置テーブル２４１、および後述する画素電極ＰＥの位置が記述された電極位置テーブル２４２とを記憶している。第１通信部２６は、電子ペン１の通信部１６と同様の通信規格に従った無線通信を行う無線通信回路を備えており、電子ペン１とデータ通信を行う。第２通信部２７は、通信ケーブルのコネクタが接続される挿入口や通信回路を備えており、この通信ケーブルを介してスキャナ３とデータ通信を行う。電源部２８は、例えば充電可能なバッテリを備え、上述の電力線を介して各構成２１〜２７に電力を供給する。表示部２５は、ＣＰＵ２１の制御の下で画像を表示する表示手段である。表示部２５は、多数の電気泳動素子や電極を備えた反射型の表示体２５２と、ＣＰＵ２１が送信する描画命令を駆動信号に変換し、この駆動信号により各電気泳動素子を駆動する駆動部２５１とを備えている。
（Ａ−４：電子ペーパーの表示体の構成）
ここで、図４は、表示体２５２の構造を模式的に示した図である。
図４に示すように、表示体２５２は、第１基板２５２１、第２基板２５２２、電気泳動素子Ｐ、バインダ２５２３により構成されている。図４においては、上方向が表示面の表面側であり、下方向が裏面側である。第１基板２５２１は、樹脂基板であり、その上方には複数の画素電極ＰＥが設けられている。この画素電極ＰＥは、全て略同一の大きさ（数十ミクロン程度）の正方形であり、規則的な格子状に並べられている。また、第１基板２５２１に対向する第２基板２５２２は、透明な樹脂基板であり、その下方には透明な共通電極ＣＥが設けられている。複数の画素電極ＰＥと共通電極ＣＥの間には、複数の電気泳動素子Ｐが、光透過性を有するバインダ２５２３により固定されている。この電気泳動素子Ｐは、約数十ミクロン程度の大きさで略球状ではあるが、それぞれの大きさおよび形状は完全に同一ではなく、互いに近接して並べられている。
ここで、図４は、表示体２５２の構造を模式的に示した図である。
図４に示すように、表示体２５２は、第１基板２５２１、第２基板２５２２、電気泳動素子Ｐ、バインダ２５２３により構成されている。図４においては、上方向が表示面の表面側であり、下方向が裏面側である。第１基板２５２１は、樹脂基板であり、その上方には複数の画素電極ＰＥが設けられている。この画素電極ＰＥは、全て略同一の大きさ（数十ミクロン程度）の正方形であり、規則的な格子状に並べられている。また、第１基板２５２１に対向する第２基板２５２２は、透明な樹脂基板であり、その下方には透明な共通電極ＣＥが設けられている。複数の画素電極ＰＥと共通電極ＣＥの間には、複数の電気泳動素子Ｐが、光透過性を有するバインダ２５２３により固定されている。この電気泳動素子Ｐは、約数十ミクロン程度の大きさで略球状ではあるが、それぞれの大きさおよび形状は完全に同一ではなく、互いに近接して並べられている。
図５は、電気泳動素子Ｐの構造および状態を模式的に示す断面図である。より詳細には、図５（ａ）は、黒色を表示するときの電気泳動素子Ｐの状態を示し、図５（ｂ）は、白色を表示するときの電気泳動素子Ｐの状態を示すものである。また、図５（ｃ）は、図中左側部分に白色を、右側部分に黒色をそれぞれ表示するときの電気泳動素子Ｐの状態を示すものである。
電気泳動素子Ｐは、図５（ａ）〜（ｃ）に示すように、マイクロカプセル化されている。カプセル壁ＣＷとしてのポリマー膜内には、プラス（＋）に帯電した黒色顔料粒子ＢＧおよびマイナス（−）に帯電した白色顔料粒子ＷＧを含む、液体の分散媒ＤＭが封入されている。黒色顔料粒子ＢＧおよび白色顔料粒子ＷＧの位置は、外部から与えられる電界により規定され、さらに分散媒ＤＭにより安定的に維持される。なお、実際の黒色顔料粒子ＢＧおよび白色顔料粒子ＷＧの粒径は、図に示すよりも小さく、数ナノメートル程度である。上述したように、この電気泳動素子Ｐは、大きさおよび形状が完全に同一ではなく、いわば不規則に並べられた状態でバインダ２５２３により固定されているから、必ずしも画素電極ＰＥと一対一の対応関係にはない。図５においては、簡略に説明するため、電気泳動素子Ｐの裏面側には、２つの画素電極ＰＥ１およびＰＥ２が配置されている場合を図示したが、画素電極の大きさによっては、１つの電極と複数電気泳動素子Ｐとが対応する場合もある。
電気泳動素子Ｐは、図５（ａ）〜（ｃ）に示すように、マイクロカプセル化されている。カプセル壁ＣＷとしてのポリマー膜内には、プラス（＋）に帯電した黒色顔料粒子ＢＧおよびマイナス（−）に帯電した白色顔料粒子ＷＧを含む、液体の分散媒ＤＭが封入されている。黒色顔料粒子ＢＧおよび白色顔料粒子ＷＧの位置は、外部から与えられる電界により規定され、さらに分散媒ＤＭにより安定的に維持される。なお、実際の黒色顔料粒子ＢＧおよび白色顔料粒子ＷＧの粒径は、図に示すよりも小さく、数ナノメートル程度である。上述したように、この電気泳動素子Ｐは、大きさおよび形状が完全に同一ではなく、いわば不規則に並べられた状態でバインダ２５２３により固定されているから、必ずしも画素電極ＰＥと一対一の対応関係にはない。図５においては、簡略に説明するため、電気泳動素子Ｐの裏面側には、２つの画素電極ＰＥ１およびＰＥ２が配置されている場合を図示したが、画素電極の大きさによっては、１つの電極と複数電気泳動素子Ｐとが対応する場合もある。
電気泳動素子Ｐによって黒色を表示しようとするときには、図５（ａ）に示すように、画素電極ＰＥ１と共通電極ＣＥとの間および画素電極ＰＥ２と共通電極ＣＥとの間に図中矢印Ｅ１方向の向きを持つ電界を生じさせるような電圧が駆動部２５１により印加される。これにより、プラス（＋）に帯電している黒色顔料粒子ＢＧは、カプセル壁ＣＷ内において表面側に近付くように移動すると共に、マイナス（−）に帯電している白色顔料粒子ＷＧは、カプセル壁ＣＷ内において裏面側に近付くように移動する。このようにして、電気泳動素子Ｐの表面側に黒色顔料粒子ＢＧが集められるので、ユーザが表面側からこの電気泳動素子Ｐを観察したときには、黒色を認識する。他方で、電気泳動素子Ｐは、白色を表示しようとするときには、図５（ｂ）に示すように、画素電極ＰＥ１と共通電極ＣＥとの間および画素電極ＰＥ２と共通電極ＣＥとの間に図中矢印Ｅ２方向の向きを持つ電界を生じさせるような電圧が駆動部２５１により印加される。これにより、白色顔料粒子ＷＧは、表面側に近付くように移動すると共に、黒色顔料粒子ＢＧは、裏面側に近付くように移動する。このようにして、電気泳動素子Ｐの表面側に白色顔料粒子ＷＧが集められるので、ユーザが表面側からこの電気泳動素子Ｐを観察したときには、白色を認識する。
また、一つの電気泳動素子Ｐが同時に表示することができる色は一色ではなく、図５（ｃ）に示すように、一つの電気泳動素子Ｐが同時に白色と黒色の両方を表示する状態もある。この場合、電気泳動素子Ｐの図中右側においては、画素電極ＰＥ１と共通電極ＣＥとの間に図中矢印Ｅ１方向の向きを持つ電界を生じさせるような電圧が駆動部２５１により印加され、電気泳動素子Ｐの図中左側においては、画素電極ＰＥ２と共通電極ＣＥとの間に図中矢印Ｅ２方向の向きを持つ電界を生じさせるような電圧が駆動部２５１により印加される。これにより、電気泳動素子Ｐの図中右側においては、黒色顔料粒子ＢＧが表面側に近付くように移動すると共に、白色顔料粒子ＷＧが裏面側に近付くように移動する。また、電気泳動素子Ｐの図中左側においては、白色顔料粒子ＷＧが表面側に近付くように移動すると共に、黒色顔料粒子ＢＧが裏面側に近付くように移動する。
（Ａ−５：不良表示素子の説明）
ここで、図６は、駆動部２５１により正常に駆動することができない不良表示素子の状態の例を示す図である。
電気泳動素子Ｐのカプセル壁ＣＷ内の黒色顔料粒子ＢＧ又は白色顔料粒子ＷＧは、帯電粒子に付された帯電量が不足しているなどの様々な原因により、カプセル壁ＣＷの壁面に固着したり、或いは、粒子どうしでお互いに固着したりすることがある。図６（ａ）に示す例では、黒色顔料粒子ＢＧが電気泳動素子Ｐのカプセル壁ＣＷの表面側に固着している。この固着による力は、駆動部２５１が与える電界による力を上回っているため、矢印Ｅ２方向の電界を与えても、白色顔料粒子ＷＧはカプセル壁ＣＷの表面側に到達することができず、電気泳動素子Ｐは黒色を表示し続けることになる。
ここで、図６は、駆動部２５１により正常に駆動することができない不良表示素子の状態の例を示す図である。
電気泳動素子Ｐのカプセル壁ＣＷ内の黒色顔料粒子ＢＧ又は白色顔料粒子ＷＧは、帯電粒子に付された帯電量が不足しているなどの様々な原因により、カプセル壁ＣＷの壁面に固着したり、或いは、粒子どうしでお互いに固着したりすることがある。図６（ａ）に示す例では、黒色顔料粒子ＢＧが電気泳動素子Ｐのカプセル壁ＣＷの表面側に固着している。この固着による力は、駆動部２５１が与える電界による力を上回っているため、矢印Ｅ２方向の電界を与えても、白色顔料粒子ＷＧはカプセル壁ＣＷの表面側に到達することができず、電気泳動素子Ｐは黒色を表示し続けることになる。
一方、図６（ｂ）に示す例では、黒色顔料粒子ＢＧは、カプセル壁ＣＷとは固着していないが、黒色顔料粒子ＢＧ同士が固着して大きな塊になっている。そのため、駆動部２５１が矢印Ｅ１方向の電界を与えても、黒色顔料粒子ＢＧのそれぞれは分散媒ＤＭの中を自由に動くことができず、塊となった黒色顔料粒子ＢＧは、その両端が電気泳動素子Ｐのカプセル壁ＣＷと衝突してしまう。そのため、黒色顔料粒子ＢＧはカプセル壁ＣＷの表面側に到達することができず、電気泳動素子Ｐは白色を表示し続けることになる。
このように、電気泳動素子Ｐの中には、着色された帯電粒子が内壁に固着したり、その帯電粒子同士が固着したりすることにより、正常に駆動しない不良表示素子がある。電子ペーパー２の製造工程においては、このような不良表示素子がどうしても含まれてしまい、一般にその不良表示素子の割合は、電気泳動素子全体の１〜５％程度である。ただし、この程度の割合で不良表示素子が含まれているかぎり、不良表示素子の色が、画像全体に与える影響は小さく、人が画像全体を認識することを妨げる程ではないことが分かっている。
この不良表示素子は、表示面の全面にわたってランダムな位置に発生する。よって、互いに近傍にある複数の不良表示素子の位置関係、つまり配置パターンを、表示面の各位置に固有の情報として予め記憶しておけば、この記憶内容と電子ペン１が読み取った撮像画像に含まれる不良表示素子の配置パターンとを照合することで、電子ペン１のペン先が指し示す表示面上の位置、つまり電子ペン１のカメラ１５に撮像位置を特定することができる。
（Ｂ：動作）
次に、画像処理システム９の動作を説明する。
（Ｂ−１：不良表示素子の位置情報を登録する動作）
図７は、表示面全面の不良表示素子の位置を検出し、その位置情報を電子ペーパー２の不良表示素子位置テーブル２４１へ記述するときの動作の流れを説明するシーケンス図である。
図７において、まず、操作者の操作に応じて、電子ペーパー２の表示面の全面に白色が表示される。これは例えば、スキャナ３における操作内容に応じた操作信号が第２通信部２７を介して電子ペーパー２に送られるようにしてもよいし、電子ペーパー２に簡易な操作部を設けて、当該操作部が操作者の操作を受け付けるようにしてもよい。この操作に応じて、電子ペーパー２のＣＰＵ１１は、表示部２５の全面に白色を表示させる（ステップＳＡ０１）。このとき、表示部２５に表示された白色領域の中には、不良表示素子によって黒色が表示されている領域が点在している。
次に、画像処理システム９の動作を説明する。
（Ｂ−１：不良表示素子の位置情報を登録する動作）
図７は、表示面全面の不良表示素子の位置を検出し、その位置情報を電子ペーパー２の不良表示素子位置テーブル２４１へ記述するときの動作の流れを説明するシーケンス図である。
図７において、まず、操作者の操作に応じて、電子ペーパー２の表示面の全面に白色が表示される。これは例えば、スキャナ３における操作内容に応じた操作信号が第２通信部２７を介して電子ペーパー２に送られるようにしてもよいし、電子ペーパー２に簡易な操作部を設けて、当該操作部が操作者の操作を受け付けるようにしてもよい。この操作に応じて、電子ペーパー２のＣＰＵ１１は、表示部２５の全面に白色を表示させる（ステップＳＡ０１）。このとき、表示部２５に表示された白色領域の中には、不良表示素子によって黒色が表示されている領域が点在している。
ここで、図８（ａ）は、表示部２５の表示面全面に白色を表示したときに、黒色の不良表示素子が点在している様子を例示した図である。この図８（ａ）に示したように、ほとんどの領域で白色が表示されている中にあって、いくつかの領域においては黒色が表示されている。この黒色の領域が不良表示素子に相当する。よって、表示面を撮像した撮像画像に含まれる色（白色及び黒色）の違いに基づいて、不良表示素子を検出することが可能である。
次に、操作者は、電子ペーパー２をスキャナ３の画像読取面に置いて、スキャナ３の操作部を操作して、電子ペーパー２の表示部２５の表示面を読み取るよう指示すると、スキャナ３に内蔵された光学読取装置が表示部２５の表示面を読み取る（ステップＳＡ０２）。つまり、光学読取装置は表示面に光を照射し、その反射光の受光強度に応じた撮像画像データを生成する。そして、スキャナ３は、生成した撮像画像データを、通信ケーブルを介して電子ペーパー２に送信する（ステップＳＡ０３）。電子ペーパー２のＣＰＵ２１は、第２通信部２７によって受信（取得）された撮像画像データに対して画像解析を行い、不良表示素子を検出して、その位置を表す位置情報を生成する（ステップＳＡ０４）。具体的には、ＣＰＵ２１は、黒色で表示されている領域であって、予め決められた大きさの範囲内に収まる領域を不良表示素子に相当する領域（以下、不良表示素子領域という）として検出し、抽出した領域の重心の座標値を求めることで、不良表示素子の位置を表す位置情報を生成する（ステップＳＡ０４）。この位置情報は、例えば、矩形の表示面のいずれかの頂点を原点としたｘｙ座標系の座標値によって表されている。そして、電子ペーパー２のＣＰＵ１２は、これらの位置情報を、常時黒色を表示し続ける不良表示素子（以下、黒色不良表示素子という）の位置情報（第２位置情報）として、記憶部２４の不良表示素子位置テーブル２４１に記述する（ステップＳＡ０５）。
ここで、このステップＳＡ０４の処理について詳細に説明する。
ＣＰＵ２１は、まず、第２通信部２７によって取得した撮像画像データが表す撮像画像を、同一色の連続領域にそれぞれ分離する。ＣＰＵ２１は、この領域分離の際には、例えば同一色の連続領域に共通のラベルを割り当てる周知のラベリング処理などを用いればよい。例えば図８（ａ）に例示した表示面に対して上記の領域分離処理が行われると、白色の領域ｗ１と、黒色の領域ｂ１，ｂ２，ｂ３，・・・ｂＮ（Ｎは整数）とに分離されることになる。上述したように、電気泳動素子Ｐの大きさは、ばらつきがあるものの、おおよそ数十ミクロン程度であるから、ＣＰＵ２１は、領域分離処理によって分離された複数の領域のうち、例えば２０ミクロンから７０ミクロンの範囲に収まる大きさの領域を抽出することで、不良表示素子領域を抽出することができる。例えば図８（ａ）の場合、白色の領域ｗ１は、撮像画像の全域のほとんどの面積を占めているから、ＣＰＵ２１はこの領域Ｗ１をは２０ミクロンから７０ミクロンの範囲に収まらないと判断する。一方、黒色の領域ｂ１，ｂ２，ｂ３，・・・ｂＮは、白色の領域ｗ１と比較すると圧倒的に小さい面積であるが、これらがそれぞれ２０ミクロンから７０ミクロンの範囲に収まる場合には、ＣＰＵ２１は、これらを全て不良表示素子領域として抽出する。そして、ＣＰＵ２１は、矩形の表示面のいずれかの頂点（例えば図８（ａ）の左上隅の頂点Ｏ）を原点としたｘｙ座標系に従って、抽出した不良表示素子領域ｂ１，ｂ２，ｂ３・・・ｂＮのそれぞれの重心の位置を表す座標値（第２位置情報）を求め、これを、不良表示素子の位置情報として、記憶部２４の不良表示素子位置テーブル２４１に記述する。
ＣＰＵ２１は、まず、第２通信部２７によって取得した撮像画像データが表す撮像画像を、同一色の連続領域にそれぞれ分離する。ＣＰＵ２１は、この領域分離の際には、例えば同一色の連続領域に共通のラベルを割り当てる周知のラベリング処理などを用いればよい。例えば図８（ａ）に例示した表示面に対して上記の領域分離処理が行われると、白色の領域ｗ１と、黒色の領域ｂ１，ｂ２，ｂ３，・・・ｂＮ（Ｎは整数）とに分離されることになる。上述したように、電気泳動素子Ｐの大きさは、ばらつきがあるものの、おおよそ数十ミクロン程度であるから、ＣＰＵ２１は、領域分離処理によって分離された複数の領域のうち、例えば２０ミクロンから７０ミクロンの範囲に収まる大きさの領域を抽出することで、不良表示素子領域を抽出することができる。例えば図８（ａ）の場合、白色の領域ｗ１は、撮像画像の全域のほとんどの面積を占めているから、ＣＰＵ２１はこの領域Ｗ１をは２０ミクロンから７０ミクロンの範囲に収まらないと判断する。一方、黒色の領域ｂ１，ｂ２，ｂ３，・・・ｂＮは、白色の領域ｗ１と比較すると圧倒的に小さい面積であるが、これらがそれぞれ２０ミクロンから７０ミクロンの範囲に収まる場合には、ＣＰＵ２１は、これらを全て不良表示素子領域として抽出する。そして、ＣＰＵ２１は、矩形の表示面のいずれかの頂点（例えば図８（ａ）の左上隅の頂点Ｏ）を原点としたｘｙ座標系に従って、抽出した不良表示素子領域ｂ１，ｂ２，ｂ３・・・ｂＮのそれぞれの重心の位置を表す座標値（第２位置情報）を求め、これを、不良表示素子の位置情報として、記憶部２４の不良表示素子位置テーブル２４１に記述する。
以上により、電子ペーパー２の黒色不良表示素子の位置情報が不良表示素子位置テーブル２４１に記述される。同様にして、操作者は電子ペーパー２の全面に黒色が表示されるように操作した上で、スキャナ３に電子ペーパー２の表示部２５の表示面全面を読み取らせ、常時白色を表示し続ける不良表示素子（以下、白色不良表示素子という）の位置情報（第２位置情報）を生成して不良表示素子位置テーブル２４１に記述する。ここで、図８（ｂ）は、表示部２５の全面に黒色を表示したときに、白色を表示している白色不良表示素子が点在している様子を例示した図である。この図８（ｂ）に示したように、ほとんどの領域で黒色が表示されている中にあって、いくつかの微小領域においては白色が表示されている。この白色の微小領域が白色不良表示素子に相当する。よって、ＣＰＵ２１は、白色で表示されている微小領域を不良表示素子として検出し、検出した不良表示素子の位置を表す位置情報を生成して不良表示素子位置テーブル２４１に記述すればよい。
（Ｂ−２：手書き入力の動作）
次に、図９は、電子ペン１により電子ペーパー２に手書き入力をする動作の流れを説明するシーケンス図である。
図９において、まず、操作者が、電子ペン１のペン先を電子ペーパー２の表示体２５２の表示面にあて、その表示面上に沿って移動させると、電子ペン１のセンサ１４は、自身がペンの内部へ押される力を検知して、オン信号を出力する。このオン信号を受け取った電子ペン１のＣＰＵ１１は、カメラ１５に対し、撮像を開始する命令を送信する（ステップＳＢ０１）。カメラ１５は、この命令を受け取ると、ペン先が向いている方向にある表示面を撮像し（ステップＳＢ０２）、その撮像画像データを生成する。ＣＰＵ１１は、通信部１６を介して、この撮像画像データを電子ペーパー２に送信する（ステップＳＢ０３）。ここで、カメラ１５が撮像する領域は、所定の大きさを有しており、前述したように例えば直径５ｍｍ程度の円形である。電気泳動素子Ｐの径はおおよそ数十ミクロン程度であるから、このカメラ１５が１度に撮像した領域には、数千〜数万の電気泳動素子Ｐが含まれている。また、画素電極ＰＥの大きさを電気泳動素子Ｐの大きさとおおよそ同じ程度とすると、このカメラ１５が１度に撮像した領域には、電気泳動素子Ｐと同じく、数千〜数万の画素電極ＰＥが含まれている。
次に、図９は、電子ペン１により電子ペーパー２に手書き入力をする動作の流れを説明するシーケンス図である。
図９において、まず、操作者が、電子ペン１のペン先を電子ペーパー２の表示体２５２の表示面にあて、その表示面上に沿って移動させると、電子ペン１のセンサ１４は、自身がペンの内部へ押される力を検知して、オン信号を出力する。このオン信号を受け取った電子ペン１のＣＰＵ１１は、カメラ１５に対し、撮像を開始する命令を送信する（ステップＳＢ０１）。カメラ１５は、この命令を受け取ると、ペン先が向いている方向にある表示面を撮像し（ステップＳＢ０２）、その撮像画像データを生成する。ＣＰＵ１１は、通信部１６を介して、この撮像画像データを電子ペーパー２に送信する（ステップＳＢ０３）。ここで、カメラ１５が撮像する領域は、所定の大きさを有しており、前述したように例えば直径５ｍｍ程度の円形である。電気泳動素子Ｐの径はおおよそ数十ミクロン程度であるから、このカメラ１５が１度に撮像した領域には、数千〜数万の電気泳動素子Ｐが含まれている。また、画素電極ＰＥの大きさを電気泳動素子Ｐの大きさとおおよそ同じ程度とすると、このカメラ１５が１度に撮像した領域には、電気泳動素子Ｐと同じく、数千〜数万の画素電極ＰＥが含まれている。
電子ペーパー２のＣＰＵ２１は、電子ペン１の通信部１６から送信された撮像画像データを第１通信部２６によって取得すると、これに基づいて、この撮像画像データが表す撮像画像の表示面上の位置を特定する撮像位置特定処理を行う（ステップＳＢ０４）。この撮像位置特定処理については詳しくは後述するが、これにより、電子ペン１のペン先が表示面上のどこを指し示しているかがが特定されることになる。そして、ＣＰＵ２１は、記憶部２４の電極位置テーブル２４２を参照し、電子ペン１のペン先の位置とほぼ同じ位置にある画素電極ＰＥを特定するとともに、表示部２５の駆動部２５１に対してその画素電極ＰＥを指定した描画命令を送信する。この描画命令を受けた駆動部２５１は、ＣＰＵ２１が特定した画素電極ＰＥ及びその近傍にある所定数の画素電極ＰＥを駆動して、これらの画素電極ＰＥに近接する複数の電気泳動素子Ｐを駆動する（ステップＳＢ０５）。これにより、操作者が電子ペン１のペン先で指し示した位置に所定色（例えば背景色が白色の場合には所定色を黒色とする）の点画像が表示される。
電子ペン１は、ＣＰＵ１１に内蔵されたタイマに従って、所定周期毎に上述の表示面を撮像し、撮像画像データを生成してこれを電子ペーパー２に送信することで、上述したステップＳＢ０２からステップＳＢ０５までの処理が繰り返し行われる。これらの処理が短期間の間に繰り返し行われることで、操作者が電子ペン１のペン先で指し示した位置に表示された点画像が表示面上で線画像として連なる。よって、表示面においてはペン先の軌跡が線として表示されることになり、操作者は所望の文字や図形を描くことができる。
（Ｂ−３：撮像位置特定処理の動作）
次に、図１０は、上述したステップＳＢ０４の撮像位置特定処理の動作の流れを説明するフローチャートである。
図９で説明したように、電子ペン１は表示面の撮像画像データを所定周期毎に電子ペーパー２に送信してくるので、電子ペーパー２のＣＰＵ２１は、第１通信部２６を介して、これを定期的に取得することになる（ステップＳＣ０１；ＹＥＳ）。そして、ＣＰＵ２１は、前述した不良表示素子の位置情報を登録するときと同様に、取得した撮像画像データが表す撮像画像を、同一色の連続領域にそれぞれ分離する（ステップＳＣ０２）。ＣＰＵ２１は、この領域分離の際に、例えば同一色の連続領域に共通のラベルを割り当てる周知のラベリング処理などを用いればよい。
次に、図１０は、上述したステップＳＢ０４の撮像位置特定処理の動作の流れを説明するフローチャートである。
図９で説明したように、電子ペン１は表示面の撮像画像データを所定周期毎に電子ペーパー２に送信してくるので、電子ペーパー２のＣＰＵ２１は、第１通信部２６を介して、これを定期的に取得することになる（ステップＳＣ０１；ＹＥＳ）。そして、ＣＰＵ２１は、前述した不良表示素子の位置情報を登録するときと同様に、取得した撮像画像データが表す撮像画像を、同一色の連続領域にそれぞれ分離する（ステップＳＣ０２）。ＣＰＵ２１は、この領域分離の際に、例えば同一色の連続領域に共通のラベルを割り当てる周知のラベリング処理などを用いればよい。
ここで、図１１は、撮像画像データが表す撮像画像を例示した図である。
図１１に例示した撮像画像に対して上記の領域分離処理が行われると、白色の領域Ｗ１と、黒色の領域Ｂ１，Ｂ２，Ｂ３，・・・ＢＮ（Ｎは整数）とに分離されることになる。
そして、図１０において、電子ペーパー２のＣＰＵ２１は、上記領域分離処理によって分離された複数の領域から、予め決められた大きさの範囲内に収まる不良表示素子領域を抽出し、その領域の重心の座標値を割り出してＲＡＭ２３に記憶する（ステップＳＣ０３）。
図１１に例示した撮像画像に対して上記の領域分離処理が行われると、白色の領域Ｗ１と、黒色の領域Ｂ１，Ｂ２，Ｂ３，・・・ＢＮ（Ｎは整数）とに分離されることになる。
そして、図１０において、電子ペーパー２のＣＰＵ２１は、上記領域分離処理によって分離された複数の領域から、予め決められた大きさの範囲内に収まる不良表示素子領域を抽出し、その領域の重心の座標値を割り出してＲＡＭ２３に記憶する（ステップＳＣ０３）。
例えば図１１の場合、白色の領域Ｗ１は、撮像画像の全域のほとんどの面積を占めているから、ＣＰＵ２１はこの領域Ｗ１を、予め決められた、２０ミクロンから７０ミクロンの範囲に収まらないと判断する。一方、黒色の領域Ｂ１，Ｂ２，Ｂ３，・・・ＢＮは、白色の領域Ｗ１と比較すると圧倒的に小さい面積であるが、これらがそれぞれ２０ミクロンから７０ミクロンの範囲に収まる場合には、ＣＰＵ２１は、これらを全て不良表示素子領域として抽出する。そして、ＣＰＵ２１は、例えば撮像画像全体の中心（図中×印）を原点としたＸＹ座標系に従って、抽出した不良表示素子領域Ｂ１，Ｂ２，Ｂ３・・・ＢＮのそれぞれの重心の位置を表す座標値（第１位置情報）を求めてＲＡＭ２３に記憶する。これにより、ＲＡＭ２３には、電子ペン１の１回の撮像によって得られた直径約５ｍｍ程度の画像領域に含まれる、不良表示素子の配置パターンが記憶されることになる。
次に、ＣＰＵ２１は、ＲＡＭ２３に記憶された不良表示素子の配置パターンと、不良表示素子位置テーブル２４１に記述された位置情報とを逐一照合していき（ステップＳＣ０４）、電子ペン１から取得した撮像画像の位置を、電子ペーパー２の表示体２５２の表示面におけるｘｙ座標値（表示面の頂点を原点としたｘｙ座標系における座標値）として特定する（ステップＳＣ０５）。具体的には、ＣＰＵ２１は、ＲＡＭ２３に記憶された或る１つの座標値を、不良表示素子位置テーブル２４１に記述された位置情報のうちの１つに一致すると仮定し、ＲＡＭ２３に記憶されたその他の座標値が、不良表示素子位置テーブル２４１に記述されたいずれかの位置情報に一致するか否かという判断を行う。
そして、両者が一致しなければ、ＣＰＵ２１は、ＲＡＭ２３に記憶された上記或る１つの座標値を、不良表示素子位置テーブル２４１に記述された別の１つの位置情報に一致すると仮定して上記と同様の判断を行う。この判断を、上記の仮定の対象となる座標値及び位置情報の組み合わせを順次変更しながら、ＲＡＭ２３に記憶された不良表示素子の配置パターンと不良表示素子位置テーブル２４１に記述された位置情報とが一致するまで、繰り返し行う。なお、この場合、両者が完全一致しなくても、両者の差分が予め決められた閾値以内に収まる場合には、一致するとみなしてもよい。そして、両者が一致した場合、ＣＰＵ２１は、図１１に示したような領域Ｂ１，Ｂ２，Ｂ３・・・ＢＮのｘｙ座標値をそれぞれ特定することができるから、これらのｘｙ座標値から、図１１に示した撮像画像の中心（図中×印）のｘｙ座標値を算出する。このようにして算出されたｘｙ座標値が、表示面における撮像画像の位置を表す位置情報となる。
以上説明した実施形態によれば、表示体２５２の表示面全面に点在する不良表示素子の位置を予め記憶しておき、この記憶内容と、電子ペン１によって撮像した表示面の一部の領域に含まれる不良表示素子の位置とを照合することで、電子ペン１の撮像画像の表示面上の位置を特定して、その位置に対応する表示素子を駆動する。これにより、操作者が電子ペン１を用いて、電子ペーパー２の表示面に文字や図形等を描くと、電子ペン１のペン先が描いた軌跡が表示されることになるので、操作者はあたかも、ペンによって紙に手書き入力をするように、文字等を電子ペーパー２に記入することができる。そして、このようにして記入された文字等を示すデータは電子データとして扱うことができるため、これらの文字等の加工、解析および再利用などを容易に行うことができる。
さらに、実施形態では、操作者はスキャナ３を用いることによって、表示体２５２の表示面全面に点在する不良表示素子の位置を電子ペーパー２に記憶させておくことが可能である。よって、例えば工場出荷時などの時点で、表示面全面における不良表示素子の位置を電子ペーパー２に予め記憶させておかなくても、ユーザが電子ペーパー２を利用するときに、適宜、不良表示素子の位置を電子ペーパー２に記憶させることができる。
さらに、実施形態では、操作者はスキャナ３を用いることによって、表示体２５２の表示面全面に点在する不良表示素子の位置を電子ペーパー２に記憶させておくことが可能である。よって、例えば工場出荷時などの時点で、表示面全面における不良表示素子の位置を電子ペーパー２に予め記憶させておかなくても、ユーザが電子ペーパー２を利用するときに、適宜、不良表示素子の位置を電子ペーパー２に記憶させることができる。
（Ｃ：変形例）
上述の実施形態を以下のように変形してもよい。
（１）画像処理システム９は、電子ペン１と、電子ペーパー２と、スキャナ３という３つの構成を有していたが、これに限らず、これらの構成が実現する各機能を、１つの装置に集中化してもよいし、さらに複数の装置に分散化してもよい。
上述の実施形態を以下のように変形してもよい。
（１）画像処理システム９は、電子ペン１と、電子ペーパー２と、スキャナ３という３つの構成を有していたが、これに限らず、これらの構成が実現する各機能を、１つの装置に集中化してもよいし、さらに複数の装置に分散化してもよい。
（２）上述の実施形態においては、各電気泳動素子Ｐには、白色と黒色の２色に分けられた複数の顔料粒子を含む分散媒ＤＭが封入されていたが、この顔料粒子の色は、１色のみでもよいし、白色や黒色以外であってもよい。例えば１色の場合、その顔料粒子を分散させる分散媒ＤＭを当該顔料粒子の色と異なる光透過性の無い色に着色しておけばよい。このようにすると、画素電極ＰＥと共通電極ＣＥとの間に電圧をかけることによって、顔料粒子が表面側に移動すれば、その色が表面に表示され、顔料粒子が裏面側に移動すれば、分散媒ＤＭの色が表面に表示されるので、駆動電圧に応じた発色がなされるように、電気泳動素子を駆動させることができる。
（３）上述の実施形態においては、表示面の全面における不良表示素子の位置情報を登録する際に、スキャナ３が生成した撮像画像データを、通信ケーブルを介して電子ペーパー２に送信し（図７のステップＳＡ０３）、電子ペーパー２のＣＰＵ２１が、送信されてきた撮像画像データに対して画像解析を行って不良表示素子の位置情報を生成していた（図７のステップＳＡ０４）。この不良表示素子の位置情報を生成する処理を、スキャナ３が上記と同様の手順で行ってもよい。この場合、スキャナ3は撮像画像データではなく、生成した不良表示素子の位置情報を電子ペーパー２に送信し、電子ペーパ−２のＣＰＵ２１は、送信されてきた不良表示素子の位置情報を、記憶部２４の不良表示素子位置テーブルに記述する。すなわち、電子ペーパー２およびスキャナ３（或いは前述のとおり機能を分散化する場合には、これら以外の第３の装置を含む）の少なくともいずれか一方が、「全面撮像手段によって生成された撮像画像データに含まれる色の違いに基づいて、不良表示素子の位置を検出し、各々の当該位置を表す情報を、位置情報として生成する全面不良表示素子検出手段」として機能すればよい。
（４）上述の実施形態においては、手書き入力の際に、電子ペン１のＣＰＵ１１は通信部１６を介して撮像画像データを電子ペーパー２に送信していたが（図９のステップＳＢ０３）。このとき、電子ペン１は、撮像画像データではなく、不良表示素子に相当する領域の重心のＸＹ座標値（撮像画像の中心を原点としたＸＹ座標系における座標値）を計算して、これを電子ペーパー２に送信してもよい。この場合、図１０に示すステップＳＣ０１ないしＳＣ０３までの処理を電子ペン１のＣＰＵ１１が行い、電子ペーパー２のＣＰＵ２１は、図１０に示すステップＳＣ０４およびＳＣ０５の処理を行う。すなわち、電子ペン１および電子ペーパー２（或いは前述のとおり機能を分散化する場合には、これら以外の第３の装置を含む）の少なくともいずれか一方が「撮像画像データが表わす撮像画像に含まれる色の違いに基づいて、駆動手段によって駆動することができない不良表示素子の位置を検出し、各々の当該位置を表す複数の位置情報を生成する不良表示素子検出手段」として機能すればよい。
（５）上述の実施形態の撮像位置特定処理において、電子ペーパー２のＣＰＵ２１は、不良表示素子の配置パターンと、不良表示素子位置テーブル２４１に記述された位置情報とを逐一照合するようになっており、その照合の際の優先順位については特に規定していなかった。このとき、撮像位置特定処理は繰り返し行われるので、直前に行われた撮像位置特定処理で特定した撮像画像の位置を、その次の撮像位置特定処理において参考にしてもよい。具体的には、電子ペーパー２のＣＰＵ２１は、不良表示素子位置テーブル２４１に記述された位置情報を、直前に行われた撮像位置特定処理で特定した撮像画像の位置に近いものから順に並べ替え、この順に不良表示素子の配置パターンと比較すればよい。電子ペン１は人間の動作速度と比較して非常に短い周期で撮像を繰り返しているため、或る時の撮像位置と、その直前の撮像位置とは近接していることがほとんどである。よって、直前に特定した撮像画像の位置に近い位置から、その次の撮像位置特定処理を試みるのが合理的である。このようにすると、配置パターンの照合は、電子ペン１の撮像位置が存在する確率の高い、前回の撮像位置の近傍から優先して行われるため、撮像位置を特定するまでの時間が短縮され、処理速度が向上する。なお、前回の撮像位置の近傍から優先して照合が行うようにするのであれば、不良表示素子位置テーブル２４１に記述された位置情報を必ずしも並べ替える必要はない。
（６）上述の実施形態においては、電子ペーパー２のＣＰＵ２１は、撮像位置特定処理によって電子ペン１の撮像位置を特定すると、この位置とほぼ同じ位置にある画素電極ＰＥ及びその近傍にある所定数の画素電極ＰＥを、表示部２５の駆動部２５１によって駆動させていた。つまり、電子ペン１のペン先の位置に応じた処理の内容は描画処理であったが、この処理の内容はこれに限らず、撮像位置特定処理によって特定された位置に応じた処理であればどのようなものであってもよい。例えば、ＣＰＵ２１は、表示体２５２に、複数の処理名を列挙して表示すると共に、これら処理名のうちのいずれかを選択するためのチェックボックスなどをその処理名に対応させて表示する。操作者が、これらのチェックボックスのいずれかに電子ペン１のペン先を接触させると、ＣＰＵ２１は、上記撮像位置特定処理によってその撮像位置を特定する。そして、ＣＰＵは、特定された位置に対応する処理名を特定し、その処理を実行する。要するに、接触したことを検知して実行する処理に対して適用することが可能である。
（７）上述の実施形態の撮像位置特定処理においては、ＣＰＵ２１は、まず領域分離処理を行い（図１０のステップＳＣ０２）、その領域分離処理によって分離された複数の領域から、所定の大きさの範囲内に収まる領域を、不良表示素子領域として抽出していた。これは、表示面に画像が表示されていない場合に有効な方法であるが、例えば、表示面に点画像が表示されている場合であっても有効な方法である。後者の場合には、所定の大きさの範囲内に収まる領域を不良表示素子領域として抽出することで、それぞれの大きさのオーダーが異なる点画像と不良表示素子領域とを区別できるからである。
しかし、例えば上述したように、複数の処理名とチェックボックスとを併せて表示体２５２に表示しているような場合には、不良表示素子領域を精度良く抽出できないことがある。なぜなら、画像データに基づいた画像の輪郭部分においては、その画像を表示している正常な表示素子と、不良表示素子とを区別しづらいからである。
しかし、例えば上述したように、複数の処理名とチェックボックスとを併せて表示体２５２に表示しているような場合には、不良表示素子領域を精度良く抽出できないことがある。なぜなら、画像データに基づいた画像の輪郭部分においては、その画像を表示している正常な表示素子と、不良表示素子とを区別しづらいからである。
ここで、図１２は、電子ペン１のカメラ１５が、画像データに基づいた画像の輪郭部分を撮像したときの撮像画像を例示した図である。
図１２において、境界線Ｌは、記憶部２４などに記憶された画像データに基づいて表示された画像の輪郭を意味している。この境界線Ｌを境にして、その左側には黒色の領域が、その右側には白色の領域がそれぞれある程度以上の大きさで存在している。
次に、図１３は、この図１２で示した撮像画像のうち、破線で囲われた部分を拡大した図である。図１３に示すように、電気泳動素子Ｐ１およびＰ２は、黒色の領域に属しており、その素子の輪郭の内側全部が黒色に発色している。一方、電気泳動素子Ｐ３，Ｐ５は、左側が黒色の領域に属し、右側が白色の領域に属しているから、境界線Ｌを境にしてそれぞれ属する領域に応じた色に発色しているが、電気泳動素子Ｐ４だけは、この境界線Ｌ上にあるにもかかわらず、その素子の輪郭の内側全部が黒色に発色している。この電気泳動素子Ｐ４は不良表示素子であるから、画像の輪郭に相当する境界線Ｌとは異なる形状で表示されているのである。そこで、電子ペーパー２のＣＰＵ２１は、このような撮像画像データから、境界線Ｌと異なる形状部分を、周波数解析等の画像認識処理を用いて検出する。そして、電子ペーパー２のＣＰＵ２１は、検出した形状部分から電気泳動素子Ｐ４の輪郭を推測し、電気泳動素子Ｐ４の重心の位置を表す座標値を求めてＲＡＭ２３に記憶する。より具体的には、まず、ＣＰＵ２１は、図１４に示すような画像の輪郭、つまり黒色の領域と白色の領域との境界線Ｌとは異なる形状の部分ｌ１を検出する。この境界線Ｌは、要するに、画素電極ＰＥの形状の輪郭部分を連ねた線である。電子ペーパー２の記憶部２４には、画素電極ＰＥの形状を表すデータが記憶されており、ＣＰＵ２１は、境界線Ｌにおいて、このデータが表す形状と一致しない孤の部分ｌ１を検出する。次に、ＣＰＵ２１は、電気泳動素子Ｐ４の輪郭がほぼ円形であることに鑑みて、部分ｌ１の孤を延長した孤である部分ｌ２を計算により求める。そして、ＣＰＵ２１は、孤の部分ｌ１と孤の部分ｌ２からなる円の中心のＸＹ座標値を、不良表示素子（電気泳動素子Ｐ４）の位置を表す座標値としてＲＡＭ２３に記憶する。
図１２において、境界線Ｌは、記憶部２４などに記憶された画像データに基づいて表示された画像の輪郭を意味している。この境界線Ｌを境にして、その左側には黒色の領域が、その右側には白色の領域がそれぞれある程度以上の大きさで存在している。
次に、図１３は、この図１２で示した撮像画像のうち、破線で囲われた部分を拡大した図である。図１３に示すように、電気泳動素子Ｐ１およびＰ２は、黒色の領域に属しており、その素子の輪郭の内側全部が黒色に発色している。一方、電気泳動素子Ｐ３，Ｐ５は、左側が黒色の領域に属し、右側が白色の領域に属しているから、境界線Ｌを境にしてそれぞれ属する領域に応じた色に発色しているが、電気泳動素子Ｐ４だけは、この境界線Ｌ上にあるにもかかわらず、その素子の輪郭の内側全部が黒色に発色している。この電気泳動素子Ｐ４は不良表示素子であるから、画像の輪郭に相当する境界線Ｌとは異なる形状で表示されているのである。そこで、電子ペーパー２のＣＰＵ２１は、このような撮像画像データから、境界線Ｌと異なる形状部分を、周波数解析等の画像認識処理を用いて検出する。そして、電子ペーパー２のＣＰＵ２１は、検出した形状部分から電気泳動素子Ｐ４の輪郭を推測し、電気泳動素子Ｐ４の重心の位置を表す座標値を求めてＲＡＭ２３に記憶する。より具体的には、まず、ＣＰＵ２１は、図１４に示すような画像の輪郭、つまり黒色の領域と白色の領域との境界線Ｌとは異なる形状の部分ｌ１を検出する。この境界線Ｌは、要するに、画素電極ＰＥの形状の輪郭部分を連ねた線である。電子ペーパー２の記憶部２４には、画素電極ＰＥの形状を表すデータが記憶されており、ＣＰＵ２１は、境界線Ｌにおいて、このデータが表す形状と一致しない孤の部分ｌ１を検出する。次に、ＣＰＵ２１は、電気泳動素子Ｐ４の輪郭がほぼ円形であることに鑑みて、部分ｌ１の孤を延長した孤である部分ｌ２を計算により求める。そして、ＣＰＵ２１は、孤の部分ｌ１と孤の部分ｌ２からなる円の中心のＸＹ座標値を、不良表示素子（電気泳動素子Ｐ４）の位置を表す座標値としてＲＡＭ２３に記憶する。
この場合、画素電極ＰＥの形状は正方形に限定されない。
図１５は、この変形例における画素電極ＰＥの形状の一例を示す図である。図１５に示す例においては、画素電極ＰＥは概ね正方形であるが、一部の辺において、欠けた部分を有している。このような場合であっても、予め画素電極ＰＥの形状を電子ペーパー２の記憶部２４が記憶していることにより、上述と同様に、電気泳動素子Ｐとの形状の違いから不良表示素子を検出することができる。
以上のように、ＣＰＵ２１は、画像の輪郭部分からは、上記のような処理を行って不良表示素子を検出すればよいし、輪郭部分以外の領域（例えば１色で表示された画像の内側の領域）からは、実施形態と同様の手順で不良表示素子を検出すればよい。
図１５は、この変形例における画素電極ＰＥの形状の一例を示す図である。図１５に示す例においては、画素電極ＰＥは概ね正方形であるが、一部の辺において、欠けた部分を有している。このような場合であっても、予め画素電極ＰＥの形状を電子ペーパー２の記憶部２４が記憶していることにより、上述と同様に、電気泳動素子Ｐとの形状の違いから不良表示素子を検出することができる。
以上のように、ＣＰＵ２１は、画像の輪郭部分からは、上記のような処理を行って不良表示素子を検出すればよいし、輪郭部分以外の領域（例えば１色で表示された画像の内側の領域）からは、実施形態と同様の手順で不良表示素子を検出すればよい。
（８）上述の実施形態においては、表示体２５２の表示面全面に点在する不良表示素子の位置を予め記憶しておき、この記憶内容と、電子ペン１が撮像した撮像画像に含まれる不良表示素子の位置とを照合することで、電子ペン１の撮像画像の表示面上の位置を特定していた。このような位置に基づく照合に加えて、各々の電気泳動素子の大きさや形状が微妙に異なることに鑑み、各不良表示素子の大きさ又は形状に基づく照合を行ってもよい。
具体的には、ＣＰＵ２１は、不良表示素子の位置情報を登録する動作において、表示体２５２の表示面全面に点在する各不良表示素子の位置を不良表示素子位置テーブル２４１に記述する際に、各不良表示素子の大きさ又は形状の少なくともいずれか一方を調べて、それを表すデータを上記位置に対応付けて不良表示素子位置テーブル２４１に記述する。そして、ＣＰＵ２１は、撮像位置特定処理の動作において、電子ペン１が撮像した撮像画像から、予め決められた大きさの範囲内に収まる不良表示素子領域の座標値のほか、各領域の大きさ又は形状の少なくともいずれか一方を求める。そして、ＣＰＵ２１は、不良表示素子位置テーブル２４１に記述された位置情報及び上記大きさ又は形状と、撮像画像から抽出した不良表示素子領域の座標値及び大きさ又は形状とを照合して、一致するものを特定する。もちろんこの場合、両者が完全一致しなくても、両者の差分が予め決められた閾値以内に収まる場合には、一致するとみなしてもよい。
この態様によれば、不良表示素子を精度良く照合することができる。
具体的には、ＣＰＵ２１は、不良表示素子の位置情報を登録する動作において、表示体２５２の表示面全面に点在する各不良表示素子の位置を不良表示素子位置テーブル２４１に記述する際に、各不良表示素子の大きさ又は形状の少なくともいずれか一方を調べて、それを表すデータを上記位置に対応付けて不良表示素子位置テーブル２４１に記述する。そして、ＣＰＵ２１は、撮像位置特定処理の動作において、電子ペン１が撮像した撮像画像から、予め決められた大きさの範囲内に収まる不良表示素子領域の座標値のほか、各領域の大きさ又は形状の少なくともいずれか一方を求める。そして、ＣＰＵ２１は、不良表示素子位置テーブル２４１に記述された位置情報及び上記大きさ又は形状と、撮像画像から抽出した不良表示素子領域の座標値及び大きさ又は形状とを照合して、一致するものを特定する。もちろんこの場合、両者が完全一致しなくても、両者の差分が予め決められた閾値以内に収まる場合には、一致するとみなしてもよい。
この態様によれば、不良表示素子を精度良く照合することができる。
（９）上述の実施形態においては、電子ペン１のＣＰＵ１１は、センサ１４が出力したオン信号を受け取ると、カメラ１５に対し、撮像を開始する命令を送信していたが（図９のステップＳＢ０１）、カメラ１５に撮像を開始する命令を送信するタイミングや仕組みはこれに限られない。例えば、受光した像のコントラストを検出したり、光学センサを複数用いてペン先から電子ペーパー２の表示体２５２までの距離を算出したりすることで、撮像を開始する命令を送信するタイミングを決定してもよい。
また、センサ１４に連動して、カメラ１５が撮像を開始する際に、照明を点灯させてもよい。上述の電子ペーパー２は反射型の表示デバイスであるから、ペン先と表示体２５２との隙間がなくなると、撮像領域に光が当たりにくくなる虞があるからである。
また、センサ１４に連動して、カメラ１５が撮像を開始する際に、照明を点灯させてもよい。上述の電子ペーパー２は反射型の表示デバイスであるから、ペン先と表示体２５２との隙間がなくなると、撮像領域に光が当たりにくくなる虞があるからである。
（１０）上述の実施形態においては、カメラ１５の撮像のタイミングは周期的であったが、周期的でなくてもよく、例えば操作者が指定したときだけ撮像するというものであってもよい。また、電子ペン１が撮像画像データを送信するタイミングは撮像の都度であったが、他のタイミングで送信してもよい。例えば、電子ペン１は、所定回数分の撮像画像データをＲＡＭ１３に逐次記憶し、撮像画像データが示す画像の変化に応じて送信してもよい。
（１１）上述の実施形態において、不良表示素子の位置情報を登録する際には、スキャナ３が、表示面の全面を撮像していたが、この全面とは、操作者によって指定され得る領域の全面であれば足りる。例えば、表示面が、撮像位置に応じた処理を行う領域と、撮像位置に応じた処理を行わない領域とに分かれている場合には、表示面の全面とは、前者の撮像位置に応じた処理を行う領域である。
（１２）上述した実施形態では、表示体２５２の表示面は、複数の電気泳動素子が並べられることによって構成されていたが、これ以外の表示素子によって表示面が構成される表示体を用いてもよい。要するに、表示体が多数の表示素子によって構成され、かつ、或る程度の数の表示素子が不良表示素子となり得るのであれば、その不良表示素子の分布状況に基づいて、表示面上の位置を特定することができる。電気泳動素子の場合は、不良表示素子の割合が１〜５％であり、これは位置の検出に充分な程度の割合と言える。
（１３）本発明を上述したＣＰＵ１１及びＣＰＵ２１が実行するプログラムとして実現してもよい。また、これらプログラムは、磁気テープ、磁気ディスク、フレキシブルディスク、光記録媒体、光磁気記録媒体、ＣＤ（Compact Disk）、ＤＶＤ（Digital Versatile Disk）、ＲＡＭなどの記録媒体に記録した状態で提供し得る。
１…電子ペン、１１…ＣＰＵ、１２…ＲＯＭ、１３…ＲＡＭ、１４…センサ、１５…カメラ、１６…通信部、１７…電源部、１９…バス、２…電子ペーパー、２１…ＣＰＵ、２２…ＲＯＭ、２３…ＲＡＭ、２４…記憶部、２４１…不良表示素子位置テーブル、２４２…電極位置テーブル、２５…表示部、２５１…駆動部、２５２…表示体、２５２１…第１基板、２５２２…第２基板、２５２３…バインダ、２６…第１通信部、２７…第２通信部、２８…電源部、２９…バス、３…スキャナ、９…画像処理システム、ＢＧ…黒色顔料粒子、ＣＥ…共通電極、ＣＷ…カプセル壁、ＤＭ…分散媒、Ｐ…電気泳動素子、ＰＥ…画素電極、ＰＥ…電極、ＰＥ１，ＰＥ２…画素電極、ＷＧ…白色顔料粒子。
Claims (10)
- 複数の表示素子が並べられた表示面を有し、当該複数の表示素子をそれぞれ駆動手段により駆動して画像を表示する表示手段と、
前記表示面の一部の領域を撮像し、撮像画像を表す撮像画像データを生成する撮像手段と、
前記撮像画像データが表す撮像画像に含まれる色の違いに基づいて、前記駆動手段によって駆動することができない不良表示素子の位置を検出し、各々の当該位置を表す複数の第１位置情報を生成する不良表示素子検出手段と、
前記表示面の全面における各々の前記不良表示素子の位置を表す複数の第２位置情報を記憶した記憶手段と、
前記不良表示素子検出手段が生成した第１位置情報と、前記記憶手段が記憶している複数の第２位置情報とを照合して、前記表示面における前記撮像画像の位置を特定する位置特定手段と
を具備することを特徴とする画像処理システム。 - 前記表示素子には、着色された複数の帯電粒子を分散させた液体が封入されており、
前記表示手段は、前記表示素子に対する電界の方向を変化させて、当該表示素子に封入されている液体内の前記帯電粒子を移動させることにより、画像を表示する
ことを特徴とする請求項１に記載の画像処理システム。 - 前記表示面の全面を撮像し、撮像した撮像画像を表す撮像画像データを生成する全面撮像手段と、
前記全面撮像手段によって生成された撮像画像データに含まれる色の違いに基づいて、前記不良表示素子の位置を検出し、各々の当該位置を表す情報を、前記第２位置情報として生成する全面不良表示素子検出手段とを備え、
前記記憶手段は、前記全面不良表示素子検出手段によって生成された第２位置情報を記憶する
ことを特徴とする請求項１または２に記載の画像処理システム。 - 前記位置特定手段によって特定された位置に応じた処理を行う処理手段を備える
ことを特徴とする請求項１乃至３のいずれかに記載の画像処理システム。 - 駆動手段により駆動させられる複数の表示素子が並べられた表示面を撮像して撮像画像を表す撮像画像データを生成する撮像手段から、当該撮像画像データを取得する取得手段と、
前記撮像画像データが表す撮像画像に含まれる色の違いに基づいて、前記駆動手段によって駆動することができない不良表示素子の位置を検出し、各々の当該位置を表す複数の第１位置情報を生成する不良表示素子検出手段と
前記表示面の全面における各々の前記不良表示素子の位置を表す複数の第２位置情報を予め記憶する記憶手段と、
前記不良表示素子検出手段が生成した第１位置情報と、前記記憶手段が記憶している複数の第２位置情報とを照合して、前記表示面における前記撮像画像の位置を特定する位置特定手段と
を備えることを特徴とする位置検出装置。 - 前記不良表示素子検出手段は、前記撮像画像データが表す撮像画像を色毎の画像領域に分離し、分離した複数の画像領域のうち、予め決められた大きさの範囲内に収まる複数の画像領域の位置を、前記不良表示素子の位置として検出する
ことを特徴とする請求項５記載の位置検出装置。 - 前記不良表示素子検出手段は、
前記表示素子を駆動するための電極の形状を記憶しており、
前記撮像画像データが表す撮像画像において、それぞれ異なる色の画像領域の境界線を特定し、特定した当該境界線と記憶しておいた前記電極の形状とが一致しない位置を、前記不良表示素子の位置として検出する
ことを特徴とする請求項５に記載の位置検出装置。 - 前記位置特定手段によって特定された位置に応じた処理を行う処理手段を備える
ことを特徴とする請求項５または６に記載の位置検出装置。 - 前記記憶手段は、前記第２位置情報に加えて、各々の前記不良表示素子の大きさ又は形状の少なくとも一方を記憶しており、
前記不良表示素子検出手段は、複数の前記第１位置情報を生成するとともに、前記撮像画像において色毎に分離した複数の画像領域のうち、予め決められた大きさの範囲内に収まる複数の画像領域の大きさ又は形状を表す情報を生成し、
前記位置特定手段は、前記記憶手段が記憶する第２位置情報及び各々の前記不良表示素子の大きさ又は形状と、前記不良表示素子検出手段が生成した第１位置情報及び前記大きさ又は前記形状を表す情報とを照合することにより、前記表示面における前記撮像画像の位置を特定する
ことを特徴とする請求項６乃至８のいずれかに記載の位置検出装置。 - コンピュータを、
駆動手段により駆動させられる複数の表示素子が並べられた表示面を撮像して撮像画像を表す撮像画像データを生成する撮像手段から、当該撮像画像データを取得する取得手段と、
前記撮像画像データが表わす撮像画像に含まれる色の違いに基づいて、前記駆動手段によって駆動することができない不良表示素子の位置を検出し、各々の当該位置を表す複数の第１位置情報を生成する不良表示素子検出手段と
前記表示面の全面における各々の前記不良表示素子の位置を表す複数の第２位置情報を予め記憶する記憶手段と、
前記不良表示素子検出手段が生成した第１位置情報と、前記記憶手段が記憶している複数の第２位置情報とを照合して、前記表示面における前記撮像画像の位置を特定する位置特定手段と
して機能させるためのプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007314765A JP4924392B2 (ja) | 2007-12-05 | 2007-12-05 | 画像処理システム、位置検出装置およびプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007314765A JP4924392B2 (ja) | 2007-12-05 | 2007-12-05 | 画像処理システム、位置検出装置およびプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2009140159A true JP2009140159A (ja) | 2009-06-25 |
| JP4924392B2 JP4924392B2 (ja) | 2012-04-25 |
Family
ID=40870717
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2007314765A Expired - Fee Related JP4924392B2 (ja) | 2007-12-05 | 2007-12-05 | 画像処理システム、位置検出装置およびプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4924392B2 (ja) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003255919A (ja) * | 2002-02-28 | 2003-09-10 | Kokuyo Co Ltd | ディスプレイ設備 |
| JP2005092436A (ja) * | 2003-09-16 | 2005-04-07 | Casio Comput Co Ltd | 符号情報読み出し装置、そのプログラム、及びそれを利用したペン型データ入力装置 |
| JP2006023089A (ja) * | 2004-07-06 | 2006-01-26 | Toppan Printing Co Ltd | 前面板欠陥測定装置 |
| JP2009140158A (ja) * | 2007-12-05 | 2009-06-25 | Seiko Epson Corp | 位置検出システム、位置検出装置及びプログラム |
-
2007
- 2007-12-05 JP JP2007314765A patent/JP4924392B2/ja not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003255919A (ja) * | 2002-02-28 | 2003-09-10 | Kokuyo Co Ltd | ディスプレイ設備 |
| JP2005092436A (ja) * | 2003-09-16 | 2005-04-07 | Casio Comput Co Ltd | 符号情報読み出し装置、そのプログラム、及びそれを利用したペン型データ入力装置 |
| JP2006023089A (ja) * | 2004-07-06 | 2006-01-26 | Toppan Printing Co Ltd | 前面板欠陥測定装置 |
| JP2009140158A (ja) * | 2007-12-05 | 2009-06-25 | Seiko Epson Corp | 位置検出システム、位置検出装置及びプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4924392B2 (ja) | 2012-04-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109242820B (zh) | 机器学习装置、检查装置以及机器学习方法 | |
| US10997465B2 (en) | Information processing device, information processing method, and storage medium | |
| KR102322813B1 (ko) | 3d 실루엣 감지 시스템 | |
| JP5741160B2 (ja) | 表示制御装置、表示制御方法、およびプログラム | |
| KR100953606B1 (ko) | 화상 표시 장치, 화상 표시 방법 및 명령 입력 방법 | |
| CN109241818A (zh) | 附着物检测方法及装置和系统、附着物学习方法及装置、程序 | |
| Maro et al. | Event-based gesture recognition with dynamic background suppression using smartphone computational capabilities | |
| JP2008293405A (ja) | データ入力システム | |
| US7463763B2 (en) | Apparatus, method, and program for assisting in selection of pattern element for pattern matching | |
| EP3366101B1 (en) | Portable electronic apparatus and method for controlling thereof | |
| CN102708383A (zh) | 一种多模态比对功能的活体人脸检测系统与方法 | |
| JP2014203309A (ja) | 画像処理装置、制御方法およびプログラム | |
| US20100310123A1 (en) | Method and system for actively detecting and recognizing placards | |
| JP2007226577A (ja) | デジタルペンを利用したデータ入力処理システム、端末装置およびコンピュータプログラム | |
| JP4946839B2 (ja) | 位置検出システム、位置検出装置及びプログラム | |
| KR20210071806A (ko) | 컨포멀 코팅된 pcb에서 기포를 검출하는 방법 및 장치와 이를 위한 컴퓨터로 판독 가능한 기록매체 | |
| JP4924392B2 (ja) | 画像処理システム、位置検出装置およびプログラム | |
| CN116057500A (zh) | 用于光学位置确定装置的光学触笔 | |
| TW201309519A (zh) | 車道定位系統與方法 | |
| JPS6366446A (ja) | 異物検査装置 | |
| CN110795956A (zh) | 适应于安卓系统的彩色二维码检测方法和装置 | |
| Balwante et al. | Drowsiness Detection System: Integrating YOLOv5 Object Detection with Arduino Hardware for Real-Time Monitoring | |
| KR102542977B1 (ko) | Mr 시뮬레이션 기반 표지판 시인성을 평가하는 장치 및 그 방법 | |
| CN111316320A (zh) | 用于快速确定对象尺寸的方法和装置 | |
| EP4350284A1 (en) | Measurement device, measurement method, program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20101004 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111226 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120110 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120123 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150217 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |