JP6519082B2 - 画像処理装置 - Google Patents

Description

本発明は、取得した画像データの位置ずれ補正を行う画像処理装置に関するものである。

特許文献１には、無彩色の領域の読み取りにおいて、色ずれをより低減すると共に解像度をより高めることが記載されている。特許文献１のプリンターは、線順次読取処理によりＲＧＢ色空間の色データ（Ｒ値など）として読取原稿を読み取り、隣接する３色の色データから１画素の画素データを作成し、作成した画素データの輝度値と差分値などに基づいて読み取った領域のうち無彩色のエッジ部分を含む無彩色エッジ領域を特定する。特定した無彩色エッジ領域の画素に対しては、ＣＩＳユニットの読み取った位置に基づいて、生成した画素データに含まれる３色の色データから各々１つの色データを用いて３個の画素の無彩色画素データ（ＲＧＢ値）を生成する。一方、無彩色エッジ領域以外の画素に対しては、この画素に隣接する画素の色データを用い、補間処理（例えばバイリニア処理など）を行って３個の画素データを生成する。このように、画素データを拡大する。

特開２０１１−１４７０４４号公報

異なる色の光を順番に発光して相対的に移動する原稿から画像データを取得する場合、それぞれの色の光が発光するタイミングが異なり、その間に原稿は移動している。このため、ライン単位の画像データを生成する場合に、読取対象の文字、図形などのエッジ部分では、それぞれの色の発光するタイミング分だけ副走査方向にずれる。原稿の画像（原画像）に対して副走査方向の色が異なる（色がずれる）現象が発生し得る。したがって、発光のタイミングに依存した画像データを、原稿の画像により近くなるように補正することが要望されている。

本発明の一態様は、原稿に対し、副走査線方向に相対的に移動する読込ユニットにより画像データを取得する画像処理装置である。読込ユニットは、複数の色の光を出力する光源と、主走査線方向のラインに沿って並べられた撮像素子と、ライン周期を示す信号に基づいて光源から異なる色の光を順番に発光する点灯指示ユニットとを含む。画像処理装置は、第１のタイミングで発光する第１の色の光により得られた第１の色データと、第２のタイミングで発光する第２の色の光により得られた第２の色データとを含む原画像データを取得するユニットと、第１のタイミングで得られた第１の色データと、第１のタイミングの前後の第２のタイミングで得られた前後の第２の色データを、第１のタイミングに対する前後の第２のタイミングの時間差で補間した補正後の第２の色データとを含むライン単位の画像データを生成するユニットとを有する。

第２の色データは、第１の色データとは取得するタイミングが異なる。第１のタイミングを中心としたときの前後の第２のタイミングで得られた２つの第２の色データ（前後の第２の色データ）を時間差で補間し、補正後の第２の色データを、疑似的に第１のタイミングで得られた第２の色データとすることにより、原稿の原画像に対する色ずれのより少ない画像を再生できるライン単位の画像データを生成できる。

この装置においては、各色の色データを取得するタイミングで画像データを補正できるので、各色の色データを実際に取得したタイミングが得られれば、画像データを補正できる。このため、各色の光が発光するタイミングにばらつきや、変動がある場合においても、その都度、タイミングの差を補正した画像データを得ることができる。

この画像処理装置は、第１のタイミングに対する前後の第２のタイミングの時間差の変化を定期的にまたは断続的に取得するユニットを有する。タイミングの時間差は原稿の読込開始前に取得するだけでもよい。読み込み中に定期的にまたは断続的に取得することにより、光源の発光のタイミングに経時変化などがある場合にも対応できる。たとえば、ラインごとに各色の光の光源の点灯のタイミングがばらつくような場合であっても、この画像処理装置により、タイミングのばらつきによる色ずれを補正できる。このため、点灯のタイミングに関してそれほど精度の高くない読込ユニットを使用して高品質の画像データを生成できる。

取得するユニットは、受光素子を用いてタイミングを測定してもよい。読込ユニットは、点灯指示ユニットが異なる色の光を順番にオンオフするタイミングを示す信号を出力する第１のインタフェースを含んでもよい。時間差を取得するユニットは、ライン周期を示す信号と、第１のインタフェースを介して取得したオンオフするタイミングを示す信号とに基づいて、各色の光が発光するタイミングの時間差を算出するユニットを含んでもよい。

補間に用いる時間差の一例は、ライン周期を示す信号に対する第１の色の光のオンオフの時間幅の中心に対する、ライン周期を示す信号に対する第２の色の光のオンオフの時間幅の中心の時間差である。それぞれの色の光のオンオフの中心位置に基づいて補正するため、実際に原稿が読み込まれた、より正確な位置に基づいて画像データを補正できる。

本発明の他の態様の１つは、上記の画像処理装置と、読込ユニットと、原稿を読込ユニットに対して相対的に移動させる移動ユニットとを有するシステムである。システムの一例はスキャナ、複合装置である。

本発明の異なる他の態様の１つは、上記の画像処理装置により画像データを取得する方法である。この方法は、以下のステップを含む。
１．画像処理装置が、第１のタイミングで発光する第１の色の光により得られた第１の色データと、第２のタイミングで発光する第２の色の光により得られた第２の色データとを含む原画像データを取得すること。
２．第１のタイミングで得られた第１の色データと、第１のタイミングの前後の第２のタイミングで得られた前後の第２の色データを、第１のタイミングに対する前後の第２のタイミングの時間差で補間した補正後の第２の色データとを含むライン単位の画像データを生成すること。

この方法は、生成するステップに先立って、または並行して、第１のタイミングに対する前後の第２のタイミングの時間差の変化を定期的にまたは断続的に取得するステップを有する。読込ユニットが、点灯指示ユニットが異なる色の光を順番にオンオフするタイミングを示す信号を出力する第１のインタフェースを含む場合、時間差を取得するステップは、ライン周期を示す信号と第１のインタフェーを介して取得したオンオフするタイミングを示す信号とに基づいて、時間差を算出するステップを含んでいてもよい。

スキャナの概略構成を示すブロック図。 画像処理装置の概略構成を示すブロック図。 画像処理装置が画像データを補正する様子を示すタイムチャート。 スキャナの処理の概要を示すタイムチャート。 画像処理装置の処理の概要を示すフローチャート。

図１に、画像処理装置を含むスキャナの概略構成をブロック図により示している。以下では、画像処理装置を搭載したシステム（画像データ取得装置）としてイメージスキャナ１を対象として説明するが、システムは、プリンタ９などの機能を含めた複合機（ＭＦＰ）などあってもよい。

スキャナ１は、読込対象の原稿２から原画像データ４を取得するスキャナメカ１０と、スキャナメカ１０を制御するとともにスキャナメカ１０が取得した原画像データ４に適切な処理をしてスキャン結果５として出力する制御ボード（制御ユニット、メインボード）３０とを含む。スキャナメカ１０は、原稿２に対して副走査方向に相対的に移動しながら原画像データ４を出力する読込ユニット（ＣＩＳ（Ｃｏｎｔａｃｔ Ｉｍａｇｅ Ｓｅｎｓｏｒ）モジュール）２０と、原稿２を読込ユニット２０に対して相対的に移動する移動ユニット７とを含む。移動ユニット７の一例は、スキャナ１のガラス面（不図示）にセットされた原稿２に対し、読込ユニット２０を移動させるモータユニットである。移動ユニット７は、ＡＳＦ（オートシートフィーダ）であってもよく、両方の機能を備えていてもよい。

スキャナメカ１０は、画像の取り込みに関する全体の機能を制御するスキャナ制御マイコン１１を含む。スキャナ制御マイコン１１は、スキャナ１に設定された解像度に従ったライン周期を示す信号φＬを出力する機能１２と、ライン周期を示す信号（ライン周期信号）φＬにあわせて、読込ユニット２０にデータの取り込みをスタートさせる指示信号（シフト信号）φＳＨを出力する機能１３と、ライン周期にあわせて移動ユニット７の駆動を制御する機能１４とを含む。スキャナ制御マイコン１１は、制御ユニット３０との間で原画像データ４の入出力を制御する機能を含む。

読込ユニット２０は、複数の色の光を出力する光源２１と、撮像素子マトリクス（センサーマトリクス）２３とを含む。光源２１は、赤色（Ｒ）の光を発光する赤色ＬＥＤ２２Ｒと、緑色（Ｇ）の光を発光する緑色ＬＥＤ２２Ｇと、青色（Ｂ）の光を発光する青色ＬＥＤ２２Ｂとを含む。センサーマトリクス２３は、複数の撮像素子が主走査線方向のラインに沿って並べられた構成であり、一例は、複数のフォトダイオードが並べられたＣＭＯＳ型のイメージセンサである。光源２１と撮像素子マトリクス２３とによりＣＩＳユニット２６が構成される。

読込ユニット２０は、さらに、ライン周期信号φＬに基づいてＣＩＳユニット２６を制御するＣＩＳ制御ユニット（点灯指示ユニット）２７を含む。ＣＩＳ制御ユニット２７は、ＡＦＥ（Ａｎａｌｏｇ Ｆｒｏｎｔ Ｅｎｄ）とも呼ばれる。ＣＩＳ制御ユニット２７は、スキャナ制御マイコン１１からシフト信号φＳＨを受信すると、ライン周期信号φＬに同期させて光源２１のＬＥＤ２２Ｒ、２２Ｇおよび２２Ｂを順番にオンおよびオフする信号（オンオフ信号、点灯信号）φＯＮを生成し、光源２１に対して第１のインタフェース２９を介して出力する機能２８を含む。ＣＩＳ制御ユニット２７は、オンオフ信号φＯＮのタイミングに同期して、ＣＩＳユニット２６の撮像素子マトリクス２３からの信号を各色の色データ（色強度）３として受信し原画像データ４を生成する原画像データ生成機能２５を含む。

ＣＩＳ制御ユニット２７から出力される原画像データ４は、ｙ番目のライン周期信号φＬに対し、赤色ＬＥＤ２２Ｒが点灯したタイミングで得られた赤色のデータＲ（ｙ）と、緑色のＬＥＤ２２Ｇが点灯したタイミングで得られた緑色のデータＧ（ｙ）と、青色（Ｂ）赤色のＬＥＤ２２Ｂが点灯したタイミングで得られた青色のデータＢ（ｙ）とを含む。

制御ボード３０は、プロセッサ（メインコントローラ）３０ａと、プロセッサ３０ａのプログラム３０ｐを格納したり、作業領域となる格納空間を提供するメモリ３０ｂとを含む。プロセッサ３０ａは、プログラム３０ｐをロードすることにより画像処理装置（画像処理ユニット）３１としての機能を備え、ＣＩＳ制御ユニット２７により提供される原画像データ４を加工した画像データ５を出力する。画像データ５をプリンタ９に出力することにより原稿２をコピーできる。また、画像データ５を通信インタフェース８を介して外部に供給したり、ストレージに格納することにより様々な目的で使用できる。

図２に、画像処理装置３１の概略構成をブロック図により示している。画像処理装置３１は、ＣＩＳ制御ユニット２７から原画像データ４を受信するスキャナＩＦユニット（取得するユニット）３３と、原画像データ４を前処理する前段画像処理ユニット３４と、原画像データ４の色ずれを補正する色ずれ補正ユニット（生成するユニット）３２と、後段画像処理ユニット３５と、作業用のメモリ領域３６とを含む。前段画像処理ユニット３４は、光源２１の光量の不均一性や各画素に対するＣＩＳユニット２６の出力特性のばらつきなどを補正するシェーディング補正処理、各画素の輝度や彩度などを調整するγ補正処理などを行う。後段画像処理ユニット３５は、画像データを必要に応じて拡大や縮小する解像度変換処理を行う。プリンタ９に出力する場合は、プリンタ９の色空間の色値に適した画像データに画像データの形式を変換する色変換処理などを行う。

色ずれ補正ユニット３２は、ＲＧＢの各色の順番にＬＥＤ２２Ｒ、２２Ｇおよび２２Ｂが点灯することにより得られる各色のデータＲ（ｙ）、Ｇ（ｙ）およびＢ（ｙ）を、１ラインのデータを取得する際に中心のタイミング（第１のタイミング）で得られる緑色のデータＧ（ｙ）を基準に色ずれを補正する機能を含む。

図３に、各色のデータＲ（ｙ）、Ｇ（ｙ）およびＢ（ｙ）が取得される順番を模式的に示している。ｙライン目においては、タイミング（時刻）ＴＲ（ｙ）に赤色のデータＲ（ｙ）が取得され、次のタイミング（時刻）ＴＧ（ｙ）に緑色のデータＧ（ｙ）が取得され、次のタイミング（時刻）ＴＢ（ｙ）に青色のデータＢ（ｙ）が取得される。（ｙ＋１）ライン目においても同様の処理が繰り返される。

原画像データ４には、これらのタイミングで得られた色データＲ（ｙ）、Ｇ（ｙ）およびＢ（ｙ）が含まれる。したがって、中心のタイミング（第１のタイミング）ＴＧ（ｙ）の緑色のデータ（第１の色データ）Ｇ（ｙ）が取得された原稿２の位置を中心に考えると、前のタイミングＴＲ（ｙ）で得られた赤色のデータＲ（ｙ）は原稿２の副走査方向の少し前の位置の色データであり、後のタイミングＴＢ（ｙ）で得られた青色のデータＢ（ｙ）は原稿２の副走査方向の少し後の位置の色データである。

色ずれ補正ユニット３２は、赤色のデータに対し、緑色のタイミング（第１のタイミング）であるＴＧ（ｙ）の前後の赤色のタイミング（第２のタイミング）であるＴＲ（ｙ）およびＴＲ（ｙ＋１）の赤色のデータＲ（ｙ）およびＲ（ｙ＋１）を前後のタイミングＴＲ（ｙ）およびＴＲ（ｙ＋１）の時間差αおよび（１−α）で補間して、第１のタイミングＴＧ（ｙ）における赤色のデータＲ（ｙ´）を生成する。

同様に、色ずれ補正ユニット３２は、青色のデータに対し、緑色のタイミング（第１のタイミング）であるＴＧ（ｙ）の前後の青色のタイミング（第２のタイミング）であるＴＢ（ｙ−１）およびＴＢ（ｙ）の青色のデータＢ（ｙ−１）およびＢ（ｙ）を前後のタイミングＴＢ（ｙ−１）およびＴＢ（ｙ）の時間差（１−β）およびβで補間して、第１のタイミングＴＧ（ｙ）における青色のデータＢ（ｙ´）を生成する。

色ずれ補正ユニット３２における補間式は以下のように表される。
Ｒ（ｙ´）＝Ｒ（ｙ）×（１−α）＋Ｒ（ｙ＋１）×α・・・（１−１）
Ｇ（ｙ）＝Ｇ（ｙ） ・・・（１−２）
Ｂ（ｙ´）＝Ｂ（ｙ）×（１−β）＋Ｂ（ｙ−１）×β・・・（１−３）
αおよびβは時間差を規格化した係数であり、以下の式で表される。
α＝（ＴＧ（ｙ）−ＴＲ（ｙ））／（ＴＲ（ｙ＋１）−ＴＲ（ｙ））・・・（２−１）
β＝（ＴＢ（ｙ）−ＴＧ（ｙ））／（ＴＢ（ｙ）−ＴＢ（ｙ−１））・・・（２−２）
ここで、ＴＲ（ｙ）、ＴＧ（ｙ）、ＴＢ（ｙ）は、ｙライン目におけるＬＥＤ２２Ｒ，２２Ｇおよび２２Ｂの発光期間の中心時刻を表わし、ＴＲ（ｙ＋１）は、ｙ＋１ライン目におけるＬＥＤ２２Ｒの発光期間の中心時刻を表わし、ＴＢ（ｙ−１）は、ｙ−１ライン目におけるＬＥＤ２２Ｂの発光期間の中心時刻を表す。

この色ずれ補正により、微小に異なるタイミングで得られた各色のデータを、この場合であれば緑色のデータを中心として緑色のデータを取得したタイミングで得たデータとして補正できる。したがって、補正後のデータＲ（ｙ´）、Ｇ（ｙ）およびＢ（ｙ´）を含む画像データ５は、ＴＧ（ｙ）のタイミング（第１のタイミング）で各色のデータを取得したライン単位の画像データとして利用することができる。緑色のタイミングＴＧ（ｙ）の代わりに赤色のタイミングＴＲ（ｙ）を中心のタイミング（第１のタイミング）として緑色および青色のデータを補正してもよく、青色のタイミングＴＢ（ｙ）を第１のタイミングとして赤色および緑色のデータを補正してもよい。線形補間以外に、放物線補間や多項式補間などを採用してもよい。

ＣＩＳモジュール２０は、採用されるＬＥＤ光源２１とセンサーマトリクス２３との組み合わせにより色に対する感度が異なる。さらに、個体差もあり得る。したがって、ＣＩＳモジュール２０の製造メーカは、事前に各ユニットにおいて各色に対する感度の公差を小さくするように各色のＬＥＤの点灯時間を設定する。また、自動調整機能がついたＣＩＳモジュール２０においては白調整により各色のＬＥＤの点灯時間を自動調整できる。したがって、ＣＩＳモジュール２０において各色のＬＥＤが点灯するタイミングＴＲ（ｙ）、ＴＧ（ｙ）、ＴＢ（ｙ）はバリアブルになり得る。

図４に、各色のＬＥＤ２２Ｒ，２２Ｇおよび２２Ｂの点灯のタイミングの一例を示している。一般的に、緑色のＬＥＤ２２Ｇは発光強度が相対的に低いので、点灯時間が最も長く、次に赤色のＬＥＤ２２Ｒが長く、青色のＬＥＤ２２Ｂの点灯時間が最も短い。各色のデータＲ（ｙ）、Ｇ（ｙ）、Ｂ（ｙ）が取得されたタイミングＴＲ（ｙ）、ＴＧ（ｙ）、ＴＢ（ｙ）は、ＣＩＳ制御ユニット２７から出力されるオンオフ信号φＯＮをモニタリングし、各色のＬＥＤの点灯時間の中心で設定できる。

このため、画像処理装置３１は、各色の光の発光のタイミングを定期的にまたは断続的に取得し、上記の演算により、補正係数である時間差（α、β）を取得するユニット（補正係数取得ユニット）４０を含む。補正係数取得ユニット４０は、ＣＩＳ制御ユニット２７の第１のインタフェース２９から出力されるオンオフ信号φＯＮを受信して、クロック信号（不図示）に基づいて各色のＬＥＤ２２Ｒ，２２Ｇおよび２２Ｂのオンおよびオフのタイミング（時間）をカウントするオン期間カウンタ４１と、スキャナ制御マイコン１１から出力されるライン周期信号φＬを受信して、クロック信号を基準として原稿の移動にともなうライン周期をカウントするライン周期カウンタ４２と、オン期間カウンタ４１の値から、ＬＥＤ２２Ｒ、２２Ｇおよび２２Ｂの発光の中心位置（中心時刻、各色の発光のタイミング）ＴＲ（ｙ）、ＴＧ（ｙ）、ＴＢ（ｙ）を算出するタイミング算出ユニット４３と、前後のタイミングの時間差（α、β）を算出する時間差算出ユニット（補正量算出ユニット）４４とを含む。

色ずれ補正ユニット３２が前後のタイミング差αおよびβに基づいて色データ４を補間する方法は、式（１−１）〜（１−３）に示す。

ＣＩＳモジュール２０により得られた原画像データ４を、理想的な場合の１／３ずつずらして補正した（組み合わせた）だけでは、読取対象の文字、画像などのエッジ部分において、前後のタイミング差αおよびβに起因した位置ずれ（色ずれ）が発生する可能性がある。このシステム１においては、読込ユニットであるＣＩＳモジュール２０により取得された原画像データ４は、実際に得られたタイミングに基づき、その前後のタイミング差αおよびβで補間される。したがって、実際に各色が得られた原稿２の位置のずれが補正に反映され、原稿２の画像に対する色ずれの少ない画像データ５を生成し、出力できる。

図５に、画像処理装置３１の処理の概要をフローチャートにより示している。ステップ５１において、ライン周期カウンタ４２が、スキャナ制御マイコン１１から出力されるライン周期信号φＬを、クロック信号を基準にしてカウントする。ステップ５２において、オン期間カウンタ４１が、オンオフ信号φＯＮにより各色のＬＥＤ２２Ｒ、２２Ｇおよび２２Ｂの点灯時間とタイミングとをカウントする。

次に、ステップ５３において、ＲＧＢ各色の発光のタイミングＴＲ、ＴＧおよびＴＢを算出し、ステップ５４において、時間差算出ユニット４４が、緑色のタイミングＴＧを第１のタイミングとして、他の色のタイミングＴＲおよびＴＢを第２のタイミングとしてそれぞれの時間差αおよびβを算出する。そして、ステップ５５において、色ずれ補正ユニット３２が、式（１−１）〜（１−３）により、第１の色のデータＧ（ｙ）と、補正後の赤色データＲ（ｙ´）と、補正後の青色データＢ（ｙ´）とを含むライン単位の画像データ５を生成する。

なお、上記においては、ＣＩＳ制御ユニット２７から出力される各色のＬＥＤ２２Ｒ，２２Ｇおよび２２Ｂの点灯信号φＯＮを得て発光のタイミングおよび時間差を得る画像処理装置３１を説明したが、オンオフ信号φＯＮを取得する代わりに、センサーマトリクス２３またはオンオフモニタリング専用のセンサーで各ＬＥＤ２２Ｒ、２２Ｇおよび２２Ｂの発光の有無をモニターして発光のタイミングおよび時間差を算出するようにしてもよい。オンオフ信号φＯＮを外部出力する端子を持たないＣＩＳモジュール２０に対しても上記の方法により色ずれを補正することができる。

また、画像処理装置３１を搭載した装置の一例としてスキャナ１を説明しているが、画像処理装置３１を内蔵したシステムは、画像を取得してそのデータを外部出力する複合装置などであってもよい。

１ スキャナ
２０ 読込ユニット（ＣＩＳモジュール）
２１ 光源、 ２３ 撮像素子マトリクス、 ２７ ＣＩＳ制御ユニット（ＡＦＥ）
３１ 画像処理装置、 ３２ 生成するユニット（色ずれ補正ユニット）

Claims (6)

1. 原稿に対し、副走査線方向に相対的に移動する読込ユニットにより画像データを取得する画像処理装置であって、
   前記読込ユニットは、複数の色の光を出力する光源と、
   主走査線方向のラインに沿って並べられた撮像素子と、
   ライン周期を示す信号に基づいて前記光源から異なる色の光を順番に発光する点灯指示ユニットとを含み、
   当該画像処理装置は、第１のタイミングで発光する第１の色の光により得られた第１の色データと、第２のタイミングで発光する第２の色の光により得られた第２の色データとを含む原画像データを取得するユニットと、
   前記第１のタイミングで得られた前記第１の色データと、前記第１のタイミングの前後の前記第２のタイミングで得られた前後の第２の色データを、前記第１のタイミングに対する前記前後の前記第２のタイミングの時間差で補間した補正後の第２の色データとを含むライン単位の画像データを生成するユニットと、
   前記第１のタイミングに対する前記前後の第２のタイミングの前記時間差の変化を定期的にまたは断続的に取得するユニットとを有する、画像処理装置。
2. 請求項１において、
   前記読込ユニットは、前記点灯指示ユニットが前記異なる色の光を順番にオンオフするタイミングを示す信号を出力する第１のインタフェースを含み、
   前記取得するユニットは、前記ライン周期を示す信号と前記第１のインタフェースを介して取得した前記オンオフするタイミングを示す信号とに基づいて、前記時間差を算出するユニットを含む、画像処理装置。
3. 請求項２において、
   前記時間差は、前記ライン周期を示す信号に対する前記第１の色の光のオンオフの時間幅の中心に対する、前記ライン周期を示す信号に対する前記第２の色の光のオンオフの時間幅の中心の時間差を含む、画像処理装置。
4. 請求項１ないし３のいずれかに記載の画像処理装置と、
   前記読込ユニットと、
   前記原稿を前記読込ユニットに対して相対的に移動させる移動ユニットとを有するシステム。
5. 原稿に対し、副走査線方向に相対的に移動する読込ユニットにより画像データを画像処理装置が取得する方法であって、
   前記読込ユニットは、複数の色の光を出力する光源と、
   主走査線方向のラインに沿って並べられた撮像素子と、
   ライン周期を示す信号に基づいて前記光源から異なる色の光を順番に発光する点灯指示ユニットとを含み、
   当該方法は、
   前記画像処理装置が、第１のタイミングで発光する第１の色の光により得られた第１の色データと、第２のタイミングで発光する第２の色の光により得られた第２の色データとを含む原画像データを取得することと、
   前記第１のタイミングで得られた前記第１の色データと、前記第１のタイミングの前後の前記第２のタイミングで得られた前後の第２の色データを、前記第１のタイミングに対する前後の前記第２のタイミングの時間差で補間した補正後の第２の色データとを含むライン単位の画像データを生成することと、
   前記生成することに先立って、または並行して、前記第１のタイミングに対する前記前後の第２のタイミングの前記時間差の変化を定期的にまたは断続的に取得することとを有する、方法。
6. 請求項５において、
   前記読込ユニットは、前記点灯指示ユニットが前記異なる色の光を順番にオンオフするタイミングを示す信号を出力する第１のインタフェースを含み、
   前記取得することは、前記ライン周期を示す信号と前記第１のインタフェースを介して取得した前記オンオフするタイミングを示す信号とに基づいて、前記時間差を算出することを含む、方法。