JP3617907B2 - Image processing device - Google Patents
Image processing device Download PDFInfo
- Publication number
- JP3617907B2 JP3617907B2 JP19864997A JP19864997A JP3617907B2 JP 3617907 B2 JP3617907 B2 JP 3617907B2 JP 19864997 A JP19864997 A JP 19864997A JP 19864997 A JP19864997 A JP 19864997A JP 3617907 B2 JP3617907 B2 JP 3617907B2
- Authority
- JP
- Japan
- Prior art keywords
- page boundary
- document
- image
- shape
- reading
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 238000012545 processing Methods 0.000 title claims description 326
- 238000012937 correction Methods 0.000 claims description 215
- 230000003044 adaptive effect Effects 0.000 claims description 69
- 230000003287 optical effect Effects 0.000 claims description 40
- 230000008859 change Effects 0.000 claims description 27
- 238000001514 detection method Methods 0.000 description 75
- 238000000034 method Methods 0.000 description 45
- 230000008569 process Effects 0.000 description 33
- 238000010586 diagram Methods 0.000 description 29
- 238000003825 pressing Methods 0.000 description 28
- 238000004364 calculation method Methods 0.000 description 23
- 239000011521 glass Substances 0.000 description 12
- 239000000428 dust Substances 0.000 description 11
- 230000007246 mechanism Effects 0.000 description 11
- 238000012546 transfer Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 9
- 230000003028 elevating effect Effects 0.000 description 8
- 238000012888 cubic function Methods 0.000 description 7
- 238000009499 grossing Methods 0.000 description 6
- 238000003702 image correction Methods 0.000 description 6
- 230000009471 action Effects 0.000 description 5
- 238000009825 accumulation Methods 0.000 description 4
- 230000001174 ascending effect Effects 0.000 description 4
- 238000005452 bending Methods 0.000 description 4
- 210000000078 claw Anatomy 0.000 description 4
- 238000003672 processing method Methods 0.000 description 4
- 238000000926 separation method Methods 0.000 description 4
- 230000006399 behavior Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000005684 electric field Effects 0.000 description 3
- 239000002184 metal Substances 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 239000002344 surface layer Substances 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 206010044565 Tremor Diseases 0.000 description 1
- 238000003705 background correction Methods 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000011347 resin Substances 0.000 description 1
- 229920005989 resin Polymers 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Landscapes
- Control Or Security For Electrophotography (AREA)
- Image Processing (AREA)
- Facsimile Scanning Arrangements (AREA)
- Editing Of Facsimile Originals (AREA)
- Image Analysis (AREA)
Description
【0001】
【発明の属する技術分野】
本発明はイメージスキャナなどの画像読み取り装置、製本原稿画像形成装置、画像取り込み装置、パーソナルコンピュータのアプリケーションソフトウェアによる画像補正機能などに使用される画像処理装置に関する。
【0002】
【従来の技術】
製本原稿から複写機やスキャナなどで画像の取り込みを行う際には、図59に示すように製本原稿801の綴じ部が原稿台802上から浮くことにより焦点面から離れて画像歪み、影、ぼけ等の画像劣化などの不具合が発生する。特に、厚手の製本原稿ではその割合が多く、オペレータによる加圧作業(製本原稿801の綴じ部を原稿台802に加圧する作業)の負担や製本原稿綴じ部の破損が起こっている。
【0003】
一般的な複写機で用いられているフラットベットタイプのスキャナで製本原稿を読み取る際に発生する不具合は、図59に示すように▲1▼読み取り画像の主走査方向の縮み(文字、罫線が曲がる)、▲2▼副走査方向の縮み(文字がつぶれる)、▲3▼ピントずれ(文字がつぶれる)、▲4▼影(地肌が汚れる)に大別される。
【0004】
特開昭60ー65668号公報には、見開き本の副走査方向の長さを測定し、見開き本の綴じ込み部分における湾曲半径を求めて変形画像の処理を行うことにより、歪みのない画像の再生を図る画像処理方式が記載されている。特開昭60ー65669号公報には、本の綴じ込み部分における湾曲半径から本の綴じ込み部分の主走査位置の補正値を求め、その補正値に基づいて綴じ込み部分の読み取り情報の主走査方向の位置の補正をすることにより、画像の変形を補正する画像処理方式が記載されている。
【0005】
これらの画像処理方式では、見開きの製本原稿の読み取り画像における主走査方向及び副走査方向の綴じ部歪みを補正する手段を有し、綴じ込み部分の形状を半径rの形状として原稿長さと実際の長さより求めている。
また、製本原稿の頁めくりを行う装置において、製本原稿の読み取り画像データから頁と黒色の原稿台カバー部との濃度差により頁の上端部(境界)を自動的に検出し、頁上側の原稿範囲を検知してその範囲外を消去するものが提案されている。
【0006】
特開昭58ー130361号公報には、読み取り用受光器と対象物との間の距離を算出し、この距離に応じて読み取り用の受光器またはレンズと対象物との間の距離を制御することにより、厚い本などの立体物からなる対象物の表面の画像を読み取れるようにする画像読み取り装置が記載されている。特開昭61ー171272号公報、特開昭61ー237569号公報、特開平1ー232872号公報には、原稿の高さを測定する手段を設け、原稿の高さの変化量に応じて読み取りセンサと原稿との相対速度を制御することにより、画像データの歪みを補正するスキャナ装置及び読み取り装置が記載されている。これらは、原稿面の測距を行うセンサを別途設け、これを原稿に沿って走査して原稿との間の距離を測定している。
【0007】
特開平5ー161000号公報には、原稿の複数点の測距を行う測距手段と、原稿読み取りデータの補間を行う補間手段と、この補間手段の出力に応じて原稿の曲がり具合を補正する手段とを有するものが記載されている。特開平5ー161001号公報には、原稿の形状を測定する形状測定手段と、各画素の画像伸張率を演算する手段と、濃度再現補間をし画素伸張を行う伸張手段とを有するものが記載されている。
【0008】
特開平5ー161002号公報には、原稿の形状を測定する形状測定手段と、行方向(主走査方向)の曲がりを補正する手段とを有し、曲がり補正後にぼけを補正して伸張処理(副走査方向について)を行うものが記載されている。特開平5ー161003号公報には、原稿と原稿台との境界を検出する境界検出手段と、境界から所定の距離の点の出力を検出する出力検出手段と、読み取り出力を補正する手段とを備えたものが記載されている。
【0009】
特開平5ー161004号公報には、原稿台と所定間隔を置いて原稿を読み取る読み取り手段と、原稿と原稿台との境界を検出する境界検出手段と、この境界検出手段の出力により原稿の高さを検出する原稿高さ検出手段と、この原稿高さ検出手段の高さデータに応じた補正を行う補正手段とを備えたものが記載されている。特開平6ー164852号公報には、原稿と原稿台との境界を検出し、変倍率(主走査方向)を計算して像の歪みを補正するものが記載されている。
【0010】
特に、特開平5ー161003号公報、特開平5ー161004号公報には、原稿と原稿台との境界を検出し、これにより原稿高さを検出して画像を補正する点が記載されている。
これら特開平5ー161000号公報〜特開平5ー161004号公報、特開平6ー164852号公報記載のものは、製本原稿を見開き上向きに載置する。
【0011】
【発明が解決しようとする課題】
上記画像処理方式では、見開きの製本原稿の読み取り画像における主走査方向及び副走査方向の綴じ部歪みを補正する手段を有し、綴じ込み部分の形状を半径rの形状として原稿長さと実際の長さより求めているので、閉じ部の形状が正円となっている場合しか綴じ部歪みを正確に補正することができない。
【0012】
上記特開昭58ー130361号公報、特開昭61ー171272号公報、特開昭61ー237569号公報、特開平1ー232872号公報記載のものは、原稿面の測距を行うセンサを別途設け、これを原稿に沿って走査して原稿間距離を測定しなければならない。
【0013】
上記特開平5ー161000号公報〜特開平5ー161004号公報、特開平6ー164852号公報記載のものは、製本原稿を見開き上向きに載置するので、原稿面は全体に渡って湾曲し、原稿の境界検出によって見開き上向きの頁面の高さを全面に渡って計測し、湾曲した頁面の全てにおいて補正を行わなければならない。また、頁境界検出については、その具体的方法が開示されていない。
【0014】
本発明は、測距センサのような特別な検知手段を設けることなく、読み取り画像からの綴じ部形状認識により画像処理による湾曲原稿から平面原稿への復元を行うことができ、製本原稿綴じ部の浅い部分から深い部分まで頁境界位置を求めることができ、実際の綴じ部形状に対して正確に頁境界位置を求めることができ、頁境界があり得ない余計な部分で頁境界位置を求めずに正確に且つ速く頁境界位置を求めることができ、頁境界位置データを使った補正処理を高画質に実現することができ、画像濃度のばらつきに対して正確な頁境界位置を算出することができるとともに移動平均処理を簡易な処理回路で行うことが可能で濃度分布を滑らかにする平滑化フィルタと同様な効果を実現することができ、頁境界位置の誤検知を防止することができて原稿台上にほこりなどのゴミがある場合や読み取りデータにノイズ状の濃度ばらつきがある場合に有効であり、頁に文字や絵柄がある場合に有効であり、頁境界位置データを副走査方向に平均化して頁境界位置の配列のばらつきを抑制することができ、精度の良い綴じ部画像を復元することができ、頁内の文字や絵柄による頁境界部の位置の誤検出を防止することができ、頁境界位置を正しく検知することができ、頁境界位置データから見開き製本原稿の綴じ部深さを検出することができ、原稿載置位置を固定しないで綴じ部形状算出処理を実現でき、より正しい形状認識を行うことができて適用範囲を拡げることができ、真の形状算出に影響を与えない度合で綴じ部の位置によって適正な制限による補正処理を行うことができ、実際の製本原稿形状から好ましい処理を行うことができる画像処理装置を提供することを目的とする。
【0015】
【課題を解決するための手段】
上記目的を達成するため、請求項1記載の発明は、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを適応閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データにおける高濃度側の画素データと低濃度側の画素データから各読み取りライン毎の適応閾値を決定し、前記頁境界部読み取り手段の読み取りデータから頁境界部の位置を算出するものであり、測距センサのような特別な検知手段を設けることなく、読み取り画像からの綴じ部形状認識により画像処理による湾曲原稿から平面原稿への復元を行うことができ、製本原稿綴じ部の浅い部分から深い部分まで頁境界位置を求めることができる。
【0016】
請求項2記載の発明は、請求項1記載の画像処理装置において、前記頁境界部形状認識手段は、各読み取りライン毎に前記頁境界部読み取り手段の画像濃度データにおける前記製本原稿の外側部分の高濃度側の画素データと前記製本原稿の外枠部の低濃度側の画素データとを1対2に分けるデータを前記適応閾値とするものであり、実際の綴じ部形状に対して正確に頁境界位置を求めることができる。
【0017】
請求項3記載の発明は、請求項1記載の画像処理装置において、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの所定の範囲で前記頁境界部読み取り手段の画像濃度データと適応閾値を比較し、前記頁境界部読み取り手段の読み取りデータが所定の複数画素連続して適応閾値以上となる点を頁境界部の位置として算出するものであり、頁境界があり得ない余計な部分で頁境界位置を求めずに正確に且つ速く頁境界位置を求めることができる。
【0018】
請求項4記載の発明は、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データと閾値を比較し、この閾値と交差する点の隣接画素の濃度データより濃度分布を直線補間して読み取り最小画素より小さい単位で頁境界部の位置を算出するものであり、頁境界位置データを使った補正処理を高画質に実現することができる。
【0019】
請求項5記載の発明は、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを適応閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データの移動平均をとり、その移動平均をとった濃度データと閾値とを比較し、該移動平均をとった濃度データが所定の複数画素連続して閾値以上となる点を頁境界部の位置として算出するものであり、画像濃度のばらつきに対して正確な頁境界位置を算出することができるとともに移動平均処理を簡易な処理回路で行うことが可能で濃度分布を滑らかにする平滑化フィルタと同様な効果を実現することができる。
【0020】
請求項6記載の発明は、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを適応閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データの移動平均をとり、その移動平均をとった濃度データにおける高濃度側の画素データと低濃度側の画素データとの所定の比率から各読み取りライン毎の適応閾値を決定し、この適応閾値以上の画素データが所定の複数画素連続したら頁境界部の位置とするものであり、頁境界位置の誤検知を防止することができて原稿台上にほこりなどのゴミがある場合や読み取りデータにノイズ状の濃度ばらつきがある場合に有効である。
【0021】
請求項7記載の発明は、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを適応閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データにおける高濃度側の画素データと低濃度側の画素データとの所定の比率から各読み取りライン毎の適応閾値を決定し、前記高濃度側の画素データと前記低濃度側の画素データの発生した範囲で前記頁境界部読み取り手段の読み取りデータが所定の複数画素連続して適応閾値以上となる点を頁境界部の位置として算出するものであり、頁に文字や絵柄がある場合に有効である。
【0022】
請求項8記載の発明は、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを適応閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データの移動平均をとり、この移動平均をとった濃度データにおける前記高濃度側の画素データと前記低濃度側の画素データとの所定の比率から各読み取りライン毎の適応閾値を決定し、前記高濃度側の画素データと前記低濃度側の画素データの発生した範囲で前記頁境界部読み取り手段の読み取りデータが所定の複数画素連続して適応閾値以上となる点を頁境界部の位置として算出し、この頁境界部の位置のデータの移動平均をとって頁境界部の位置とするものであり、頁境界位置データを副走査方向に平均化して頁境界位置の配列のばらつきを抑制することができ、精度の良い綴じ部画像を復元することができる。
【0023】
請求項9記載の発明は、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを適応閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データにおける前記高濃度側の画素データと前記低濃度側の画素データとの所定の比率から各読み取りライン毎の適応閾値を決定し、前記高濃度側の画素データと前記低濃度側の画素データの発生した範囲であって、頁画像領域を検出する以前の範囲で前記頁境界部読み取り手段の読み取りデータが所定の複数画素連続して適応閾値以上となる点を頁境界部の位置として検出するものであり、頁内の文字や絵柄による頁境界部の位置の誤検出を防止することができる。
【0024】
請求項10記載の発明は、請求項9記載の画像処理装置において、前記頁境界部形状認識手段は、読み取りラインの画像濃度データにおける前記高濃度側の画素データのピークを検知し、このピーク値から所定のレベル以上の低濃度側の画素データを検知し、その後に前記高濃度側の画素データのピーク値以上の画素を検知したことにより頁画像領域と判定するものであり、頁境界位置を正しく検知することができる。
【0025】
請求項11記載の発明は、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記製本原稿形状認識手段は、前記頁境界部形状認識手段により検出した頁境界位置A、前記原稿画像読み取り手段及び前記頁境界部読み取り手段の光軸位置Akと焦点距離Pから製本原稿の綴じ部深さTを
T=P*A/(Ak−A)
なる式で算出するものであり、頁境界位置データから見開き製本原稿の綴じ部深さを検出することができる。
【0026】
請求項12記載の発明は、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記製本原稿形状認識手段は、前記頁境界部形状認識手段により検出した頁境界位置A、前記原稿画像読み取り手段及び前記頁境界部読み取り手段の光軸位置Akと焦点距離P、頁平面部の位置Kaから製本原稿の綴じ部深さTを
T=P*(A−Ka)/{(Ak−A)−(A−Ka)}
なる式で算出するものであり、原稿載置位置を固定しないで綴じ部形状算出処理を実現できる。
【0027】
請求項13記載の発明は、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記製本原稿形状認識手段は、前記頁境界部形状認識手段により検出した頁境界位置より製本原稿の読み取りライン毎の綴じ部深さを算出し、この算出した綴じ部深さにおける隣接した読み取りラインの綴じ部深さの変化量を所定の量以下に制限するものであり、より正しい形状認識を行うことができて適用範囲を拡げることができる。
【0028】
請求項14記載の発明は、請求項13記載の画像処理装置において、前記製本原稿形状認識手段は、前記隣接した読み取りラインの綴じ部深さの変化量を、その位置の綴じ部深さにより制限するものであり、真の形状算出に影響を与えない度合で綴じ部の位置によって適正な制限による補正処理を行うことができる。
【0029】
請求項15記載の発明は、請求項14記載の画像処理装置において、前記製本原稿形状認識手段は、前記隣接した読み取りラインの綴じ部深さの変化量を、その位置の綴じ部深さの1/80に制限するものであり、実際の製本原稿形状から好ましい処理を行うことができる。
【0030】
【発明の実施の形態】
図24は請求項1〜5に係る発明を適用したデジタル複写機からなる画像形成装置の一実施形態の概略を示す。このデジタル複写機は、画像読み取り装置としてのスキャナ400と、画像形成部としてのレーザプリンタからなる画像記録装置411と、後述する回路とを有する。スキャナ400は、平坦な原稿台403上に載置された製本原稿などの原稿を照明ランプ502により照明し、その反射光像をミラー群503〜505およびレンズ506を介して読み取りセンサー507に結像するとともに、照明ランプ502及びミラー群503〜505の移動により原稿を走査して原稿の画像情報を読み取り、電気的な画像信号に変換する。読み取りセンサー507で得られた画像信号は後述する回路を介してプリンタ411へ送られる。
【0031】
プリンタ411においては、露光手段としての書き込み光学ユニットからなる書き込み装置508は、上記画像信号を光信号に変換して感光体からなる像担持体、例えば感光体ドラム509に露光して原稿画像に対応した光書き込みを行うことにより静電潜像を形成する。書き込み光学ユニット508は、半導体レーザを発光駆動制御部で上記画像信号により駆動して画像信号により強度変調されたレーザ光を出射させ、このレーザ光を回転多面鏡510により偏向走査してf/θレンズ及び反射ミラー511を介して感光体ドラム509へ照射する。
【0032】
感光体ドラム509は、駆動部により回転駆動されて矢印の如く時計方向に回転し、帯電手段としての帯電器512により一様に帯電された後に、書き込み光学ユニット508による露光で静電潜像が形成される。この感光体ドラム509上の静電潜像は、現像装置513により現像されてトナー像となり、また、転写紙からなる転写材が複数の給紙部514〜518、手差し給紙部519のいずれかからレジストローラ520へ給紙される。
【0033】
レジストローラ520は感光体ドラム509上のトナー像にタイミングに合わせて転写紙を送出し、転写ベルト521は転写電源から転写バイアスが印加されて転写紙を搬送するとともに、感光体ドラム509上のトナー像を転写紙へ転写させる。転写紙は、搬送ベルト521により搬送されて定着部522によりトナー像が定着され、排紙トレイ523へコピーとして排出される。また、感光体ドラム509は、トナー像転写後にクリーニング装置524によりクリーニングされて徐電器525により徐電され、次の画像形成動作に備える。
【0034】
図2は本実施形態におけるスキャナ400の外観を示す。このスキャナ400は、画像読み取り手段としてのフラットベットタイプのスキャナであり、イメージスキャナの一般的形態である。このデジタル複写機は、スキャナ400の下側に画像形成部としてのプリンタ411が配置されている。
【0035】
このスキャナ400で製本原稿の画像を読み取る際には、原稿圧板401を開放し、製本原稿402の読み取り頁を開いて下向きに反転して原稿台403上にセットする。このとき、製本原稿402の画像読み取りが左奥のコーナー基準406であるため、製本原稿402は見開き頁の端部が奥の原稿スケール404と左の原稿スケール405に合うようにセットする。
【0036】
原稿スケール404、405は、原稿台403より高く段差がある構造となっており、原稿の突き当てセットが行いやすいようになっている。製本原稿402が厚手である場合は、その画像読み取り時に製本原稿402の綴じ部の写りを良くするためにオペレータが製本原稿402の綴じ部を原稿台403に加圧する場合もあり、製本原稿402の画像読み取りは原稿圧板401を開放したまま行うケースも多い。
【0037】
オペレータが操作部で原稿画像読み取りの開始指示を行うことにより、原稿台403上の製本原稿402の画像読み取りが行われる。奥側の原稿スケール404の下側は、黒く塗装されており、原稿台403上の原稿との濃度判別が付き易い構成となっている。
【0038】
図3は一般的な製本原稿402の見開き形状を示す。この製本原稿402の見開き形状は上向き状態のものであり、複写機やイメージスキャナで一般的に用いられているフラットベットタイプのスキャナの原稿台403に製本原稿402を下向きに載置したときの製本原稿402の綴じ部の形状は正面から見ると図4又は図5に示すようになる。
【0039】
製本原稿402は左奥のコーナー基準で見開き頁の端部を左側及び奥側原稿スケール404、405に突き当てる形でセットする。図4は約5mm厚の製本原稿402を中央頁付近で開いて原稿台403上にセットした場合であり、製本原稿402の綴じ部の深さが原稿台403の上面から浮いた量となる。この場合が一般的に製本原稿402の綴じ部の深さが最も深い(原稿台403からの浮きが最も大きい)。図5は同じく製本原稿403をその最初の頁を開いて原稿台403上にセットした場合であり、製本原稿402の綴じ部の形状がアンバランスとなる。また、製本原稿402をその最後の頁を開いて原稿台403上にセットすると、図5の場合と左右対称な形状となる。
【0040】
本実施形態は、図6に示すようにスキャナ400の読み取り画像データに対して▲1▼綴じ部形状認識処理、▲2▼主走査方向復元処理、▲3▼副走査方向復元処理を含む綴じ部補正処理を行う。綴じ部形状認識処理は、原稿台403上にセットした製本原稿402の載置奥側の頁境界位置をスキャナ400の読み取り画像データから行う。この境界位置検出は、奥側の原稿スケール404の黒色部から、又は原稿圧板401開放状態の空間部の黒色部から読み取り、製本原稿の頁の地肌の白色部を判別する。
【0041】
主走査方向復元処理は、製本原稿の頁が平面である頁部において頁境界が水平位置になるように画素補償演算により画像を主走査方向の一定位置にシフトする。また、頁の湾曲した綴じ部では、画素補償演算により画像を伸長する。副走査方向復元処理は、頁部では処理せず、綴じ部で画素補償演算により画像を伸長する。
【0042】
図1は、このデジタル複写機における画像データの流れと画像処理の形態を示す。上記スキャナ400の読み取り画像データは読み取り処理手段408、綴じ部補正処理手段409、書き込み処理手段410により処理されてプリンタ411へ転送される。読み取り処理手段408、綴じ部補正処理手段409、書き込み処理手段410はマイクロコンピュータなどを用いて構成される。
【0043】
スキャナ400の1画素当り8ビットの読み取り画像データは、読み取り処理手段408にて読み取り系補正としてのシェーディング補正が行われ、綴じ部補正処理手段409にて綴じ部補正処理(綴じ部形状認識処理、主走査方向復元処理、副走査方向復元処理)が行われる。見開き製本の画像は、綴じ部の湾曲により短くなり、復元処理後のプリント画像すなわち真の頁画像とは長さが異なる。図7は、スキャナ400の読み取り画像と、その復元処理後の伸長した画像のサイズを示す。
【0044】
複写動作は製本原稿402の画像読み取りとプリントを同時に行うリアルタイム処理で行う。そのため、綴じ部補正処理手段409は、副走査方向復元処理に使用するバッファメモリ412を備えており、このバッファメモリ412で画像伸長分の遅延を行っている。バッファメモリ412は28.5mm幅の画像伸長を可能とするような多値メモリであり、その容量は4.8Mbyteとなる。
【0045】
綴じ部補正処理手段409は、読み取り処理手段408による処理後の読み取り画像データを一旦バッファメモリ412に格納し、綴じ部補正処理を施して画像伸長し、書き込みタイミングに合わせて書き込み処理手段410へ転送する。従って、製本原稿の画像読み取り終了から画像伸長分だけ遅れてプリンタ411のプリント動作が終了する。
【0046】
書き込み処理手段410は、綴じ部補正処理後の画像データに、設定モードに従って拡大縮小などの変倍、及び画像ファイル処理によるMTF補正を行い、続いてレーザプリンタ411の濃度再現に合わせたγ補正と、文字や写真モードにより階調処理を行う。レーザプリンタ411は、書き込み処理手段410からの画像データによりレーザダイオード(半導体レーザ)を発光させ、このレーザダイオードからの変調したレーザビームで感光体509に画像を書き込んで作像する。
【0047】
次に、綴じ部補正処理手段409の綴じ部形状認識処理における頁境界検出による綴じ部形状認識処理について説明する。綴じ部補正処理手段409の境界検出処理は次のA〜Gを適当に組み合わせて実現される。
A.主走査移動平均
綴じ部補正処理手段409は、頁の境界判別に先立ち、読み取り画像データに対して主走査方向の複数画素、例えば8画素の移動平均処理を行うことにより、画像濃度のばらつきに対して正確な頁境界部の位置を算出する。移動平均処理は、その処理回路が簡易で、濃度分布を滑らかにする平滑化フィルタと同様な効果が得られる。
【0048】
B.綴じ部補正処理手段409は頁の境界のピーク濃度とアドレス(頁境界位置を示すメモリアドレス)を主走査方向の30画素から280画素の範囲で見つける。綴じ部補正処理手段409は、主走査方向の30画素から280画素の範囲で読み取り画像データと閾値を比較し、頁の読み取りデータから頁境界部の位置を算出することにより、頁境界があり得ない余計な部分で頁境界の検出を行わず、頁境界部の位置を正確かつ速く算出する。
【0049】
綴じ部補正処理手段409は、高濃度側の画素データと低濃度側の画素データの発生した範囲で頁境界位置を検出することにより、頁境界位置の誤検出を防止する。綴じ部補正処理手段409が高濃度側の画素データの発生範囲、すなわち、空間部の終端から頁境界位置を検出することにより、原稿台403上にほこりなどのゴミや汚れがある場合に有効となる。また、綴じ部補正処理手段409が低濃度側の画素データの発生範囲、すなわち、頁枠部から頁境界位置を検出することにより、頁に文字や絵柄がある場合に有効である。
【0050】
C.適応しきい値
綴じ部補正処理手段409は、製本原稿の頁境界の上又は下のラインと垂直な方向の読み取りラインの画像濃度データにおける高濃度側の画素データと低濃度側の画素データから各ライン毎の適応閾値を決定する。各ライン毎の適応閾値は、読み取りラインの画像濃度データにおける高濃度側の画素データと低濃度側の画素データを1対2又はその近傍のデータを閾値とする。適応閾値を使うことで、製本原稿の綴じ部の浅い部分から深い部分まで頁境界位置を求めることができる。
【0051】
D.7画素連続で境界画素
綴じ部補正処理手段409は、閾値以上の画素がある複数画素、例えば7画素連続したら境界位置とすることにより、頁境界位置の誤検知を防止する。これは、原稿台403にほこりなどのゴミや汚れがあってスキャナ読み取り画像データにノイズ状の濃度ばらつきがある場合に特に有効である。
【0052】
E.1/8精度
綴じ部補正処理手段409は、閾値と交差する点の隣接画素の濃度データより濃度分布を直線補間して読み取り最小画素より小さい単位(例えば1/8画素)で頁境界位置を算出することにより、その境界位置データを使った画像のシフト、伸長処理を高画質で実現する。ここに、頁境界部の形状認識は、1画素の分解能では復元処理の画像が1画素(400dpiで16分の1ミリ)罫線のジャギー、文字のがたつきなどの画像劣化となって現われる。
【0053】
F.境界アドレスの移動平均
綴じ部補正処理手段409は、境界位置データの移動平均をとる。これは、境界位置データを副走査方向に平均化し、頁境界位置の配列のばらつきを抑制することができる。一般に、見開き頁の境界部の形状は急激な変化が無く、真の頁境界の形状と等しい境界の滑らかな境界配列が境界位置データの移動平均をとることで得られる。その結果をもとに歪の復元を行えば精度の良い復元画像が得られる。
【0054】
G.綴じ部補正処理手段409は、頁画像領域を検出したら、検出範囲を打ち切る。製本原稿の頁境界の上又は下のラインと垂直な方向の読み取りラインの画像濃度データにおける高濃度側の画素データと低濃度側の画素データの発生した範囲であって、頁画像領域を検出する以前の範囲で、頁境界位置を検出することにより、頁内の文字や絵柄による境界位置の誤検知を防止することができる。
【0055】
製本原稿の頁境界の上又は下のラインと垂直な方向の読み取りラインの画像濃度データにおける高濃度側の画素データのピークを検知し、そのピーク値から所定のレベル以上の低濃度側の画素データを検知し、その後に上記高濃度側の画素データのピーク値以上の画素を検知することで、頁画像領域と判定することにより、頁内の文字や絵柄で頁画像部と判定して境界位置を正しく検知することができる。
【0056】
図14は綴じ部補正処理手段409の頁境界検出による綴じ部形状認識処理フローを示す。綴じ部補正処理手段409は、スキャナ400からの読み取りデータが格納されている画像ファイル(フレームメモリ)から1ライン分の読み取り画像濃度データを配列に読み込み(2−a)、その主走査方向の8画素(注目画素と、その先の4画素、注目画素より後の3画素)の移動平均をとる(2−b)。この移動平均は図15に示すように注目画素Xを挟んで左側(前側)に4画素N1〜N4、右側(後側)に3画素N5〜N7の計8画素の濃度データの平均値を次式でとって注目画素の濃度データに置き換える。
【0057】
注目画素=(N1+N2+N3+N4+X+N5+N6+N7)/8
綴じ部補正処理手段409は、これを読み込んだ1ライン分の濃度データに渡って行う。次に、綴じ部補正処理手段409は、移動平均をとり終えた1ライン分の読み取り画像濃度データについて白ピーク(Dwp)と、黒ピーク(Dbp)と、これらの位置を順次に更新しながら探す(2−e〜2−g)。
【0058】
綴じ部補正処理手段409は、図16に示すように280画素目の読み取り画像濃度データで白ピーク及び黒ピークの更新を打ち切り、白ピーク及び黒ピークの位置を保持する(2−d、2−g)。図17に示すように黒ピークを所定のレベル、例えばレベル10だけ白側へ上がった位置より右側に黒ピークがあり、この黒ピークは280画素より手前である。
【0059】
そこで、綴じ部補正処理手段409は、保持している黒ピークがそれよりレベル10だけ白側へ上がった位置より以前に格納した黒ピークと比較して小さい黒側の値になればその黒ピークを画像部であると判断して白ピーク及び黒ピークの更新を打ち切り、白ピーク及び黒ピークの位置を保持する(2−f、2−g)。次に、綴じ部補正処理手段409は、ライン毎の適応閾値Lthを
Lth=1/3*(Dwp−Dbp)+Dbp
なる式で求める(2−h)。
【0060】
次に、綴じ部補正処理手段409は、主走査方向の白ピーク(Dwp)が発生した画素位置と黒ピーク(Dbp)が発生した画素位置との間の区間で上記移動平均をとった1ライン分の濃度データを適応閾値Lthと比較し、図18に示すように適応閾値Lth以上の濃度データが7画素連続する最初の画素アドレスA1を求める(2−i)。なお、図18において、ibpは黒ピーク位置、iwpは白ピーク位置である。
【0061】
すなわち、綴じ部補正処理手段409は、白ピーク(Dwp)と黒ピーク(Dbp)との間の範囲でその値を1:2に分ける中間値を閾値Lthとし、その先の6画素連続して閾値以上となる点を境界とする。綴じ部補正処理手段409は、図19に示すように、上記画素アドレスA1とその左に隣接する画素との2つの画素の濃度データから直線補間して1/8画素精度で境界アドレスA2を求める(2−j)。
【0062】
綴じ部補正処理手段409は、画像の全ラインで境界アドレスA2を上述のように求める(2−k)。次いで、綴じ部補正処理手段409は、上述のように求めた境界アドレスA2について副走査方向の8ライン分(注目ラインの先の4ライン、注目ライン、注目ラインの後の3ライン)の移動平均をとり、境界アドレスA3とする(2−l)。
【0063】
図15〜図19は主走査1ラインの境界アドレス近くの濃度をプロットしてあり、浅い平面部では背景の黒と頁地肌の白との濃度差が大きい。深い綴じ部では、背景の黒と頁地肌の白との濃度差が小さくなり、原稿台403から離れているために白が充分に読み取れないことがわかる。境界は平面の浅い場合に比べて深い綴じ部では右側にずれている。これは、メモリ上で見開き製本原稿の読み取りデータの綴じ部が平面部に比べて縮小されて見えることに対応している。
【0064】
次に、綴じ部形状認識処理における製本原稿の直線と綴じ部との切り換え(検出)及び切り換え点検知範囲決定について説明する。
まず、切り換え点検知範囲決定について説明すると、スキャナ400の読み取り画像データは原稿部と背景部があり、その境界がある。この境界の分布が直線となる頁部と、境界の分布が曲線となる綴じ部がある。頁部と綴じ部との境目は切り換え点と呼ぶ。図8は切り換え点を探す範囲の限定を示す。綴じ部補正処理手段409は読み取り処理手段408による処理後の読み取り画像データを図8に示すようにフレームメモリに読み込み、その左上が画像の始まりで横方向が主走査方向、縦方向が副走査方向である。
【0065】
例えば左右頁の両端部などの段差部はスキャナ400において原稿台403の読み取り焦点面から離れて綴じ部と同様に歪んで投影されるため、その読み取り画像データを除外することにより正確に切り換え点を検知することができる。原稿台403上に載置されている製本原稿402の長さは予め原稿サイズ検知手段又は頁検出手段からなるサイズ検知手段により検知される。綴じ部補正処理手段409は、原稿サイズ検知手段又は頁検出手段により検知された製本原稿402のサイズが例えば見開きA3サイズである場合には、図8に示すように製本原稿402の端部、例えば製本原稿の始端から500ライン目までの範囲と、製本原稿の終端から500ライン手前までの範囲では切り換え点を探さず、サイズ検知手段又は頁検出手段で検知された製本原稿のサイズより製本原稿の見開き頁の綴じ部位置を算出して該綴じ部位置の周辺における、上記範囲以外の範囲で切り換え点を探す。
【0066】
また、綴じ部補正処理手段409が、算出した綴じ部の周辺の正しい位置で切り換え点を読み取り画像データから検知することにより、切り換え点検知範囲が正確で、切り換え点検知処理の稼動範囲が小さくなる。実際には、綴じ部補正処理手段409は、製本原稿幅の中央を含む、その周辺の幅αの範囲で切り換え点を読み取り画像データから検知し、例えば製本原稿402のサイズが見開きA3サイズである場合には図12に示すように製本原稿402の端部を除く例えば2000〜4800ラインの範囲で読み取り画像データから切り換え点を検知し、製本原稿402のサイズが見開きA4サイズである場合には製本原稿402の端部を除く例えば1000〜3800ラインの範囲で読み取り画像データから切り換え点を検知する。
【0067】
また、綴じ部補正処理手段409は、例えば製本原稿402が厚手の製本原稿であってその綴じ部が深い場合には綴じ部検知範囲(切り換え点検知範囲)を大きくとり、綴じ部が浅い場合には切り換え点検知範囲を狭くとる。これにより、製本原稿のサイズに応じた適切な切り換え点検知範囲が得られる。したがって、線本原稿の種類に対して必要な切り換え点検知範囲で、綴じ部検出処理が速く行われる。実際には、綴じ部補正処理手段409は、βを製本原稿の綴じ部の最も深いラインの深さとすると、図9に示すように(β+2)×2cmの範囲を綴じ部検知範囲とし、読み取り画像データの深さに応じた幅の綴じ部検知範囲で切り換え点を読み取り画像データから検知する。
【0068】
本実施形態では例えば適応できる最大製本厚を7cmとしており、この場合は製本原稿402の見開き頁が原稿台403より離れる綴じ部部分の幅は7cm以下になる。したがって、綴じ部補正処理手段409は、図10に示すように、その周囲各2cmまでの範囲を含む11cm幅の範囲で読み取り画像データから切り換え点を検知する。これにより、適応できる必要最小限の範囲で切り換え点が検知され、読み取り画像データによらずに一定の幅で読み取り画像データから切り換え点を検知する。
【0069】
綴じ部補正処理手段409は、製本原稿の見開き頁中央部に位置する綴じ部領域に対して見開き左右頁で同等幅の綴じ部検知範囲を決定し、綴じ部検知処理上適したものとする。実際には、綴じ部補正処理手段409は、図11に示すように見開き左右頁について一定幅α/2を有し全体としてαの幅を有する綴じ部検知範囲を決定し、読み取り画像データから切り換え点を検知する。
【0070】
次に、製本原稿の直線と綴じ部との切り換え(検出)について説明すると、この実施形態では、見開き製本原稿の綴じ部と頁部との画像処理を異ならせるために、頁の湾曲している綴じ部領域と平面部の頁領域とを分離してその切り換え点を検出する。
【0071】
綴じ部補正処理手段409は、上述のように検出した頁境界位置の離れた2点の位置のデータから製本原稿の見開き左右頁の境界の直線部の傾き及び位置を算出する。したがって、綴じ部補正処理手段409は、原稿台403上に載置した製本原稿402の平面部である頁部の載置状況、例えば頁境界の傾きから頁の回転度合であるスキュー量を見開き左右頁の境界の直線部の傾き及び位置から検出することができ、また、上記2点の位置のデータから直線上の境界を求める処理を演算で容易に行うことができる。
【0072】
綴じ部補正処理手段409は、上述のように検出した頁境界位置の離れた2点の位置を、製本原稿402の見開き左右頁の対称とすることにより、一般的に見開き製本原稿の左右頁がほぼ対称であるため、見開き左右頁毎にその頁の境界の傾きから頁のスキュー量を検出することができる。
【0073】
綴じ部補正処理手段409は、上述のように検出した頁境界位置のデータから最小二乗法により頁の境界の直線部の傾き及び位置を算出することにより、検出した頁境界のサンプリング位置にばらつきがある場合でも正しく頁のスキュー量を検出することができる。
【0074】
綴じ部補正処理手段409は、製本原稿の見開き頁の綴じ部領域を、上述のように検出した頁境界位置のデータより算出した頁境界の直線の延長線上から規定距離離れ、かつ、所定の範囲でそれ以上その延長線に近づかないことにより判別する。これにより、綴じ部領域の誤検知を抑制することができる。
【0075】
綴じ部補正処理手段409は、上記頁境界の直線の延長線上からの規定距離を読み取り画素の複数画素分、例えば4画素分とすることにより、処理の少ない判別方法で画像歪みが起っている綴じ部領域を判別することができる。
綴じ部補正処理手段409は、見開き製本原稿の左右頁の2つの分離点の間の範囲で、上述のように検出した頁境界位置から得られる製本原稿の綴じ部深さの最も深い位置を、製本原稿の見開き左右頁の境界位置とする。
【0076】
綴じ部補正処理手段409は、検出した綴じ部の頁境界位置データから頁境界の直線部の延長線上の位置のデータを差し引くことにより、真の頁歪み量を求める。これにより、本来の頁深さを算出し、綴じ部の画像復元精度を向上させることができる。
【0077】
図13は綴じ部補正処理手段409の製本原稿の直線と綴じ部との切り換え(検出)・切り換え点検知範囲決定フローを示す。綴じ部補正処理手段409は、上述のように検出した頁境界のアドレスA3から頁の境界分布が直線となる頁部の境界近似直線を求め、その直線から離れて曲線となる部分を綴じ部として認識して頁部より分割することにより製本原稿の形状を認識して頁部と綴じ部とで復元処理を切り換える。
【0078】
図13に示すように、綴じ部補正処理手段409は、画像開始点(頁の端)から500画素目と2000画素目との2つの点(境界アドレスA3であって、その近くの複数の画素を含む8点の平均値)のアドレスデータから、その2点を結ぶ直線を頁部の境界としてその傾きを求める(1−a)。この場合、綴じ部補正処理手段409は、頁部の境界の直線を境界アドレスA3から最小二乗法で求める。
【0079】
製本原稿の見開き左右頁の画像歪量を求めるための基準位置は切り換え点の境界アドレスであり、綴じ部補正処理手段409は、見開き左右頁の基準位置を切り換える点を境界アドレスの最も大きい値の点(綴じ部中央)とし、最も大きい(深い)境界アドレスとそのラインを探す(1−b)。綴じ部補正処理手段409は、上述のように限定したライン間(綴じ部検知範囲)で切り換え点を探す(1−c)。
【0080】
綴じ部補正処理手段409は、上記のように求めた直線から複数画素、例えば4画素以上離れていることを条件として(1−d)、上記直線と境界アドレスA3とを比較して直線から曲線への仮の切り換え点を上述のように決める(1−e)。綴じ部補正処理手段409は、上記直線と境界アドレスA3とが4画素以上離れていなければ次のラインの境界アドレスA3と上記直線との比較に進む。綴じ部補正処理手段409は、上記直線と境界アドレスA3とが4画素以上所定の範囲で近づかないかどうかを判断し(1−f)、例えば上記直線から4画素以上頁側に離れた境界アドレスA3を持つラインが複数ライン、例えば5ライン続くかどうかを判断し、上記直線と境界アドレスA3とが4画素以上所定の範囲で近づく場合(上記直線から4画素以上頁境界側に離れた境界アドレスA3を持つラインが5ライン続かない場合)には上記ステップ(1−h)に進む。
【0081】
綴じ部補正処理手段409は、上記直線と境界アドレスA3とが4画素以上所定の範囲で近づかなくなれば(上記直線から4画素以上頁境界側に離れた境界アドレスA3を持つラインが5ライン続けば)、頁の境界が曲線となる以前を切り換える切り換え点とするために、上記仮の切り換え点から256画素(16mm)戻った点を算出して頁境界における直線と曲線との切り換え点とする(1−g)。綴じ部補正処理手段409は、このような手順で製本原稿の見開き左右頁各々の切り換え点を算出して求める。
【0082】
メモリ(画像ファイル)上の画像開始位置に相当するラインから見て頁部の境界の直線が歪んで置かれることは通常である。綴じ部補正処理手段409は、図20に示すように、切り換え点の境界アドレスAを基準として綴じ部の境界アドレスから引くことで歪量を求め、あるいは、頁部の境界アドレスから求めた直線Bを基準として綴じ部の境界アドレスを引くことで歪量を求める。
【0083】
次に、綴じ部深さについて説明する。
綴じ部補正処理手段409は、切り換え点の境界アドレスがメモリのはじめに一致している場合には、上述のように検出した頁境界位置A3と、スキャナ107の光軸位置Akと焦点面距離Pとから、製本原稿402の綴じ部深さTを例えば
T=P*A3/(Ak−A3)
なる式で算出する。A3はA2又はA1としてもよい。
【0084】
複写機やスキャナの画像読み取り部に製本原稿を見開いて載置してその画像を読み取る場合には、その製本原稿のセットが多少ずれることがあり、厚手の製本原稿をセットする場合は製本原稿セットの基準となる原稿スケールが見ずらくなって原稿の頁端部を原稿スケールに合わせることが難しい。そこで、綴じ部補正処理手段409は、切り換え点の境界アドレスがメモリのはじめに一致していない場合には、製本原稿の載置位置によらずに、検出した頁境界位置から製本原稿の綴じ部深さを算出する。
【0085】
つまり、綴じ部補正処理手段409は、上述のように検出した頁境界位置A3、スキャナ400の光軸位置Akと焦点面距離P、頁平面部の位置Kaから、製本原稿402の綴じ部深さTを例えば
T=P*(A3−Ka)/{(Ak−Ka)−(A3−Ka)}
なる式で算出する。綴じ部補正処理手段409は、この式で隣接するラインの綴じ部深さの差をとり、
(Tn−Tn−1)=焦点面距離*(隣接するラインの境界アドレスの差)/{(Ak−Ka)−(A3−Ak)}
なる式で(Tn−Tn−1)を求める。
【0086】
綴じ部補正処理手段409は、切り換え点の境界アドレスがメモリのはじめに一致している場合にはT=P*A3/(Ak−A3)なる式で隣接するラインの綴じ部深さの差をとり、(Tn−Tn−1)を求める。
【0087】
このように、綴じ部補正処理手段409は、検出した頁平面部の境界位置を基準にして綴じ部深さを算出することから、製本原稿の載置位置が原稿スケール404、405による基準位置からずれている場合にも見開き製本原稿の綴じ部深さを検出することができ、すなわち、製本原稿の載置位置を固定しないで綴じ部深さを算出して綴じ部形状認識処理を行うことができる。
【0088】
複写機やスキャナの画像読み取り部に製本原稿を見開いて載置してその画像を読み取る場合、製本原稿の綴じ部形状は円弧状に湾曲し、急激な変化や上下へのうねりなどは発生しない。頁境界の形状を検出して見開き製本原稿の綴じ部形状を認識する場合に、認識した見開き製本原稿の綴じ部形状は検出誤差やデータのノイズ成分により異常な形状となるが、綴じ部補正処理手段409は製本原稿の綴じ部形状特性に合うように処理上の制限を加え、より正しい見開き製本原稿の綴じ部形状認識を行う。
【0089】
綴じ部補正処理手段409は、検出した頁境界位置より製本原稿の綴じ部深さを算出し、その算出した綴じ部深さの変化量を制限することにより、見開き製本原稿の形状が検出誤差やデータのノイズ成分により異常な形状ととして認識することを抑制する。したがって、より正しい見開き製本原稿の形状認識を行うことができ、適用範囲が広くなる。
【0090】
複写機やスキャナの画像読み取り部に製本原稿を見開いて載置してその画像を読み取る場合、製本原稿の綴じ部形状は円弧状に湾曲し、その頁傾斜角は綴じ部が深くなるほど急になっていく。綴じ部補正処理手段409は、頁境界の形状より見開き製本原稿の形状を認識する場合に、製本原稿の形状特性に合うように綴じ部深さに制限を加え、より正しい見開き製本原稿の形状認識を行う。また、綴じ部深さの変化量をその位置の綴じ部深さにより制限することにより、真の見開き製本原稿の形状算出に影響を与えない度合いで、綴じ部の位置によって適正な制限による補正を行う。
【0091】
綴じ部補正処理手段409は、綴じ部深さの隣接の変化量をその位置の綴じ部深さの1/80程度に制限する。例えば、検出した綴じ部深さが10mmである地点では1ライン毎の変化量は0.125mm、すなわち、その地点の頁傾斜角は63.1°で制限することが、実際の製本原稿の形状から好ましい。
【0092】
図21は綴じ部補正処理手段409の綴じ部深さ算出フローを示す。綴じ部補正処理手段409は、綴じ部の副走査方向復元処理では境界アドレスA3から綴じ部深さを算出し、更にスキャナ400で得ている製本原稿上のサンプル点の位置を求める。図21に示すように、綴じ部補正処理手段409は、各境界アドレスA3とその前のラインの境界アドレスの差(各隣接するラインの境界アドレスの差)をそれぞれ算出する(4−a)。通常、綴じ部深さが深くなるに連れて綴じ部深さの変化量が増す。
【0093】
綴じ部補正処理手段409は、検出した境界アドレスが真の境界から離れていると綴じ部の副走査方向復元が伸びすぎたり縮みすぎたりするので、その位置の深さに応じて綴じ部の副走査方向伸長に制限をかける(4−b)(4−c)。すなわち、綴じ部補正処理手段409は、上述のように求めた前のラインとの境界アドレスの差がそのラインの製本原稿上の平面部からの、その位置の深さ[mm]をもとに、前のラインと(深さ[mm]/5[画素]以上離れているときは隣合う境界アドレスの差を(深さ[mm]/5[画素]に制限して境界の誤検出による綴じ部の副走査方向復元のエラーを抑制する。
【0094】
綴じ部補正処理手段409は、隣接するラインの境界アドレスA3の差から隣接するラインの境界の深さの差(Tn−Tn−1)を次の式で求める(4−d)。
【0095】
(Tn−Tn−1)=焦点面距離*(隣接するラインの境界アドレスの差)/{(Ak−Ka)−(A3−Ak)}
ここに、図22に示すようにAkはスキャナ400の光軸アドレス、Tは綴じ部深さ、Kaは頁平坦部の境界位置、A3はKaに対して検出した境界アドレスであってKaより主走査方向へ境界の歪み量xだけずれている。焦点面距離、光軸アドレスAkは、スキャナ400により一定値として与えられ、それぞれ427.757(mm)、2400(画素)とした。次に、綴じ部補正処理手段409は、図23に示すように隣接するライン(n、n−1)の境界深さの差(Tn−Tn−1)から製本原稿上の前のラインとの距離Lnを次の式で求める(4−e)。
【0096】
Ln=√{1+(Tn−Tn−1)2}
次に、綴じ部補正処理手段409は、隣接する主走査ラインの境界深さの差より、1画素毎の微小ピッチの直線で近似した頁の復元位置を算出する(4−f)。1ライン毎の復元すべき副走査方向の画像長さLnは、綴じ部深さTにて上記式で求められる。画像長さLnの累積が副走査方向の頁長さになる。
【0097】
なお、綴じ部補正処理手段409は、綴じ部深さの変化量を制限し、例えば前のラインとの歪み量(境界アドレス−切り変えアドレス)の差(変化量)を制限してから綴じ部深さの差を計算するようにしてもよい。綴じ部深さの変化量の制限は、その位置の綴じ部深さの1/80に制限してもよい。
【0098】
綴じ部の歪み量と深さは一対一であり、歪み量×3が綴じ部深さになるため、綴じ部深さを制限しても歪み量を制限しても同じ効果になる。また、綴じ部補正処理手段409は、隣接するラインの境界アドレスA3の差から隣接するラインの境界の深さの差(Tn−Tn−1)を次の式で求めてもよい。
【0099】
(Tn−Tn−1)=焦点面距離*A3/{(Ak−Ka)−(A3−Ak)}
次に、頁部(平面部)と綴じ部との処理の切り換えについて説明する。
綴じ部補正処理手段409は、綴じ部を分離して頁部は処理せず、綴じ部だけ復元処理をする。すなわち、綴じ部補正処理手段409は、製本原稿の見開き頁の綴じ部領域を分離し、頁境界の形状より見開き製本原稿の形状を認識する。そして、綴じ部補正処理手段409は、製本原稿の形状より分離した綴じ部画像領域は歪みを補正し、例えば縦横の画像伸長を行い、平面部の頁領域では歪みを補正しない。その結果、綴じ部のみ画像が復元され、頁部はそのままの画像が保持される。
【0100】
綴じ部補正処理手段409は、綴じ部を分離して頁部のみ画像をシフトし、原稿台402に載置した製本原稿の画像が回転してスキューした画像であっても境界方向の頁端が揃ったスキューのない読み取り画像が得られる。
【0101】
頁境界検出(A+C+B+F)から画像シフトまでにより、頁部スキュー対策がとられている。綴じ部補正処理手段409は、製本原稿の見開き頁のの綴じ部領域を分離し、非該当領域である頁平面部の画像補正処理において、検出した頁境界位置から頁境界方向(主走査方向)への移動により頁部の載置の曲がり(スキュー)を補正する。
【0102】
頁境界の位置データにより画像シフト量を算出するために例えば1画素の位置分解能で境界を検出して画像をシフトした場合には、1画素のピッチで移動が起こるために1画素以内の位置ずれが発生し、罫線などにジャギーが目立つ。そこで、綴じ部補正処理手段409は、非該当領域である頁平面部の画像補正処理では、高い精度で検出した頁境界位置データより高い精度で頁のスキューを補正し、高画質処理をする。これにより、画像シフトの誤差が1/8画素以内となり、罫線のジャギーなどが起らず、高精度が維持される。
【0103】
綴じ部補正処理手段409は、境界位置データによる画像のシフトについてはそのシフト量を整数画素分とそれ以下とに分けて演算する。そして、綴じ部補正処理手段409は、検出した頁境界方向への画像シフトを、境界位置データのシフト画素量の整数分だけアドレス変換により行ってシフト画素量の小数点以下分は3次関数コンボリューション法により行う。
【0104】
綴じ部補正処理手段409は、綴じ部領域を分離し、綴じ部領域には検出した綴じ部の境界位置データにより読み取り画像の位置復元を行う。綴じ部補正処理手段409は、綴じ部領域を分離し、綴じ部領域が湾曲している綴じ部領域部には検出した綴じ部の境界位置データにより読み取り画像の主走査方向及び副走査方向の伸長処理を行う。これにより、綴じ部の歪んだ画像が平面画像に復元される。
【0105】
綴じ部補正処理手段409は、分離した領域によって画像補正処理を異ならせるが、その分離点における画像の均一性を保つ。すなわち、綴じ部補正処理手段409は、綴じ部領域を分離し、検出した境界位置データにより画像補正処理を行い、分離した領域によって画像補正処理を異ならせ、その分離点における境界位置データは等しく、かつ、連続的な構成とする。したがって、分離した処理の切り換え点における画像位置が等しく連続的となるため、画像が均一で、領域分離による補正処理における境などの画像の違和感は起こらない。
【0106】
図25は綴じ部補正処理手段409の頁部(平面部)と綴じ部の処理を切り換える処理フローを示す。綴じ部補正処理手段409は、読み取りデータに対して頁部と綴じ部とを切り換え点を基準として処理を切り換える。綴じ部補正処理手段409は、読み取りデータに対して、頁部では等倍で読み込まれているので、主走査方向のシフトのみ行い、綴じ部では主走査方向と副走査方向の縮小倍率に基づいて復元処理をする。
【0107】
図8はスキャナ400で製本原稿から読みとった画像データのメモリ上での様子を示す。製本原稿の見開き右頁が上で見開き左頁が下になっている。製本原稿402の原稿台403に接している部分の画像データは境界線が直線である。この部分は図25では直線部と書いているが、頁部(平面部)と同じである。境界線が直線から曲線に変わるラインは切り換え点と呼ぶ。右頁にある切り換え点を切り換え点1、左頁にある切り換え点を切り換え点2としている。切り換え点1から綴じ部であり、綴じ部の中心のラインを最も深い点としている。この読み取り画像を復元すると、図26の左側に示すように綴じ部に曲がりのない画像に復元される。
【0108】
図25に示すように、綴じ部補正処理手段409は、上記読み取りデータが直線部から切り換え点1までのラインのものであるか否かを判断し(5−a)、読み取りデータが直線部から切り換え点1までのラインのものであれば、読み取りデータの主走査方向のシフトを行って(5−d)次のラインの読み取り画像データ処理に進む(5−h)。綴じ部補正処理手段409は、読み取りデータが直線部から切り換え点1までのラインのものでなければ、読み取り画像データが切り換え点1から切り換え点2までのラインのものであるか否かを判断する(5−b)。
【0109】
綴じ部補正処理手段409は、読み取り画像データが切り換え点1から切り換え点2までのラインのものであれば、読み取り画像データの主走査方向及び副走査方向の復元を上述のように行って(5−e)次のラインの読み取り画像データ処理に進む(5−h)。綴じ部補正処理手段409は、読み取り画像データが切り換え点1から切り換え点2までのラインのものでなければ、読み取り画像データが切り換え点2から直線部までのラインのものであるか否かを判断する(5−c)。
【0110】
綴じ部補正処理手段409は、読み取り画像データが切り換え点2から直線部までのラインのものであれば読み取りデータの主走査方向のシフトを行って(5−f)次のラインの読み取り画像データ処理に進む(5−h)。綴じ部補正処理手段409は、読み取り画像データが切り換え点2から直線部までのラインのものでなれば、読み取り画像データが最終ラインのものであるか否かを判断し、読み取り画像データが最終ラインのものでなければ次のラインの読み取り画像データ処理に進む。
【0111】
綴じ部補正処理手段409は、読み取りデータの主走査方向シフトについては、図27に示すように、境界アドレスA3の整数部分の画素分を配列で左にシフトし、境界アドレスA3の少数点部分rを1から引いた量deを求める(de=1−r)。綴じ部補正処理手段409は、サンプル点の位置をNとして、変倍後のNの位置にはN/Mの位置の濃度データを三次関数コンボリューション法で補間して求める。綴じ部補正処理手段409は、境界アドレスA3の小数部分をシフトするので、変倍後のNの位置はN/M−deの位置の濃度データを補間で求める。
【0112】
綴じ部では切り換え点のあどれすを基に走査方向の拡大倍率が決まり、頁部の切り換え点では切り換えアドレスで主走査方向にシフトされるため、切り換え点での画像の均一性は保たれる。
【0113】
次に、投影倍率の算出と光軸のアドレス決定について説明する。
図22において、Oはメモリ上の原点を表わしている。製本原稿402の綴じ部は綴じ部深さTだけ原稿台403から浮いているため、製本原稿の長さはスキャナ400の光軸アドレスAkから頁平坦部の位置Kaまでであるが、製本原稿の読み取りデータはスキャナ400の光軸アドレスAkから境界アドレスA3までの長さになる。ここに、境界アドレスA3は上記A1又はA2でもよい。そこで、綴じ部補正処理手段409は、スキャナ400の境界と直交する方向(主走査方向)の投影倍率Mmを次の式で算出する。
【0114】
Mm=(Ak−A)/(Ak−Ka)
なお、AはA1、A2、A3のいずれかである。綴じ部補正処理手段409は、読み取りデータを光軸アドレスAkより境界アドレスAまでの長さから光軸アドレスAkより頁平坦部の位置Kaまでの元の長さに拡大するための倍率Mをその投影倍率Mmの逆数の倍率とする。ここで、光軸アドレスAkはスキャナ400の固定値で、2400画素目としている。
【0115】
また、この実施形態では、光軸位置決定モードが設けられ、操作部から光軸位置決定モードが任意に選択される。図28は綴じ部補正処理手段409の投影倍率算出・光軸アドレス決定フローを示す。綴じ部補正処理手段409は、操作部から光軸位置決定モードが選択されると、上述のように製本原稿の片側の頁境界位置を測定し、同様に製本原稿の主走査方向の他の片側の頁境界位置を測定する。この場合、製本原稿402の片側の頁平面部(平坦部)の境界位置Kaに対して測定値Aが得られ、製本原稿402の主走査方向の他の片側の頁平面部(平坦部)の境界位置Kbに対して測定値Bが得られる。AはA1、A2、A3であるが、BはA1、A2、A3に対応したB1、B2、B3である。
【0116】
次に、綴じ部補正処理手段409は、頁平面部(平坦部)の主走査方向の長さとして(Kb−Ka)を計算し、綴じ部の主走査方向の長さとして(B−A)を計算する。このAはA1、、A2、A3のいずれか1つが用いられ、BはB1、B2、B3のいずれか1つが用いられる。次に、綴じ部補正処理手段409は、上述のように求めた製本原稿の主走査方向における綴じ部の長さと平坦部の長さとの比の値を計算することにより、倍率Mmを得る。次に、綴じ部補正処理手段409は、Mm=(Ak−A)/(Ak−Ka)を使って倍率Mmを求め、この倍率Mm、頁境界位置A、頁平坦部の位置Kaから光軸の位置Akを求め、このAkを保存する。
【0117】
また、綴じ部補正処理手段409は、光軸位置決定モードでなければ、光軸位置決定モードで決定した光軸位置Akを用いて製本原稿形状測定・綴じ部補正処理を上述のように行い、製本原稿の片側だけの頁境界位置を求めるための処理と、製本原稿の主走査方向の他の片側だけの頁境界位置を求めるための処理とを行う。これは、製本原稿のエッジで行った処理を、主走査方向の他のエッジに対しても行うものである。
【0118】
次に、副走査方向復元について説明する。
綴じ部補正処理手段409は、綴じ部画像の歪補正において、検出した境界方向の画像の復元後の長さが1画素以上となるようにして整数画素分のラインの画像濃度データを演算し、復元後の単位ラインの画像を算出するための周囲画素のデータが得られ次第、画像伸長の演算を行う。このため、複写機のようにリアルタイムの位置補正処理が可能となる。
【0119】
また、綴じ部補正処理手段409は、綴じ部の深さの変化量により画像の伸長を行う。綴じ部補正処理手段409は、綴じ部画像の歪補正において、図23に示すように製本原稿の綴じ部形状を読み取りライン毎の微少な三角形とし、頁の読み取り1ラインにおける画像長さLnを次の式により算出し、
Ln=√{1+(Tn−Tn−1)2}
画像長さLnの累積を頁の伸長長さとする。その結果、近似した三角形の斜辺は湾曲した頁の形状とほぼ等しくなり、綴じ部補正処理手段409は、その累積を頁の画像長さとすることにより、正確な頁長さを得る。特に、1ライン毎の最小ピッチによる形状近似により、その長さの復元精度は高い。
【0120】
製本原稿の綴じ部は、製本原稿の見開き方向に読み取り画素ピッチが製本原稿に対して変化していく。つまり、製本原稿の綴じ部は、製本原稿の見開き方向に読み取り画素ピッチが製本原稿に対して等間隔にはならない。そこで、綴じ部補正処理手段409は、製本原稿の綴じ部形状を検出し、サンプリングピッチの変化に対応して画素位置の復元演算を行う。
【0121】
綴じ部補正処理手段409は、綴じ部画像の歪み補正では、検出した境界方向ついて3次関数コンボリューション法で復元画像を算出し、その注目画素の画素間隔を基準“1”として演算することにより、読み取りライン間隔が変化、すなわち、平面状としたときの原稿に対してサンプリング画素間隔が逐次替わっていくのに対し、画像伸長処理を適応する。
【0122】
幾何学的に主走査方向の画像投影倍長さと綴じ部の深さは比例関係にあり、綴じ部補正処理手段409は図22から上述のように境界アドレスA3から綴じ部深さTを以下の式により求める。
T=焦点面距離*(A3−Ak)/{(Ak−Ka)−(A3−Ak)}
綴じ部補正処理手段409は、隣接する主走査ラインの深さの差により、1画素毎の微少ピッチの直線で近似して頁の復元位置を算出する。
【0123】
綴じ部補正処理手段409は、図23から上述のように1ライン毎の復元すべき副走査方向の画像長さLnを綴じ部の深さTにて次の式により求める。
Ln=√{1+(Tn−Tn−1)2}
従って、画像長さLnの累積が副走査方向の頁長さになる。画像拡大は主走査方向の拡大と同様に3次関数コンボリューション法による画素間補間を用いて行い、その計算精度は充分に高くとっている。
【0124】
通常、綴じ部深さが深くなるに連れてその深さの変化量が増す。そこで、綴じ部補正処理手段409は、その位置の綴じ部深さに応じて画像伸長に制限をかける。綴じ部補正処理手段409は、隣合う境界アドレスの差をその位置の(深さ[mm]/5)[画素]に制限して境界の誤検出による副走査方向復元のエラーを抑制する。
【0125】
綴じ部の副走査方向の復元では画像長さLnは位置によって異なり、図29に示すように読み取り画像データは等間隔ではない。この図29では、復元データの濃度として3’の位置の濃度を求めるために読み取り画像データにおける2,3,4,5の位置の濃度データを使うが、r1:(3〜3’の位置の間の距離)/(3〜4の位置の間の距離)、r2:(1−r1)、r3:(2〜3’の位置の間の距離)/(3〜4の位置の間の距離)、r4:(3’〜5の位置の間の距離)/(3〜4の位置の間の距離)は、3〜4の位置の間の距離を1としている。綴じ部補正処理手段409は、これらをrとして3次関数コンボリューション法により画素間補間をする。
【0126】
図30は副走査方向復元フローを示す。
図29において、画像長さLnの累積が副走査方向の頁の長さになり、これを読み取り原稿(製本原稿)の位置とする。図29の2,3,4,5は主走査ラインを表わし、それぞれの位置をf4[2]、f4[3]、f4[4]、f4[5]とする。wは、補間するラインの位置であって、f4[3]とf4[4]の間の位置で整数になるところである。
【0127】
綴じ部補正処理手段409は、wに位置f4[3]の整数部分を代入する(7−a)。この時のwの位置はf4[2]とf4[3]との間になっている。綴じ部補正処理手段409は、w+1がf4[4]以下であるか否かを判断し(7−b)、w+1がf4[4]以下でなければ(7−f)に進む。
【0128】
綴じ部補正処理手段409は、(7−f)では、補間をせず、ライン4とライン5の間の補間に移るために4ラインのバッファで濃度データのシフトをする。すなわち、綴じ部補正処理手段409は、ライン3の濃度データをライン2の濃度データに置き換え、ライン4の濃度データをライン3の濃度データに置き換え、ライン5の濃度データをライン4の濃度データに置き換え、新しいラインの濃度データをライン2の濃度データに置き換え、また、位置f4[2]に位置f4[3]を置き換え、位置f4[3]に位置f4[4]を置き換え、位置f4[4]に位置f4[5]を置き換え、位置f4[5]に新しい位置f4[5]を置き換える。
【0129】
次に、綴じ部補正処理手段409は、読み取り画像の最終ラインであるか否かを判断し、読み取り画像の最終ラインであれば(7−g)で終了する。また、綴じ部補正処理手段409は、読み取り画像の最終ラインでなければ(7−a)に戻る。また、綴じ部補正処理手段409は、(7−b)でw+1がf4[4]以下であれば(7−c)に進み、wの位置の濃度データを補間で求めるための3次関数コンボリューション法で必要なr1,r2,r3,r4を求める。読み取り画像のデータの間隔は等間隔ではない。そこで、綴じ部補正処理手段409は、以下のように補間する位置を挟む読み取りデータのライン位置の間隔(3から4、すなわち、f4[4]−f4[3])を1とする。
【0130】
そして、綴じ部補正処理手段409は、
r1=(3〜3’の距離)/(3〜4の距離)=(w−f4[3])/(f4[4]−f4[3])
r2=1−r1
r3=(2〜3’の距離)/(3〜4の距離)=(w−f4[2])/(f4[4]−f4[3])
r4=(3’〜5の距離)/(3〜4の距離)=(w−f4[5])/(f4[4]−f4[3])
を算出する。次に、綴じ部補正処理手段409は、(7−d)位置wのラインの濃度を3次関数コンボリューション法で補間して求め、(7−a)に進む。
【0131】
図31に示すように、この実施形態のデジタル複写機420はインターフェース(I/F)ボード421を介してパーソナルコンピュータ422に接続することができ、パーソナルコンピュータ422によりデジタル複写機420のスキャナ400を駆動して綴じ部補正処理手段409からの画像データをパーソナルコンピュータ422に取り込むことができる。
【0132】
この実施形態では、読み取り画像を頁部(平面部)と綴じ部に分割して頁部はスキュー補正のための画像シフト、綴じ部は主走査方向及び副走査方向の伸長処理を行うことにより、平面画像に復元することができた。
【0133】
また、この実施形態では、製本原稿の頁部境界位置を綴じ部深さ35mm、綴じ部傾斜角90度まで検出することができ、図60の点線のような製本原稿の綴じ部深さに対して図60の実線のように綴じ部深さの検出結果が得られた。また、綴じ部深さの検出誤差は図61に示すようになった。この場合、綴じ部開始位置を拘束点として綴じ部深さ10mmの地点まで綴じ部深さを検出し、誤差は±0.4mm、誤差範囲は±0.2mmであった。
【0134】
図62は本実施形態の副走査方向の復元精度を表わす倍率誤差を示し、綴じ部深さ10mm以内の範囲で倍率誤差±10%以内を満足した。図63は本実施形態の主走査方向の復元精度を表わす副走査曲がりを示し、綴じ部深さ10mm以内の範囲で副走査曲がり±0.5mm以内を満足した。
【0135】
図64はスキャナの読み取りデータの濃度分布を示す。これは、副走査方向に約3mm毎にサンプリングしたもので、空間部、頁地肌部、罫線・文字部と分布しており、綴じ部の深いところでは地肌レベルが相当低く(濃く)、頁地肌部にノイズ状のばらつきが見られる。図65は、本実施形態において上記読み取りデータの主走査方向8画素移動平均をとったものの濃度分布を示し、濃度が滑らかになった。
【0136】
この実施形態では、綴じ部深さ35mm(製本厚70mm相当)、綴じ部傾斜角90度近傍まで頁境界位置の検出が可能であり、この頁境界位置の検出には主走査方向の移動平均、濃度分布の黒ピークと白ピーク値による適応閾値、副走査方向の移動平均処理が有効であった。光学系のMTFにより境界の濃度分布は焦点面でも複数画素に及んでおり、正確な境界位置を特定できないが、頁境界の相対的な位置が滑らかになることにより復元処理が可能である。
【0137】
この実施形態は、請求項1に係る発明の実施形態であって、製本原稿画像を読み取る原稿画像読み取り手段としてのスキャナ400と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段としてのスキャナ400と、この頁境界部読み取り手段の読み取りデータより製本原稿の頁境界部の形状を認識する頁境界部形状認識手段としての綴じ部補正処理手段409と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段としての綴じ部補正処理手段409と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段としての綴じ部補正処理手段409とを有する画像処理装置であり、前記頁境界部形状認識手段は、製本原稿の頁境界の上又は下のラインと垂直な方向の読み取りラインの画像濃度データにおける高濃度側の画素データと低濃度側の画素データから各ライン毎の適応閾値を決定し、頁の読み取りデータから頁境界部の位置を算出するので、測距センサのような特別な検知手段を設けることなく、読み取り画像からの綴じ部形状認識により画像処理による湾曲原稿から平面原稿への復元を行うことができ、製本原稿綴じ部の浅い部分から深い部分まで頁境界位置を求めることができる。
【0138】
また、この実施形態は、請求項2に係る発明の実施形態であって、請求項1記載の画像処理装置において、前記頁境界部形状認識手段は、各ライン毎に画像濃度データにおける高濃度側の画素データと低濃度側の画素データとを1対2に分けるデータを適応閾値とするので、実際の綴じ部形状に対して正確に頁境界位置を求めることができる。
【0139】
また、この実施形態は、請求項3に係る発明の実施形態であって、請求項1記載の画像処理装置において、前記頁境界部形状認識手段は、製本原稿の頁境界の上又は下のラインと垂直な方向の読み取りラインの所定の範囲で画像濃度データと適応閾値を比較し、頁の読み取りデータから頁境界部の位置を算出するので、頁境界があり得ない余計な部分で頁境界位置を求めずに正確に且つ速く頁境界位置を求めることができる。
【0140】
また、この実施形態は、請求項4に係る発明の実施形態であって、製本原稿画像を読み取る原稿画像読み取り手段としてのスキャナ400と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段としてのスキャナ400と、この頁境界部読み取り手段の読み取りデータより製本原稿の頁境界部の形状を認識する頁境界部形状認識手段としての綴じ部補正処理手段409と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段としての綴じ部補正処理手段409と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段としての綴じ部補正処理手段409とを有する画像処理装置であり、前記頁境界部形状認識手段は、製本原稿の頁境界の上又は下のラインと垂直な方向の読み取りラインの画像濃度データと閾値を比較し、この閾値と交差する点の隣接画素の濃度データより濃度分布を直線補間して読み取り最小画素より小さい単位で頁境界部の位置を算出するので、頁境界位置データを使った補正処理を高画質に実現することができる。
【0141】
また、この実施形態は、請求項5に係る発明の実施形態であって、製本原稿画像を読み取る原稿画像読み取り手段としてのスキャナ400と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段としてのスキャナ400と、この頁境界部読み取り手段の読み取りデータより製本原稿の頁境界部の形状を認識する頁境界部形状認識手段としての綴じ部補正処理手段409と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段としての綴じ部補正処理手段409と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段としての綴じ部補正処理手段409とを有する画像処理装置であり、前記頁境界部形状認識手段は、製本原稿の頁境界の上又は下のラインと垂直な方向の読み取りラインの画像濃度データの移動平均をとり、その移動平均をとった濃度データと閾値とを比較し、頁の読み取りデータから頁境界部の位置を算出するので、画像濃度のばらつきに対して正確な頁境界位置を算出することができるとともに移動平均処理を簡易な処理回路で行うことが可能で濃度分布を滑らかにする平滑化フィルタと同様な効果を実現することができる。
【0142】
また、この実施形態は、請求項6に係る発明の実施形態であって、製本原稿画像を読み取る原稿画像読み取り手段としてのスキャナ400と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段としてのスキャナ400と、この頁境界部読み取り手段の読み取りデータより製本原稿の頁境界部の形状を認識する頁境界部形状認識手段としての綴じ部補正処理手段409と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段としての綴じ部補正処理手段409と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段としての綴じ部補正処理手段409とを有する画像処理装置であり、前記頁境界部形状認識手段は、製本原稿の頁境界の上又は下のラインと垂直な方向の読み取りラインの画像濃度データの移動平均をとり、その移動平均をとった濃度データにおける高濃度側の画素データと低濃度側の画素データとの所定の比率から各ライン毎の適応閾値を決定し、この適応閾値以上の画素データが所定の複数画素連続したら頁境界部の位置とするので、頁境界位置の誤検知を防止することができて原稿台上にほこりなどのゴミがある場合や読み取りデータにノイズ状の濃度ばらつきがある場合に有効である。
【0143】
また、この実施形態は、請求項7に係る発明の実施形態であって、製本原稿画像を読み取る原稿画像読み取り手段としてのスキャナ400と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段としてのスキャナ400と、この頁境界部読み取り手段の読み取りデータより製本原稿の頁境界部の形状を認識する頁境界部形状認識手段としての綴じ部補正処理手段409と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段としての綴じ部補正処理手段409と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段としての綴じ部補正処理手段409とを有する画像処理装置であり、前記頁境界部形状認識手段は、製本原稿の頁境界の上又は下のラインと垂直な方向の読み取りラインの画像濃度データにおける高濃度側の画素データと低濃度側の画素データとの所定の比率から各ライン毎の適応閾値を決定し、高濃度側の画素データと低濃度側の画素データの発生した範囲で頁境界部の位置を算出するので、頁に文字や絵柄がある場合に有効である。
【0144】
また、この実施形態は、請求項8に係る発明の実施形態であって、製本原稿画像を読み取る原稿画像読み取り手段としてのスキャナ400と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段としてのスキャナ400と、この頁境界部読み取り手段の読み取りデータより製本原稿の頁境界部の形状を認識する頁境界部形状認識手段としての綴じ部補正処理手段409と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段としての綴じ部補正処理手段409と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段としての綴じ部補正処理手段409とを有する画像処理装置であり、前記頁境界部形状認識手段は、製本原稿の頁境界の上又は下のラインと垂直な方向の読み取りラインの画像濃度データの移動平均をとり、この移動平均をとった濃度データにおける高濃度側の画素データと低濃度側の画素データとの所定の比率から各ライン毎の適応閾値を決定し、高濃度側の画素データと低濃度側の画素データの発生した範囲で頁境界部の位置を算出し、この頁境界部の位置のデータの移動平均をとって頁境界部の位置とするので、頁境界位置データを副走査方向に平均化して頁境界位置の配列のばらつきを抑制することができ、精度の良い綴じ部画像を復元することができる。
【0145】
また、この実施形態は、請求項9に係る発明の実施形態であって、製本原稿画像を読み取る原稿画像読み取り手段としてのスキャナ400と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段としてのスキャナ400と、この頁境界部読み取り手段の読み取りデータより製本原稿の頁境界部の形状を認識する頁境界部形状認識手段としての綴じ部補正処理手段409と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段としての綴じ部補正処理手段409と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段としての綴じ部補正処理手段409とを有する画像処理装置であり、前記頁境界部形状認識手段は、製本原稿の頁境界の上又は下のラインと垂直な方向の読み取りラインの画像濃度データにおける高濃度側の画素データと低濃度側の画素データとの所定の比率から各ライン毎の適応閾値を決定し、高濃度側の画素データと低濃度側の画素データの発生した範囲であって、頁画像領域を検出する以前の範囲で頁境界部の位置を検出するので、頁内の文字や絵柄による頁境界部の位置の誤検出を防止することができる。
【0146】
また、この実施形態は、請求項10に係る発明の実施形態であって、請求項9記載の画像処理装置において、前記頁境界部形状認識手段は、読み取りラインの画像濃度データにおける高濃度側の画素データのピークを検知し、このピーク値から所定のレベル以上の低濃度側の画素データを検知し、その後に前記高濃度側の画素データのピーク値以上の画素を検知したことにより頁画像領域と判定するので、頁境界位置を正しく検知することができる。
【0147】
また、この実施形態は、請求項11に係る発明の実施形態であって、製本原稿画像を読み取る原稿画像読み取り手段としてのスキャナ400と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段としてのスキャナ400と、この頁境界部読み取り手段の読み取りデータより製本原稿の頁境界部の形状を認識する頁境界部形状認識手段としての綴じ部補正処理手段409と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段としての綴じ部補正処理手段409と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段としての綴じ部補正処理手段409とを有する画像処理装置であり、前記製本原稿形状認識手段は、前記頁境界部形状認識手段により検出した頁境界位置A、前記原稿画像読み取り手段及び前記頁境界部読み取り手段の光軸位置Akと焦点距離Pから製本原稿の綴じ部深さTを
T=P*A/(Ak−A)
なる式で算出するので、頁境界位置データから見開き製本原稿の綴じ部深さを検出することができる。
【0148】
また、この実施形態は、請求項12に係る発明の実施形態であって、製本原稿画像を読み取る原稿画像読み取り手段としてのスキャナ400と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段としてのスキャナ400と、この頁境界部読み取り手段の読み取りデータより製本原稿の頁境界部の形状を認識する頁境界部形状認識手段としての綴じ部補正処理手段409と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段としての綴じ部補正処理手段409と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段としての綴じ部補正処理手段409とを有する画像処理装置であり、前記製本原稿形状認識手段は、前記頁境界部形状認識手段により検出した頁境界位置A、前記原稿画像読み取り手段及び前記頁境界部読み取り手段の光軸位置Akと焦点距離P、頁平面部の位置Kaから製本原稿の綴じ部深さTを
T=P*(A−Ka)/{(Ak−A)−(A−Ka)}
なる式で算出するので、原稿載置位置を固定しないで綴じ部形状算出処理を実現できる。
【0149】
また、この実施形態は、請求項13に係る発明の実施形態であって、製本原稿画像を読み取る原稿画像読み取り手段としてのスキャナ400と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段としてのスキャナ400と、この頁境界部読み取り手段の読み取りデータより製本原稿の頁境界部の形状を認識する頁境界部形状認識手段としての綴じ部補正処理手段409と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段としての綴じ部補正処理手段409と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段としての綴じ部補正処理手段409とを有する画像処理装置であり、前記製本原稿形状認識手段は、前記頁境界部形状認識手段により検出した頁境界位置より製本原稿の綴じ部深さを算出し、この算出した綴じ部深さの変化量を制限するので、より正しい形状認識を行うことができて適用範囲を拡げることができる。
【0150】
また、この実施形態は、請求項14に係る発明の実施形態であって、請求項3記載の画像処理装置において、前記製本原稿形状認識手段は、前記綴じ部深さの変化量を、その位置の綴じ部深さにより制限するので、真の形状算出に影響を与えない度合で綴じ部の位置によって適正な制限による補正処理を行うことができる。
【0151】
また、この実施形態は、請求項15に係る発明の実施形態であって、請求項4記載の画像処理装置において、前記製本原稿形状認識手段は、前記綴じ部深さの変化量を、その位置の綴じ部深さの1/80に制限するので、実際の製本原稿形状から好ましい処理を行うことができる。
【0152】
図32は本発明の他の実施形態を示す。この実施形態は、フラットベットタイプのイメージスキャナの実施形態であり、平坦な原稿台423上には製本原稿が原稿セット原点424に合わせて載置される。この実施形態では、図33に示すように原稿台423上の製本原稿が光源425により照明されてその反射光がミラー426〜428及びレンズ429を介して読み取りセンサ430上に結像されるとともに、光源425及びミラー426〜428の移動で製本原稿が走査されて製本原稿が読み取られる。
【0153】
この実施形態においては、上記実施形態と同様に上記読み取り処理部408及び綴じ部補正処理部409が設けられ、読み取りセンサ430からの読み取りデータは読み取り処理部408及び綴じ部補正処理部409で処理される。また、この実施形態のイメージスキャナは上記実施形態と同様にI/Fボード421を介してパーソナルコンピュータ422に接続することができ、パーソナルコンピュータ422により本実施形態のイメージスキャナを駆動して綴じ部補正処理手段409からの画像データをパーソナルコンピュータ422に取り込むことができる。この実施形態は、上記実施形態と同様な効果を奏する。
【0154】
次に、本発明の別の実施形態について説明する。この実施形態は、製本原稿(以下単に本原稿ともいう)とシート原稿を選択的に複写する画像形成装置の実施形態である。図34は、この実施形態におけるスキャナの構成を示す。このスキャナは、その装置本体の上部に平坦なコンタクトガラスからなる原稿載置台206及びスケール207が配置されており、このコンタクトガラス206上にはシート原稿が載置されてその上に図示しない圧板が被せられる。このコンタクトガラス206上の原稿は走査ユニット200で走査されて画像が読み取られる。この装置本体の上半分はスキャナユニット30になっており、走査ユニット200はスキャナユニット30の内部で図34において左右方向に走行して原稿の走査を行う。
【0155】
図35は、本装置における走査ユニット200の頁めくり部を示す。本装置におけるめくりベルト208は、材質がPET、PC、PVCなどからなり、表面抵抗1014Ω以上の高抵抗フィルムからなる表面層と表面抵抗108Ω以下の低抵抗フィルムからなる裏面層との二重構造の樹脂フィルムで構成されている。また、めくりベルト駆動ローラ223は、表面に導電性ゴムを被覆した金属ローラで構成されて接地されおり、確実なめくりベルト208の駆動と接地を実現している。めくりベルト208はめくりベルト駆動ローラ223とめくりローラ224に張架されてめくりベルト駆動ローラ223により回転駆動される。
【0156】
更に、帯電ローラ225は金属ローラまたは金属ローラの表面に導電性ゴムを被覆したローラで構成され、この帯電ローラ225には切り換えスイッチ253aを介して交流電源253から所定のタイミングで±2〜4kVの高電圧が印加される。交流電源253はパルス発生器253bからのパルスにより制御される。走査ユニット200が走行してめくりベルト208が駆動されながら後述するタイミングで切り換えスイッチ253aがオンして帯電ローラ225に高圧電源253によりパルス発生器253bの周波数に合った±2〜4kVの交流高電圧がかけられると、帯電ローラ225によりめくりベルト208の表面上に交番電界が生じ、この交番電界の作用によりめくりベルト208の表面に本原稿BOの最上位頁254を吸着させる吸着力が発生する。高圧電源253は走査ユニット200の中に配置されている。
【0157】
本原稿の読み取り走査が開始される時には、スキャナユニット30の左端の端部ホームポジションにいた走査ユニット200が図36において右方向に走行を始める。この時、めくりベルト208と頁送りローラ250は図35の実線で示す位置へ図示しないソレノイドで移動させられる。そして、この走査ユニット200のプラテンガラス205下側の本原稿読み取り位置が本原稿BOの左頁にかかると、図36に示すように、走査ユニット200が本原稿BOの読み取り動作を始めて本原稿BOの原稿面を左頁から右頁へと読み取っていく。ここで、走査ユニット200の本原稿読み取り開始位置は、本原稿BOの大きさ(サイズ)によって変わる。
【0158】
このようにして走査ユニット200が本原稿BOの左頁から右頁へと画像を読み取っていく。図36に示すような走査ユニット200の画像読み取り動作中は、めくりベルト208と頁送りローラ250とが図35の実線で示す位置に保持されている。そして、走査ユニット200が本原稿の見開き右頁の端まで読み終えると、図37に示すように走査ユニット200の原稿走査方向が逆転される。
【0159】
この時、図37に示すようにめくりベルト208と頁送りローラ250が図35の破線で示す位置へ図示しないソレノイドで移動させられる。また、これと略同時に切り換えスイッチ253aがオンしてパルス発生器253bと高圧電源253とにより切り換えスイッチ253aを介して帯電ローラ225に所定周波数の交流高電圧がかけられ、めくりベルト208の表面上に電荷パターンが形成される。
【0160】
本原稿BOの頁めくりを始めるときには、めくりベルト208と頁送りローラ250とが図35の破線で示す位置にあり、頁めくり動作に先行してめくりベルト208の表面上に形成された帯電パターン部が本原稿BOの最上位頁254の上に重なる。そして、最上位頁254の先端がめくりベルト208の下側の中央を越えたところで、図38に示すようにめくりベルト208と頁送りローラ250とが図示しないソレノイドの作用により図35の実線で示す位置に移動させられる。これにより、めくりベルト208の表面に形成された電荷パターンの不平等電界による吸着力で本原稿BOの最上位頁254だけがめくりベルト208の表面上に吸着され、この最上位頁254の端部がめくりベルト208と共に持ち上げられる。
【0161】
本原稿BOの最上位頁254がめくり上げられて再び走査ユニット200が図38に示すように端部ホームポジションに向けて移動し、本原稿BOの最上位頁254が図39に示すようにめくりローラ224と頁送りローラ250に挾まれて確実に搬送される。この最上位頁254は、走査ユニット200の右側部に配置された上下一対の頁ガイド227,228の間を通過して走査ユニット200の右外側にその先端側が送り出される。この時、この走査ユニット200の上方側に取付けられた頁センサ214が走査ユニット200の右外側に送り出される原稿頁を検出して原稿頁が正常に頁めくりされたことが検出される。
【0162】
次いで、図40に示すように本原稿BOの最上位頁254が本原稿の綴じ部までめくり上げられた時点でめくりベルト208と頁送りローラ250が元の位置(図35の破線位置)に戻る。この状態で、走査ユニット200が更に端部ホームポジションに向けて移動し、図41に示すようにめくり上げられた原稿頁が本原稿の綴じ部に引っ張られて一対の頁ガイド227,228の間を戻りながら、本原稿BOの見開き左頁上に重ね合わされて走査ユニット200内から排出される。
【0163】
めくり上げられた原稿頁254が本原稿BOの左頁上に全て重ね合わされると、走査ユニット200の見開き本原稿に対する1回分の画像読み取り・頁めくり動作が終了する。ここで、本原稿BOに対する画像読み取り・頁めくり動作を繰り返し実行したり、画像読み取り及び頁めくり動作の何れか一方の動作のみを繰り返して実行する場合に、上述のようにめくり上げられた原稿頁254が本原稿BOの左頁上に全て重ね合わされると同時に走査ユニット200の移動方向が反転して本原稿の原稿面に対して最短コースで走査ユニット200の往復動作が繰り返される。なお、走査ユニット200は、本原稿BOの画像読み取り動作のみ、あるいは、頁めくり動作のみを行なう場合もある。
【0164】
めくりベルト208上に静電吸着された原稿頁254のめくり込みは、ソレノイドによりめくりベルト208が上方に揺動されてめくりベルト208に吸着された頁254の端部が走査ユニット200側に持ち上げられることによって行われる。この時、本原稿BOの頁がめくられたか否かが頁センサ214によって検出される。頁めくり時に頁センサ214の頁検出が所定のタイミングで行われなかった場合には、その頁めくり動作が再実行される。
【0165】
図42に示すようにミラー222はミラー切り換えソレノイドにより駆動され、ミラー切り換えソレノイドのオン/オフによるミラー222の光路への進退により本原稿専用の下読み取り光路とシート原稿用の一般的な上読み取り光路とが切り換えられる。原稿照明用の光源としては、走査ユニット200の上下の各読み取り部に配設された各2灯の蛍光灯201,202、203,204がそれぞれ使用されている。
【0166】
コンタクトガラス206上の原稿を読み取るときには、ミラー222が光路に進出してコンタクトガラス206上の原稿が蛍光灯203,204により照明され、その反射光がミラー222,220,221及びレンズ216を通して画像読み取り板101上のCCDに結像されて光電変換される。また、本原稿を読み取るときには、ミラー222が光路から退避して蛍光灯201,202によりプラテンガラス205を通して原稿台1上の本原稿を照明し、その反射光がミラー219,220,221及びレンズ216を通して画像読み取り板101上のCCDに結像されて光電変換される。
【0167】
ところで、本装置における原稿台ユニット35には、図34に示すように、装置本体中心の左右にそれぞれ1つづつの原稿台1が配設されてリンク機構11によって上下動自在に支持されている。各原稿台1は、リンク機構11にかけられたバネ13によってそれぞれ上方に加圧されている。また、原稿台1の奥側には、図43に示すように、ヒンジ12を介して原稿押え板14が原稿台1に対して回動自在に支持されている。この原稿押え板14の先端にはストッパ爪15が設けられており、このストッパ爪15は図43において原稿台1の上に原稿押え板14を伏せたときに原稿台1の手前側に設けられたストッパ16に係止されるようになっている。このように、本装置の原稿台ユニット35では、原稿押え板14のストッパ機構が原稿台ユニット35の手前側にあるので、原稿押え板14の操作を容易に行える。
【0168】
一方、原稿台1の上面には複数個の穴1aが穿たれており、これらの穴1aから固定子17の一部が突出されている。また、これらの固定子17の上面には、本原稿BOの表紙を確実に加圧固定させるためのゴム板18がそれぞれ取付けられている。各固定子17は、原稿台1の装置中央側付近に固定された回転軸20(図44参照)にそれぞれ回動自在に支持されている。更に、各固定子17は、図示しないバネによって図43の矢印で示す方向にそれぞれ付勢されている。
【0169】
これにより、図44に示すように、本原稿BOの表表紙と裏表紙とを原稿押え板14と原稿台1との間に挾んで原稿押え板14のストッパ15をストッパ16に係止することによって本原稿BOが原稿台1上に確実に固定される。この場合、本装置では、各固定子17を原稿台1の装置中央側付近に配設したことにより、これらの固定子17と原稿押え板14とで本原稿BOの綴じ部BOa寄りの表表紙及び裏表紙を加圧挾持して本原稿BOを原稿台1上により一層確実に固定することができる。
【0170】
ここで、本原稿BOが載置されていない状態で原稿押え板14を原稿台1上に固定したときには原稿押え板14と原稿台1との間に数mmの隙間ができるように設定されており、厚い表紙を有する本原稿も固定できるように構成されている。更に、本装置では、図34に示すように左側の原稿台1は上下移動のみが可能で、それに載置された本原稿BOのずれが起こらないようになっている。一方、右側の原稿台1は、上下移動だけでなく、スライド溝21によって図34において左右方向に移動可能に支持されている。この右側の原稿台1はバネ10により左方向への移動習性が付勢されており、リンク機構11に植設されたスライド軸22が原稿台1の側面のスライド溝21の端部に突き当たることによって原稿台1の移動が停止される。
【0171】
次に、本装置の原稿台加圧固定切り換え装置及び原稿台待避装置について説明する。
リンク機構11によって上下方向に移動可能に構成されている原稿台1には、バネ13により常に上昇しようとする力が付勢されている(図34参照)。これにより、本装置内に原稿台ユニット35がセットされて原稿台加圧動作モードに入った状態では原稿台1の上昇習性により原稿台1上に見開かれて載置された本原稿BOの原稿面をスキャナユニット30内の走査ユニット200の下部に押し付けるように常に上方に加圧している。
【0172】
この本原稿BOの原稿面の押圧力は、通常、走査ユニット200が受けているが、走査ユニット200が原稿台1上の本原稿から外れた位置に移動した状態では原稿台1の上昇習性によって原稿台1及び本原稿BOがスキャナユニット30内に食い込んで走査ユニット200のスムーズな移動が阻害されてしまう恐れがある。従って、原稿台1が適切な位置まで上昇した状態で原稿台1を固定して原稿台1の上昇習性による原稿台1及び本原稿BOのスキャナユニット30内への余分な食い込みを阻止する必要がある。また、走査ユニット200内の走査光路をミラー222により切り換えてスキャナユニット30の上部に配置されたコンタクトガラス206上の原稿を読み取るときには、走査ユニット200の下部と原稿台1の上面とが接触しないように原稿台ユニット35の下方に原稿台1を待避させておく必要がある。
【0173】
原稿台加圧固定切り換え装置及び原稿台待避装置は、これらの必要性を満たすための装置であり、これらの両装置を1つの機構で兼用させる仕組の構成例を図45〜図49に示す。この機構の制御ワイヤ40は図45に示すように一端にフック41が固定される。制御ワイヤ40の他端には他のフック42が固定され、制御ワイヤ40の略中央部付近には球状の止め玉45が固定されている。
【0174】
フック41はリンク機構11の外側端部(原稿台1の上昇下降によって上下する側)に固定されている。フック41から延びた制御ワイヤ40は、プーリ46,プーリ47を介して方向を変換し、制御プーリ48に巻き付けられている。ここで、制御ワイヤ40は、図46及び図47に示すように、制御プーリ48の溝50に導かれてその中央部付近に固定された止め玉45が制御プーリ48の止め穴49にはめ込まれている。これにより、制御ワイヤ40の動きが制御プーリ48の回転運動に確実に変換される。
【0175】
制御プーリ48に巻かれて延出した制御ワイヤ40は、その一方の端部のフック42に掛けられた張架バネ43の一端によって常に引っ張られている。この張架バネ43の他端は、原稿台ユニット35のベース6に固定されたフック44に掛けられている。制御プーリ48は、図46に示すようにワンウエイクラッチ51を介してシャフト54に支持されている。このシャフト54は、一対の側板55に支持された滑り軸受52に対して両端がEリング53で抜け止めされることによって、滑り軸受52を介して側板55に対して回転自在に支持されている。これにより、制御プーリ48は、シャフト54に対して図47の矢印a方向には自由に回転できるが、この矢印aと反対の方向にはワンウエイクラッチ51の作用によってシャフト54と相対回転することができず、このシャフト54と一体となって回転する。従って、後述する機構によってシャフト54が固定されると、制御プーリ48は、図45において矢印a方向、すなわち、原稿台1が下降する際の回転方向にのみ回転可能な状態になる。
【0176】
次に、この原稿台加圧固定切り換え装置による原稿台1の下降・固定動作について説明する。
図45乃至図47において、シャフト54が固定された状態にあるとき、何らかの外力、例えば、本原稿BOの自重やめくり頁による加圧などによって原稿台1が押し下げられると、この原稿台1側に固定されている制御ワイヤ40のフック41側の端部が弛む。
【0177】
これと同時に制御プーリ48が張架バネ43に引っ張られて制御ワイヤ40のフック41側の弛みを吸収しながら矢印a方向に回転し、制御ワイヤ40が初期の張力を維持してフック44側に移動する。このとき、制御プーリ48はワンウエイクラッチ51の作用によって矢印aと反対の方向に回転することができないので、原稿台1の上昇力が原稿台1に対する押下力を上回っていても、原稿台1の上昇力によって制御プーリ48が矢印aと反対の方向に回転されることはなく、制御プーリ48は矢印a方向に回転した位置を維持して停止される。また、制御プーリ48の停止に伴って制御ワイヤ40の移動も停止し、これによって原稿台1は外力により押し下げられた位置まで下降して停止する。
【0178】
ここで、シャフト54の固定は、以下に述べる原稿台昇降機構によって行われる。
すなわち、シャフト54には、図48に示すようにギヤ56がシャフト54と一体となって回転するように固定されている。また、このギヤ56は、図49に示すように側板55に固定されたスタッド59に回転自在に支持されている他のギヤ57に噛み合っており、その回転がギヤ57に伝達されるように構成されている。
【0179】
更に、ギヤ57はウォームホイール58と一体成形されており、このウォームホイール58には原稿台昇降モータ61の出力軸に固定されたウォームギヤ60が噛み合うように構成されている。この構成により、原稿台昇降モータ61が停止しているときには、ウォームギヤ60とウォームホイール58との噛み合いによってウォームホイール58が回転できず、このウォームホイール58と一体のギヤ57に噛み合っているギヤ56を介して連結されたシャフト54が固定状態となる。
【0180】
次に、原稿台1の原稿台ユニット35下方への待避動作について説明する。図48及び図49において、ギヤ56が矢印b方向に回転するように原稿台昇降モータ61を駆動すると、ワンウエイクラッチ51により制御プーリ48とシャフト54とが一体となって回転し、制御プーリ48が矢印a方向に回転して制御ワイヤ40がフック44側に移動する。
【0181】
この制御ワイヤ40の移動により、図34及び図51において、左右の各原稿台1は下降して図50に示す左右の原稿台下限センサ304で検知される位置で原稿台昇降モータ61の停止により停止し、各原稿台1の上面(本装置では本原稿BOの原稿面)が走査ユニット200から離間した原稿台ユニット35の下方位置、すなわち、図50に示す位置に待避される。この待避動作は、装置本体の電源オン時や読み取り走査を行わない待機時、スキャナユニット30の上部に配置されたコンタクトガラス206上のシート原稿の画像読み取り時及び原稿台ユニット35の引き出し時に実行される。
【0182】
次に、原稿台1の原稿台ユニット35上方への加圧動作について説明する。上述の待避動作時とは逆に、図48及び図49において、ギヤ56が矢印c方向に回転するように原稿台昇降モータ61を駆動すると、シャフト54が図45における矢印a方向と反対の方向に回転し、ワンウエイクラッチ51の作用によって制御プーリ48がシャフト54に対して自由回転可能な状態になる。ここで、本装置では、原稿台1を上方に押し上げるねじりバネ13の力が、制御ワイヤ40を下方に引っ張っている力よりも強く設定されている。
【0183】
従って、このように制御プーリ48が矢印a方向と反対の方向に自由回転できる状態では、原稿台1を上方に押し上げようとするねじりバネ13の力によって制御ワイヤ40がフック41側に移動する。この制御ワイヤ40の移動により、図34において、左右の各原稿台1が上昇し、各原稿台1の上面に見開いて載置された本原稿BOの原稿面が走査ユニット200に加圧される。
【0184】
このように左右の各原稿台1が上昇して各原稿台1上の原稿面が走査ユニット200に圧接した状態で原稿台昇降モータ61を駆動し続けると、ワンウエイクラッチ51の作用によって制御プーリ48に対してシャフト54が自由回転可能な状態になって原稿面の走査ユニット200への圧接状態が持続される。この加圧動作は、後述するように、原稿台1の上に走査ユニット200がある時だけ実行される。
【0185】
この原稿台加圧固定切り換え装置50A及び原稿台待避装置50Bは、図34及び図51に示すように左右一対の原稿台1に対してそれぞれ1組ずつ配設されており、走査ユニット200の移動位置に応じてそれぞれ独立して制御される。すなわち、原稿台加圧固定切り換え装置50A及び原稿台待避装置50Bの駆動源となる左右1組の原稿台昇降モータ61は、それぞれ独立して制御される。
【0186】
図51は上述した待避動作モード時における原稿台1の下方への待避動作を示し、図52はそのタイミングチャートを示す。
この待避動作モードでは、図52に示すように走査ユニット200の移動開始に先立って左右の原稿台昇降モータ61がそれぞれ左右の原稿台下限センサ304が各原稿台1を検知するまで逆転されて図50に示すように左右の原稿台1が下方へ下げられる。その後、スキャナモータ106が駆動されて走査ユニット200が所定の方向に走査され、必要であれば走査ユニット200の走査が何度も繰り返される。そして、この待避動作モード終了時に走査ユニット200が中央ホームポジションに戻り、左右の原稿台昇降モータ61が所定の回数だけ正転して左右の原稿台1が元の位置に戻る。
【0187】
一方、コンタクトガラス206上のシート原稿を読み取る時は、スケール207が原稿端面の載置基準となる。この基準は、本原稿の読み取り開始位置と異なり、構成が最小サイズになるようにしてある。これにより、原稿の読み取り開始ポイントが常に一定となり、制御も簡単となる。コンタクトガラス206上の原稿を読み取るシートモードに入ったときは、原稿台下方待機動作を行った後に、走査ユニット200が中央ホームポジションから左側に移動して端部HPセンサで検知される端部ホームポジション(図53に示す走査ユニット200の位置)まで来て停止し、操作部99により読み取り条件が入力されてスタートスイッチがオンされるのを待つ。ここで、スタートスイッチがオンされると、スキャナモータ106が駆動されて走査ユニット200が図34の右方向に走査され、コンタクトガラス206上の原稿が走査ユニット200により読み取られる。
【0188】
次に、原稿台1の加圧・固定動作モードについて説明する。
本原稿モードで本装置の動作が終了した時には走査ユニット200が図34に示す中央ホームポジションに戻るので、本装置に本原稿BOをセットする時も走査ユニット200が中央ホームポジションに位置している。これは、本原稿BOを本装置の中央を基準としてセットするので、原稿台ユニット35をスライドさせて閉じた後に原稿台1を上昇させてセットする時にどんな大きさの本原稿でも確実に押えるられるようにするためである。この動作開始時には、もう一度、中央HPセンサで走査ユニット200が中央ホームポジションにあることを確認する。そして、走査ユニット200は、中央ホームポジションから左側に移動して端部HPセンサで検知される端部ホームポジション(図54参照)まで来て停止する。
【0189】
図53乃至図57は原稿台1の加圧・固定モード時における走査ユニット200の遷移図を示し、図58はそのタイミングチャートを示す。
走査ユニット200の端部ホームポジション(図53参照)は、画像読み取り頁めくり動作開始ポイント、且つ、動作終了ポイントである。この端部ホームポジションでは、走査ユニット200は原稿台1にかかっていない。この状態では、両側の原稿台昇降モータ61は停止しており、左右の原稿台1は共に固定状態にある。
【0190】
この原稿台1の加圧・固定モードでは、先ず、走査ユニット200の駆動モータであるスキャナモータ106が正転して走査ユニット200が図53の右方向へ移動する。そして、走査ユニット200の右側の原稿押えローラ281aが本原稿BOの左端にかかったとき(Aポイント;図54参照)に左側の原稿台昇降モータ61が正転し、左側の原稿台1が加圧状態になる。これにより、本原稿BOは走査ユニット200に押し付けられ、最適な画像読み取りが行われる。
【0191】
走査ユニット200が本原稿中心ポイント(図55参照)に到達する少し前に右側の原稿押えローラ281aが右側の原稿台1の左端にかかる(Bポイント;図58参照)。そのとき、右側の原稿台昇降モータ61が正転し、右側の原稿台1が加圧状態になる。次いで、走査ユニット200は、本原稿中心ポイントを通過し、本原稿BOの右側頁の画像読み取りを始める。その後に左側の原稿押えローラ281bが左側の原稿台1の右端にかかる(Cポイント;図58参照)。このとき、左側の原稿台昇降モータ61が停止し、左側の原稿台1が固定状態になる。これにより、本原稿BOは、固定されてスキャナユニット30に食い込むことなく原稿押えシート282bに押えられ、次に走査ユニット200が通過するのを同じ高さを保ちながら待つ。
【0192】
図56は、本原稿右頁の画像読み取り中または右頁めくり上げ中の走査ユニット200の動作状態を示している。本原稿右頁の画像読み取りを終えた走査ユニット200は、左側の原稿押えローラ281bが右側の原稿台1の右端にかかった状態(Dポイント;図57参照)で停止し、スキャナモータ106が逆転して走査ユニット200を左方向へ移動させる。これにより、走査ユニット200は、本原稿BOの右頁をめくり上げながら進み、本原稿中心ポイント(図55参照)に到達する少し前に左側の原稿押えローラ281bが左側の原稿台1の右端にかかる(Cポイント)。そのとき、左側の原稿台昇降モータ61が正転し、左側の原稿台1が加圧状態になる。
【0193】
次いで、走査ユニット200は、本原稿中心ポイントを通過し、本原稿左側頁の上に、めくり上げた右頁を重ね合せる動作を始める。その後に右側の原稿押えローラ281aが右側の原稿台1の左端にかかる(Bポイント)。このとき、右側の原稿台昇降モータ61が停止し、右側の原稿台1が固定状態になる。これにより、本原稿BOは、固定されてスキャナユニット30に食い込むことなく原稿押えシート282aに押えられ、次に走査ユニット200が通過するのを同じ高さを保ちながら待つ。
【0194】
その後、走査ユニット200は、本原稿の左側頁の上に、めくり上げた頁を重ね合せながら進み、この頁の重ね合わせが終了した後に右側の原稿押えローラ281aが左側の原稿台1左端にかかる(Aポイント;図54参照)。このとき、左側の原稿台昇降モータ61が停止し、左側の原稿台1が固定状態になる。これにより、本原稿BOは、固定されてスキャナユニット30に食い込むことなく原稿押えシート282bに押えられ、次に走査ユニット200が通過するのを同じ高さを保ちながら待つ。そして、走査ユニット200は、端部ホームポジション(図53参照)まで来て停止する。
【0195】
次に、原稿台前方引き出し機構について説明する。
図34及び図51に示すように、原稿台ユニット35の左右側面には、スライドレール300がスキャナユニット30内のレールブラケット301に対して装置本体の前後方向にスライド可能にそれぞれ連結されている。原稿台ユニット35がスキャナユニット30内に納まっている(セットされている)ときは、特別な指令が無い限り、図51に示す開閉ロック装置302が原稿台ユニット35を固定し、オペレータが原稿台ユニット35を引き出せない状態にある。この状態は、開閉ロックセンサ320によって検知されている。スライドレール300は、装置本体の前面から原稿台ユニット35上の原稿台1を充分手前側に引き出せるだけの伸縮能力を備えている。また、原稿台ユニット35の前面には、開閉スイッチ303と、図示しない原稿台引出し用の取手が付いている。
【0196】
次に、本原稿のセット動作について説明する。
オペレータが本原稿を原稿台1にセットするときには、操作部99で本原稿モードになっていることを確認した後、開閉スイッチ303を押す。ここで、もし本原稿モードになっていない場合は、操作部99の本原稿モードスイッチを押す。何れの場合も、原稿台1が下方退避位置になければ、原稿台下方退避動作が行われる。そして、走査ユニット200が中央ホームポジションになければ、走査ユニット200の中央ホームポジションへの移動動作が行われる。
【0197】
走査ユニット200が中央ホームポジションにあると、開閉ロック装置302が解除されて原稿台ユニット35が引き出し可能になる。このとき、操作部99には、原稿台ユニット35が引き出し可能な状態にあることが表示される。オペレータは、原稿台ユニット35の前面にある取手を持って原稿台ユニット35を装置本体の手前側に引き出し、次いで左右の原稿押え板14のストッパ爪15とストッパ爪16との係止を解除して原稿押え板14の前側を上に引き上げて開口させる(図43参照)。
【0198】
オペレータは、この状態で本原稿BOの表表紙及び裏表紙をそれぞれ原稿台1上に前側基準で合わせて置き、原稿押え板14を倒して表裏のそれぞれの表紙を各原稿押え板14と各原稿台1とで挾み込むように押え、原稿押え板14のストッパ15をストッパ16に掛けて固定する(図44参照)。
【0199】
その後、オペレータは、本原稿の画像読み取りを開始したい頁を開いて本原稿の綴じ部付近を片手で押えながら、原稿台ユニット35をスキャナユニット30内に押し込んで納める(セットする)。そして、開閉ロックセンサ320によって、原稿台ユニット35がスキャナユニット30内にセットされたことが検知されると、開閉ロック装置302によって原稿台ユニット35が装置本体の所定の位置に固定される。この後、原稿台昇降モータ61によって原稿台1が上昇され、本原稿BOが所定の読み取り位置にセットされる。
【0200】
この実施形態は、上記実施形態のデジタル複写機における読み取り処理部108、綴じ部補正処理部409、書き込み処理部410及びプリンタ411が用いられ、製本原稿の複写を行うモードでは上記画像読み取り板101からの読み取りデータが読み取り処理部108、綴じ部補正処理部409及び書き込み処理部410で処理されてプリンタ411に入力され、上記実施形態のデジタル複写機と同様な効果を奏する。
【0201】
【発明の効果】
以上のように請求項1記載の発明によれば、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを適応閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データにおける高濃度側の画素データと低濃度側の画素データから各読み取りライン毎の適応閾値を決定し、前記頁境界部読み取り手段の読み取りデータから頁境界部の位置を算出するので、測距センサのような特別な検知手段を設けることなく、読み取り画像からの綴じ部形状認識により画像処理による湾曲原稿から平面原稿への復元を行うことができ、製本原稿綴じ部の浅い部分から深い部分まで頁境界位置を求めることができる。
【0202】
請求項2記載の発明によれば、請求項1記載の画像処理装置において、前記頁境界部形状認識手段は、各読み取りライン毎に前記頁境界部読み取り手段の画像濃度データにおける前記製本原稿の外側部分の高濃度側の画素データと前記製本原稿の外枠部の低濃度側の画素データとを1対2に分けるデータを前記適応閾値とするので、実際の綴じ部形状に対して正確に頁境界位置を求めることができる。
【0203】
請求項3記載の発明によれば、請求項1記載の画像処理装置において、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの所定の範囲で前記頁境界部読み取り手段の画像濃度データと適応閾値を比較し、前記頁境界部読み取り手段の読み取りデータが所定の複数画素連続して適応閾値以上となる点を頁境界部の位置として算出するので、頁境界があり得ない余計な部分で頁境界位置を求めずに正確に且つ速く頁境界位置を求めることができる。
【0204】
請求項4記載の発明によれば、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データと閾値を比較し、この閾値と交差する点の隣接画素の濃度データより濃度分布を直線補間して読み取り最小画素より小さい単位で頁境界部の位置を算出するので、頁境界位置データを使った補正処理を高画質に実現することができる。
【0205】
請求項5記載の発明によれば、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを適応閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データの移動平均をとり、その移動平均をとった濃度データと閾値とを比較し、該移動平均をとった濃度データが所定の複数画素連続して閾値以上となる点を頁境界部の位置として算出するので、画像濃度のばらつきに対して正確な頁境界位置を算出することができるとともに移動平均処理を簡易な処理回路で行うことが可能で濃度分布を滑らかにする平滑化フィルタと同様な効果を実現することができる。
【0206】
請求項6記載の発明によれば、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを適応閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データの移動平均をとり、その移動平均をとった濃度データにおける高濃度側の画素データと低濃度側の画素データとの所定の比率から各読み取りライン毎の適応閾値を決定し、この適応閾値以上の画素データが所定の複数画素連続したら頁境界部の位置とするので、頁境界位置の誤検知を防止することができて原稿台上にほこりなどのゴミがある場合や読み取りデータにノイズ状の濃度ばらつきがある場合に有効である。
【0207】
請求項7記載の発明によれば、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを適応閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データにおける高濃度側の画素データと低濃度側の画素データとの所定の比率から各読み取りライン毎の適応閾値を決定し、前記高濃度側の画素データと前記低濃度側の画素データの発生した範囲で前記頁境界部読み取り手段の読み取りデータが所定の複数画素連続して適応閾値以上となる点を頁境界部の位置として算出するので、頁に文字や絵柄がある場合に有効である。
【0208】
請求項8記載の発明によれば、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを適応閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データの移動平均をとり、この移動平均をとった濃度データにおける前記高濃度側の画素データと前記低濃度側の画素データとの所定の比率から各読み取りライン毎の適応閾値を決定し、前記高濃度側の画素データと前記低濃度側の画素データの発生した範囲で前記頁境界部読み取り手段の読み取りデータが所定の複数画素連続して適応閾値以上となる点を頁境界部の位置として算出し、この頁境界部の位置のデータの移動平均をとって頁境界部の位置とするので、頁境界位置データを副走査方向に平均化して頁境界位置の配列のばらつきを抑制することができ、精度の良い綴じ部画像を復元することができる。
【0209】
請求項9記載の発明によれば、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを適応閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記頁境界部形状認識手段は、前記頁境界部読み取り手段の読み取りラインの画像濃度データにおける前記高濃度側の画素データと前記低濃度側の画素データとの所定の比率から各読み取りライン毎の適応閾値を決定し、前記高濃度側の画素データと前記低濃度側の画素データの発生した範囲であって、頁画像領域を検出する以前の範囲で前記頁境界部読み取り手段の読み取りデータが所定の複数画素連続して適応閾値以上となる点を頁境界部の位置として検出するので、頁内の文字や絵柄による頁境界部の位置の誤検出を防止することができる。
【0210】
請求項10記載の発明によれば、請求項9記載の画像処理装置において、前記頁境界部形状認識手段は、読み取りラインの画像濃度データにおける前記高濃度側の画素データのピークを検知し、このピーク値から所定のレベル以上の低濃度側の画素データを検知し、その後に前記高濃度側の画素データのピーク値以上の画素を検知したことにより頁画像領域と判定するので、頁境界位置を正しく検知することができる。
【0211】
請求項11記載の発明によれば、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記製本原稿形状認識手段は、前記頁境界部形状認識手段により検出した頁境界位置A、前記原稿画像読み取り手段及び前記頁境界部読み取り手段の光軸位置Akと焦点距離Pから製本原稿の綴じ部深さTを
T=P*A/(Ak−A)
なる式で算出するので、頁境界位置データから見開き製本原稿の綴じ部深さを検出することができる。
【0212】
請求項12記載の発明によれば、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記製本原稿形状認識手段は、前記頁境界部形状認識手段により検出した頁境界位置A、前記原稿画像読み取り手段及び前記頁境界部読み取り手段の光軸位置Akと焦点距離P、頁平面部の位置Kaから製本原稿の綴じ部深さTを
T=P*(A−Ka)/{(Ak−A)−(A−Ka)}
なる式で算出するので、原稿載置位置を固定しないで綴じ部形状算出処理を実現できる。
【0213】
請求項13記載の発明によれば、製本原稿画像を読み取る原稿画像読み取り手段と、見開き製本原稿の頁境界部を読み取る頁境界部読み取り手段と、この頁境界部読み取り手段の読み取りデータを閾値と比較して前記製本原稿の外側部分の高濃度側画素データと前記製本原稿の外枠部の低濃度側画素データとの境界を求めることで製本原稿の頁境界部の形状を認識する頁境界部形状認識手段と、この頁境界部形状認識手段で認識した頁境界部の形状より見開き製本原稿の形状を認識する製本原稿形状認識手段と、この製本原稿形状認識手段で認識した見開き製本原稿の形状より見開き製本原稿の綴じ部画像の歪を補正する綴じ部画像歪補正手段とを有する画像処理装置であって、前記製本原稿形状認識手段は、前記頁境界部形状認識手段により検出した頁境界位置より製本原稿の読み取りライン毎の綴じ部深さを算出し、この算出した綴じ部深さにおける隣接した読み取りラインの綴じ部深さの変化量を所定の量以下に制限するので、より正しい形状認識を行うことができて適用範囲を拡げることができる。
【0214】
請求項14記載の発明によれば、請求項13記載の画像処理装置において、前記製本原稿形状認識手段は、前記隣接した読み取りラインの綴じ部深さの変化量を、その位置の綴じ部深さにより制限するので、真の形状算出に影響を与えない度合で綴じ部の位置によって適正な制限による補正処理を行うことができる。
【0215】
請求項15記載の発明によれば、請求項14記載の画像処理装置において、前記製本原稿形状認識手段は、前記隣接した読み取りラインの綴じ部深さの変化量を、その位置の綴じ部深さの1/80に制限するので、実際の製本原稿形状から好ましい処理を行うことができる。
【図面の簡単な説明】
【図1】本発明の一実施形態における画像データの流れと画像処理の形態を示す図である。
【図2】同実施形態におけるスキャナの外観を示す斜視図である。
【図3】一般的な製本原稿の見開き形状を示す斜視図である。
【図4】約5mm厚の製本原稿を中央頁付近で開いてスキャナの原稿台上にセットした場合を示す正面図である。
【図5】製本原稿をその最初の頁を開いてスキャナの原稿台上にセットした場合を示す正面図である。
【図6】上記実施形態を説明するための図である。
【図7】上記実施形態における製本原稿の読み取り形状と復元処理後の形状を示す平面図である。
【図8】上記実施形態における切り換え点検出範囲を示す図である。
【図9】上記実施形態における切り換え点検出範囲を示す図である。
【図10】上記実施形態における切り換え点検出範囲を示す図である。
【図11】上記実施形態における切り換え点検出範囲を示す図である。
【図12】上記実施形態における切り換え点検出範囲を示す図である。
【図13】上記実施形態における製本原稿の直線と綴じ部との切り換え(検出)・切り換え点検知範囲決定フローを示すフローチャートである。
【図14】上記実施形態における境界検出による形状認識処理フローを示すフローチャートである。
【図15】上記実施形態における画像データの移動平均を説明するための図である。
【図16】上記実施形態における読み取りデータを説明するための図である。
【図17】上記実施形態の頁部境界検出を説明するための図である。
【図18】上記実施形態の適応しきい値を説明するための図である。
【図19】上記実施形態の頁境界位置算出単位を説明するための図である。
【図20】上記実施形態の綴じ部境界歪みを説明するための図である。
【図21】上記実施形態の綴じ部深さ算出フローを示すフローチャートである。
【図22】上記実施形態の綴じ部境界歪みを示す図である。
【図23】上記実施形態の画像長さ算出を説明するための図である。
【図24】上記実施形態の概略を示す断面図である。
【図25】上記実施形態の頁部(平面部)と利部の処理を切り換える処理フローを示すフローチャートである。
【図26】上記実施形態の主走査方向画素間補間を説明するための図である。
【図27】上記実施形態の主走査方向画素間補間を説明するための図である。
【図28】上記実施形態の投影倍率算出・光軸アドレス決定フローを示すフローチャートである。
【図29】上記実施形態の主走査方向画素間補間を説明するための図である。
【図30】上記実施形態の副走査方向復元フローを示すフローチャートである。
【図31】本発明の他の実施形態とパーソナルコンピュータとの接続状態を示す概略図である。
【図32】同実施形態を示す斜視図である。
【図33】同実施形態の光学系を示す概略図である。
【図34】本発明の別の実施形態におけるスキャナの構成を示す図である。
【図35】同実施形態の装置における頁めくり部を示す断面図である。
【図36】同装置における走査ユニットの本原稿読み取り走査状態を示す概略図である。
【図37】同装置における走査ユニットの走査方向逆転時の状態を示す概略図である。
【図38】同装置における走査ユニットの頁めくり走査時の状態を示す概略図である。
【図39】同装置における走査ユニットの他の本原稿読み取り走査状態を示す概略図である。
【図40】同装置における走査ユニットの頁めくり走査状態を示す概略図である。
【図41】同装置における走査ユニットの他の頁めくり走査状態を示す概略図である。
【図42】同走査ユニットの概略を示す断面図である。
【図43】上記装置の原稿台ユニットを示す斜視図である。
【図44】上記装置の本原稿載置部分を示す断面図である。
【図45】上記装置における原稿台加圧固定切り換え装置及び原稿台待避装置を示す斜視図である。
【図46】同原稿台加圧固定切り換え装置及び原稿台待避装置を示す断面図である。
【図47】上記装置の制御プーリを示す斜視図である。
【図48】上記原稿台加圧固定切り換え装置及び原稿台待避装置の一部を示す斜視図である。
【図49】上記原稿台加圧固定切り換え装置及び原稿台待避装置の他の一部を示す側面図である。
【図50】上記装置の原稿台待避状態を示す断面図である。
【図51】上記装置の原稿台待避状態を示す平面図である。
【図52】上記装置の原稿台待避動作を示すタイミングチャートである。
【図53】上記走査ユニットの走査開始・終了時の状態を示す概略図である。
【図54】上記走査ユニットの本原稿走査開始状態を示す概略図である。
【図55】上記走査ユニットの本原稿中央走査状態を示す概略図である。
【図56】上記走査ユニットの本原稿右頁上の状態を示す概略図である。
【図57】上記走査ユニットの走査方向逆転時の状態を示す概略図である。
【図58】上記走査ユニットの動作を示すタイミングチャートである。
【図59】製本原稿の原稿台載置状態を示す正面図である。
【図60】上記実施形態の製本原稿の綴じ部深さに対する綴じ部深さの検出結果を示す図である。
【図61】上記実施形態の綴じ部深さ検出誤差を示す図である。
【図62】上記実施形態の副走査方向の復元精度を表わす倍率誤差を示す図である。
【図63】上記実施形態の主走査方向の復元精度を表わす副走査曲がりを示す図である。
【図64】上記実施形態のスキャナの読み取りデータの濃度分布を示す図である。
【図65】上記実施形態において読み取りデータの主走査方向8画素移動平均をとったものの濃度分布を示す図である。
【符号の説明】
400 スキャナ
402 製本原稿
403 原稿台
408 読み取り処理部
409 綴じ部補正処理部
410 書き込み処理部
411 プリンタ[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image reading apparatus such as an image scanner, a bookbinding document image forming apparatus, an image capturing apparatus, and an image processing apparatus used for an image correction function by application software of a personal computer.
[0002]
[Prior art]
When an image is captured from a bookbinding document by a copying machine or a scanner, the binding portion of the
[0003]
As shown in FIG. 59, a problem that occurs when a bookbinding original is read by a flat bed type scanner used in a general copying machine is as follows. (1) Shrinkage of read image in the main scanning direction (characters and ruled lines are bent) ), (2) Shrinkage in the sub-scanning direction (characters are crushed), (3) Defocus (characters are crushed), and (4) Shadows (background is dirty).
[0004]
Japanese Patent Application Laid-Open No. 60-65668 measures the length of a spread book in the sub-scanning direction, calculates the radius of curvature at the binding portion of the spread book, and processes the deformed image to reproduce an image without distortion. An image processing method for achieving the above is described. In Japanese Patent Laid-Open No. 60-65669, the correction value of the main scanning position of the book binding portion is obtained from the curvature radius of the book binding portion, and the read information position of the binding portion in the main scanning direction is obtained based on the correction value. An image processing method that corrects the deformation of the image by correcting the above is described.
[0005]
These image processing methods have means for correcting binding distortion in the main scanning direction and sub-scanning direction in the read image of a spread bookbinding document, and the length of the original and the actual length are set with the shape of the binding portion as the shape of the radius r. I'm looking for more.
Also, in a device for turning pages of a bookbinding document, the upper edge (boundary) of the page is automatically detected from the read image data of the bookbinding document based on the density difference between the page and the black platen cover, and the document on the upper side of the page Proposals have been made to detect a range and erase the outside of the range.
[0006]
Japanese Patent Application Laid-Open No. 58-130361 calculates the distance between a reading light receiver and an object, and controls the distance between the reading light receiver or lens and the object according to this distance. Thus, there is described an image reading device that can read an image of the surface of an object made of a three-dimensional object such as a thick book. Japanese Patent Application Laid-Open Nos. 61-171272, 61-237469, and 1-232872 are provided with a means for measuring the height of the original, and read according to the amount of change in the height of the original. A scanner device and a reading device that correct distortion of image data by controlling the relative speed between a sensor and a document are described. These are separately provided with a sensor for measuring the distance of the original surface, and this is scanned along the original to measure the distance to the original.
[0007]
Japanese Patent Application Laid-Open No. 5-161000 discloses distance measuring means for measuring a plurality of points of an original, interpolation means for interpolating original reading data, and correcting the degree of bending of the original according to the output of the interpolation means. Having a means is described. Japanese Patent Application Laid-Open No. 5-161001 describes one having shape measuring means for measuring the shape of a document, means for calculating an image expansion ratio of each pixel, and expansion means for performing pixel expansion by density reproduction interpolation. Has been.
[0008]
Japanese Patent Application Laid-Open No. 5-161002 has shape measuring means for measuring the shape of a document and means for correcting bending in the row direction (main scanning direction). After correcting the bending, the blur is corrected and decompression processing ( For the sub-scanning direction). Japanese Patent Application Laid-Open No. 5-161003 discloses boundary detection means for detecting a boundary between a document and a document table, output detection means for detecting an output at a predetermined distance from the boundary, and means for correcting a read output. What is provided is described.
[0009]
Japanese Patent Application Laid-Open No. 5-161004 discloses a reading unit that reads a document at a predetermined interval from a document table, a boundary detection unit that detects a boundary between the document and the document table, and an output of the boundary detection unit to increase the height of the document. A document height detection unit for detecting the height and a correction unit for performing correction according to the height data of the document height detection unit are described. Japanese Patent Application Laid-Open No. 6-164852 discloses a technique for detecting a boundary between a document and a document table and calculating a variable magnification (main scanning direction) to correct image distortion.
[0010]
In particular, JP-A-5-161003 and JP-A-5-161004 describe that the boundary between a document and a document table is detected, thereby detecting the document height and correcting the image. .
Those described in JP-A-5-161000 to JP-A-5-161004 and JP-A-6-164852 are placed so that the bound original is facing upward.
[0011]
[Problems to be solved by the invention]
The image processing method includes means for correcting binding portion distortion in the main scanning direction and the sub-scanning direction in the read image of a spread bookbinding document, and the binding portion has a radius r shape based on the document length and the actual length. Therefore, the binding portion distortion can be accurately corrected only when the shape of the closed portion is a perfect circle.
[0012]
JP-A-58-130361, JP-A-61-171272, JP-A-61-237569, and JP-A-1-2322872 have a separate sensor for measuring the distance of the document surface. It must be provided and scanned along the original to measure the distance between the originals.
[0013]
In the above-mentioned JP-A-5-161000 to JP-A-5-161004 and JP-A-6-164852, a bookbinding document is placed facing upwards, so that the document surface is curved over the whole, The height of the page facing upward is measured over the entire surface by detecting the boundary of the document, and correction must be performed on all the curved page surfaces. In addition, a specific method for page boundary detection is not disclosed.
[0014]
The present invention can restore a curved original to a flat original by image processing by recognizing the binding part shape from the read image without providing a special detection means such as a distance measuring sensor. The page boundary position can be obtained from the shallow part to the deep part, the page boundary position can be obtained accurately with respect to the actual binding part shape, and the page boundary position is not obtained in an extra part where there can be no page boundary. The page boundary position can be obtained accurately and quickly, correction processing using the page boundary position data can be realized with high image quality, and an accurate page boundary position can be calculated with respect to variations in image density. In addition, moving average processing can be performed with a simple processing circuit, and the same effect as a smoothing filter that smoothes the density distribution can be realized, and erroneous detection of the page boundary position can be prevented. This is effective when there is dust or other dust on the platen or when there is a noise-like density variation in the scanned data, and is effective when there are characters or pictures on the page. Averaging in the direction can suppress variation in the arrangement of the page boundary position, can restore an accurate binding portion image, and prevent erroneous detection of the position of the page boundary portion due to characters and pictures on the page. It is possible to detect the page boundary position correctly, detect the binding depth of the spread bookbinding document from the page boundary position data, and realize the binding shape calculation process without fixing the document placement position. It is possible to perform more accurate shape recognition and expand the applicable range, and it is possible to perform correction processing with appropriate restrictions depending on the position of the binding part to the extent that it does not affect the true shape calculation. And an object thereof is to provide an image processing apparatus capable of performing preferable process from the bookbinding original shape.
[0015]
[Means for Solving the Problems]
In order to achieve the above object, the invention described in
[0016]
According to a second aspect of the present invention, in the image processing device according to the first aspect, each of the page boundary shape recognition means includes: reading Line by line Of the page boundary reading means In image density data Of the outer side of the bookbinding document Pixel data on the high density side Of the outer frame of the bookbinding document Data that divides the pixel data on the low density side into 1 to 2 Said The threshold value is used as an adaptive threshold, and the page boundary position can be accurately obtained with respect to the actual binding portion shape.
[0017]
According to a third aspect of the present invention, in the image processing apparatus according to the first aspect, the page boundary shape recognition means includes: Of the page boundary reading means In a certain range of the reading line Of the page boundary reading means Compare the image density data with the adaptive threshold, Of the page boundary reading means Read data Is a point that is equal to or greater than the adaptive threshold value for a predetermined number of consecutive pixels. Page border position As It is calculated, and the page boundary position can be obtained accurately and quickly without obtaining the page boundary position in an extra portion where there can be no page boundary.
[0018]
According to a fourth aspect of the present invention, document image reading means for reading a bookbinding document image, page boundary portion reading means for reading a page boundary portion of a spread bookbinding document, and read data of the page boundary portion reading means Is compared with a threshold value to obtain a boundary between the high density pixel data of the outer portion of the bookbinding document and the low density pixel data of the outer frame portion of the bookbinding document. A page boundary shape recognition means for recognizing the shape of the page boundary portion of the bookbinding document, and a bookbinding document shape recognition means for recognizing the shape of the spread bookbinding document from the shape of the page boundary portion recognized by the page boundary portion shape recognition means; An image processing apparatus having binding portion image distortion correcting means for correcting distortion of a binding portion image of a spread bookbinding document from a shape of the spread bookbinding document recognized by the bookbinding document shape recognition means, wherein the page boundary shape recognition means Is Of the page boundary reading means The image density data of the reading line is compared with a threshold value, the density distribution is linearly interpolated from the density data of adjacent pixels at the point where the threshold value is crossed, and the position of the page boundary is calculated in units smaller than the reading minimum pixel. Thus, the correction processing using the page boundary position data can be realized with high image quality.
[0019]
The invention according to
[0020]
According to a sixth aspect of the present invention, document image reading means for reading a bookbinding document image, page boundary portion reading means for reading a page boundary portion of a spread bookbinding document, and read data of the page boundary portion reading means Is compared with the adaptive threshold value to obtain the boundary between the high density side pixel data of the outer portion of the bookbinding document and the low density side pixel data of the outer frame portion of the bookbinding document. A page boundary shape recognition means for recognizing the shape of the page boundary portion of the bookbinding document, and a bookbinding document shape recognition means for recognizing the shape of the spread bookbinding document from the shape of the page boundary portion recognized by the page boundary portion shape recognition means; An image processing apparatus having binding portion image distortion correcting means for correcting distortion of a binding portion image of a spread bookbinding document from the shape of the spread bookbinding document recognized by the bookbinding document shape recognition means, wherein the page boundary shape recognition means Is Of the page boundary reading means The moving average of the image density data of the reading line is taken, and each density is obtained from a predetermined ratio between the pixel data on the high density side and the pixel data on the low density side in the density data obtained by the moving average reading An adaptive threshold value is determined for each line, and when pixel data equal to or greater than the adaptive threshold value is continuously set for a predetermined number of pixels, the position of the page boundary is determined, and erroneous detection of the page boundary position can be prevented. This is effective when there is dust such as dust or when there is a noise-like density variation in the read data.
[0021]
The invention described in
[0022]
The invention described in
[0023]
According to the ninth aspect of the present invention, document image reading means for reading a bookbinding document image, page boundary portion reading means for reading a page boundary portion of a spread bookbinding document, and read data of the page boundary portion reading means Is compared with the adaptive threshold value to obtain the boundary between the high density side pixel data of the outer portion of the bookbinding document and the low density side pixel data of the outer frame portion of the bookbinding document. A page boundary shape recognition means for recognizing the shape of the page boundary portion of the bookbinding document, and a bookbinding document shape recognition means for recognizing the shape of the spread bookbinding document from the shape of the page boundary portion recognized by the page boundary portion shape recognition means; An image processing apparatus having binding portion image distortion correcting means for correcting distortion of a binding portion image of a spread bookbinding document from the shape of the spread bookbinding document recognized by the bookbinding document shape recognition means, wherein the page boundary shape recognition means Is Of the page boundary reading means In the image density data of the reading line Said Pixel data on the high density side Said Each from the predetermined ratio with the pixel data on the low density side reading Determine the adaptive threshold for each line, Said Pixel data on the high density side Said This is the range where the pixel data on the low density side is generated and before the page image area is detected. The point where the reading data of the page boundary reading means is equal to or more than the adaptive threshold value continuously for a predetermined plurality of pixels. Page border position As This is to detect, and it is possible to prevent erroneous detection of the position of the page boundary due to the characters and patterns in the page.
[0024]
According to a tenth aspect of the present invention, in the image processing apparatus according to the ninth aspect, the page boundary shape recognizing means is used in the image density data of the reading line. Said Detecting the peak of the pixel data on the high density side, detecting the pixel data on the low density side above the predetermined level from this peak value, and then detecting the pixel above the peak value of the pixel data on the high density side Thus, the page image region is determined, and the page boundary position can be detected correctly.
[0025]
According to the eleventh aspect of the present invention, document image reading means for reading a bookbinding document image, page boundary portion reading means for reading a page boundary portion of a spread bookbinding document, and read data of the page boundary portion reading means Is compared with a threshold value to obtain a boundary between the high density pixel data of the outer portion of the bookbinding document and the low density pixel data of the outer frame portion of the bookbinding document. A page boundary shape recognition means for recognizing the shape of the page boundary portion of the bookbinding document, and a bookbinding document shape recognition means for recognizing the shape of the spread bookbinding document from the shape of the page boundary portion recognized by the page boundary portion shape recognition means; The bookbinding document shape recognition means comprises a binding portion image distortion correction means for correcting distortion of the binding portion image of the spread bookbinding document from the shape of the spread bookbinding document recognized by the bookbinding document shape recognition means. From the page boundary position A detected by the page boundary portion shape recognition means, the optical axis position Ak and the focal length P of the document image reading means and the page boundary portion reading means, the binding portion depth T of the bookbinding document is determined.
T = P * A / (Ak−A)
It is possible to detect the binding portion depth of the spread bookbinding document from the page boundary position data.
[0026]
The invention described in
T = P * (A−Ka) / {(Ak−A) − (A−Ka)}
The binding portion shape calculation process can be realized without fixing the document placement position.
[0027]
According to a thirteenth aspect of the present invention, document image reading means for reading a bookbinding document image, page boundary portion reading means for reading a page boundary portion of a spread bookbinding document, and read data of the page boundary portion reading means Is compared with a threshold value to obtain the boundary between the high density pixel data of the outer portion of the bookbinding document and the low density pixel data of the outer frame portion of the bookbinding document. A page boundary shape recognition means for recognizing the shape of the page boundary portion of the bookbinding document, and a bookbinding document shape recognition means for recognizing the shape of the spread bookbinding document from the shape of the page boundary portion recognized by the page boundary portion shape recognition means; The bookbinding document shape recognition means comprises a binding portion image distortion correction means for correcting distortion of the binding portion image of the spread bookbinding document from the shape of the spread bookbinding document recognized by the bookbinding document shape recognition means. From the page boundary position detected by the page boundary part shape recognition means, Per reading line Calculate the binding depth and calculate this Of adjacent reading lines at the binding depth The amount of change in the binding depth Below a certain amount This is a limitation, so that more accurate shape recognition can be performed and the applicable range can be expanded.
[0028]
The invention described in
[0029]
The invention according to
[0030]
DETAILED DESCRIPTION OF THE INVENTION
FIG. 24 shows an outline of an embodiment of an image forming apparatus comprising a digital copying machine to which the inventions according to
[0031]
In the
[0032]
The
[0033]
The
[0034]
FIG. 2 shows the appearance of the
[0035]
When reading an image of a bookbinding document with the
[0036]
The document scales 404 and 405 have a structure that is higher than the document table 403 and has a step, so that the document can be set easily. When the
[0037]
When the operator gives an instruction to start reading a document image on the operation unit, the image of the
[0038]
FIG. 3 shows a spread shape of a
[0039]
The
[0040]
In the present embodiment, as shown in FIG. 6, the binding unit includes (1) binding portion shape recognition processing, (2) main scanning direction restoration processing, and (3) sub-scanning direction restoration processing for the read image data of the
[0041]
In the main scanning direction restoration process, the image is shifted to a fixed position in the main scanning direction by pixel compensation so that the page boundary is a horizontal position in the page portion where the page of the bookbinding original is a plane. Further, at the binding portion where the page is curved, the image is expanded by pixel compensation calculation. The sub-scanning direction restoration process is not performed at the page portion, and the image is expanded by pixel compensation calculation at the binding portion.
[0042]
FIG. 1 shows the flow of image data and the form of image processing in this digital copying machine. The read image data of the
[0043]
The read image data of 8 bits per pixel of the
[0044]
The copying operation is performed by real-time processing that simultaneously reads an image of the
[0045]
The binding portion
[0046]
The
[0047]
Next, the binding part shape recognition process by the page boundary detection in the binding part shape recognition process of the binding part
A. Main scanning moving average
The binding correction processing means 409 performs a moving average process of a plurality of pixels in the main scanning direction, for example, 8 pixels, on the read image data prior to page boundary determination, thereby accurately correcting the page with respect to variations in image density. The boundary position is calculated. The moving average processing has a simple processing circuit and can provide the same effect as a smoothing filter that smoothes the density distribution.
[0048]
B. The binding correction processing means 409 finds the peak density and address (memory address indicating the page boundary position) of the page boundary in the range of 30 to 280 pixels in the main scanning direction. The binding portion
[0049]
The binding portion
[0050]
C. Adaptive threshold
The binding portion
[0051]
D. Boundary pixel with 7 consecutive pixels
The binding portion
[0052]
E. 1/8 precision
The binding portion
[0053]
F. Moving average of boundary address
The binding portion
[0054]
G. When the binding portion
[0055]
Detects the peak of the pixel data on the high density side in the image density data of the reading line in the direction perpendicular to the line above or below the page boundary of the bookbinding document, and pixel data on the low density side above the predetermined level from the peak value Is detected as a page image area by detecting pixels that are equal to or higher than the peak value of the pixel data on the high density side, and the page position is determined as a page image portion based on characters or patterns in the page. Can be detected correctly.
[0056]
FIG. 14 shows a binding portion shape recognition processing flow by the page boundary detection of the binding portion correction processing means 409. The binding portion
[0057]
Pixel of interest = (N1 + N2 + N3 + N4 + X + N5 + N6 + N7) / 8
The binding portion
[0058]
As shown in FIG. 16, the binding portion
[0059]
Therefore, if the black peak held by the binding
Lth = 1/3 * (Dwp−Dbp) + Dbp
(2-h).
[0060]
Next, the binding portion
[0061]
In other words, the binding portion
[0062]
The binding portion
[0063]
15 to 19 plot the density near the boundary address of one main scanning line, and in the shallow flat portion, the density difference between the black background and the white page background is large. In the deep binding portion, the density difference between the background black and the page background white becomes small, and it can be seen that white cannot be read sufficiently because it is away from the document table 403. The boundary is shifted to the right in the deep binding portion compared to the case where the plane is shallow. This corresponds to the fact that the binding portion of the read data of the spread bookbinding document appears to be reduced in comparison with the flat portion on the memory.
[0064]
Next, switching (detection) between a straight line of a bookbinding document and a binding portion and determination of a switching point detection range in the binding portion shape recognition process will be described.
First, the switching point detection range determination will be described. The image data read by the
[0065]
For example, stepped portions such as both ends of the left and right pages are projected from the
[0066]
Further, the binding portion correction processing means 409 reads the switching point at the correct position around the calculated binding portion and detects it from the image data, so that the switching point detection range is accurate and the operating range of the switching point detection processing is reduced. . Actually, the binding portion
[0067]
The binding portion
[0068]
In the present embodiment, for example, the maximum applicable bookbinding thickness is 7 cm. In this case, the width of the binding portion where the spread page of the
[0069]
The binding part
[0070]
Next, switching (detection) between the straight line and the binding portion of the bookbinding document will be described. In this embodiment, the page is curved in order to make image processing differ between the binding portion and the page portion of the spread bookbinding document. The binding area and the page area of the flat surface are separated and the switching point is detected.
[0071]
The binding portion
[0072]
The binding portion correction processing means 409 generally sets the left and right pages of the spread bookbinding original by making the positions of the two points away from the page boundary position detected as described above symmetrical to the left and right pages of the bookbinding original 402. Since the pages are substantially symmetrical, the skew amount of the page can be detected from the inclination of the boundary of the page for each of the spread left and right pages.
[0073]
The binding portion
[0074]
The binding portion
[0075]
The binding portion correction processing means 409 causes image distortion by a determination method with less processing by setting the prescribed distance from the extension of the straight line of the page boundary to a plurality of pixels of the read pixels, for example, four pixels. The binding area can be determined.
The binding portion
[0076]
The binding portion
[0077]
FIG. 13 shows a flow for determining the switching (detection) / switching point detection range between the straight line of the bookbinding document and the binding portion of the binding portion correction processing means 409. The binding portion correction processing means 409 obtains a boundary approximation line of the page portion where the page boundary distribution is a straight line from the page boundary address A3 detected as described above, and uses a portion that becomes a curve away from the straight line as a binding portion. By recognizing and dividing from the page portion, the shape of the bookbinding document is recognized, and the restoration processing is switched between the page portion and the binding portion.
[0078]
As illustrated in FIG. 13, the binding unit
[0079]
The reference position for obtaining the image distortion amount of the left and right pages of the bookbinding original is the boundary address of the switching point, and the binding portion correction processing means 409 sets the point at which the reference position of the left and right pages of the facing page is switched to the largest value of the boundary address. A point (the center of the binding part) is searched for the largest (deep) boundary address and its line (1-b). The binding portion
[0080]
The binding portion
[0081]
If the straight line and the boundary address A3 do not approach within a predetermined range by 4 pixels or more (if 5 lines having the boundary address A3 separated from the straight line by 4 pixels or more to the page boundary side are continued) ) In order to set the switching point before the page boundary becomes a curve as a switching point, a point returned 256 pixels (16 mm) from the temporary switching point is calculated and used as a switching point between a straight line and a curve at the page boundary ( 1-g). The binding portion
[0082]
It is normal that the straight line at the boundary of the page portion is distorted when viewed from the line corresponding to the image start position on the memory (image file). As shown in FIG. 20, the binding portion
[0083]
Next, the binding portion depth will be described.
When the boundary address of the switching point coincides with the beginning of the memory, the binding unit
T = P * A3 / (Ak−A3)
It is calculated by the following formula. A3 may be A2 or A1.
[0084]
If you scan a booklet document on the image reader of a copier or scanner, place the booklet document on it and read the image, the booklet document set may be slightly misaligned. If you are setting a thick booklet document, It is difficult to adjust the page edge of the original to the original scale because the original original scale is difficult to see. Therefore, when the boundary address of the switching point does not coincide with the beginning of the memory, the binding portion
[0085]
That is, the binding portion
T = P * (A3-Ka) / {(Ak-Ka)-(A3-Ka)}
It is calculated by the following formula. The binding portion correction processing means 409 takes the difference in the binding portion depth of adjacent lines by this formula,
(T n -T n-1 ) = Focal plane distance * (difference in boundary address between adjacent lines) / {(Ak−Ka) − (A3−Ak)}
(T n -T n-1 )
[0086]
When the boundary address of the switching point coincides with the beginning of the memory, the binding portion
[0087]
As described above, since the binding portion
[0088]
When a bookbinding document is opened and placed on an image reading unit of a copying machine or a scanner and the image is read, the binding portion of the bookbinding document is curved in an arc shape, so that there is no sudden change or undulation. When detecting the shape of the page boundary and recognizing the binding portion shape of the spread bookbinding document, the binding portion shape of the recognized spread booklet document becomes an abnormal shape due to a detection error or a noise component of the data, but the binding portion correction processing is performed. The means 409 performs processing restrictions so as to match the binding portion shape characteristics of the bookbinding document, and performs a more accurate recognition of the binding portion shape of the spread bookbinding document.
[0089]
The binding portion
[0090]
When a bookbinding document is opened and placed on the image reading unit of a copier or scanner and the image is read, the binding portion of the bookbinding document is curved in an arc shape, and the page inclination angle becomes steeper as the binding portion becomes deeper. To go. When the binding portion
[0091]
The binding portion
[0092]
FIG. 21 shows a binding part depth calculation flow of the binding part correction processing means 409. The binding portion
[0093]
If the detected boundary address is away from the true boundary, the binding portion
[0094]
The binding
[0095]
(T n -T n-1 ) = Focal plane distance * (difference in boundary address between adjacent lines) / {(Ak−Ka) − (A3−Ak)}
Here, as shown in FIG. 22, Ak is the optical axis address of the
[0096]
L n = √ {1+ (T n -T n-1 ) 2 }
Next, the binding portion
[0097]
The binding portion
[0098]
Since the amount of distortion and the depth of the binding portion are one-to-one, and the amount of distortion × 3 is the binding portion depth, the same effect can be obtained by limiting the binding portion depth or the distortion amount. In addition, the binding portion
[0099]
(T n -T n-1 ) = Focal plane distance * A3 / {(Ak-Ka)-(A3-Ak)}
Next, switching of processing between the page portion (plane portion) and the binding portion will be described.
The binding portion correction processing means 409 separates the binding portion and does not process the page portion, but restores only the binding portion. In other words, the binding portion
[0100]
The binding portion
[0101]
Countermeasures against page skew are taken from page boundary detection (A + C + B + F) to image shift. The binding portion
[0102]
In order to calculate the image shift amount based on the position data of the page boundary, for example, when the boundary is detected and the image is shifted with the position resolution of one pixel, the movement occurs at the pitch of one pixel, and therefore the position shift within one pixel. Occurs and jaggy is conspicuous in the ruled lines. Therefore, the binding portion
[0103]
The binding portion
[0104]
The binding portion
[0105]
The binding portion
[0106]
FIG. 25 shows a processing flow for switching processing between the page portion (planar portion) and the binding portion of the binding portion correction processing means 409. The binding portion
[0107]
FIG. 8 shows how the image data read from the bookbinding document by the
[0108]
As shown in FIG. 25, the binding portion correction processing means 409 determines whether or not the read data is for a line from the straight line portion to the switching point 1 (5-a), and the read data is read from the straight line portion. If the line is up to the
[0109]
If the read image data is on the line from the
[0110]
The binding portion correction processing means 409 shifts the read data in the main scanning direction if the read image data is a line from the
[0111]
As shown in FIG. 27, the binding unit
[0112]
In the binding portion, the enlargement magnification in the scanning direction is determined based on the selection of the switching point, and the page portion switching point is shifted in the main scanning direction by the switching address, so that the uniformity of the image at the switching point is maintained. .
[0113]
Next, calculation of the projection magnification and determination of the optical axis address will be described.
In FIG. 22, O represents the origin on the memory. Since the binding portion of the
[0114]
Mm = (Ak−A) / (Ak−Ka)
A is any one of A1, A2, and A3. The binding portion
[0115]
In this embodiment, an optical axis position determination mode is provided, and the optical axis position determination mode is arbitrarily selected from the operation unit. FIG. 28 shows a projection magnification calculation / optical axis address determination flow of the binding portion correction processing means 409. When the optical axis position determination mode is selected from the operation unit, the binding
[0116]
Next, the binding portion
[0117]
If the binding position
[0118]
Next, sub-scanning direction restoration will be described.
The binding portion
[0119]
In addition, the binding portion
Ln = √ {1+ (T n -T n-1 ) 2 }
The accumulation of the image length Ln is defined as the page extension length. As a result, the hypotenuse of the approximate triangle becomes substantially equal to the shape of the curved page, and the binding portion
[0120]
In the binding portion of the bookbinding document, the read pixel pitch changes in the spread direction of the bookbinding document with respect to the bookbinding document. That is, the binding portion of the bookbinding document does not have a regular pixel pitch with respect to the bookbinding document in the spread direction of the bookbinding document. Therefore, the binding portion
[0121]
In the distortion correction of the binding portion image, the binding portion
[0122]
Geometrically, the image projection double length in the main scanning direction and the depth of the binding portion are proportional to each other, and the binding portion
T = focal plane distance * (A3-Ak) / {(Ak-Ka)-(A3-Ak)}
The binding portion
[0123]
The binding portion
Ln = √ {1+ (T n -T n-1 ) 2 }
Accordingly, the accumulation of the image length Ln becomes the page length in the sub-scanning direction. Similar to the enlargement in the main scanning direction, image enlargement is performed using inter-pixel interpolation by a cubic function convolution method, and the calculation accuracy is sufficiently high.
[0124]
Usually, the amount of change in the depth increases as the binding depth increases. Therefore, the binding portion
[0125]
In the restoration of the binding portion in the sub-scanning direction, the image length Ln differs depending on the position, and the read image data is not equally spaced as shown in FIG. In FIG. 29, the density data at
[0126]
FIG. 30 shows a sub-scanning direction restoration flow.
In FIG. 29, the accumulation of the image length Ln becomes the page length in the sub-scanning direction, and this is set as the position of the read original (bookbinding original). 29, 2, 3, 4, and 5 represent main scanning lines, and their positions are f4 [2], f4 [3], f4 [4], and f4 [5]. w is the position of the line to be interpolated, and becomes an integer at a position between f4 [3] and f4 [4].
[0127]
The binding portion
[0128]
In (7-f), the binding unit
[0129]
Next, the binding portion
[0130]
Then, the binding portion
r1 = (
r2 = 1-r1
r3 = (
r4 = (distance from 3 ′ to 5) / (distance from 3 to 4) = (w−f4 [5]) / (f4 [4] −f4 [3])
Is calculated. Next, the binding portion
[0131]
As shown in FIG. 31, the digital copying
[0132]
In this embodiment, the read image is divided into a page portion (planar portion) and a binding portion, the page portion performs image shift for skew correction, and the binding portion performs extension processing in the main scanning direction and the sub-scanning direction, It was possible to restore a flat image.
[0133]
Further, in this embodiment, the page portion boundary position of a bookbinding document can be detected up to a binding portion depth of 35 mm and a binding portion inclination angle of 90 degrees. As shown in FIG. 60, the binding depth detection result was obtained. Further, the detection error of the binding portion depth is as shown in FIG. In this case, the binding portion depth was detected up to a point with a binding portion depth of 10 mm using the binding portion start position as a constraint point, and the error was ± 0.4 mm and the error range was ± 0.2 mm.
[0134]
FIG. 62 shows the magnification error representing the restoration accuracy in the sub-scanning direction of the present embodiment, and satisfied the magnification error within ± 10% within the bounding portion depth within 10 mm. FIG. 63 shows the sub-scanning curve representing the restoration accuracy in the main scanning direction of this embodiment, and the sub-scanning curve is within ± 0.5 mm within the range of the binding portion depth of 10 mm or less.
[0135]
FIG. 64 shows the density distribution of the read data of the scanner. This is sampled approximately every 3 mm in the sub-scanning direction, and is distributed in the space, page background, ruled lines / characters, and the background level is considerably low (darker) in the deep binding area. There are noise-like variations in the area. FIG. 65 shows the density distribution of the read data obtained by taking the moving pixel 8-pixel moving average of the read data in this embodiment, and the density became smooth.
[0136]
In this embodiment, the page boundary position can be detected up to a binding portion depth of 35 mm (equivalent to a bookbinding thickness of 70 mm) and a binding portion inclination angle of about 90 degrees. The detection of the page boundary position includes a moving average in the main scanning direction, The adaptive threshold based on the black peak and white peak values of the density distribution and the moving average process in the sub-scanning direction were effective. The density distribution of the boundary extends to a plurality of pixels even on the focal plane due to the MTF of the optical system, and an accurate boundary position cannot be specified. However, the restoration process can be performed by smoothing the relative position of the page boundary.
[0137]
This embodiment is an embodiment of the invention according to
[0138]
Further, this embodiment is an embodiment of the invention according to
[0139]
Further, this embodiment is an embodiment of the invention according to
[0140]
In addition, this embodiment is an embodiment of the invention according to
[0141]
Further, this embodiment is an embodiment of the invention according to
[0142]
Further, this embodiment is an embodiment of the invention according to
[0143]
Further, this embodiment is an embodiment of the invention according to
[0144]
In addition, this embodiment is an embodiment of the invention according to
[0145]
Further, this embodiment is an embodiment of the invention according to claim 9, in which a
[0146]
Further, this embodiment is an embodiment of the invention according to
[0147]
In addition, this embodiment is an embodiment of the invention according to
T = P * A / (Ak−A)
Therefore, it is possible to detect the binding portion depth of the spread bookbinding document from the page boundary position data.
[0148]
In addition, this embodiment is an embodiment of the invention according to
T = P * (A−Ka) / {(Ak−A) − (A−Ka)}
Therefore, the binding portion shape calculation process can be realized without fixing the document placement position.
[0149]
Further, this embodiment is an embodiment of the invention according to
[0150]
Further, this embodiment is an embodiment of the invention according to
[0151]
Further, this embodiment is an embodiment of the invention according to
[0152]
FIG. 32 shows another embodiment of the present invention. This embodiment is an embodiment of a flat bed type image scanner, and a bookbinding document is placed on a flat document table 423 in accordance with a
[0153]
In this embodiment, the
[0154]
Next, another embodiment of the present invention will be described. This embodiment is an embodiment of an image forming apparatus that selectively copies a bookbinding document (hereinafter also simply referred to as a book document) and a sheet document. FIG. 34 shows the configuration of the scanner in this embodiment. In this scanner, a document placing table 206 and a
[0155]
FIG. 35 shows a page turning portion of the
[0156]
Further, the charging
[0157]
When reading scanning of the original document is started, the
[0158]
In this way, the
[0159]
At this time, as shown in FIG. 37, the turning
[0160]
When starting the page turning of the original document BO, the turning
[0161]
The
[0162]
Next, as shown in FIG. 40, when the
[0163]
When the turned up
[0164]
The turning of the
[0165]
As shown in FIG. 42, the mirror 222 is driven by a mirror switching solenoid, and a lower reading optical path dedicated to the original and a general upper reading optical path for a sheet original by moving the mirror switching solenoid on and off to the optical path. And are switched. As the light source for illuminating the document, two
[0166]
When reading the original on the
[0167]
By the way, as shown in FIG. 34, the
[0168]
On the other hand, a plurality of holes 1a are formed in the upper surface of the document table 1, and a part of the
[0169]
Accordingly, as shown in FIG. 44, the front cover and the back cover of the original document BO are sandwiched between the
[0170]
Here, when the
[0171]
Next, the document table pressure fixing and switching device and the document table retracting device of the present apparatus will be described.
The document table 1 configured to be movable in the vertical direction by the
[0172]
The pressing force on the original surface of the original document BO is normally received by the
[0173]
The document table pressing / fixing switching device and the document table saving device are devices for satisfying these needs, and FIGS. 45 to 49 show structural examples of a structure in which both these devices are shared by one mechanism. As shown in FIG. 45, a hook 41 is fixed to one end of the
[0174]
The hook 41 is fixed to the outer end of the link mechanism 11 (the side that moves up and down as the document table 1 moves up and down). The
[0175]
The
[0176]
Next, the lowering / fixing operation of the document table 1 by the document table pressure fixing switching device will be described.
In FIGS. 45 to 47, when the
[0177]
At the same time, the
[0178]
Here, the
That is, the
[0179]
Further, the
[0180]
Next, the retracting operation of the document table 1 below the
[0181]
34 and 51, the left and right document tables 1 are lowered by the movement of the
[0182]
Next, the pressurizing operation of the document table 1 above the
[0183]
Therefore, in a state where the
[0184]
As described above, when the left and right document tables 1 are raised and the document table elevating motor 61 is continuously driven while the document surface on each document table 1 is in pressure contact with the
[0185]
As shown in FIGS. 34 and 51, one set of the document table pressurization / fixing
[0186]
FIG. 51 shows a save operation to the lower side of the document table 1 in the save operation mode described above, and FIG. 52 shows a timing chart thereof.
In this save operation mode, as shown in FIG. 52, prior to the start of the movement of the
[0187]
On the other hand, when reading a sheet document on the
[0188]
Next, the pressurizing / fixing operation mode of the document table 1 will be described.
When the operation of the apparatus is completed in the original mode, the
[0189]
53 to 57 show transition diagrams of the
The end home position (see FIG. 53) of the
[0190]
In the pressurization / fixation mode of the document table 1, first, the scanner motor 106, which is the drive motor of the
[0191]
Shortly before the
[0192]
FIG. 56 shows the operating state of the
[0193]
Next, the
[0194]
Thereafter, the
[0195]
Next, the document table front drawing mechanism will be described.
As shown in FIGS. 34 and 51, slide rails 300 are connected to the left and right side surfaces of the
[0196]
Next, the setting operation of the original will be described.
When the operator sets the original document on the
[0197]
When the
[0198]
In this state, the operator places the front cover and the back cover of the original document BO on the document table 1 with reference to the front side, and tilts the
[0199]
After that, the operator opens the page on which the image reading of the original document is to be started, and pushes the
[0200]
In this embodiment, the reading processing unit 108, the binding unit
[0201]
【The invention's effect】
As described above, according to the first aspect of the present invention, the original image reading means for reading the bookbinding original image, the page boundary portion reading means for reading the page boundary portion of the spread bookbinding original, and the read data of the page boundary portion reading means. Is compared with the adaptive threshold value to obtain the boundary between the high density side pixel data of the outer portion of the bookbinding document and the low density side pixel data of the outer frame portion of the bookbinding document. A page boundary shape recognition means for recognizing the shape of the page boundary portion of the bookbinding document, and a bookbinding document shape recognition means for recognizing the shape of the spread bookbinding document from the shape of the page boundary portion recognized by the page boundary portion shape recognition means; An image processing apparatus having binding portion image distortion correcting means for correcting distortion of a binding portion image of a spread bookbinding document from a shape of the spread bookbinding document recognized by the bookbinding document shape recognition means, wherein the page boundary shape recognition means Is Of the page boundary reading means From the pixel data on the high density side and the pixel data on the low density side in the image density data of the reading line, reading Determine the adaptive threshold for each line, Of the page boundary reading means Since the position of the page boundary is calculated from the read data, a curved original is restored to a flat original by image processing by recognizing the binding part shape from the read image without providing a special detection means such as a distance measuring sensor. Thus, the page boundary position can be obtained from a shallow part to a deep part of the bookbinding document binding part.
[0202]
According to a second aspect of the present invention, in the image processing apparatus according to the first aspect, each of the page boundary shape recognition means includes: reading Line by line Of the page boundary reading means In image density data Of the outer side of the bookbinding document Pixel data on the high density side Of the outer frame of the bookbinding document Data that divides the pixel data on the low density side into 1 to 2 Said Since the adaptive threshold value is used, the page boundary position can be obtained accurately with respect to the actual binding portion shape.
[0203]
According to a third aspect of the present invention, in the image processing apparatus according to the first aspect, the page boundary shape recognition means includes: Of the page boundary reading means In a certain range of the reading line Of the page boundary reading means Compare the image density data with the adaptive threshold, Of the page boundary reading means Read data Is a point that is equal to or greater than the adaptive threshold value for a predetermined number of consecutive pixels. Page border position As Since the calculation is performed, the page boundary position can be obtained accurately and quickly without obtaining the page boundary position at an extra portion where there cannot be a page boundary.
[0204]
According to the invention described in
[0205]
According to the fifth aspect of the present invention, document image reading means for reading a bookbinding document image, page boundary portion reading means for reading a page boundary portion of a spread bookbinding document, and read data of the page boundary portion reading means Is compared with the adaptive threshold value to obtain the boundary between the high density side pixel data of the outer portion of the bookbinding document and the low density side pixel data of the outer frame portion of the bookbinding document. A page boundary shape recognition means for recognizing the shape of the page boundary portion of the bookbinding document, and a bookbinding document shape recognition means for recognizing the shape of the spread bookbinding document from the shape of the page boundary portion recognized by the page boundary portion shape recognition means; An image processing apparatus having binding portion image distortion correcting means for correcting distortion of a binding portion image of a spread bookbinding document from a shape of the spread bookbinding document recognized by the bookbinding document shape recognition means, wherein the page boundary shape recognition means Is Of the page boundary reading means The moving average of the image density data of the reading line is taken, the density data obtained by taking the moving average is compared with the threshold value, The point where the density data obtained by taking the moving average is equal to or more than a threshold value for a predetermined number of pixels continuously Page border position As Because it calculates, it is possible to calculate the exact page boundary position with respect to image density variation, and it is possible to perform moving average processing with a simple processing circuit, and the same effect as a smoothing filter that smoothes the density distribution Can be realized.
[0206]
According to the invention described in
[0207]
According to the invention described in
[0208]
According to the eighth aspect of the present invention, document image reading means for reading a bookbinding document image, page boundary portion reading means for reading a page boundary portion of a spread bookbinding document, and read data of the page boundary portion reading means Is compared with the adaptive threshold value to obtain the boundary between the high density side pixel data of the outer portion of the bookbinding document and the low density side pixel data of the outer frame portion of the bookbinding document. A page boundary shape recognition means for recognizing the shape of the page boundary portion of the bookbinding document, and a bookbinding document shape recognition means for recognizing the shape of the spread bookbinding document from the shape of the page boundary portion recognized by the page boundary portion shape recognition means; An image processing apparatus having binding portion image distortion correcting means for correcting distortion of a binding portion image of a spread bookbinding document from a shape of the spread bookbinding document recognized by the bookbinding document shape recognition means, wherein the page boundary shape recognition means Is Of the page boundary reading means The moving average of the image density data of the reading line is taken, and the density data obtained by taking this moving average Said Pixel data on the high density side Said Each from the predetermined ratio with the pixel data on the low density side reading Determine the adaptive threshold for each line, Said Pixel data on the high density side Said In the range where pixel data on the low density side is generated The point where the reading data of the page boundary reading means is equal to or more than the adaptive threshold value continuously for a predetermined plurality of pixels. Page border position As Since the calculated and averaged moving average of the data at the page boundary position is used as the page boundary position, the page boundary position data can be averaged in the sub-scanning direction to suppress variations in the arrangement of the page boundary positions. It is possible to restore the binding portion image with high accuracy.
[0209]
According to the ninth aspect of the present invention, document image reading means for reading a bookbinding document image, page boundary portion reading means for reading a page boundary portion of a spread bookbinding document, and read data of the page boundary portion reading means Is compared with the adaptive threshold value to obtain the boundary between the high density side pixel data of the outer portion of the bookbinding document and the low density side pixel data of the outer frame portion of the bookbinding document. A page boundary shape recognition means for recognizing the shape of the page boundary portion of the bookbinding document, and a bookbinding document shape recognition means for recognizing the shape of the spread bookbinding document from the shape of the page boundary portion recognized by the page boundary portion shape recognition means; An image processing apparatus having binding portion image distortion correcting means for correcting distortion of a binding portion image of a spread bookbinding document from a shape of the spread bookbinding document recognized by the bookbinding document shape recognition means, wherein the page boundary shape recognition means Is Of the page boundary reading means In the image density data of the reading line Said Pixel data on the high density side Said Each from the predetermined ratio with the pixel data on the low density side reading Determine the adaptive threshold for each line, Said Pixel data on the high density side Said This is the range where the pixel data on the low density side is generated and before the page image area is detected. The point where the reading data of the page boundary reading means is equal to or more than the adaptive threshold value continuously for a predetermined plurality of pixels. Page border position As Since the detection is performed, it is possible to prevent erroneous detection of the position of the page boundary due to characters and patterns in the page.
[0210]
According to a tenth aspect of the present invention, in the image processing apparatus according to the ninth aspect, the page boundary shape recognizing means in the image density data of the reading line. Said Detecting the peak of the pixel data on the high density side, detecting the pixel data on the low density side above the predetermined level from this peak value, and then detecting the pixel above the peak value of the pixel data on the high density side Therefore, the page boundary position can be correctly detected.
[0211]
According to the eleventh aspect of the present invention, document image reading means for reading a bookbinding document image, page boundary portion reading means for reading a page boundary portion of a spread bookbinding document, and read data of the page boundary portion reading means. Is compared with a threshold value to obtain the boundary between the high density pixel data of the outer portion of the bookbinding document and the low density pixel data of the outer frame portion of the bookbinding document. A page boundary shape recognition means for recognizing the shape of the page boundary portion of the bookbinding document, and a bookbinding document shape recognition means for recognizing the shape of the spread bookbinding document from the shape of the page boundary portion recognized by the page boundary portion shape recognition means; The bookbinding document shape recognition means comprises a binding portion image distortion correction means for correcting distortion of the binding portion image of the spread bookbinding document from the shape of the spread bookbinding document recognized by the bookbinding document shape recognition means. From the page boundary position A detected by the page boundary portion shape recognition means, the optical axis position Ak and the focal length P of the document image reading means and the page boundary portion reading means, the binding portion depth T of the bookbinding document is determined.
T = P * A / (Ak−A)
Therefore, it is possible to detect the binding portion depth of the spread bookbinding document from the page boundary position data.
[0212]
According to the invention of
T = P * (A−Ka) / {(Ak−A) − (A−Ka)}
Therefore, the binding portion shape calculation process can be realized without fixing the document placement position.
[0213]
According to the thirteenth aspect of the present invention, document image reading means for reading a bookbinding document image, page boundary portion reading means for reading a page boundary portion of a spread bookbinding document, and read data of the page boundary portion reading means Is compared with a threshold value to obtain the boundary between the high density pixel data of the outer portion of the bookbinding document and the low density pixel data of the outer frame portion of the bookbinding document. A page boundary shape recognition means for recognizing the shape of the page boundary portion of the bookbinding document, and a bookbinding document shape recognition means for recognizing the shape of the spread bookbinding document from the shape of the page boundary portion recognized by the page boundary portion shape recognition means; The bookbinding document shape recognition means includes a binding portion image distortion correction means for correcting distortion of the binding portion image of the spread bookbinding document from the shape of the spread bookbinding document recognized by the bookbinding document shape recognition means. From the page boundary position detected by the page boundary part shape recognition means, Per reading line Calculate the binding depth and calculate this Of adjacent reading lines at the binding depth The amount of change in the binding depth Below a certain amount Since it restricts, more accurate shape recognition can be performed and the applicable range can be expanded.
[0214]
According to the invention of
[0215]
According to the invention of
[Brief description of the drawings]
FIG. 1 is a diagram illustrating a flow of image data and a form of image processing according to an embodiment of the present invention.
FIG. 2 is a perspective view illustrating an appearance of a scanner according to the embodiment.
FIG. 3 is a perspective view showing a spread shape of a general bookbinding document.
FIG. 4 is a front view showing a case where a bookbinding document having a thickness of about 5 mm is opened near the center page and set on a document table of a scanner.
FIG. 5 is a front view showing a case where a bookbinding original is opened on the original page of the scanner and the first page is opened.
FIG. 6 is a diagram for explaining the embodiment.
FIG. 7 is a plan view showing a reading shape of a bookbinding document and a shape after restoration processing in the embodiment.
FIG. 8 is a diagram showing a switching point detection range in the embodiment.
FIG. 9 is a diagram showing a switching point detection range in the embodiment.
FIG. 10 is a diagram showing a switching point detection range in the embodiment.
FIG. 11 is a diagram showing a switching point detection range in the embodiment.
FIG. 12 is a diagram showing a switching point detection range in the embodiment.
FIG. 13 is a flowchart showing a switching (detection) / switching point detection range determination flow between a line and a binding portion of a bookbinding document in the embodiment.
FIG. 14 is a flowchart showing a shape recognition processing flow by boundary detection in the embodiment.
FIG. 15 is a diagram for explaining a moving average of image data in the embodiment.
FIG. 16 is a diagram for explaining read data in the embodiment.
FIG. 17 is a view for explaining page boundary detection according to the embodiment.
FIG. 18 is a diagram for explaining an adaptive threshold value in the embodiment.
FIG. 19 is a diagram for explaining a page boundary position calculation unit according to the embodiment.
FIG. 20 is a diagram for explaining binding boundary distortion according to the embodiment.
FIG. 21 is a flowchart showing a binding depth calculation flow according to the embodiment.
FIG. 22 is a diagram showing binding boundary distortion according to the embodiment.
FIG. 23 is a diagram for explaining image length calculation according to the embodiment.
FIG. 24 is a sectional view schematically showing the embodiment.
FIG. 25 is a flowchart showing a processing flow for switching processing between a page portion (planar portion) and a profit portion in the embodiment.
FIG. 26 is a diagram for explaining inter-pixel interpolation in the main scanning direction according to the embodiment.
FIG. 27 is a diagram for explaining inter-pixel interpolation in the main scanning direction according to the embodiment.
FIG. 28 is a flowchart showing a projection magnification calculation / optical axis address determination flow of the embodiment.
FIG. 29 is a diagram for explaining interpolation between pixels in the main scanning direction of the embodiment.
FIG. 30 is a flowchart showing a sub-scanning direction restoration flow of the embodiment.
FIG. 31 is a schematic diagram showing a connection state between another embodiment of the present invention and a personal computer.
FIG. 32 is a perspective view showing the same embodiment;
FIG. 33 is a schematic view showing an optical system of the same embodiment.
FIG. 34 is a diagram showing a configuration of a scanner according to another embodiment of the present invention.
FIG. 35 is a sectional view showing a page turning portion in the apparatus according to the embodiment;
FIG. 36 is a schematic view showing a main document reading scanning state of a scanning unit in the apparatus.
FIG. 37 is a schematic view showing a state when the scanning direction of the scanning unit in the apparatus is reversed.
FIG. 38 is a schematic view showing a state at the time of page turning scanning of the scanning unit in the apparatus.
FIG. 39 is a schematic view showing another original reading and scanning state of the scanning unit in the apparatus.
FIG. 40 is a schematic view showing a page turning scanning state of the scanning unit in the apparatus.
FIG. 41 is a schematic diagram showing another page-turning scanning state of the scanning unit in the apparatus.
FIG. 42 is a sectional view schematically showing the scanning unit.
FIG. 43 is a perspective view showing a document table unit of the apparatus.
FIG. 44 is a cross-sectional view showing a main document placement portion of the apparatus.
FIG. 45 is a perspective view showing a manuscript table pressurization / fixing switching device and a manuscript table retraction device in the apparatus.
FIG. 46 is a cross-sectional view showing the manuscript table pressure fixing switching device and manuscript table retracting device.
47 is a perspective view showing a control pulley of the apparatus. FIG.
FIG. 48 is a perspective view showing a part of the document table pressurization and fixing switching device and the document table retracting device.
FIG. 49 is a side view showing another part of the document table pressing and fixing device and the document table retracting device.
FIG. 50 is a cross-sectional view showing a state where the document table is retracted in the apparatus.
FIG. 51 is a plan view showing a state where the document table is retracted in the apparatus.
FIG. 52 is a timing chart showing a document table save operation of the apparatus.
FIG. 53 is a schematic view showing a state when the scanning unit starts and ends scanning.
FIG. 54 is a schematic diagram showing a main document scanning start state of the scanning unit.
FIG. 55 is a schematic diagram showing a main document center scanning state of the scanning unit.
FIG. 56 is a schematic view showing a state of the scanning unit on the right page of the original document.
FIG. 57 is a schematic view showing a state of the scanning unit when the scanning direction is reversed.
FIG. 58 is a timing chart showing the operation of the scanning unit.
FIG. 59 is a front view illustrating a state where a bookbinding document is placed on a document table.
FIG. 60 is a diagram illustrating a detection result of the binding portion depth with respect to the binding portion depth of the bookbinding document according to the embodiment.
61 is a diagram showing a binding portion depth detection error in the embodiment. FIG.
FIG. 62 is a diagram showing a magnification error representing the restoration accuracy in the sub-scanning direction of the embodiment.
FIG. 63 is a diagram showing a sub-scanning curve representing the restoration accuracy in the main scanning direction of the embodiment.
FIG. 64 is a diagram illustrating a density distribution of read data of the scanner according to the embodiment.
FIG. 65 is a diagram showing a density distribution of the read data obtained by taking a moving average of 8 pixels in the main scanning direction in the embodiment.
[Explanation of symbols]
400 scanner
402 Bookbinding manuscript
403 Document table
408 Reading processing unit
409 Binding section correction processing section
410 Write processing unit
411 Printer
Claims (15)
T=P*A/(Ak−A)
なる式で算出することを特徴とする画像処理装置。Document image reading means for reading a bookbinding original image, page boundary portion reading means for reading a page boundary portion of a spread bookbinding document, and comparing the read data of the page boundary portion reading means with a threshold value, Page boundary shape recognition means for recognizing the shape of the page boundary portion of the bookbinding document by obtaining the boundary between the density side pixel data and the low density side pixel data of the outer frame portion of the bookbinding document, and the page boundary shape recognition The booklet shape recognition means for recognizing the shape of the spread bookbinding document from the shape of the page boundary recognized by the means, and the distortion of the binding portion image of the spread booklet document from the shape of the spread booklet document recognized by the bookbinding document shape recognition means. An image processing apparatus having a binding portion image distortion correcting unit for correcting the bookbinding document shape recognizing unit, wherein the bookbinding document shape recognizing unit detects the page boundary position A detected by the page boundary unit shape recognizing unit; Image reading means and the binding unit depth T of the bookbinding document from the optical axis position Ak and focal length P of the page boundary reading means T = P * A / (Ak-A)
An image processing apparatus characterized in that it is calculated by the following formula.
T=P*(A−Ka)/{(Ak−A)−(A−Ka)}
なる式で算出することを特徴とする画像処理装置。Document image reading means for reading a bookbinding original image, page boundary portion reading means for reading a page boundary portion of a spread bookbinding document, and comparing the read data of the page boundary portion reading means with a threshold value, Page boundary shape recognition means for recognizing the shape of the page boundary portion of the bookbinding document by obtaining the boundary between the density side pixel data and the low density side pixel data of the outer frame portion of the bookbinding document, and the page boundary shape recognition The booklet shape recognition means for recognizing the shape of the spread bookbinding document from the shape of the page boundary recognized by the means, and the distortion of the binding portion image of the spread booklet document from the shape of the spread booklet document recognized by the bookbinding document shape recognition means. An image processing apparatus having a binding portion image distortion correcting unit for correcting the bookbinding document shape recognizing unit, wherein the bookbinding document shape recognizing unit detects the page boundary position A detected by the page boundary unit shape recognizing unit; From the optical axis position Ak and the focal length P of the image reading means and the page boundary portion reading means, and the position Ka of the page plane portion, the binding portion depth T of the bookbinding document is calculated as T = P * (A−Ka) / {(Ak− A)-(A-Ka)}
An image processing apparatus characterized in that it is calculated by the following formula.
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP19864997A JP3617907B2 (en) | 1997-07-24 | 1997-07-24 | Image processing device |
US09/122,116 US6330050B1 (en) | 1997-07-24 | 1998-07-24 | Image processing device for providing correction of a curvature distortion of a bound portion of a spread book |
DE19833417A DE19833417B4 (en) | 1997-07-24 | 1998-07-24 | Image processing device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP19864997A JP3617907B2 (en) | 1997-07-24 | 1997-07-24 | Image processing device |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH1141456A JPH1141456A (en) | 1999-02-12 |
JP3617907B2 true JP3617907B2 (en) | 2005-02-09 |
Family
ID=16394735
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP19864997A Expired - Lifetime JP3617907B2 (en) | 1997-07-24 | 1997-07-24 | Image processing device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3617907B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001063191A (en) * | 1999-08-31 | 2001-03-13 | Toshiba Tec Corp | Image forming device enabling correction of image characteristic |
JP5006250B2 (en) * | 2008-04-30 | 2012-08-22 | 株式会社リコー | Image correction apparatus, image correction method, image correction program, and recording medium |
-
1997
- 1997-07-24 JP JP19864997A patent/JP3617907B2/en not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
JPH1141456A (en) | 1999-02-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6330050B1 (en) | Image processing device for providing correction of a curvature distortion of a bound portion of a spread book | |
US6690482B1 (en) | Image forming method and an image forming apparatus therefor | |
US4068950A (en) | Variable platen cover | |
JP3532385B2 (en) | Image processing device | |
JP3617907B2 (en) | Image processing device | |
JP3648382B2 (en) | Image processing device | |
JP3634626B2 (en) | Image reading device | |
JP3686516B2 (en) | Image processing apparatus and image processing method | |
JP3686509B2 (en) | Image processing apparatus and image processing method | |
JP3954707B2 (en) | Image processing apparatus and image processing method | |
JP3621244B2 (en) | Image processing apparatus and image processing method | |
JP3537999B2 (en) | Image processing device | |
JP2004320538A (en) | Image reading apparatus and image forming apparatus | |
JP3110803B2 (en) | Book manuscript page turning device | |
JPH11155071A (en) | Image processor | |
JP3184602B2 (en) | Image reading device | |
DE19853632B4 (en) | Image processing device | |
JP3761835B2 (en) | Image reading apparatus and image forming apparatus | |
JPH04238457A (en) | Electrophotographic device | |
JPH09284491A (en) | Image reader | |
JP3689240B2 (en) | Image processing device | |
JP2001331073A5 (en) | ||
JP3260897B2 (en) | Original document turning device and original document reading device | |
JP3293942B2 (en) | Document handling equipment | |
JPH118740A (en) | Picture reader |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040316 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040420 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20041019 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20041105 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071119 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081119 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081119 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091119 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101119 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111119 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111119 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121119 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131119 Year of fee payment: 9 |
|
EXPY | Cancellation because of completion of term |