JP3436025B2 - 読取り画像の修正方法及び画像読取り装置 - Google Patents

読取り画像の修正方法及び画像読取り装置

Info

Publication number
JP3436025B2
JP3436025B2 JP32264396A JP32264396A JP3436025B2 JP 3436025 B2 JP3436025 B2 JP 3436025B2 JP 32264396 A JP32264396 A JP 32264396A JP 32264396 A JP32264396 A JP 32264396A JP 3436025 B2 JP3436025 B2 JP 3436025B2
Authority
JP
Japan
Prior art keywords
image
edge
document
read
original
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP32264396A
Other languages
English (en)
Other versions
JPH09238248A (ja
Inventor
圭一朗 豊後
伸也 松田
Original Assignee
ミノルタ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ミノルタ株式会社 filed Critical ミノルタ株式会社
Priority to JP32264396A priority Critical patent/JP3436025B2/ja
Priority to US08/773,369 priority patent/US6011635A/en
Publication of JPH09238248A publication Critical patent/JPH09238248A/ja
Application granted granted Critical
Publication of JP3436025B2 publication Critical patent/JP3436025B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3872—Repositioning or masking
    • H04N1/3873—Repositioning or masking defined only by a limited number of coordinate points or parameters, e.g. corners, centre; for trimming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/19—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays
    • H04N1/195—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays the array comprising a two-dimensional array or a combination of two-dimensional arrays
    • H04N1/19594—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays the array comprising a two-dimensional array or a combination of two-dimensional arrays using a television camera or a still video camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/04—Scanning arrangements
    • H04N2201/0402—Arrangements not specific to a particular one of the scanning methods covered by groups H04N1/04 - H04N1/207
    • H04N2201/0436—Scanning a picture-bearing surface lying face up on a support

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、書籍や雑誌などの
製本された原稿の読取りに好適な画像読取り装置のため
の読取り画像の修正方法に関する。
【０００２】
【従来の技術】ブックスキャナと呼称される画像読取り
装置が商品化されている。この装置では、原稿台の上方
に撮像系が配置され、原稿台と撮像系との間に高さ数十
ｃｍの開放空間が存在する。ユーザーは、原稿台上に書
籍を見開いた状態で上向きにセットする。スタートキー
のオンに呼応して原稿の走査が開始され、読み取られた
画像が走査と並行して逐次に外部装置へ出力される。外
部装置がプリンタであれば、リアルタイムで複写画像が
形成される。
【０００３】シート原稿と違って製本された原稿では、
見開いた状態を保持するために見開いた原稿の両端を押
さえておかなければならない場合がある。その場合に、
ユーザーの指や手の甲が原稿とともに撮影されてしま
う。ブックスキャナの出力画像の見栄えをよくするに
は、指の像などの不要画像を消去する必要がある。
【０００４】従来において、不要画像を消去するために
２つの手法が知られている。１つは、カラー撮像デバイ
スを組付けてカラー撮影を行い、撮影像から肌の色の画
像を抽出して除去するものである（特開平６−１０５０
９１号）。他の１つは、例えば原稿サイズ検出の結果に
基づいて撮影像の内の原稿部分を判別し、原稿部分の周
縁領域（余白領域）の全体又は一部を対象に画素濃度を
調べ、一定濃度以上で且つ一定数以上の画素からなる画
像を抽出して消去するものである（特開平６−７８１３
３号）。
【０００５】
【発明が解決しようとする課題】図１９は従来の問題点
を説明するための図である。上述の色判別によって不要
画像を抽出する手法では、肌の色範囲の設定が難しく不
要画像の抽出に誤りが生じやすい。
【０００６】一方、単に濃度判別によって原稿部分の周
縁領域内に存在する不要画像を抽出する手法では、例え
ば書籍を読み取る場合において、必要な画像の消去を避
けるために、図１９（Ａ）のように、不要画像の検出対
象領域Ａ８を原稿９０の周囲の余白に限定する必要があ
った。つまり、文字や写真などが印刷される印字領域Ａ
７と重ならないように検出対象領域Ａ８が設定されてい
た。このため、図１９（Ｂ）のように比較的に周囲の余
白が広い場合、又は図１９（Ｃ）のようにページの大半
が余白である場合に、ユーザーが印字を隠さないように
書籍を押さえたとしても、指が検出対象領域Ａ７からは
み出てしまい、出力画像Ｇ９１，９２に指の先端部の像
Ｇｈが残ることがあった。また、余白に書き込まれた手
書き画像、紙面の端縁の近くに印字された太字のノンブ
ル（ページ番号）などが消去されてしまうこともあっ
た。
【０００７】本発明は、原稿を押さえる位置に係わら
ず、ユーザーの身体の像を確実に消去できるようにする
ことを目的としている。他の目的は必要な画像の消去を
防止することにある。
【０００８】
【課題を解決するための手段】原稿台と撮像手段との間
の空間が装置外の自由空間に対して開放されており、ブ
ック原稿又はシート原稿を読取り位置に配置するセッテ
ィングに十分な広さの開放空間が設けられた画像読取り
装置においては、原稿台の上にブック原稿が見開いた状
態で読取り対象面（原稿面）が見えるように上向きに置
かれる。ユーザーは、原稿台上で閉じた状態のブック原
稿を見開いたりページをめくったりすることができる。
ブック原稿は、書籍や雑誌などの製本形態のドキュメン
トに代表される綴じた複数の用紙からなる原稿であっ
て、ブック原稿にはファイリングされた書類も含まれ
る。
【０００９】ユーザーがブック原稿の端部を押さえた状
態で読取りが行われると、ユーザーの手の一部が重なっ
た原稿面が撮像手段によって撮像される。多くの場合に
は原稿台の一部も原稿画像とともに撮像される。通常、
ユーザーは文字やイメージなどの読み取るべき情報（必
要画像）を隠さないようにブック原稿を押さえる。その
ように取り決めておいてもよい。必要画像を隠さないと
いうことは、ユーザーの手の像（消去すべき不要画像）
は必要画像とは重ならないということを意味する。実際
上は、読取り画像中の不要画像は必要画像から離れるこ
とになる。また、必ず、不要画像は原稿の端縁まで延び
ている。
【００１０】したがって、読取り画像の内の不要画像の
存在する可能性のある部分、すなわち原稿の端縁（周縁
又はその一部）を外縁とする特定の領域（例えば枠状の
領域）を対象に画像の有無を判別し、その判別対象領域
の内縁とは離れ且つ外縁まで延びた画像を消去すれば、
必要画像のみからなる読取り画像が得られる。その際、
判別対象領域を必要画像と重なるように十分に広く設定
することにより、ページの周囲の余白が広い場合にも確
実に不要画像を消去することができる。撮像面上での原
稿の端縁は、例えば原稿の下地と原稿台との濃度差に注
目して読取り画像を解析することにより検出することが
できる。判別対象領域の内縁と離れているか否かは、判
別対象領域を例えばマトリクス状に並ぶ適切な大きさの
ブロックに細分化し、画像を有したブロックと内縁と接
するブロックとの間に画像を有しないブロックがあるか
否かを調べることにより、判別することができる。
【００１１】１回の原稿の読取りにおいて不要画像を消
去してもよい。２回の読取りを行うこととし、１回目の
読取りで不要画像を抽出して消去範囲を設定し、２回の
読取り時に以前に設定した消去範囲に対応した画像を消
去してもよい。
【００１２】判別対象領域内に存在する画像を、大きさ
（画素数）や縦横比といった寸法条件で分類すれば、原
稿の端縁まで延びた必要画像、例えば紙面の端部に印刷
された見出し（インデックスともいう）などの消去を防
ぐことができる。
【００１３】ところで、通常、見出しを紙面の端部に設
ける場合には、見出しの文字が強調のための着色領域
（黒色を含む）の中に白抜き又は多色刷りの様式で印刷
される。一般に、この着色領域は縦長の長方形である。
つまり、着色領域の輪郭は、原稿の端縁に対して垂直な
辺及び平行な辺から構成される。一方、原稿を押さえる
ときのユーザーの手の向きや形状から推察して、ユーザ
ーの手（指）の像の輪郭線が原稿の端縁と直交すること
は極めて少なく、ほとんどの場合は輪郭線と端縁とが斜
めに交差する。したがって、読取り画像のうちの原稿の
端縁と接する部分画像について、その輪郭と原稿の端縁
との直交関係を調べることにより、見出し像と手の像と
を判別することができる。手の輪郭は曲線であるので、
部分画像の輪郭における曲線部分の有無を調べてもよ
い。これによれば、四角形以外の着色領域を有した原
稿、例えば紙面の隅にノンブル領域などの三角形状の着
色領域を設けられた原稿においても、その着色領域と手
の像とを判別することができる。直交関係及び曲線部分
の有無の双方を調べて総合的に判別すれば、例えば見出
しの形状が内側の隅の丸い略四角形であったとしても、
正しい判別が可能である。
【００１４】さらに、ユーザーの手が原稿とその外側と
を覆うことに着目し、不要画像である手の像と必要画像
とを見分けることができる。すなわち、画素の濃度が似
通っており且つ原稿の端縁の内側と外側とに跨がる画像
を、ユーザーの手の像とみなして消去の対象とする。
【００１５】請求項１の発明の方法は、読取り対象の原
稿を支持する原稿台と、原稿画像を電気信号に変換する
撮像手段とを有し、前記原稿台と前記撮像手段との間に
原稿のセッティングのための開放空間が存在する構造の
画像読取り装置における読取り画像の修正方法であっ
て、前記撮像手段の撮像面上での原稿の端縁を検出し、
前記撮像手段によって得られた読取り画像に対して、検
出した端縁を外縁とし当該外縁から離れた内縁を有する
判別対象領域を設定し、前記判別対象領域を複数のブロ
ックに細分化して当該各ブロック毎に画像の有無を判別
し、それぞれが画像を含み且つ互いに隣接した複数の前
記ブロックの集合であり、前記内縁とは離れ且つ前記外
縁とは接するブロック群を抽出し、前記撮像面における
前記ブロック群に対応した領域内の画像を不要画像とし
て消去するものである。
【００１６】請求項２の発明の方法は、抽出したブロッ
ク群の寸法条件が予め定められた不要画像条件と一致す
るか否かを判別し、寸法条件が前記不要画像条件と一致
するブロック群内の画像のみを不要画像として消去する
ものである。
【００１７】請求項３の発明の装置は、読取り対象の原
稿を支持する原稿台と、原稿画像を電気信号に変換する
撮像手段と、前記電気信号を量子化して外部装置へ出力
する信号処理系とを有し、前記原稿台と前記撮像手段と
の間に原稿のセッティングのための開放空間が存在する
構造の画像読取り装置であって、前記信号処理系が、前
記撮像手段の撮像面上での原稿の端縁を検出する手段
と、前記撮像手段によって得られた撮影像に対して、検
出された端縁を外縁とし当該外縁から離れた内縁を有す
る判別対象領域を設定する手段と、前記判別対象領域を
複数のブロックに細分化し、当該各ブロック毎に画像の
有無を判別する手段と、それぞれが画像を含み且つ互い
に隣接した複数の前記ブロックの集合であり、前記内縁
とは離れ且つ前記外縁とは接するブロック群を抽出する
手段と、前記撮像面における前記ブロック群に対応した
領域内の画像を不要画像として消去する手段と、を有し
た装置である。
【００１８】請求項４の発明の装置は、前記信号処理系
が、抽出されたブロック群の寸法条件が予め定められた
不要画像条件と一致するか否かを判別する手段を有し、
寸法条件が前記不要画像条件と一致するブロック群内の
画像のみを不要画像として消去するように構成された装
置である。
【００１９】請求項５の発明の方法は、撮像手段によっ
て得られた読取り画像のうちの原稿部分の端縁を検出
し、前記読取り画像から濃度が一定値以上の画素からな
る前記端縁の内側の画像であって前記端縁と接する原稿
端画像を抽出し、抽出した原稿端画像の輪郭における前
記端縁と一致しない部分のうちの少なくとも前記端縁の
近辺が、前記端縁に対して垂直な直線状であるか否かを
判別し、輪郭における前記端縁の近辺が前記端縁に対し
て垂直ではない原稿端画像を不要画像として消去する読
取り画像の修正方法である。
【００２０】請求項６の発明の方法は、輪郭における前
記端縁の近辺が前記端縁に対して垂直ではなく且つ大き
さが基準値を越える原稿端画像を不要画像として消去す
るものである。
【００２１】請求項７の発明の画像読取り装置におい
て、信号処理系は、前記撮像手段によって得られた読取
り画像のうちの原稿部分の端縁を検出する手段と、前記
読取り画像から濃度が一定値以上の画素からなる前記端
縁の内側の画像であって前記端縁と接する原稿端画像を
抽出する手段と、抽出された原稿端画像の輪郭における
前記端縁と一致しない部分のうちの少なくとも前記端縁
の近辺が、前記端縁に対して垂直な直線状であるか否か
を判別する手段と、輪郭における前記端縁の近辺が前記
端縁に対して垂直ではない原稿端画像を不要画像として
消去する手段と、を有している。
【００２２】請求項８の発明の方法は、撮像手段によっ
て得られた読取り画像のうちの原稿部分の端縁を検出
し、前記読取り画像から濃度が一定値以上の画素からな
る前記端縁の内側の画像であって前記端縁と接する原稿
端画像を抽出し、抽出した原稿端画像の輪郭の少なくと
も一部が曲線状であるか否かを判別し、輪郭の少なくと
も一部が曲線状である原稿端画像を不要画像として消去
する読取り画像の修正方法である。
【００２３】請求項９の発明の方法は、輪郭の少なくと
も一部が曲線状であり且つ大きさが基準値を越える原稿
端画像を不要画像として消去するものである。請求項１
０の発明の画像読取り装置において、信号処理系は、前
記撮像手段によって得られた読取り画像のうちの原稿部
分の端縁を検出する手段と、前記読取り画像から濃度が
一定値以上の画素からなる前記端縁の内側の画像であっ
て前記端縁と接する原稿端画像を抽出する手段と、抽出
された原稿端画像の輪郭の少なくとも一部が曲線状であ
るか否かを判別する手段と、輪郭の少なくとも一部が曲
線状である原稿端画像を不要画像として消去する手段
と、を有している。
【００２４】請求項１１の発明の方法は、前記撮像手段
によって得られた読取り画像のうちの原稿部分の端縁を
検出し、前記読取り画像から濃度が一定範囲内の画素の
集合である特定濃度画像を抽出し、抽出した特定濃度画
像が前記端縁を跨ぐか否かを判別し、前記端縁を跨ぐ特
定濃度画像を不要画像として消去する読取り画像の修正
方法である。
【００２５】請求項１２の発明の方法は、前記端縁を跨
ぎ且つ大きさが基準値を越える特定濃度画像を不要画像
として消去するものである。請求項１３の発明の画像読
取り装置において、信号処理系は、撮像手段によって得
られた読取り画像のうちの原稿部分の端縁を検出する手
段と、前記読取り画像から濃度が一定範囲内の画素の集
合である特定濃度画像を抽出する手段と、抽出された特
定濃度画像が前記端縁を跨ぐか否かを判別する手段と、
前記端縁を跨ぐ特定濃度画像を不要画像として消去する
手段と、を有している。
【００２６】
【発明の実施の形態】
〔第１の実施形態〕図１はブックスキャナ１の外観を示
す斜視図、図２はブック原稿ＢＤをセッティングした状
態を示す図、図３はブックスキャナ１による読取りの模
式図である。
【００２７】ブックスキャナ１は、電気回路などを収納
する本体ハウジング１０、原稿を支持する暗色の原稿台
２０、原稿画像を電気信号に変換する撮像ユニット３
０、及び原稿の照明を担うランプユニット４０を備えて
いる。原稿台２０は本体ハウジング１０の前面側に配置
されている。撮像ユニット３０は、原稿台２０の上方に
配置され、本体ハウジング１０の上面から上方に延びた
支柱１２によって片持ち形式で支持されている。ランプ
ユニット４０は、撮像ユニット３０の下面側に配置さ
れ、支柱１２に固定されている。原稿台２０と撮像ユニ
ット３０との間の空間８０は装置外の自由空間に対して
開放されており、ブック原稿のセッティングに十分な広
さを有している。原稿台２０と撮像ユニット３０との距
離は３０ｃｍ以上である。
【００２８】本体ハウジング１０の前面の上端側に操作
パネルＯＰが設けられており、下端側に原稿面の高さを
検出するための投影板（測距板）１８が固定されてい
る。操作パネルＯＰには、液晶ディスプレイとともに、
読取りモードや読取り条件（読取りサイズ、倍率、出力
枚数、濃度など）を指定するためのボタンが配置されて
いる。投影板１８の前面側の表面は光沢性の平面であ
り、原稿台２０の上面に対する４５°の傾斜面となって
いる。この投影板１８にブック原稿ＢＤにおける見開き
方向と直交する方向の端面Ｓ３〔図３（Ｂ）参照〕の像
が写り、その状態の投影板１８が原稿画像とともに撮影
される。投影板１８の上端面は、シェーディング補正の
ための白色板１９として機能する。
【００２９】本体ハウジング１０における操作パネルＯ
Ｐに向かって右側の側面には、メインスイッチ５１が設
けられている。原稿台２０の左右方向の両側には、ユー
ザーが原稿を押さえた状態で読取りの開始を指示するた
めのスタートキー５２が１つずつ設けられている。ま
た、原稿台２０の前面側には、アームレスト２５が設け
られている。
【００３０】図１において、撮像ユニット３０は、ＣＣ
Ｄアレイからなるラインセンサ３１、結像レンズ３２、
及びミラー３３を有している。ミラー３３と結像レンズ
３２とからなる光学系によって、原稿画像がラインセン
サ３１の受光面に投影される。結像レンズ３２は、前後
方向に移動可能に設けられており、図示しないＡＦ機構
によって位置決めされる。
【００３１】ラインセンサ３１は、図示しない走査機構
の可動体に取付けられており、ＣＣＤ素子の配列方向を
上下方向に保った状態で左右方向（副走査方向）Ｍ２に
沿って平行移動をする。この平行移動によって２次元の
原稿画像の撮像が行われる。つまり、ブックスキャナ１
においては、ラインセンサ３１の移動によって撮像面が
形成されることになる。ラインセンサ３１に代えてエリ
アセンサを用いた場合にはその受光面が撮像面になる。
原稿画像の主走査方向は、原稿台２０上では前後方向で
あり、撮像面上では上下方向である。
【００３２】以上の構成のブックスキャナ１は、ブック
原稿の読取りに好適な画像入力手段である。ブックスキ
ャナ１とディジタル複写機とを組み合わせることによ
り、各種の原稿に適合する総合的な複写システムを構成
することができる。
【００３３】ブックスキャナ１の使用に際して、ユーザ
ーは、図２のように原稿台２０の上にブック原稿ＢＤを
見開いた状態で上向きに置く。そのとき、左右のページ
の境界を原稿台２０の左右方向の中心と合わせるととも
に、投影板１８の下端にブック原稿ＢＤを押し当てて位
置決めを行う。つまり、投影板１８と原稿台２０との境
界が原稿のセッティングの基準線となっている。その基
準線の中央が基準位置Ｐ０（図４参照）である。原稿台
２０は左右独立に上下移動ができるようにバネ機構によ
って支持されている。これにより、ブック原稿ＢＤの厚
さに係わらず、どのページを開いても左右のページの高
さがほぼ同一になり、撮影距離が一定範囲内となる。
【００３４】本実施形態のブックスキャナ１は、同一の
原稿に対して２回の走査（原稿画像の読取り）を行う。
ブック原稿ＢＤでは、シート原稿と違って原稿面が湾曲
しているので、湾曲状態に応じて撮像のピント調整や画
像歪みの補正などの処理を行う必要がある。輝度の差異
を補う処理も必要である。このため、１回目の走査（以
下、予備スキャンニングという）で湾曲状態が検出さ
れ、その検出結果に基づいて２回目の走査（以下、本ス
キャンニングという）で必要な処理が行われる。外部装
置への画像出力は本スキャンニング時に行われる。本ス
キャンニング時のラインセンサ３１の移動方向は、予備
スキャンニング時とは逆の方向である。読取りモードに
は、左右の両ページを一括して読み取るモード（シート
原稿の場合と同様の走査形態）と、左右の各ページを別
々に読み取るモードとがある。どちらのモードにおいて
も、各ページに対して予備スキャンニングと本スキャン
ニングとが実施される。
【００３５】ところで、ブック原稿ＢＤの読取りにおい
ては、見開いた状態を保持するために、又はできるだけ
原稿面を平坦化するために、ユーザーがブック原稿の端
部を押さえる場合が多い。この場合、ユーザーの手の一
部が原稿画像とともに撮像されるので、出力画像の見栄
えをよくするために、ユーザーの手の像を消去する読取
り画像の修正を行うのが望ましい。
【００３６】以下、第１実施形態に係るブックスキャナ
１における読取り画像の修正方法を説明する。図４はブ
ック原稿ＢＤの読取りの一例を示す平面図である。図４
（Ａ）は原稿台２０上のブック原稿ＢＤをユーザーが手
Ｈで押さえた状態を示し、図４（Ｂ）は読取り画像Ｇ０
を示している。
【００３７】読取り画像Ｇ０は、ブック原稿ＢＤの読取
り対象面の撮影像（原稿面像）Ｇ１、原稿台２０の撮影
像（原稿台像）Ｇ２０、ユーザーの手Ｈの撮影像ＧＨ、
及び投影板１８の撮影像（投影板像）Ｇ１８から構成さ
れている。投影板像Ｇ１８のうちの像Ｇ１８１，Ｇ１８
２は、見開いた状態のブック原稿ＢＤにおける端面Ｓ３
の形状を示している。投影板像Ｇ１８のうちの像（端面
像）Ｇ１８１，Ｇ１８２以外の像は、投影板１８に映っ
た背景像である。
【００３８】投影板像Ｇ１８と原稿台像Ｇ２０との境界
は上述の基準線に対応しており既知であるので、その境
界と端面像Ｇ１８１，Ｇ１８２の輪郭線との距離（画素
数）から原稿面Ｓ１の高さを算定することができる。原
稿面像Ｇ１と原稿台像Ｇ２０との境界は、原稿面の下地
色と原稿台２０の色との差異を利用して容易に判別する
ことができる。原稿面像Ｇ１と原稿台像Ｇ２０との境界
が判れば、撮像面上でのブック原稿ＢＤの端縁が判明す
る。
【００３９】なお、像Ｇ１の上端縁及び下端縁が湾曲し
ているのは、原稿面の高さが一定ではないからである。
つまり、撮像面に近い被写体は遠くの被写体よりも大き
く撮像される。本スキャンニング時には、予備スキャン
ニング時に得た原稿面の高さ情報に基づいて、湾曲した
原稿面像Ｇ１を原稿面の高さが一定である場合の像に補
正する画像処理が行われる。
【００４０】図５は不要画像の抽出の概略を示す模式図
である。図５（Ｂ）は図５（Ａ）中の破線で囲んだ部分
の拡大図である。図５（Ａ）のように、原稿面像Ｇ１に
対して、その周縁（図の左右の側端縁及び下端縁）を外
縁Ｅ１とする凹字状の判別対象領域ＡＪを設定する。判
別対象領域ＡＪの３辺の幅は、判別対象領域ＡＪの内縁
Ｅ２が、原稿面像Ｇ１の内の文字やイメージなどの必要
画像と重なるように選定する。例えば、左右の各辺の幅
を像Ｇ１の左右の全長の３０％程度とし、下側の辺の幅
も上下の全長の３０％程度とする。従来のように不要画
像の検出対象領域Ａ８（判別対象領域）を原稿面の周辺
部分の余白に限定する必要はない。
【００４１】図５（Ｂ）のように、判別対象領域ＡＪを
マトリクス状に並ぶ多数のブロックｂに細分化し、各ブ
ロックｂ毎に画像の有無を判別する。図５（Ｂ）の例で
は、文字列Ｚ１の一部と、ページ番号を示す文字列Ｚ２
と、ユーザーの手Ｈの像ＧＨとが存在する。画像の有無
の判別方法としては、ブロックｂ内の画素（ラインセン
サ３１の撮像単位）の輝度の平均値の大小で判別する方
法、ブロックｂ内の画素の内で輝度が閾値以下のものの
個数で判別する方法などがある。
【００４２】そして、それぞれが画像を有し且つ互いに
隣接した複数のブロックｂの集合であり、判別対象領域
ＡＪの内縁Ｅ２とは離れ且つ外縁Ｅ２とは接するブロッ
ク群Ｂ３を抽出する。図５（Ｃ）の例において、それぞ
れが画像を有し且つ互いに隣接した複数のブロックｂの
集合は、文字列Ｚ１を含むブロック群Ｂ１、文字列Ｚ２
を含むブロック群Ｂ２、及び像ＧＨを含むブロック群Ｂ
３の３個である。これらのブロック群Ｂ１〜３のうち、
内縁Ｅ２とは離れ且つ外縁Ｅ２とは接するものはブロッ
ク群Ｂ３のみである。
【００４３】このようにして抽出したブロック群Ｂ３内
の画像を消去すれば、必要画像のみからなる読取り画像
が得られる。ブロック群Ｂ３内の画像を消去するには、
ブロック群Ｂ３内の画素のデータ値を下地色を示す値に
置き換えればよい。
【００４４】図６はブロック群の判別の手順を示す図で
ある。図６（Ａ）の段階で、消去すべき不要画像の１次
候補として４個のブロック群Ｂ４〜７が抽出されてい
る。これらのブロック群Ｂ４〜７について、ブロックｂ
の属性を調べる。まず、図６（Ｆ）のように１個のブロ
ックｂ１に注目し、ブロックｂ１からみて基準位置Ｐ０
に近い側の３個のブロックｂ２〜４における画像の有無
を調べる。３個のブロックｂ２〜４の全てに画像がなけ
れば、ブロックｂ１の属性を「１」とする。３個のブロ
ックｂ２〜４の少なくとも１個に画像があれば、ブロッ
クｂ１の属性を「２」とする。ブロックｂ１が内縁Ｅ２
と接する場合には、ブロックｂ１の属性を「０」とする
〔図６（Ｂ）〕。このように各ブロックの属性を決定
し、属性が「１」のブロックｂを含むブロック群Ｂ５，
Ｂ７を不要画像の２次候補とする〔図６（Ｃ）〕。１次
候補の中から２次候補を抽出する処理を内側判別処理と
呼称する。
【００４５】次に、２次候補を対象にブロックｂの属性
を調べる。図６（Ｇ）のように１個のブロックｂ５に注
目し、ブロックｂ５からみて基準位置Ｐ０から遠い側の
３個のブロックｂ６〜８における画像の有無を調べる。
３個のブロックｂ６〜８の全てに画像がなければ、ブロ
ックｂ５の属性を「０」とする。３個のブロックｂ６〜
８の少なくとも１個に画像があれば、ブロックｂ５の属
性を「２」とする。ブロックｂ１が外縁Ｅ１と接する場
合には、ブロックｂ５の属性を「１」とする〔図６
（Ｄ）〕。このように各ブロックの属性を決定し、属性
が「１」のブロックｂを含むブロック群Ｂ５を、不要画
像の３次候補とする〔図６（Ｅ）〕。２次候補の中から
３次候補を抽出する処理を外側判別処理と呼称する。
【００４６】最後に３次候補について寸法条件の判別を
行う。例えば、３次候補が指に相当する大きさを有し、
縦横の長さに極端な差がなければ、３次候補を不要画像
とする。これにより、インデックスや罫線などの必要画
像を消去する誤りを避けることができる。
【００４７】図７はブックスキャナ１の信号処理系１０
０のブロック図である。ラインセンサ３１の出力は、Ａ
Ｄ変換部１０２によって例えば８ビットの画像データＤ
１０２に変換される。予備スキャンニング時には、画像
データＤ１０２は、一時メモリ１０４に一旦格納され、
ＣＰＵ１０１を経由して輝度検出部１１２に転送され
る。輝度検出部１１２は、副走査方向の所定ライン毎に
各画素の輝度を集計して輝度ヒストグラムを作成し、下
地輝度及び画像の有無の判別のための閾値を算出する。
計数部１１３は、輝度ヒストグラムに基づいて、輝度が
閾値以下の画素の個数をカウントする。位置検出部１１
４は、撮像面における走査位置を指し示す。ＣＰＵ１０
１は、下地輝度、画像に対応した画素の度数、走査位置
の３つの情報に基づいて、上述の手順で不要画像を抽出
する。本スキャンニング時には、ＡＤ変換部１０２から
画像処理部１０３へ画像データＤ１０２が送られる。Ｃ
ＰＵ１０１は、予備スキャンニング時に抽出した不要画
像に対応する位置の画素値の変更を画像処理部１０３に
対して指示する。画像処理部１０３により、本スキャン
ニング時の読取り画像Ｇ０のうちの不要画像が消去さ
れ、消去後の読取り画像が外部装置へ出力される。な
お、ＣＰＵ１０１は、メモリ１０５内のプログラムに従
って、ランプ制御部４５及びセンサ駆動部３５を含む駆
動系の制御をも行う。
【００４８】上述の実施形態によれば、撮影像における
原稿台と原稿との濃度差を利用して原稿の周縁を判別す
るので、原稿サイズセンサによって原稿の周縁を検出す
る場合と比べて高精度に不要画像の検出対象領域を設定
することができるとともに、装置の機構構成の簡単化を
図ることができる。ただし、ラインセンサ３１とは別に
光学式又は機械式の原稿サイズセンサを設けて原稿台２
０上での原稿の端縁を検出し、原稿台２０とラインセン
サ３１との位置関係に基づいて演算により撮像面上での
原稿の端縁を求めることもできる。
【００４９】上述の実施形態においては、凹字状の判別
対象領域ＡＪを設ける例を示したが、原稿台２０の前後
の中央部にブックス原稿ＢＤを位置決めする場合などに
おいては、原稿の周縁を外縁Ｅ１とする枠状の判別対象
領域ＡＪを設けるのが望ましい。つまり、原稿の内のユ
ーザーが押さえる可能性の大きい箇所を判別対象領域Ａ
Ｊとして設定すればよい。見開いたときの左右のページ
の片方のみを読み取るモードでは、読取り範囲に対して
判別対象領域ＡＪを設定すれば十分である。 〔第２の実施形態〕図８は第２の実施形態に係るブック
スキャナ２の信号処理系２００のブロック図である。第
２の実施形態のブックスキャナ２の外観及び機構構成
は、上述した第１の実施形態のブックスキャナ１と同一
である（図１参照）。すなわち、ブックスキャナ２も原
稿台２０と撮像ユニット３０との間に開放空間が存在す
る構造の画像読取り装置である。
【００５０】ブックスキャナ２の信号処理系２００は、
ＣＰＵ２０１、ＡＤ変換部２０２、画像処理部２０３、
画像メモリ２０４、ＲＡＭ２０５、輝度検出部２１２、
２値化部２１３、及び位置検出部２１４を含んでおり、
後述の要領で判別した不要画像を消去する画像修正機能
を有している。
【００５１】ラインセンサ３１の出力はＡＤ変換部２０
２によって所定ビット数の画像データＤ２０２に変換さ
れ、画像メモリ２０４に一旦格納される。その後、画像
データＤ２０２は、画像メモリ２０４からＣＰＵ２０１
を経由して輝度検出部２１２及び２値化部２１３に転送
される。輝度検出部２１２は、読取り画像の所定ライン
毎に画素の輝度を集計して輝度ヒストグラムを作成し、
下地輝度及び画像の有無の判別のための閾値を算出す
る。２値化部２１３は、算出された閾値を用いて多値の
読取り画像を２値画像に変換する。位置検出部２１４
は、撮像面における走査位置を指し示す。ＣＰＵ２０１
は、２値化された読取り画像に基づいて不要画像として
消去する領域を設定し、設定した領域を画像処理部２０
３に通知する。画像処理部２０３は、画像メモリ２０４
から読み出された画像データＤ２０２に対して、不要画
像の消去を含む所定のデータ処理を行い、処理後の画像
データを外部装置へ出力する。
【００５２】図９は輝度検出部２１２の機能を説明する
ための図であり、図９（Ａ）は１ラインの輝度ヒストグ
ラムの一例を示し、図９（Ｂ）は副走査方向の位置と下
地輝度との関係を示している。
【００５３】輝度検出部２１２は、注目ラインの下地輝
度ＬB として、例えば画素数がピーク値Ｎｐの半分であ
る２つの輝度レベルのうちの低輝度側のレベルを選定す
る。そして、選定した下地輝度ＬB より一定量ａだけ低
い輝度レベルを画像の有無の判別における閾値ｔｈ１と
する。ブック原稿ＢＤにおける見開きの中央部及び両端
部は原稿面が傾斜しており左右の各ページの中央付近に
比べて暗い。両端部では用紙の褪色による輝度の低下が
生じることもある。このように暗い部分では、図９
（Ａ）の破線が示すように輝度分布のピークが低輝度側
にシフトする。したがって、図９（Ｂ）のように下地輝
度ＬB は副走査方向の位置によって異なり、必然的に閾
値ｔｈ１も副走査方向の位置によって異なる。なお、下
地輝度ＬB の算定の要領は、図９の例に限定されるもの
ではない。輝度の高い方から画素数をカウントしてい
き、カウント値が設定値になったときの輝度を下地輝度
ＬB としてもよい。閾値ｔｈ１を固定値としてもよい。
周知のように輝度と濃度との間には一定の相関関係があ
るので、閾値ｔｈ１による輝度の２値化は、濃度の大小
判別を意味する。
【００５４】図１０は第２の実施形態に係る不要画像の
抽出方法を説明するための図である。図１０（Ａ）は２
値化された読取り画像Ｇ０’の要部を示し、図１０
（Ｂ）〜（Ｅ）は図１０（Ａ）の部分拡大図である。図
１０（Ｃ）及び（Ｅ）における各枡目が画素ｇである図
１０（Ａ）の例において、２値化後の読取り画像Ｇ０’
は、原稿面像Ｇ１’、原稿台像Ｇ２０’、及び手の像Ｇ
Ｈ’から構成されている。そして、原稿面像Ｇ１’は、
文字や写真といった主情報の像とともに、付加情報とし
て必要な画像である見出し像ＧＴ’及び不要画像である
親指像ＧＨａ’を含んでいる。親指像ＧＨａ’は手の像
ＧＨ’の一部である。ブックスキャナ２は以下の要領で
不要画像を抽出する。まず、濃度判別によって原稿面の
端縁を検出する。このとき、副走査方向の端縁（右端Ｅ
Ｒ及び左端ＥＬ）については、各ラインの平均濃度（下
地と画像との割合）を求め、隣接するライン間の平均濃
度の差を調べる。平均濃度が極端に異なる画素位置が端
縁である。ブック原稿ＢＤにおいて、見開き方向の両側
面、すなわち書籍の小口（fore-edge)に対応した部分
は、原稿面Ｓ１の下地部分と比べて暗いので、端縁の検
出は可能である。主走査方向の端縁（下端）について
は、主走査方向の各画素位置における１列の画素の平均
濃度を求め、隣接する列間の平均濃度の差を調べる。原
稿台２０は暗色に着色されているので、端縁の検出は容
易である。
【００５５】次に、原稿面像Ｇ１’のうちの端縁と接す
る画像を判別対象の原稿端画像として抽出する。図１０
（Ａ）の例では、見出し像ＧＴ’と親指像ＧＨａ’とが
原稿端画像に該当する。
【００５６】そして、抽出した原稿端画像の輪郭（すな
わち原稿端画像の周縁を構成する画素群の配列形状）
と、当該原稿端画像が接する端縁との直交関係を調べ
る。具体的には、原稿端画像の輪郭のうちの端縁の近
辺、すなわち端縁の直交する方向の一定幅（例えば１０
画素分）の領域内の部分に注目し、その注目部分におけ
る端縁と平行な方向の位置ずれ量を調べる。見出し像Ｇ
Ｔ’の場合には、図１０（Ｂ）及び（Ｃ）のように、見
出し像ＧＴ’の輪郭における右端ＥＲと一致しない部分
Ｆ１のうちの右端ＥＲの近辺Ｆ１ａに注目すると、右端
ＥＲと接する画素を基準とした主走査方向の位置ずれ量
は±１画素である。位置ずれ量が一定値（例えば±１〜
２画素）以下であれば、近辺Ｆ１ａを右端ＥＲに対して
垂直な直線状とみなす。これに対して、親指像ＧＨａ’
の場合には、図１０（Ｄ）及び（Ｅ）のように、親指像
ＧＨａ’の輪郭における右端ＥＲと一致しない部分Ｆ２
のうちの右端ＥＲの近辺Ｆ２ａに注目すると、右端ＥＲ
と接する画素を基準とした主走査方向の位置ずれ量は３
画素である。すなわち、親指像ＧＨａ’の輪郭における
右端ＥＲの近辺Ｆ２ａは、右端ＥＲに対して垂直ではな
い。
【００５７】このように輪郭と端縁との直交関係を調
べ、輪郭のうちの少なくとも端縁の近辺が端縁に対して
垂直な直線状である原稿端画像を“必要画像”と判別
し、垂直な直線状ではない原稿端画像を“不要画像”と
判別する。これは、多くの見出しが長方形であってその
輪郭が端縁に対して垂直な辺及び平行な辺から構成され
るのに対し、ユーザーの手（指）の像の輪郭線が原稿の
端縁と直交することは極めて少ないからである。
【００５８】図１１は輪郭形状による画像判別の一例を
示す図である。図１１（Ａ）は２値化された親指像ＧＨ
ａ’を示し、図１１（Ｂ）は図１０（Ａ）の部分拡大図
である。
【００５９】輪郭に基づく原稿端画像の判別の他の方法
として、輪郭が曲線部分を含むか否かを調べる方法があ
る。すなわち、上述した要領で原稿端画像を抽出し、原
稿端画像の輪郭の少なくも一部が曲線であるか否かを判
別する。具体的には、原稿端画像（ここでは親指像ＧＨ
ａ’）の輪郭Ｆにおいて、第１の走査方向（例えば主走
査方向）に連続する所定幅（例えば５画素分）の区間に
注目し、区間内の各画素位置ｘ１〜ｘ５の第２の走査方
向（例えば副走査方向）の輪郭位置ｙ１〜ｙ５を調べ
る。隣り合う画素位置の間の輪郭位置の差を求め、区間
の一端から他端に向かって順に輪郭位置の差の増減量を
調べる。増減量が一定値（例えば２画素）以上であれ
ば、輪郭Ｆの区間内の部分を曲線とみなし、原稿端画像
を不要画像と判別する。曲線でなければ、原稿端画像を
必要画像と判別する。図１１（Ｂ）の例では、画素位置
ｘ１と画素位置ｘ２との間の輪郭位置の差Δｙ（Δｙ＝
３）を基準としたとき、画素位置ｘ３と画素位置ｘ４と
の間の輪郭位置の差（｜ｙ４−ｙ３｜）が５であって増
減量が２（＝５−Δｙ）であるので、「輪郭Ｆは曲線を
含んでおり、親指像ＧＨａ’は不要画像である」と判別
する。
【００６０】図１０の判別方法及び図１１の判別方法の
一方のみを実施して読取り画像の修正範囲（消去範囲）
を設定してもよいし、両方を実施してどちらの方法でも
不要画像と判別された原稿端画像を消去してもよい。ブ
ックスキャナ２は、３通りの判別モードの１つをサービ
スマン又はユーザーがスイッチの切換えによって選択で
きるように構成されている。
【００６１】図１２は第２の実施形態に係るブックスキ
ャナ２の概略の動作を示すフローチャートである。２つ
のスタートキー５２，５３の一方のオンに呼応して、照
明ランプを点灯し、スキャンニングを行う（＃１０、＃
１１、＃１２）。スキャンニング中においては、読取り
画像Ｇ０を構成する画像データＤ２０２をライン毎に逐
次に画像メモリ２０４に格納する。スキャンニングの終
了後、下地輝度ＬB を求めて閾値ｔｈ１を算出する輝度
検出を行い（＃１３）、閾値ｔｈ１を用いて読取り画像
Ｇ０を２値化する（＃１４）。２値化後に読取り画像Ｇ
０’から不要画像を抽出して読取り画像Ｇ０の修正範囲
を設定する画像判別処理を行い（＃１５）、不要画像の
消去を含む画像処理を行って外部装置へ画像データを出
力し（＃１６）。照明ランプを消灯して待機状態に戻る
（＃１７）。
【００６２】図１３は図１２の画像判別サブルーチンの
一例を示すフローチャートである。原稿面の端縁を検出
し（＃５１１）、濃度が一定値以上の画素の集合である
画像を認識する（＃５１２）。図１０で説明した要領で
原稿面の端縁と接し且つ輪郭の端縁の近辺が端縁に対し
て垂直でない画像、すなわち端縁に対して非垂直に接す
る画像を抽出する（＃５１３）。また、設定値以上の大
きさの画像を抽出する（＃５１４）。ここで、ステップ
＃５１３とステップ＃５１４の順序は問わない。そし
て、ステップ＃５１３及びステップ＃５１４の抽出条件
の両方に該当する画像、すなわち端縁に対して非垂直に
接し且つ大きさが設定値以上である画像を不要画像と判
別する（＃５１５）。ただし、必ずしも画像の大きさを
判別条件とする必要はなく、端縁に対して非垂直に接す
れば大きさに係わらず不要画像と判別するルーチンを採
用してもよい。
【００６３】図１４は図１２の画像判別サブルーチンの
他の例を示すフローチャートである。原稿面の端縁を検
出し（＃５２１）、濃度が一定値以上の画素の集合であ
る画像を認識する（＃５２２）。端縁と接する画像を抽
出し（＃５２３）、図１１で説明した要領で輪郭が曲線
により構成されている画像を抽出し（＃５２４）、設定
値以上の大きさの画像を抽出する（＃５２５）。ここ
で、ステップ＃５２３、ステップ＃５２４、ステップ＃
５２５の順序は問わない。そして、ステップ＃５２３〜
ステップ＃５２５の抽出条件の全てに該当する画像、す
なわち端縁と接し且つ輪郭が曲線からなり且つ大きさが
設定値以上である画像を不要画像と判別する（＃５２
６）。この例においても図１３の例と同様に画像の大き
さは判別の必要条件ではない。 〔第３の実施形態〕図１５は第３の実施形態に係るブッ
クスキャナ３の信号処理系３００のブロック図である。
第３の実施形態のブックスキャナ３の外観及び機構構成
は、上述した第１の実施形態のブックスキャナ１と同一
である（図１参照）。すなわち、ブックスキャナ３も原
稿台２０と撮像ユニット３０との間に開放空間が存在す
る構造の画像読取り装置である。
【００６４】ブックスキャナ３の信号処理系３００は、
ＣＰＵ３０１、ＡＤ変換部３０２、画像処理部３０３、
画像メモリ３０４、ＲＡＭ３０５、輝度検出部３１２、
及び位置検出部３１４を含んでおり、後述の要領で判別
した不要画像を消去する画像修正機能を有している。
【００６５】ラインセンサ３１の出力はＡＤ変換部３０
２によって所定ビット数の画像データＤ３０２に変換さ
れ、画像メモリ３０４に一旦格納される。その後、画像
データＤ３０２は、画像メモリ３０４からＣＰＵ３０１
を経由して輝度検出部３１２に転送される。輝度検出部
３１２は、読取り画像の所定ライン毎に画素の輝度を集
計して輝度ヒストグラムを作成し、画像判別のための輝
度範囲（画素の濃度範囲）を算出する。位置検出部３１
４は、撮像面における走査位置を指し示す。ＣＰＵ３０
１は、読取り画像に基づいて不要画像として消去する領
域を設定し、設定した領域を画像処理部３０３に通知す
る。画像処理部３０３は、画像メモリ３０４から読み出
された画像データＤ３０２に対して、不要画像の消去を
含む所定のデータ処理を行い、処理後の画像データを外
部装置へ出力する。
【００６６】図１６は第３の実施形態に係る不要画像の
抽出方法を説明するための図である。図１６（Ａ）は読
取り画像Ｇ０の要部を示し、図１６（Ｂ）及び（Ｃ）は
図１６（Ａ）に対応した輝度分布を示している。
【００６７】図１６（Ａ）の例において、読取り画像Ｇ
０は、原稿面像Ｇ１、原稿台像Ｇ２０、投影板像Ｇ１
８、及び手の像ＧＨから構成されている。原稿面像Ｇ１
は、文字や写真といった主情報の像とともに、必要画像
である見出し像ＧＴを含んでいる。そして、手の像ＧＨ
は、原稿面像Ｇ１の右端ＥＲの両側に跨がっている。ブ
ックスキャナ３は、以下の要領で不要画像を抽出する。
【００６８】まず、濃度判別によって原稿面の端縁を検
出する。副走査方向の端縁については、隣接するライン
間の平均濃度の差を調べる。平均濃度が極端に異なる画
素位置が端縁である。主走査方向の端縁（下端）につい
ては、隣接する列間の平均濃度の差を調べる。
【００６９】次に、原稿面像Ｇ１のうちの輝度（濃度）
が一定範囲ΔＢ内の画素の集合を判別対象の特定濃度画
像として抽出する。図１６（Ａ）において破線で示され
る２つのラインＹｂ，Ｙｃのうち、右端ＥＲの内側（左
側）の近辺に対応したラインＹｂでは、図１６（Ｂ）の
ように見出し像ＧＴ及び手の像ＧＨの輝度が設定範囲Δ
Ｂ内の値である。また、右端ＥＲの外側（右側）に対応
したラインＹｃでは、手の像ＧＨの輝度が設定範囲ΔＢ
内の値である。副走査方向に並ぶ各ラインから設定範囲
ΔＢ内の画素を抽出し、抽出した画素どうしが隣接する
か否かを調べる。互いに隣接する一群の画素が特定濃度
画像である。図１６の例では見出し像ＧＴ及び手の像Ｇ
Ｈが特定濃度画像となる。なお、設定範囲ΔＢの下限値
（又は上限値）及び幅を輝度分布に基づいてライン毎に
算定してもよいし、全てのラインに対して共通の値とし
て算定してもよい。また、予め実験などで求めた固定値
としてもよい。
【００７０】そして、抽出した原稿端画像が原稿面の端
縁を跨ぐか否か、すなわち端縁を挟む画素対が注目した
原稿端画像に属するか否かを調べ、端縁の両側に跨がっ
ている原稿端画像を不要画像と判別する。原稿を押さえ
るユーザーの手は必ず原稿の内外に跨がるのに対し、見
出しなどの必要画像は原稿の外側には存在しないからで
ある。
【００７１】図１７は第３の実施形態に係るブックスキ
ャナ３の概略の動作を示すフローチャートである。２つ
のスタートキー５２，５３の一方のオンに呼応して、照
明ランプを点灯し、スキャンニングを行う（＃２０、＃
２１、＃２２）。スキャンニング中においては、読取り
画像Ｇ０を構成する画像データＤ３０２をライン毎に逐
次に画像メモリ３０４に格納する。スキャンニングの終
了後、原稿面の端縁を検出し（＃２３）、画像領域（輝
度が閾値以下の領域）を認識する（＃２４）。そして、
読取り画像Ｇ０から不要画像を抽出して読取り画像Ｇ０
の修正範囲を設定する画像判別処理を行い（＃２５）、
不要画像の消去を含む画像処理を行って外部装置へ画像
データを出力し（＃２６）。照明ランプを消灯して待機
状態に戻る（＃２７）。
【００７２】図１８は図１７の画像判別サブルーチンの
一例を示すフローチャートである。濃度が一定範囲内の
画像を抽出し（＃５３１）、原稿面の端縁を跨ぐ画像を
抽出し（＃５３２）、設定値以上の大きさの画像を抽出
する（＃５３３）。これらのステップ＃５３１、ステッ
プ＃５３２、及びステップ＃５３３の実行順序は問わな
い。そして、ステップ＃５３１〜＃５３３の抽出条件の
全てに該当する画像、すなわち濃度が一定範囲内であり
且つ端縁を跨ぎ且つ大きさが設定値以上である画像を不
要画像と判別する（＃５３４）。ただし、画像の大きさ
は判別の必要条件ではなく、大きさに係わらず濃度が一
定範囲内であり且つ端縁を跨ぐ画像を不要画像と判別し
てもよい。
【００７３】
【発明の効果】請求項１乃至請求項１３の発明によれ
ば、ユーザーが原稿を押さえた場合に、押さえた位置に
係わらずユーザーの身体の像を消去することができ、読
取り品質を高めることができる。
【００７４】請求項１乃至請求項４の発明によれば、ユ
ーザーが必要な画像を隠さないように原稿を押さえる限
り、原稿画像とともに撮像されるユーザーの身体の像を
確実に消去することができる。
【００７５】請求項２又は請求項４の発明によれば、原
稿の周縁部に有る必要な画像をできるだけ消去しないよ
うにすることができる。請求項６、請求項９、又は請求
項１２の発明によれば、読取り画像の修正の信頼性をよ
り高めることができる。
【図面の簡単な説明】
【図１】ブックスキャナの外観を示す斜視図である。
【図２】ブック原稿をセッティングした状態を示す図で
ある。
【図３】ブックスキャナによる読取りの模式図である。
【図４】ブック原稿の読取りの一例を示す平面図であ
る。
【図５】不要画像の抽出の概略を示す模式図である。
【図６】ブロック群の判別の手順を示す図である。
【図７】ブックスキャナの信号処理系のブロック図であ
る。
【図８】第２の実施形態に係るブックスキャナの信号処
理系のブロック図である。
【図９】輝度検出部の機能を説明するための図である。
【図１０】第２の実施形態に係る不要画像の抽出方法を
説明するための図である。
【図１１】輪郭形状による画像判別の一例を示す図であ
る。
【図１２】第２の実施形態に係るブックスキャナの概略
の動作を示すフローチャートである。
【図１３】図１２の画像判別サブルーチンの一例を示す
フローチャートである。
【図１４】図１２の画像判別サブルーチンの他の例を示
すフローチャートである。
【図１５】第３の実施形態に係るブックスキャナの信号
処理系のブロック図である。
【図１６】第３の実施形態に係る不要画像の抽出方法を
説明するための図である。
【図１７】第３の実施形態に係るブックスキャナの概略
の動作を示すフローチャートである。
【図１８】図１７の画像判別サブルーチンの一例を示す
フローチャートである。
【図１９】従来の問題点を説明するための図である。
【符号の説明】
１，２，３ ブックスキャナ（画像読取り装置） ＢＤ ブック原稿（原稿） ２０ 原稿台 ３０ 撮像ユニット（撮像手段） ８０ 空間（開放空間） １００ 信号処理系 １０１ ＣＰＵ １０３ 画像処理部（不要画像を消去する手段） ２００ 信号処理系 ２０１ ＣＰＵ ２０３ 画像処理部（不要画像を消去する手段） ３００ 信号処理系 ３０１ ＣＰＵ ３０３ 画像処理部（不要画像を消去する手段） ＡＪ 判別対象領域 ｂ ブロック Ｂ３ ブロック群 Ｅ１ 外縁 ＥＲ 右端（端縁） ＥＬ 左端（端縁） Ｆ 輪郭 Ｆ１，Ｆ２ 輪郭における端縁と一致しない部分 Ｆ１ａ，Ｆ２ａ 輪郭における端縁の近辺 ｇ 画素 Ｇ０，Ｇ０’ 読取り画像 Ｇ１，Ｇ１’ 原稿面像（原稿部分） ＧＨ 手の像（特定濃度画像） ＧＨａ’ 親指像（原稿端画像） ＧＴ 見出し像（特定濃度画像） ＧＴ’ 見出し像（原稿端画像） ｔｈ１ 閾値（一定の濃度値） ΔＢ 輝度判別の設定範囲（濃度の範囲）
───────────────────────────────────────────────────── フロントページの続き (58)調査した分野(Int.Cl.7，ＤＢ名) H04N 1/04 - 1/207 H04N 1/38 - 1/393

Claims (13)

    (57)【特許請求の範囲】
  1. 【請求項１】読取り対象の原稿を支持する原稿台と原稿
    画像を電気信号に変換する撮像手段とを有し、前記原稿
    台と前記撮像手段との間に原稿のセッティングのための
    開放空間が存在する構造の画像読取り装置における読取
    り画像の修正方法であって、 前記撮像手段の撮像面上での原稿の端縁を検出し、 前記撮像手段によって得られた読取り画像に対して、検
    出した端縁を外縁とし当該外縁から離れた内縁を有する
    判別対象領域を設定し、 前記判別対象領域を複数のブロックに細分化して当該各
    ブロック毎に画像の有無を判別し、 それぞれが画像を含み且つ互いに隣接した複数の前記ブ
    ロックの集合であり、前記内縁とは離れ且つ前記外縁と
    は接するブロック群を抽出し、 前記撮像面における前記ブロック群に対応した領域内の
    画像を不要画像として消去することを特徴とする読取り
    画像の修正方法。
  2. 【請求項２】抽出したブロック群の寸法条件が予め定め
    られた不要画像条件と一致するか否かを判別し、 寸法条件が前記不要画像条件と一致するブロック群内の
    画像のみを不要画像として消去する請求項１記載の読取
    り画像の修正方法。
  3. 【請求項３】読取り対象の原稿を支持する原稿台と、原
    稿画像を電気信号に変換する撮像手段と、前記電気信号
    を量子化して外部装置へ出力する信号処理系とを有し、
    前記原稿台と前記撮像手段との間に原稿のセッティング
    のための開放空間が存在する構造の画像読取り装置であ
    って、 前記信号処理系は、 前記撮像手段の撮像面上での原稿の端縁を検出する手段
    と、 前記撮像手段によって得られた読取り画像に対して、検
    出された端縁を外縁とし当該外縁から離れた内縁を有す
    る判別対象領域を設定する手段と、 前記判別対象領域を複数のブロックに細分化し、当該各
    ブロック毎に画像の有無を判別する手段と、 それぞれが画像を含み且つ互いに隣接した複数の前記ブ
    ロックの集合であり、前記内縁とは離れ且つ前記外縁と
    は接するブロック群を抽出する手段と、 前記撮像面における前記ブロック群に対応した領域内の
    画像を不要画像として消去する手段と、を有してなるこ
    とを特徴とする画像読取り装置。
  4. 【請求項４】前記信号処理系は、 抽出されたブロック群の寸法条件が予め定められた不要
    画像条件と一致するか否かを判別する手段を有し、 寸法条件が前記不要画像条件と一致するブロック群内の
    画像のみを不要画像として消去するように構成されてな
    る請求項３記載の画像読取り装置。
  5. 【請求項５】読取り対象の原稿を支持する原稿台と原稿
    画像を電気信号に変換する撮像手段とを有し、前記原稿
    台と前記撮像手段との間に原稿のセッティングのための
    開放空間が存在する構造の画像読取り装置における読取
    り画像の修正方法であって、 前記撮像手段によって得られた読取り画像のうちの原稿
    部分の端縁を検出し、 前記読取り画像から濃度が一定値以上の画素からなる前
    記端縁の内側の画像であって前記端縁と接する原稿端画
    像を抽出し、 抽出した原稿端画像の輪郭における前記端縁と一致しな
    い部分のうちの少なくとも前記端縁の近辺が、前記端縁
    に対して垂直な直線状であるか否かを判別し、 輪郭における前記端縁の近辺が前記端縁に対して垂直で
    はない原稿端画像を不要画像として消去することを特徴
    とする読取り画像の修正方法。
  6. 【請求項６】全ての原稿端画像又は輪郭における前記端
    縁の近辺が前記端縁に対して垂直ではない原稿端画像に
    ついて、その大きさを基準値と比較し、 輪郭における前記端縁の近辺が前記端縁に対して垂直で
    はなく且つ大きさが基準値を越える原稿端画像を不要画
    像として消去する請求項５記載の読取り画像の修正方
    法。
  7. 【請求項７】読取り対象の原稿を支持する原稿台と、原
    稿画像を電気信号に変換する撮像手段と、前記電気信号
    を量子化して外部装置へ出力する信号処理系とを有し、
    前記原稿台と前記撮像手段との間に原稿のセッティング
    のための開放空間が存在する構造の画像読取り装置であ
    って、 前記信号処理系は、 前記撮像手段によって得られた読取り画像のうちの原稿
    部分の端縁を検出する手段と、 前記読取り画像から濃度が一定値以上の画素からなる前
    記端縁の内側の画像であって前記端縁と接する原稿端画
    像を抽出する手段と、 抽出された原稿端画像の輪郭における前記端縁と一致し
    ない部分のうちの少なくとも前記端縁の近辺が、前記端
    縁に対して垂直な直線状であるか否かを判別する手段
    と、 輪郭における前記端縁の近辺が前記端縁に対して垂直で
    はない原稿端画像を不要画像として消去する手段と、を
    有してなることを特徴とする画像読取り装置。
  8. 【請求項８】読取り対象の原稿を支持する原稿台と原稿
    画像を電気信号に変換する撮像手段とを有し、前記原稿
    台と前記撮像手段との間に原稿のセッティングのための
    開放空間が存在する構造の画像読取り装置における読取
    り画像の修正方法であって、 前記撮像手段によって得られた読取り画像のうちの原稿
    部分の端縁を検出し、 前記読取り画像から濃度が一定値以上の画素からなる前
    記端縁の内側の画像であって前記端縁と接する原稿端画
    像を抽出し、 抽出した原稿端画像の輪郭の少なくとも一部が曲線状で
    あるか否かを判別し、 輪郭の少なくとも一部が曲線状である原稿端画像を不要
    画像として消去することを特徴とする読取り画像の修正
    方法。
  9. 【請求項９】全ての原稿端画像又は輪郭の少なくとも一
    部が曲線状である原稿端画像について、その大きさを基
    準値と比較し、 輪郭の少なくとも一部が曲線状であり且つ大きさが基準
    値を越える原稿端画像を不要画像として消去する請求項
    ８記載の読取り画像の修正方法。
  10. 【請求項１０】読取り対象の原稿を支持する原稿台と、
    原稿画像を電気信号に変換する撮像手段と、前記電気信
    号を量子化して外部装置へ出力する信号処理系とを有
    し、前記原稿台と前記撮像手段との間に原稿のセッティ
    ングのための開放空間が存在する構造の画像読取り装置
    であって、 前記信号処理系は、 前記撮像手段によって得られた読取り画像のうちの原稿
    部分の端縁を検出する手段と、 前記読取り画像から濃度が一定値以上の画素からなる前
    記端縁の内側の画像であって前記端縁と接する原稿端画
    像を抽出する手段と、 抽出された原稿端画像の輪郭の少なくとも一部が曲線状
    であるか否かを判別する手段と、 輪郭の少なくとも一部が曲線状である原稿端画像を不要
    画像として消去する手段と、を有してなることを特徴と
    する画像読取り装置。
  11. 【請求項１１】読取り対象の原稿を支持する原稿台と原
    稿画像を電気信号に変換する撮像手段とを有し、前記原
    稿台と前記撮像手段との間に原稿のセッティングのため
    の開放空間が存在する構造の画像読取り装置における読
    取り画像の修正方法であって、 前記撮像手段によって得られた読取り画像のうちの原稿
    部分の端縁を検出し、 前記読取り画像から濃度が一定範囲内の画素の集合であ
    る特定濃度画像を抽出し、 抽出した特定濃度画像が前記端縁を跨ぐか否かを判別
    し、 前記端縁を跨ぐ特定濃度画像を不要画像として消去する
    ことを特徴とする読取り画像の修正方法。
  12. 【請求項１２】全ての特定濃度画像又は前記端縁を跨ぐ
    特定濃度画像について、その大きさを基準値と比較し、 前記端縁を跨ぎ且つ大きさが基準値を越える特定濃度画
    像を不要画像として消去する請求項１１記載の読取り画
    像の修正方法。
  13. 【請求項１３】読取り対象の原稿を支持する原稿台と、
    原稿画像を電気信号に変換する撮像手段と、前記電気信
    号を量子化して外部装置へ出力する信号処理系とを有
    し、前記原稿台と前記撮像手段との間に原稿のセッティ
    ングのための開放空間が存在する構造の画像読取り装置
    であって、 前記信号処理系は、 前記撮像手段によって得られた読取り画像のうちの原稿
    部分の端縁を検出する手段と、 前記読取り画像から濃度が一定範囲内の画素の集合であ
    る特定濃度画像を抽出する手段と、 抽出された特定濃度画像が前記端縁を跨ぐか否かを判別
    する手段と、 前記端縁を跨ぐ特定濃度画像を不要画像として消去する
    手段と、を有してなることを特徴とする画像読取り装
    置。
JP32264396A 1995-12-27 1996-12-03 読取り画像の修正方法及び画像読取り装置 Expired - Fee Related JP3436025B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP32264396A JP3436025B2 (ja) 1995-12-27 1996-12-03 読取り画像の修正方法及び画像読取り装置
US08/773,369 US6011635A (en) 1995-12-27 1996-12-26 Image reading apparatus and method for correcting a read image

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP34090295 1995-12-27
JP7-340902 1995-12-27
JP32264396A JP3436025B2 (ja) 1995-12-27 1996-12-03 読取り画像の修正方法及び画像読取り装置

Publications (2)

Publication Number Publication Date
JPH09238248A JPH09238248A (ja) 1997-09-09
JP3436025B2 true JP3436025B2 (ja) 2003-08-11

Family

ID=26570888

Family Applications (1)

Application Number Title Priority Date Filing Date
JP32264396A Expired - Fee Related JP3436025B2 (ja) 1995-12-27 1996-12-03 読取り画像の修正方法及び画像読取り装置

Country Status (2)

Country Link
US (1) US6011635A (ja)
JP (1) JP3436025B2 (ja)

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08154157A (ja) * 1994-11-28 1996-06-11 Ricoh Co Ltd 本原稿画像読み取り装置
JP4037512B2 (ja) * 1997-04-15 2008-01-23 コニカミノルタビジネステクノロジーズ株式会社 画像読取装置
JP3198267B2 (ja) * 1997-04-30 2001-08-13 株式会社東芝 画像処理装置と画像形成装置
JP3990035B2 (ja) * 1998-06-24 2007-10-10 日立オムロンターミナルソリューションズ株式会社 イメージスキャナ
US6456732B1 (en) 1998-09-11 2002-09-24 Hewlett-Packard Company Automatic rotation, cropping and scaling of images for printing
US6683984B1 (en) 2000-07-31 2004-01-27 Hewlett-Packard Development Company, L.P. Digital imaging device with background training
US6940617B2 (en) * 2001-02-09 2005-09-06 Matsushita Electric Industrial Co., Ltd. Printing control interface system and method with handwriting discrimination capability
JP2003072186A (ja) * 2001-06-19 2003-03-12 Canon Inc 画像形成装置及び画像形成方法及びプログラム並びに記録媒体
US7593141B2 (en) * 2001-11-23 2009-09-22 Chui-Kuei Chiu Image apparatus with batch scan and real time display and method of the same
JP4141235B2 (ja) * 2002-02-08 2008-08-27 株式会社リコー 画像補正装置及びプログラム
US6985631B2 (en) * 2002-02-20 2006-01-10 Hewlett-Packard Development Company, L.P. Systems and methods for automatically detecting a corner in a digitally captured image
AU2003233403A1 (en) * 2002-03-15 2003-09-29 Kirtas Technologies, Inc. Page turning apparatus with a vacuum plenum and an adaptive air fluffer
EP1540942A4 (en) 2002-09-10 2006-01-11 Kirtas Technologies Inc APPARATUS FOR TURNING PAGES AUTOMATICALLY TO ASSIST THE VISUALIZATION OF THE PAGES OF A DOCUMENT
US7457010B2 (en) * 2003-05-29 2008-11-25 Hewlett-Packard Development Company, L.P. System and method for fast scanning
JP4238749B2 (ja) * 2004-03-10 2009-03-18 カシオ計算機株式会社 画像処理装置、画像投影装置、画像処理方法及びプログラム
US7593595B2 (en) * 2004-08-26 2009-09-22 Compulink Management Center, Inc. Photographic document imaging system
US7634112B1 (en) * 2004-09-13 2009-12-15 Google Inc. Automatic finger detection in document images
US20060098243A1 (en) * 2004-11-08 2006-05-11 Lexmark International, Inc. Determining a gray background value and/or skew of a scanned document
US7330604B2 (en) * 2006-03-02 2008-02-12 Compulink Management Center, Inc. Model-based dewarping method and apparatus
US8213687B2 (en) * 2006-04-28 2012-07-03 Hewlett-Packard Development Company, L.P. Image processing methods, image processing systems, and articles of manufacture
JP2007299210A (ja) * 2006-04-28 2007-11-15 Sharp Corp 画像処理装置、画像形成装置、画像読取装置及び画像処理方法
EP2143041A4 (en) * 2007-05-01 2011-05-25 Compulink Man Ct Inc PHOTODOCUMENTEGMENTATION METHOD AND METHOD
WO2008157764A1 (en) * 2007-06-21 2008-12-24 Kirtas Technologies, Inc. Automated page turning apparatus to assist in viewing pages of a document
JP4433030B2 (ja) * 2007-10-01 2010-03-17 ブラザー工業株式会社 画像処理装置及び画像処理装置の制御プログラム
US20090180085A1 (en) * 2008-01-15 2009-07-16 Kirtas Technologies, Inc. System and method for large format imaging
WO2009137073A1 (en) * 2008-05-06 2009-11-12 Compulink Management Center, Inc. Camera-based document imaging
US9547799B2 (en) * 2008-07-17 2017-01-17 Sharp Laboratories Of America, Inc. Methods and systems for content-boundary detection
KR101441307B1 (ko) * 2008-10-10 2014-09-17 삼성전자주식회사 전력 소모 절감을 위한 영상 처리 방법 및 그 장치
US8335342B2 (en) * 2008-11-21 2012-12-18 Xerox Corporation Protecting printed items intended for public exchange with information embedded in blank document borders
TW201039251A (en) * 2009-04-30 2010-11-01 Novatek Microelectronics Corp Facial expression recognition apparatus and facial expression recognition method thereof
US8873864B2 (en) * 2009-12-16 2014-10-28 Sharp Laboratories Of America, Inc. Methods and systems for automatic content-boundary detection
JP4918167B1 (ja) * 2011-03-31 2012-04-18 パナソニック株式会社 画像処理装置およびこれを備えた原稿読取システム
CN102831578B (zh) * 2011-06-15 2014-12-17 富士通株式会社 图像处理方法和图像处理设备
JP5698612B2 (ja) * 2011-06-15 2015-04-08 株式会社Pfu オーバーヘッド型画像読取装置、画像処理方法、および、プログラム
JP5605956B2 (ja) * 2012-05-31 2014-10-15 京セラドキュメントソリューションズ株式会社 画像読取装置および画像形成装置
WO2013192508A2 (en) * 2012-06-22 2013-12-27 Polyvision Corporation Document unbending and recoloring systems and methods
USD685372S1 (en) * 2012-11-30 2013-07-02 Atiz Innovation Co., Ltd. Document scanning and visualization system
JP5895881B2 (ja) * 2012-12-21 2016-03-30 カシオ計算機株式会社 画像読み取り装置、画像読み取り方法及びプログラム
CN103971361B (zh) * 2013-02-06 2017-05-10 富士通株式会社 图像处理装置和方法
EP3089101A1 (en) * 2013-12-03 2016-11-02 Dacuda AG User feedback for real-time checking and improving quality of scanned image
WO2015121980A1 (ja) * 2014-02-14 2015-08-20 株式会社Pfu オーバーヘッド型画像読取装置、画像処理方法、および、プログラム
US10114447B2 (en) * 2015-12-10 2018-10-30 Samsung Electronics Co., Ltd. Image processing method and apparatus for operating in low-power mode
CN107085850B (zh) * 2017-03-24 2019-10-01 大连成者科技有限公司 遮蔽采集图像中异物的标记体、识别图像中异物标记体的方法以及书籍扫描方法
EP3689792B1 (en) * 2017-09-27 2022-04-20 Panasonic Intellectual Property Management Co., Ltd. Package recognition device, package sorting system and package recognition method
CN109117748B (zh) * 2018-07-23 2021-08-31 安徽淘云科技股份有限公司 翻页检测方法及装置
TWI733053B (zh) * 2018-09-07 2021-07-11 虹光精密工業股份有限公司 事務機與事務機的操控組件之控制方法
US20230058066A1 (en) * 2021-08-23 2023-02-23 Fujifilm Business Innovation Corp. Image processing apparatus

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61262982A (ja) * 1985-05-17 1986-11-20 Casio Comput Co Ltd 画像情報認識装置
JP3028653B2 (ja) * 1991-09-13 2000-04-04 富士ゼロックス株式会社 画像処理装置の枠消し方式
US5377019A (en) * 1991-12-02 1994-12-27 Minolta Co., Ltd. Document reading apparatus having a function of determining effective document region based on a detected data

Also Published As

Publication number Publication date
JPH09238248A (ja) 1997-09-09
US6011635A (en) 2000-01-04

Similar Documents

Publication Publication Date Title
JP3436025B2 (ja) 読取り画像の修正方法及び画像読取り装置
JPH08154154A (ja) 画像読み取り装置
JPH09200455A (ja) 読取り画像の濃度補正方法及び画像読取り装置
US5973792A (en) Image processing apparatus that can read out image of original with fidelity
JPH10210266A (ja) 画像読み取り装置
JP3569794B2 (ja) 画像読取りシステム
US5987163A (en) Apparatus and method for determining the size of a page size in an image reader
US5847884A (en) Image reading apparatus
JP2001268367A (ja) 画像読み取り装置
JP4441558B2 (ja) 画像処理装置及び画像処理方法ならびにプログラム
JP4277768B2 (ja) 写真イメージ領域抽出装置およびコピー装置
JPH10255024A (ja) 画像読取り装置
JP3852247B2 (ja) 画像形成装置及び転写画像歪み補正方法
JPH08237485A (ja) 画像読み取り装置
JP3433624B2 (ja) 画像読取り装置
JP3707204B2 (ja) 読取り画像の修正方法及び画像読取り装置
JPH10136194A (ja) 画像読取り装置
JP2001069332A (ja) 画像読み取り装置
JP3433626B2 (ja) 原稿の種類の判別方法及び画像読取り装置
JPH10155061A (ja) 画像読取り装置
JP3433625B2 (ja) 画像読取り装置
JPH10150532A (ja) 画像読取り装置
JPH10327325A (ja) 画像読取り装置
JP4623214B2 (ja) 写真イメージ領域抽出装置およびコピー装置
JPH10257263A (ja) 画像読取り装置

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080606

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090606

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090606

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100606

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110606

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110606

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120606

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130606

Year of fee payment: 10

LAPS Cancellation because of no payment of annual fees