JP2010074672A - 画像処理装置、画像処理方法、及び、画像処理プログラム - Google Patents

画像処理装置、画像処理方法、及び、画像処理プログラム Download PDF

Info

Publication number
JP2010074672A
JP2010074672A JP2008241690A JP2008241690A JP2010074672A JP 2010074672 A JP2010074672 A JP 2010074672A JP 2008241690 A JP2008241690 A JP 2008241690A JP 2008241690 A JP2008241690 A JP 2008241690A JP 2010074672 A JP2010074672 A JP 2010074672A
Authority
JP
Japan
Prior art keywords
image
pixel value
region
quantized
illuminance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008241690A
Other languages
English (en)
Other versions
JP5028370B2 (ja
Inventor
Miho Ishigami
美穂 石上
Ichiro Umeda
一郎 梅田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2008241690A priority Critical patent/JP5028370B2/ja
Priority to US12/545,348 priority patent/US8295641B2/en
Publication of JP2010074672A publication Critical patent/JP2010074672A/ja
Application granted granted Critical
Publication of JP5028370B2 publication Critical patent/JP5028370B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/16Image preprocessing
    • G06V30/162Quantising the image signal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)

Abstract

【課題】処理量を増大させることなく、かつ、クラスタリングの精度を維持しつつ、明度変化の大きい画像を量子化する画像処理装置を提供する。
【解決手段】入力画像から、反射率の分布を示す反射率画像と照度分布を示す照度成分画像とを生成する第1の画像生成手段と、第1の画像生成手段によって生成された照度成分画像の照度成分に基づいて、区分された複数の小領域を特定する領域特定手段と、領域特定手段で特定された小領域ごとに、反射率画像から、量子化された量子化画像を生成する第2の画像生成手段と、量子化画像において、量子化画素値が等しい領域を取得する領域取得手段と、照度成分画像に基づいて、領域取得手段によって取得された領域ごとに代表画素値を取得する画素値取得手段と、領域取得手段で取得された各領域の量子化画素値を、画素値取得手段によって取得された代表画素値を用いて補正する補正手段とを備える。
【選択図】図2

Description

本発明は、画像を量子化する画像処理装置に関する。
近年、情報の電子化が進み、紙文書をそのまま保存するのではなく、スキャナ等でスキャンすることにより文書画像に電子化して保存したり、その文書画像の電子データを他装置に送信するシステムが普及している。そのようなシステムにおいては、送信時に、送信コストを削減するため、電子化された文書に対して高い圧縮性が要求される場合が多い。また、電子化データを部分的に編集できる再利用性と、拡大しても縮小しても画質が落ちない高画質性も要求される。しかしながら、文書画像に文字領域や写真領域が混在する場合に、文字領域に適した圧縮を行うと画質は良いが圧縮率が低くなってしまい、写真領域に適した圧縮を行うと圧縮率は高いが文字が劣化してしまい、画質と圧縮性を全て満たすことが困難であった。
ところが、近年、電子化された文書画像を文字領域や写真領域に分離し、再利用性と高画質性が重視される文字領域をベクトルデータに変換し、ベクトル化で容易に再現できない写真領域等を圧縮し、各領域の圧縮結果を合成して出力する手法が提案されている。また、今まで写真として圧縮されていた画像の中に、物体の輪郭に縁がついたように明瞭で出現色も限られている等の特徴を有する特定画像(イラストや文字)をベクトル化できる手法も提案されている。近年では、それらの手法によって、文書画像の高圧縮性、高画質性再利用性が実現されてきている。
以上のような中で、ベクトル化処理の対象は、上述の紙文書のスキャン画像に限られることはない。例えば、紙文書やホワイトボードなどをデジタルカメラで撮影した後に、サーバなどに送信し、ゆがみや明度を自動的に補正し、視認しやすいPDF画像やベクトルデータに加工して保存することが考えられる。
特に、ホワイトボードに記入された文字や図形部分は、ホワイトボード用のペンの色数が限られていて、且つ、背景と筆跡との境界(輪郭)が明確であるという上述の特定画像(イラストや文字)の特徴を有している。したがって、ホワイトボードの撮影画像は、ベクトルデータに変換するのに適した画像である。よって、デジタルカメラでの入力画像においても、色特徴に基づいて色毎に領域を分け、各色領域の輪郭線をベクトルデータに変換し、デジタルカメラでの入力画像の高圧縮性、高画質性、再利用性を実現することが考えられる。
しかしながら、デジタルカメラ撮影時のフラッシュ等によって照明ムラが発生しやすいので、色毎の領域を抽出する際に、近い色を持つイラスト部分と背景部分とが1つの領域になってしまい、イラストを綺麗に抽出できない。特に、入力画像がグレー画像の場合には、濃度値が近いイラスト部分と背景部分が多数存在するので、イラストと背景とが分離できなくなってしまう。
そのような課題を解決するために、例えば、デジタルカメラでの入力画像を先に明度補正処理してからベクトル化処理を行うことが考えられる。
一方、明度補正処理によって、画像を補正することは広く知られており、特許文献1には、レティネックス処理により、画像の照度を補正することができる画像処理装置が記載されている。しかしながら、そのような明度補正処理はある程度の照明ムラを取ることができるが、明度変化が大きい画像の場合は照明ムラの影響が残ることが多く、結局、ベクトル化処理した結果として、上記の課題が生じてしまう。
例えば、デジタルカメラでホワイトボードを撮影する時にフラッシュを利用した場合には、明度変化の大きい画像が生成される。従って、暗い部分(フラッシュから遠い位置)の白の背景が、明るい部分(フラッシュに近い位置)の文字と同程度の明度を持つという現象が、近傍の領域において発生し得る。すなわち、異なるクラスタに分類されるべき画素が、照明の影響によって近い画素値を有してしまう。したがって、そのような画像を量子化してクラスタ分類(量子化された画素値に基づいて背景及び複数種類の前景に分類)すると、異なるクラスタに分類されるべき画素が、同一クラスタとして分類されてしまう。例えば、図7の画像において画素値を多値量子化すると、図6に示すように、右上の背景部分は左上の文字のかすれている部分と量子化画素値が等しくなるので、同一クラスタとして分類されてしまう。なお、図6は、図7の画像を所定サイズの格子状の領域に分けて、各格子状領域において量子化した結果の一部を拡大表示した図である。
特開2007−233433号公報
そこで、本発明は、処理量を増大させることなく、かつ、クラスタリングの精度を維持しつつ、明度変化の大きい画像を量子化する画像処理装置を提供する。
上記課題を解決するため、本発明に係る画像処理装置は、入力画像を量子化する画像処理装置であって、入力画像から、反射率の分布を示す反射率画像と照度分布を示す照度成分画像とを生成する第1の画像生成手段と、前記第1の画像生成手段によって生成された照度成分画像の照度成分に基づいて、区分された複数の小領域を特定する領域特定手段と、前記領域特定手段で特定された小領域ごとに、第1の画像生成手段によって生成された反射率画像から、量子化された量子化画像を生成する第2の画像生成手段と、第2の画像生成手段によって生成された量子化画像において、量子化画素値が等しい領域を取得する領域取得手段と、第1の画像生成手段によって生成された照度成分画像に基づいて、領域取得手段によって取得された領域ごとに代表画素値を取得する画素値取得手段と、前記領域取得手段で取得された各領域の量子化画素値を、画素値取得手段によって取得された代表画素値を用いて補正する補正手段とを備える。
本発明によれば、処理量を増大させることなく、かつ、クラスタリングの精度を維持しつつ、明度変化の大きい画像を量子化することができる。
以下に、本発明を実施するための最良の形態について、図面を参照しながら詳しく説明する。なお、同一の構成要素には同一の参照番号を付して、説明を省略する。
図1は、本実施形態におけるホワイトボード10と、画像を撮影するためのデジタルカメラ20を示す図である。また、図7は、図1のホワイトボード10に手書きで文字を書いた後、フラッシュを用いてデジタルカメラ20で撮影した画像を示す図である。本実施形態においては、図7のような撮影画像を入力画像として用い、ホワイトボード内に記述された手書き文字領域を取り出してベクトルデータに変換する。その際に、デジタルカメラ20のフラッシュによって生成される照明ムラを補正して量子化を行う。なお、ホワイトボードを斜め方向から撮影した場合、台形状(または四辺形状)の歪みが生じるので、後述する本発明の処理(照明ムラ補正、ベクトル変換など)を行う前に、歪み補正を行っておくのが望ましい。このような歪みを補正する方法としては、例えば、明度差の大きい直線状の位置を検知することによりホワイトボードの4辺を検知し、当該4辺が長方形になるように補正する方法などを用いることが可能である。
なお、本実施形態においては、被写体としてホワイトボードを用いた例について説明するが、被写体の種類はホワイトボードに限定するものではない。例えば、被写体の面の反射率がある程度、一定であればよく、例えば、白い紙のようなものであってもよい。また、プロジェクタ等から画像を投影するスクリーンに対しても、そのスクリーンの反射率はほぼ一定であると想定できるので、本発明を適応することができる。
また、図7の画像では、1つのフラッシュでホワイトボードを照明したときに生じる照明ムラの例を示したが、照明の数は1つに限るものではない。例えば、複数の照明によって生じる照明ムラに対しても本発明を適用することが可能である。
図16は、本発明に適用することができるディジタル複合機(MFP)の主要部のブロック構成を示す図である。尚、本実施形態では、画像処理装置として、スキャナ機能やプリンタ機能を有するディジタル複合機(MFP)を用いているが、汎用のスキャナとパーソナルコンピュータとを接続したシステムを画像処理装置として用いてもよい。
図16に示すように、MFPは、画像処理装置として機能するコントローラユニット1600を備えている。コントローラユニット1600は、画像入力デバイスであるデジタルカメラ1617や画像出力デバイスであるプリンタ1618を接続する。そして、デジタルカメラ1617で原稿画像から読み取られた画像データをプリンタ1618によって印刷出力するコピー機能を実現するための制御を行う。また、コントローラユニット1600は、LAN1619や公衆回線(WAN)1020を介して他装置との間でパターン画像やデバイス情報等の入出力を行うための制御を行う。
コントローラユニット1600は、図16に示すように、CPU1601を有している。CPU1601は、ROM1603に格納されているブートプログラムによりオペレーションシステム(OS)を立ち上げる。そして、このOS上でHDD(ハードディスクドライブ)1604に格納されているアプリケーションプログラムを実行することによって各種処理を実行する。このCPU1601の作業領域として、RAM1602が用いられる。RAM1602はまた、CPU1601の作業領域だけでなく、画像データを一時記憶するための画像メモリ領域をも提供する。HDD1604は、上記のアプリケーションプログラムとともに、画像データを格納する。
CPU1601には、システムバス1607を介して、ROM1603やRAM1602が接続している。更に、CPU1601には、操作部IF(操作部インタフェース)1606、ネットワークIF(ネットワークインタフェース)1609、モデム1610及びイメージバスIF(イメージバスインタフェース)1605が接続されている。操作部IF1606は、タッチパネルを有する操作部1621とのインタフェースであり、操作部1621に表示する画像データを操作部1621に対して出力する。また、操作部IF1606は、操作部1621においてユーザにより入力された情報をCPU1601に送出する。
また、ネットワークIF1609は、LAN1619に接続され、LAN1619を介してLAN1619に接続された各装置との間で情報の入出力を行う。モデム1610は、WAN1620に接続し、WAN1620を介して他装置との間で情報の入出力を行う。イメージバスIF1605は、システムバス1607と画像データを高速で転送する画像バス1608を接続し、データ構造を変換するためのバスブリッジである。画像バス1608は、PCIバス又は「IEEE 1394」から構成される。画像バス1608上には、ラスタイメージプロセッサ(RIP)1611、デバイスIF1612、画像補正部1613、画像処理部1614、プリント処理部1615、及び画像圧縮部1616が設けられている。
RIP1611は、PDLコードをビットマップイメージに展開するプロセッサである。デバイスIF1612には、デジタルカメラ1617及びプリンタ1618が接続され、画像データの同期系/非同期系の変換を行う。画像補正部1613は、入力画像データに対して歪み補正や明度補正を行う。画像処理部1614は、入力画像にたいして照明ムラを取った色分離処理等を行う。プリント処理部1615は、プリント出力画像データに対してプリンタの補正、解像度変換等を行う。画像圧縮部1616は、多値画像データをJPEGデータに、ニ値画像データをJBIG、MMR、MH等のデータに圧縮するとともに、その伸長処理も行う。
図2は、本実施形態における照明ムラのある画像について量子化を行う処理の全体の手順を示すフローチャートである。また、図3と図4はそれぞれ、図2におけるステップS200及びS400の詳細を示すフローチャートである。また、図5は、図2に示すフローチャートによる処理に、図3と図4に示すフローチャートによる処理を取り入れて、各処理でどのような画像が生成されるのかを示した図である。本実施形態においては、図2に示すフローチャートによって、フラッシュにより照明ムラが生じた入力画像(例えば図7)から、照度成分が補正され(照明ムラが補正され)、量子化された画像(例えば図14)を生成することができる。
以下、図2に示すフローチャートについて説明する。以下の説明において、ステップS100の処理は、図16に示す画像補正部1613によって行われ、ステップS200〜S400の処理は、画像処理部1614によって行われる。
まず、ステップS100において、図7に示す入力画像から、図8に示す照度成分画像と図9に示す反射率画像とを生成する。照度成分画像は、入力画像における照度分布を示しており、反射率画像は、入力画像における反射率の分布を示している。入力画像を照度成分画像と反射率画像とに分離する処理においては、例えば、一般的に知られているレティネックス処理が用いられても良い(第1の画像生成の一例)。例えば、入力画像に対してローパスフィルタをかけて照度成分画像を推測し、更に、(入力画像)=(反射率画像)×(照度成分画像)という関係になるように、入力画像を反射率画像と照度成分画像とに分ける。
次に、ステップS200において、ステップS100で生成された照度成分画像の照度値に基づいて小領域に分け、各小領域毎に、反射率画像を用いて量子化を行い、量子化画像を生成する。ここで、図10は、画像(例えば256色)を、4色で量子化を行って量子化画像を生成した一例を示す図である。なお、図10の画像は、複数の小領域のうちの1つを示すものとし、この1つの小領域を量子化した場合の例である(すなわち、図7の例とは照明が異なる)。ステップS200についての詳細は、図3において説明する。
このように、本実施形態においては、入力画像から反射率画像と照度成分画像とを抽出し、その照度成分画像を用いて小領域に分け、更に、小領域毎に反射率画像を用いて量子化を行う。従って、照度の値が近い小領域ごとに分けてから、量子化において反射率画像を用いることで、異なるクラスタに分類されるべき画素が同じクラスタに分類されてしまうということを回避することができる。例えば、暗い(照度が低い)部分にある背景が、明るい(照度が高い)部分にある文字と同程度の明度である場合であっても、暗い部分と明るい部分の小領域に分けてから量子化するので、同じクラスタに分類されないようにできる。即ち、本実施形態においては、反射率画像と照度成分画像とを用いることで、色の分類(クラスタリング)を行う際の精度を向上させることができる。
ステップS300において、ステップS200で量子化された反射率画像の量子化画像を用いて、量子化画素値が等しい領域を取得する(領域取得の処理)。本実施形態においては、例えば、S200で分けられた各小領域において、4色で量子化を行った場合、量子化画素値が等しい領域の画像は4枚取り出すことができる。反射率画像の量子化画像(図10の量子化画像では4色全てが記載されている)から、4色のうちの1色のみを取り出して取得した画像の一例を図11に示す。すなわち、図11は、反射率画像の量子化画像において、量子化画素値が等しい画素群の一つを示す図である。なお、本実施形態において、量子化を行う色数は4色に限るものではなく、2色以上であれば良い。なお、ステップS200で小領域毎に量子化を行っているので、ステップS300では、量子化画素値が等しい画素であっても、小領域毎に別の領域として取得することができる。例えば、ステップS200で4つの小領域に分け、ステップS300で各小領域において量子化画素値が等しい4つの領域を取得した場合、入力画像全体では、4×4=16個の領域が取得されることになる。すなわち、照度と反射率の双方を考慮した量子化が行われることになる。
ステップS400において、ステップS300で取得された量子化画素値が等しい領域ごとに、反射率画像の量子化画像における量子化画素値を補正する。本実施形態においては、照度成分画像を用いて入力画像を補正することで得た画像の画素値を用いて、S300で得た量子化画素値が等しい領域ごとに、平均画素値を求め、その平均画素値で量子化画像の画素値を置き換える。ステップS400についての詳細は、図4において説明する。
以上のように、本実施形態では、照度ムラのある入力画像を量子化する場合に、一旦、反射率画像と照度成分画像を抽出し、照度がほぼ等しいと判断された小領域ごとに、反射率画像を用いて量子化することによって、精度の良いクラスタリングを実現する。次に、各クラスタリングされて求められた量子化画素値を、照度を加味して補正した照度成分補正画像に基づいた値に置き換える。その結果、画像に照度ムラがある場合においても、クラスタリングの精度を低下させることなく量子化を行うことができ、更に、各クラスタに対して照度ムラの影響を除いた後の画素値を割り当てることができる。
図3は、図2に示すステップS200の処理の手順を示すフローチャートである。ステップS201において、ステップS100で生成された照度成分画像から得られる照度成分の分布を、ガウス混合分布で近似する。この近似を行うことによって、照度成分を取得した際の誤差を減少させることができる。
ステップS202において、ステップS201で求められた照度成分の近似結果を、照度成分が近い領域ごとに纏められた小領域として取得する。なお、ステップS201で近似処理を行っているので、ステップS202において求める小領域の輪郭も滑らかになり、また、小領域内に誤差による別の小領域ができてしまうことを防ぐことができる。
ここで、図13は、照度の近い領域群の一例を示す図である。照度成分の近い領域の纏め方については任意の方法が適用されるが、例えば、予め3つの閾値を定め、それぞれの閾値間に存在する合計4つの領域に区分されるようにしても良い(領域特定の一例)。図13は、そのように分けられた領域群の一例を示している。
ステップ203において、ステップS202で取得された照度成分が近い小領域ごとに、反射率画像において対応する小領域の各画素値に基づき、次のステップS204で量子化を行う際に用いる画像量子化閾値を求める(閾値生成の一例)。例えば、S202で求めた各小領域の位置に基づいて、反射率画像において対応する位置の各小領域を定める。そして、各小領域ごとに反射率画像の画素値の統計分布を取り、当該統計分布に基づいて量子化閾値を求めるようにすればよい。例えば、統計分布のヒストグラムには、背景画素値による山と前景画素値による山が生じるので、その山の間の谷の部分に量子化閾値を設定すればよい。
ステップ204において、ステップS203で求められた画像量子化閾値に基づいて、ステップS100で生成された反射率画像の量子化を行い、反射率画像の量子化画像を生成する(第2の画像生成の一例)。
以上のように、本実施形態においては、照度成分に基づいて小領域の位置を定め、当該小領域ごとに反射率画像の量子化閾値を定めて量子化している。すなわち、照明の影響度合が変わる小領域ごとに量子化閾値を変えているので、照明の影響を減らして適切に量子化することができる。
図4は、図2に示すステップS400の処理の手順を示すフローチャートである。ステップS401において、入力画像とステップS100で生成される照度成分画像とを用いて、図12に示す照度成分補正画像を生成する。照度成分補正画像は、例えば、照度成分画像の白黒を反転させて、入力画像に加算することによって生成する(第3の画像生成の一例)。すなわち、照度の範囲を0〜255で表す場合、(照度成分補正画像)=(入力画像)+(255−(照度成分画像))という式を用いて、照度成分補正画像を求める。(なお、上記式において、照度成分画像を推定する際の誤差の影響で、照度成分補正画像の値が255を超えてしまうような場合は、255になるように補正するものとする。)
また、照度成分補正画像を求める方法は、この手法に限るものではない。例えば、(照度成分補正画像)=(入力画像)×(255/(照度成分画像))という式を用いて照度成分補正画像を求めるようにしてもよい。
次に、ステップS402において、ステップS401で生成された照度成分補正画像において、ステップS300で取得された量子化画素値が等しい領域に対応する領域ごとに平均画素値が求められる(画素値取得の一例)。ここで、ステップS402において求められた平均画素値を代表画素値ともいう。領域内の平均画素値の求め方については、図15において説明する。
ステップS403において、ステップS300で取得された量子化画素値を、対応する領域ごとにステップS402で求められた平均画素値に置き換えて補正する(量子化画素値の補正の一例)。図14は、以上の説明による処理の結果、本実施形態において、図7のように明度変化の大きい(照度ムラのある)画像から、照度ムラが補正された画像が生成された図を示している。
図15は、図4に示すステップS402において、ステップS300での量子化画素値が等しい領域ごとに平均画素値を求める一例を説明する図である。例えば、ステップS300において分類される量子化画素値は4色あるとする。ここで、それらの量子化画素値が等しい領域をX、Y、Z、Wとする。以下、分類された領域を「クラス」ともいう。
図15は、照度成分補正画像の領域X(量子化画素値が等しい領域のうちの1つ)における画素値分布を示す図である。図15に示すように、横軸は、画素値を示し、縦軸は、領域X内における画素値の出現回数を示している。
ここで、例えば、ステップS300で取得したときのクラスXの量子化画素値として「x」が与えられているとする。同様に、クラスY、クラスZ、クラスWについても、それぞれの量子化画素値が、「y」、「z」、「w」と与えられているとする。すなわち、量子化画素値「x」、「y」、「z」、「w」は、反射率画像を用いて、ステップS100〜S300における量子化によって取得された値である。一方、各クラスの平均画素値は、図15の画素値分布から求められる。図15においては、破線部で示した画素値(「x’」とする)が平均画素値とされている。本実施形態においては、破線部より左側の面積αと、破線部より右側の面積βとが等しくなるように、破線部で示す平均画素値が決定される。同様に、クラスY、Z、Wについての平均画素値が「y’」、「z’」、「w’」と決定され、ステップS403において、上述の量子化画素値「x」、「y」、「z」、「w」を、それぞれ、求められた「x’」、「y’」、「z’」、「w’」に置き換える。
以上のようにして求められた量子化の結果は、例えば、手書き文字領域を取り出しベクトルデータに変換することによって、文書画像の高圧縮性、高画質性や再利用性を実現するために用いられることができる。
以上の説明において、図4に示すステップS402における平均画素値の求め方を図15に示す画素値分布の平均となる場合について説明した。図15において、平均画素値の値は、破線部に示す画素値である。ここで、破線部より左側の面積αと破線部より右側の面積βは等しくされているが、特に「α=β」となるように破線部が決定されなくても良い。例えば、任意の実数を「k」として、「α=kβ」として、破線部に示す平均画素値を求めても良い。
また、以上の説明においては、図4に示すステップS403において、量子化画素値をステップS402から求められる平均画素値に置き換えて補正する場合の処理について説明した。即ち、「量子化画素値の補正値=平均画素値」として置き換えている。しかしながら、例えば、任意の実数を「k」として、「量子化画素値の補正値=k×平均画素値」として量子化画素値を置き換えても良い。
なお、ステップS402において、ステップS300での量子化画素値が等しい領域ごとに平均画素値を求める手法は、上述に限るものではない。例えば、画素値の分布形状に応じて、平均画素値を求める手法を変えても良い(例えば、画素値分布が広い場合は相加平均、画素値分布が狭い場合は分布の中央を重視した加重平均にする方法等が用いられても良い)。
本発明には、プログラム(画像処理プログラム)コードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステム(OS)などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれる。更に、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれた場合についても、本発明は適用される。その場合、書き込まれたプログラムコードの指示に基づき、その機能拡張カードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される。
本実施形態における入力画像を撮影するためのホワイトボードとデジタルカメラを示す図である。 本実施形態における照明ムラのある画像を量子化する処理の全体の手順を示すフローチャートである。 図2に示すステップS200の処理の手順を示すフローチャートである。 図2に示すステップS400の処理の手順を示すフローチャートである。 図2に示すフローチャートに、図3と図4に示すフローチャートを取り入れた全体の処理の手順を示す図である。 量子化画素値が等しくなっている一例を示す図である。 本実施形態における入力画像の一例を示す図である。 本実施形態における照度成分画像の一例を示す図である。 本実施形態における反射率画像の一例を示す図である。 4色で量子化を行って量子化画像を生成した一例を示す図である。 量子化画像における量子化画素値が等しい領域の一例を示す図である。 本実施形態における照度成分補正画像の一例を示す図である。 照度分布において領域ごとに纏められた一例を示す図である。 照度が補正され、量子化された画像の一例を示す図である。 照度成分補正画像における画素値分布を示す図である。 画像処理装置の構成の一例を示す図である。
符号の説明
10 ホワイトボード
20 デジタルカメラ
1600 情報処理装置

Claims (8)

  1. 入力画像を量子化する画像処理装置であって、
    前記入力画像から、反射率の分布を示す反射率画像と照度分布を示す照度成分画像とを生成する第1の画像生成手段と、
    前記第1の画像生成手段によって生成された照度成分画像の照度成分に基づいて、区分された複数の小領域を特定する領域特定手段と、
    前記領域特定手段で特定された小領域ごとに、前記第1の画像生成手段によって生成された反射率画像から、量子化された量子化画像を生成する第2の画像生成手段と、
    前記第2の画像生成手段によって生成された量子化画像において、量子化画素値が等しい領域を取得する領域取得手段と、
    前記第1の画像生成手段によって生成された照度成分画像に基づいて、前記領域取得手段によって取得された領域に対応する領域ごとに代表画素値を取得する画素値取得手段と、
    前記領域取得手段で取得された各領域の量子化画素値を、前記画素値取得手段によって取得された代表画素値を用いて補正する補正手段と
    を備えることを特徴とする画像処理装置。
  2. 前記第2の画像生成手段は、前記領域特定手段によって特定された小領域ごとに、量子化閾値を生成する閾値生成手段を更に備え、
    前記閾値生成手段によって生成された量子化閾値に基づいて、前記領域特定手段で特定された小領域ごとに、前記反射率画像から前記量子化画像を生成することを特徴とする請求項1に記載の画像処理装置。
  3. 前記領域特定手段は、前記照度成分画像の照度成分の分布をガウス混合分布で近似し、前記照度成分の分布が近似された照度成分画像を、予め定められた照度の閾値に従って区分することにより、前記小領域を特定することを特徴とする請求項1又は2に記載の画像処理装置。
  4. 前記画素値取得手段は、前記入力画像と前記第1の画像生成手段によって生成された照度成分画像から、照度成分が補正された照度成分補正画像を生成する第3の画像生成手段を更に備えることを特徴とする請求項1乃至3のいずれか1項に記載の画像処理装置。
  5. 前記画素値取得手段は、前記第3の画像生成手段によって生成された照度成分補正画像において、前記領域取得手段によって取得された量子化画素値が等しい領域に対応する領域ごとに、画素値の平均を求めることによって前記代表画素値を取得することを特徴とする請求項4に記載の画像処理装置。
  6. 前記補正手段は、前記領域取得手段で取得された各領域の量子化画素値を、前記画素値取得手段によって取得された代表画素値に置き換えることによって補正することを特徴とする請求項1乃至5のいずれか1項に記載の画像処理装置。
  7. 入力画像を量子化する画像処理装置において実行される画像処理方法であって、
    前記画像処理装置の第1の画像生成手段が、前記入力画像から、反射率の分布を示す反射率画像と照度分布を示す照度成分画像とを生成する第1の画像生成工程と、
    前記画像処理装置の領域特定手段が、前記第1の画像生成工程で生成された照度成分画像の照度成分に基づいて、区分された複数の小領域を特定する領域特定工程と、
    前記画像処理装置の第2の画像生成手段が、前記領域特定工程で特定された小領域ごとに、前記第1の画像生成工程において生成された反射率画像から、量子化された量子化画像を生成する第2の画像生成工程と、
    前記画像処理装置の領域取得手段が、前記第2の画像生成工程において生成された量子化画像において、量子化画素値が等しい領域を取得する領域取得工程と、
    前記画像処理装置の画素値取得手段が、前記第1の画像生成工程において生成された照度成分画像に基づいて、前記領域取得工程において取得された領域ごとに代表画素値を取得する画素値取得工程と、
    前記画像処理装置の補正手段が、前記領域取得工程において取得された各領域の量子化画素値を、前記画素値取得工程において取得された代表画素値を用いて補正する補正工程と
    を備えることを特徴とする画像処理方法。
  8. 入力画像を量子化するための画像処理プログラムであって、
    前記入力画像から、反射率の分布を示す反射率画像と照度分布を示す照度成分画像とを生成する第1の画像生成手段と、
    前記第1の画像生成手段によって生成された照度成分画像の照度成分に基づいて、区分された複数の小領域を特定する領域特定手段と、
    前記領域特定手段で特定された小領域ごとに、前記第1の画像生成手段によって生成された反射率画像から、量子化された量子化画像を生成する第2の画像生成手段と、
    前記第2の画像生成手段によって生成された量子化画像において、量子化画素値が等しい領域を取得する領域取得手段と、
    前記第1の画像生成手段によって生成された照度成分画像に基づいて、前記領域取得手段によって取得された領域ごとに代表画素値を取得する画素値取得手段と、
    前記領域取得手段で取得された各領域の量子化画素値を、前記画素値取得手段によって取得された代表画素値を用いて補正する補正手段と
    してコンピュータを機能させることを特徴とする画像処理プログラム。
JP2008241690A 2008-09-19 2008-09-19 画像処理装置、画像処理方法、及び、画像処理プログラム Active JP5028370B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2008241690A JP5028370B2 (ja) 2008-09-19 2008-09-19 画像処理装置、画像処理方法、及び、画像処理プログラム
US12/545,348 US8295641B2 (en) 2008-09-19 2009-08-21 Image processing apparatus, image processing method, and medium storing image processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008241690A JP5028370B2 (ja) 2008-09-19 2008-09-19 画像処理装置、画像処理方法、及び、画像処理プログラム

Publications (2)

Publication Number Publication Date
JP2010074672A true JP2010074672A (ja) 2010-04-02
JP5028370B2 JP5028370B2 (ja) 2012-09-19

Family

ID=42037749

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008241690A Active JP5028370B2 (ja) 2008-09-19 2008-09-19 画像処理装置、画像処理方法、及び、画像処理プログラム

Country Status (2)

Country Link
US (1) US8295641B2 (ja)
JP (1) JP5028370B2 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8275197B2 (en) * 2008-06-14 2012-09-25 Microsoft Corporation Techniques to manage a whiteboard for multimedia conference events
KR101072945B1 (ko) * 2009-11-17 2011-10-17 한국과학기술원 깊이 값 측정을 이용한 플래시 영상 색상 보정 장치 및 그 방법
US9087396B2 (en) * 2011-10-13 2015-07-21 Hewlett-Packard Development Company, L.P. Digital image text addition
US9307207B2 (en) * 2013-01-07 2016-04-05 GM Global Technology Operations LLC Glaring reduction for dynamic rearview mirror
JP6478713B2 (ja) * 2015-03-04 2019-03-06 キヤノン株式会社 計測装置および計測方法
US11308646B2 (en) * 2020-05-13 2022-04-19 Walmart Apollo, Llc Extracting color from item images

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07114638A (ja) * 1993-10-15 1995-05-02 Ricoh Co Ltd 画像処理装置
JP2007129622A (ja) * 2005-11-07 2007-05-24 Konica Minolta Holdings Inc 撮像装置、画像処理装置、画像処理方法及び画像処理プログラム
JP2008118216A (ja) * 2006-10-31 2008-05-22 Brother Ind Ltd 画像処理装置および画像処理プログラム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6570612B1 (en) 1998-09-21 2003-05-27 Bank One, Na, As Administrative Agent System and method for color normalization of board images
US20040012700A1 (en) 2002-06-25 2004-01-22 Minolta Co., Ltd. Image processing device, image processing program, and digital camera
US7177483B2 (en) 2002-08-29 2007-02-13 Palo Alto Research Center Incorporated. System and method for enhancement of document images
JP4251629B2 (ja) 2003-01-31 2009-04-08 キヤノン株式会社 画像処理システム及び情報処理装置、並びに制御方法及びコンピュータプログラム及びコンピュータ可読記憶媒体
JP2006162692A (ja) 2004-12-02 2006-06-22 Hosei Univ 講義コンテンツ自動作成システム
JP4766661B2 (ja) 2005-06-09 2011-09-07 キヤノン株式会社 画像処理方法及び画像処理装置
US7623712B2 (en) 2005-06-09 2009-11-24 Canon Kabushiki Kaisha Image processing method and apparatus
JP4135737B2 (ja) * 2005-08-30 2008-08-20 ブラザー工業株式会社 画像処理プログラム
JP4765667B2 (ja) 2006-02-27 2011-09-07 ブラザー工業株式会社 画像処理プログラムおよび画像処理装置
JP2008059287A (ja) * 2006-08-31 2008-03-13 Brother Ind Ltd 画像処理装置および画像処理プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07114638A (ja) * 1993-10-15 1995-05-02 Ricoh Co Ltd 画像処理装置
JP2007129622A (ja) * 2005-11-07 2007-05-24 Konica Minolta Holdings Inc 撮像装置、画像処理装置、画像処理方法及び画像処理プログラム
JP2008118216A (ja) * 2006-10-31 2008-05-22 Brother Ind Ltd 画像処理装置および画像処理プログラム

Also Published As

Publication number Publication date
JP5028370B2 (ja) 2012-09-19
US20100074546A1 (en) 2010-03-25
US8295641B2 (en) 2012-10-23

Similar Documents

Publication Publication Date Title
JP4118749B2 (ja) 画像処理装置、画像処理プログラムおよび記憶媒体
JP5219706B2 (ja) 画像処理装置、画像処理方法、及び、画像処理プログラム
JP2005318593A (ja) より小さく圧縮された画像データ・サイズを生成するための画像データの再フォーマッティング
JP2015195549A (ja) 画像処理装置、画像処理方法
JP5028370B2 (ja) 画像処理装置、画像処理方法、及び、画像処理プログラム
JP6781406B2 (ja) 画像処理装置、および、コンピュータプログラム
JP4350778B2 (ja) 画像処理装置、画像処理プログラムおよび記録媒体
US8620081B2 (en) Image processing apparatus, method, and storage medium for determining attributes
JP2010056827A (ja) 画像処理装置および画像処理プログラム
JP2018006981A (ja) 画像処理装置、画像処理方法、コンピュータプログラム
US10992837B2 (en) Information processing apparatus, control method thereof, and storage medium
JP2018139457A (ja) 画像処理装置、画像処理の制御方法、及びプログラム
JP4093413B2 (ja) 画像処理装置、画像処理プログラム及び該プログラムを記録した記録媒体
JP2009171560A (ja) 画像処理装置及び画像処理方法並びに画像処理方法を実行するプログラム及び記憶媒体
JP5178490B2 (ja) 画像処理装置、画像処理方法、コンピュータプログラム
EP3407252B1 (en) Image processing apparatus, image processing method, and storage medium
JP2009171563A (ja) 画像処理装置及び画像処理方法並びに画像処理方法を実行するプログラム及び記憶媒体
US8311333B2 (en) Area determination method, image compression method, image compression apparatus, and recording medium
JP4823132B2 (ja) 印刷システム、その制御方法、そのプログラム
US11924390B2 (en) Apparatus, method, and storage medium for performing color reduction processing
JP2012205133A (ja) 画像処理装置およびその制御方法
US10931852B2 (en) Image processing apparatus, image processing method, and storage medium, with determining whether or not character clipping rectangle determined to be non-character region is character region
JP2008192011A (ja) 相違箇所抽出装置、画像読取装置、相違箇所抽出方法、プログラムおよびその記録媒体
JP2012231261A (ja) 画像処理装置およびその制御方法
JP2006048223A (ja) 画像処理装置及び画像処理方法及びコンピュータプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110912

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120518

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120528

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120625

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150629

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 5028370

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151