JP2001203843A

JP2001203843A - 画像処理装置、画像処理システム、画像処理方法及び記憶媒体

Info

Publication number: JP2001203843A
Application number: JP2000012093A
Authority: JP
Inventors: Akio Ito; 秋生伊藤
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2000-01-20
Filing date: 2000-01-20
Publication date: 2001-07-27

Abstract

(57)【要約】【課題】プリント画像に広告主が指定した広告画像な
どが含まれている場合には、その費用の一部を広告主が
補助することができるようにする。【解決手段】光学的に読み取られた画像情報を光電変
換するＣＣＤユニット１０６と、ＣＣＤユニット１０６
により光電変換された画像情報を画像データとして認識
する画像認識手段２０６と、画像データに応じて複写画
像を形成する画像形成手段とを有する画像処理装置であ
って、画像データに特定データが含まれているか否かを
判別する判別手段と、画像形成手段における複写画像の
形成毎に複写枚数をカウントする第１のカウンタ手段
と、特定データを含む複写画像を形成した場合にその複
写枚数をカウントする第２のカウンタ手段とを備える。
特定データを含む複写画像をカウントすることで、広告
主が広告料としてユーザーのコピー料金を補助するよう
にすることが可能となる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、例えばデジタル複
写機等の画像処理装置に関し、特に広告などの特定の画
像を検出することが可能な画像処理装置に関する。

【０００２】

【従来の技術】従来、画像の入出力を行うシステムとし
ては図１に示すような、いわゆるマルチファンクション
デジタル複写機８００のようなものが知られていた。

【０００３】これは紙などに記録されている原稿画像を
読み取るスキャナー８２０と、読み取った画像、あるい
はホストコンピューター９００から送られてくる画像を
紙などのメディアに出力するプリンター８３０で構成さ
れており、さらにこれらのスキャナー、プリンターの動
作を制御したり、あるいは種々の画像処理を施すデバイ
スコントローラー８４０、機器の操作を使用者に提供す
る操作部８１０、また画像データや処理プログラムを一
時的あるいは恒久的に記憶するメモリー８５０およびハ
ードディスク８６０、などで構成される。

【０００４】このようなマルチファンクションマシンで
あるデジタル複写機では単に原稿画像を複写する、とい
うことだけでなく、原稿画像中に種々の画像処理を施し
て複写することもできる。例えば原稿の白黒を反転させ
るネガポジ反転処理、原稿の一部のみを複写するトリミ
ング処理、複数の原稿を縮小して一枚の出力用紙上に合
成する縮小レイアウト処理等といった多様な処理を行う
ことが可能である。

【０００５】また原稿の複写以外にスキャナー８２０で
読み込んだ画像データをＬＡＮ（ネットワーク）経由で
ホストコンピューターに転送したり、逆にホストコンピ
ューター上でワープロなどで作成した文書を８３０でプ
リント出力させたリすることもできる。あるいはまた、
図示しないファックス送信装置を用いて原稿画像を遠隔
地のファックスヘ送信する機能も持っているのが普通で
ある。

【０００６】

【発明が解決しようとする課題】このようなネットワー
クを介して接続されたデジタル複写機、プリンターに対
して、企業、団体の情報、広告をタイミングよく出力
し、各種の広報、宣伝活動の一環としたいという要求が
おきている。また、複写、プリントに際しては、用紙、
トナー等のコストが発生するが、広告主が存在する場合
は、これらのコスト分担が課題となる。

【０００７】本発明は、このような問題を解決するため
に成されたものであり、プリント画像に広告主が指定し
た広告画像などが含まれている場合には、その費用の一
部を広告主が補助することを可能とした画像形成装置、
画像処理方法、画像処理システム及び記憶媒体を提供す
ることを目的とする。

【０００８】

【課題を解決するための手段】本発明の画像処理装置
は、光学的に読み取られた画像情報を光電変換する光電
変換手段と、前記光電変換手段により光電変換された前
記画像情報を画像データとして認識する画像認識手段
と、前記画像データに応じて複写画像を形成する画像形
成手段とを有する画像処理装置であって、前記画像デー
タに特定データが含まれているか否かを判別する判別手
段と、前記画像形成手段における前記複写画像の形成毎
に複写枚数をカウントする第１のカウンタ手段と、前記
特定データを含む前記複写画像を形成した場合にその複
写枚数をカウントする第２のカウンタ手段とを備え、前
記判別手段により前記特定データが検出されない場合に
前記第１のカウンタ手段によるカウントを行う第１のモ
ードと、前記判別手段により前記特定データが検出され
た場合に、前記第１のカウンタ手段によるカウントを行
うとともに前記第２のカウンタ手段によるカウントを行
う第２のモードを備える。

【０００９】本発明の画像処理装置の一態様例において
は、前記第２のモードにおいて、前記第２のカウント手
段におけるカウント数を前記第１の手段におけるカウン
ト数よりも小さくしている。

【００１０】本発明の画像処理装置の一態様例において
は、前記判別手段は、前記画像データと予め蓄積された
比較データとを比較することにより前記特定データの判
別を行う。

【００１１】本発明の画像処理装置の一態様例において
は、前記画像認識手段は、前記画像情報を属性毎の矩形
領域に分離して認識する。

【００１２】本発明の画像処理装置の一態様例において
は、前記画像認識手段は、前記画像情報の方向を認識す
る機能を有する。

【００１３】本発明の画像処理方法は、光学的に読み取
られた画像情報を光電変換して画像データとして認識
し、前記画像データに応じて複写画像を形成し、前記画
像データに特定データが含まれているか否かを判別する
画像処理方法であって、前記特定データが検出されない
場合に前記複写画像の形成毎に複写枚数のカウントを行
う第１のモードと、前記特定データが検出された場合
に、前記複写画像の形成毎に複写枚数のカウントを行う
とともに前記特定データを含む前記複写画像を形成した
ことを別にカウントする第２のモードを備える。

【００１４】本発明の画像処理方法の一態様例において
は、前記第２のモードにおいて、前記複写画像の形成毎
の複写枚数のカウント数を前記特定データを含む前記複
写画像の形成によるカウント数よりも大きくしている。

【００１５】本発明の画像処理方法の一態様例において
は、前記特定データの判別は、前記画像データと予め蓄
積された比較データとを比較することにより行う。

【００１６】本発明の画像処理システムは、光学的に読
み取られた画像情報を光電変換する光電変換手段と、前
記光電変換手段により光電変換された前記画像情報を画
像データとして認識する画像認識手段と、前記画像デー
タに応じて複写画像を形成する画像形成手段とを有する
画像処理システムであって、前記画像データに特定デー
タが含まれているか否かを判別する判別手段と、前記画
像形成手段における前記複写画像の形成毎に複写枚数を
カウントする第１のカウンタ手段と、前記特定データを
含む前記複写画像を形成した場合にその複写枚数をカウ
ントする第２のカウンタ手段とを備え、前記判別手段に
より前記特定データが検出されない場合に前記第１のカ
ウンタ手段によるカウントを行う第１のモードと、前記
判別手段により前記特定データが検出された場合に、前
記第１のカウンタ手段によるカウントを行うとともに前
記第２のカウンタ手段によるカウントを行う第２のモー
ドを備える。

【００１７】本発明の画像処理システムの一態様例にお
いては、前記第２のモードにおいて、前記第２のカウン
ト手段におけるカウント数を前記第１の手段におけるカ
ウント数よりも小さくしている。

【００１８】本発明の画像処理システムの一態様例にお
いては、前記判別手段は、前記画像データと通信回線網
を介して予め蓄積された比較データとを比較することに
より前記特定データの判別を行う。

【００１９】本発明の記憶媒体は、上記の画像形成装置
の各手段をコンピュータに機能させるためのプログラム
を記憶したコンピュータ読み取り可能な記憶媒体であ
る。

【００２０】本発明の記憶媒体は、上記の画像形成方法
の各手順をコンピュータに実行させるためのプログラム
を記憶したコンピュータ読み取り可能な記憶媒体であ
る。

【００２１】

【発明の実施の形態】以下、添付図面を参照して、本発
明に係る好適な実施例を詳細に説明する。図１は本実施
例の形態によって構成した画像処理システムである。

【００２２】図中の１００はインターネットなどの通信
網である。２００はウェブサーバであり、インターネッ
ト１００上に接続され、インターネットユーザに特定の
サービスを提供する。３００は金融機関と消費者クライ
アントの間の決済処理などを行う電子マネーサーバであ
る。４００は個人ユーザの端末とインターネット１００
との接続処理を行うサービスプロバイダである。５００
はファイアーウォールであり、これより下に図示したＬ
ＡＮネットワーク３１０内部と外部通信網（インターネ
ット１００）とを接続し、セキュリティー管理などを行
う。６００はＬＡＮネットワーク３１０で接続された７
００〜１０００の各機器の管理や、ユーザー管理、課金
情報などのデータの管理などを行う機器管理サーバであ
る。７００は、広告データの管理などを行うファイルサ
ーバであり、必要に応じてマルチファンクションマシン
８００や、その他のプリンタ９００に広告データを出力
する。

【００２３】８００はデジタル複写機などのマルチファ
ンクションマシンであり、主に画像の入出力機能を有す
る。このマルチファンクションマシン８００において、
１４０はユーザが各種の操作を行うための操作部、１０
は操作部１４０やパソコン１０００からの指示に従って
画像を読み取るためのイメージスキャナ、１１は、パソ
コン１０００やファイルサーバ７００からのデータを用
紙に印刷するプリンタである。

【００２４】１３９はデバイスコントローラであり、操
作部１４０やパソコン１０００からの指示に基づいてス
キャナ１０、プリンタ１１、メモリ３０７、もしくはパ
ソコン１０００の間での画像データの入出力の制御を行
う。例えばスキャナ１０が取り込んだ画像データをメモ
リ３０７に必要に応じて蓄積したり、パソコン１０００
に出力したり、あるいはプリンタ１１で印刷するなどの
制御を行う。９００はプリンタであり、パソコン１００
０やファイルサーバ７００からの画像データを記録媒体
上にプリントすることができる。１０００は端末装置と
して接続されたパソコンであり、インターネット１００
を介してウェブサーバ２００から提供された情報を閲覧
したり、画像データをマルチファンクションマシン８０
０やプリンタ９００に出力することができる。

【００２５】なお、上記構成はインターネットにファイ
アーウォール５００を介してＬＡＮネットワーク３１０
が接続されている構成となっているが、サービスプロハ
イダ４００を介してファイアーウォールが接続される構
成でもかまわない。

【００２６】（マルチファンクションマシンの構成）次
に、マルチファンクションマシン８００の構成を、図２
〜図４に基づいて説明する。

【００２７】図２は、リーダ１０及びプリンタ１１の構
成を示す。

【００２８】まず、図２を参照しながらリーダ１０の構
成について説明する。原稿台ガラス１０１には、原稿自
動送り装置１４２から給送された原稿が順次、所定位置
に載置されるようになっている。

【００２９】この原稿台ガラス１０１に載置された原稿
は、例えば、ハロゲンランプから構成される原稿照明ラ
ンプ１０２により露光される。

【００３０】１０３、１０４、１０５は走査ミラーであ
り、光学走査ユニットＡに収容され、往復動しながら、
原稿からの反射光をＣＣＤユニット１０６に導く。

【００３１】ＣＣＤユニット１０６は、原稿からの反射
光をＣＣＤに結像させる結像レンズ１０７と、例えばＣ
ＣＤから構成される撮像素子１０８と、撮像素子１０８
を駆動するＣＣＤドライバ１０９等から構成されてい
る。撮像素子１０８からの画像信号出力は、例えば８ビ
ットのデジタルデータに変換された後、プリンタ１１の
コントローラ部１３９に入力され、各種の画像処理が行
われる。１４０は、画像形成動作の指示を行う操作部で
ある。

【００３２】次に、プリンタ１１の構成について説明す
る。コントローラ部１３９は、後述する図３に示すよう
に、マイクロコンピュータ、画像処理部２０６等を備え
ており、操作部１４０からの指示に従って画像形成動作
を行う。

【００３３】１１０は感光ドラムであり、前露光ランプ
１１２によって画像形成に備えて除電される。１１１
は、感光ドラム１１０の表面をクリーニングするクリー
ナである。１１３は１次帯電器であり、感光ドラム１１
０を一様に帯電させる。

【００３４】１１７は露光手段としてのレーザユニット
である。このレーザユニット１１７は、例えば、半導体
レーザ等で構成され、画像処理や装置全体の制御を行う
コントローラ部１３９で処理された画像データに基づい
て感光ドラム１１０を露光し、静電潜像を形成する。１
１８は現像器であり、黒色の現像剤（トナー）が収容さ
れている。１１９は転写前帯電器であり、感光ドラム１
１０上に現像されたトナー像を用紙に転写する前に高圧
を印加する。

【００３５】１２０，１２２，１２４は、給紙ユニット
であり、各給紙ローラ１２１，１２３，１２５の駆動に
より、転写用紙が装置内へ給送され、レジストローラ１
２６の配置位置で一旦停止し、感光ドラム１１０に形成
された画像との書き出しタイミングがとられ再結送され
る。

【００３６】１２７は転写帯電器であり、感光ドラム１
１０に現像されたトナー像を、給送される転写用紙に転
写する。１２８は分離帯電器であり、転写動作の終了し
た転写用紙を感光ドラム１１０より分離する。転写され
ずに感光ドラム１１０上に残ったトナーはクリーナー１
１１によって回収される。

【００３７】１２９は搬送ベルトであり、転写プロセス
の終了した転写用紙を定着器１３０に搬送し、例えば熱
によって定着される。１３１はフラッパであり、定着プ
ロセスの終了した転写用紙の搬送バスを、ステイプルソ
ータ１３２又は中間トレイ１３７の配置方向のいずれか
に制御する。

【００３８】スナイプルソータ１３２に排紙された用紙
は、各ビンに仕分けされ、コントローラ部１３９からの
指示によりステイプル部１４１がステイプルを行う。ま
た、ステイプルソータ１３２の代りに、製本装置（グル
ーバインダー）１４５が装着されている場合はコントロ
ーラ部１３９からの指示によりバインダー部１４３で予
め糊のついた背表紙と紙束を糊づけし、スタッカー１４
４に製本後の紙束を貯える。

【００３９】１３３〜１３６は、給送ローラであり、一
度定着プロセスの終了した転写用紙を中間トレイ１３７
に反転（多重）又は非反転（両面）して給送する。１３
８は再結送ローラであり、中間トレイ１３７に載置され
た転写用紙を再度、レジストローラ１２６の配置位置ま
で搬送する。

【００４０】図３は、コントローラ部１３９の構成を示
している。２０１は、画像処理装置全体の制御を行うＣ
ＰＵであり、装置本体の制御手順（制御プログラム）を
記憶した読み取り専用メモリ２０３（ＲＯＭ）からプロ
グラムを順次読み取り、実行する。ＣＰＵ２０１のアド
レスバスおよびデータバスは、バスドライバ、アドレス
デコーダからなる回路２０２を介して各負荷に接続され
ている。

【００４１】２０４は、入力データの記憶や作業用記憶
領域等として用いる主記憶装置としてのランダムアクセ
スメモリ（ＲＡＭ）である。また、ＲＡＭ２０４の全部
又は一部は電池等によりバックアップされており、本体
の電源がオフの状態でもメモリの内容が保持される。２
０５はＩ／Ｏインターフェースであり、操作者がキー入
力を行い、装置の状態等を液晶、ＬＥＤを用いて表示す
る操作部１４０や給紙系、搬送系、光学系の駆動を行う
モータ類２０７、クラッチ類２０８、ソレノイド類２０
９、また、搬送される用紙を検知するための紙検知セン
サ類２１０等の装置の各負荷に接続される。

【００４２】２１１は、現像器１１８内のトナー量を検
知するトナー残検センサである。このトナー残検センサ
２１１は、現像器１１８内に配置されており、その出力
信号がＩ／Ｏポート２０５に入力される。

【００４３】２１５は高圧ユニットであり、ＣＰＵ２０
１の指示に従って、前述の１次帯電器１１３、現像器１
１８、転写前帯電器１１９、転写帯電器１２７、分離帯
電器１２８へ高圧を出力する。

【００４４】２０６は画像処理部であり、リーダ画像処
理部２０６ａとプリンタ画像処理部２０６ｂから構成さ
れる。この画像処理部２０６では、ＣＣＤユニット１０
６から出力された画像信号が入力され、後述する画像処
理を行い、画像データに従ってレーザユニット１１７の
制御信号を出力する。レーザユニット１１７から出力さ
れるレーザ光は、感光ドラム１１０を照射し、露光する
と共に、非画像領域においてビーム検知センサ２１３
（受光センサ）によって発光状態が検知され、その出力
信号がＩ／Ｏポート２０５に入力される。

【００４５】図４は、コントローラ部１３９内の画像処
理部２０６の構成を示している。ＣＣＤユニット１０６
内のＣＣＤ１０８によって電気信号に変換された画像信
号は、リーダ画像処理部２０６ａ内のＡ／Ｄコンバータ
３００によってアナログデータがデジタルデータに変換
される。次に、シェーディング回路３０１によって画素
間のバラツキの補正が行われた後、変倍回路３０２によ
って縮小コピー時はデータの間引き処理が行われ、拡大
コピー時はデータの補間が行われる。次に、エッジ強調
回路３０３では、例えば５×５のウインドウで２次微分
が行われ、これにより画像のエッジが強調される。ま
た、シェーディング補正後のデータは文字方向判別部３
２０にも入力され、方向及び文字の判別が行われる。

【００４６】リーダ画像処理部２０６ａから出力された
画像データは、メモリコントローラ３０６を介して、画
像メモリ３０７に格納される。画像メモリ３０７は、Ｄ
ＲＡＭ、ハードディスク等のメモリから構成されてお
り、複数ページの画像を格納することができる。

【００４７】また、メモリコントローラ３０６は、画像
メモリ３０７を制御し、ＣＣＤ１０８からの画像データ
を受け取り、画像メモリ３０７に格納するとともに、画
像メモリ３０７から画像を読み出し、インターフェース
コントローラ３０８を介して外部へ画像転送したりす
る。

【００４８】このようにして、画像メモリ３０７に一旦
格納された画像データは、インターフェースコントロー
ラ３０８を介して、ＬＡＮ３１０へ出力される。このＬ
ＡＮ３１０を介してパソコン１０００、他のプリンタ９
００、ネットワークと接続され、データの送受信が行わ
れる。

【００４９】なお、これら各処理を行う画像処理部２０
６は、メモリに対して高速でアクセスすることができ、
また、各インターフェース部にメモリを配置したことに
よって、外部からのアクセスが重なったような場合でも
待たされることなく制御することが可能である。

【００５０】また、メモリコントローラ３０６から出力
された画像データは、輝度濃度変換部３０４に入力され
る。この画像データは輝度データであるので、プリンタ
１１，９００に出力するための濃度データに変換するた
め、輝度濃度変換部３０４のγ変換回路３０４ａでテー
ブルサーチによってデータ変換を行う。濃度データに変
換された画像データは、レーザーの発光強度の信号に変
換するためＰＷＭ回路３０４ｂに入力され、画像の濃度
に従ったパルス幅をレーザーユニット１１７に対して出
力する。

【００５１】（文書方向判別処理）以下、図５〜図１０
を参照して本実施形態における文書方向判別処理につい
て説明する。

【００５２】図５に、文書方向判別部３２０の詳細ブロ
ック構成を示す。文書方向判別部３２０に入力された白
黒画像データは、まずＣＰＵ／メモリ部４０１に入力さ
れ、画像データを一時的に保存すると共に、後述する各
種制脚を行う。尚、ＣＰＵ／メモリ部４０１は図３に示
すコントローラ部１３９内のＣＰＵ２０１とは不図示の
デュアルポートＲＡＭによりバス接続されており、デー
タの送受信が可能である。もちろん、シリアル通信を行
なうように構成しても良い。

【００５３】文字認識／方向判別部４０２においては、
予め記憶されている文字認識辞書４０７を参照すること
により、文字認識処理及び文書方向の判別処理を行な
う。具体的には、文書中の数種類の文字領域に対し、０
°、９０°、１８０°，２７０°の各方向からそれぞれ
文字認識処理を行い、各方向における文字認識の精度
（文字認識の自信度：文字の特徴分布に対する距離）の
中で、最高精度である方向を文書方向であるとして認識
する。

【００５４】領域分離部４０３は、文字認識／方向判別
部４０２による文字認識・方向判別処理を行うための前
処理として、文書画像データより、文字部、図形部、自
然画部、表部などを矩形の領域に分離して、各領域の属
性（文字部等）を付加する処理を行う。

【００５５】記憶装置４０４は、例えばハードディスク
や光磁気ディスクなどにより構成され、各種処理結果
（画像データ、領域分離結果、文字認識結果など）を保
存する。またＩ／Ｆ部４０５は、ＳＣＳＩやＲＳ２３２
Ｃなどにより構成され、Ｉ／Ｆ部４０５を介して接続さ
れた外部コンピュータ４０６より情報を得たり、また、
光磁気ディスク等の着脱可能な記憶装置の装填によりデ
ータを得る。

【００５６】次に、本実施例における文書方向自動判別
・補正、および文字認識処理の概要を図６のフローチャ
ートに従って説明する。

【００５７】先ず、ステップＳ１で画像が入力される。
本実施形態において文書方向を判別するためには、まず
文字領域を正確に抽出する必要がある。しかしながら、
画像データの全てが文字部に属するわけではなく、例え
ば細線、表などの領域も含まれる。従って領域分離部４
０３においては、抽出された画像データを更に、文字
部、図形部、自然画部、表部などの属性別に、矩形の領
域（ブロック）に分離する（ステップＳ２）。この領域
分離処理においては、具体的には矩形で囲まれた領域情
報を作成する。

【００５８】次に、上記各属性より文字部、即ち文字領
域の矩形情報を抽出する（スナッブＳ３）。ここで文字
領域とは、文章部、タイトル部、表中の文字、図のキャ
プション部等である。例えば、図７（ａ）、図７（ｃ）
に示す様な文書の場合、それぞれ図７（ｂ）、図７
（ｄ）に示したような文字領域の矩形情報が抽出され
る。そして、これらの中の数ブロックを用いて、後述す
るような文書方向判別を行う（ステップＳ４）。その判
別の結果、文書方向が正方向であれば、引き続き画像中
の文字ブロックに対して文字認識処理を行う。（ステッ
プＳ７）。

【００５９】一方、文書方向が不正方向であれば、画像
データが正方向になるように回転させる（スナッブＳ
５）。そして、回転画像に対して領域分離を行い、領域
分離情報の補正処理を行う（ステップＳ６）。これは、
回転画像に伴う領域分離情報の相違を補正するもので、
その方法としては、全回転画像データに対して再び領域
分離処理を行う方法がある。また、もう１つの方法とし
て、既に得られている領域分離結果に対してアドレス変
換をかける方法がある。一般に、領域分離処理は画像が
正方向であることを前提としているため、ステップＳ２
の段階で行った領域分離処理と、ステップＳ６において
回転画像データに対して行った領域分離処理とでは、そ
の結果が異なることが多い。それゆえ、ステップＳ６に
おいては前者の再分離方法がとられるのが望ましい。そ
して、次にステップＳ７に進んで、回転画像データ中の
文字ブロックは、周知の文字認識処理により、含まれる
文字が認識される。

【００６０】従って、上述したように回転なし／回転あ
りのいずれの場合においても、領域分離情報及び文字認
識情報が得られる（ステップＳ８）。

【００６１】この処理結果は、Ｉ／Ｆ部４０５を介して
コンピュータ４０６に伝送され、コンピュータ４０６上
のファイリングのアプリケーションソフトウェア等で利
用される。また、コントローラ部１３９内のＣＰＵ２０
１へ各画像毎に送信される。

【００６２】（領域分離、方向判定、文字認識処理の詳
細）次に、上述したステップＳ２及びＳ６における領域
分離処理、ステップＳ５における文書方向判別処理、ス
テップＳ７における文字認識処理のそれぞれについて、
詳細に説明する。

【００６３】−領域分離処理− 本実施形態における領域分離処理は、まず、文書画像デ
ータの黒画素を検出してゆき、輪郭線追跡、またはラベ
リング方式により、黒画素ブロックの矩形枠を作成す
る。次に、その矩形の中の黒画素密度、隣接矩形ブロッ
クの有無、矩形の縦横比率などを判断基準にして、文字
領域（タイトル、本文、キャプション等）、図形領域、
自然画領域、表領域などを判別する。この処理結果によ
り、文書方向認識、及び文字認識のために必要となる文
字の矩形領域が判別される。

【００６４】−文字認識処理− 文字認識処理の一つの方法として、特徴ベクトル抽出、
比較方式がある。例えば図８（ａ）に示すように、
「本」という文字を含む文字領域が判別されたとする。
第一段階として、この文字領域について文字切り出し処
理を行う。この例を図８（ｂ）に示す。これは、一つの
文字の矩形を切り出す処理で、黒画素連続性の状態を検
出していくことにより、求められる。そして第二段階と
して、一文字をｍ×ｎ（例えば６４×６４）の画素ブロ
ックに切り出す。この例を図８（ｃ）に示す。そして、
その中から３×３画素のウインドウをずらしてゆき、数
十個の方向ベクトル情報を得る。この一例を図８（ｄ）
に示す。このベクトル情報が文字の特徴として認識さ
れ、この特徴ベクトルと文字認識辞書４０７の内容とを
比較して、特徴ベクトルに特徴が一番近い文字から順番
に文字を抽出する。そして、抽出された文字は、特徴ベ
クトルに特徴が近い順に、第１候補、第２候補…とな
る。この場合、特徴ベクトルに対する特徴の近さが、そ
の文字に対する距離の近さ、すなわち文字認識の自信度
（精度）という数値で表される。

【００６５】−文書方向判別処理− 以上説明したようにして文字認識の自信度が求められる
が、その自信度に基づいた文書方向判別処理を、図９に
示した「本発明の名称」という文例を用いて説明する。

【００６６】図９（ａ）は正方向の文、図９（ｂ）は図
９（ａ）を２７０°回転した文である。ここで、「本」
の文字に注目すると、文字方向を判別する場合は、図９
（ｃ）に示すように、１つの文字「本」について０°、
９０°、１８０°、２７０°の各回転による４方向のそ
れぞれにおいて文字認識を行ってみる。尚、上記各回転
角度は、文字矩形の領域の読み出し方を変更すればよ
く、特に原稿を回転する必要はない。

【００６７】各回転角度における文字認識結果は、図９
（ｃ）に示すように、互いに異なっている。尚、図９
（ｃ）に示した文字認識結果および自信度はあくまでも
一例に過ぎず、実際にこの通りに得られるとは限らな
い。

【００６８】図９（ｃ）に示すように、正方向（０°回
転）から文字認識を行った場合は、「本」と正しく認識
され、その自信度も０．９０と高い値となる。また、９
０°回転した方向から文字認識を行った場合は、「町」
と誤認識され、自信度も０．４０と低下する。このよう
に誤認識が発生し、自信度も低下するのは、回転した方
向から見た場合の特徴ベクトルに基づいて文字認識を行
っているためである。同様に１８０°、２７０°回転し
た方向から文字認識を行った場合も、誤認識が発生し、
自信度も低下する。尚、文字認識の方向別の自信度は、
複雑な文字であればあるほど、その差が顕著に現れてく
る。

【００６９】図９（ｃ）に示した認識結果においては、
正方向（０°）における自信度が１番高いため、文書方
向は正方向である可能性が高いと判断される。本実施形
態では、更に文字方向判別の精度を向上させるため、同
一ブロック内の複数の文字について、同様に４方向から
文字認識を行ってみる。また、１つのブロックのみで文
書方向を判別すると、特殊な文字列により文字方向を誤
って判別してしまう恐れがあるので、複数のブロックに
ついて同様の文字認識を行なう。そして、各ブロックに
ついて、認識対象文字の自信度の平均値を４方向別に求
め、更に、各ブロック毎の平均自信度の平均値を４方向
別に求める。そして、この平均値が最も高い方向を文字
方向（文書方向）として認定する。

【００７０】このように、１文字だけの自信度で文字方
向を認定することなく、同一ブロック内の複数文字、さ
らには複数ブロックの自信度で文字方向を認定すること
により、文字（文書）方向を高精度に判別することが可
能となる。

【００７１】尚、本実施形態において文字方向（文書方
向）の判別結果が正方向以外の方向である場合には、図
６のステップＳ６に示したように、文字方向が正方向に
なるように原画像を回転する。この回転は、図５に示す
ＣＰＵ／メモリ部４０１の制御によって、周知の方法に
より簡単に行うことが可能であるため、その詳細な説明
は省略する。

【００７２】（領域分離、方向判定、文字認識処理結
果）以上のような処理により、図１０（ａ）に示す原画
像データ、図１０（ｂ）に示す領域分離データ、図１０
（ｃ）に示す文字認識情報を得ることができる。これら
の情報は、前述したようにコントローラ部１３９のＣＰ
Ｕ２０１へ送られ、各種画像処理、各種制御に供され
る。

【００７３】領域分離データは、図１０（ｂ）に示す形
式で構成される。まず、領域分離データである旨を示す
「ｈｅａｄｅｒ」と、分離した矩形領域毎の識別子「ｒ
ｅｃｔ１」〜「ｒｅｃｔｎ」を備える。この識別子で区
別された各領域（ブロック）の情報は、ブロック番号を
示す「ｏｒｄｅｒ」、ブロックの属性（文字部、図形部
等）を示す「ａｔｔ」、ブロックの左上の座標値「ｘ
１」および「ｙ１」、ブロックの幅「ｗ」、ブロックの
高さ「ｈ」、縦書き、または横書きを示す「ｄｉｒｅｃ
ｔｉｏｎ」、予備領域「ｒｅｓｅｒｖｅ」により構成さ
れている。

【００７４】また、文字認識情報は、図１０（ｃ）に示
す様に、文字認識情報である旨を示す「ｈｅａｄｅｒ」
を有し、また、例えば「本」等の単一の文字に関する文
字認識情報「ＯＣＲ１」と、当該文字が含まれているブ
ロックを示す上記「ｒｅｃｔ１」等に相当する「ｂｌｋ
−ｈｅａｄｅｒ１」との組み合わせ情報を、「ＯＣＲ
ｎ」及び「ｂｌｋ−ｈｅａｄｅｒｎ」まで備える。そし
て、「ＯＣＲ１」等の各文字認識情報は、文字であるか
或いは空白であるかを示す「ｔｙｐｅ」、前述の文字認
識の自信度に従った第１〜第５候補文字「文字１」〜
「文字５」、当該文字の切り出し位置「ｘ１」および
「ｙ１」、当該文字の幅「ｗ」、当該文字の高さ
「ｈ」、予備領域「ｒｅｓｅｒｖｅ」により構成されて
いる。

【００７５】尚、図１０に示したデータ構成は一例に過
ぎず、処理結果の使用目的に応じて、適宜変更が可能で
あることは言うまでもない。

【００７６】上記領域分離データや文字認識情報は、画
像処理装置本体を制御するコントローラ部１３９のＣＰ
Ｕ２０１に通知される。これにより、画像処理部２０６
において画像メモリ３０７に一時格納された画像データ
は、メモリ制御部３０６により画像の回転制御等が施さ
れた後、画像が用紙に印刷されて、排紙される。

【００７７】（複写動作）図１１はマルチファンクショ
ンマシン８００の複写料金のカウント、請求を説明する
ためのフローチャートである。先ず、ステップＳ１１で
コピーモードの設定が成される。

【００７８】ユーザーは、コピーを行うにあたって、本
人のＩＤおよびパスワードを、マルチファンクションマ
シン８００の操作部１４０から入力する。（ステップＳ
１２）

【００７９】これは、料金の支払いを行うため、あらか
じめ管理者が機器管理サーバ６００に登録してある、銀
行口座等のユーザー情報を引き出すためのものである。
ユーザが原稿のコピーサービスを受けるにあたって、操
作部１４０からＩＤ、パスワードが入力されると、機器
管理サーバ６００にＬＡＮ３１０を介して問い合わせが
行われる（ステップＳ１３）。機器管理サーバ６００で
は、各機器からの問い合わせに対して、登録リストとの
比較を行い、登録ユーザかどうかの判断を行う。登録さ
れていない場合には、管理者を通して登録を行うよう操
作部に表示し、ユーザーに知らせる（ステップＳ１
４）。ＩＤ、パスワードが正しい場合にはスタンバイモ
ードに移り、ユーザーの指示に従ってコピー処理を行う
（ステップＳ１５，Ｓ１６）。そして、１枚のコピー処
理ごとにコピー料金をカウントする（ステップＳ１
６）。コピーが終了すると、コピー枚数、モード等に応
じてコピー料金を機器管理サーバー６００に通知する
（ステップＳ１７，Ｓ１８，Ｓ１９）。

【００８０】（コピー料金のカウント）図１２は図１１
のステップＳ１６のコピー料金のカウントフローを示し
たものである。先ず、ステップＳ２１でカウントモード
の設定が成される。コピーされた用紙が排紙されると、
料金カウントモードにうつる。まず、コピーの１枚目か
どうかが判断され、１枚目である場合には、ユーザー用
のカウンタをクリアする（ステップＳ２２，Ｓ２３）。
カウンタはコントローラ部１３９内のＲＡＭ２０４の所
定のアドレス空間が使用される。カウンタのクリア時に
は、所定のアドレスに対応するデータに０が書き込まれ
る。また、後に出てくる広告主用のカウンタもＲＡＭ２
０４の他の特定のアドレスに割り振られている。この広
告主用のカウンタは、電源はオフされた場合に消去して
しまわないように、電池によりバックアップされている
アドレス空間に割り振られている。

【００８１】次にユーザー用のカウンタ値をメモリ２０
４より読み出す（ステップＳ２４）。また、原稿用紙中
に特定の広告があった場合には、広告主用のカウンタの
データを読み出し、広告主用カウンタを１つカウントア
ップする（ステップＳ２６，Ｓ２７）。さらに、ユーザ
ー用のカウンタを０．５カウントアップする（ステップ
Ｓ２８）。原稿用紙中に特定の広告がなかった場合には
ユーザー用のカウンタを通常どおり１つカウントアップ
する（ステップＳ２９）。新しいカウンタ値で、カウン
タ用のアドレスのデータを書き換えて終了する（ステッ
プＳ１０）。

【００８２】（広告の判別）図１３は図１２のステップ
Ｓ２５の特定広告の判別を示したフローチャートであ
る。ステップＳ４１で特定広告の判別の設定が成され
る。ＣＣＤにより読み込まれた原稿画像は、文字方向判
別部３２０に入力され、画像認識が行われる（ステップ
Ｓ４２）。次に、広告の判別にあっては機器管理サーバ
ー６００に登録されている広告データを読み出す。この
広告データは広告主、キーワード、広告サイズなどの広
告主を判別するためのデータである（ステップＳ４
３）。次に、文字方向判別部３２０において検出された
結果と広告データとの比較を行う（ステップＳ４４）。
比較し、一致した広告主を判別する（ステップＳ４
５）。また、本実施例ではコピーごとに広告データを機
器管理サーバー６００より読み出しているが、定期的に
読み出し、読み出したデータをマルチファンクションマ
シン８００のメモリに格納しておいてもよい。

【００８３】（決済）上記のフローにより、特定の広告
を原稿中に検出した場合には、広告主が広告料としてユ
ーザーのコピー料金を補助するような、料金カウントを
行うことができる。カウントされたユーザーのコピー料
金および、広告主への広告料金はマルチファンクション
マシン８００から機器管理サーバー６００に通知され
る。機器管理サーバーは随時料金を積算し、定期的にあ
るいは利用のたびにインターネット１００を介して、電
子マネーサーバー３００に対して決済処理を申請する。
電子マネーサーバ３００は申請に応じてユーザー、広告
主の口座から料金を引き落とすことになる。

【００８４】以上説明したように、また、ユーザーにと
ってもコピー料金を下げることが可能である。更に、ネ
ットワークを介してオンラインで決済を申請することに
より、迅速な処理を行うことが可能となる。

【００８５】（その他の実施形態）上記様々な実施形態
に示した各機能ブロックおよび処理手順は、ハードウェ
アにより構成しても良いし、ＣＰＵあるいはＭＰＵ、Ｒ
ＯＭおよびＲＡＭ等からなるマイクロコンピュータシス
テムによって構成し、その動作をＲＯＭやＲＡＭに格納
された作業プログラムに従って実現するようにしても良
い。また、上記各機能ブロックの機能を実現するように
当該機能を実現するためのソフトウェアのプログラムを
ＲＡＭに供給し、そのプログラムに従って上記各機能ブ
ロックを動作させることによって実施したものも、本発
明の範疇に含まれる。

【００８６】この場合、上記ソフトウェアのプログラム
自体が上述した各実施形態の機能を実現することにな
り、そのプログラム自体、及びそのプログラムをコンピ
ュータに供給するための手段、例えばかかるプログラム
を格納した記録媒体は本発明を構成する。かかるプログ
ラムを記憶する記憶媒体としては、上記ＲＯＭやＲＡＭ
の他に、例えばフロッピーディスク、ハードディスク、
光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−
Ｉ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ、ｚｉｐ、磁気テー
プ、あるいは不揮発性のメモリカード等を用いることが
できる。

【００８７】また、コンピュータが供給されたプログラ
ムを実行することにより、上述の実施形態の機能が実現
されるだけでなく、そのプログラムがコンピュータにお
いて稼働しているＯＳ（オペレーティングシステム）あ
るいは他のアプリケーションソフト等の共同して上述の
実施形態の機能が実現される場合にもかかるプログラム
は本発明の実施形態に含まれることは言うまでもない。

【００８８】さらに、供給されたプログラムがコンピュ
ータの機能拡張ボードやコンピュータに接続された機能
拡張ユニットに備わるメモリに格納された後、そのプロ
グラムの指示に基づいてその機能拡張ボードや機能拡張
ユニットに備わるＣＰＵ等が実際の処理の一部または全
部を行い、その処理によって上述した実施形態の機能が
実現される場合にも本発明に含まれることは言うまでも
ない。

【００８９】

【発明の効果】本発明によれば、ユーザーがコピーを行
う際に、広告等の特定データを原稿中から検出し、検出
結果に応じて、広告主が広告料としてユーザーのコピー
料金を補助するようにすることが可能となる。

【図面の簡単な説明】

【図１】本発明に係る一実施形態における画像処理装置
およびシステムの構成を示す模式図である。

【図２】マルチファンクションマシンの構成を示す概略
断面図である。

【図３】コントローラの構成を示すブロック図である。

【図４】画像処理部の構成を示すブロック図である。

【図５】文書方向判別部の構成を示すブロック図であ
る。

【図６】文書方向判別、文字認識処理を示すフローチャ
ートである。

【図７】文害方向判別における像域分離状態を示す模式
図である。

【図８】文字認識処理の処理過程を説明するための模式
図である。

【図９】文書方向判別処理を説明するための模式図であ
る。

【図１０】像域分離および文字認識情報のデータ形式を
示す模式図である。

【図１１】コピー処理の手順を示すフローチャートであ
る。

【図１２】コピー処理におけるカウンターのフローを示
すフローチャートである。

【図１３】特定広告の判別手順を示すフローチャートで
ある。

【符号の説明】

１０イメージスキャナ（リーダ）１１プリンタ１００インターネット（通信網）１０６ＣＣＤユニット１０８ＣＣＤ１１０感光ドラム１１３１次帯電器１１８現像器１１７レーザユニット１１８現像器１１９転写前帯電器１２７転写帯電器１２８分離帯電器１３９デバイスコントローラ１４０操作部２００ウェブサーバ２０１ＣＰＵ２０２回路２０３読み取り専用メモリ２０４ＲＡＭ２０５Ｉ／Ｏインターフェース２０６画像処理部２０６ａリーダ画像処理部２０６ｂプリンタ画像処理部２０７モータ類２０８クラッチ類２０９ソレノイド類２１０紙検知センサ類２１１トナー残残検センサ２１３ビーム検知センサ２１５高圧ユニット３００電子マネーサーバ３０１シェーディング回路３０２変倍回路３０３エッジ強調回路３０４輝度濃度変換部３０４ａ γ変換回路３０４ｂＰＷＭ回路３０６メモリコントローラ３０７メモリ３０８インターフェースコントローラ３１０ＬＡＮネットワーク３２０文字方向判別部４００サービスプロバイダ４０１ＣＰＵ／メモリ部４０２文字認識／方向判別部４０３領域分離部４０４記憶装置４０５Ｉ／Ｆ部４０６外部コンピュータ４０７文字認識辞書５００ファイアーウォール６００機器管理サーバ７００ファイルサーバ８００マルチファンクションマシン９００プリンタ１０００パソコン

Claims

【特許請求の範囲】

【請求項１】光学的に読み取られた画像情報を光電変
換する光電変換手段と、前記光電変換手段により光電変換された前記画像情報を
画像データとして認識する画像認識手段と、前記画像データに応じて複写画像を形成する画像形成手
段とを有する画像処理装置であって、前記画像データに特定データが含まれているか否かを判
別する判別手段と、前記画像形成手段における前記複写画像の形成毎に複写
枚数をカウントする第１のカウンタ手段と、前記特定データを含む前記複写画像を形成した場合にそ
の複写枚数をカウントする第２のカウンタ手段とを備
え、前記判別手段により前記特定データが検出されない場合
に前記第１のカウンタ手段によるカウントを行う第１の
モードと、前記判別手段により前記特定データが検出された場合
に、前記第１のカウンタ手段によるカウントを行うとと
もに前記第２のカウンタ手段によるカウントを行う第２
のモードを備えたことを特徴とする画像処理装置。
【請求項２】前記第２のモードにおいて、前記第２の
カウント手段におけるカウント数を前記第１の手段にお
けるカウント数よりも小さくしたことを特徴とする請求
項１に記載の画像処理装置。
【請求項３】前記判別手段は、前記画像データと予め
蓄積された比較データとを比較することにより前記特定
データの判別を行うことを特徴とする請求項１又は２に
記載の画像処理装置。
【請求項４】前記画像認識手段は、前記画像情報を属
性毎の矩形領域に分離して認識することを特徴とする請
求項１〜３のいずれか１項に記載の画像処理装置。
【請求項５】前記画像認識手段は、前記画像情報の方
向を認識する機能を有することを特徴とする請求項１〜
４のいずれか１項に記載の画像処理装置。
【請求項６】光学的に読み取られた画像情報を光電変
換して画像データとして認識し、前記画像データに応じて複写画像を形成し、前記画像データに特定データが含まれているか否かを判
別する画像処理方法であって、前記特定データが検出されない場合に前記複写画像の形
成毎に複写枚数のカウントを行う第１のモードと、前記特定データが検出された場合に、前記複写画像の形
成毎に複写枚数のカウントを行うとともに前記特定デー
タを含む前記複写画像を形成したことを別にカウントす
る第２のモードを備えることを特徴とする画像処理方
法。
【請求項７】前記第２のモードにおいて、前記複写画
像の形成毎の複写枚数のカウント数を前記特定データを
含む前記複写画像の形成によるカウント数よりも大きく
したことを特徴とする請求項６に記載の画像処理方法。
【請求項８】前記特定データの判別は、前記画像デー
タと予め蓄積された比較データとを比較することにより
行うことを特徴とする請求項６又は７に記載の画像処理
方法。
【請求項９】光学的に読み取られた画像情報を光電変
換する光電変換手段と、前記光電変換手段により光電変換された前記画像情報を
画像データとして認識する画像認識手段と、前記画像データに応じて複写画像を形成する画像形成手
段とを有する画像処理システムであって、前記画像データに特定データが含まれているか否かを判
別する判別手段と、前記画像形成手段における前記複写画像の形成毎に複写
枚数をカウントする第１のカウンタ手段と、前記特定データを含む前記複写画像を形成した場合にそ
の複写枚数をカウントする第２のカウンタ手段とを備
え、前記判別手段により前記特定データが検出されない場合
に前記第１のカウンタ手段によるカウントを行う第１の
モードと、前記判別手段により前記特定データが検出された場合
に、前記第１のカウンタ手段によるカウントを行うとと
もに前記第２のカウンタ手段によるカウントを行う第２
のモードを備えたことを特徴とする画像処理システム。
【請求項１０】前記第２のモードにおいて、前記第２
のカウント手段におけるカウント数を前記第１の手段に
おけるカウント数よりも小さくしたことを特徴とする請
求項９に記載の画像処理システム。
【請求項１１】前記判別手段は、前記画像データと通
信回線網を介して予め蓄積された比較データとを比較す
ることにより前記特定データの判別を行うことを特徴と
する請求項９又は１０に記載の画像処理システム。
【請求項１２】請求項１〜５のいずれか１項に記載の
画像形成装置の各手段をコンピュータに機能させるため
のプログラムを記憶したコンピュータ読み取り可能な記
憶媒体。
【請求項１３】請求項６〜８のいずれか１項に記載の
画像形成方法の各手順をコンピュータに実行させるため
のプログラムを記憶したコンピュータ読み取り可能な記
憶媒体。