JP4086709B2

JP4086709B2 - 画像処理装置、プログラム及び記憶媒体

Info

Publication number: JP4086709B2
Application number: JP2003126864A
Authority: JP
Inventors: 史裕長谷川
Original assignee: Ricoh Co Ltd
Current assignee: Ricoh Co Ltd
Priority date: 2003-05-02
Filing date: 2003-05-02
Publication date: 2008-05-14
Anticipated expiration: 2023-05-02
Also published as: JP2004336223A

Description

【０００１】
【発明の属する技術分野】
この発明は、画像処理装置、プログラム及び記憶媒体に関する。
【０００２】
【従来の技術】
従来、文書画像を編集する方法にはさまざまな提案がなされてきた。特許文献１には、スキャナにより読み込まれた文書画像の文字領域、罫線領域、図形領域、写真領域等を識別し、文字領域に重ね書きして合成される図形を、ともに操作パネルの液晶パネルに表示し、選択された図形と文字をレイアウトして印刷装置から画像として出力させる技術が開示されている。この際、文字領域は光学文字認識（ＯＣＲ）を行ってテキストコードにして表示させる。
【０００３】
また、特許文献２には、ハイパーテキスト自動作成のための装置で、タイトルと本文を構成する文字と図形とを識別して切り出し、文字の画像をテキストデータに変換し、本文からタイトルを表す文字を検索し、タイトル検索手段により検索に成功した本文中に含まれる他のページのタイトルを選択することで、そのタイトルのページにリンクするリンク情報を有するハイパーテキストを生成して、画像情報からリンク情報を持ったハイパーテキストを自動作成する技術について開示されている。
【０００４】
【特許文献１】
特開平７−２２１９６８号公報
【特許文献１】
特開２０００−１３７６４０公報
【０００５】
【発明が解決しようとする課題】
しかしながら、前述の従来技術では、画像をテキストコードに変換するＯＣＲを用いているので、文字認識処理を行うに際して認識誤りが避けられず、その場合、必ず認識誤りの確認と修正作業が必要となり、余計な手間がかかるという不具合がある。
【０００６】
本発明の目的は、文字認識処理の誤りによる確認、修正の手間をかけることなく、文書画像の編集を行うことができるようにすることである。
【０００７】
【課題を解決するための手段】
本発明は、文書画像を編集するための編集用画像を生成する画像処理装置であって、前記文書画像から切り出した文字部分を、前記文書画像の前景画像として取得する前景画像取得手段と、前記文書画像の背景画像を取得する背景画像取得手段と、取得された前記前景画像を前記背景画像に重ね、前記文書画像を編集するための編集用画像を生成する重ね合わせ手段と、を備え、前記背景画像取得手段は、前記文書画像において、前記前景画像取得手段により切り出された文字部分を前記文字部分の周囲の色で埋めた画像を背景画像として取得することを特徴とする。
【００２１】
【発明の実施の形態】
［発明の実施の形態１］
図１は、本実施の形態の画像処理装置１の電気的な接続を示すブロック図である。図１に示すように、画像処理装置１は、いずれもＰＣなどのコンピュータであり、各種演算を行ない、画像処理装置１の各部を集中的に制御するＣＰＵ１１と、各種のＲＯＭ、ＲＡＭからなるメモリ１２とが、バス１３で接続されている。
【００２２】
バス１３には、所定のインターフェイスを介して、ハードディスクなどの磁気記憶装置１４と、キーボード、マウスなどの入力装置１５と、表示装置１６と、光ディスクなどの記憶媒体１７を読み取る記憶媒体読取装置１８と、画像を読み取る画像読取装置２１とが接続され、また、ネットワーク４と通信を行なう所定の通信インターフェイス１９が接続されている。なお、記憶媒体１７としては、ＣＤ，ＤＶＤなどの光ディスク、光磁気ディスク、フレキシブルディスクなどの各種メディアを用いることができる。また、記憶媒体読取装置１８は、具体的には記憶媒体１７の種類に応じて光ディスク装置、光磁気ディスク装置、フレキシブルディスク装置などが用いられる。
【００２３】
画像処理装置１は、この発明の記憶媒体を実施する記憶媒体１７から、この発明のプログラムを実施する画像処理プログラム２０を読み取って、磁気記憶装置１４にインストールする。これらのプログラムはインターネットなどのネットワーク４等を介してダウンロードしてインストールするようにしてもよい。このインストールにより、画像処理装置１は、それぞれ後述の所定の処理の実行が可能な状態となる。なお、画像処理プログラム２０は、所定のＯＳ上で動作するものであってもよい。
【００２４】
図２は、画像処理装置１が、それぞれ画像処理プログラム２０に基づいて実現する機能の機能ブロック図であり、図３は、同フローチャートである。
【００２５】
ここでは、画像処理装置１により手軽に新聞のスクラップができるようにする例について説明する。
【００２６】
図２、図３に示すように、まず、ユーザは、画像読取装置２１により、新聞３１の画像を読み取り、画像格納手段４１によりメモリ１２に取り込む（ステップＳ１）。
【００２７】
次に、ユーザは、前景画像取得手段４２により、ステップＳ１で取り込んだ１枚の画像から文字行の位置を特定し（ステップＳ２）、この部分を前景画像として画像の切り出しをして（第１の取得手段、第１の取得処理）、切り出し後の前景画像を記憶する（第１の記憶手段、第１の記憶処理）（ステップＳ３）。ここで、文字行の位置を特定するに、例えば、特開２００２−２８８５８９公報に開示の技術を用いれば、行の位置を特定することができるので、この位置情報を元に切り出せばよい。
【００２８】
そして、背景画像取得手段４３により、文字行を除いた画像を背景画像として生成して（第２の取得手段、第２の取得処理）、この背景画像を記憶する（第２の記憶手段、第２の記憶処理）（ステップＳ４）。これは、例えば、文字行の部分を周囲の色で埋めた画像を作成すればよい。
【００２９】
そして、重ねあわせ編集手段４４は、前述の背景画像の上に前景画像を重ね合わせ表示する（重ね合わせ手段、重ね合わせ処理）（ステップＳ５）。この際、前景画像は元々の位置に表示する。
【００３０】
重ね合わせ編集手段４４には編集機能が備わっている。これは、例えば、以下のような編集処理を受付け、その編集処理を実行する（編集手段、編集処理）（ステップＳ６）。
【００３１】
・文字行にマウスポインタを合わせ、ドラッグすると、その位置を変えることができる、
・deleteボタンを押すと、その画像を非表示にすることができる、
・位置を変え、不要なものを非表示にした後、印刷することができる、
・必要な文字行画像を他のアプリケーションにコピーすることができる、
・編集結果を電子データとして保存することができる、
・右クリックで選ばれるメニューを選択すると、文字認識処理のためのアプリケーションが起動し、指定した行の文字認識処理を行える、
・文字の表示色を変更できる、
等である（図４には、これらの編集を行う場合の編集画面１６aの概念図を示す）。
【００３２】
ところで、従来、新聞をスクラップする場合には、新聞の特定の記事を切り抜き、保存するスクラップが古くから行われてきたが、紙面のレイアウトの都合から、１枚の紙として切り抜くことができない場合があり、そのような場合には保存などに支障をきたしていた（図５は、このような場合の新聞３１の紙面を示しており、矢印３２の記事は単一の記事を構成するが、紙面のレイアウトの都合から、１枚の紙として切り抜くことができず、切り抜いた記事は２枚になってしまう）。
【００３３】
また、ＯＣＲ（光学文字認識装置）で画像化した後、文字認識させて文字コードとして情報を取得、保存することも考えられるが、この方法によれば保存は容易であるが、現状の技術レベルでは文字認識の誤りをゼロにすることはきわめて困難であり、修正作業を行わないと正確な記事内容を保存できない。さらに、紙面のレイアウトは一般的にかなり複雑であり、この点からも文字認識の精度が低下しがちな傾向がある。
【００３４】
これに対して、本実施の形態の画像処理装置１によれば、重ねあわせ編集手段４４により文字の位置を変えたり、不要な文字行を非表示にしたりできるので、新聞紙面のレイアウトの都合で分散してしまった記事を、ある一ヶ所にまとめてスクラップすることが簡単に実行できる。この場合、画像を印刷すれば紙媒体として保存することも可能であり、また、電子データとして保存しておいてもよい。この場合は、ＯＣＲを行わずに画像で保存しているので、誤認識による情報の欠落の心配がない。
【００３５】
また、もしテキストデータとして保存したい場合は、文字認識アプリケーションを用いるか、生成された電子データを画像化してからＯＣＲソフトに処理すればよい。後者の場合は新聞紙面を撮像した画像に直接ＯＣＲ処理を行うよりも、レイアウトが単純化されているので認識精度が向上すると考えられる。一方、前者の場合は、行単位に画像が既に切り出されているので新聞のレイアウトの複雑さの影響を受けない。どちらも修正の手間が軽減される。
【００３６】
なお、画像処理装置１には、前述の編集の結果を保存する手段、送信する手段、印刷する手段などを備えていてもよい。また、前景画像又は背景画像の取得単位での編集が可能な手段、別の前景画像あるいは背景画像を取得する手段、取得した前景画像あるいは背景画像を情報の取得単位で保存または送出を行う手段などを備えるようにしてもよい。前景画像の単位としては、文字行、タイトル、写真、表、図、文字領域、文字、単語、罫線などを用いることができる。さらに、前景画像と背景画像を別々に符号化する手段を備えるようにしてもよい。
【００３７】
［発明の実施の形態２］
図６は、本実施の形態の画像処理装置１の機能ブロック図である。この画像処理装置１は、インターネット５１上のサーバコンピュータであり、その電気的な接続は前述の図１の場合と同様であるため、図示、詳細な説明は省略する。
【００３８】
図５に示すように、画像処理装置１は、前述の新聞などの文書画像の、背景画像、前景画像、及び、これらを重ね合わせ表示し、あるいは、編集を可能にするＨＴＭＬファイル（タグ付言語）を、それぞれ背景画像格納手段５２（第２の記憶手段、第２の記憶処理）、前景画像格納手段５３（第１の記憶手段、第１の記憶処理）、重ね合せ用ＨＴＭＬ格納手段５４にそれぞれ格納しておく。本例では、前景画像は２値の画像、背景画像は文字を消去された多値の画像とする。
【００３９】
この場合に、２値の前景画像は実施の形態１の場合のようにして切り出した画像を２値化して生成しておく。２値化は、あらかじめ定められた閾値を画素の明度に適用して作成する。この際、２値画像は白黒とは限らず、文字色と透明色からなる２値（２色）画像とすれば再現の際に原画像に近い印象になる。文字色は、例えば２値化して閾値より明度の低い画素の、原画像上における平均画素値を文字色として採用することで求めることができる。
【００４０】
サーバである画像処理装置１は、インターネット５１を通じて遠隔地のクライアントＰＣ４６と接続される。画像処理装置１の情報提供手段５５はクライアントＰＣ５６からの要求を受け、必要な情報をクライアントＰＣ５６側へ提供する。すなわち、背景情報と前景情報が前述のように画像処理装置１に用意され、これらの重ね合わせ画像及び編集機能が、前述のＨＴＭＬファイルとＪＡＶＡ−ＳＣＲＩＰＴにより提供される（ＪＡＶＡは登録商標である）（重ね合わせ手段、編集手段、重ね合わせ処理、編集処理）。
【００４１】
よって、クライアントＰＣ５６のユーザは、実施の形態１の場合と同様の作業を、汎用ＷＥＢブラウザを用いるだけで手軽に利用することができる。
【００４２】
また、この実施の形態の場合は、文書画像を直接提供する場合に比べ、サーバ側に格納される情報量や通信回線でやりとりされる情報量が少なくて済む。理由は以下である。
【００４３】
（１）まず、背景画像は文字が消去されているので、画素値の起伏が少ない。そのためＪＰＥＧなどで圧縮した場合に圧縮効率がよい。また、文字自体はすでに切り取られており、背景には重要な情報がないため、高度な不可逆圧縮をしても情報の欠落の心配がない。
【００４４】
（２）文字画像は２値画像であり、文字のある領域は紙面全体から見れば狭い領域であるので、記憶容量が小さくて済む。
【００４５】
【発明の効果】
本発明は、前記文書画像において、前記前景画像取得手段により切り出された文字部分を、該文字部分の周囲の色で埋めた画像を背景画像として取得するため、前景画像、背景画像の編集ができるので、新聞のスクラップなどを簡単に実行でき、また、画像の保存はＯＣＲを行わずに行なっているので、ＯＣＲ誤認識による情報の欠落の心配がなく、その確認や修正に手間を要することがない。
また本発明によれば、１枚の画像から前景画像と背景画像を取得して保存することができる。
また本発明によれば、１枚の画像から前景画像を取得した残りの画像を背景画像とすることができる。
【図面の簡単な説明】
【図１】本発明の実施の形態１である画像処理装置の電気的な接続を示すブロック図である。
【図２】本発明の実施の形態１である画像処理装置の機能ブロック図である。
【図３】本発明の実施の形態１である画像処理装置が実行する処理のフローチャートである。
【図４】重ね合わせ編集手段による編集画面の平面図である。
【図５】従来の新聞のスクラップの不具合について説明する説明図である。
【図６】本発明の実施の形態２である画像処理装置の機能ブロック図である。
【符号の説明】
１画像処理装置
１７記憶媒体
２０プログラム

Claims

文書画像を編集するための編集用画像を生成する画像処理装置であって、
前記文書画像から切り出した文字部分を、前記文書画像の前景画像として取得する前景画像取得手段と、
前記文書画像の背景画像を取得する背景画像取得手段と、
取得された前記前景画像を前記背景画像に重ね、前記文書画像を編集するための編集用画像を生成する重ね合わせ手段と、
を備え、
前記背景画像取得手段は、前記文書画像において、前記前景画像取得手段により切り出された文字部分を前記文字部分の周囲の色で埋めた画像を背景画像として取得することを特徴とする画像処理装置。
生成された前記編集用画像を編集する編集手段を備え、
前記編集手段は、所定の指示を受け付けて、前記指示を受けた文字部分に対し文字認識処理を行なうことを特徴とする請求項１に記載の画像処理装置。
前記重ね合わせ手段は、前記周囲の色で埋められた文字部分に前記前景画像を重ね合わせることを特徴とする請求項１又は２に記載の画像処理装置。
コンピュータに、文書画像を編集するための編集用画像を生成する処理を実行させるプログラムであって、
コンピュータに、
前記文書画像から切り出した文字部分を、該文書画像の前景画像として取得する前景画像取得ステップと、
前記文書画像の背景画像を取得する背景画像取得ステップと、
取得された前記前景画像を前記背景画像に重ね、前記文書画像を編集するための編集用画像を生成する重ね合わせステップと、を実行させ、
さらに、前記背景画像取得ステップにおいて、前記文書画像において前記前景画像取得ステップにより切り出された文字部分を前記文字部分の周囲の色で埋めた画像を背景画像として取得させることを特徴とするプログラム。
生成された前記編集用画像を編集する編集ステップを実行させ、
前記編集ステップにおいて、所定の指示を受け付けて、前記指示を受けた文字部分に対し文字認識処理を行なわせることを特徴とする請求項４に記載のプログラム。
前記重ね合わせステップにおいて、前記周囲の色で埋められた文字部分に前記前景画像を重ね合わせることを特徴とする請求項４又は５に記載のプログラム。
請求項４〜６のいずれか一に記載のプログラムを記憶したことを特徴とするコンピュータ読み取り可能な記録媒体。