JP6866714B2 - 画像処理装置、画像処理システム、画像処理方法、及びプログラム - Google Patents

Description

本発明は、画像処理装置、画像処理システム、画像処理方法、及びプログラムに関する。

印刷物をスキャン等することにより得られた画像データから、印刷物に表記された文字等をテキストデータ（文字コード）に変換するＯＣＲ（Optical Character Recognition）技術がある。

読み取り設定の不備によりＯＣＲ認識率が低くなった際に、再スキャンおよび再ＯＣＲ処理に要する手間および時間の低減化を図るため、ＯＣＲ処理実行時に、ＯＣＲ結果を最初のページのＯＣＲ結果と読み取り部がスキャンした画像とを対比した状態で提示する構成が開示されている（特許文献１）。

しかし、今までの画像処理システムでは、提示されたＯＣＲ結果が利用者の意図するものと異なった場合に、利用者自身が再実行するＯＣＲ機器を選択しなければならないという問題があった。また、ＯＣＲ処理を実行する際、利用者はどのＯＣＲ機器が適しているかを判断しなければならないという問題があった。

本発明は、上記に鑑みてなされたものであって、提示されたＯＣＲ結果が利用者の意図するものと異なった場合に、前回提示した結果より品質の高いものを自動的に提示することができ、かつＯＣＲ処理を実行する際、どのＯＣＲ機器が適しているかを自動的に判断できるようにすることを目的とする。

上述した課題を解決し、目的を達成するために、本発明の一形態は、ＯＣＲ処理を行うＯＣＲ処理装置と通信可能な画像処理装置であって、前記ＯＣＲ処理装置に前記画像処理装置で読み取った画像データに対するＯＣＲ処理を要求する要求手段と、前記要求に対する前記ＯＣＲ処理装置からのＯＣＲ処理結果の評価点を判定する判定手段と、前記表示されたＯＣＲ処理結果を表示装置に表示する表示制御手段と、前記表示装置に表示されたＯＣＲ処理結果に対する前記ＯＣＲ処理の再実行を受け付ける受付手段と、前記ＯＣＲ処理を要求していない未要求ＯＣＲ処理装置に前記画像データに対するＯＣＲ処理を要求する再要求手段と、前記判定手段によって判定された前記未要求ＯＣＲ処理装置からのＯＣＲ処理結果の評価点と以前のＯＣＲ処理結果の評価点とを比較する比較手段と、前記比較手段によって前記未要求ＯＣＲ処理装置からのＯＣＲ処理結果の評価点が高いと判断された場合、当該ＯＣＲ処理結果を前記表示装置に再表示する再表示制御手段とを備えることを特徴とする。

本発明によれば、提示されたＯＣＲ結果が利用者の意図するものと異なった場合に、前回提示した結果より品質の高いものを自動的に提示することができ、かつＯＣＲ処理を実行する際、どのＯＣＲ機器が適しているかを自動的に判断することが可能となる。

図１は、実施形態に係る画像処理システムの構成例を示す図である。 図２は、ＭＦＰの構成例を示す図である。 図３は、ＯＣＲ処理のシーケンス例を示す図である。 図４は、ＯＣＲ結果プレビュー画面の例を示す図である。 図５は、ＯＣＲ履歴のデータ構造例を示す図である。 図６は、ＯＣＲモジュール優先度のデータ構造例を示す図である。 図７は、ＯＣＲスコア判定及びＯＣＲ結果履歴更新のシーケンス例を示す図である。 図８は、ＯＣＲモジュールの優先度判定のシーケンス例を示す図である。

以下に添付図面を参照して、画像処理装置、画像処理システム、画像処理方法、及びプログラムの実施形態を詳細に説明する。以下の実施形態によって本発明が限定されるものではなく、以下の実施形態における構成要素には当業者が容易に想到できるもの、実質的に同一のもの、及びいわゆる均等の範囲のものが含まれる。以下の実施形態の要旨を逸脱しない範囲で構成要素の種々の省略、置換、変更、及び組み合わせを行うことができる。

図１は、実施形態に係る画像処理システム１の構成例を示す図である。画像処理システム１はＭＦＰ（Multifunction Peripheral）１１Ａ，１１Ｂ、サーバ装置１２、及びクラウドサーバ１３を含む。

ＭＦＰ１１Ａ，１１Ｂはアプリケーション２１から自機もしくは外部機器のＯＣＲモジュール２２を利用することができる。ＭＦＰ１１はＯＣＲモジュール２２を搭載している場合と搭載していない場合がある。ＯＣＲモジュール２２がオプション機能であるために搭載できない場合と、オプションとしてもＯＣＲ機能が搭載されることがない場合の両方がある。

自機のＭＦＰ１１Ａはスコア判定モジュール２３、単語リスト２４、ＯＣＲ履歴２５（図５参照）、及びＯＣＲモジュール優先度２６（図６参照）を持つ。単語はそれぞれ関連するカテゴリで分類されている。

サーバ装置１２はＭＦＰ１１Ａ，１１Ｂと同じＬＡＮの上に存在し、ＯＣＲ処理を実行するＯＣＲモジュール２２を持つ。

クラウドサーバ１３はインターネット上に存在し、ＯＣＲモジュール２２を持つ。

図２は、ＭＦＰ１１Ａ，１１Ｂの構成例を示す図である。読み取り装置３１は紙原稿を読み取るデバイスである。メモリ３２はＯＳ（Operating System）やアプリケーション２１のプログラムを動作させるためのメモリである。不揮発記憶領域３３はＭＦＰ１１Ａ，１１ＢのＯＳやアプリケーション２１、ＳＤＫ（Software Development Kit）、ＡＰＩ（Application Programming Interface）等のプログラムを記憶する。不揮発記憶領域３３は読み取った画像やＯＣＲ処理中のデータ、ＯＣＲ結果の一時保存にも利用される。不揮発記憶領域３３はＯＣＲ処理を行うサーバのＵＲＬ（Uniform Resource Locator）またはホスト名も記憶する。ＣＰＵ３４はＯＳやアプリケーション２１を実行する。ＭＦＰ１１内にＯＣＲモジュール２２が存在する場合には、ＯＣＲ処理を実行する。ディスプレイ３５はＯＳやアプリケーション２１が利用者に対して何かを表示する際に用いられ、液晶パネルや有機ＥＬパネル等によって構成される。タッチパネル３６はＯＳやアプリケーション２１が利用者から何か指示を受け取る際に用いられ、一般的にはディスプレイ３５と一体化している。通信手段３７はＥｔｈｅｒｎｅｔ、Ｗｉ−Ｆｉ等のネットワーク通信手段であり、ＬＡＮ上の他の装置との通信や、ＬＡＮを通してインターネット上のクラウドサーバ１３と通信するために用いられる。

図３は、ＯＣＲ処理のシーケンス例を示す図である。利用者がアプリケーション２１にＯＣＲ処理要求を行う（Ｓ１０１）。このとき、自機もしくは自機以外の外部機器のうち、どのモジュールからＯＣＲ処理をかけるかの優先度判定を行う（Ｓ１０２）。アプリケーション２１は優先度の一番高いＯＣＲモジュール２２にＯＣＲ処理要求を行う（Ｓ１０３）。このとき、ＯＣＲ処理を行いたい画像データを渡す。ＯＣＲモジュールはＯＣＲ処理を行い（Ｓ１０４）、アプリケーション２１にＯＣＲ結果を渡す（Ｓ１０５）。アプリケーション２１はＯＣＲ結果を元に、再度優先度判定を行った後（Ｓ１０６）、ＯＣＲ結果のスコア判定を行う（Ｓ１０７）。アプリケーション２１は利用者にＯＣＲ結果を提示する（Ｓ１０８）。利用者はＯＣＲ結果を見て、再実行が必要かどうか判断する。

再実行が必要な場合、アプリケーション２１に再びＯＣＲ処理要求を行い（Ｓ１０９）、アプリケーション２１は前回のＯＣＲ結果の品質スコアよりも高い品質スコアが得られるまで、機器に対し優先度順に従ってＯＣＲ処理要求を行う（Ｓ１１０〜Ｓ１１３）。前回よりも高い品質スコアが得られると、アプリケーション２１はＯＣＲ結果をプレビュー表示する（Ｓ１１４）。利用者が再実行不要と判断するまでこれを繰り返す。

利用者が再実行不要と判断し、ＯＣＲ結果を確定させると（Ｓ１１５）、アプリケーション２１はＯＣＲ結果を返す（Ｓ１１６）。アプリケーション２１はＯＣＲ結果を履歴に格納し（Ｓ１１７）、次回以降のＯＣＲモジュールの優先度判定に利用する。

図４は、ＯＣＲ結果プレビュー画面５１の例を示す図である。ＯＣＲ結果プレビュー画面５１はＯＣＲ結果を提示する画面である。ＯＣＲ結果プレビュー画面５１には、何回目のＯＣＲ結果かを示す表示５５と、プレビュー内容５６と、ひとつ前の結果を表示するボタン５７と、ひとつ後の結果を表示するボタン５８と、再実行ボタン５９と、ＯＫボタン６０とがある。再実行のボタン５９を押すと画面が更新され、プレビュー内容５６が最新のものに切り替わる。ＯＫボタン６０を押すと画面表示中のＯＣＲ結果が発行される。

図５は、ＯＣＲ履歴２５のデータ構造例を示す図である。ＯＣＲ履歴２５のデータ構造は、ＯＣＲ処理を実行した画像ごとに品質スコアを格納するものであり、ｉｄと画像とカテゴリと品質スコアとが対応付けられている。カテゴリとは医療関係や建築関係といった文書の種別を単語に紐付けて分類した結果とする。また、スコアについては図７で説明する。

図６は、ＯＣＲモジュール優先度２６のデータ構造例を示す図である。ＯＣＲモジュール優先度２６のデータ構造は、ＯＣＲモジュール２２ごとに品質スコアを格納するものであり、ｉｄとモジュール名とＵＲＬと品質スコアとが対応付けられている。カテゴリごとのスコア順にソートすることで優先度を決定する。

図７は、ＯＣＲスコア判定及びＯＣＲ結果履歴更新のシーケンス例を示す図である。図７では図３における「ＯＣＲ結果のスコア判定」と「ＯＣＲ結果を履歴に格納」の処理について説明する。ＯＣＲ結果のスコア判定では、アプリケーション２１がスコア判定モジュール２３にスコア判定要求を行う（Ｓ２０１）。スコア判定モジュール２３はＯＣＲ結果を形態素解析し、形態素を分解する（Ｓ２０２）。スコア判定モジュール２３は単語リストを取得する（Ｓ２０３）。スコア判定モジュール２３はＯＣＲ結果の形態素ごとに単語リスト２４と合致するかを判定し、合致率を計算する（Ｓ２０４）。スコア判定モジュール２３はＯＣＲ結果の形態素が合致した単語のカテゴリを保存しておき、最も頻度の高いカテゴリを文書のカテゴリとして設定する（Ｓ２０５）。スコア判定モジュール２３はＯＣＲ結果の合致率が前回提示したＯＣＲ結果と比較して高いか低いかをアプリケーション２１に返す（Ｓ２０６）。

ＯＣＲ結果を履歴に格納する処理では、アプリケーション２１がスコア判定モジュール２３にＯＣＲ結果履歴格納要求を行う（Ｓ２０７）。スコア判定モジュール２３は１〜ｎ回目に実施したモジュールのＯＣＲ結果の合致率を用いて、合致率の偏差値を計算する（Ｓ２０８）。計算で得られた偏差値は、各モジュールの品質スコアとしてＯＣＲ履歴２５に格納される（Ｓ２０９）。

スコア判定モジュール２３は、下記２種類の単語リスト（辞書）を持っている。
・一般/共通 単語リスト（辞書）
・カテゴリ（分野） 単語リスト（辞書）

「カテゴリ（分野） 単語リスト」は、各カテゴリ（分野）での専門用語など、その分野で使われる特徴的な単語のリストであり、カテゴリ（分野）毎に持っている。「一般／共通 単語リスト」は、接続詞、助詞、及び助動詞を含む一般的な単語のリストである。

ＯＣＲ処理の結果、下記例１のように文章が読み取られた場合、形態素解析により分解され、下記例２のようになる。解析及び分解は、「一般/共通 単語リスト」、「カテゴリ（分野） 単語リスト」全分野のデータを用いて行われる。
例１）
冠血流の評価について、狭窄部前後の健常部を対照として、通常実測５０％以上の狭窄を有意狭窄いう。一般的に、７５％以上の狭窄が治療対象となる。
例２）
冠血流|の|評価|に|ついて|、|狭窄｜部|前後|の|健常｜部|を|対照|として|、|通常|実測|５０％|以上|の|狭窄|を|有意|狭窄|と｜いう｜。｜一般｜的｜に｜、｜７５％｜以上｜の｜狭窄｜が｜治療｜対象｜となる｜。

（分野の判定）
分野の判定は、「カテゴリ（分野） 単語リスト」の単語の出現数で判定する。例えば、”医療”分野の「カテゴリ（分野） 単語リスト」には、上記例の文章の中の単語でいうと、「冠血流」、「狭窄」、「健常」、「治療」といった医療分野の単語を含んでいる。上記例の文章で合致する単語を＜＞で表現すると、下記例３のようになり、この例では出現数が７となる。これを文書全体に渡って行う。あるいは読み取った頁毎に判定して管理してもよい。
例３）
＜冠血流＞|の|評価|に|ついて|、|＜狭窄＞｜部|前後|の|＜健常＞｜部|を|対照|として|、|通常|実測|５０％|以上|の|＜狭窄＞|を|有意|＜狭窄＞|と｜いう｜。｜一般｜的｜に｜、｜７５％｜以上｜の｜＜狭窄＞｜が｜＜治療＞｜対象｜となる｜。

他の分野の「カテゴリ（分野） 単語リスト」でも同様に合致する単語をチェックし、出現数をカウントして各分野の出現数を求める。もっとも出現数の高い分野をその文書（あるいは頁）のカテゴリ（分野）と判定する。

（スコアの算出）
読み取り結果の評価は、文章中の単語が「一般/共通 単語リスト」と「カテゴリ（分野） 単語リスト」全分野のリストに含まれる単語で合致するものがあるか否かを判定し、合致率を算出する。特定した分野での優位性に注目したい場合は、スコア判定に用いる「カテゴリ（分野） 単語リスト」は前述の判定により特定した分野の単語リストだけを用いて判定する。

図８は、ＯＣＲモジュール２２の優先度判定のシーケンス例を示す図である。ＯＣＲモジュール２２の優先度判定では、アプリケーション２１がスコア判定モジュール２３に優先度判定要求を行う（Ｓ３０１）。スコア判定モジュール２３は、今回ＯＣＲ処理を実行する文書の文書カテゴリが既知の場合は、モジュール優先度２６を文書カテゴリでソートする要求をする（Ｓ３０２）。ＯＣＲモジュール優先度２６はＯＣＲ履歴２５から各ＯＣＲモジュール２２のカテゴリごとの品質スコアの平均値を取得し（Ｓ３０３）、今回ＯＣＲ処理を実行する文書の文書カテゴリでソートする（Ｓ３０４）。また、文書カテゴリが不明の場合は、モジュール優先度をデフォルトで設定された優先度でソートする要求をし（Ｓ３０５）、ＯＣＲモジュール優先度２６はデフォルトでソートされる（Ｓ３０６）。スコア判定モジュール２３はモジュール優先度を取得し（Ｓ３０７）、アプリケーション２１に優先度判定結果を返す（Ｓ３０８）。

上記本実施形態に係る画像処理システム１の機能を実現するプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、メモリカード、ＣＤ−Ｒ及びＤＶＤ（Digital Versatile Disk）等のコンピュータで読み取り可能な記憶媒体に記憶されてコンピュータ・プログラム・プロダクトとして提供される。

また、プログラムをインターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、プログラムをダウンロードさせずにインターネット等のネットワーク経由で提供するように構成してもよい。また、プログラムをＲＯＭ等に予め組み込んで提供するように構成してもよい。また、プログラムは画像処理システム１に含まれる機能部のうちプログラムにより実現可能な機能を含むモジュール構成となっていてもよい。プログラムにより実現される機能は記憶媒体からプログラムを読み出して実行することにより、プログラムにより実現される機能が主記憶装置にロードされる。すなわちプログラムにより実現される機能は主記憶装置上に生成される。

本実施形態に係る画像処理システム１によれば、提示されたＯＣＲ結果が利用者の意図するものと異なった場合に、前回提示した結果より品質の高いものを自動的に提示することができ、かつＯＣＲ処理を実行する際、どのＯＣＲ機器が適しているかを自動的に判断することが可能となる。

以上、本発明の実施形態を説明したが、上記実施形態は例として提示したものであり、発明の範囲を限定することを意図するものではない。この新規な実施形態はその他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で種々の省略、置き換え、変更、及び組み合わせを行うことができる。この実施形態及びその変形は発明の範囲及び要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１ 画像処理システム
１１Ａ，１１Ｂ ＭＦＰ
１２ サーバ装置
１３ クラウドサーバ
２１ アプリケーション
２２ ＯＣＲモジュール
２３ スコア判定モジュール
２４ 単語リスト
２５ ＯＣＲ履歴
２６ ＯＣＲモジュール優先度
３１ 読み取り装置
３２ メモリ
３３ 不揮発記憶領域
３４ ＣＰＵ
３５ ディスプレイ
３６ タッチパネル
３７ 通信手段
５１ ＯＣＲ結果プレビュー画面

特開２００６−２６００８０号公報

Claims (10)

1. ＯＣＲ処理を行うＯＣＲ処理装置と通信可能な画像処理装置であって、
   前記ＯＣＲ処理装置に前記画像処理装置で読み取った画像データに対するＯＣＲ処理を要求する要求手段と、
   前記要求に対する前記ＯＣＲ処理装置からのＯＣＲ処理結果の評価点を判定する判定手段と、
   前記表示されたＯＣＲ処理結果を表示装置に表示する表示制御手段と、
   前記表示装置に表示されたＯＣＲ処理結果に対する前記ＯＣＲ処理の再実行を受け付ける受付手段と、
   前記ＯＣＲ処理を要求していない未要求ＯＣＲ処理装置に前記画像データに対するＯＣＲ処理を要求する再要求手段と、
   前記判定手段によって判定された前記未要求ＯＣＲ処理装置からのＯＣＲ処理結果の評価点と以前のＯＣＲ処理結果の評価点とを比較する比較手段と、
   前記比較手段によって前記未要求ＯＣＲ処理装置からのＯＣＲ処理結果の評価点が高いと判断された場合、当該ＯＣＲ処理結果を前記表示装置に再表示する再表示制御手段と
   を備える画像処理装置。
2. 前記比較手段によって前記未要求ＯＣＲ処理装置からのＯＣＲ処理結果の評価店が低いと判断された場合、他の未要求ＯＣＲ処理装置に前記画像データに対するＯＣＲ処理を要求する再要求継続手段
   を更に備える請求項１に記載の画像処理装置。
3. 前記ＯＣＲ処理結果の評価点と前記ＯＣＲ処理装置とを対応付けた履歴を記憶する履歴記憶手段と、
   前記履歴記憶手段によって記憶されている前記履歴に基づいて、前記ＯＣＲ処理を要求する際の前記ＯＣＲ処理装置の優先度を決定する優先度決定手段と
   を更に備える請求項１に記載の画像処理装置。
4. 前記判定手段は、
   前記ＯＣＲ処理結果の文章中の単語が所定の単語リストに含まれる単語と合致するか否かによって算出した合致率に基づいて前記評価点を判定する
   請求項１に記載の画像処理装置。
5. 画像処理装置と、ＯＣＲ処理を行うＯＣＲ処理装置とが通信可能な画像処理システムであって、
   前記ＯＣＲ処理装置に前記画像処理装置で読み取った画像データに対するＯＣＲ処理を要求する要求手段と、
   前記要求に対する前記ＯＣＲ処理装置からのＯＣＲ処理結果の評価点を判定する判定手段と、
   前記表示されたＯＣＲ処理結果を表示装置に表示する表示制御手段と、
   前記表示装置に表示されたＯＣＲ処理結果に対する前記ＯＣＲ処理の再実行を受け付ける手段と、
   前記ＯＣＲ処理を要求していない未要求ＯＣＲ処理装置に前記画像データに対するＯＣＲ処理を要求する再要求手段と、
   前記判定手段によって判定された前記未要求ＯＣＲ処理装置からのＯＣＲ処理結果の評価点と以前のＯＣＲ処理結果の評価点とを比較する比較手段と、
   前記比較手段によって前記未要求ＯＣＲ処理装置からのＯＣＲ処理結果の評価点が高いと判断された場合、当該ＯＣＲ処理結果を前記表示装置に再表示する再表示制御手段と
   を備える画像処理システム。
6. 前記比較手段によって前記未要求ＯＣＲ処理装置からのＯＣＲ処理結果の評価店が低いと判断された場合、他の未要求ＯＣＲ処理装置に前記画像データに対するＯＣＲ処理を要求する再要求継続手段
   を更に備える請求項５に記載の画像処理システム。
7. 前記ＯＣＲ処理結果の評価点と前記ＯＣＲ処理装置とを対応付けた履歴を記憶する履歴記憶手段と、
   前記履歴記憶手段によって記憶されている前記履歴に基づいて、前記ＯＣＲ処理を要求する際の前記ＯＣＲ処理装置の優先度を決定する優先度決定手段と
   を更に備える請求項５に記載の画像処理システム。
8. 前記判定手段は、
   前記ＯＣＲ処理結果の文章中の単語が所定の単語リストに含まれる単語と合致するか否かによって算出した合致率に基づいて前記評価点を判定する
   請求項５に記載の画像処理システム。
9. 画像処理装置と、ＯＣＲ処理を行うＯＣＲ処理装置とが通信可能な画像処理システムを利用して行われる画像処理方法であって、
   前記ＯＣＲ処理装置に前記画像処理装置で読み取った画像データに対するＯＣＲ処理を要求する工程と、
   前記要求に対する前記ＯＣＲ処理装置からのＯＣＲ処理結果の評価点を判定する工程と、
   前記表示されたＯＣＲ処理結果を表示装置に表示する工程と、
   前記表示装置に表示されたＯＣＲ処理結果に対する前記ＯＣＲ処理の再実行を受け付ける工程と、
   前記ＯＣＲ処理を要求していない未要求ＯＣＲ処理装置に前記画像データに対するＯＣＲ処理を要求する工程と、
   前記判定された前記未要求ＯＣＲ処理装置からのＯＣＲ処理結果の評価点と以前のＯＣＲ処理結果の評価点とを比較する工程と、
   前記未要求ＯＣＲ処理装置からのＯＣＲ処理結果の評価点が高いと判断された場合、当該ＯＣＲ処理結果を前記表示装置に再表示する工程と
   を含む画像処理方法。
10. ＯＣＲ処理を行うＯＣＲ処理装置と通信可能な画像処理装置に、
    前記ＯＣＲ処理装置に前記画像処理装置で読み取った画像データに対するＯＣＲ処理を要求する処理と、
    前記要求に対する前記ＯＣＲ処理装置からのＯＣＲ処理結果の評価点を判定する処理と、
    前記表示されたＯＣＲ処理結果を表示装置に表示する処理と、
    前記表示装置に表示されたＯＣＲ処理結果に対する前記ＯＣＲ処理の再実行を受け付ける処理と、
    前記ＯＣＲ処理を要求していない未要求ＯＣＲ処理装置に前記画像データに対するＯＣＲ処理を要求する処理と、
    前記判定された前記未要求ＯＣＲ処理装置からのＯＣＲ処理結果の評価点と以前のＯＣＲ処理結果の評価点とを比較する処理と、
    前記未要求ＯＣＲ処理装置からのＯＣＲ処理結果の評価点が高いと判断された場合、当該ＯＣＲ処理結果を前記表示装置に再表示する処理と
    を実行させるプログラム。

Images