JP2010225112A - Data generation device and data generation method - Google Patents
Data generation device and data generation method Download PDFInfo
- Publication number
- JP2010225112A JP2010225112A JP2009074648A JP2009074648A JP2010225112A JP 2010225112 A JP2010225112 A JP 2010225112A JP 2009074648 A JP2009074648 A JP 2009074648A JP 2009074648 A JP2009074648 A JP 2009074648A JP 2010225112 A JP2010225112 A JP 2010225112A
- Authority
- JP
- Japan
- Prior art keywords
- character
- image data
- unit
- color
- detected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title description 17
- 238000004458 analytical method Methods 0.000 claims abstract description 103
- 238000001514 detection method Methods 0.000 claims abstract description 48
- 239000003086 colorant Substances 0.000 claims abstract description 30
- 239000000463 material Substances 0.000 claims description 8
- 238000000605 extraction Methods 0.000 description 11
- 235000007688 Lycopersicon esculentum Nutrition 0.000 description 9
- 240000003768 Solanum lycopersicum Species 0.000 description 9
- 238000012015 optical character recognition Methods 0.000 description 7
- 239000000284 extract Substances 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 239000002994 raw material Substances 0.000 description 2
- 235000013555 soy sauce Nutrition 0.000 description 2
- 101000661807 Homo sapiens Suppressor of tumorigenicity 14 protein Proteins 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 108090000237 interleukin-24 Proteins 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
Images
Landscapes
- Character Input (AREA)
- Image Analysis (AREA)
Abstract
Description
本発明は、複数色で印刷された印刷物から文字情報を抽出し、データを生成するデータ生成装置に関する。 The present invention relates to a data generation apparatus that extracts character information from a printed matter printed in a plurality of colors and generates data.
文字や画像が印刷された印刷物に光を照射し、その反射光に基づいて生成される画像データを解析して、文字情報を抽出する技術を用いる装置として、例えば、OCR(Optical Character Reader)等の光学文字読取装置がある。
このような光学文字読取装置は、読み取り対象が白黒印刷された印刷物であり、2値認識が主流である。カラーで印刷された印刷物から文字認識を行う場合には、カラーの印刷物を白黒でコピーを行って2値化し、この2値化された後の画像を対象として文字認識を行っている。このような文字認識を行う技術として、以下の特許文献1のものがある。
一方、新聞等で折り込みチラシが利用されている。折り込みチラシは、スーパーマーケットや家電製品の量販店等に広告媒体として利用されており、紙媒体に印刷される。このような折り込みチラシを電子化し、電子チラシとしてネットワークを介して配信するサービスが行われつつある。配信された電子チラシは、受信した端末装置の表示画面に表示されることによって、消費者に閲覧されている。
このような折り込みチラシは、大半がカラー印刷されている。この折り込みチラシを上記の光学文字読み取り装置によって読み取り、文字認識を行うことによって、折り込みチラシにどのような商品が掲載され、折り込みチラシの印刷面のどの位置に配置されているのかを得ることが求められている。
As an apparatus that uses a technique for irradiating a printed matter on which characters and images are printed, analyzing image data generated based on the reflected light, and extracting character information, for example, OCR (Optical Character Reader) There is an optical character reader.
Such an optical character reader is a printed matter on which a reading target is printed in black and white, and binary recognition is mainstream. When character recognition is performed from a printed matter printed in color, the color printed matter is copied and binarized in black and white, and character recognition is performed on the binarized image. As a technique for performing such character recognition, there is one disclosed in Patent Document 1 below.
On the other hand, folded leaflets are used in newspapers and the like. Folded flyers are used as advertising media in supermarkets and mass retailers of home appliances, and are printed on paper media. There is a service in which such a folded leaflet is digitized and distributed as an electronic leaflet via a network. The distributed electronic leaflet is viewed by the consumer by being displayed on the display screen of the received terminal device.
Most of these leaflets are printed in color. By reading this folded flyer with the above-mentioned optical character reader and performing character recognition, it is required to obtain what kind of product is placed on the folded flyer and where it is placed on the printed surface of the folded flyer. It has been.
しかしながら、折り込みチラシは、カラー印刷されているため、一度白黒でコピーを行って2値化し、文字認識を行うと、文字認識の精度が低く、折り込みチラシに掲載された商品等の文字情報を正確に得ることができないという問題がある。すなわち、カラー印刷から白黒にコピーを行う際に、文字として認識したい対象の部分の画像が背景と一緒に白として認識されてしまうと、その文字を認識することができない。また、折り込みチラシは、写真やイラスト、背景等の上に文字がレイアウトされることが多々あるため、文字の色と、その写真やイラスト、背景の色とが、異なる値になるように2値化されるとは限らない。そうすると、文字認識の精度が低下してしまう。
このように、文字と写真等の画像が重なっている場合、特に、折り込みチラシのように複数の色で印刷された文字や画像が複雑にレイアウトされていると、文字と画像を判別して文字認識することが難しく、文字情報のみを精度良く抽出することは困難であった。
However, since the flyers are printed in color, once they are copied in black and white, binarized, and character recognition is performed, the character recognition accuracy is low, and the character information on the product etc. posted on the flyers is accurate. There is a problem that cannot be obtained. That is, when copying from color printing to black and white, if an image of a target portion that is desired to be recognized as a character is recognized as white together with the background, the character cannot be recognized. In addition, since a flyer is often laid out with characters on a photo, illustration, background, etc., it is binary so that the color of the character is different from the color of the photo, illustration, or background. It is not always possible. If it does so, the accuracy of character recognition will fall.
In this way, when characters and images such as photographs overlap, especially when characters and images printed in multiple colors are laid out in a complicated manner, such as a folded flyer, the characters and images are distinguished. It was difficult to recognize, and it was difficult to accurately extract only character information.
本発明は、このような事情を考慮し、上記の問題を解決すべくなされたものであって、その目的は、文字を表す画像を含んだ画像データから精度よく文字認識を行うことができるデータ生成装置およびデータ生成方法を提供することにある。 The present invention has been made in view of such circumstances, and has been made to solve the above-described problem. The object of the present invention is to enable accurate character recognition from image data including an image representing a character. An object of the present invention is to provide a generation device and a data generation method.
上記問題を解決するために、本発明に係るデータ生成装置は、文字を表す画像を含んだ印刷物を複数色で読み取り画像データを生成する読取部と、前記読取部が生成した画像データを色ごとに分離し、複数の色ごとの画像データである色画像データを生成する色画像データ生成部と、前記色画像データ生成部が生成した前記色画像データの各々から文字として認識される文字領域を検出する文字領域検出部と、前記文字領域検出部が検出した前記色画像データにおける文字領域を解析し、当該文字領域に含まれる文字情報を検出する解析部と、前記解析部が文字情報を検出した場合、解析対象とした文字領域の前記画像データにおける座標を示す位置情報を検出する位置情報検出部と、前記解析部が検出した文字情報と、前記位置情報検出部が検出した位置情報とを関連付けて出力する解析文字情報出力部と、を備えることを特徴とする。 In order to solve the above problems, a data generation apparatus according to the present invention includes a reading unit that reads a printed matter including an image representing characters in a plurality of colors and generates image data, and the image data generated by the reading unit for each color. A color image data generation unit that generates color image data that is image data for each of a plurality of colors, and a character region that is recognized as a character from each of the color image data generated by the color image data generation unit A character area detection unit to detect, an analysis unit to analyze a character region in the color image data detected by the character region detection unit, detect character information included in the character region, and the analysis unit to detect character information A position information detection unit that detects position information indicating coordinates in the image data of the character region to be analyzed, character information detected by the analysis unit, and the position information detection unit Characterized in that it comprises the analysis the character information output unit that associates and outputs the detected position information.
また、本発明は、上述のデータ生成装置において、前記色画像データ生成部は、予め定められた色、あるいは、前記画像データの色ヒストグラムから予め定められる上位の色について、画像データを色ごとに分離して色画像データを生成することを特徴とする。 According to the present invention, in the above data generation device, the color image data generation unit converts the image data for each color for a predetermined color or a higher-order color predetermined from a color histogram of the image data. The color image data is generated by separation.
また、本発明は、上述のデータ生成装置において、前記文字領域検出部は、前記画像データの濃淡から検出されるエッジ情報が前記色画像データ中の各々の領域にどの程度含まれているかを比較することにより、前記文字領域を検出することを特徴とする。 According to the present invention, in the data generation device described above, the character area detection unit compares how much edge information detected from the density of the image data is included in each area in the color image data. Thus, the character area is detected.
また、本発明は、上述のデータ生成装置において、前記解析部は、前記文字領域から複数の文字を検出した場合に、前記文字領域における各々の文字の配置状態に基づいて、縦書きであるか横書きであるかを検出し、検出した書字方向に連続する文字列を文字情報として検出することを特徴とする。 Further, according to the present invention, in the above data generation device, when the analysis unit detects a plurality of characters from the character region, is the vertical writing based on the arrangement state of each character in the character region? Whether it is horizontal writing is detected, and a character string continuous in the detected writing direction is detected as character information.
また、本発明は、上述のデータ生成装置において、検索対象である文字を表す検索文字が入力される入力部と、前記解析部が検出した文字情報と、前記位置情報検出部が検出した位置情報とを対応付けて記憶する解析文字情報記憶部と、前記入力部に入力された検索文字を前記解析文字情報記憶部から検索する検索部と、前記検索部によって検索された位置情報を出力する検索文字情報出力部と、を有することを特徴とする。 Further, the present invention provides an input unit for inputting a search character representing a character to be searched, character information detected by the analysis unit, and position information detected by the position information detection unit in the data generation device described above. Are stored in association with each other, an analysis character information storage unit that stores them in association with each other, a search unit that searches the analysis character information storage unit for a search character input to the input unit, and a search that outputs position information searched by the search unit And a character information output unit.
また、本発明は、上述のデータ生成装置において、互いに類似する類似文字を含む類似文字群を記憶する類似文字記憶部をさらに備え、前記検索部は、前記類似文字記憶部に記憶された類似文字の中に前記入力部に入力された前記検索文字に対応する類似文字があるか否かを検出し、類似文字がある場合、前記検索文字のうち類似文字に該当する文字を前記検出された類似文字が含まれる類似文字群のうち他の前記類似文字に置き換えた類似検索文字を生成し、生成した類似検索文字と前記検索文字に基づき、前記解析文字情報記憶部から検索することを特徴とする。 The present invention further includes a similar character storage unit that stores a similar character group including similar characters that are similar to each other in the data generation device, and the search unit stores the similar characters stored in the similar character storage unit. If there is a similar character corresponding to the search character input to the input unit, and if there is a similar character, the character corresponding to the similar character among the search characters is detected. A similar search character replaced with another similar character in a similar character group including characters is generated, and a search is performed from the analysis character information storage unit based on the generated similar search character and the search character. .
また、本発明は、上述のデータ生成装置において、読取部が、文字を表す画像を含んだ印刷物を複数色で読み取り画像データを生成し、色画像データ生成部が、前記読取部が生成した画像データを色ごとに分離し、複数の色ごとの画像データである色画像データを生成し、文字領域検出部が、前記色画像データ生成部が生成した前記色画像データの各々から文字として認識される文字領域を検出し、解析部が、前記文字領域検出部が検出した前記色画像データにおける文字領域を解析し、当該文字領域に含まれる文字情報を検出し、位置情報検出部が、前記解析部が文字情報を検出した場合、解析対象とした文字領域の前記画像データにおける座標を示す位置情報を検出し、解析文字情報出力部が、前記解析部が検出した文字情報と、前記位置情報検出部が検出した位置情報とを関連付けて出力することを特徴とする。 Further, according to the present invention, in the above-described data generation device, the reading unit reads a printed matter including an image representing a character with a plurality of colors to generate image data, and the color image data generation unit generates an image generated by the reading unit. Data is separated for each color, color image data that is image data for a plurality of colors is generated, and a character area detection unit is recognized as a character from each of the color image data generated by the color image data generation unit. The character area in the color image data detected by the character area detection unit, the character information included in the character area is detected, and the position information detection unit When the part detects character information, position information indicating coordinates in the image data of the character region to be analyzed is detected, and the analysis character information output unit detects the character information detected by the analysis unit and the position Wherein the information detecting unit outputs in association with position information detected.
本発明によれば、印刷物を読み取って得られた画像データを色ごとに分離し、その分離された画像データから文字認識を行い、その認識された文字情報と、その文字が印刷物に配置された座標を示す位置情報を得るようにした。これにより、文字とその文字の周囲の画像とを分離して文字認識を行うことができるので、複数の色で印刷された印刷物であっても、精度よく文字認識を行い、その文字の位置を把握することができる。 According to the present invention, image data obtained by reading a printed matter is separated for each color, character recognition is performed from the separated image data, and the recognized character information and the characters are arranged on the printed matter. The position information indicating the coordinates was obtained. As a result, character recognition can be performed by separating a character and an image around the character, so even a printed matter printed in multiple colors can accurately recognize the character and position the character. I can grasp it.
図1は、本実施形態に係るデータ生成装置100の構成を示すブロック図である。データ生成装置100は、読取部101と、色設定部102と、色画像データ生成部103と、画像処理部104と、文字領域検出部105と、解析部106と、位置情報検出部107と、解析文字情報記憶部108と、解析文字情報出力部113と、検索部109と、入力部110と、検索文字情報出力部111と、類似文字記憶部112とを備える。
FIG. 1 is a block diagram illustrating a configuration of a
読取部101は、例えば複数色で印刷されている印刷物を複数色で読み取るカラースキャナ等の画像読取装置であって、読み取り対象である印刷物に対して光を照射しその反射光を受光し、光電変換素子等を利用して印刷物からの反射光を電気信号に変換して、印刷物の印刷面に印刷された画像を表す画像データを生成する。この読み取り対象である印刷物は、文字や画像が複数の色で印刷された印刷物であって、文字を表す画像を含んでいる。この実施形態における印刷物とは、新聞などの折り込みチラシである。例えば、この折り込みチラシに、商品の名称や原料、特長、価格、商品が撮像された写真、イラストなど、商品に関する情報である商品情報のうち、名称や原料、特長、価格などを表す文字が画像として印刷されており、また、商品情報のうち、商品が撮像された写真、イラストなどを表す商品画像が写真等で印刷され、広告や宣伝のために消費者に配布される。この配布は、折り込みチラシそのものが配布される場合もあるが、この実施形態においては、電子チラシとして配信される場合について説明する。電子チラシとは、この折り込みチラシを画像読取装置で読み取ってえられる画像データである。この電子チラシは、広告主である店舗が取扱っている商品または提供している役務に関する画像情報、文字情報、および音声情報等を含む電子化された広告宣伝情報を意味するものである。また店舗毎に開催されるフェアや、キャンペーン情報等、特定の商品や役務に限られない販売促進情報が含まれていてもよい。また、この電子チラシは、ユーザの端末装置からの要求に応じて配信される。
The
色設定部102は、読取部101によって読み取られたチラシを表す画像データ200の色ヒストグラムから予め定められる上位の色を抽出色として検出する。この上位とは、色ごとに得られるヒストグラムのうち、予め決められた順位まで、上位から抽出する。例えば、チラシに印刷されている抽出色の印刷面積の割合が大きい抽出色を検出する。
また、色設定部102は、生成された色のヒストグラムに基づき、チラシの全画面において使用されている色とその色の印刷面積の割合を検出し、チラシ全画面内で使用されている面積の割合が多い抽出色を検出する。本実施の形態において、色設定部102は、例えば、上位の5位までを抽出することを予め指定することにより、画像データ200内で使用されている割合が多い上位5色(例えば、黒色、青色、赤色、白色、黄色)を抽出色として検出する。
また、色設定部102は、抽出された複数の抽出色を、色画像データ生成部103によって利用される抽出対象として、色画像データ生成部103に出力する。
The
The
Further, the
色画像データ生成部103は、読取部101によって生成された画像データ200から、抽出対象である抽出色として、例えば、予め定められた色、あるいは、色設定部102によって検出された抽出色で印刷されている画像情報を抽出色毎に分離し、複数の色ごとの画像データである色画像データを生成する。例えば、図2に示す通り、色画像データ生成部103は、画像データ200から、色設定部102によって検出された複数の抽出色(黒色、青色、赤色、白色、黄色)で印刷されている画像データのみを抽出色毎に分離し、複数の色画像データ(色黒画像データ201、青画像データ202、赤画像データ203、白画像データ204、および黄画像データ205)を生成する。なお、これら分離された色画像データは、それぞれ抽出色に応じて2値化された画像データであって、黒画像データ201、青画像データ202、赤画像データ203および黄画像データ205は、それぞれの抽出色で表されている画像領域を黒色とする2値化データである。一方、白画像データ204は、画像データ200から白色で表されている画像領域を黒色とする2値化データである。
The color image
画像処理部104は、色画像データ生成部103によって抽出された複数の色画像データに対して、文字情報と認識しない画像データを除去する画像処理をし、画像処理された複数の色画像データを文字領域検出部105に出力する。例えば、画像処理部104は、複数の色画像データに対して、写真領域を除去するための処理や、ノイズ部分をフィルタ等を用いて除去するための処理等を行う。
ここで、写真領域を除去するための処理について、図3を用いて説明する。図3(a)は、チラシの画像データ200の一部分を示している。図3(a)に示す画像データは、黒色の商品名、黄色の商品金額、黒色の矩形内に白抜きで記載された「税込」部分が示されており、背景は黒っぽい色のしょうゆの商品画像と、商品画像の周辺が赤色と青色で示されている。
また、図3(b)は、色画像データ生成部103によって生成された黒画像データ201の一部分を示している。図3(b)に示す通り、黒色に対応する部分として、商品名と、しょうゆの商品画像の一部と、税込の記載が示されている。
画像処理部104は、画像データ200に対して、画像データの濃淡からエッジ部分を特徴量として検出するエッジ検出による画像処理を行い、図3(c)に示すようなエッジ画像データ211を生成する。
また、画像処理部104は、黒画像データ201とエッジ画像データ211を比較し、黒画像データ201に対してエッジ画像データ211に含まれるエッジ部分を表すエッジ情報がT(Tは、100よりも小さい数)%未満しか含まれない領域を黒画像データ201から削除し、写真領域除去処理後の処理画像データ221を生成する。なお、パラメータTは予め設定することや領域の大きさなどによって動的に変更が可能である。
The
Here, the process for removing the photographic region will be described with reference to FIG. FIG. 3A shows a part of the
FIG. 3B shows a part of the
The
Further, the
文字領域検出部105は、色画像データ生成部103によって分離された複数の色画像データ毎に、文字として認識される対象である解析領域(文字領域)を検出する。例えば、文字領域検出部105は、黒画像データ201に基づき画像処理部104によって写真画像に対応する部分が概ね除去された処理画像データ221に対して、文字を検出するレイアウト解析を行い、文字列画像と判別できる画像領域を検出する。また、文字領域検出部105は、検出された文字列画像と判別できる画像領域に基づき、1文字に対応する文字領域を検出し、これら全ての文字領域を解析領域300(図4参照)として解析部106に出力する。なお、文字領域検出部105は、色画像データ毎に解析領域300を検出する。
The character
解析部106は、文字領域検出部105によって検出された解析領域300の画像データを解析して、解析領域300の各文字領域に対応する文字情報を検出する。例えば、図4に示す通り、文字領域検出部105によって文字領域301〜307が検出された場合、解析部106は、この文字領域301〜307の画像データを解析することで、「北」「海」「道」「産」「ト」「マ」「ト」の文字情報401〜407を検出する。
また、解析部106は、文字領域検出部105によって検出されている文字領域毎の間隔等に応じて、後述する縦書き文字列、横書き文字列あるいは傾き文字列を判別する処理を行って、文字列の連続方向を判断する。
なお解析部106は、文字列の連続方向に基づき、各文字情報401〜407の組み合わせによって構成される文字列の塊を検出し、例えば、文字情報401〜404からなる単語情報601と、文字情報405〜407からなる単語情報602を検出する。また、解析部106は、文字領域検出部105によって解析領域300が検出された色画像データ毎に、単語情報や文字情報を抽出する。
The
Further, the
Note that the
位置情報検出部107は、解析対象とした文字領域の画像データにおける座標を示す位置情報を検出する。すなわち、位置情報検出部107は、解析部106によって解析された文字情報401〜407がチラシに印刷されている位置を表す位置情報を、文字情報401〜407が抽出された色画像データから検出する。例えば、位置情報検出部107は、図5に示す通り、解析部106によって解析された文字情報405の「ト」に基づき、文字情報405の解析領域300の左上の座標(X1L,Y1L)と右下の座標(X1R,Y1R)を位置情報505として検出する。同様にして、位置情報検出部107は、文字情報406の「マ」に基づき、文字情報406の解析領域300の左上の座標(X2L,Y2L)と右下の座標(X2R,Y2R)を位置情報506として検出し、文字情報407の「ト」に基づき、文字情報407の解析領域300の左上の座標(X3L,Y3L)と右下の座標(X3R,Y3R)を位置情報507として検出する。
なお、本実施の形態において、位置情報検出部107は、解析領域300の対角線上の2点の座標を検出する例について説明したが、本発明はこれに限られず、解析領域300の4点であってもよく、解析領域300の中央の一点であってもよい。
The position
In the present embodiment, the position
解析文字情報出力部113は、解析部106によって検出された文字情報と、位置情報検出部107によって検出された位置情報とを関連付けて出力する。
The analysis character
解析文字情報記憶部108は、解析文字情報出力部113から出力された情報に基づき、解析部106によって抽出された文字情報と、位置情報検出部107によって検出された位置情報とを対応付けて記憶する。例えば、解析文字情報記憶部108は、図6に示す通り、解析部106によって抽出された文字情報からなる単語情報602“トマト”と、単語情報602を構成する文字情報405〜407の位置情報505〜507“X1L,Y1L,X1R,Y1R,X2L,Y2L,X2R,Y2R,X3L,Y3L,X3R,Y3R”とを対応付けて記憶する。
Based on the information output from the analysis character
入力部110は、検索対象である文字を表す検索キーワード(検索文字)の入力を受け付ける。この受け付けは、例えば、電子チラシを参照するユーザの端末装置からネットワークを介して送信される検索キーワードを受信することによって行う。
検索部109は、入力部110から入力される検索キーワードを、解析文字情報記憶部108から検索する。例えば、検索部109は、入力部110を介して検索キーワード「トマト」が入力された場合、解析文字情報記憶部108に記憶されている情報のうち単語情報(文字情報)として「トマト」があるか否かを検索する。検索部109は、解析文字情報記憶部108に記憶されている単語情報(文字情報)として「トマト」を検索すると、検索された「トマト」に対応付けられた情報として位置情報505〜507を検出する。
検索文字情報出力部111は、検索部109によって検索された単語情報(文字情報)と、当該単語情報(文字情報)と対応付けられている位置情報とを出力する。例えば、検索文字情報出力部111は、検索部109によって単語情報(文字情報)「トマト」が検索された場合、「トマト」と対応付けて解析文字情報記憶部108に記憶されている位置情報505〜507を、単語情報(文字情報)「トマト」の位置情報として出力する。
The
The
The search character
類似文字記憶部112は、互いに類似する類似文字を含む類似文字群を、少なくとも1つ記憶する。例えば、類似文字記憶部112は、図7に示す通り、類似文字群701として、カタカナの「ん」である「ン」と、カタカナの「そ」である「ソ」と、カタカナの「の」である「ノ」を記憶し、類似文字群702として、音を伸ばすことを意味する長音符「ー」、ダッシュ記号「―」、漢数字の「いち」である「一」、マイナス記号「−」を記憶する。
The similar
検索部109は、入力部110を介して入力された検索キーワード(検索文字)が類似文字を含んでいるか否かを判断し、含んでいる場合、検索キーワードに含まれる類似文字と、類似文字記憶部112に記憶されている類似文字群に含まれる他の類似文字とを置き換えた類似検索キーワード(類似検索文字)を生成する。また、検索部109は、生成した類似検索キーワードと検索キーワードに基づき、類似検索キーワードと対応付けられている文字情報、および検索キーワードと対応付けられている文字情報を、解析文字情報記憶部108から検索する。
例えば、検索部109は、入力部110を介して検索キーワード「ラーメン」が入力された場合、「ラーメン」は類似文字「ー」と「ン」を含んでいることを検出する。検索部109は、検索キーワード「ラーメン」に含まれる類似文字「ー」と「ン」に基づき、類似文字記憶部112に記憶されている類似文字群701,702を検出し、この類似文字群701,702に含まれる他の類似文字と検索キーワード「ラーメン」に含まれる類似文字とをそれぞれ置き換えた類似検索キーワードを生成する。例えば、検索部109は、「ラーメン」「ラーメソ」「ラ−メン」「ラ−メソ」等の類似検索キーワードを生成し、生成した複数の類似検索キーワードと検索キーワード「ラーメン」と対応付けられている文字情報を、解析文字情報記憶部108から検索する。
The
For example, when the search keyword “ramen” is input via the
次に、図8を用いて、本発明に係るデータ生成装置のデータ生成方法の一例について説明する。
図8に示す通り、読取部101は、例えば、複数の色で印刷された文字(商品名等)および画像(商品画像等)を含むチラシを読み取り、画像データ200を生成する(ステップST1)。次いで、例えば、色設定部102が、画像データ200に基づき、上位5色(黒色、青色、赤色、白色、黄色)の複数の抽出色を、色画像データ生成部103によって利用される抽出対象として、色画像データ生成部103に出力する(ステップST2)。ここで、ステップST2では、色設定部102によらず、予め定められた色を抽出対象として、操作部(図示せず)を介して画像データ生成部103に入力してもよく、あるいは他の外部装置から色画像データ生成部103に予め定められた色を抽出色として出力しても良い。
Next, an example of the data generation method of the data generation apparatus according to the present invention will be described with reference to FIG.
As shown in FIG. 8, the
そして、色画像データ生成部103は、例えば色設定部102から入力されている抽出色に基づき、抽出色毎に画像データを抽出し、複数の色画像データを生成する(ステップST3)。すなわち、色画像データ生成部103は、各抽出色(黒色、青色、赤色、白色、黄色)で印刷されている画像データを抽出色毎に分離し、黒画像データ201、青画像データ202、赤画像データ203、白画像データ204、および黄画像データ205を生成する。これによって、抽出色毎の2値化された画像データが生成される。
Then, the color image
次いで、画像処理部104は、色画像データ生成部103によって抽出された黒画像データ201、青画像データ202、赤画像データ203、白画像データ204、および黄画像データ205に対して、例えば、写真領域を除去するための処理を行う(ステップST4)。そして、文字領域検出部105は、黒画像データ201、青画像データ202、赤画像データ203、白画像データ204、および黄画像データ205から、それぞれ、文字として解析される対象である解析領域300(文字領域)を検出する(ステップST5)。
解析部106は、ステップST5において検出された解析領域300の画像データを解析して、文字情報を抽出する(ステップST6)。例えば、図4に示す通り、解析部106は、解析領域300の画像データを解析することで、「ト」「マ」「ト」の文字情報405〜407を抽出し、1つの文字列である単語情報602とする。なお、解析部106は、黒画像データ201、青画像データ202、赤画像データ203、白画像データ204、および黄画像データ205のそれぞれに対して、検出された解析領域300の解析を行う。
Next, the
The
位置情報検出部107は、解析部106によって解析された文字情報(単語情報)が印刷されているチラシ内での位置を検出し、検出した位置を表す位置情報を検出する(ステップST7)。なお、位置情報検出部107は、複数の色画像データ、例えば、黒画像データ201、青画像データ202、赤画像データ203、白画像データ204、および黄画像データ205のそれぞれから、文字情報の位置を表す位置情報を検出する。例えば、位置情報検出部107は、文字情報「ト」「マ」「ト」に基づき、各文字情報405〜407の位置情報505〜507“X1L,Y1L,X1R,Y1R,X2L,Y2L,X2R,Y2R,X3L,Y3L,X3R,Y3R”を検出する。
そして、解析部106および位置情報検出部107は、解析部106によって抽出された文字情報と、位置情報検出部107によって検出された位置情報とを対応付けて、解析文字情報記憶部108に記憶させる(ステップST8)。なお、解析文字情報記憶部108は、一枚のチラシの画像データ200から生成されている、黒画像データ201、青画像データ202、赤画像データ203、白画像データ204および黄画像データ205から抽出された文字情報および位置情報は、1つの画像データ200に基づくものとして、それぞれ対応付けて記憶する。
The position
Then, the
次に、図9を参照して、本実施の形態に係るデータ生成装置のデータ検索方法の一例について説明する。
図9に示す通り、入力部110から検索キーワードが入力されると(ステップST10)、検索部109は、類似文字記憶部112を検索して、検索キーワードに含まれる類似文字が記憶されているか否かを検出する(ステップST11)。ステップST11において、検索キーワードに類似文字が含まれていることが検出された場合(ステップST11―YES)、類似文字記憶部112から検出された類似文字を含む類似文字群を読み出す(ステップST12)。例えば、検索キーワードが「ラーメン」の場合、検索部109は、類似文字記憶部112において類似文字「ー」と「ン」を検出し、「ー」を含む類似文字群と「ン」を含む類似文字群を類似文字記憶部112から読み出す。
Next, an example of a data search method of the data generation device according to the present embodiment will be described with reference to FIG.
As shown in FIG. 9, when a search keyword is input from the input unit 110 (step ST10), the
そして、検索部109は、例えば、読み出した類似文字群701に含まれる他の類似文字、カタカナの「ソ」、カタカナの「ノ」と、検索キーワードに含まれる対応する類似語「ン」と置き換えた類似検索キーワードを生成する(ステップST13)。例えば、検索部109は、「ラーメン」「ラーメソ」「ラーメノ」「ラ−メン」「ラ−メソ」「ラ−メノ」等の類似検索キーワードを生成する。
次いで、検索部109は、ステップST10において入力された検索キーワードと、ステップST13において生成した類似検索キーワードに基づき、それぞれと対応づけられている文字情報を、解析文字情報記憶部108から検索する(ステップST14)。
そして、検索文字情報出力部111は、検索部109によって検索された文字情報と、当該文字情報と対応付けられている位置情報とを出力する(ステップST15)。
Then, the
Next, the
And the search character
一方、ステップST11において、検索キーワードに類似文字が含まれていないと判断された場合(ステップST11―NO)、検索部18は、解析文字情報記憶部108から、検索キーワードに相当する文字情報を検索し(ステップST16)、相当する文字情報が検索された場合、当該文字情報と、当該文字情報と対応づけられている位置情報とを出力する。
On the other hand, when it is determined in step ST11 that the search keyword does not contain similar characters (step ST11-NO), the search unit 18 searches the analysis character
以上説明した実施形態において、検索キーワードによって電子チラシに含まれる商品等を検索し、その位置情報を得ることができる。これにより、電子チラシ上のどこに所望の商品が掲載されているかを、検索キーワードを入力することによって、商品情報がレイアウトされた位置を把握することができる。電子チラシは、A1サイズやA2サイズの折り込みチラシの印刷面を読み取ったものもあるので、表裏ともに合わせると、多数の商品が掲載されている。したがって、上述のように、検索キーワードを入力することによって簡単に商品を見つけることができる。 In the embodiment described above, it is possible to search for a product or the like included in an electronic leaflet using a search keyword and obtain position information thereof. Thereby, the position where the product information is laid out can be grasped by inputting the search keyword where the desired product is posted on the electronic leaflet. Since some electronic leaflets are obtained by reading the printed surface of an A1 size or A2 size folded leaflet, a large number of products are listed when both front and back sides are combined. Therefore, as described above, a product can be easily found by inputting a search keyword.
次に、図10、11を用いて、解析部106において検出された文字情報の文字列が連続している方向(書字方向)を検出する一例について説明する。図10は、文字列の縦方向あるいは横方向を判定する方法の一例を説明する説明図であって、図11は、傾いた文字列を認識する方法の一例を説明する説明図である。
Next, an example of detecting the direction in which the character string of the character information detected by the
まず、図10を用いて、文字列の縦方向あるいは横方向を判定する方法の一例を説明する。
解析部106は、解析領域300から複数の文字領域を検出した場合に、文字領域における各々の文字の配置状態に基づいて、縦書きであるか横書きであるかを検出し、検出した書字方向に連続する文字列を文字情報として検出する。例えば、解析部106は、図10に示すように、解析領域300に含まれた文字領域301〜307に基づき、各文字領域301〜307間の横方向(X方向)の間隔Gxおよび縦方向の間隔Gyと、各文字領域301〜307の縦横比Rxy(横サイズRxと縦サイズRyとの比)を検出し、検出された結果に基づき、各文字領域301〜307が縦書きの文字列であるか、あるいは横書きの文字列であるかを判定する。
また、解析部106は、文字領域301〜307の各文字領域間の横方向の間隔Gxおよび縦方向の間隔Gyを検出し、各文字領域301〜307における横方向の間隔Gxおよび縦方向の間隔Gyの比率を算出する。解析部106は、文字領域において、横方向の間隔Gxの方が縦方向の間隔GyよりもM(Mは、正の整数)%以上大きい場合、当該文字領域を縦書きと判断し、縦方向の間隔Gyの方が横方向の間隔GxよりもN(Nは、正の整数)%以上大きい場合、当該文字領域を横書きと判断する。
また、解析部106は、文字領域301〜307のそれぞれの横サイズRxと縦サイズRyに基づき縦横比Rxyを算出する。全ての文字領域が縦方向(Y方向)に長い長方形であれば、英文あるいは縦長の書体と判断してM%やN%に相当するパラメータを変更する。
なお、M%やN%に相当するパラメータは、チラシ内の文字の平均的なサイズや文字情報のチラシ内の出現位置の傾向等に応じて変更可能である。
First, an example of a method for determining the vertical or horizontal direction of a character string will be described with reference to FIG.
When the
Further, the
The
Note that the parameters corresponding to M% and N% can be changed according to the average size of characters in the leaflet, the tendency of the appearance position of the character information in the leaflet, and the like.
よって、図10に示すような文字画像データでは、解析部106が、文字領域301〜307を検出し、例えば、文字領域301と隣の文字領域302と横方向の間隔Gx1、文字領域301と隣の文字領域305と縦方向の間隔Gy1、文字領域305と隣の文字領域305と横方向の間隔Gx2を検出する。
解析部106は、横方向の間隔Gx1と縦方向の間隔Gy1とを比較し、縦方向の間隔Gy1が横方向の間隔Gx1に比べてN%以上大きいことを検出し、文字領域301は、文字領域302と共に横書きの文字列を構成すると判断する。
また、解析部106は、縦方向の間隔Gy1と横方向の間隔Gx1とを比較し、縦方向の間隔Gy1が横方向の間隔Gx1に比べてN%以上大きいことを検出し、文字領域301が横書きと判断できるため、文字領域301は、文字領域305とは異なる文字列であると判断する。
Therefore, in the character image data as shown in FIG. 10, the
The
The
次に、図11を用いて、傾いた文字列を認識する方法の一例を説明する。
図11に示す通り、解析部106は、解析領域300に含まれる文字領域311〜317に基づき、各文字領域311〜317間の横方向の間隔Gxおよび縦方向の間隔Gyと、各文字領域311〜317の横サイズRxと縦サイズRyを検出し、検出された結果に基づき、各文字領域311〜317が傾いた文字列であるか否かを判断する。
例えば、解析部106は、各文字領域311〜317の横方向の間隔Gxと縦方向の間隔Gyが一定値以下となるものを近接する文字領域として検出し、近接する文字領域の縦サイズRyの重なりを算出して当該重なりが一定の割合以上である場合、当該近接する文字領域が傾いた文字列であると判断する。
Next, an example of a method for recognizing a tilted character string will be described with reference to FIG.
As shown in FIG. 11, the
For example, the
図11に示す例を用いて説明すると、解析部106は、横方向の間隔Gxおよび縦方向の間隔Gyに基づき、文字領域311と文字領域312、および、文字領域311と文字領域315とがそれぞれ近接している文字領域であると判断する。解析部106は、近接する2つの文字領域311の縦サイズRy1と文字領域312の縦サイズRy2とが縦方向に重なりあっている重複サイズW1を算出し、文字領域311の縦サイズRy1に対して重複サイズW1がL(Lは、100よりも小さい数)%以上であるか否かを判断する。ここで、重複サイズW1がL%以上であるため、解析部106は、文字領域画像311と312とが横方向に連続する傾いた文字列であると判断する。
一方、解析部106は、近接する2つの文字領域311の縦サイズRy1と文字領域315の縦サイズRy3とが縦方向に重なりあっている重複サイズを算出するが、図11に示す通り、文字領域311と315とは重なりあっている領域がないため、異なる文字列であると判断する。
このようにして、解析部106は、傾いた文字列として「北海道産」という文字列と、「トマト」という文字列を検出することができる。
Referring to the example shown in FIG. 11, the
On the other hand, the
In this way, the
なお、本実施の形態に係る解析部106は、一般的な文字認識の技術、例えば、OCR(Optical Character Reader)に利用されている技術が利用可能である。また、本実施の形態に係る生成装置100の文字抽出の精度を確認したところ、従来の白黒の画像データに基づき黒色に対する2値認識を行った場合の文字抽出の精度は、正答率が約40%であったが、本実施の形態に係るデータ生成装置100による文字抽出の精度は、従来の方法に比べて倍増した。
The
上述の通り、本実施の形態に係るデータ生成装置100は、チラシのように複数色で印刷された文字や画像を含む印刷物から、抽出色毎に分離して複数の色画像データを生成し、色画像データ毎に文字認識を行うことにより、複数色を利用した写真等と混じって文字が印刷されている印刷物からの文字抽出の精度を高めることができる。例えば、写真の上に黒の文字が表示されている印刷物にあっては、カラーで表示されている状態ではこれらを区別して認識することができるが、共に濃い色合である場合、あるいは、背景の写真が複雑な画像である場合、この印刷物を2値化することで文字と写真の境界部分の認識が困難となる。本発明は上記構成を備えることによって、上述のような問題を解決し、複数色で文字と写真が重なって印刷されている印刷物であっても、文字部分を抽出し、文字認識を行うことができる。
As described above, the
また、本実施の形態に係るデータ生成装置100は、抽出された文字情報と印刷物における位置情報とを対応付けて解析文字情報記憶部108に記憶することで、読取部101によって読み取られた印刷物の画像データと抽出された文字情報とを対応付けて利用することが可能となり、抽出された文字情報を様々な方法で有効に活用することができる。例えば、抽出された文字情報と印刷物における位置情報とが対応付けられた解析文字情報記憶部108の情報を利用して、検索部109によって入力された検索キーワードに対応する印刷物を表示することができる。また、検索キーワードが記載されている印刷物内の位置を特定して表示部に表示することができる。
さらに、抽出された文字情報と当該文字情報の印刷物における位置情報とを対応付けて解析文字情報記憶部108に記憶させておくことにより、抽出されない写真等の画像と抽出された文字とを対応付けて管理することができる。
In addition, the
Further, the extracted character information and the positional information of the character information in the printed matter are associated with each other and stored in the analysis character
また、本実施の形態に係るデータ生成装置100は、画像処理部104によって、複数の色画像データに対して、文字情報と認識しない画像データを除去する画像処理を行うことにより、文字認識の精度を高めることができる。
さらに、本実施の形態に係るデータ生成装置100は、文字列が縦書きであるかあるいは横書きであるかを検出し、検出された方向に連続する文字列を文字情報として検出することができる。さらに、直交する印刷物の縦横方向と異なる方向に文字が連続している「傾いた文字列」についても、傾いた文字列であることを検出することができる。これにより、縦書きの文字列、横書きの文字列および傾いた文字列が混じっているチラシのような印刷物であっても、文字を特定の単語や意味のある文字列として抽出することができる。
また、本実施の形態に係るデータ生成装置100は、互いに類似する類似文字を含む類似郡を少なくとも1つ記憶する類似文字記憶部112をさらに備えることにより、文字列とて抽出された文字情報が、部分的に誤った文字認識を行った場合であっても、類似する文字情報を検索することができる。
In addition, the
Furthermore, the
In addition, the
なお、データ生成装置100は、色設定部102を備えず、予め選択された任意の抽出色が、記憶部(図示せず)に記憶されており、色画像データ生成部103が、当該抽出色を読み出すものであってもよい。
Note that the
100・・・データ生成装置、101・・・読取部、102・・・色設定部、103・・・色画像データ生成部、104・・・画像処理部、105・・・文字領域検出部、106・・・解析部、107・・・位置情報検出部、108・・・解析文字情報記憶部、109・・・検索部、110・・・入力部、111・・・検索文字情報出力部、112・・・類似文字記憶部、113・・・解析文字情報出力部
DESCRIPTION OF
Claims (7)
前記読取部が生成した画像データを色ごとに分離し、複数の色ごとの画像データである色画像データを生成する色画像データ生成部と、
前記色画像データ生成部が生成した前記色画像データの各々から文字として認識される文字領域を検出する文字領域検出部と、
前記文字領域検出部が検出した前記色画像データにおける文字領域を解析し、当該文字領域に含まれる文字情報を検出する解析部と、
前記解析部が文字情報を検出した場合、解析対象とした文字領域の前記画像データにおける座標を示す位置情報を検出する位置情報検出部と、
前記解析部が検出した文字情報と、前記位置情報検出部が検出した位置情報とを関連付けて出力する解析文字情報出力部と、
を備えることを特徴とするデータ生成装置。 A reading unit that reads a printed material including an image representing characters in a plurality of colors and generates image data;
A color image data generation unit that separates the image data generated by the reading unit for each color and generates color image data that is image data for a plurality of colors;
A character region detection unit for detecting a character region recognized as a character from each of the color image data generated by the color image data generation unit;
Analyzing a character region in the color image data detected by the character region detection unit, and detecting character information included in the character region;
When the analysis unit detects character information, a position information detection unit that detects position information indicating coordinates in the image data of the character region to be analyzed;
An analysis character information output unit that outputs the character information detected by the analysis unit in association with the position information detected by the position information detection unit;
A data generation device comprising:
予め定められた色、あるいは、前記画像データの色ヒストグラムから予め定められる上位の色について、画像データを色ごとに分離して色画像データを生成する
ことを特徴とする請求項1に記載のデータ生成装置。 The color image data generation unit
2. The data according to claim 1, wherein color data is generated by separating image data for each color for a predetermined color or a higher-order color predetermined from a color histogram of the image data. Generator.
前記画像データの濃淡から検出されるエッジ情報が前記色画像データ中の各々の領域にどの程度含まれているかを比較することにより、前記文字領域を検出する
ことを特徴とする請求項1または2に記載のデータ生成装置。 The character area detection unit
The character region is detected by comparing how much edge information detected from the density of the image data is included in each region in the color image data. The data generation device described in 1.
前記文字領域から複数の文字を検出した場合に、前記文字領域における各々の文字の配置状態に基づいて、縦書きであるか横書きであるかを検出し、検出した書字方向に連続する文字列を文字情報として検出する
ことを特徴とする請求項1から3のいずれかに記載のデータ生成装置。 The analysis unit
When a plurality of characters are detected from the character area, whether the character is written vertically or horizontally is detected based on the arrangement state of each character in the character area, and the character string continuous in the detected writing direction The data generation device according to claim 1, wherein the data generation device is detected as character information.
前記解析部が検出した文字情報と、前記位置情報検出部が検出した位置情報とを対応付けて記憶する解析文字情報記憶部と、
前記入力部に入力された検索文字に対応する位置情報を前記解析文字情報記憶部から検索する検索部と、
前記検索部によって検索された位置情報を出力する検索文字情報出力部と、を有する
ことを特徴とする請求項1から4のいずれかに記載のデータ生成装置。 An input unit for inputting a search character representing a character to be searched;
An analysis character information storage unit that stores the character information detected by the analysis unit and the position information detected by the position information detection unit in association with each other;
A search unit that searches the analysis character information storage unit for position information corresponding to the search character input to the input unit;
The data generation device according to claim 1, further comprising: a search character information output unit that outputs position information searched by the search unit.
前記検索部は、
前記類似文字記憶部に記憶された類似文字の中に前記入力部に入力された前記検索文字に対応する類似文字があるか否かを検出し、類似文字がある場合、前記検索文字のうち類似文字に該当する文字を前記検出された類似文字が含まれる類似文字群のうち他の前記類似文字に置き換えた類似検索文字を生成し、生成した類似検索文字と前記検索文字に基づき、前記解析文字情報記憶部から検索する
ことを特徴とする請求項5に記載のデータ生成装置。 A similar character storage unit that stores a similar character group including similar characters that are similar to each other;
The search unit
It is detected whether there is a similar character corresponding to the search character input to the input unit among the similar characters stored in the similar character storage unit. A similar search character is generated by replacing a character corresponding to a character with another similar character in a group of similar characters including the detected similar character, and the analysis character is based on the generated similar search character and the search character. It searches from an information storage part. The data generation device according to claim 5 characterized by things.
色画像データ生成部が、前記読取部が生成した画像データを色ごとに分離し、複数の色ごとの画像データである色画像データを生成し、
文字領域検出部が、前記色画像データ生成部が生成した前記色画像データの各々から文字として認識される文字領域を検出し、
解析部が、前記文字領域検出部が検出した前記色画像データにおける文字領域を解析し、当該文字領域に含まれる文字情報を検出し、
位置情報検出部が、前記解析部が文字情報を検出した場合、解析対象とした文字領域の前記画像データにおける座標を示す位置情報を検出し、
解析文字情報出力部が、前記解析部が検出した文字情報と、前記位置情報検出部が検出した位置情報とを関連付けて出力する
ことを特徴とするデータ生成方法。 The reading unit reads a printed material including an image representing characters in a plurality of colors and generates image data.
A color image data generation unit separates the image data generated by the reading unit for each color, and generates color image data that is image data for a plurality of colors,
A character region detection unit detects a character region recognized as a character from each of the color image data generated by the color image data generation unit;
The analysis unit analyzes the character region in the color image data detected by the character region detection unit, detects character information included in the character region,
When the position information detection unit detects character information, the position information detection unit detects position information indicating coordinates in the image data of the character region to be analyzed;
The analysis character information output unit outputs the character information detected by the analysis unit in association with the position information detected by the position information detection unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009074648A JP5368141B2 (en) | 2009-03-25 | 2009-03-25 | Data generating apparatus and data generating method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009074648A JP5368141B2 (en) | 2009-03-25 | 2009-03-25 | Data generating apparatus and data generating method |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013189774A Division JP2014026660A (en) | 2013-09-12 | 2013-09-12 | Data generation device and data generation method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010225112A true JP2010225112A (en) | 2010-10-07 |
JP5368141B2 JP5368141B2 (en) | 2013-12-18 |
Family
ID=43042198
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009074648A Active JP5368141B2 (en) | 2009-03-25 | 2009-03-25 | Data generating apparatus and data generating method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5368141B2 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9619700B2 (en) | 2012-08-24 | 2017-04-11 | Rakuten, Inc. | Image processing device, image processing method, program, and information storage medium |
CN111783756A (en) * | 2019-04-03 | 2020-10-16 | 北京市商汤科技开发有限公司 | Text recognition method and device, electronic equipment and storage medium |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0393355A (en) * | 1989-09-06 | 1991-04-18 | Ricoh Co Ltd | Character area separation system |
JPH06111057A (en) * | 1992-09-25 | 1994-04-22 | Toshiba Corp | Optical character reader |
JPH06183175A (en) * | 1992-02-27 | 1994-07-05 | Ricoh Co Ltd | Method and device for binding corresponding to correct binding position |
JPH0916769A (en) * | 1995-06-27 | 1997-01-17 | Canon Inc | Device and method for processing image |
JPH11167642A (en) * | 1997-12-03 | 1999-06-22 | Omron Corp | Picture feature extraction method and device, and picture retrieval method and device |
JP2004021765A (en) * | 2002-06-19 | 2004-01-22 | Pfu Ltd | Image recognition method |
JP2005259017A (en) * | 2004-03-15 | 2005-09-22 | Ricoh Co Ltd | Image processing apparatus, image processing program and storage medium |
JP2006107032A (en) * | 2004-10-04 | 2006-04-20 | Canon Inc | Image processor and method |
JP2008071316A (en) * | 2006-09-15 | 2008-03-27 | Ricoh Co Ltd | Print information monitoring device, print information monitoring method and program |
JP2008077454A (en) * | 2006-09-22 | 2008-04-03 | Matsushita Electric Ind Co Ltd | Title extraction device, image reading device, title extraction method, and title extraction program |
-
2009
- 2009-03-25 JP JP2009074648A patent/JP5368141B2/en active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0393355A (en) * | 1989-09-06 | 1991-04-18 | Ricoh Co Ltd | Character area separation system |
JPH06183175A (en) * | 1992-02-27 | 1994-07-05 | Ricoh Co Ltd | Method and device for binding corresponding to correct binding position |
JPH06111057A (en) * | 1992-09-25 | 1994-04-22 | Toshiba Corp | Optical character reader |
JPH0916769A (en) * | 1995-06-27 | 1997-01-17 | Canon Inc | Device and method for processing image |
JPH11167642A (en) * | 1997-12-03 | 1999-06-22 | Omron Corp | Picture feature extraction method and device, and picture retrieval method and device |
JP2004021765A (en) * | 2002-06-19 | 2004-01-22 | Pfu Ltd | Image recognition method |
JP2005259017A (en) * | 2004-03-15 | 2005-09-22 | Ricoh Co Ltd | Image processing apparatus, image processing program and storage medium |
JP2006107032A (en) * | 2004-10-04 | 2006-04-20 | Canon Inc | Image processor and method |
JP2008071316A (en) * | 2006-09-15 | 2008-03-27 | Ricoh Co Ltd | Print information monitoring device, print information monitoring method and program |
JP2008077454A (en) * | 2006-09-22 | 2008-04-03 | Matsushita Electric Ind Co Ltd | Title extraction device, image reading device, title extraction method, and title extraction program |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9619700B2 (en) | 2012-08-24 | 2017-04-11 | Rakuten, Inc. | Image processing device, image processing method, program, and information storage medium |
CN111783756A (en) * | 2019-04-03 | 2020-10-16 | 北京市商汤科技开发有限公司 | Text recognition method and device, electronic equipment and storage medium |
JP2021520561A (en) * | 2019-04-03 | 2021-08-19 | ベイジン センスタイム テクノロジー デベロップメント カンパニー, リミテッド | Text recognition |
JP7066007B2 (en) | 2019-04-03 | 2022-05-12 | ベイジン センスタイム テクノロジー デベロップメント カンパニー, リミテッド | Text recognition |
CN111783756B (en) * | 2019-04-03 | 2024-04-16 | 北京市商汤科技开发有限公司 | Text recognition method and device, electronic equipment and storage medium |
Also Published As
Publication number | Publication date |
---|---|
JP5368141B2 (en) | 2013-12-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI631514B (en) | Method and system for marking recognition based on mobile terminal | |
CN103154974B (en) | Character recognition device, character recognition method and character recognition system | |
CN104603833B (en) | Method and system for linking printing object with digital content | |
JP2014026660A (en) | Data generation device and data generation method | |
JP5938393B2 (en) | Image processing device | |
CN101751656B (en) | Watermark embedding and extraction method and device | |
CN111192346B (en) | Electronic menu generation method, device and equipment | |
CN115171143A (en) | Method and system for extracting full-face information of electronic invoice | |
JP6578858B2 (en) | Information processing apparatus and program | |
JP5368141B2 (en) | Data generating apparatus and data generating method | |
TWI222035B (en) | Verifying results of automatic image recognition | |
JP7006059B2 (en) | Image processing equipment, image processing methods, and programs | |
US20100134851A1 (en) | Image processing apparatus, method for performing image processing and computer readable medium | |
US20060140442A1 (en) | Steganographic method | |
Nor et al. | Image segmentation and text extraction: application to the extraction of textual information in scene images | |
JP6058042B2 (en) | Image processing device | |
CN106547891A (en) | For the quick visualization method of the pictured text message of palm display device | |
JP2009200794A (en) | Document alteration detection program and alteration detection apparatus | |
RU2431192C1 (en) | Method of inserting secret digital message into printed documents and extracting said message | |
JP5445740B2 (en) | Image processing apparatus, image processing system, and processing program | |
JP7135785B2 (en) | Data generation device, data generation method and program | |
JP2009182530A (en) | Business processing execution support device | |
WO2019119030A1 (en) | Image analysis | |
JP5277750B2 (en) | Image processing program, image processing apparatus, and image processing system | |
Kumar et al. | A comparative Analysis of Feature Extraction Algorithms and Deep Learning Techniques for Detection from Natural Images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120220 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120531 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120612 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120813 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20120814 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130205 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130408 Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20130408 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130813 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130912 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5368141 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313115 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |