JP2019191776A - 情報管理装置及び情報管理方法 - Google Patents

Abstract

【課題】速報性が高い情報を容易に活用することができる情報管理装置及び情報管理方法を提供することである。【解決手段】実施形態の情報管理装置は、文字列認識部と、スクリーニング部と、解析分類部とを持つ。文字列認識部は、速報性が高い情報を含む映像又は画像内から文字列が表示される情報表示領域内に表示されている文字列を文字認識処理によって取得する。スクリーニング部は、前記文字列認識部によって取得された前記文字列において、前記文字列内の重複文字及び重複文字列の削除と、前記文字列の長さの判定とのいずれか行う。解析分類部は、前記スクリーニング部による処理後の文字列を、予め設定されたキーワードに基づいて、前記文字列認識部によって取得された前記文字列をいずれかの種別に分類し、前記文字列と、前記種別とを対応付けて記憶部に記憶する。【選択図】図２

Description

本発明の実施形態は、情報管理装置及び情報管理方法に関する。

地震、津波、異常気象等の災害に関する緊急情報の伝達手段としては、防災無線システムや、緊急メール等の様々なシステムが運用されている。一方、緊急情報については、テレビ放送やラジオ放送等の放送メディアも、速報等の形態で放送を行っている。従来、これらの放送メディアから災害等に関する緊急情報を収集する技術として、所定のキーワードを含む音声や映像等の入力情報が得られると、得られた入力情報を記憶装置に蓄積する技術があった。しかしながら、従来技術では、緊急情報のように速報性が高い情報を、取得した状態のままで記憶装置に保存しているため、後日活用するためには多くの時間や手間がかかってしまう場合があった。

特開２００７−２６６８００号公報 特開２００３−２５５９７９号公報 特開２０１３−３１００９号公報

本発明が解決しようとする課題は、速報性が高い情報を容易に活用することができる情報管理装置及び情報管理方法を提供することである。

実施形態の情報管理装置は、文字列認識部と、スクリーニング部と、解析分類部とを持つ。文字列認識部は、速報性が高い情報を含む映像又は画像内から文字列が表示される情報表示領域内に表示されている文字列を文字認識処理によって取得する。スクリーニング部は、前記文字列認識部によって取得された前記文字列において、前記文字列内の重複文字及び重複文字列の削除と、前記文字列の長さの判定とのいずれか行う。解析分類部は、前記スクリーニング部による処理後の文字列を、予め設定されたキーワードに基づいて、前記文字列認識部によって取得された前記文字列をいずれかの種別に分類し、前記文字列と、前記種別とを対応付けて記憶部に記憶する。

実施形態における情報管理システム１００のシステム構成を示す図。 第１の実施形態における情報管理装置の機能構成を表す概略ブロック図。 第１の実施形態における情報管理装置の処理の流れを示すフローチャート。 第１の実施形態における設定情報テーブルの一例を示す図。 第１の実施形態における文字列認識部が行う画像処理を説明するための図。 第１の実施形態における分類結果の一例を示す図。 第１の実施形態におけるスクリーニング部が行う文字動作判定処理の流れを示すフローチャート。 第１の実施形態における文字列認識部による処理を説明するための図。 第２の実施形態における情報管理装置の機能構成を表す概略ブロック図。 第２の実施形態における情報管理システムの処理の流れを示すシーケンス図。 第２の実施形態における情報管理システムの処理の流れを示すシーケンス図。

以下、実施形態の情報管理装置及び情報管理方法を、図面を参照して説明する。
図１は、実施形態における情報管理システム１００のシステム構成を示す図である。情報管理システム１００は、速報性が高い文字情報を含む映像又は画像情報から文字列を抽出し、画像情報と、文字列と、文字列から判明した内容に関する情報とを対応付けて管理、活用するためのシステムである。文字情報は、例えば緊急避難警報等の警報又は注意報に関する情報や、選挙に関する情報や、市場（マーケット）に関する情報等を示す。速報性が高い文字情報を含む映像又は画像とは、例えば放送波（Ｌ字テロップや字幕等）、ＣＣＴＶ（Closed-circuit Television）カメラ映像、ネットＴＶの映像、災害時又は事故時に提供される緊急情報等のように特定の場所に文字情報を含む映像又は画像である。

情報管理システム１００は、画像取得装置１０、情報管理装置２０、管理サーバ３０、パーソナルコンピュータ４０及び端末装置５０を備える。
画像取得装置１０は、外部から画像情報を受信し、受信した画像情報に基づいて映像又は画像を復号する装置である。画像取得装置１０は、例えばチューナーや映像受信装置である。画像取得装置１０がチューナーである場合、画像取得装置１０はアンテナを介してテレビ放送の放送波を画像情報として受信する。また、画像取得装置１０が映像受信装置である場合、画像取得装置１０はネットワークを介して監視カメラや映像を保持している装置から送信された映像データ又は画像データを画像情報として受信する。ネットワークは、例えばインターネットや無線ＬＡＮ（Local Area Network）である。

情報管理装置２０は、画像取得装置１０によって復号された映像又は画像から文字列を抽出し、予め設定されたキーワードに基づいて、抽出した文字列をいずれかの種別に分類し、少なくとも文字列と、分類種別とを対応付けて管理する装置である。情報管理装置２０は、管理サーバ３０、パーソナルコンピュータ４０及び端末装置５０からの要求に応じて、管理している情報を要求元の装置に提供する。情報管理装置２０は、パーソナルコンピュータ等の情報処理装置を用いて構成される。

管理サーバ３０は、例えば国の機関（例えば国交省）や地方公共団体の機関によって保有される。管理サーバ３０は、例えば情報管理装置２０によって提供される情報を取得し、取得した情報に基づいてユーザに対し警報等を出力する。

パーソナルコンピュータ４０は、情報管理装置２０によって提供される情報を取得し、取得した情報に基づいてユーザに対し警報等を出力する。パーソナルコンピュータ４０は、情報管理システム１００の管理者、防災に関わる人物及び地域の住人等によって操作される。
端末装置５０は、情報管理装置２０によって提供される情報を取得し、取得した情報に基づいてユーザに対し警報等を出力する。パーソナルコンピュータ４０は、情報管理システム１００の管理者、防災に関わる人物及び地域の住人等によって操作される持ち運び可能な装置である。

（第１の実施形態）
第１の実施形態は、ＣＣＴＶカメラ映像のように常時取得される映像又は画像から文字列を抽出する実施形態である。
図２は、第１の実施形態における情報管理装置２０の機能構成を表す概略ブロック図である。情報管理装置２０は、バスで接続されたＣＰＵ（Central Processing Unit）やメモリや補助記憶装置などを備え、情報管理プログラムを実行する。情報管理装置２０は、情報管理プログラムの実行によって、設定部２０１、キャプチャ部２０２、画像蓄積部２０３、文字列認識部２０４、スクリーニング部２０５、解析分類部２０６、分類結果記憶部２０７、提供部２０８、編集部２０９を備える装置として機能する。なお、情報管理装置２０の各機能の全て又は一部は、ＡＳＩＣ（Application Specific Integrated Circuit）やＰＬＤ（Programmable Logic Device）やＦＰＧＡ（Field Programmable Gate Array）等のハードウェアを用いて実現されてもよい。情報管理プログラムは、コンピュータ読み取り可能な記録媒体に記録されてもよい。コンピュータ読み取り可能な記録媒体とは、例えばフレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置である。情報管理プログラムは、電気通信回線を介して送信されてもよい。

設定部２０１は、画像取得装置１０、キャプチャ部２０２及びスクリーニング部２０５に対して処理に関する設定を行う機能部である。処理に関する設定とは、各機能部が処理を行う上で定められた条件である。例えば、設定部２０１は、画像情報を取得するための設定を画像取得装置１０に対して行う。また、例えば、設定部２０１は、映像又は画像の取得間隔及びマスク位置の設定をキャプチャ部２０２に対して行う。本実施形態におけるマスク位置は、画像情報の取得元に応じて設定可能である。なお、マスク位置は、映像又は画像内において文字列が表示される情報表示領域以外の領域をマスクするように設定される。

キャプチャ部２０２は、画像取得装置１０によって復号された映像又は画像を取得する機能部である。例えば、キャプチャ部２０２は、設定部２０１によって設定された取得間隔で映像又は画像を取得する。なお、キャプチャ部２０２は、映像が取得された場合には、映像を画像に変換する。キャプチャ部２０２は、設定部２０１によって設定されたマスク位置に基づいて、マスク処理を行うことによって画像内の情報表示領域以外の領域をマスクする。

画像蓄積部２０３は、キャプチャ部２０２によってマスク処理が施された画像を蓄積する機能部である。画像蓄積部２０３が蓄積する画像は、速報性が高い情報を含む画像である。画像蓄積部２０３は、磁気ハードディスク装置や半導体記憶装置などの記憶装置を用いて構成される。

文字列認識部２０４は、画像蓄積部２０３に記憶されている画像に対して文字認識処理を行うことによって情報表示領域内に表示されている文字列を取得する機能部である。
スクリーニング部２０５は、文字列認識部２０４によって取得された文字列に対して、文字列内の重複文字又は重複文字列の削除と、文字列の長さの判定とのいずれかを行う機能部である。

解析分類部２０６は、スクリーニング部２０５による処理後の文字列を、予め設定されたキーワードに基づいて分類する機能部である。解析分類部２０６は、予め設定されたキーワードに基づいて、文字列をいずれかの種別に分類し、少なくとも文字列と、分類種別とを対応付けて分類結果として分類結果記憶部２０７に記憶する。
分類結果記憶部２０７は、分類結果を記憶する機能部である。分類結果記憶部２０７は、磁気ハードディスク装置や半導体記憶装置などの記憶装置を用いて構成される。

提供部２０８は、要求に応じて、分類結果記憶部２０７に記憶されている分類結果のうち、要求されている分類結果を要求元に対して提供する機能部である。提供部２０８は、例えば分類結果を含むＷＥＢページの画面のデータ（例えばＨＴＭＬ（HyperText Markup Language）データ）を生成し、要求元に対してデータを提供する。
編集部２０９は、管理者等のユーザの操作に応じて、分類結果記憶部２０７に記憶されている分類結果のうち文字列を編集する機能部である。

図３は、第１の実施形態における情報管理装置２０の処理の流れを示すフローチャートである。
ステップＳ１０１において、情報管理装置２０の設定部２０１は、画像取得装置１０及びキャプチャ部２０２に対して処理に関する設定を行う。例えば、設定部２０１は、事前に管理者の指示に従って設定情報（映像又は画像のいずれを取得するのか、対象機器、ＵＲＬ（Uniform Resource Locator）等）を画像取得装置１０に対して設定する。画像取得装置１０は、例えばＵＲＬが設定された場合には、設定されたＵＲＬにアクセスして画像情報を取得する。この際、画像取得装置１０は、設定された内容に応じて映像又は画像のいずれかを含む画像情報を取得する。画像取得装置１０は、例えば対象機器としてチューナー１が設定された場合には、チューナー１として動作する。画像取得装置１０は、取得した画像情報を復号することによって映像又は画像を取得し、取得した映像又は画像をキャプチャ部２０２に出力する。
また、例えば、設定部２０１は、図４に示す設定情報テーブルを用いて、画像取得装置１０の設定に応じて取得間隔及びマスク位置の設定をキャプチャ部２０２に対して行う。

図４は、設定情報テーブルの一例を示す図である。
図４に示すように、設定情報テーブルには、設定例、種別、映像／画像、取得間隔、取得情報源及び文字認識範囲の各値が登録されている。設定例の値は、画像情報の取得元を表す。図４に示す例では、設定例は、△△放送、○○放送、○○事務所カメラ及び△△ネット放送である。種別の値は、画像情報の取得元の種別を表す。図４に示す例では、種別は、放送波、監視カメラ、インターネット及び動画等である。映像／画像の値は、画像情報が映像であるのか画像であるのかを表す。取得間隔の値は、映像又は画像を取得する間隔を表す。取得情報源の値は、映像又は画像の取得元を表す。文字認識範囲の値は、情報表示領域の範囲を表す。図４に示す例では、領域１〜５で示される領域が、情報表示領域の範囲である。そして、領域１〜５で示される領域以外の領域が、マスクの対象となる領域である。

図４において、画像取得装置１０がチューナー１になった場合には、取得間隔（映像から画像をキャプチャする間隔）が２秒であり、領域１で示される範囲（画像の上部と左部）以外の領域がマスクの対象となる領域であることが表されている。また、取得情報源が３０秒に１回文章が変わる電光掲示板を監視する○○事務所カメラに変更された場合には、取得間隔が１０秒であり、領域４で示される範囲（電光掲示板が映る位置）以外の領域がマスクの対象となる領域であることが表されている。

図３の説明に戻り、ステップＳ１０２において、キャプチャ部２０２は、設定部２０１によって設定された取得間隔で、画像取得装置１０から映像又は画像を取得する。なお、キャプチャ部２０２は、映像の場合には映像を静止画像に変換して取得する。
ステップＳ１０３において、キャプチャ部２０２は、設定部２０１によって設定されたマスク位置に応じて、取得した画像に対してマスク処理を行う。これにより、画像内の情報表示領域以外の領域がマスクされる。キャプチャ部２０２は、マスク処理後の画像を画像蓄積部２０３に蓄積する。

ステップＳ１０４において、文字列認識部２０４は、画像蓄積部２０３に記憶されているマスク処理後の画像に対して画像処理を行う。
図５は、文字列認識部２０４が行う画像処理を説明するための図である。
図５（Ａ）は情報表示領域内に含まれる文字情報と背景とを示す図である。まず文字列認識部２０４は、情報表示領域内に含まれる文字情報の色（以下「文字色」という。）を把握する。例えば、文字列認識部２０４は、文字情報の画素値を文字色として把握する。図５（Ａ）において、情報表示領域内に含まれる文字情報は、“避難情報 ○○県△△市で避難者１００人”である。文字色は、設定部２０１によって予め設定されていてもよい。

次に、文字列認識部２０４は、文字色以外の色を、情報表示領域内の背景色に近い又は同じ色に変換する。例えば、文字列認識部２０４は、情報表示領域内において文字色の次に多い画素値を背景色として把握し、文字色以外の色を、情報表示領域内の背景色に近い又は同じ色に変換する。ここで、文字色以外の色とは、記号（図５（Ａ）の場合、太陽の記号）の色や下線の色等である。また、背景色に近い色とは、背景色を表す画素値との差が予め定められた範囲内の画素値である。
図５（Ｂ）は、文字色以外の色を情報表示領域内の背景色に近い又は同じ色に変換した後の情報表示領域を示す図である。図５（Ｂ）に示すように、文字列認識部２０４が、文字色以外の色を情報表示領域内の背景色に近い又は同じ色に変換することにより、文字色と背景色以外の色を減らすことができる。

そして、文字列認識部２０４は、文字色と、背景色に近い又は同じ色との間の色を閾値として二値化処理を行う。
図５（Ｃ）は、二値化処理後の情報表示領域を示す図である。図５（Ｃ）に示すように、二値化処理後は、文字色と、背景色に近い又は同じ色とが明確に分けられる。図５（Ｃ）では、二値化処理後に文字色が黒、背景色に近い又は同じ色が白となっているが、文字列認識部２０４は二値化処理後に文字色が白、背景色に近い又は同じ色が黒になるように二値化処理を行ってもよい。文字列認識部２０４は、背景色と文字色が最初からはっきり異なる場合には図５（Ｂ）に示す処理を省略して直接二値化処理を行っても良い。ここで、背景色と文字色が最初からはっきり異なる場合とは、文字色の画素値と、背景色の画素値とがある閾値以上の差を有している場合である。また、文字列認識部２０４は、二値化処理ではなく文字色を基準にグレイスケール変換を行っても良い。

図３に戻り、ステップＳ１０５において、文字列認識部２０４は、二値化処理を行った後に、ＯＣＲ（Optical Character Reader）による文字認識処理を行うことによって情報表示領域内の文字列を取得する。文字列認識部２０４は、取得した文字列の情報と、マスク処理後の画像とをスクリーニング部２０５に出力する。

ステップＳ１０６において、スクリーニング部２０５は、文字列認識部２０４から出力された文字列の情報に基づいて、文字動作判定処理を行う。文字動作判定処理とは、映像中の文字がどのような動きをしているのかを判定する処理である。映像中の文字は、媒体や時間帯により様々な動きで変化している。例えば、テレビ放送のＬ字テロップでは、番組が変わるごとに文章の動きが変更される可能性があり、その場合適切なタイミングでの文章切出しが難しくなる。もし、スクリーニング部２０５は、同じテロップがまだ動いていない場合には、検出した文字は重複文字になるため登録しない。

そこで、スクリーニング部２０５は、文字動作判定処理により映像中の文字が、（第１のパターン）常にスクロールしている／１画面中に１文章が納まるか、（第２のパターン）常にスクロールしている／１画面中に１文章が納まらないか、（第３のパターン）停止／移動または変化を繰り返しているかのいずれのパターンに属するのかを判定する。ただし、（第１のパターン）及び（第２のパターン）の１文章の切れ目は空白又は記号[○、／、読点、句点など]によって表されるものとする。以下、１文章の切れ目を文章切れ目と記載する。文字動作判定処理の具体的な動作については図７で説明する。

ステップＳ１０７において、スクリーニング部２０５は、文字動作判定処理により判定したパターンに応じて、１文範囲特定及び保存画像の選択を行う。具体的には、スクリーニング部２０５は、（第１のパターン）と判定した場合、文章切れ目の前後各文字列数文字（例えば、前後各文字列５文字）を記録する。次に、スクリーニング部２０５は、記録した文字列が移動し、記録した文字列の文章切れ目が現れなくなるまでマスク処理後の画像を取得する。そして、スクリーニング部２０５は、記録した文字列の文章切れ目が現れなくなったマスク処理後の画像と、取得した文字列の情報の１つ前のマスク処理後の画像と、取得した文字列の情報（文章切れ目から次の文章切れ目まで）を選択する。

また、スクリーニング部２０５は、（第２のパターン）と判定した場合、文章切れ目の前後各文字列数文字（例えば、前後各文字列５文字）を記録する。なお、（第２のパターン）の場合、１画面中に１文が収まっていないため、スクリーニング部２０５は以下のような処理を行う。文字列認識部２０４によって、同一の情報表示領域内において、所定の時間にわたって文字認識処理が繰り返し実行されることによって、情報表示領域内の文字列が更新される。そして、スクリーニング部２０５は、文字列認識部２０４から文字認識処理により取得された複数の文字列を取得し、取得した複数の文字列において各文字列における重複部分を削除し、重複しない文字列を組み合わせることによって１文の文字列を正しく再現する。次に、スクリーニング部２０５は、対象文章の文章切れ目前後各所定の文字数（例えば、５文字）が半分以上無くなるまでマスク処理した後の画像を取得する。そして、スクリーニング部２０５は、取得したマスク処理後の画像と、取得した文字列の情報とを選択する。

また、スクリーニング部２０５は、（第３のパターン）と判定した場合、取得した文字列の情報同士を比較する。例えば、スクリーニング部２０５は、時刻ｔに取得した文字列の情報と、時刻ｔ−１に取得した文字列の情報とを比較する。次に、スクリーニング部２０５は、文字列の情報同士の比較を文字列の情報が変化するまで繰り返す。そして、スクリーニング部２０５は、文字列の情報が変化したあと、１度目に文字列の情報と同じになった時、文字列は停止していると判断し、マスク処理後の画像と、取得した文字列の情報を選択する。

ステップＳ１０８において、スクリーニング部２０５は、取得した文字列の情報に基づいて、認識したテロップが、同じ内容のテロップであった場合には、文字列内の重複文字の削除を行う。ここで、過去に同様のテロップが発生していたら、過去のテロップの表示フラグを変更することで対応し、記録は残す。スクリーニング部２０５は、マスク処理後の画像と、文字列内の重複文字の削除後の文字列情報とを解析分類部２０６に出力する。

ステップＳ１０９において、解析分類部２０６は、スクリーニング部２０５から出力された文字列情報を、予め設定されたキーワードに基づいていずれかの種別に分類する。キーワードは、地名であってもよいし、特定のワード（例えば、洪水、大雨等の防災に関するワード）であってもよい。キーワードは事前に登録する他、手動または自動で設定されてもよい。手動で設定する場合、管理者が特定の地域について詳細を知りたい時や、特定の事象について特に監視したいとき、新たにキーワードの追加・削除や分類の追加・削除を行う。また、過去の情報に基づいて、自動で設定する場合、分類結果記憶部２０７にある程度分類結果が蓄積された時、解析分類部２０６は自動で読み取り文字列の検証を行う。解析分類部２０６は、文字列の中で、同じ分類の中にのみ現れる単語、かつ、同じ分類中に一定の割合以上現れる単語を分類キーワードとして自動で登録する。なお、割合は任意で設定可能である。

ステップＳ１１０において、解析分類部２０６は、分類結果を分類結果記憶部２０７に蓄積する。図６は、解析分類部２０６が分類結果記憶部２０７に蓄積する分類結果の一例を示す図である。図６に示すように、解析分類部２０６は、解析した結果を基に、ＩＤ、文章ＩＤ、日時、情報種別、場所、自称、画像パス、関連データ、参照元、表示フラグ及び最終更新日時の各値を分類結果記憶部２０７に分類結果として蓄積する。ＩＤの値は、分類結果を一意に識別するための識別情報である。文章ＩＤの値は、例えば一定時間以内に同じ文字列を分類結果記憶部２０７に蓄積する際に同じ文章ＩＤとして登録し、古いデータは非表示にする。また、一つの文で複数の情報種別として登録された時や、編集前と編集後の文章でも同じ文章ＩＤを登録する。これにより、分類結果を後から解析することに使用できる。

日時の値は、文字列の情報を蓄積した日時である。情報種別の値は、キーワードより特定した分類の内容を表す。場所の値は、キーワードより特定した場所を表す。事象の値は、文字認識により得られた内容を表す。画像パスの値は、マスク処理後の画像のパスである。関連データの値は、映像又は画像に割り当てられた情報を表す。参照元の値は、情報の入手元である。表示フラグの値は、編集前、編集後、重複文字列等の表示又は非表示の有無を示すフラグである。最終更新日時の値は、編集が行われた最終の更新日時である。

図７は、第１の実施形態におけるスクリーニング部２０５が行う文字動作判定処理の流れを示すフローチャートである。
ステップＳ２０１において、スクリーニング部２０５は、読み取った文字列を変数Ｘに入力する。
ステップＳ２０２において、スクリーニング部２０５は、次に読み取った文字列を変数Ｙに入力する。

ステップＳ２０３において、スクリーニング部２０５は、変数Ｘに入力した文字列と、変数Ｙに入力した文字列とを比較する。変数Ｘに入力した文字列と、変数Ｙに入力した文字列と同じである場合（ステップ２０３−同じ）、スクリーニング部２０５はステップＳ２０４の処理を行う。一方、変数Ｘに入力した文字列と、変数Ｙに入力した文字列と異なる場合（ステップ２０３−異なる）、スクリーニング部２０５はステップＳ２０５の処理を行う。

ステップＳ２０４において、スクリーニング部２０５は、（第３のパターン）の動きと判定する。その後、スクリーニング部２０５は、文字動作判定処理を終了する。
ステップＳ２０５において、スクリーニング部２０５は、比較回数を計測する。比較回数が第１の回数以上（例えば、５回以上）である場合（ステップ２０５−第１の回数以上）、スクリーニング部２０５はステップＳ２０７の処理を行う。一方、比較回数が第１の回数未満（例えば、５回未満）である場合（ステップ２０５−第１の回数未満）、スクリーニング部２０５はステップＳ２０６の処理を行う。

ステップＳ２０６において、スクリーニング部２０５は、変数Ｙに入力した文字列を変数Ｘに入力する。その後、スクリーニング部２０５は、ステップＳ２０２以降の処理を実行する。
ステップＳ２０７において、スクリーニング部２０５は、変数Ｙに入力した文字列を変数Ｘに入力する。
ステップＳ２０８において、スクリーニング部２０５は、次に取得した文字列を変数Ｙに入力する。

ステップＳ２０９において、スクリーニング部２０５は、変数Ｙに含まれる文字列を確認する。そして、変数Ｙに含まれる文字列が、所定の文字分（例えば、３文字）以上の空白、又は、事前に指定された記号のいずれかを含む場合（ステップ２０９−含む）、スクリーニング部２０５はステップＳ２１１の処理を行う。一方、変数Ｙに含まれる文字列が、所定の文字分（例えば、３文字）以上の空白、又は、事前に指定された記号の両方を含まない場合（ステップ２０９−含まない）、スクリーニング部２０５はステップＳ２１０の処理を行う。
ステップＳ２１０において、スクリーニング部２０５は、（第２のパターン）の動きと判定する。その後、スクリーニング部２０５は、文字動作判定処理を終了する。

ステップＳ２１１において、スクリーニング部２０５は、ステップＳ２０９の処理における変数Ｙに含まれる文字列の確認回数を計測する。変数Ｙに含まれる文字列の確認回数が第２の回数以上（例えば、５回以上）である場合（ステップ２１１−第２の回数以上）、スクリーニング部２０５はステップＳ２１２の処理を行う。一方、変数Ｙに含まれる文字列の確認回数が第２の回数未満（例えば、５回未満）である場合（ステップ２１１−第２の回数未満）、スクリーニング部２０５はステップＳ２０７の処理を行う。
ステップＳ２１２において、スクリーニング部２０５は、（第１のパターン）の動きと判定する。その後、スクリーニング部２０５は、文字動作判定処理を終了する。
なお、スクリーニング部２０５は判定後も、文字列が入力されるたびに図７のステップＳ２０２に戻り、文字列の動きに変化がないかを確認する。図７中の判定回数と次の画像の取得頻度は対象映像に合わせて変更できる。

次に、編集部２０９による処理について具体的に説明する。
編集部２０９は、要求に応じて、分類結果記憶部２０７に記憶されている分類結果における文字認識内容を編集するための編集画面を、自装置又は他の装置に表示させる。編集部２０９は、編集画面を介して文字認識内容の編集指示がなされると、編集指示に応じて分類結果記憶部２０７に記憶されている文字認識内容を、修正後の文字認識内容に修正する。そして、編集部２０９は、修正前の文字認識内容と、修正後の文字認識内容とを対応付けて分類結果記憶部２０７に記憶することによって文字認識内容を編集する。

以上のように構成された情報管理装置２０によれば、速報性が高い情報を含む映像又は画像内から文字列を取得し、取得した文字列の情報を、キーワードに対応付けて分類する。これにより、管理者は、分類した状態で文字列を確認できるため、災害時や事故発生時等の緊急時でも速報性のある情報を必要な時に必要な項目で確認することができる。また、事後に報告書等を作成する際にも、全てのデータを確認することなく容易に活用することが可能となる。そのため、速報性が高い情報を容易に活用することが可能になる。

また、情報表示領域内は、文字強調のための背景色変化や飾りがついていたり、背景画像が映りこんでいたりすることにより文字認識精度が低下してしまう場合がある。そこで、文字列認識部２０４は、文字認識処理を行う前に、文字背景に対して画像処理を行う。そのため、認識精度を向上させることができる。

（第１の実施形態における変形例）
画像取得装置１０と、情報管理装置２０とは１つの筐体に備えられてもよい。
切り出した画像中の文字列は、画像が不鮮明であることやノイズが入っていることにより、読み取り精度が悪くなることがある。これを向上させるために以下の機能を実装することができる。文字列認識部２０４は、文字輪郭が不鮮明な場合や、ノイズが多い場合、その画像は不鮮明画像と認定し、事前に設定された映像取得間隔に関わらず、次の画像の切出しを行う。

本実施形態では、文字列認識部２０４が、文字列の色を、設定部２０１による設定に基づいて把握する構成を示したが、文字列認識部２０４は情報表示領域内に含まれる文字列の色をＯＣＲにより把握するように構成されてもよい。具体的には、文字列認識部２０４は、画像蓄積部２０３に記憶されているマスク処理後の画像をＯＣＲにより文字認識処理を行う。そして、文字列認識部２０４は、文字認識処理の結果、認識した文字の色（画素値）を文字列の色として把握する。

解析分類部２０６は、分類結果記憶部２０７を参照し、編集部２０９から特定の文字を別の文字へ編集した記録に基づいて、認識間違いの特徴を抽出し、次に同じ文字が入力された際に自動で修正して登録するように構成されてもよい。例えば、編集部２０９により「太雨」という文字が「大雨」と修正された記録が複数回記録されている場合、解析分類部２０６は文字認識処理時の「大雨」の優先度を向上させるとともに、「太雨」と入力された時には自動で「大雨」に修正する。ただし、その後自動で「大雨」と変換したものを、編集にて「太雨」と変換する記録が発生した場合には自動修正を停止する。

文字列認識部２０４は、分類結果記憶部２０７を参照し、出力頻度の高い文字列、編集部２０９による編集結果に基づいて、文字列を取得するように構成されてもよい。図８は、文字列認識部２０４による処理を説明するための図である。図８に示す文字認識確率は、文字列認識部２０４がＯＣＲにより画像内の情報表示領域を読み取った際に得られる文字認識の確率である。図８に示す優先度加点は、分類結果記憶部２０７に記憶されている文字列の割合に応じた加点である。例えば、分類結果記憶部２０７に文字認識内容として記憶されている割合が高い文字列ほど加点が高くなる。図８に示す例では、文字認識内容として“豪雨”の値が分類結果記憶部２０７に記憶されている割合が最も高く、次に“大雨”の値が分類結果記憶部２０７に記憶されている割合が高く、そして“太雨”の値が分類結果記憶部２０７に記憶されている割合が最も低いことが示されている。

図８に示す編集結果に応じた加点は、編集部２０９により分類結果記憶部２０７に記憶されている文字列の編集に応じた加点である。例えば、分類結果記憶部２０７に“太雨”から“大雨”に修正された履歴がある場合には、“太雨”に対してマイナスの点数を加点し、“大雨”に対してプラスの点数を加点する。図８に示す文字認識結果は、文字認識確率と、優先度加点と、編集結果に応じた加点とを総合した結果である。

図８を例に説明すると、文字列認識部２０４が文字認識処理により情報表示表域内から読み込んだ文字列が「大雨」である確率が４８％、「太雨」である確率が５０％、「豪雨」である確率が２％であったとする。また、「大雨」、「太雨」、「豪雨」の中で分類結果記憶部２０７に文字認識内容として記憶されている割合が最も高い文字列が「豪雨」、次に割合が高い文字列が「大雨」、最も割合が低い文字列が「太雨」であり、それぞれの優先度加点が、「豪雨」が＋５点、「大雨」が＋３点、「豪雨」が＋０点とする。また、編集部２０９により“太雨”から“大雨”に修正された履歴があり、編集結果に応じた加点が「豪雨」が＋０点、「大雨」が＋１０点、「豪雨」が−１０点とする。

上記の条件の場合、文字列認識部２０４は、文字認識結果として「大雨」を６１点、「太雨」を４０点、「豪雨」を７点とし、文字認識処理の結果として情報表示領域内の文字列を「大雨」と判断する。
このように、出力頻度の高い文字列を自動で抽出することで、単語のみでなく、特定単語に伴う頻度の高い助詞からも優先度を推測することができる。また、過去に出てきた割合が高い文字列や管理者によって修正がなされた文字列等に応じた点数を含めて、文字認識処理の最終的な文字認識結果を得るため、より正確な文字列を取得することができる。

（第２の実施形態）
第２の実施形態は、不定期なタイミングで取得される映像又は画像から文字列を抽出する実施形態である。
図９は、第２の実施形態における情報管理装置２０の機能構成を表す概略ブロック図である。図９に示すように、第２の実施形態では、情報管理システム１００は、画像取得装置１０に代えて画像取得装置１０ａを備え、新たにセンサ受信部６０を備える。

センサ受信部６０は、システム停止時から稼働し、Ｊアラートや地震速報、台風位置、対象地域の雨量等のセンサ情報を監視する。センサ受信部６０は、アラームの受信、設定閾値を超える等の事象が発生した場合に、情報の出力が開始される可能性があると判断し、画像取得装置１０ａ、設定部２０１及びキャプチャ部２０２ａを自動で起動させる。
画像取得装置１０ａは、システム停止時には休止状態であり、センサ受信部６０からの指示に応じて起動する。画像取得装置１０ａは、画像取得装置１０と同様の処理を行う装置である。

情報管理装置２０ａは、バスで接続されたＣＰＵやメモリや補助記憶装置などを備え、情報管理プログラムを実行する。情報管理装置２０ａは、情報管理プログラムの実行によって、設定部２０１、キャプチャ部２０２ａ、画像蓄積部２０３、文字列認識部２０４ａ、スクリーニング部２０５、解析分類部２０６、分類結果記憶部２０７、提供部２０８、編集部２０９を備える装置として機能する。なお、情報管理装置２０ａの各機能の全て又は一部は、ＡＳＩＣ（Application Specific Integrated Circuit）やＰＬＤ（Programmable Logic Device）やＦＰＧＡ（Field Programmable Gate Array）等のハードウェアを用いて実現されてもよい。情報管理プログラムは、コンピュータ読み取り可能な記録媒体に記録されてもよい。コンピュータ読み取り可能な記録媒体とは、例えばフレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置である。情報管理プログラムは、電気通信回線を介して送信されてもよい。

情報管理装置２０ａは、キャプチャ部２０２及び文字列認識部２０４に代えてキャプチャ部２０２ａ及び文字列認識部２０４ａを備える点で情報管理装置２０と構成が異なる。情報管理装置２０ａは、他の構成については情報管理装置２０と同様である。そのため、情報管理装置２０ａ全体の説明は省略し、キャプチャ部２０２ａ及び文字列認識部２０４ａについて説明する。なお、情報管理装置２０ａの各機能部は、システム停止時には休止状態であり、所定の条件が満たされたことに応じて随時稼働状態になる。

キャプチャ部２０２ａは、キャプチャ部２０２と同様の処理を行う機能部である。キャプチャ部２０２ａは、センサ受信部６０からの指示に応じて起動する。また、キャプチャ部２０２ａは、情報表示領域を確認し、情報表示領域が指定した状態（位置／色）に変化することを認識した場合、所定の条件が満たされたと判定して文字列認識部２０４ａを起動させる。また、キャプチャ部２０２ａは、文字列認識部２０４ａを起動させた後、情報表示領域の色又は形が変化した時、情報管理装置２０の各機能部を休止状態にする。

文字列認識部２０４ａは、文字列認識部２０４と同様の処理を行う機能部である。文字列認識部２０４ａは、キャプチャ部２０２ａからの指示に応じて起動する。また、文字列認識部２０４ａは、文字認識処理により取得した文字列に、事前に指定された単語（例えば、「台風」「地震」「洪水」「避難」等の防災に関する単語）が含まれることを確認した場合、所定の条件が満たされたと判定して残りの機能部全てを起動させる。

図１０及び図１１は、第２の実施形態における情報管理システム１００の処理の流れを示すシーケンス図である。なお、図１０及び図１１の処理開始時には、センサ受信部６０は稼働状態であり、画像取得装置１０ａ及び情報管理装置２０ａは休止状態であるとする。
ステップＳ３０１において、センサ受信部６０は、センサ情報を監視する。センサ受信部６０は、アラームの受信、設定閾値を超える等の事象が発生した場合にステップＳ３０２及び３０３の処理を行う。

ステップＳ３０２において、センサ受信部６０は、装置を起動させるための起動信号を生成する。センサ受信部６０は、生成した起動信号を画像取得装置１０ａに送信する。
ステップＳ３０３において、センサ受信部６０は、生成した起動信号を設定部２０１及びキャプチャ部２０２ａに送信する。

ステップＳ３０４において、画像取得装置１０ａは、センサ受信部６０から送信された起動信号の受信に応じて起動する。
ステップＳ３０５において、設定部２０１及びキャプチャ部２０２ａは、センサ受信部６０から送信された起動信号の受信に応じて起動する。

ステップＳ３０６において、設定部２０１は画像取得装置１０ａ及びキャプチャ部２０２ａに対して設定を行う。例えば、設定部２０１は、事前に管理者の指示に従って設定情報（映像または画像、対象機器、ＵＲＬ等）を画像取得装置１０ａに対して設定する。また、例えば、設定部２０１は、図４に示す設定情報テーブルを用いて、画像取得装置１０ａに応じて取得間隔及びマスク位置の設定をキャプチャ部２０２ａに対して行う。

ステップＳ３０７において、画像取得装置１０ａは、画像情報を受信する。
ステップＳ３０８において、画像取得装置１０ａは、受信した画像情報に基づいて映像又は画像を復号する。画像取得装置１０ａは、復号した映像又は画像を情報管理装置２０ａに送信する。

ステップＳ３０９において、キャプチャ部２０２ａは、取得情報源に応じて、映像又は画像に対してマスク処理を行う。キャプチャ部２０２ａは、マスク処理後の画像を画像蓄積部２０３に蓄積する。
ステップＳ３１０において、キャプチャ部２０２ａは、情報表示領域を確認する。キャプチャ部２０２ａは、情報表示領域が、指定した状態（位置／色）に変化することを認識した場合、所定の条件が満たされたと判定して文字列認識部２０４ａを起動させる。具体的には、キャプチャ部２０２ａは、起動信号を生成し、生成した起動信号を文字列認識部２０４ａに出力する。一方、キャプチャ部２０２ａは、情報表示領域が指定した状態（位置／色）に変化してない場合、情報表示領域が指定した状態（位置／色）に変化するまでステップＳ３０９の処理を実行する。

ステップＳ３１１において、文字列認識部２０４ａは、キャプチャ部２０２ａから送信された起動信号の受信に応じて起動する。
ステップＳ３１２において、文字列認識部２０４ａは、画像蓄積部２０３に記憶されているマスク処理後の画像に対して画像処理を行う。
ステップＳ３１３において、文字列認識部２０４ａは、画像処理後に、ＯＣＲによる文字認識処理を行うことによって情報表示領域内の文字列を取得する。

ステップＳ３１４において、文字列認識部２０４ａは、文字認識処理により取得した文字列に、事前に指定された単語が含まれるか否かを確認する。文字認識処理により取得した文字列に、事前に指定された単語が含まれる場合、文字列認識部２０４ａはステップＳ３１５の処理を実行する。一方、文字認識処理により取得した文字列に、事前に指定された単語が含まれない場合、文字列認識部２０４ａは事前に指定された単語が含まれるまで取得した文字列を保持した状態で待機する。

ステップＳ３１５において、文字列認識部２０４ａは、起動信号を生成し、生成した起動信号を残りの各機能部（スクリーニング部２０５、解析分類部２０６、提供部２０８及び編集部２０９）に出力する。これにより、スクリーニング部２０５、解析分類部２０６、提供部２０８及び編集部２０９は起動する。
ステップＳ３１６において、スクリーニング部２０５は、文字列認識部２０４ａから出力された文字列の情報に基づいて、文字動作判定処理を行う。

ステップＳ３１７において、スクリーニング部２０５は、文字動作判定処理により判定したパターンに応じて、１文範囲特定及び保存画像の選択を行う。
ステップＳ３１８において、スクリーニング部２０５は、取得した文字列の情報に基づいて、文字列内の重複文字及び重複文字列の削除を行う。スクリーニング部２０５は、マスク処理後の画像と、文字列内の重複文字の削除後の文字列情報とを解析分類部２０６に出力する。

ステップＳ３１９において、解析分類部２０６は、スクリーニング部２０５から出力されたマスク処理後の画像と、文字列内の重複文字の削除後の文字列情報とを、予め設定されたキーワードに基づいて分類する。
ステップＳ３２０において、解析分類部２０６は、分類結果を分類結果記憶部２０７に蓄積する。

ステップＳ３２１において、提供部２０８は、分類結果記憶部２０７に蓄積されている分類結果を、必要に応じて管理サーバ３０、パーソナルコンピュータ４０及び端末装置５０のいずれかに提供する。
ステップＳ３２２において、キャプチャ部２０２ａは、情報表示領域を確認する。キャプチャ部２０２ａは、情報表示領域が、指定した状態（位置／色）から他の状態に変化することを認識した場合、ステップＳ３２３の処理を行う。一方、情報表示領域が、指定した状態（位置／色）から変化していない場合、キャプチャ部２０２ａは、情報表示領域が、指定した状態（位置／色）から他の状態に変化するまでの間、ステップＳ３０９の処理を継続する。

ステップＳ３２３において、キャプチャ部２０２ａは、情報管理装置２０内の各機能部を停止させるための停止信号を生成する。キャプチャ部２０２ａは、生成した停止信号を他の機能部（設定部２０１、文字列認識部２０４ａ、スクリーニング部２０５、解析分類部２０６、提供部２０８及び編集部２０９）に送信する。これにより、設定部２０１、文字列認識部２０４ａ、スクリーニング部２０５、解析分類部２０６、提供部２０８及び編集部２０９は、休止状態になる。また、キャプチャ部２０２ａは、自機能部を休止状態にする。

以上のように構成された情報管理装置２０ａによれば、第１の実施形態における情報管理装置２０と同様の効果を得ることができる。
また、情報管理装置２０ａは、常に起動している必要はなく、速報性が高い情報が出力されるタイミングで起動される。これにより、不要な画像を取得することがなくなる。したがって、意味のないデータや画像が画像蓄積部２０３に蓄積され、画像蓄積部２０３内の容量圧迫を招くことを軽減することができる。

（第１の実施形態及び第２の実施形態に共通の変形例）
情報管理装置２０及び情報管理装置２０ａと、センサ受信部６０とは一体の装置として構成されてもよい。
スクリーニング部２０５が図７のステップＳ２０３の処理で行う文字列の比較は、完全一致である必要はない。例えば、スクリーニング部２０５は、文字列が所定の割合（例えば、８割）以上一致している場合に、同じ文字列と判断するように構成されてもよい。また、所定の割合は、設定部２０１によってあらかじめ設定される。なお、所定の割合は、出力情報源毎に設定されてもよい。

提供部２０８は、分類結果記憶部２０７に記憶されている文字列のうち、任意の時刻から任意の時刻までで最も出現頻度の高い文字列を提供する。例えば、災害時のＴＶテロップに適用した際、ユーザが都道府県／市町村名を事前に判定文字として登録し、提供部２０８は最後の起動から現在までの時刻に最も多い地名を抽出し、抽出した地名の情報を提供する。これにより、利用者は現在どの地域で最も被害が大きいのかを判定する材料とすることができる。また、この情報を基にＧＩＳに表示することができる。

また、分類結果記憶部２０７には、ユーザのアクションログが記録されてもよい。アクションログのうち、ユーザの各タブへのアクセス状況（クリック数）に応じて出力するタブの順番を切り替えることができる。これにより、より重要度の高い項目が最初に表示され、より即時性を重視した情報提供が可能になる。
また、分類結果記憶部２０７に日時や情報種別を登録することで、内容に応じて利用者にデータを送信できる他、全データを時系列データとして提供することや、同様の事象ごとに分類して表示することができる。場所データを用いて地図上に表示することもできる。
また、ユーザの用途に合わせて定型フォーマットによる帳票出力（ＰＤＦ等）を行うことで、緊急時の作業を削減することもできる。

（他の適用例）
上記の各実施形態では、画像取得装置１０が受信する情報として監視カメラによって撮影された映像又は画像や放送で得られる映像又は画像を用いる構成を示したが、情報管理システム１００は、他の速報性が要求される状況（例えば、期間限定のイベントの様子の監視／広報や、大規模施設管理など）に適用することもできる。現在監視カメラでの監視やインターネットへの画像の投稿は一般的なものとなりつつあるが、その量は膨大で人の手で全てを網羅することはできない。そこで、情報管理装置２０は、映像や画像中の文字列を読み取ることで、画像内からわかる情報と画像、それに付属するコメント等の情報を紐づけることで、情報の信頼性を向上させたり、確認すべき情報の一次スクリーニングに使用したりすることができる。例えば、写真つきＳＮＳ（Social Networking Service）情報では、写真内の文字列を基に、情報表示領域の位置を特定することで、来場者の感想を即座に広告へ反映したり、トラブル等を監視したりできる。また、例えば複数人の投稿をもとに駅の混雑度を監視したり、遅延情報を読み取ったりすることもできる。また、位置情報を紐づけられた監視カメラでは、イベント等の進行度合いや仮設店舗の位置を特定したりできる。動画投稿サイトやフリマサイト等の違法行為の調査などにも活用できる。これらの情報は、顔認識技術やＧＩＳ技術と連携させることで、さらにその効果を上げることができる。

以上説明した少なくともひとつの実施形態によれば、速報性が高い情報を含む映像又は画像内から文字列が表示される情報表示領域内に表示されている文字列を文字認識処理によって取得する文字列認識部と、文字列認識部によって取得された文字列において、文字列内の重複文字及び重複文字列の削除と、文字列の長さの判定とのいずれか行うスクリーニング部と、予め設定されたキーワードに基づいて、文字列認識部によって取得された文字列を分類し、文字列と、キーワードとを対応付けて記憶部に記憶する解析分類部とを持つことにより、速報性が高い情報を容易に活用することができる。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。

１０、１０ａ…画像取得装置，２０、２０ａ…情報管理装置，３０…管理サーバ，４０…パーソナルコンピュータ，５０…端末装置，６０…センサ受信部，２０１…設定部，２０２、２０２ａ…キャプチャ部，２０３…画像蓄積部，２０４、２０４ａ…文字列認識部，２０５…スクリーニング部，２０６…解析分類部，２０７…分類結果記憶部，２０８…提供部，２０９…編集部，２１０…

Claims (10)

1. 速報性が高い情報を含む映像又は画像内から文字列が表示される情報表示領域内に表示されている文字列を文字認識処理によって取得する文字列認識部と、
   前記文字列認識部によって取得された前記文字列において、前記文字列内の重複文字及び重複文字列の削除と、前記文字列の長さの判定とのいずれか行うスクリーニング部と、
   前記スクリーニング部による処理後の文字列を、予め設定されたキーワードに基づいて、前記文字列認識部によって取得された前記文字列をいずれかの種別に分類し、前記文字列と、前記種別とを対応付けて記憶部に記憶する解析分類部と、
   を備える情報管理装置。
2. 前記文字列認識部は、前記速報性が高い情報が出力されたと判定されるまでの間、休止状態であり、前記速報性が高い情報が出力されたと判定されると起動状態となって動作を開始する、請求項１に記載の情報管理装置。
3. 前記文字列認識部は、前記情報表示領域内に含まれる文字列以外の色を、前記情報表示領域内の背景色に近い又は同じ色に変換し、前記文字列の色と、前記背景色に近い又は同じ色との間の色を閾値として二値化処理を行った後に、前記文字認識処理を行うことによって前記文字列を取得する、請求項１に記載の情報管理装置。
4. 前記文字列認識部は、前記情報表示領域内に表示されている文字列を文字認識処理した結果として得られる１又は複数の文字列の候補それぞれの認識結果の割合を示す値に、前記記憶部に記憶されている文字列を参照して得られる前記文字列の候補の出現頻度に応じた加点と、認識結果の修正に伴う前記文字列の候補の加点とを加えることによって、前記１又は複数の文字列の候補それぞれの得点を算出し、算出した前記得点が最も高い文字列の候補を前記文字列として取得する、請求項１に記載の情報管理装置。
5. 前記文字列認識部による文字認識処理の結果を編集する編集部をさらに備え、
   前記編集部は、編集を行った文字列と、編集後の文字列とを対応付けて前記記憶部に記憶する、請求項１に記載の情報管理装置。
6. 速報性が高い情報を含む映像又は画像内から文字列が表示される情報表示領域内に表示されている文字列を文字認識処理によって取得する文字列認識ステップと、
   前記文字列認識ステップにおいて取得された前記文字列において、前記文字列内の重複文字及び重複文字列の削除と、前記文字列の長さの判定とのいずれか行うスクリーニングステップと、
   前記スクリーニングステップにおける処理後の文字列を、予め設定されたキーワードに基づいて、前記文字列認識ステップにおいて取得された前記文字列をいずれかの種別に分類し、前記文字列と、前記種別とを対応付けて記憶部に記憶する解析分類ステップと、
   を有する情報管理方法。
7. 前記文字列認識ステップにおいて、前記速報性が高い情報が出力されたと判定されるまでの間、休止状態であり、前記速報性が高い情報が出力されたと判定されると起動状態となって動作を開始する、請求項６に記載の情報管理方法。
8. 前記文字列認識ステップにおいて、前記情報表示領域内に含まれる文字列以外の色を、前記情報表示領域内の背景色に近い又は同じ色に変換し、前記文字列の色と、前記背景色に近い又は同じ色との間の色を閾値として二値化処理を行った後に、前記文字認識処理を行うことによって前記文字列を取得する、請求項６に記載の情報管理方法。
9. 前記文字列認識ステップにおいて、前記情報表示領域内に表示されている文字列を文字認識処理した結果として得られる１又は複数の文字列の候補それぞれの認識結果の割合を示す値に、前記記憶部に記憶されている文字列を参照して得られる前記文字列の候補の出現頻度に応じた加点と、認識結果の修正に伴う前記文字列の候補の加点とを加えることによって、前記１又は複数の文字列の候補それぞれの得点を算出し、算出した前記得点が最も高い文字列の候補を前記文字列として取得する、請求項６に記載の情報管理方法。
10. 前記文字列認識ステップにおける文字認識処理の結果を編集する編集ステップをさらに有し、
    前記編集ステップにおいて、編集を行った文字列と、編集後の文字列とを対応付けて前記記憶部に記憶する、請求項６に記載の情報管理方法。

Images