JP2021027556A - 情報処理装置、情報処理方法及びプログラム - Google Patents

Abstract

【課題】ユーザーごとにメタデータを生成し、画像データを保存先にアップロードすることを目的とする。【解決手段】ユーザーの操作に応じて生成されたスキャン画像データを受信する。ユーザーがアクセス権を有する外部装置のリソースに関する学習データに基づき、スキャン画像データのメタデータを設定する。スキャン画像データと、メタデータとを、外部装置に送信する。【選択図】図５

Description

本発明は、情報処理装置、情報処理方法及びプログラムに関する。

画像形成装置でスキャンした画像データに、後続のシステムへの入力データとして利用するための付加情報（メタデータ）を付与して画像形成装置から後続のシステムに送信する技術がある（特許文献１）。
更に帳票の特徴量を計算し、類似する帳票データを発見する技術がある。（特許文献２）。
また、スキャンした画像を送信する際に、送信の失敗の原因となる条件を送信先が満たす場合に、送信先として退避保存先を選ぶエラー処理を行う技術もある（特許文献３）。

特開２０１７―１９４９５３号公報 特開２０１９−５７１７３号公報 特開２０１２−１５６８２４号公報

しかし、特許文献１−３の技術には以下の課題があった。近年、保存先として画像形成装置から外部のネットワーク、例えばクラウドサービスに保存することが一般的となっている。クラウドサービスはセキュリティーを高めるためにユーザーごとにアクセス権を設定することができる。しかし、クラウドサービスと画像形成装置は疎結合であり、ユーザーごとのアクセス権の変更等をリアルタイムに把握することが困難である。このため、画像形成装置が抽出したメタデータに基づき、使用することができないフォルダー又はメタデータ等のリソースに対してアクセスし、画像の保存に失敗することがあり得る。
このとき、特許文献３によれば画像形成装置はほかの退避場所に保存するエラー処理を行うことができる。しかし、画像形成装置の利用者は画像データを所望のメタデータに基づいて保存できないという問題は依然残る。

本発明の情報処理装置は、ユーザーの操作に応じて生成されたスキャン画像データを受信する受信手段と、前記ユーザーがアクセス権を有する外部装置のリソースに関する学習データに基づき、前記スキャン画像データのメタデータを設定する設定手段と、前記スキャン画像データと、前記メタデータとを、前記外部装置に送信する送信手段と、を有することを特徴とする。

本発明によれば、ユーザーごとにメタデータを生成し、画像データを保存先にアップロードすることができる。

画像形成システムのシステム構成の一例を示す図である。 画像形成装置のハードウェア構成の一例を示す図である。 サーバーのハードウェア構成の一例を示す図である。 画像形成装置の操作部の一例を示す図である。 実施形態１の画像形成システムにおける情報処理の一例を示す図である。 画像処理の一例を示すフローチャートである。 メタデータ抽出処理の一例を示すフローチャートである。 変形例１の画像形成システムにおける情報処理の一例を示す図である。 画面例を示す図である。 変形例２の画像形成システムにおける情報処理の一例を示す図である。

以下、本発明の実施形態について図面に基づいて説明する。

＜実施形態１＞
図１は、画像形成システムのシステム構成の一例を示す図である。
画像形成システム１００は、画像形成装置１０１、１０２と、情報処理端末１０３、画像処理サーバー１０４を含む。これら画像形成装置１０１、１０２と、情報処理端末１０３、画像処理サーバー１０４はネットワーク１０５を通じて通信可能である。画像形成システム１００は更に外部ネットワーク１０６を通じて外部サーバー１１１に接続されている。この外部サーバー１１１も同様に画像形成装置１０１、１０２と、情報処理端末１０３、画像処理サーバー１０４とネットワーク１０５及び外部ネットワーク１０６を通じて通信可能である。外部サーバー１１１は、外部装置の一例である。

図１では、画像形成装置１０１が１つである場合を例に挙げて示しているが、複数の画像形成装置が同一のネットワーク１０５上に存在してもよい。なお、ネットワーク１０５は、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）に代表される画像形成システム内の装置が相互に通信できるものであればよい。また外部ネットワーク１０６はインターネット及びＷＡＮといわれるネットワーク１０５を複数接続することができる広域ネットワークであり、画像形成システム１００内の装置が相互に通信できるものであればよい。

画像形成装置１０１は、情報処理端末１０３から画像データの印刷依頼（印刷データ）を受信して印刷したり、画像形成装置１０１に備わるスキャナで画像データを読み取ったりすることができる。また、画像形成装置１０１は、スキャナで読み取られた画像データを印刷する（通称コピーと呼ばれる処理）ことができる。また、画像形成装置１０１は、情報処理端末１０３から受信した印刷データを保存したり、画像形成装置１０１のスキャナで読み取られた画像を情報処理端末１０３に送信したりすることができる。更に画像形成装置１０１は、画像処理サーバー１０４に画像データを送信して画像処理の依頼することができる。また、画像処理サーバー１０４は、画像形成装置１０１から依頼された画像処理の結果、生成された画像データを外部サーバー１１１に送信し、保存を依頼することができる。

図１では画像処理サーバー１０４及び外部サーバー１１１がそれぞれ１つずつであるシステム構成を例に挙げて示すが、それぞれのサーバー数は任意（１つ以上）であってもよい。またそれぞれのサーバーが複数である場合に、それぞれのサーバーは用途に応じた異なる役割を持っていてもよい。また、図１に示す構成において、画像処理サーバー１０４も外部ネットワーク１０６を通じたクラウド、即ちインターネット上に配置されていてもよい。画像形成装置１０１は、この他に、ＭＦＰ（Ｍｕｌｔｉ Ｆｕｎｃｔｉｏｎ Ｐｅｒｉｐｈｅｒａｌ）等の画像形成装置が有する機能を実現することができる。

図２は、画像形成装置１０１のハードウェア構成の一例を示す図である。画像形成装置１０１は、コントローラ２０１、プリンタ２０２、スキャナ２０３、及び操作部２０４を有する。コントローラ２０１は、ＣＰＵ２１１、ＲＡＭ２１２、ＨＤＤ２１３、ネットワークＩ／Ｆ２１４、プリンタＩ／Ｆ２１５、スキャナＩ／Ｆ２１６、操作部Ｉ／Ｆ２１７、及び拡張Ｉ／Ｆ２１８を有する。ＣＰＵ２１１は、ＲＡＭ２１２、ＨＤＤ２１３、ネットワークＩ／Ｆ２１４、プリンタＩ／Ｆ２１５、スキャナＩ／Ｆ２１６、操作部Ｉ／Ｆ２１７、及び拡張Ｉ／Ｆ２１８とデータを授受することができる。また、ＣＰＵ２１１は、ＨＤＤ２１３から読み出したプログラムをＲＡＭ２１２に展開し、ＲＡＭ２１２に展開したプログラムに基づき処理を実行する。ＣＰＵ２１１がプログラムに基づき処理を実行することによって、画像形成装置１０１の機能及び後述する図５、図８の画像形成装置の処理が実現される。

ＨＤＤ２１３には、ＣＰＵ２１１で実行可能なプログラム、画像形成装置１０１で使用する設定値、及びユーザーから依頼された処理に関するデータ等を記憶しておくことができる。ＲＡＭ２１２は、ＣＰＵ２１１がＨＤＤ２１３から読み出したプログラムを一時的に格納するための領域である。またＲＡＭ２１２は、プログラムの実行に必要な各種のデータを記憶しておくこともできる。例えば画像処理では、画像形成装置１０１は、入稿されたデータをＲＡＭ２１２に展開することで処理を行うことができる。

ネットワークＩ／Ｆ２１４は、画像形成システム内の装置とネットワーク通信を行うためのインターフェイスである。ネットワークＩ／Ｆ２１４は、データ受信を行ったことをＣＰＵ２１１に伝達すること、及びＲＡＭ２１２上のデータをネットワーク１０５に送信することができる。プリンタＩ／Ｆ２１５は、ＣＰＵ２１１から送信された印刷データをプリンタ２０２に送信すること、及びプリンタ２０２から受信したプリンタの状態をＣＰＵ２１１に伝達することができる。スキャナＩ／Ｆ２１６は、ＣＰＵ２１１から送信された画像読み取り指示をスキャナ２０３に送信し、スキャナ２０３から受信した画像データをＣＰＵ２１１に伝達すること、及びスキャナ２０３から受信した状態をＣＰＵ２１１に伝達することができる。操作部Ｉ／Ｆ２１７は、操作部２０４から入力されたユーザーからの指示をＣＰＵ２１１に伝達すること、及びユーザーが操作するための画面情報を操作部２０４に伝達することができる。

拡張Ｉ／Ｆ２１８は、画像形成装置１０１に認証部２０５等、外部機器を接続することを可能とするインターフェイスである。拡張Ｉ／Ｆ２１８は、例えば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）形式のインターフェイスを具備する。画像形成装置１０１は、拡張Ｉ／Ｆ２１８に接続された認証部２０５を通じてユーザーの特定と認証を行うことができる。認証部２０５は、例えばＩＣカード認証デバイス、指紋認証デバイス、又は虹彩認証デバイス等、ユーザーを認識し、認証することができるデバイスを含むモジュールであればよい。更に画像形成装置１０１は、ＵＳＢメモリ等の外部記憶装置が拡張Ｉ／Ｆ２１８に接続されることにより、外部記憶装置に記憶されているデータの読み取り及び外部記憶装置に対するデータの書き込みを行うことができる。

プリンタ２０２は、プリンタＩ／Ｆ２１５から受信した画像データを用紙に印刷すること、及びプリンタ２０２の状態をプリンタＩ／Ｆ２１５に伝達することができる。スキャナ２０３は、スキャナＩ／Ｆ２１６から受信した画像読み取り指示に従って、自身に置かれた用紙に表示されている情報を読み取ってデジタル化してスキャナＩ／Ｆ２１６に伝達することができる。また、スキャナ２０３は、自身の状態をスキャナＩ／Ｆ２１６に伝達することができる。操作部２０４は、画像形成装置１０１に対して各種の指示を行うための操作をユーザーに行わせるためのインターフェイスである。例えば、操作部２０４は、タッチパネルを有する液晶画面を具備し、ユーザーに操作画面を提供すると共に、ユーザーからの操作を受け付ける。なお操作部２０４の詳細は後述する。

図３（ａ）は、画像処理サーバー１０４のハードウェア構成の一例を示す図である。画像処理サーバー１０４は、ＣＰＵ３０１、ＲＡＭ３０２、ＨＤＤ３０３、ネットワークＩ／Ｆ３０４から構成される。ＣＰＵ３０１は、装置全体の制御を司り、ＲＡＭ３０２、ＨＤＤ３０３、及びネットワークＩ／Ｆ３０４とのデータの送受信を制御することができる。また、ＣＰＵ３０１は、ＨＤＤ３０３から読み出したプログラムをＲＡＭ３０２に展開し、ＲＡＭ３０２に記憶されているプログラムに基づき処理を実行する。ＣＰＵ３０１がプログラムに基づき処理を実行することによって、画像処理サーバー１０４の機能、図５、図８の画像処理サーバー１０４の処理及び後述する図６、図７のフローチャートの処理が実現される。

画像処理サーバー１０４は、画像形成装置１０１よりネットワークＩ／Ｆ３０４を通じて受信した画像データに対する画像処理を実施することができる。画像処理サーバー１０４で実施可能な画像処理として、画像データに対するＯＣＲ（Ｏｐｔｉｃａｌ Ｃｈａｒａｃｔｅｒ Ｒｅｃｏｇｎｉｔｉｏｎ）処理、及び画像データ内の文字列、背景等の要素ごとの領域ブロックに分割するブロック分割処理等がある。

図３（ｂ）は、外部サーバー１１１のハードウェア構成の一例を示す図である。外部サーバー１１１は、ＣＰＵ３１１、ＲＡＭ３１２、ＨＤＤ３１３、ネットワークＩ／Ｆ３１４から構成される。ＣＰＵ３１１は、装置全体の制御を司り、ＲＡＭ３１２、ＨＤＤ３１３、及びネットワークＩ／Ｆ３１４とのデータの授受を制御することができる。また、ＣＰＵ３１１は、ＨＤＤ３１３から読み出したプログラムをＲＡＭ３１２に展開し、ＲＡＭ３１２に記憶されているプログラムに基づき処理を実行する。ＣＰＵ３１１がプログラムに基づき処理を実行することによって、外部サーバー１１１の機能、及び後述する図５、図８の外部サーバー１１１の処理が実現される。

ＨＤＤ３１３には、画像処理サーバー１０４からネットワークＩ／Ｆ３０４を介して受信した画像データを蓄積することができる。また、外部サーバー１１１は、受信した画像データに対してメタデータを付与して、ＨＤＤ３１３に保存することができる。表１は、画像データに対して設定可能なメタデータの一例を示した表である。

この表１は会計処理に使われるメタデータの例を示している。メタデータにはキーとバリューがそれぞれ存在する。またバリューにはそのキーに対応する値を設定することができる。この例のメタデータは「請求額」「納期」を設定することができる。また、このメタデータはファイル名とフォルダー名も設定することができる。表１の例では「請求額」というキーが存在し、それに対してバリューには数値型の値を設定することができる。また、「納期」というキーに対応する、バリューには日付を設定することができる。また、「接続先」というキーは、対応するバリューとして保存先のクラウドサービスを識別する情報を設定することができる。

また別の例として、特許明細書を管理するのに好適なメタデータの例を表２に示す。この例ではメタデータはキーとして特許番号を持ち、バリューに保存された明細書の特許番号を持つことができる。同様に、このメタデータはキーとして「発明者」を持ち、バリューに保存された明細書の発明者を持つことができる。同様に、このメタデータはキーとして「会社」を持ち、バリューに保存された明細書の発明者が所属する会社名を持つことができる。

このように、外部サーバー１１１のＨＤＤ３１３に格納された画像データに対し、メタデータを付与することで、ユーザーはサーバーに対しメタデータキーを指定して検索することが可能となる。例えば、表１の例においては「請求額」を基にスキャンした書類で検索を行うこと等ができる。したがって、画像形成システム１００は所望の画像データを検索する際にメタデータを使うことで、ファイル名等、限られた情報で検索する場合に比べて、高い精度で検索することをユーザーに可能にする。また複数の業種、又は業務に応じたメタデータを保存することで、画像形成システム１００は様々な業種、又は業務に好適な保存及び管理のシステムをユーザーに提供することができる。

また、ストレージサーバ１０７のＨＤＤ３１３に格納した画像データに対し、メタデータを付与することで、後続のシステムとの連携もスムーズに行うことが可能となる。例えば、ある会計システムに画像データと会計情報を入力する際、原稿のアップロードをした後に、人手で会計情報を転記する必要があるユースケースが存在する。データをアップロードする際に必要となるメタデータを付与することで、そのまま会計システムに登録することが可能となり、転記作業の効率化を行うことが可能となる。

図４は、画像形成装置１０１の操作部２０４の一例を示す図である。操作部２０４は、タッチパネル画面４０１、設定キー４０２、キャンセルキー４０４、開始キー４０３で構成されている。ユーザーはタッチパネル画面４０１及び設定キー４０２を用いて、各ジョブの設定を行い、開始キー４０３の選択によりジョブを開始する。ユーザーは一度開始されたジョブを、キャンセルキー４０４を選択することでジョブ中に中止することができる。ここで示すジョブとは、例えばコピージョブ、ネットワークＩ／Ｆ２１４を介してスキャンした画像データを画像処理サーバー１０４でＯＣＲ処理を行った上で外部サーバー１１１に送信するジョブ等が挙げられる。

以上説明した構成により、画像形成装置１０１を用いてスキャンした文書の画像データに外部サーバー１１１に送信する、実施形態１における一連の情報処理について図面を用いて説明する。

図５は、実施形態１の画像形成システムにおける情報処理の一例を示す図である。
Ｓ５０１、Ｓ５０２、Ｓ５１３で示す処理は画像形成装置１０１によって実施される処理である。処理に係るプログラムはＨＤＤ２１３に格納されており、ＲＡＭ２１２に読み出され、ＣＰＵ２１１によって実行される。
また、ステップＳ５０３〜Ｓ５０５及びＳ５０７〜５０９、及びＳ５１２で示す処理は画像処理サーバー１０４によって実行される処理である。処理に係るプログラムは及び学習データはＨＤＤ３０３に格納されており、ＲＡＭ３０２に読み出され、ＣＰＵ３０１によって実行される。
更に、ステップＳ５０６、Ｓ５１０〜Ｓ５１１で示す処理は外部サーバー１１１によって実行される処理である。処理に係るプログラムはＨＤＤ３１３に格納されており、ＲＡＭ３１２に読み出され、ＣＰＵ３１１によって実行される。

開始キー４０３の選択等による原稿のスキャン指示を受信すると、Ｓ５０１において、ＣＰＵ２１１は、スキャナ２０３に対してスキャン指示を行い、スキャンを実施し、原稿に対応する画像データを生成する。
続いて、S５０２において、ＣＰＵ２１１は、Ｓ５０１にて生成した画像データを、ネットワークＩ／Ｆ２１４を介して画像処理サーバー１０４に送信する。
Ｓ５０３において、画像処理サーバー１０４のＣＰＵ３０１は、画像形成装置１０１から画像データをネットワークＩ／Ｆ３０４が受信したことを検知する。
Ｓ５０４において、ＣＰＵ３０１は、受信した画像データにメタデータを付与する際に必要となるデータを生成するための画像処理を実施する。

図６は、Ｓ５０４で画像処理サーバー１０４によって実行される画像処理の一例を示すフローチャートである。図６のフローチャートで示す処理に係るプログラムは、画像処理サーバー１０４のＨＤＤ３０３に格納されており、ＲＡＭ３０２によって読み出され、ＣＰＵ３０１によって実行される。
Ｓ６０１において、ＣＰＵ３０１は、Ｓ５０３にて受信した画像データのうち、１ページ分の画像データを読み込む。

続いて、Ｓ６０２において、ＣＰＵ３０１は、Ｓ６０１で読み込んだ１ページ分の画像データに対して、ブロック分割処理を実施する。ここでブロック分割処理とは、画像データの帳票構造を解析し、画像データに含まれる背景領域と文字列領域とを分割する処理のことを指す。ブロック分割処理の結果は、分割された領域の属性、即ち該当領域が背景領域か文字列領域かの情報と、画像データ上における該当領域の位置情報とが関連付けられてＨＤＤ３０３に記憶される。実施形態１では、画像データ上における該当領域は矩形で表現され、上述した位置情報は該当領域の左上点の座標と、矩形の幅の大きさと、矩形の高さとの組で表現される。以後、ブロック分割処理の結果分割された各々の矩形領域を「ブロック」と呼称する。なお、分割領域の形状が矩形であることに限定されるものではなく、分割領域の各々が一意に表現される限りにおいて、任意の形状で領域を規定すればよい。

続いて、S６０３において、ＣＰＵ３０１は、Ｓ６０２にてＨＤＤ３０３に記憶したブロック分割結果を読み出し、そのうち、分割領域の属性が文字列である領域の各々についてＯＣＲ処理を実施し、文字列領域の文字列の文字コードを取得する。
続いて、S６０４において、ＣＰＵ３０１は、Ｓ６０３で取得した各文字列領域の文字コード情報と、Ｓ６０２によるブロック分割結果の該当領域の位置情報と、更にＳ６０１で読み込んだページ画像データとを関連付けてＨＤＤ３０３に記憶する。

次に、Ｓ６０５において、ＣＰＵ３０１は、Ｓ５０３にて受信した画像データのうち、Ｓ６０１〜Ｓ６０４を実施していないページ画像データが存在するか否かを判定する。そのようなページ画像データが存在していた場合（Ｓ６０５がＮＯの場合）、ＣＰＵ３０１は、残るページ画像データの数だけＳ６０１〜Ｓ６０５の処理を繰り返す。存在しなかった場合（Ｓ６０５がＹＥＳの場合）、ＣＰＵ３０１は、図６のフローチャートの情報処理を終了する。

以上の手順で画像処理サーバー１０４における画像処理を実施することで、画像形成装置１０１においてＳ５０１でスキャンされた原稿の各ページ画像データについて、画像データに含まれる文字列の情報と、各文字列領域の位置情報とを関連付けて取得することができる。

続いて図５の情報処理の説明に戻り、Ｓ５０５において、ＣＰＵ３０１は、ＨＤＤ３１３に保存された学習データとＳ５０４で生成した文字情報と、各文字領域の位置情報を用いて、メタデータを生成する。図７は、Ｓ５０５のメタデータ抽出処理の一例を示すフローチャートである。
Ｓ７０１において、ＣＰＵ３０１は、Ｓ６０１で読み込んだページ画像データと、図６を用いて説明したページの画像データとブロック分割処理の結果を読み込む。

続いて、Ｓ７０２において、ＣＰＵ３０１は、対象となるページ画像データの画像特徴量を計算する。ＣＰＵ３０１は、画像特徴量の算出において、ブロックを特徴量として採用する方法を用いる。以下、この文字の位置情報を用いた実施形態を説明するが、それ以外の画像特徴量を用いたとしても実施形態１を実施できる。文字の位置情報を用いた画像特徴量以外のアルゴリズムとして、ベクター画像を用いて画像の特徴点と画像特徴量を求めることができる、ＳＩＦＴアルゴリズム、ＳＵＲＦアルゴリズム、ＨｏＧアルゴリズム等がある。
続いて、Ｓ７０３において、ＣＰＵ３０１は、ＨＤＤ３１３に保存された学習データを読み込む。この学習データは実施形態１においては表３のような情報を持つ。

表３が示すように、学習データは画像特徴量とメタデータ抽出ルールを持つ。画像特徴量は画像の特徴を定量的に示す。実施形態１では上述したように、ブロックを特徴量としている。このブロックは、実施形態１では始点、ブロックの幅と高さをピクセル単位で表記している。即ち、左上から（ｘ，ｙ）の位置から、（ｗ，ｈ）の大きさのブロックがあることを示しているとすると、［１０，１２，１０２，１１］，［４１４，１５，３２，１２］…という特徴量の一つ目のブロックが以下の特徴量を持つことを示している。
（ｘ，ｙ）＝（１０，１２）
（ｗ，ｈ）＝（１０２，１１）
このようなブロック情報を要素として持つ、一つ以上の集合が実施形態１における画像特徴量である。

更に、実施形態１における学習データはメタデータ抽出ルールを複数個持つことができる。メタデータ抽出ルールは、対象のメタデータのキーに対応する抽出ルールの列を一つ以上持つ。表４はこのメタデータ抽出ルールを説明するために表３から一つの抽出ルールを抜きだしたデータである。この表４が示すように、このメタデータ抽出ルールはキー「ファイル名」に対応する抽出ルールとして［１０，１２，１０２，１１］といった、画像特徴量の要素と同様のブロックを示すことができる数値を持つ。この例では、［１０，１２，１０２，１１］即ち、左上から［１０，１２］の座標から［１０２，１１］の幅及び高さの範囲にある文字を使ってファイル名を抽出するというルールを示している。

表５もこのメタデータ抽出ルールを説明するために表３から一つの抽出ルールを抜きだしたデータである。この表５が示すように、このメタデータ抽出ルールはキー「フォルダー」に対応する抽出ルールとして「請求書」という文字をフォルダー名につけるルールを示している。

以上説明してきたように、学習データはメタデータを生成するためのルール情報として帳票上の文字を抜き出すルールを持つ。また、学習データはメタデータを生成すルール情報として、固定の文字列を持つことができる。

再び、メタデータ抽出処理（Ｓ５０５）を図７に戻って説明する。
Ｓ７０４において、ＣＰＵ３０１は、最も近い特徴量を持つ学習データを特定する。この処理で、ＣＰＵ３０１は、Ｓ７０２で求めた画像データに対するブロックを用いた特徴量と、Ｓ７０３で読み込んだ学習データ中の画像特徴量とを比較する。そして、ＣＰＵ３０１は、二つの比較の結果、閾値以上に近い特徴量を持つ学習データの行を０個以上見つける。この比較処理は、画像特徴量で示されたブロックの位置と大きさの重なりの大きさを用いて計算する。
続いて、Ｓ７０５において、ＣＰＵ３０１は、Ｓ７０４で特定した近い特徴量を持つ学習データの行にあるメタデータ抽出ルールと特定する。

続いて、Ｓ７０６において、ＣＰＵ３０１は、Ｓ７０５で特定したメタデータ抽出ルールに基づき、各キーに対応するバリューを決定する。本処理は、表４が示すように、抽出ルールが文字の位置を示す場合、Ｓ６０３で説明したＯＣＲ処理で求めた文字を用いてバリューの文字情報を決定する。例えば［１０，１２，１０２，１１］という抽出ルールの場合、ＣＰＵ３０１はこのＳ６０３で得られたＯＣＲ処理の文字のうち、この座標ブロックに最も近い場所の文字情報を用いてバリューの文字情報として決定する。
また、表５で示したように、抽出ルールが文字情報であった場合は、ＣＰＵ３０１は、この抽出ルールの文字列を使って、キーに対応するバリューの文字列を決定する。

続いて、Ｓ７０７において、ＣＰＵ３０１は、読み込んだ画像データのうち、まだ未処理のページがあるか判定する。もし未処理のページがある場合には、ＣＰＵ３０１は、再びＳ７０１にもどり、次の未処理ページを対象としたメタデータ設定処理を開始する。一方で、未処理のページがない場合には、ＣＰＵ３０１は、メタデータ設定処理を終了する。

実施形態１では以上の処理によって、表６で示すようなメタデータが２つ抽出できたものとし以下に説明する。

再び、図５を用いてメタデータ抽出（Ｓ５０５）以降の処理を以下に説明する。
続いて、Ｓ５０６において、ＣＰＵ３１１は、Ｓ５０５で抽出したメタデータ中にあるスキャン画像データの保存先情報を基に、アクセス権を取得する。表６で示した例では、フォルダーというキーに対応するバリューとして「請求書」、接続先というキーに対応するバリューとして「クラウドサービス１」を得ている。この情報に基づき、ＣＰＵ３０１は、外部サーバー１１１内のフォルダー「請求書」に画像形成装置１０１を操作したユーザーがファイルを書き込むことが可能かを問い合わせる。この問い合わせ処理はＲＥＳＴ、又はＳＯＡＰと呼ばれる既知の通信技術を用いて、画像処理サーバー１０４と外部サーバー１１１との通信によって実現される。もちろん、ＲＥＳＴ、又はＳＯＡＰ以外の通信技術を用いて画像処理サーバー１０４と外部サーバー１１１が通信したとしても実施形態１を実施できる。

続いて、Ｓ５０７において、ＣＰＵ３０１は、Ｓ５０６で得られた情報に基づき、外部サーバー１１１のリソース、この場合、外部サーバー１１１のフォルダー「決裁書」及び「請求書」、にアクセス可能かどうかを判定する。もし一つ以上のアクセス可能なリソースがあれば、ＣＰＵ３０１は、処理をＳ５０８に進める。対して、もしアクセス可能なリソースが一つも見つからない場合は、ＣＰＵ３０１は、処理をＳ５１２に処理を進める。ここではまず正常系であるＳ５０８以下の説明を行う。
Ｓ５０８において、ＣＰＵ３０１は、Ｓ５０５で抽出したメタデータを先頭から一行ずつ読み取り、Ｓ５０６の判定でアクセス可能だと判定されたメタデータを特定する。実施形態１ではＣＰＵ３０１は、最初に見つかったメタデータを使って一つのメタデータを設定する。Ｓ５０５、Ｓ５０７及びＳ５０８は、ユーザーがアクセス権を有する外部サーバー１１１のリソースに関する学習データに基づき、スキャン画像データのメタデータを設定する処理の一例である。
続いて、Ｓ５０９において、ＣＰＵ３０１は、Ｓ５０３で得たスキャン画像データと、Ｓ５０８で得たメタデータを基に、外部サーバー１１１にスキャン画像データとメタデータを送信する。

これを受けて、Ｓ５１０において、外部サーバー１１１のＣＰＵ３１１は、画像データとメタデータを受信する。
続いて、Ｓ５１１において、ＣＰＵ３１１は、Ｓ５１０で受信した画像データとメタデータを外部サーバー１１１内に保存する。
画像形成システム１００は以上をもってシステム全体の情報処理を終了する。

一方、Ｓ５０７で外部サーバー１１１へアクセス不可と判定した場合には、Ｓ５１２において、ＣＰＵ３０１は、スキャン画像データを送信できなかった旨を示すメッセージを画像形成装置１０１に送信する。Ｓ５１２の処理は、スキャン画像データを送信できない旨を、スキャン画像データを生成した画像形成装置１０１の操作部２０４に表示させる制御の一例である。
メッセージを受けて、Ｓ５１３において、画像形成装置１０１のＣＰＵ２１１は、操作部２０４に画像データを送信できなかった旨、メッセージを表示する。

以上説明した処理により、画像形成装置１０１のユーザーにとって簡便にスキャン画像データの各ページ画像データにメタデータを付加することができるようになる。加えて、画像形成装置１０１の他のユーザーが学習させた学習データがユーザーにとって利用できない学習データを含んでいたとしても、画像形成システム１００は、複数の学習データからアクセス可能な学習データを選択する。これによって、画像形成装置１０１のユーザーは、学習データに従い、ユーザーがアクセス可能なリソースに対して画像ファイルとメタデータを送信することができる。
以上で実施形態１の説明を終える。

（変形例１）
変形例１では、外部サーバー１１１のリソースにアクセスできない場合に学習データを再学習する処理を示す。これによって、外部サーバー１１１のアクセス権がない画像形成装置１０１のユーザーであってもフォルダー選択を可能にすることができる。なお、変形例１の説明にあたり、実施形態１と重複する構成及び処理手順には同一の付番で示し、それらの説明は省略し、実施形態１とは異なる構成及び処理について主に説明を行う。

図８は、変形例１の画像形成システムにおける情報処理の一例を示す図である。以下、変形例１における情報処理を、図８を用いながら説明する。
実施形態１同様に、Ｓ５０１、Ｓ５０２、Ｓ５１７，Ｓ５１９で示す処理は画像形成装置１０１によって実施される処理である。処理に係るプログラムはＨＤＤ２１３に格納されており、ＲＡＭ２１２に読み出され、ＣＰＵ２１１によって実行される。
また、ステップＳ５０３〜Ｓ５０５及びＳ５０７〜５０９、及びＳ５１４〜Ｓ５２１で示す処理は画像処理サーバー１０４によって実行される処理である。処理に係るプログラムは及び学習データはＨＤＤ３０３に格納されており、ＲＡＭ３０２によって読み出され、ＣＰＵ３０１によって実行される。
更に、ステップＳ５０６、Ｓ５１０〜Ｓ５１１、Ｓ５１５で示す処理は外部サーバー１１１によって実行される処理である。処理に係るプログラムはＨＤＤ３１３に格納されており、ＲＡＭ３１２によって読み出され、ＣＰＵ３１１によって実行される。

変形例１におけるＳ５０１〜Ｓ５０６は実施形態１とその処理が同様であるため、説明を省略する。
Ｓ５０７において、ＣＰＵ３０１は、Ｓ５０６で得られた情報に基づき、外部サーバー１１１のリソース、この場合、外部サーバー１１１のフォルダー「決裁書」及び「請求書」にアクセス可能かどうかを判定する。もし一つ以上のアクセス可能なリソースがあれば、ＣＰＵ３０１は、処理をＳ５２０に進める。対して、もしアクセス可能なリソースが一つも見つからない場合は、ＣＰＵ３０１はＳ５１４に処理を進める。
ここではまず、異常系であるＳ５１４以下の説明を行う。

Ｓ５１４において、ＣＰＵ３０１は、画像形成装置１０１のユーザーがアクセス可能な外部サーバー１１１のリソース一覧を取得する。このリクエストは、Ｓ５０５と同様にＲＥＳＴ又はＳＯＡＰと呼ばれる通信技術を用いて、画像処理サーバー１０４と外部サーバー１１１との通信によって実現される。また、外部サーバー１１１のリソースへ画像形成装置１０１のユーザーがアクセス可能なリソースを得るために、ＣＰＵ３０１は、外部サーバー１１１に対して、ユーザーに紐づいたアクセストークンとそれに紐づいたユーザー情報等を送る。この処理はＯＡｕｔｈ等の認証、認可技術によって実現される。

通信の結果、Ｓ５１５において、外部サーバー１１１のＣＰＵ３１１は、画像形成装置１０１のユーザーがアクセス可能なリソースのパス及び識別子（ＩＤ）をＸＭＬ、ＪＳＯＮといったデータ形式を使って画像処理サーバー１０４に送信する。
Ｓ５１６において、ＣＰＵ３０１は、得られた情報に基づき、操作部２０４のタッチパネル画面４０１に、画像形成装置１０１のユーザーがアクセス可能なリソース一覧を表示するように依頼する通信を画像形成装置１０１に対して行う。Ｓ５１６の処理は、ユーザーがアクセス権を有するリソースの一覧を含む画面を、スキャン画像データを生成した画像形成装置１０１の操作部２０４に表示させる制御の一例である。
これを受けて、Ｓ５１７において、画像形成装置１０１のＣＰＵ２１１は、得られたアクセス可能なリソース一覧を表示すると共に、画像形成装置１０１のユーザーによるリソースの選択操作を受け付ける。

図９（ａ）はユーザーからのリソース選択を受け付けるためのリソース一覧表示画面の一例を示す図である。ユーザーはリソースの一覧表示部４０５に対してタッチ操作をすることで、画像形成装置に１０１対して所望のリソースを選択することができる。なお、変形例１においては、リソースの例としてフォルダーを示しているが、それ以外のメタデータ等、外部サーバー１１１のリソースの選択であれば何であってもよい。そして、ユーザーが表示されているリソースを選択すると、ＣＰＵ２１１は、画像処理サーバー１０４に対して選択されたリソース情報を送信する。

Ｓ５１８において、ＣＰＵ３０１は、Ｓ５１７の通信で得られた選択されたリソースに基づき学習データを更新するか判断するための画面表示を画像形成装置１０１に対して依頼する。Ｓ５１８の処理は、リソースの一覧から選択されたリソースに基づき学習データを更新するかを選択する画面を、操作部２０４に表示させる制御の一例である。
これを受けて、Ｓ５１９において、画像形成装置１０１のＣＰＵ２１１は、画像形成装置１０１のユーザーによる学習可否の選択画面を表示し、ユーザーの選択入力を受け付ける。

図９（ｂ）はユーザーからの選択を受け付ける画面の一例を示す図である。変形例１においては、ＣＰＵ２１１は、４０９に示すように選択されたフォルダーを学習データに上書きするかを問い合わせるメッセージを表示する。この画面で、画像形成装置１０１のユーザーが上書きする旨の選択をするには４１０のボタンを選択する。また、この画面で、画像形成装置１０１のユーザーが上書きしない旨の選択をするには４１１のボタンを選択する。ＣＰＵ２１１は、ユーザーの選択を受けて、その結果を画像処理サーバー１０４に送信する。

Ｓ５２０において、ＣＰＵ３０１は、Ｓ５１９の通信で得られた情報に基づき、学習データを更新するか判定する。もし、この判定で学習データの更新が必要だと判定した場合は、ＣＰＵ３０１は、Ｓ５２１に処理を進める。対して、この判定で学習データの更新が不要だと判定した場合には、ＣＰＵ３０１は、処理をＳ５０８に進める。
Ｓ５２１において、ＣＰＵ３０１は、Ｓ５１７で選択されたリソースの情報に基づき、学習ＤＢを更新する。例えば、元の学習ＤＢが表７であり、画像形成装置１０１のユーザーが選択したリソースが「／会計／見積書」であった場合、ＣＰＵ３０１は、表８のように学習ＤＢを更新する。

ＣＰＵ３０１は、Ｓ５２１の処理を終了したのちに、処理をＳ５０８に進める。
なお、Ｓ５０８以下の処理は実施形態１と同様であるため、説明を省略する。

以上説明した処理により、画像形成装置１０１のユーザーにとって簡便にスキャン画像データの各ページ画像データにメタデータを付加することができるようになる。更に、実施形態１の効果に加えて、画像形成装置１０１のユーザーはアクセス可能なリソースを選択し、更に学習データを更新することができる。これによって画像形成装置１０１のユーザーは、仮に学習データに含まれるリソースにアクセスできない場合にも、ユーザーがアクセス可能なリソースに対して画像ファイルとメタデータを送信することができる。
また更に、仮に学習データに含まれるリソースにアクセスできない場合にも、ユーザーがアクセス可能なリソースを学習データに保存することで、以後もユーザーがアクセス可能なリソースにて画像ファイルとメタデータを送信することができる。
以上で変形例１の説明を終える。

（変形例２）
変形例２では、外部サーバー１１１のリソースにアクセスできない場合に学習データを再学習する別の処理を示す。これによって、外部サーバー１１１にアクセス権がない画像形成装置１０１のユーザーであってもフォルダー選択を可能にすることができる。なお、変形例２の説明にあたり、実施形態１又は変形例１と重複する構成や処理手順には同一の付番で示し、それらの説明は省略し、実施形態１や変形例１とは異なる構成及び処理手順について主に説明を行う。

図１０は、変形例２の画像形成システムにおける情報処理の一例を示す図である。以下、変形例２における情報処理を、図１０を用いながら説明する。
Ｓ５１６において、ＣＰＵ３０１は、Ｓ５１４で得られた情報に基づき、画像形成装置１０１に対して、画像形成装置１０１のユーザーがアクセス可能なリソース一覧と、リソースの一覧から選択されたリソースに基づき学習データを更新するかを選択する選択部と、を含む画面を、操作部２０４に表示するように依頼する通信を行う。Ｓ５１６の処理は、リソースの一覧と、リソースの一覧から選択されたリソースに基づき学習データを更新するかを選択する選択部と、を含む画面を、スキャン画像データを生成した画像形成装置１０１の操作部２０４に表示させる制御の一例である。
Ｓ５１７において、画像形成装置１０１のＣＰＵ２１１は、Ｓ５１６で得られたアクセス可能なリソース一覧を表示すると共に、画像形成装置１０１のユーザーによるリソースの選択操作を受け付ける。図９（ｃ）は、ユーザーからのリソース選択を受け付けるためのリソース一覧表示画面の一例を示す図である。ユーザーはリソースの一覧表示部４０５に対してタッチ操作をすることで、画像形成装置に１０１対して所望のリソースを選択することができる。また、ユーザーは学習の選択部４０８にタッチすることで、選択したリソース先を使って学習データを更新するかどうか選択することができる。そして、ユーザーが表示されているリソースを確認し、ＯＫを選択すると、ＣＰＵ２１１は、画像処理サーバー１０４に対して選択されたリソース情報を送信する。

Ｓ５２０において、ＣＰＵ３０１は、Ｓ５１７の通信で得られた情報に基づき、学習データを更新するか判定する。もし、この判定で学習データの更新が必要だと判定した場合は、ＣＰＵ３０１は、処理をＳ５１２に進める。対して、この判定で学習データの更新が不要だと判定した場合には、ＣＰＵ３０１は、処理をＳ５０８に進める。

以上説明した処理により、画像形成装置１０１のユーザーにとって簡便にスキャン画像データの各ページ画像データにメタデータを付加することができるようになる。更に、実施形態１と変形例１の効果に加えて、画像形成装置１０１のユーザーはアクセス可能なリソースを選択し、同様の画面で学習データを更新することを選択することができる。
以上で変形例２の説明を終える。

＜その他の実施形態＞
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給する。そして、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読み出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

以上、本発明の実施形態の一例について詳述したが、本発明は係る特定の実施形態に限定されるものではない。

上述した実施形態によれば、ユーザーごとにメタデータを生成し、画像データを保存先にアップロードすることができる。

１０１ 画像形成装置
１０４ 画像処理サーバー
１１１ 外部サーバー

Claims (7)

1. ユーザーの操作に応じて生成されたスキャン画像データを受信する受信手段と、
   前記ユーザーがアクセス権を有する外部装置のリソースに関する学習データに基づき、前記スキャン画像データのメタデータを設定する設定手段と、
   前記スキャン画像データと、前記メタデータとを、前記外部装置に送信する送信手段と、
   を有することを特徴とする情報処理装置。
2. 前記ユーザーが前記リソースにアクセス権を有しない場合、前記スキャン画像データを送信できない旨を、前記スキャン画像データを生成した画像形成装置の操作部に表示させる制御手段を更に有することを特徴とする請求項１に記載の情報処理装置。
3. 前記ユーザーが前記リソースにアクセス権を有しない場合、前記ユーザーがアクセス権を有するリソースの一覧を取得し、前記リソースの一覧を含む画面を、前記スキャン画像データを生成した画像形成装置の操作部に表示させる制御手段を更に有することを特徴とする請求項１に記載の情報処理装置。
4. 前記制御手段は、前記リソースの一覧から選択されたリソースに基づき前記学習データを更新するかを選択する画面を、前記操作部に表示させることを特徴とする請求項３に記載の情報処理装置。
5. 前記ユーザーが前記リソースにアクセス権を有しない場合、前記ユーザーがアクセス権を有するリソースの一覧を取得し、前記リソースの一覧と、前記リソースの一覧から選択されたリソースに基づき前記学習データを更新するかを選択する選択部と、を含む画面を、前記スキャン画像データを生成した画像形成装置の操作部に表示させる制御手段を更に有することを特徴とする請求項１に記載の情報処理装置。
6. 情報処理装置が実行する情報処理方法であって、
   ユーザーの操作に応じて生成されたスキャン画像データを受信する受信工程と、
   前記ユーザーがアクセス権を有する外部装置のリソース（前記スキャン画像データの保存先）に関する学習データに基づき、前記スキャン画像データのメタデータを設定する設定工程と、
   前記スキャン画像データと、前記メタデータとを、前記外部装置に送信する送信工程と、
   を含むことを特徴とする情報処理方法。
7. コンピュータを、請求項１乃至５の何れか１項に記載の情報処理装置の各手段として機能させるためのプログラム。

Images