JP2009140311A - 文書処理装置および文書処理方法 - Google Patents

Abstract

【課題】複数の電子化文書の中から選択的に１つの電子化文書を選択する際に、各文書画像に含まれる図形、表、イメージ等に基づいて、ユーザが一見して把握する一覧画像を表示することが可能な文書処理装置を提供する。
【解決手段】文書要素の選択画面を表示する（ステップＳ３１１）。そして、文書要素の選択指示があった場合には、次に文書要素の選択指示に従ってフォルダ内の全ファイルから文書要素を読み出す（ステップＳ３１３）。各ファイルの文書要素のデータであるしおりデータに従って文書画像内に含まれる文書要素を抽出する。各ファイルについて、抽出した文書要素のサムネイル表示を実行する（ステップＳ３１４）。
【選択図】図１５

Description

本発明は、文書画像と属性情報とを含む電子化文書を処理する文書処理装置および文書処理方法に関し、特に文書画像内の文書要素の一覧表示を行なう技術に関する。

省資源や省スペース等の観点から紙原稿等に記載された文書を電子化文書に変換して管理する文書管理システムが実用化されている。このような文書管理システムにおいては、スキャナ等を用いて原稿を読取ることにより文書画像を生成し、これらの文書画像から電子化文書を生成する。

このような文書画像は、文書を画素の集合である画像（イメージ）として格納しているので、当該文書に含まれている文字や図表等の内容を特定するためのデータ（代表的にはテキストデータ等）を元来含んでいない。そのために特定の情報を含む文書を多くの文書画像の中から検索することは困難である。

一方で、文書画像をより容易に管理できるように、文書画像に含まれる図形、表、イメージ等の文書要素を解析することで属性情報（代表的に「しおり」）を取得し、文書画像に当該属性情報を付加することにより、効率的な検索動作を実行することが可能である。

たとえば特開平９−１９８５１７号公報においては、文書内の図表の一覧を表示するための図表データと、図表が存在する位置を示す位置情報とを対応付けた一覧登録データを作成する図表データ作成部および一覧登録データ作成部と、一覧登録データに基づいて図表の一覧を表示する図表一覧表示制御部と、図表一覧表示制御部によって表示された一覧での特定の図表を選択する指示に応じて、一覧登録データの位置情報に基づいて、指示された図表が存在する位置に応じてページ制御を行なう頁制御部および図表の実データをコピーする図表データ制御部とを含む文書作成装置が開示されている。

また、特開平５−２９０１０５号公報においては、多数の図形部品の中から利用者が目的の図形部品を効率よく検索して再利用することが可能な図形部品管理方式が開示されている。具体的には階層的に構成された分類体系に従って登録された図形部品群を分類・管理し、その分類体系の構成に沿って段階的に図形部品の検索を実行する方式が開示されている。
特開平９−１９８５１７号公報 特開平５−２９０１０５号公報

しかしながら、特開平５−２９０１０５号公報においては、作成の段階で意図的に階層的に図形部品群を意図的に一覧に登録しなければならず、利用者に対して負担を強いるものであり、作業負担が大きいという問題があった。

また、特開平９−１９８５１７号公報においては、同一文書内で図表を作成時に図表位置を一覧として登録するものであり、複数の文書に含まれる図形等の一覧表示を実行する方式ではないため、図形等の一覧表示に従って複数の文書の中からユーザが１つの文書を指定することはできなかった。

本発明は、上記のような問題を解決するためになされたものであって、複数の電子化文書の中から選択的に１つの電子化文書を選択する際に、各文書画像に含まれる図形、表、イメージ等に基づいて、ユーザが一見して把握する一覧画像を表示することが可能な文書処理装置および文書処理方法を提供することを目的とする。

本発明に係る文書処理装置は、電子化文書を処理する文書処理装置であって、電子化文書は、文書画像と属性情報とを含み、属性情報は、文書画像内での所定の種別の文書要素の位置を示す情報と、文書要素の種別を示す情報とを含み、表示部と、複数の電子化文書の属性情報にそれぞれ基いて、対応する電子化文書の所定の種別の文書要素を抽出して一覧画像を表示する表示制御部とを含む。

好ましくは、表示制御部は、一覧画像として表示部に表示される所定の種別の文書要素が選択された場合には、属性情報に基づいて選択された文書要素が含まれる対応する文書画像を表示する。

好ましくは、表示制御部は、複数の文書要素の種別の中から選択された少なくとも１つ以上の種別に対応する文書要素を抽出して一覧画像を表示する。

特に、表示制御部は、一覧画像として表示する複数の文書要素の種別を選択入力可能な文書要素選択画面を表示する。

好ましくは、文書要素の種別は、表題、見出し、段落区切り、図、表、写真、手書き文字、下線付文字、装飾文字、色文字の少なくともいずれかを含む。

好ましくは、電子化文書群を記憶する記憶部をさらに含み、電子化文書群は、フォルダ毎に管理され、表示制御部は、指定されたフォルダに含まれる複数の電子化文書の属性情報にそれぞれ基いて、対応する電子化文書の所定の種別の文書要素を抽出して一覧画像を表示する。

本発明に係る文書処理方法は、電子化文書を処理する文書処理方法であって、電子化文書は、文書画像と属性情報とを含み、属性情報は、文書画像内での所定の種別の文書要素の位置を示す情報と、文書要素の種別を示す情報とを含み、複数の電子化文書の属性情報にそれぞれ基いて、対応する電子化文書の所定の種別の文書要素を抽出するステップと、抽出した文書要素を一覧画像として表示するステップとを含む。

本発明に係る文書処理装置は、電子化文書を処理する文書処理装置であって、複数の電子化文書の属性情報にそれぞれ基いて、対応する電子化文書の所定の種別の文書要素を抽出して一覧画像を表示する。これにより、複数の電子化文書の中から選択的に１つの電子化文書を選択する際に、たとえば、各文書画像に含まれる図形、表、イメージ等に基づいて、ユーザが一見して把握することが可能である。

本発明の実施の形態について図面を参照しながら詳細に説明する。なお、図中同一または相当部分については同一符号を付してその説明は繰返さない。

（実施の形態１）
（全体システム構成）
図１は、本発明の実施の形態１に従う文書処理装置を含むシステムの概略構成図である。

本実施の形態においては、代表的に本発明に係る文書処理方法を実行するＭＦＰ（Multi Function Peripheral）について説明する。

なお、本発明に係る文書処理方法は、ＭＦＰに限らず、複写機やファクシミリ装置等にも適用することができる。

図１を参照して、本発明の実施の形態１に従うＭＦＰ１は、原稿３００を読み取るための画像読取部１０４と、紙媒体などへの印刷処理を行うためのプリント部１０６と、電子化文書を記憶するための記憶部１１２とを含んで構成される。

特に、本発明の実施の形態１に従うＭＦＰ１は、画像読取部１０４で原稿３００を読み取るあるいは後述するネットワークを介して文書画像を取得し、この文書画像を含む電子化文書４００を生成する。この際、ＭＦＰ１は、文書画像に含まれる文書要素の文書画像内の位置を示す情報と、当該文書要素の種別を示す情報とを含む属性情報を生成する。

この「文書要素」とは文書を構成する記述要素を意味する。なお、このような属性情報は、「メタデータ（Meta Data）」とも称され、上述のような位置および種別を示す情報に加えて、たとえば各文書要素を代表する説明等を含めることも可能である。以下の説明においては、属性情報の代表例として「しおり」を電子化文書に付加する構成について説明する。

なお、本明細書において「属性情報」とは、文書要素の「文書画像内の位置」を示す情報と、当該文書要素の「種別」を示す情報とを少なくとも含むデータであり、「しおり」の他に文書要素についての補足的コメントをさらに含む「注釈」などであってもよい。

ＭＦＰ１は、読取った文書画像に属性情報を付加して、電子化文書４００を生成する。代表的に、電子化文書４００にはＰＤＦ（Portable Document Format）などのフォーマットを採用することができる。

その後、ＭＦＰ１は、生成した電子化文書４００を自身の記憶部１１２に格納したり、ネットワークを介してパーソナルコンピュータＰＣ１，ＰＣ２，ＰＣ３（以下「パーソナルコンピュータＰＣ」とも称する）に送信したりする。代表的な使用形態としてＭＦＰ１が設置されている同一のオフィス内に敷設されたネットワークであるＬＡＮ（Local Area Network）に接続されているパーソナルコンピュータＰＣ１，ＰＣ２に対しては、ＭＦＰ１から電子化文書４００が直接的に送信される。

一方、ＬＡＮとＷＡＮ（Wide Area Network）との接続点には、サーバ装置ＳＲＶが設けられており、ＭＦＰ１とは離れたオフィスにあるパーソナルコンピュータＰＣ３等に対しては、ＭＦＰ１からサーバ装置ＳＲＶを介して電子化文書４００が送信される。ここで、サーバ装置ＳＲＶは代表的にメールサーバ、ＦＴＰ（File Transfer Protocol）サーバ、Ｗｅｂサーバ、ＳＭＢサーバ等で構成される。

画像読取部１０４は、原稿をセットするための載荷台と、原稿台ガラスと、載荷台にセットされた原稿を原稿台ガラスに自動的に１枚ずつ搬送する搬送部と、読取られた原稿を排出するための排出台とを含む。この構成により、複数枚の原稿をページ単位で連続的に読取って、１つの電子化文書４００として生成することができる。

ここでＭＦＰ１は、原稿の各ページに対応して文書画像を作成するので、電子化文書４００にはページ領域に区分された文書画像が含まれることになる。

特に、本発明の実施の形態に従うＭＦＰ１は、電子化文書４００の生成過程もしくは生成後において、複数の文書画像にそれぞれ対応して、各文書画像を示す文書要素を少なくとも１つ含む一覧画像を表示可能である。このような一覧画像に含まれる各文書要素は「サムネイル画像」とも称される。

複数の文書画像にそれぞれ対応して、各文書画像を示す一覧画像を表示することにより、ユーザは、複数の電子化文書の中から自己が希望する電子化文書を容易に把握し、選択することが可能である。以下、当該処理を実現する構成について詳述する。

（ＭＦＰの概略構成）
図２は、本発明の実施の形態１に従うＭＦＰ１における概略構成を説明するブロック図である。

図２を参照して、本発明の実施の形態１に従うＭＦＰ１は、制御部１００と、メモリ部１０２と、画像読取部１０４と、プリント部１０６と、通信インターフェイス部１０８と、操作パネル部１１０と、記憶部１１２とを含む。

制御部１００は、代表的にＣＰＵ（Central Processing Unit）等の演算装置から構成され、プログラムを実行することで本発明の実施の形態に従う文書処理方法を実現する。

メモリ部１０２は、代表的にＤＲＡＭ（Dynamic Random Access Memory）等の揮発性の記憶装置であり、制御部１００で実行されるプログラムやプログラムの実行に必要なデータ等を保持する。

通信インターフェイス１０８は、代表的に、ネットワーク（たとえば図１に示すＬＡＮ）を介してパーソナルコンピュータＰＣとの間でデータを授受するための部位であり、たとえば、ＬＡＮアダプタおよびそれを制御するドライバソフト等を含む。

また、記憶部１１２は、代表的にハードディスクやフラッシュメモリ等の不揮発性の記憶装置であり、制御部１００が生成した電子化文書４００等を格納する。

プリント部１０６は、プリント処理を行なうための部位であり、プリント処理に係るハードウェア構成に加えて、各部の作動を制御するための制御装置をも含む。

また、操作パネル部１１０は、ユーザに対して画像や各種作動状態を表示する表示機能とともに、ユーザの操作を受付ける設定操作機能を提供する部位である。

操作パネル部１１０に含まれる図示しない表示パネルには、各電子化文書の文書画像に含まれる文書要素の一覧画像や、文書画像の所定範囲に対応する閲覧画像等が表示される。なお、閲覧画像は、文書要素に対応する画像に比較してより大きなサイズで表示される。すなわち閲覧画像の表示領域は、一覧画像における各文書要素の表示領域より大きく設定される。さらに、表示パネルにはユーザがＭＦＰ１に対して各種設定を行なうための設定画面や、ＭＦＰ１からユーザに対して作動状態などを表示するための表示画面等が表示される。

ユーザは、操作パネル部１１０を操作することで各種設定を与えることが可能であり、代表的に操作パネル部１１０に表示される設定操作画面に触れることで各種設定操作ができる。また、ユーザは、図示しないがストップボタン、スタートボタン、および操作ボタン等を押圧することにより各種設定操作を実行することができるものとする。

（一覧画像および閲覧画像の表示例）
ＭＦＰ１は、ユーザからの要求に応答して生成した複数の電子化文書に基づいて、各電子化文書の文書画像に含まれる文書要素の一覧画像を表示パネルに表示する一方、閲覧画像を表示パネルに表示することもできる。

図３は、本発明の実施の形態１に従う表示パネルに表示される一覧画像の一例を示した図である。

図３を参照して、ここでは、表示パネルに３つの電子化文書であるファイル（File Ａ．）（File Ｂ．）（File Ｃ．）に含まれている後述するしおりデータに基いて文書要素の一覧画像が示されている。

ここでは、一例として３つの電子化文書のしおりデータに基いて「タイトル」、「手書き」、「図」、「表」、「見出し」の文書要素が文書画像から抽出されて出力されている場合が示されている。

具体的にはファイル（File Ａ．）においては、しおりデータに含まれている「タイトル」に対応する文書要素が文書画像から抽出されて「報告書１」の文書要素画像（サムネイル画像）３３１ａが示されている。また、「見出し」に対応する文書要素が文書画像から抽出されて「１．概要」、「２．詳細内容」、「３．まとめ」、「４．実験」、「５．結論」の文書要素画像（サムネイル画像）３３０ａ〜３３０ｅが示されている。また、「手書き」に対応する文書要素が文書画像から抽出されて「重要」の文字の文書要素画像（サムネイル画像）３３２が示されている。

また、ファイル（File Ｂ．）においては、「図」に対応する文書要素が文書画像から抽出されて文書要素画像（サムネイル画像）３０４ａ，３０４ｄ，３０４ｅが示されている。また、「表」に対応する文書要素が文書画像から抽出されて文書要素画像（サムネイル画像）３０５が示されている。

また、ファイル（File Ｃ．）においては、「図」に対応する文書要素が文書画像から抽出されて文書要素画像（サムネイル画像）３０４ｆが示されている。

図４は、表示パネルにおいて、ファイル（File Ｂ．）の文書要素画像（サムネイル画像）３０４ｅが選択されている場合を説明する図である。

図４に示されるように、ここでは、文書要素画像（サムネイル画像）３０４ｅの矩形領域の枠が選択状態であることを示す太線で囲まれている場合が示されている。当該表示により、ユーザは、文書要素画像（サムネイル画像）３０４ｅが選択状態であることを把握することが可能である。あるいは、他の文書要素画像と比べて背景色を変更等することにより選択状態の文書要素画像（サムネイル画像）と非選択状態の文書要素画像とを差別化することも可能である。

なお、「選択」動作は代表的に表示パネル上のアイコンなどの表示位置を押圧することで実現される。

なお、表示パネルにおいては、「ＯＰＥＮ」ボタン３２０と、「Ｎｅｘｔ ｐａｇｅ」ボタン３２１と、「Ｐｒｅｖｉｏｕｓ ｐａｇｅ」ボタン３２２とが設けられており、例えば、「ＯＰＥＮ」ボタン３２０は、選択された文書要素が含まれるファイルの読み出しを実行するボタンである。また、「Ｎｅｘｔ ｐａｇｅ」ボタン３２１は、サムネイル画面が複数ページで構成される場合に、次のページの表示を実行するボタンである。「Ｐｒｅｖｉｏｕｓ ｐａｇｅ」ボタン３２２は、文書要素の一覧画像の画面（サムネイル画面）が複数ページで構成される場合に、一つ前のページの表示を実行するボタンである。

図５は、表示パネルに表示された閲覧画像を説明する図である。
図５を参照して、ここで、表示パネルにおいて、タブボタン（詳細）３０８を選択することで、文書要素画像３０４ｅを拡大した閲覧画像で表示されることになる。

また、タブボタン（サムネイル）３０２を選択することで、再び図３で説明した文書要素画像の一覧画像が表示される。

このようにファイルごとに抽出された文書要素を一覧画像上に表示することにより、ユーザが複数の電子化文書の中から、読み出された文書要素を一見して把握することにより、ユーザが望むファイルを容易に把握することができ、対象とするファイルを選択することが可能となる。

次に図６を用いて、電子化文書の生成処理および表示処理に係る機能構成について説明する。

図６は、本発明の実施の形態１に従うＭＦＰ１における概略構成を説明する機能ブロック図である。

このブロック図に示される各機能は主として、制御部１００やメモリ部１０２等によって実現される。

図６を参照して、電子化文書の生成処理を実現する機能は、画像読取部１０４と、画像バッファ部１２と、圧縮処理部１４と、電子化文書生成部１６と、文書要素抽出部１８と、しおりデータ生成部２２と、受信部３０と、プリントデータ展開部３２とによって実現される。

画像読取部１０４は、原稿３００を読取って文書画像を取得し、その文書画像を画像バッファ部１２へ出力する。画像バッファ部１２は、画像読取部１０４が逐次的に出力する文書画像のデータを一時的に格納する部位であり、一旦格納した文書画像を圧縮処理部１４および文書要素抽出部１８へ出力する。

受信部３０は、通信インターフェイス部１０８によって実現され、ネットワーク等を介して送信されてきたプリントデータを受信する部位であり、当該データをプリントデータ展開部３２に出力する。

プリントデータ展開部３２は、送信されてきたプリントデータを展開して圧縮処理部１４および文書要素抽出部１８へ出力する。

圧縮処理部１４は、画像バッファ部１２あるいはプリントデータ展開部３２から出力される文書画像を圧縮処理して電子化文書生成部１６へ出力する。この圧縮処理による圧縮度合は、生成される電子化文書の大きさや要求される文書画像の解像度等に応じて変化させることも可能であり、また圧縮処理は非可逆変換であってもよい。なお、高解像度が要求される場合などには、圧縮処理を省略することもできる。

文書要素抽出部１８は、画像バッファ部１２あるいはプリントデータ展開部３２から出力される文書画像に含まれる所定の種別の文書要素を抽出する。文書要素抽出部１８は、この文書要素の抽出に際して各文書要素の文書画像内における位置も抽出する。そして文書要素抽出部１８は、抽出した文書要素の種別およびその位置情報をしおりデータ生成部２２へ出力する。また、文書要素抽出部１８は、文書画像内の文書要素について抽出した文書要素の文書要素画像（サムネイル画像）データをしおりデータ生成部２２へ出力することも可能である。

図７は、文書画像に含まれる文書要素の抽出処理を説明するための図である。
図７（ａ）は、原稿３００から生成される文書画像の一例を示す図であり、図７（ｂ）は、図７（ａ）に示される文書画像に対して文書要素が抽出された状態の一例を示す図である。

図７（ａ）を参照して、一例として原稿３００（一例として、５ページ）が画像読取部１０４で読取られると、画像バッファ部１２には各ページに対応する文書画像が格納される。図７（ｂ）に示されるように、文書要素抽出部１８は、このような文書画像に含まれる矩形の文書要素４２０を抽出する。なお、文書要素４２０の抽出については公知の方法を用いることができるが、代表的に文字サイズや隣接する領域に対する間隔などに基づいて、各領域が抽出される。ここで、抽出対象の文書要素は、「表題（タイトル）」、「見出し」、「段落区切り」、「図」、「表」、「写真」、「手書き文字」、「下線付き文字」、「装飾文字」、「色文字」などの種別を有するものが含まれる。

より具体的には、「表題（タイトル）」は、文書画像内に配置される文字の文字サイズに基づいて抽出することができる。「見出し」は、文書画像内におけるオフセット位置やインデント位置などに基づいて抽出することができる。「段落区切り」は、後続する文字領域との間の間隔などに基づいて抽出することができる。「図」は、直線や曲線の検出数などに基づいて抽出することができる。「表」は、直線および直線の交差点の検出数などに基づいて抽出することができる。「写真」は、画像の濃淡変化の度合などに基づいて抽出することができる。「手書き文字」は、文字認識の度合などに基づいて抽出することができる。「下線付き文字」は、文字と直線との距離などに基づいて抽出することができる。「装飾文字」は、複数の段階の文字認識を行なうことで抽出することができる。「色文字」は、文字認識と対応する画素の色情報などに基づいて抽出することができる。

なお、文書画像内の共通の領域に対して、複数の文書要素が重複し抽出されてもよい。また、文書要素として抽出する種別は上述のものに限られることなく、公知の認識技術を用い、さまざまな種別の文書要素を抽出することも可能である。

再び、図６を参照して、しおりデータ生成部２２は文書要素抽出部１８から抽出された文書要素の位置情報と種別等に基づいてしおりデータを生成する。そして、しおりデータ生成部２２は、生成したしおりデータを電子化文書生成部１６へ出力する。電子化文書生成部１６は、圧縮処理部１４からの圧縮された文書画像にしおりデータ生成部２２からのしおりデータを付加することで電子化文書を生成する。

図８は、電子化文書生成部１６が生成する電子化文書４００のデータ構造の一例を示す図である。

図８を参照して、本発明の実施の形態１に従う電子化文書４００は、ヘッダ部４０２と、文書画像部４０４と、しおりデータ部４０６と、フッタ部４０８とから構成される。ヘッダ部４０２およびフッタ部４０８には、電子化文書４００の属性についての情報、たとえば作成日時・作成者・著作権情報等が格納される。

また、文書画像部４０４には各ページに対応する文書画像が格納される。
なお、この文書画像は、上述したように圧縮された状態で格納されてもよい。

しおりデータ部４０６には、文書画像に含まれる文書要素を特定するためのしおりデータが格納される。

図９は、しおりデータのデータ構成の一例を示す図である。
図９を参照して、しおりデータには各文書要素に対応付けてページ番号、領域左上座標、領域右下座標、要素種別などが格納される。また、各文書要素に対応付けて、各文書要素の文書要素画像（サムネイル画像）データを格納することも可能である。本例においては、一例として文書要素として、「見出し」の要素種別である「報告書１」の文書要素画像データが格納される場合が示されている。

ページ番号は、対応する文書要素が存在するページを特定するための位置情報である。また、領域左上座標および領域右下座標は、対応する文書要素のページ内での領域（矩形）を特定するための位置情報である。また、要素種別は、対応する文書要素の種別を特定するための情報である。

再び、図６を参照して、電子化文書生成部１６は、生成した電子化文書をユーザによる設定などに応じて記憶部１１２へ格納する。この記憶部１１２への格納に加えて、生成した電子化文書を送信部２８へ出力してもよい。

送信部２８は、通信インターフェイス部１０８によって実現され、電子化文書生成部１６で生成された電子化文書をＬＡＮなどのネットワークを介してパーソナルコンピュータＰＣへと送信する。

電子化文書の表示処理を実現する機能は、表示データ生成部２０と、表示部３４と、設定操作部２６とによって実現される。

表示部３４は、表示パネルによって実現され、設定操作部は表示パネルとストップボタン、スタートボタン、および操作ボタン等によって実現される。

表示データ生成部２０は、表示部３４に画像を表示するためのデータ（信号）を生成するための部位であり、一覧画像生成部２０ａと閲覧画像生成部２０ｂとを含む。

一覧画像生成部２０ａは、設定操作部２６から与えられるユーザ要求に基づいて、記憶部１１２から複数の電子化文書を読出し、各電子化文書に格納されている上述したしおりデータに基づいて、各電子化文書に格納されている文書要素のデータを取得する。具体的には、しおりデータを構成する「ページ番号」、「要素種別」、「領域左上座標」、「領域右下座標」に従って文書画像内に含まれる文書要素を抽出して、各電子化文書に格納されている文書要素のデータをそれぞれ結合し、文書画像内の文書要素画像（サムネイル画像）の一覧画像を表示するためのデータを生成する。あるいは、図９で説明したようにしおりデータに文書要素に対応して、文書要素画像データが保存されている場合には、しおりデータに含まれている文書要素画像データに基づいて、文書画像内の文書要素画像（サムネイル画像）の一覧画像を作成することも可能である。

一方、閲覧画像生成部２０ｂは、設定操作部２６から与えられるユーザ要求（具体的には表示部３４上に表示される文書要素の選択）に応じて、記憶部１１２から要求された電子化文書を読出し、選択された文章要素に対応する範囲を表示するためのデータを生成する。

図１０は、本発明の実施の形態１に従う電子化文書の生成処理の具体例を説明するフロー図である。

図１０を参照して、本発明の実施の形態１に従う電子化文書の生成処理は、制御部１００がプログラムやメモリ部１０２などに読出して実行し、図６に示される各機能を制御することにより実現される。

図６および図１０を参照して、まず画像読取部１０４が原稿３００を読取って文書画像を生成する（ステップＳ１００）。

この生成された文書画像は、画像バッファ部１２に格納される。そして、圧縮処理部１４が画像バッファ部１２に格納された文書画像を圧縮処理して電子化文書生成部１６へ出力する（ステップＳ１０２）。一方、文書要素抽出部１８が、画像バッファ部１２に格納された文書画像に含まれる所定の種別の文書要素およびその位置を抽出する（ステップＳ１０４）。

そして、文書要素抽出部１８が抽出した文書要素の文書画像内における位置を示す情報と種別を示す情報とをしおりデータ生成部２２へ出力する（ステップＳ１０６）。

そして、しおりデータ生成部２２が、これらの文書要素の種別と位置情報とに基づいてしおりデータを生成する（ステップＳ１０８）。

次に、電子化文書生成部１６が、圧縮処理部１４からの圧縮された文書画像にしおりデータ生成部２２からのしおりデータを付加することにより電子化文書を生成する（ステップＳ１１０）。

そして、電子化文書生成部１６が、出力部２４に電子化文書を出力する（ステップＳ１１２）。そして電子化文書の生成処理を終了する。

ここでは、画像読取部１０４が原稿３００を読取って文書画像を生成する場合について説明したが、ネットワークを介してプリントデータが外部から入力される場合においても同様に適用可能である。

図１１は、本発明の実施の形態１に従う電子化文書の生成処理の具体例を説明する別のフロー図である。

図１１を参照して、本発明の実施の形態１に従う電子化文書の別の生成処理は、制御部１００がプログラムやメモリ部１０２などに読出して実行し、図６に示される各機能を制御することにより実現される。

図１１を参照して、図１０のフローと比較して、ステップＳ１００をステップＳ１００＃に置換した点が異なる。ステップＳ１００＃において、受信部３０がプリントデータを受信してプリントデータ展開部３２でプリント用の文書画像を生成する。その他の処理については、図１０で説明したのと同様であるのでその詳細な説明は繰り返さない。

また、上記においては、文書要素抽出部１８は、主に文書要素の文書画像内における位置を示す情報と種別を示す情報とをしおりデータに含める場合について説明したが、これに限られず、例えば上述したように文書要素抽出部１８において、文書画像内の文書要素について抽出した文書要素の文書要素画像（サムネイル画像）データをしおりデータに含めることも可能である。

図１２は、本発明の実施の形態１に従う電子化文書の出力処理を説明するフロー図である。

図１２を参照して、本発明の実施の形態１に従う電子化文書の出力処理は、制御部１００がプログラムやメモリ部１０２などに読出して実行し、図６に示される各機能を制御することにより実現される。

図６および図１２を参照して、まず、出力部２４に電子化文書の入力があったかどうかを判断する（ステップＳ２００）。そして、出力部２４に電子化文書の入力があった場合には出力選択画面を表示する（ステップＳ２０１）。そして、出力選択画面に対するユーザからの選択指示があったかどうかを判断する（ステップＳ２０２）。選択指示がなかった場合には終了する。

選択指示があった場合には、次にメール送信あるいはデータ保存いずれの選択指示であるかを判断する（ステップＳ２０３）。

メール送信である場合には、次に指定された相手先へ電子化文書を送信する（ステップＳ２０４）。

一方、データ保存である場合には指定されたフォルダに電子化文書を保存する（ステップＳ２０５）。

図１３は、出力選択画面においてデータを保存する選択画面を説明する図である。
図１３を参照して、ここではデータ保存の選択画面が表示されており、一例として保存先としてフォルダ１〜フォルダ８までの保存先が示されている。

設定操作部２６によりフォルダ１〜フォルダ８までのいずれか１つを選択することにより、電子化文書が生成された場合に当該フォルダに保存することが可能である。例えば、操作パネルにおいて、表示されたフォルダ１〜フォルダ８までの保存先を指で押圧することにより選択することが可能である。なお、当該選択画面において、タブボタン（メール送信）４００を選択することで、メール送信の選択画面が表示され、タブボタン（データ保存）４０１を選択することで、データ保存の選択画面が表示されることになる。

図１４は、出力選択画面においてメール送信を実行する場合のメール送信の選択画面を説明する図である。

図１４に示されるように、ここでは宛先１〜宛先８までメールの宛先が表示されており、一例としてメールの宛先として宛先１〜宛先８のいずれかを選択することにより電子化文書をメールで送信することが可能である。例えば、操作パネルにおいて、表示された宛先１〜宛先８までの保存先を指で押圧することにより選択し、選択された宛先に対して電子化文書をメールで送信することが可能である。

図１５は、本発明の実施の形態１に従う電子化文書の表示処理を説明するフロー図である。

図１５のフロー図は、制御部１００がプログラムをメモリ部１０７などに読出して実行し、図６に示される各機能を制御することで実現される。

図６および図１５を参照して、まずファイル読出の指示があったかどうかを判断する（ステップＳ３００）。

ファイル読出の指示があった場合には、次に読出フォルダ選択画面を表示する（ステップＳ３０１）。

図１６は、読出フォルダ選択画面を説明する図である。
図１６を参照して、ここでは、読み出すフォルダの選択画面５１０が表示されており、一例として読み出し可能なフォルダ１〜フォルダ８が示されている。各フォルダに対応して選択可能なボタン５１１が設けられている。

設定操作部２６によりフォルダ１〜フォルダ８にそれぞれ対応するボタンを選択することにより、当該フォルダに格納されている少なくとも１つの電子化文書が読み出されるものとする。例えば、操作パネルにおいて、表示されたフォルダ１〜フォルダ８にそれぞれ対応するボタンを指で押圧することにより選択することが可能である。なお、「Ｃａｎｃｅｌ」ボタン５１２を押圧することにより、選択画面を終了することができる。

次に、再び図１５を参照して、読出フォルダ選択画面において、読出フォルダの選択の指示があったかどうかを判断する（ステップＳ３０２）。読出フォルダの選択の指示があった場合には次に読出モード選択画面を表示する（ステップＳ３０３）。

図１７は、読出モード選択画面を説明する図である。
図１７を参照して、読出モード選択画面５２０には、ファイル名読み出しの機能を実行するためのボタン５２１と、文書要素一覧読み出しの機能を実行するためのボタン５２２とが設けられる。

再び図１５を参照して、次に読出モード選択画面において、ファイル名の読み出し／文書要素一覧読み出しのいずれが選択されたかを判断する（ステップＳ３０４）。

ファイル名の読み出しの機能が選択された場合には次にファイル名選択画面表示を実行する（ステップＳ３０５）。

図１８は、ファイル名選択画面を説明する図である。
図１８を参照して、ここでは、ファイル名選択画面５３１が示され、ファイル名選択画面において、８個の選択可能なファイル１〜ファイル８がそれぞれ示されている。当該ファイル１〜ファイル８は、読み出しフォルダ選択画面において選択されたフォルダに格納されているファイルである。

各ファイルに対応して選択可能なボタン５３１が設けられている。
設定操作部２６によりファイル１〜ファイル８にそれぞれ対応するボタンを選択することにより、当該ファイルである電子化文書を指定することが可能である。例えば、操作パネルにおいて、表示されたファイル１〜ファイル８にそれぞれ対応するボタンを指で押圧することにより選択することが可能である。なお、「Ｃａｎｃｅｌ」ボタン５３２を押圧することにより、選択画面を終了することができる。

再び図１５を参照して、ファイル指定があったかどうかを判断する（ステップＳ３０６）。ファイル指定があった場合には次に指定されたファイルを読み出して表示する（ステップＳ３０７）。

そして、指定ファイルの確認がＯＫがどうかを判断する（ステップＳ３０８）。すなわち、読み出した指定ファイルがユーザの意図したファイルである場合には、次のステップＳ３０９に進む。

一方、指定ファイルの確認がＯＫでない場合には、再びステップＳ３０５に進む。
指定ファイルの確認がＯＫである場合には、次に、出力形式の選択指示があったかどうかを判断する（ステップＳ３０９）。

そして出力形式の選択指示があった場合には、指定された出力形式に従って指定ファイルを出力指示する（ステップＳ３１０）。

一方、ステップＳ３０４において文書要素一覧読み出しの機能が選択された場合には、文書要素の選択画面を表示する（ステップＳ３１１）。

図１９は、本発明の実施の形態１に従う文書要素選択画面を説明する図である。
図１９を参照して、ここでは、「色文字」、「装飾文字」、「下線部」、「段落区切り」、「見出し」、「タイトル」、「手書き」、「図」、「表」、「写真」の文書要素の項目４１２にそれぞれ対応して、対応する文書要素の項目をユーザが選択的にチェックするチェックボックス４１３が設けられている。

このチェックボックスにチェックすることにより、抽出する文書要素を選択することが可能である。あるいは種別組合せ選択ボタン４１１を押下することによって、これらの文書要素を適宜組合せたチェックボックス４１３に対して自動的にチェックを付けるようにすることも可能である。なお、文書要素の組み合わせは自由である。

そして、「ＯＫ」ボタン４１０を押下することにより、文書要素の選択指示があったものと判断し、次のステップに進むものとする。一方、「Ｃａｎｃｅｌ」ボタン４１６を押下することにより当該選択指示は無かったものとして処理を終了する。

そして、文書要素の選択指示があったかどうかを判断する（ステップＳ３１２）。
文書要素の選択指示があった場合には、次に文書要素の選択指示に従ってフォルダ内の全ファイルから文書要素を読み出す（ステップＳ３１３）。具体的には、一覧画像生成部２０ａは、各ファイルのしおりデータを構成する「ページ番号」、「要素種別」、「領域左上座標」、「領域右下座標」等に従って文書画像内に含まれる文書要素を抽出する。

次に、一覧画像生成部２０ａは、文書要素の一覧画像表示を実行する（ステップＳ３１４）。具体的には、図３で説明した一覧画像が表示される。あるいは、しおりデータに文書要素に対応して、文書要素画像データが保存されている場合には、しおりデータに含まれている文書要素画像データに基づいて、文書画像内の文書要素画像（サムネイル画像）の一覧画像を表示する。

次に、文書要素の指定があったかどうかを判断する（ステップＳ３１５）。
具体的には、図３で説明した文書要素画像が選択されて、表示パネルにおいて、「ＯＰＥＮ」ボタン３２０が押圧されたかどうかを判断する。

文書要素の指定があった場合には指定されたファイルを読み出して表示する（ステップＳ３１６）。

次に指定ファイルの確認がＯＫかどうかを判断する（ステップＳ３１７）。すなわち、読み出した指定ファイルがユーザの意図したファイルである場合には、次のステップＳ３０９に進む。

一方、ステップＳ３１７において、ＯＫでない場合には再びステップＳ３１４に戻る。
以降の処理については、上述したのと同様であるのでその詳細な説明は繰返さない。

図２０は、指定されたファイルの読み出し表示画面を説明する図である。
図２０を参照して、ここでは、一例として、図３のサムネイル画面において、ファイル（File Ｂ．）の文書要素画像３０４ｅが指定されて、ファイル（File Ｂ．）が読み出された場合が示されている。

そして、ここでは、表示パネルの表示領域５０２において、ファイル（File Ｂ．）の当該文書要素を含むページが表示されている。

当該表示により、ユーザは、自己が指定した文書要素部分を容易に検索することが可能である。

また、表示領域５０２の右側欄にカーソルキー欄が設けられカーソルキーを選択して上下に操作することにより表示領域をスクロールさせることが可能である。また、表示領域５０２の左側欄に「Previous」ボタン５０４、「Next」ボタン５０５が設けられている。「Previous」ボタン５０４は、現在表示されているページの前のページを表示するボタンである。「Next」ボタン５０５は、現在表示されているページの次のページを表示するボタンである。

また、表示領域５０２の上部には、タブ（Print）ボタン５００、タブ（Mail）ボタン５０１が設けられている。タブ（Print）ボタン５００は、表示領域５０２に表示されているファイルの印刷の実行を指示するボタンである。また、タブ（Mail）ボタン５０１は、表示領域５０２に表示されているファイルのメール送信を指示するボタンである。

再び、図１５を参照して、出力形式の選択指示があったかどうかを判断する（ステップＳ３０９）。指示が無ければ終了する。

具体的には、上述した図２０において、表示領域５０２の上部に設けられたタブボタンが選択されたかどうかを判断する。

そして、出力形式の指示があった場合には、指定された出力形式に従って指定ファイルの出力を指示する（ステップＳ３１０）。具体的には、上述した、タブ（Print）ボタン５００が指定された場合には、指定されたファイルは、図２のプリント部に出力されてプリント（印刷）処理されることになる。

また、上述したタブ（Mail）ボタン５０１が指定された場合には、図１４で説明したメール送信の選択画面が表示されて、操作パネルにおいて、表示された宛先を選択することにより、選択された宛先に対して電子化文書をメールで送信することが可能である。

図２０においては、表示パネルの表示領域５０２において、ファイル（File Ｂ．）の当該文書要素を含むページが表示される場合について説明したが、これに限られず、別の表示を実行することも可能である。

図２１は、指定されたファイルの読み出し表示画面を説明する別の図である。
図２１を参照して、ここでは、一例として、図３のサムネイル画面において、ファイル（File Ｂ．）の文書要素画像３０４ｅが指定されて、ファイル（File Ｂ．）が読み出された場合が示されている。そして、ここでは、表示パネルの表示領域５０２において、ファイル（File Ｂ．）の先頭のページが表示されているものとする。当該表示により、ユーザは、ファイルの先頭ページから閲覧することが可能でありユーザにとって便利である。

したがって、上述したように、複数の電子化文書（ファイル）について、ファイルごとに抽出された文書要素を一覧画像上に表示することにより、ユーザが複数の電子化文書の中から、読み出された文書要素を一見して把握することが可能であり、ユーザが望むファイルを容易に把握することができ、対象とするファイルを容易に選択することが可能となる。

（実施の形態１の変形例）
上記の実施の形態においては、図３において、３つの電子化文書のしおりデータに基いて複数の文書要素が文書画像から抽出されて電子化文書毎に出力される場合について説明したが、別の方式で表示することも可能である。

図２２は、本発明の実施の形態１の変形例に従う表示パネルに表示される一覧画像の一例を示した図である。

図２２を参照して、ここでは、表示パネルに３つの電子化文書であるファイル（File Ａ．）（File Ｂ．）（File Ｃ．）に含まれているしおりデータに基いて文書要素の一覧画像が示されている。

具体的には、３つの電子化文書のしおりデータに基いて各種別毎に文書要素画像が表示されており、ここでは、「図」の文書要素が各文書画像から抽出されて出力されている場合が示されている。

ここで、表示パネルにおいて、タブ（図）ボタン３５０を選択することで、「図」に対応する文書要素の一覧画像が表示され、タブ（表）ボタン３５１を選択することで、「表」に対応する文書要素の一覧画像が表示され、タブ（写真）ボタン３５２を選択することで、「写真」に対応する文書要素の一覧画像が表示され、、タブ（タイトル）ボタン３５３を選択することで、「タイトル」に対応する文書要素の一覧画像が表示され、タブ（見出し）ボタン３５４を選択することで、「見出し」に対応する文書要素の一覧画像が表示され、タブ（手書き）ボタン３５５を選択することで、「手書き」に対応する文書要素の一覧画像が表示される。

なお、ここでは、タブ（図）ボタン３５０、タブ（表）ボタン３５１、タブ（写真）ボタン３５２、タブ（タイトル）ボタン３５３、タブ（見出し）ボタン３５４、タブ（手書き）ボタン３５５が示されているが、これに限られず、他の種別毎に表示することも当然可能である。

このようにファイル毎かつ、文書要素毎に一覧画像上に表示することにより、ユーザが複数の電子化文書の中から、読み出された文書要素をさらに容易に把握することが可能であり、ユーザが望むファイルを容易に把握することができ、対象とするファイルを選択することが可能となる。

（実施の形態２）
図２３は、本発明の実施の形態２に従うＭＦＰ１＃における概略構成を説明する機能ブロック図である。

図２３を参照して、本発明の実施の形態２に従うＭＦＰ１＃は、図６で説明したＭＦＰ１と比較して、文書要素ファイル生成部３６をさらに設けた点と、表示データ生成部２０を表示データ生成部２０＃に置換した点が異なる。

表示データ生成部２０＃は、一覧画像生成部２０ｃと、閲覧画像生成部２０ｂとを含む。

一覧画像生成部２０ｃは、設定操作部２６から与えられるユーザ要求に基づいて、記憶部１１２から文書要素ファイルを読出し、当該文書要素ファイルに基いて一覧画像を表示するためのデータを生成する。

出力部２４は、記憶部１１２のフォルダに電子化文書を格納する際、文書要素ファイル生成部３６に対しても電子化文書を出力する。

文書要素ファイル生成部３６は、記憶部１１２に格納されているフォルダに対応付けられた文書要素ファイルを生成し、出力部２４から入力された電子化文書の文書要素のデータであるしおりデータを文書要素ファイルに格納して記憶部１１２に記憶する。

具体的には、文書要素ファイル生成部３６は、フォルダに対応付けられた文書要素ファイルに対して、入力された電子化文書であるファイルの文書要素のデータを格納する。

図２４は、本発明の実施の形態２に従う電子化文書の表示処理を説明するフロー図である。

図２４を参照して、図１５で説明した電子化文書の表示処理と比較して、ステップＳ３１３をステップＳ３１３＃に置換した点が異なる。その他の点については、同様であるのでその詳細な説明は繰り返さない。

ステップＳ３１２において、文書要素の選択指示があったかどうかを判断する。そして、文書要素の選択指示があった場合には、次に文書要素の選択指示に従って文書要素ファイルの読み出しを実行する（ステップＳ３１３）。具体的には、一覧画像生成部２０ｃは、指定されたファイルに対応付けられた文書要素ファイルを読み出し、文書要素ファイルに格納されている各ファイルのしおりデータを構成する「ページ番号」、「要素種別」、「領域左上座標」、「領域右下座標」等に従って各ファイルの文書画像内に含まれる文書要素を抽出する。

次に、一覧画像生成部２０ｃは、文書要素の一覧画像表示を実行する（ステップＳ３１４）。以降の処理については上述したのと同様であるのでその詳細な説明は繰り返さない。あるいは、しおりデータに文書要素に対応して、文書要素画像データが保存されている場合には、しおりデータに含まれている文書要素画像データに基づいて、文書画像内の文書要素画像（サムネイル画像）の一覧画像を表示する。

本発明の実施の形態２に従う電子化文書の表示処理においては、一覧画像生成部２０ｃは、フォルダ内の全ファイルを読み出して、文書要素を抽出するのではなく、予め生成された文書要素ファイルを読み出して、当該文書要素ファイルに格納されてる各ファイルのしおりデータに基いて文書要素を抽出するため高速に文書要素を抽出して文書要素の一覧画像表示が可能である。

なお、記憶部１１２に格納されているファイルが削除された場合には、文書要素ファイル内のしおりデータも削除されるものとする。

なお、上記においては、文書要素ファイルは、各ファイルの文書要素のデータを格納している場合について説明したが、各ファイルの文書要素のデータを種別毎に格納することも可能である。これにより文書要素の選択に従って文書要素ファイルが読み出された場合に、種別毎に格納された文書要素のデータを取得すればよいのでさらに高速に文書要素を抽出して文書要素の一覧画像表示が可能である。

なお、上記においてはフォルダ毎に文書要素ファイルが設けられる場合について説明したが、文書要素ファイルは、記憶部１１２全体のファイルを管理するものとすることも可能である。

今回開示された実施の形態はすべての点で例示であって、制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。

本発明の実施の形態１に従う文書処理装置を含むシステムの概略構成図である。 本発明の実施の形態１に従うＭＦＰ１における概略構成を説明するブロック図である。 本発明の実施の形態１に従う表示パネルに表示される一覧画像の一例を示した図である。 表示パネルにおいて、ファイル（File Ｂ．）の文書要素画像３０４ｅが選択されている場合を説明する図である。 表示パネルに表示された閲覧画像を説明する図である。 本発明の実施の形態１に従うＭＦＰ１における概略構成を説明する機能ブロック図である。 文書画像に含まれる文書要素の抽出処理を説明するための図である。 電子化文書生成部１６が生成する電子化文書４００のデータ構造の一例を示す図である。 しおりデータのデータ構成の一例を示す図である。 本発明の実施の形態１に従う電子化文書の生成処理の具体例を説明するフロー図である。 本発明の実施の形態１に従う電子化文書の生成処理の具体例を説明する別のフロー図である。 本発明の実施の形態１に従う電子化文書の出力処理を説明するフロー図である。 出力選択画面においてデータを保存する選択画面を説明する図である。 出力選択画面においてメール送信を実行する場合のメール送信の選択画面を説明する図である。 本発明の実施の形態１に従う電子化文書の表示処理を説明するフロー図である。 読出フォルダ選択画面を説明する図である。 読出モード選択画面を説明する図である。 ファイル名選択画面を説明する図である。 本発明の実施の形態１に従う文書要素選択画面を説明する図である。 指定されたファイルの読み出し表示画面を説明する図である。 指定されたファイルの読み出し表示画面を説明する別の図である。 本発明の実施の形態１の変形例に従う表示パネルに表示される一覧画像の一例を示した図である。 本発明の実施の形態２に従うＭＦＰ１＃における概略構成を説明する機能ブロック図である。 本発明の実施の形態２に従う電子化文書の表示処理を説明するフロー図である。

符号の説明

１，１＃ ＭＦＰ、１２ 画像バッファ部、１４ 圧縮処理部、１６ 電子化文書生成部、１８ 文書要素抽出部、２０，２０＃ 表示データ生成部、２０ａ，２０ｃ 一覧画像生成部、２０ｂ 閲覧画像生成部、２２ しおりデータ生成部、２４ 出力部、２６ 設定操作部、２８ 送信部、３０ 受信部、３２ プリントデータ展開部、３４ 表示部、３６ 文書要素ファイル生成部、１００ 制御部、１０２ メモリ部、１０４ 画像読取部、１０６ プリント部、１０８ 通信インターフェイス部、１１０ 操作パネル部、１１２ 記憶部。

Claims (7)

1. 電子化文書を処理する文書処理装置であって、
   前記電子化文書は、文書画像と属性情報とを含み、
   前記属性情報は、前記文書画像内での所定の種別の文書要素の位置を示す情報と、前記文書要素の種別を示す情報とを含み、
   表示部と、
   複数の前記電子化文書の属性情報にそれぞれ基いて、対応する電子化文書の所定の種別の文書要素を抽出して一覧画像を表示する表示制御部とを備える、文書処理装置。
2. 前記表示制御部は、前記一覧画像として表示部に表示される所定の種別の文書要素が選択された場合には、前記属性情報に基づいて選択された文書要素が含まれる対応する文書画像を表示する、請求項１記載の文書処理装置。
3. 前記表示制御部は、複数の文書要素の種別の中から選択された少なくとも１つ以上の種別に対応する文書要素を抽出して一覧画像を表示する、請求項１記載の文書処理装置。
4. 前記表示制御部は、前記一覧画像として表示する前記複数の文書要素の種別を選択入力可能な文書要素選択画面を表示する、請求項３記載の文書処理装置。
5. 前記文書要素の種別は、表題、見出し、段落区切り、図、表、写真、手書き文字、下線付文字、装飾文字、色文字の少なくともいずれかを含む、請求項１〜４のいずれか一項に記載の文書処理装置。
6. 電子化文書群を記憶する記憶部をさらに備え、
   前記電子化文書群は、フォルダ毎に管理され、
   前記表示制御部は、指定されたフォルダに含まれる複数の電子化文書の属性情報にそれぞれ基いて、対応する電子化文書の所定の種別の文書要素を抽出して一覧画像を表示する、請求項１記載の文書処理装置。
7. 電子化文書を処理する文書処理方法であって、
   前記電子化文書は、文書画像と属性情報とを含み、
   前記属性情報は、前記文書画像内での所定の種別の文書要素の位置を示す情報と、前記文書要素の種別を示す情報とを含み、
   複数の前記電子化文書の属性情報にそれぞれ基いて、対応する電子化文書の所定の種別の文書要素を抽出するステップと、
   抽出した文書要素を一覧画像として表示するステップとを備える、文書処理方法。

Images