JP2009053928A - 画像データ処理装置、画像データ処理方法、及び画像データ表示システム - Google Patents

Abstract

【課題】表示画面のサイズより広い領域を有する文書画像データを効率良くかつ読みやすく画面表示し、該画面表示に必要なデータ記憶容量の抑制及び表示機器の表示制御動作の負荷軽減が可能な画像データ処理装置等を提供する。
【解決手段】画像データ処理装置は、文書を含む画像データを取得する文書画像取得手段と、文書画像取得手段により取得された画像データから、文書の所定の単位を示す文書要素を抽出する文書要素抽出手段と、文書要素抽出手段により抽出された文書要素の読み順を特定する読み順特定手段と、読み順特定手段により特定された読み順を参照し、文書要素抽出手段により抽出された文書要素を複数の領域に分割し、分割された領域画像について分割画像データとして生成する分割画像生成手段と、を有する。
【選択図】図１

Description

本発明は、画像データ処理装置、画像データ処理方法、及び画像データ表示システムに関し、特に、文書を含む文書画像データを表示画面の小さい情報表示端末の画面上に効率的に表示する技術に関するものである。

従来から、例えばＯＣＲ（Optical Character Reader）により印刷文字や手書き文字を光学的に読み取って前もって記憶されたパターンとの照合から文字を特定し文字データとして入力する等、画像から文字を認識して画像データからテキストデータへ変換する文書画像認識が行われている。このような文書画像認識は、データ容量を抑制しデータ内容の編集が可能となる等のメリットもある反面、以下のようなデメリットを有する場合もある。

第１に、画像データからテキストデータへ変換される過程でのハードウェア資源の消費が著しい点である。これは、変換処理に際して大量のメモリが必要であることや迅速な演算処理を要することを意味する。また第２に、画像データに表された内容と変換後のテキストデータの内容の不一致が無視できない点である。これは文字認識率が低い場合に起こりうる。そして第３に、画像データに表された文書画像の風合いや著作者の意図が伝わりにくくなる点である。これは、原画像における文字フォントを変換後のテキストデータで再現することが困難なことを意味する。このようなデメリットを考慮したとき、閲覧者のユーザにとって画像データの状態で表示されることが好ましい。

他方で、近年、液晶パネルの技術的発展により、ＰＣ（Personal Computer）に加え、ＰＤＡ（Personal Digital Assistance）や携帯電話機等の様々な情報表示端末により文書や画像を表示する機会が増え、ユーザは時と場所を選ばず所望の情報を閲覧することが可能となっている。これら情報表示端末は、その携帯性から端末自体が小型化されており、当然のことながら、表示画面もその制約を受けて画面サイズは比較的小さいものとなる。このような表示画面で文書画像全体を表示すると、画面切り換え等の操作は必要ないが、文字が小さく視認性が低くなる。逆に、読みやすくするために画像を拡大すると、画面切り換え等の操作が必要となり煩わしさが生じる。

ところで、例えば特許文献１では、新聞等のデータベースサービスで配信された電子刊行物の画面表示内容が実際の紙面内容と異なることから生じる使用感での不便さに対して、刊行物のデータを構成する複数の素材データに、素材データのリンク関係に基づいたノードを設定し、設定されたノードを参照して素材データの属性情報を設定し、ノードと属性情報に応じて刊行物のデータの表示を制御するデータ処理装置が開示されている。

また、例えば特許文献２では、電子書籍の一部のページのみ、一部の画像のみ、一部の文書部分のみ、一部の解像度画像のみといった、情報の一部だけで構成される電子書籍を配信・閲覧する方法として、サーバ側において、電子書籍情報を仮電子化書籍として登録し、登録した仮電子化書籍から部分的電子書籍情報を切り分け、クライアント側からの閲覧要求に応じた部分的電子書籍情報を配信し、クライアント側において、サーバ側から配信される部分的電子書籍情報に基づいて電子書籍情報を再構築して表示部に表示する電子書籍配信閲覧方法が開示されている。
特許第３３５３２８０号公報 特開２００５−２８４５７２号公報

ＰＤＡや携帯電話機といった情報表示端末では、先に述べたとおり、ＰＣの表示モニタと比較して表示画面がかなり小さいためため、該画面のサイズより広い領域を有する文書画像データを画面表示する場合、ページ単位での表示ではユーザが詳細内容を把握することが困難となる。特許文献１の発明は、素材データ間でリンクデータを有し、これにより刊行物データの表示制御を行うものであるが、画面サイズより広い領域の文書画像データをサイズの小さい表示画面に表示させるという視点は欠けている。また、特許文献２の発明は、文書構造、文書と画像の識別、解像度別に区切られた画像情報を利用することで、情報の一部だけで構成される電子書籍の配信及び閲覧を行うものであるが、電子書籍情報の一部として切り分けられた部分的電子書籍情報を順序付けて表示する等の表示制御を行い、サイズの小さい表示画面で電子書籍の全内容を閲覧可能とするものではない。

そこで、本発明は、上述した事情に鑑み、表示画面のサイズより広い領域を有する文書画像データを効率良くかつ読みやすく画面表示し、該画面表示に必要なデータ記憶容量の抑制及び表示機器の表示制御動作の負荷軽減が可能な画像データ処理装置、画像データ処理方法、及び画像データ表示システムを提供することを目的とする。

かかる目的を達成するために、本発明は、文書を含む画像データを取得する文書画像取得手段と、文書画像取得手段により取得された画像データから、文書の所定の単位を示す文書要素複数を抽出する文書要素抽出手段と、文書要素抽出手段により抽出された文書要素の読み順を特定する読み順特定手段と、文書要素抽出手段により抽出された文書要素複数の分割画像データを生成する分割画像生成手段と、を有することを特徴とする画像データ処理装置である。

また、本発明は、上記の画像データ処理装置において、分割画像生成手段は、画像データを表示する画像データ表示装置の表示能力とに基づいて文書要素を複数の領域に分割することを特徴とするものであってもよい。

また、本発明は、上記の画像データ処理装置において、分割画像生成手段は、分割された領域画像を変倍し、該分割対象となった文書要素の行方向の幅と、画像データ表示装置の表示画面の幅とが等しくなる分割画像データを生成することを特徴とするものであってもよい。

また、本発明は、上記の画像データ処理装置において、分割画像生成手段により生成された分割画像データの表示順を決定し、表示制御データとして生成する表示制御データ生成手段と、分割画像生成手段により生成された分割画像データと、表示制御データ生成手段により生成された表示制御データとを合成する文書画像データ合成手段と、を有することを特徴とするものであってもよい。

また、本発明は、上記の画像データ処理装置において、表示制御データ生成手段は、読み順特定手段により特定された読み順と、分割画像生成手段により分割された領域画像の位置関係とに基づいて分割画像データの表示順を決定することを特徴とするものであってもよい。

また、本発明は、上記の画像データ処理装置において、文書画像データ合成手段は、表示制御データと分割画像データとを別個のデータとして、分割画像データに表示制御データを付加することを特徴とするものであってもよい。

また、本発明は、上記の画像データ処理装置において、文書画像データ合成手段は、表示制御データの内容を分割画像データのデータ中に書き込むことを特徴とするものであってもよい。

また、本発明は、上記の画像データ処理装置において、文書画像データ合成手段は、表示制御データの内容を反映させた分割画像データのデータ群を生成することを特徴とするものであってもよい。

他の態様として、本発明は、文書を含む画像データを取得する文書画像取得ステップと、文書画像取得ステップにより取得された画像データから、文書の所定の単位を示す文書要素複数を抽出する文書要素抽出ステップと、文書要素抽出ステップにより抽出された文書要素の読み順を特定する読み順特定ステップと、文書要素抽出ステップにより抽出された文書要素複数の分割画像データを生成する分割画像生成ステップと、を有することを特徴とする画像データ処理方法である。

また、本発明は、上記の画像データ処理方法において、分割画像生成ステップにより生成された分割画像データの表示順を決定し、表示制御データとして生成する表示制御データ生成ステップと、分割画像生成ステップにより生成された分割画像データと、表示制御データ生成ステップにより生成された表示制御データとを合成する文書画像データ合成ステップと、を有することを特徴とするものであってもよい。

他の態様として、本発明は、表示用画像データを生成し、画像データを表示する画像データ表示装置に該データを送信する画像データ処理装置と、画像データ処理装置からの表示用画像データを受信し画面表示する画像データ表示装置と、から構成される画像データ表示システムであって、画像データ処理装置は、文書を含む画像データを取得する文書画像取得手段と、文書画像取得手段により取得された画像データから、文書の所定の単位を示す文書要素複数を抽出する文書要素抽出手段と、文書要素抽出手段により抽出された文書要素の読み順を特定する読み順特定手段と、文書要素抽出手段により抽出された文書要素複数の分割画像データを生成する分割画像生成手段と、を有することを特徴とする画像データ表示システムである。

また、本発明は、上記の画像データ表示システムにおいて、画像データ処理装置は、分割画像生成手段により生成された分割画像データの表示順を決定し、表示制御データとして生成する表示制御データ生成手段と、分割画像生成手段により生成された分割画像データと、表示制御データ生成手段により生成された表示制御データとを合成する文書画像データ合成手段と、を有し、文書画像データ合成手段により合成された合成データを画像データ表示装置に送信し、画像データ表示装置は、画像データ処理装置から送信された合成データを取得する合成データ取得手段と、合成データ取得手段により取得された合成データから表示制御データの内容として分割画像データの表示順を解釈し、該解釈した表示順に基づいて表示すべき分割画像を決定して表示する制御を行う表示制御手段と、を有することを特徴とするものであってもよい。

本発明によれば、表示画面のサイズより広い領域を有する文書画像データを効率良くかつ読みやすく画面表示し、該画面表示に必要なデータ記憶容量の抑制及び表示機器の表示制御動作の負荷軽減が可能な画像データ処理装置、画像データ処理方法、及び画像データ表示システムが提供される。

以下、図面を参照しながら、本発明の実施形態について説明する。後述する実施形態では、画像データ表示装置をＰＤＡに適用した場合について説明するが、画像データ表示装置をＰＤＡに適用することに制限するものではなく、例えば携帯電話機、携帯音楽機器、デジタルカメラ、カーナビゲーションといった情報表示端末等、画像データが表示可能などのような電子機器に適用してもよい。

図１は、本発明の実施形態の画像データ表示システムにおけるＰＤＡ１００と文書画像処理サーバ１５０の構成を示すブロック図である。ＰＤＡ１００及び文書画像処理サーバ１５０は、ネットワークを介して接続されている。また、ＰＤＡ１００と文書画像処理サーバ１５０を接続するネットワークは、公衆ネットワークやＬＡＮ（Local Area Network）等、どのようなネットワークでもよい。また、ＰＤＡ１００が、文書画像処理サーバ１５０に対して接続する際、無線あるいは有線のどちらでもよい。

本図に示すように、文書画像処理サーバ１５０の内部は、文書画像データ取得部１５１と、文書要素抽出部１５２と、読み順特定部１５３と、分割位置決定部１５４と、分割画像作成部１５５と、表示順生成部１５６と、文書画像データ合成部１５７と、通信制御部１５８とを備え、ＰＤＡで表示する際に用いられる表示制御データを文書画像データに付加して、ＰＤＡ１００に送信する処理を行う。

文書画像データ取得部１５１は、ＰＤＡ１００に表示させる文書画像データを取得する処理を行う。取得の手段としては、スキャナにより紙原稿から読み込みを行う、あるいは図示しないＨＤＤ（Hard Disk Drive）にあらかじめ蓄積されている文書画像データを取得する等、どのような手段を用いてもよい。また、文書画像データとは、文書情報を有する画像データを示し、例えば、文書が記載された紙原稿をスキャナ等で読み込むことにより入力された画像データや、文書データから変換された画像データ等が含まれる。

図２は、文書画像処理サーバ１５０が取得した文書画像データの例を示した図である。そして、本実施形態は、この文書画像データを処理の対象とした場合について説明する。本図に示すように、当該文書画像データは、表題と横の３段組からなる文書として構成されている。

図１に戻り、文書要素抽出部１５２は、文書画像データに含まれる各文書要素を抽出する処理を行う。当該処理により、文書要素ごとの領域を特定することができる。本実施形態においては、文書要素をコラムとする。そして、文書要素抽出部１５２は、文書画像データに含まれるコラムの領域を特定する。また、文書要素抽出部１５２は、文書に掲載されている図表あるいは写真画像等も文書要素として抽出してもよい。

文書要素抽出部１５２によるコラムの領域の特定手法としては、例えば特開平５−２３３８７３号公報に記載された手法を用いる等どのような特定手法を用いてもよい。同公報に記載された手法では、標準文字サイズを決定した後、該標準文字サイズにより画像データにおいて分割された矩形を図表矩形と文字矩形とに分類し、文字矩形を統合して行矩形を抽出し、さらに行矩形を統合してコラムごとの領域を抽出している。そこで、本実施形態では、文書要素抽出部１５２は、上記手法を用いることで、コラムや図表（写真画像含む）ごとの領域範囲を特定するとともに、抽出された行矩形からコラムごとの行方向を特定する。

図３は、文書要素抽出部１５２により特定された文書要素の領域を示した説明図である。本図で示した文書要素ごとの領域は、表題３００とコラム３０１〜３０３とが文書要素として抽出されている。そして、表題及びコラムが、表示する対象の範囲として設定されることになる。なお、抽出する文書要素をコラムに制限するものではなく、単語、文字行、文字列やパラグラフ等でもよく、コラムと文字、文字行等を組み合わせたものでもよい。

図１に戻り、読み順特定部１５３は、抽出されたコラムの読み順を特定する処理を行う。この読み順の特定手法としては、どのような手法を用いてもよいが、例えば、特開平０７−１９２０８４号公報に記載された手法を用いることができる。さらに、同公報に記載された手法を用いることで、各文書要素の領域が表題を示しているのか、単なるコラムを示しているのか特定できる。そこで、本実施形態における読み順特定部１５３は、該手法を用いることで、文書要素の読み順、各文書要素の領域が表題かコラムかを特定する。

図４は、読み順特定部１５３により特定された文書要素の読み順を示した説明図である。各文書要素の領域が表題３００とコラム３０１〜３０３とに分けられ、まずは表題、コラムの順に読み順が特定される。そして、コラムの中での読み順が特定され、コラム３０１、コラム３０２、コラム３０３の順番で読み順が特定される。結果的に、表題３００が１番目、コラム３０１が２番目、コラム３０２が３番目、コラム３０３が４番目となり、各文書要素の読み順が特定される。

図１に戻り、分割位置決定部１５４は、画像を分割する位置を決定する処理を行う。具体的には、文書要素抽出部１５２で特定されたコラムの領域をＰＤＡ１００の表示画面の大きさに相当する矩形で区切り、文書要素領域の分割を行う。分割位置決定部１５４は、通信制御部１５８が文書画像処理サーバ１５０とネットワークを介して接続した後に該サーバ１５０から受信したＰＤＡ１００の表示能力（画面サイズ等）のデータを受け取り、該データから分割する領域の矩形を設定する。そして、分割後の領域中にコラム内の文字や行の漏れがないように矩形で区切る位置を決定する。

図５は、分割位置決定部１５４により分割された画像の領域を示した説明図である。本実施形態では、ＰＤＡ１００の画面サイズは、１コラムの１行分と他のコラムの一部とを包含する横幅と、１コラムの縦幅の３分の１より大きく２分の１より小さい縦幅とを有している。そのため、全てのコラムの内容を分割後の領域に漏れなく網羅するために、本図に示すように、コラム３０１に対して画像領域５０１〜５０３、コラム３０２に対して画像領域５０４〜５０６、コラム３０３に対して５０７〜５０９の計９つの画像領域となる。

図１に戻り、分割画像作成部１５５は、矩形で区切られた領域に相当する部分の画像を分割画像として生成する処理を行う。分割画像データは、文書画像データ取得部１５１で取得された文書画像データとは別に、図示しないメモリに保持される。なお、分割画像データには、どのコラムの領域を分割した分割画像かを示すコラムデータと、上下左右の４方向あるいは上下左右斜めの８方向に隣接する分割画像同士の位置関係を示すリンクデータとが属性データとして付加される。本実施形態では、９つの分割画像データが生成され保持される。

このように、画面への表示単位である分割画像ごとに画像データを生成して保持することで、大きな文書画像１枚全体をメモリ上に保持する必要がなくなり、また、リソースが比較的貧弱なモバイル機器では高負荷となりやすい、サーバ側で作成された読み順に基づいた画面スクロール等の表示制御を行わなくて済むため、ハードウェアリソースの大量消費を抑制することにつながる。

表示順生成部１５６は、ユーザが各分割画像を閲覧する順序（ＰＤＡ１００の表示画面への表示順序）を決定する処理を行う。表示順序は、読み順特定部１５３で特定されたコラムの読み順及び分割画像の位置関係に基づく文書の読み順に従ったものとなる。すなわち、表示順生成部１５６は、分割画像作成部１５５で生成された分割画像データに付加されたコラムデータ及びリンクデータを参照して分割画像の表示順序を決定する。そして、決定した表示順序のデータは、表示制御データとして生成され、図示しないメモリに保持される。

図７は、表示順生成部１５６により決定された分割画像の表示順序を示した説明図である。例えば、図２の文書のように横書きで列方向に段組みがなされている場合の文書の読み順は、左側の段から下に向かって読んでいくものとなるため、この順序を実現するために、まずコラムの読み順を判断し、次いで同一コラム内について分割画像の位置を判断する。この結果、図７に示すとおり、分割画像５０１が１番目、分割画像５０２は２番目と続き、分割画像５０９が９番目というような表示順序が決定される。当該処理は、例えば文書が縦書きで行方向に段組みされている場合でも、同様に文書の読み順に従って分割画像の表示順序を決定できる。

図１に戻り、文書画像データ合成部１５７は、表示順序を含む表示制御データと分割画像データとを合成する処理を行う。データの合成に際して、「表示制御データ（表示順序）＋分割画像データ（属性データ（コラムデータ＋リンクデータ）含む）」、「表示制御データ＋属性データ＋分割画像データ」、「分割画像データ（属性データ及び表示制御データを含む）」、「表示順序に従って並べられた分割画像データ（あるいは表示順を表す名前が与えられた分割画像データ）」というように、種々の形式で行うことが可能である。なお、第４の形式へのデータ合成は簡便で、また合成されたデータは後述するような既存のフォトビューワソフト等がそのまま使えるというメリットがある。これらのように、合成されたデータを表示制御データ付き分割画像データとして生成することで、表示制御データの取り扱いが容易となる。

例えば、「表示制御データ（表示順序）＋分割画像データ（属性データ（コラムデータ＋リンクデータ）含む）」や「表示制御データ＋属性データ＋分割画像データ」の形式でデータ合成を行う場合は、表示制御データや属性データ（例えばリンクデータ）をＨＴＭＬ（Hyper Text Markup Language）で記述し、その記述したデータを分割画像データに付加してもよい。また、表示制御データや属性データについて、ＸＭＬ（Extensible Markup Language）で記述するようにしてもよい。なお、ＨＴＭＬで記述する場合には、ＰＤＡ１００の表示画像解析部１１０はブラウザの機能を有し、内部に文書画像データ取得部１０２、表示位置決定部１０３、表示制御部１０４の各機能部を個別に設けなくてもよい。一方、ＸＭＬで記述する場合には、表示画像解析部１１０内に文書画像データ取得部１０２、表示位置決定部１０３、表示制御部１０４の各機能部を設けることとなる。

通信制御部１５８は、文書画像データ合成部１５７で生成された表示制御データ付き分割画像データをＰＤＡ１００に送信する処理を行う。また、通信制御部１５８は、ＰＤＡ１００からの文書閲覧リクエストや表示能力データ等のデータや、ネットワークに接続された他の端末装置からの画像データを受信する。

続いてＰＤＡ１００の構成について説明する。図１に示すように、ＰＤＡ１００の内部は、通信制御部１０１と、表示画像解析部１１０と、表示部１０５と、入力受付部１０６とを備え、文書画像処理サーバ１５０から分割画像データを受信し、表示部１０５の画面上に、表示制御データにおける表示順に従って分割画像を表示する。また、表示画像解析部１１０は、文書画像データ取得部１０２と、表示位置決定部１０３と、表示制御部１０４とを有する。

表示部１０５は、表示する画面を備えていればどのような構成でもよいが、本実施形態ではＰＤＡ１００が備える液晶タッチパネルとする。

入力受付部１０６は、ユーザからの入力を受け付ける処理を行う。また、入力受付部１０６からの入力に従って、後述する表示制御部１０４が画面表示を制御する。また、入力受付部１０６が入力の受け付け元となる入力デバイスはどのようなものでもよい。入力デバイスとしては、ＰＤＡ１００に備えられた方向キーや、画面への接触等を検出できる液晶タッチパネルでもよい。このような入力受付部１０６により、ユーザの操作要求に従って、閲覧を希望する分割画像を表示できる。

また、入力受付部１０６は、分割画像を文書内容に従って順に表示していく場合には、画面の移動指示は１次元的（前方、後方）でよい。この場合、本実施形態のＰＤＡ１００は、分割画像の２次元的な画面移動指示と比べて操作が容易になる。また、後述する変形例５のように、分割画像を前後左右やそれに斜め方向を加えた２次元的な画面移動指示も可能である。また、後述する変形例６のように、文書画像データの全体を表示し、全体図を参照して閲覧したい領域の分割画像を指定して表示させるようにしてもよい。

通信制御部１０１は、文書画像処理サーバ１５０等のネットワークを介して接続された端末装置との間の通信を制御することで、データを送受信する処理を行う。文書画像処理サーバ１５０との間では、文書閲覧リクエストや表示能力（画面サイズ等）のデータを送信し、分割画像データや表示制御データ等を受信する。

文書画像データ取得部１０２は、通信制御部１０１で受信したデータから、表示制御データ付き分割画像データを取得する処理を行う。

表示位置決定部１０３は、文書画像データ取得部１０２で取得された分割画像データの中から表示すべき画像を決定する処理を行う。表示すべき画像は、表示制御データにおける表示順序や入力受付部１０６への入力内容により決定される。例えば、閲覧開始時であれば表示順序が最初の分割画像が表示すべき画像となり、閲覧後はユーザの画面移動指定として入力受付部１０６で受け付けられた入力内容に従った画像となる。また、後述する変形例６のような文書画像の全体表示から閲覧したい領域を指定する場合には、ユーザの領域指定として入力受付部１０６で受け付けられた入力内容に従った画像が表示画像として決定される。

表示制御部１０４は、表示位置決定部１０３で決定された分割画像データを表示部１０５で表示するための制御を行う。そして、表示中の画像の次に表示すべき分割画像の有無を確認し、表示すべき分割画像があれば表示位置決定部１０３の決定を待って継続して表示制御を行う。また、後述する変形例６のような文書画像の全体表示から閲覧したい領域を指定する場合には、はじめに文書画像の全体像を（必要なら縮小をして）表示部１０５の画面上に表示する制御を行う。また、後述する変形例４のように、表示順序に従って並べられた分割画像を既存のフォトビューワソフト等を用いて表示する場合には、定められた順序に従って分割画像を表示部１０５に表示する制御を行う。なお、この場合は、表示位置決定部１０３は入力受付部１０６からの入力内容に基づいて表示する分割画像を決定せず、あらかじめ定められた順序に基づいて表示画像を決定し、表示制御部１０４は該決定された分割画像データを表示部１０５に表示する制御を行う。

表示部１０５は、表示制御部１０４の制御に従って分割画像を表示画面へ表示する処理を行う。図６は、表示部１０５により表示された分割画像を示した説明図である。本図では、閲覧開始時における画面表示６０１として、文書画像処理サーバ１５０から受信した分割画像群から、表示制御データの表示順における最初の分割画像が選択され表示されている。

［本実施形態の変形例１］
本実施形態の第１の変形例として、分割画像を変倍する例について説明する。上述した図５の例では、ＰＤＡ１００の表示画面の横幅と分割画像の行方向の幅とが一致せず、ＰＤＡ１００の画面幅の方が大きいため、図６に示すように、コラム３０１（左端のコラム）の１行分の文字とコラム３０２（中央のコラム）の数文字が画面表示されてしまっていた。これは、読み手によっては、コラム３０２内の文字が気になり、文章を読むのに集中できない者もいる。そこで、ＰＤＡ１００の画面幅とコラム幅を一致させ、ＰＤＡ１００の表示画面に１つのコラムのみを表示するようにすることが考えられる。

図８は、本変形例における変倍処理による分割画像サイズの変化を示した説明図である。文書画像処理サーバ１５０の分割位置決定部１５４は、ＰＤＡ１００の画面幅と表示対象のコラム幅とが一致するかどうかを判断し、両者の幅が一致しない場合、コラム１行の長さを横幅としたときに表示画面と縦横比率が同等となる縦幅の位置を分割位置と決定する。このような位置決定により区切られた画像領域が分割画像８０２となる。そして、分割画像作成部１５５は、分割画像８０２のサイズがＰＤＡの画面サイズより小さいときには、ＰＤＡの画面サイズと等しくなるように縦横同比率で拡大して、分割画像データを生成する。逆に、ＰＤＡの画面サイズの方が大きいときには、縦横同比率で縮小して分割画像データを生成する。

本図に示すとおり、変倍前の文書画像データでは分割画像８０１のように２つのコラムを含むものであったところ、上記処理を行ったことにより、分割画像８０２はＰＤＡ１００の画面幅と一致するようにして生成されている。

図９は、本変形例における変倍処理後の分割画像の画面表示を示した説明図である。本図の画面表示９０１は、図６の画面表示６０１と比較して、１つのコラムのみ表示しており、文章中の文字も大きく表示されているため、ユーザにとって読みやすい画面表示となっている（図面では図６と図９の画面サイズ（縦横比）が異なって記載されているが、いずれのＰＤＡ１００の表示部１０５であり、両者の表示内容の違いをわかりやすくするためにこのような記載となってしまっている。図９と図１１についても同様である。）。

なお、上記の方法では分割位置決定部１５４により先にコラムを分割し、その後に分割画像生成部１５５により画面サイズに合わせて変倍したが、先に画面サイズに合わせてコラムを変倍し、その後に分割するようにしてもよい。この場合、表示画面とコラムの幅比較や画像データの拡大縮小、画像の分割を分割位置決定部１５４が行い、分割された画像データの生成を分割画像生成部１５５が行うこととなる。また、この機能構成のほか、幅比較や拡大縮小等の変倍処理を変倍処理部として別の機能部を設けるように構成することもできる。

［本実施形態の変形例２］
本実施形態の第２の変形例として、文章の一部が重複するように画像領域を区切って分割画像を生成する例について説明する。上述した図５の例では、画像領域５０１中の最終行に続く文章が画像領域５０１中の１行目にくるように領域を区切り、分割画像における文章内容を漏れなく網羅するようにしていた（なお、図５では、コラム３０１の縦幅が画面サイズの縦幅の整数倍でないため、結果的に画像領域５０２と画像領域５０３は数行の文章が重複している）。読み手にとっては、表示済みの文章を次に表示される画面中に残しておくことが、読んでいる文章とのつながりをよりわかりやすくする“のりしろ”になる場合がある。

図１０は、本変形例における画像領域の分割を示した説明図である。文書画像処理サーバ１５０の分割位置決定部１５４は、ＰＤＡ１００の画面サイズの矩形で画像領域を区切るとともに、区切った画像領域内の例えば最終行が画像領域同士で重複するように分割位置を決定する。重複部分は１行でなく数行としてもよい。続いて、分割画像作成部１５５は、決定された位置で区切られた領域の画像を分割画像データとして生成する。

本図に示すとおり、上記処理を行ったことにより、分割画像１００１と分割画像１００２が生成され、両画像領域は、最終行と１行目を重複部分として有するものとなっている。なお、分割画像１００２とその下の分割画像とは、コラム３０１の縦幅と表示画面の縦幅との関係から、結果的に１行分ではなく数行分の重複部分を有している。

図１１は、本変形例における分割画像の画面表示を示した説明図である。本図における画面表示１１０１中の最終行の文章は画面表示１１０２の１行目に表示されており、ユーザは、表示画面１１０２の文章を読むにあたり、表示済みの重複部分を認識したうえで続きの文章を読むことができるため、唐突な印象を受けずに文章のつながりを感じながらスムーズに読み進めることが可能となる。このため、ユーザにとって読みやすい画面表示となっている。

また、このような表示済みの文章を重複部分として含む分割画像を表示する場合には、該重複部分が表示済みであることを一見して理解できるようにすることがユーザフレンドリーな画面表示といえる。例えば図１２に示すように、分割画像１００２の重複部分については彩度を落として表示するようにしてもよい。また、該重複部分について、表示色を変えたり、点滅して表示したりしてもよい。

また、変形例１における分割画像の変倍と本変形例における重複領域を有する画像分割とを適用することは可能で、この場合には、１つのコラムの文章を表示し、かつ、表示済みの文章を次の分割画像に含めるため、ユーザにとってより読みやすい画面表示となる。

［本実施形態の変形例３］
本実施形態の第３の変形例として、コラム内の文章を記事単位で区切り、１つの画像領域に異なる記事が含まれないように分割画像を生成する例について説明する。ここでは、記事は段落ごとに記載されるものとし、各記事の段落の間は１行空いているものとする。上述した図５の例や変形例１及び２では、コラム内の文章の内容にかかわらずＰＤＡの画面サイズにより分割画像が決定されていた。このような表示画像の領域決定では、記事ごとに配信データを売買するシステムには適切に対応できず、また、読み手にとっても、記事を単位として文章を読み進める方が内容を整理しながら理解することができると考えられる。

図１３は、本変形例における画像領域の分割を示した説明図である。図１３（ａ）に示すように、文書要素抽出部１５２により文書要素であるコラム１３００が特定される。また、文書要素抽出部１５２は、コラム１３００中の文章から記事Ａ１３０１及び記事Ｂ１３０２を特定し、読み順特定部１５３により記事の読み順について記事Ａ１３０１を１番目、記事Ｂ１３０２を２番目と決定する。

次に、図１３（ｂ）に示すように、分割位置決定部１５４により、ＰＤＡの画面サイズ（あるいは該画面サイズと縦横同比率のサイズ）で分割画像１３１１を区切る。分割位置決定部１５４は、区切った分割画像１３１１に２つの記事が含まれているかを判断し、含まれている場合には、分割画像１３１１に続く領域１３１２の先頭部分が２つ目の記事（記事Ｂ）の１行目となるように、図１３（ｄ）のように分割画像１３２２を決定する。次に、図１３（ｃ）に示すように、分割画像作成部１５５は、分割画像１３１１において含まれる記事Ｂの部分を空白に置き換えた分割画像１３２１のデータを生成し、続いて分割画像１３２２のデータを生成する。

本図に示すとおり、上記処理を行ったことにより、分割画像１３２１と分割画像１３２２が生成され、分割画像１３２１には記事Ａのみが含まれ、分割画像１３２２には記事Ｂのみが含まれるものとなっている。

なお、本変形例は１つの分割画像に１つの記事のみを表示させるものであるため、コラムの横幅とＰＤＡの画面横幅が一致しない場合には変形例１による変倍処理が同時に行われる。また、同一記事の画像領域の分割では、変形例２による重複部分を含めた画像領域の分割を行うようにしてもよい。

［本実施形態の変形例４］
本実施形態の第４の変形例として、文書画像処理サーバ１５０の文書画像データ合成部１５７により生成された、「表示順序に従って並べられた分割画像データ（あるいは表示順を表す名前が与えられた分割画像データ）」をＰＤＡ１００でその順序で表示する例について説明する。先に述べたように、上記形式へのデータ合成は簡便で、合成されたデータは既存のフォトビューワソフト等がそのまま使えるというメリットがある。

文書画像データ合成部１５７は、例えば表示順生成部１５６で生成された表示順を表すファイル名をそれぞれの分割画像データに付して合成データとする（例えば図７において、分割画像５０１のファイル名を“ｄａｔａ０００１”、分割画像５０２のファイル名を“ｄａｔａ０００２”としていき、ファイル名が表示順を表すようにする）。そして、通信制御部１５８により合成データをＰＤＡ１００へ送信し、ＰＤＡ１００では、表示画像解析部１１０によりファイル名をキーにしてソートし、ソート順に分割画像を表示部１０５に表示する制御を行う。

上記処理を行ったことにより、ＰＤＡ１００では、文書画像処理サーバから受信した分割画像データ群について表示制御データをもとに表示位置や表示順を決定する処理が不要となり、データ処理負担の軽減が図られる。また、ＰＤＡ１００が既存のフォトビューワソフトを搭載している場合は、該ソフトを用いて分割画像データの画像表示を行うことができる。

［本実施形態の変形例５］
本実施形態の第５の変形例として、ＰＤＡ１００において、表示された画像を前方及び後方の２方向のみならず、前後左右の４方向やそれに斜め方向を加えた８方向といった２次元的な画面表示の切り換えを行う例について説明する。上述してきた例では表示画像の切り換えを前後２方向で行う前提で説明してきたが、分割画像データの属性データとして各画像間の位置関係データ（リンクデータ）を用いることで、切り換え指示後の分割画像データを特定して表示するように制御することが可能となる。

文書画像処理サーバ１５０の分割画像作成部１５５により、分割画像データを生成する際に、分割画像に隣接する画像データをリンクデータとして付加する。例えば図７で分割画像５０２の画像データを生成する場合、上方向の分割画像データを画像５０２、右斜め上方向の分割画像データを画像５０４、右方向の分割画像データを画像５０５、右斜め下方向の分割画像データを画像５０６、下方向の分割画像データを画像５０３とするリンクデータを生成し、分割画像データに付加する。

ＰＤＡ１００の表示位置決定部１０３では、入力受付部１０６で画面切り換え指示として入力された表示方向と一致する方向の分割画像データを、現在表示されている分割画像データに付加されたリンクデータから探し出して切り換え後の表示画像として決定し、表示制御部１０４により表示部１０５に表示させる。

上記処理を行ったことにより、ＰＤＡ１００では、画面に表示する画像を前方か後方かのいずれかのみならず、左右や斜め方向へも切り換え表示でき、ユーザにとっての操作性が向上し、文書の所定箇所を探す手間が省け、文書全体の内容を素早く把握する等、効率性が向上する。

［本実施形態の変形例６］
本実施形態の第６の変形例として、文書画像の全体表示を行ったうえで、閲覧したい領域の指定入力により指定された領域を含む分割画像を表示する例について説明する。上述してきた例では、ＰＤＡ１００の表示部１０５に表示される画像は分割画像であり、所望する画像を閲覧するためには、例えば変形例５のように表示切り換えの方向を入力して画面表示の切り換えを行っていた。閲覧したい箇所を探していち早く画像表示するには、文書全体の画像表示から所望の箇所を指定して分割画像として表示させる方が、ユーザにとって操作しやすく、また迅速な画像表示が可能となる場合もある。

文書画像処理サーバ１５０の表示順生成部１５６では、分割画像データの表示順のほか、文書全体画像において各分割画像が位置する領域と分割画像とを関連付ける関連付けデータを生成する。そして、文書画像データ合成部１５７では、分割画像データ群、文書全体画像データ、表示制御データ（表示順データ、関連付けデータを含む）を合成し、通信制御部１５８によりＰＤＡ１００へ送信する。

ＰＤＡ１００では、通信制御部１０１で受信した合成データから文書画像データ取得部１０２が文書全体画像データを取り出し、表示制御部１０４により文書全体の画像を表示部１０５に表示する。入力受付部１０６により表示箇所の指定入力が行われたとき、指定された箇所を含む領域の分割画像を関連付けデータに基づいて特定し、表示位置決定部１０３により表示する分割画像データを決定する。そして、表示制御部１０４により該分割画像データを表示部１０５へ表示させる。なお、文書画像の全体表示を行うときはページ単位で縮小して表示するようにしてもよく、また、図５のように分割画像の領域を示して画面表示してもよい。

上記処理を行ったことにより、ＰＤＡ１００では、文書全体を画面表示し、ユーザから閲覧したい箇所を指定させ、指定された箇所を含む領域の分割画像を表示するため、ユーザが閲覧したい箇所を素早く見つけることができ、その箇所を迅速に表示することが可能となる。また、分割画像を表示した状態で閲覧したい画像へ表示切り換えを行うより、簡易な操作となりユーザビリティの向上が図られる。

［本実施形態の変形例７］
本実施形態の第７の変形例として、ＰＤＡ１００から表示能力のデータの代わりに識別情報を送信し、文書画像処理サーバ１５０において該識別情報に対応する表示能力を取得する例について説明する。上述してきた例では、ＰＤＡ１００が文書閲覧リクエストとともに表示能力データを文書画像処理サーバ１５０に送信していたが、リクエストとＰＤＡの識別情報のみを送信するように構成することも可能である。この場合、文書画像処理サーバ側でそれぞれのＰＤＡの表示能力データをテーブルとして保持しておき、受信した識別情報とテーブルとを参照してＰＤＡの表示能力を把握することとなる。

続いて、本実施形態の画像データ表示システムにおける処理の流れについて説明する。図１４は該システムの文書画像処理サーバ側における処理の流れを示したフローチャート、図１５は該システムのＰＤＡ側における処理の流れを示したフローチャートである。

はじめに図１４のフローについて説明する。まず、通信制御部１５８は、表示機器であるＰＤＡ１００の表示能力データ及び文書閲覧リクエストを受信する（ステップＳ１１）。

次に、文書画像データ取得部１５１は、ＰＤＡ１００に表示させる文書画像データを取得する（ステップＳ１２）。

次に、文書要素抽出部１５２は、取得した文書画像データに含まれるコラム、図表（写真画像含む）等を文書要素として抽出する（ステップＳ１３）。また、文書要素抽出部１５２は、抽出されたコラムごとの行方向も抽出する。

そして、読み順特定部１５３は、文書画像データに含まれるコラムの読み順を特定する（ステップＳ１４）。また、読み順特定部１５３の処理で、文書要素のコラムと表題とが区別されることになる。

次に、分割位置決定部１５４は、コラム、記事等の文書要素情報とＰＤＡ１００からの表示能力データとに基づいて、文書画像の分割位置を決定する（ステップＳ１５）。なお、変形例１のように、コラムの行方向の幅に合わせて領域を区切る場合には、ＰＤＡの画面サイズと縦横同比率となる列方向の位置を分割位置に決定する。

そして、分割画像作成部１５５は、分割位置決定部１５４で決定された分割位置に従って画像領域を区切り、区切られた領域に相当する部分の画像のデータを分割画像データとして生成する（ステップＳ１６）。また、コラムの読み順データ（コラムデータ）や分割画像の位置関係データ（リンクデータ）を属性データとして分割画像データに付加する。なお、変形例１のように決定された分割位置に基づく画像データに対して、ＰＤＡ１００の画面サイズと同等の大きさとなるように変倍して分割画像データを生成する。

次に、表示順生成部１５６は、ＰＤＡ１００の表示画面へ分割画像を表示する順序を決定し、表示制御データとして生成する（ステップＳ１７）。なお、ステップ１６において、分割画像作成部１５５により属性データを分割画像データに付加せずに、表示順生成部１５６により属性データを表示制御データに含めて生成するようにしてもよい。

そして、文書画像データ合成部１５７は、生成された分割画像データと表示制御データとを合成する（ステップＳ１８）。合成手法はどのような手法でもよいが、例えば表示制御データをＨＴＬＭやＸＭＬで記述してそのデータを分割画像データに付加したり、表示順を反映させたファイル名を各分割画像データのファイル名に付したりする等が考えられる。

そして、通信制御部１５８が、表示制御データが付加された文書画像データを、ＰＤＡ１００に送信する処理を行う（ステップＳ１９）。

上述した処理手順により、ＰＤＡ１００が文書画像データとともに表示制御データを取得することが可能となる。なお、上述した処理手順は、本実施形態による文書画像データの取得から表示制御データを付加した分割画像データをＰＤＡ１００に送信するまでの処理手順の例を示したものであり、本発明をこの処理手順に制限するものではない。

次に図１５のフローについて説明する。まず、ＰＤＡ１００の通信制御部１０１は、文書画像処理サーバ１５０との間で通信制御を行い、文書画像処理サーバ１５０から情報を受信する（ステップＳ２１）。

そして、文書画像データ取得部１０２は、受信して得られた情報から、表示制御データが付加された文書画像データを取得する（ステップＳ２２）。

そして、表示位置決定部１０３は、表示制御データに含まれる表示順に基づいて、画面表示すべき分割画像データを決定する（ステップＳ２３）。なお、閲覧開始時であれば最初の表示順の分割画像が表示すべき画像となる。

そして、表示制御部１０４では、表示すべき分割画像データがあるか否かを判断して表示の制御を行う（ステップＳ２４）。全ての分割画像データが表示済みであれば（ステップＳ２４／ＹＥＳ）処理終了となる。

まだ表示が行われていない分割画像データがある場合（ステップＳ２４／ＮＯ）は、表示部１０５にて表示すべき分割画像の表示を行う（ステップＳ２５）。

そして、分割画像の表示後、次に表示する分割画像の表示指示（画面切り換え指示）を入力受付部１０６にて行う（ステップＳ２６）。なお、変形例５では４方向や８方向の切り換え指示の入力が可能だが、変形例４では定められた順序による分割画像の表示となるため、該画面切り換え入力は不可となる。

そして、表示位置決定部２３では、入力受付部１０６における入力内容に従って表示すべき分割画像を決定する（ステップＳ２３）。

上述した処理手順により、ユーザにとって簡易な操作で、文書画像データに含む全てのコラムを読みやすく閲覧することが可能となる。なお、上述した処理手順は、本実施形態による表示制御データの付加された分割画像データの受信処理から分割画像データの表示制御までの処理手順の例を示したものであり、本発明をこの処理手順に制限するものではない。

続いて、本実施形態の画像データ表示システムにおける各装置のハードウェア構成について説明する。図１６は、該システムにおけるＰＤＡのハードウェア構成を示した図である。

ＰＤＡ１００は、制御装置となるＣＰＵ（Central Processing Unit）２０１と、ＲＡＭ（Random Access Memory）２０２及びＲＯＭ（Read Only Memory）２０３と、外部記憶装置となるフラッシュＲＯＭ２０４と、タッチペン等の入力デバイス２２０で操作及び表示可能な液晶ディスプレイ等で構成される表示操作部２０５と、表示操作部２０５からの信号を入力するための入力Ｉ／Ｆ２０６と、音声を出力する音声出力部２０７と、外部装置あるいはネットワークと接続する通信Ｉ／Ｆ２０８と、バッテリ２１０又はＡＣ電源２１１等の給電手段と接続を可能にする電源回路２０９を備えたハードウェア構成となっている。そして、ＲＯＭ２０３又はフラッシュＲＯＭ２０４にはＰＤＡ全体を制御するためのＯＳ（Operating System）等の基本プログラムやＰＤＡで使用可能なアプリケーションソフトが格納されている。

上述した実施の形態の文書画像処理サーバは、ＣＰＵなどの制御装置と、ＲＯＭやＲＡＭ等の記憶装置と、ＨＤＤ（Hard Disk Drive）、ＣＤ（Compact Disk）ドライブ装置等の外部記憶装置と、ディスプレイ装置等の表示装置と、キーボードやマウス等の入力装置を備えており、通常のコンピュータを利用したハードウェア構成となっている。

なお、上述した実施形態は、本発明の好適な実施形態であり、上記実施形態のみに本発明の範囲を限定するものではなく、本発明の要旨を逸脱しない範囲において種々の変更を施した形態での実施が可能である。

上述した本実施形態において、文書画像処理サーバ１５０で実行される文書画像処理プログラム又はＰＤＡ１００で実行される文書画像表示プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Digital Versatile Disk）等のコンピュータで読み取り可能な記録媒体に記録されて提供される。

また、本実施形態において、文書画像処理サーバ１５０で実行される文書画像処理プログラム又はＰＤＡ１００で実行される文書画像表示プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、上記文書画像処理プログラム又は上記文書画像表示プログラムをインターネット等のネットワーク経由で提供または配布するように構成してもよい。

また、本実施形態において、文書画像処理サーバ１５０で実行される文書画像処理プログラム又はＰＤＡ１００で実行される文書画像表示プログラムを、ＲＯＭ等にあらかじめ組み込んで提供するように構成してもよい。

本実施形態における文書画像処理サーバ１５０で実行される文書画像処理プログラムは、先に述べてきた各部（文書画像データ取得部１５１、文書要素抽出部１５２、読み順特定部１５３、分割位置決定部１５４、分割画像作成部１５５、表示順生成部１５６、文書画像データ合成部１５７、通信制御部１５８）を含むモジュール構成となっており、実際のハードウェアを用いて具体的手段を実現する。すなわち、ＣＰＵが上記記録媒体から文書画像処理プログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、文書画像データ取得部１５１、文書要素抽出部１５２、読み順特定部１５３、分割位置決定部１５４、分割画像作成部１５５、表示順生成部１５６、文書画像データ合成部１５７、通信制御部１５８が主記憶装置上に生成される。

また、本実施形態におけるＰＤＡ１００で実行される文書画像表示プログラムは、上述した各部（通信制御部１０１、表示画像解析部１１０（文書画像データ取得部１０２、表示位置決定部１０３、表示制御部１０４）、表示部１０５、入力受付部１０６）を含むモジュール構成となっており、実際のハードウェアを用いて具体的手段を実現する。すなわち、ＣＰＵが上記記録媒体から文書画像表示プログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、通信制御部１０１、表示画像解析部１１０（文書画像データ取得部１０２、表示位置決定部１０３、表示制御部１０４）、表示部１０５、入力受付部１０６が主記憶装置上に生成される。

本発明の実施形態に係る画像データ表示システムの構成を示した図である。 本発明の実施形態において表示対象となる文書画像を示した図である。 本発明の実施形態における文書要素の抽出を説明するための図である。 本発明の実施形態における文書要素の読み順特定を説明するための図である。 本発明の実施形態における文書要素の領域分割を説明するための図である。 本発明の実施形態における分割画像の画面表示を説明するための図である。 本発明の実施形態における分割画像の表示順決定を説明するための図である。 本発明の実施形態における文書要素の領域分割を説明するための図である。 本発明の実施形態における分割画像の画面表示を説明するための図である。 本発明の実施形態における文書要素の領域分割を説明するための図である。 本発明の実施形態における分割画像の画面表示を説明するための図である。 本発明の実施形態における分割画像の画面表示を説明するための図である。 本発明の実施形態における文書要素の領域分割を説明するための図である。 本発明の実施形態における画像データ処理装置側の処理の流れを示したフローチャートである。 本発明の実施形態における画像データ表示装置側の処理の流れを示したフローチャートである。 本発明の実施形態における画像データ表示装置のハードウェア構成を示した図である。

符号の説明

１００ ＰＤＡ
１０１ 通信制御部
１０２ 文書画像データ取得部
１０３ 表示位置決定部
１０４ 表示制御部
１０５ 表示部
１０６ 入力受付部
１１０ 表示画像解析部
１５０ 文書画像処理サーバ
１５１ 文書画像データ取得部
１５２ 文書要素抽出部
１５３ 読み順特定部
１５４ 分割位置決定部
１５５ 分割画像作成部
１５６ 表示順生成部
１５７ 文書画像データ合成部
１５８ 通信制御部

Claims (12)

1. 文書を含む画像データを取得する文書画像取得手段と、
   前記文書画像取得手段により取得された前記画像データから、文書の所定の単位を示す文書要素を複数抽出する文書要素抽出手段と、
   前記文書要素抽出手段により抽出された文書要素の読み順を特定する読み順特定手段と、
   前記文書要素抽出手段により抽出された文書要素複数の分割画像データを生成する分割画像生成手段と、
   を有することを特徴とする画像データ処理装置。
2. 前記分割画像生成手段は、画像データを表示する画像データ表示装置の表示能力に基づいて前記文書要素を複数の領域に分割することを特徴とする請求項１に記載の画像データ処理装置。
3. 前記分割画像生成手段は、前記分割された領域画像を変倍し、該分割対象となった前記文書要素の行方向の幅と、前記画像データ表示装置の表示画面の幅とが等しくなる前記分割画像データを生成することを特徴とする請求項２に記載の画像データ処理装置。
4. 前記分割画像生成手段により生成された分割画像データの表示順を決定し、表示制御データとして生成する表示制御データ生成手段と、
   前記分割画像生成手段により生成された分割画像データと、前記表示制御データ生成手段により生成された表示制御データとを合成する文書画像データ合成手段と、
   を有することを特徴とする請求項１から３のいずれか１項に記載の画像データ処理装置。
5. 前記表示制御データ生成手段は、前記読み順特定手段により特定された読み順と、前記分割画像生成手段により分割された領域画像の位置関係とに基づいて前記分割画像データの表示順を決定することを特徴とする請求項４に記載の画像データ処理装置。
6. 前記文書画像データ合成手段は、前記表示制御データと前記分割画像データとを別個のデータとして、前記分割画像データに前記表示制御データを付加することを特徴とする請求項４又は５に記載の画像データ処理装置。
7. 前記文書画像データ合成手段は、前記表示制御データの内容を前記分割画像データのデータ中に書き込むことを特徴とする請求項４又は５に記載の画像データ処理装置。
8. 前記文書画像データ合成手段は、前記表示制御データの内容を反映させた前記分割画像データのデータ群を生成することを特徴とする請求項４又は５に記載の画像データ処理装置。
9. 文書を含む画像データを取得する文書画像取得ステップと、
   前記文書画像取得ステップにより取得された前記画像データから、文書の所定の単位を示す文書要素を複数抽出する文書要素抽出ステップと、
   前記文書要素抽出ステップにより抽出された文書要素の読み順を特定する読み順特定ステップと、
   前記文書要素抽出ステップにより抽出された文書要素複数の分割画像データを生成する分割画像生成ステップと、
   を有することを特徴とする画像データ処理方法。
10. 前記分割画像生成ステップにより生成された分割画像データの表示順を決定し、表示制御データとして生成する表示制御データ生成ステップと、
    前記分割画像生成ステップにより生成された分割画像データと、前記表示制御データ生成ステップにより生成された表示制御データとを合成する文書画像データ合成ステップと、
    を有することを特徴とする請求項９に記載の画像データ処理方法。
11. 表示用画像データを生成し、画像データを表示する画像データ表示装置に該データを送信する画像データ処理装置と、前記画像データ処理装置からの前記表示用画像データを受信し画面表示する前記画像データ表示装置と、から構成される画像データ表示システムであって、
    前記画像データ処理装置は、
    文書を含む画像データを取得する文書画像取得手段と、
    前記文書画像取得手段により取得された前記画像データから、文書の所定の単位を示す文書要素複数を抽出する文書要素抽出手段と、
    前記文書要素抽出手段により抽出された文書要素の読み順を特定する読み順特定手段と、
    前記文書要素抽出手段により抽出された文書要素複数の分割画像データを生成する分割画像生成手段と、
    を有することを特徴とする画像データ表示システム。
12. 前記画像データ処理装置は、
    前記分割画像生成手段により生成された分割画像データの表示順を決定し、表示制御データとして生成する表示制御データ生成手段と、
    前記分割画像生成手段により生成された分割画像データと、前記表示制御データ生成手段により生成された表示制御データとを合成する文書画像データ合成手段と、
    を有し、前記文書画像データ合成手段により合成された合成データを前記画像データ表示装置に送信し、
    前記画像データ表示装置は、
    前記画像データ処理装置から送信された合成データを取得する合成データ取得手段と、
    前記合成データ取得手段により取得された合成データから前記表示制御データの内容として前記分割画像データの表示順を解釈し、該解釈した前記表示順に基づいて表示すべき前記分割画像を決定して表示する制御を行う表示制御手段と、
    を有することを特徴とする請求項１１に記載の画像データ表示システム。

Images