JP2007159081A - 画像表示システム及びデータ処理方法 - Google Patents

Abstract

【課題】サーバから提供される文書画像を適切にクライアント装置に表示させること。
【解決手段】サーバは、クライアント装置からの閲覧要求に基づいて、元文書画像４を読み出し、項目ごとに個別の文書画像として項目文書画像４１を抽出する。続いて、サーバは、抽出された項目文書画像４１を行文書画像４２に分割する。さらに、サーバは、行文書画像４２をクライアント装置の表示サイズに基づいた改行幅で改行し、表示用文書画像４３を生成する。次に、サーバは、各項目文書画像４１における表示用文書画像４３の先頭の一行目をそれぞれ抽出して項目リストを作成し、クライアント装置へ送信する。クライアント装置は、閲覧を希望する項目を選択し、選択情報をサーバへ送信する。サーバは、該当項目の表示用文書画像４３をクライアント装置へ送信する。クライアント装置は、表示用文書画像４３を画像表示部に表示する。
【選択図】図３

Description

本発明は、クライアント装置からの表示要求に基づいて、特定の文書画像を表示させる画像表示システム及び画像表示システムにおけるデータ処理方法に関する。

ＦＡＸ（ファクシミリ）原稿などを光学的に読み取った文書画像を携帯電話や携帯端末装置などのディスプレイに表示し、ユーザに閲覧可能にさせる画像表示システムが実用化されている。
ところで、携帯電話や携帯端末装置などは、ユーザの携帯時における利便性を考慮して、本体装置自体が小さく構成されている。そのため、出力装置であるディスプレイも、その表示画面サイズが制約されてしまっている。
従来、このような小さいサイズのディスプレイを介して画像を表示する際の表示処理をより向上させるための技術が下記の特許文献をはじめ種々提案されている。

特開平６−４６２２１号公報 特開２００３−２７３９５４公報 特開２００２−１０１２０２公報

特許文献１には、文書画像を領域に分割して蓄積して、座標とともに記憶し、そして、画像の画素数が表示装置の表示能力を上回った場合、検索要求に関して優先度の高いものから表示する技術が提案されている。
特許文献２には、画像を送信する宛先端末が携帯端末か否かを判別し、携帯端末であれば、その携帯端末の画面サイズを取得し、取得した画面サイズに合うように画像を変換する技術が提案されている。
特許文献３には、携帯型情報端末装置を指定してＦＡＸ送信されたイメージデータをサーバに蓄積し、このサーバにアクセスすることによって、蓄積されたイメージデータを携帯端末に転送させて詳細な内容を参照させる技術が提案されている。

しかしながら、特許文献１で提案されている技術では、画像が表示能力を超えてしまったとき、優先度の高い領域の画像から表示されてしまうため、優先度が低いものは表示されず、表示内容を保証することが困難であった。
また、特許文献２で提案されている技術では、画面サイズに応じて画像全体を縮小して表示させるため、詳細な内容を適切に確認することが困難であった。
さらに、特許文献３で提案されている技術では、サーバから転送されるイメージデータの容量が多くなると、通信時間も長くなり、利便性を低下させるおそれがあった。また、サーバから転送されるイメージデータの容量が多くなると、携帯端末の表示能力を超えてしまう可能性あり、画像が適切に表示されないおそれがあった。

そこで、本発明は、文書画像データを適切にクライアント装置に表示させることができる画像表示システム及び画像表示システムにおけるデータ処理方法を提供することを目的とする。

請求項１記載の発明では、クライアント装置からの表示要求に基づいて、特定の画像を前記クライアント装置へ送信する画像表示システムであって、文書画像から項目ごとに個別の文書画像として項目文書画像を抽出する抽出手段と、前記抽出手段により抽出された前記項目文書画像を文書の行ごとに分割し、さらに、この行分割された文書画像を前記クライアント装置における表示サイズに基づいた改行幅で改行した表示用文書画像を生成する生成手段と、前記抽出手段により抽出された前記項目文書画像の一部を切り出す切り出し手段と、前記切り出し手段により切り出された前記項目文書画像の一部を項目ごとに示す項目リストを前記クライアント装置に送信するリスト送信手段と、前記クライアント装置による前記項目の選択を受け付ける受付手段と、前記受付手段により受け付けられた項目に該当する前記項目文書画像の表示用文書画像を前記クライアント装置へ送信する項目文書画像送信手段と、を備えることにより前記目的を達成する。

請求項２記載の発明では、請求項１記載の画像表示システムにおいて、前記リスト送信手段は、前記生成手段により生成された表示用文書画像の先頭の一行を項目ごとに示す項目リストを前記クライアント装置に送信することを特徴とする。
請求項３記載の発明では、請求項２記載の画像表示システムにおいて、前記抽出手段により抽出された項目文書画像の属性情報を付加する属性付加手段を備え、前記リスト送信手段は、前記属性付加手段により付加された前記項目文書画像の属性情報を前記項目リストと共に前記クライアント装置に送信することを特徴とする。
請求項４記載の発明では、請求項３記載の画像表示システムにおいて、前記リスト送信手段は、前記項目文書画像の属性情報の送信の有無を任意に設定可能とすることを特徴とする。

請求項５記載の発明では、請求項３または請求項４記載の画像表示システムにおいて、前記受付手段は、前記クライアント装置による前記属性情報の選択を受け付け、前記項目文書画像送信手段は、前記受付手段により受け付けられた前記属性情報に該当する前記項目文書画像の表示用文書画像を前記クライアント装置へ送信することを特徴とする。
請求項６記載の発明では、請求項３、請求項４または請求項５記載の画像表示システムにおいて、前記属性情報を格納する属性情報格納部を備えたことを特徴とする。

請求項７記載の発明では、クライアント装置からの表示要求に基づいて、特定の画像を前記クライアント装置へ送信する画像表示システムにおけるデータ処理方法であって、文書画像から項目ごとに個別の文書画像として項目文書画像を抽出する第１のステップと、前記第１のステップにより抽出された前記項目文書画像を文書の行ごとに分割し、さらに、この行分割された文書画像を前記クライアント装置における表示サイズに基づいた改行幅で改行した表示用文書画像を生成する第２のステップと、前記第１のステップにより抽出された前記項目文書画像の一部を切り出す第３のステップと、前記第３のステップにより切り出された前記項目文書画像の一部を項目ごとに示す項目リストを前記クライアント装置に送信する第４のステップと、前記クライアント装置による前記項目の選択を受け付ける第５のステップと、前記第５のステップにより受け付けられた項目に該当する前記項目文書画像の表示用文書画像を前記クライアント装置へ送信する第６のステップと、を備えることにより前記目的を達成する。

請求項１記載の発明によれば、項目文書画像の一部を項目ごとに示す項目リストを生成し、この項目リストから選択された項目に該当する項目文書画像のみを送信することにより、選択された項目のみを適切にクライアント装置に表示させることができる。
請求項２記載の発明によれば、表示用文書画像の先頭の一行を用いて作成することにより、適切な項目リストを送信することができる。
請求項３記載の発明によれば、項目文書画像に属性情報を付加し、この属性情報を用いて項目リストを作成することにより、項目リストの内容が分かりやすくなり、項目選択時におけるユーザの利便性を向上させることができる。

請求項４記載の発明によれば、項目文書画像の属性情報の送信の有無を任意に設定可能とすることにより、項目リストのバリエーションを増やすことができる。
請求項５記載の発明によれば、属性情報に基づく表示項目の選択を受け付けることにより、ユーザは属性情報に基づいて表示を希望する項目を適切に選択することができる。
請求項６記載の発明によれば、属性情報格納部を備えることにより、属性情報を保存することができる。
請求項７記載の発明によれば、項目文書画像の一部を項目ごとに示す項目リストを生成し、この項目リストから選択された項目に該当する項目文書画像のみを送信することにより、選択された項目のみを適切にクライアント装置に表示させることができる。

以下、本発明の画像表示システムにおける好適な実施の形態について、図１から図６を参照して詳細に説明する。
図１は、本実施形態の画像表示システムの概要構成を表した図である。
この画像表示システムは、携帯端末や携帯電話から構成されるクライアント装置２の画像表示部２１に、サーバ１からダウンロードした文書画像を表示させるものである。
即ち、クライアント装置２からの閲覧要求に対して、サーバ１が動的に画像コンテンツを生成し、クライアント装置２に画像コンテンツを表示するように構成されている。
図１に示されるように、画像表示システムは、インターネットなどのネットワーク３を介して接続されたサーバ１およびクライアント装置２を備えている。

サーバ１は、画像表示システムのホストコンピュータであり、画像表示サービスの提供元として機能する。
サーバ１は、内蔵されている各種プログラムに基づいて情報処理を高速に実行することが可能なワークステーションから構成され、入力、記憶、演算、制御、出力の５大機能を有している。
このサーバ１には、第１画像処理部１１、第２画像処理部１２、属性情報判断部１３、属性情報付加部１４、属性情報格納部１５などの機能ブロックを備えている。
また、サーバ１には、画像表示サービスにおける提供対象となる文書画像を格納する記憶部を備えている。
なお、文書画像とは、ＦＡＸ（ファクシミリ）原稿などを光学的に読み取ったイメージデータである。

第１画像処理部１１は、図３に示すように、元文書画像４から個別の文書画像として項目文書画像４１を抽出し、さらにこの項目文書画像４１を文書の行単位の行文書画像４２に分割する処理を行う。なお、第１画像処理部１１は、抽出手段として機能する。
第２画像処理部１２は、図３に示すように、後述するクライアント装置２の画像表示部２１における表示能力に基づいて、詳しくは、画像表示部２１の表示サイズに基づいて設定された改行幅で行文書画像４２を改行し表示用文書画像４３を生成する処理を行う。なお、第２画像処理部１２は、生成手段として機能する。

属性情報判断部１３は、第１画像処理部１１において抽出された項目文書画像４１に対応する属性情報を判断する処理を行う。なお、属性判断は、例えば、図５に示すような属性テンプレートを用いて行われる。
属性情報付加部１４は、属性情報判断部１３において判断された属性情報を項目文書画像４１に付加する（紐付ける）処理を行う。
属性情報格納部１５は、属性情報に関する文字情報、詳しくは、項目文書画像４１から正規表現を用いて抜き取った電話番号、ＦＡＸ番号、メールアドレス、ＵＲＬ等の文字情報（テキストデータまたはイメージデータ）を格納する。

画像表示システムを構成するクライアント装置２は、画像表示サービスを受ける側のコンピュータであり、ユーザが使用する端末装置によって構成されている。
本実施の形態では、このクライアント装置２は、携帯電話によって構成されているが、例えば、ＰＤＡ（携帯情報端末）によって構成するようにしてもよい。
クライアント装置２は、ネットワーク３へ接続する機能を備えた携帯電話によって構成されており、ネットワーク３を介してサーバ１との間でデータの送受信が可能となっている。
また、クライアント装置２には、画像表示部２１および属性情報選択部２２などの機能ブロックを備えている。

画像表示部２１は、クライアント装置２における出力装置であり、例えば、液晶ディスプレイによって構成されている。この画像表示部２１は、サーバ１から送信（転送）される項目リストや選択された項目に関する文書画像が表示される。
属性情報選択部２２は、画像表示部２１に表示される項目リストから表示を希望する項目の画像（または項目に該当する項目属性）の選択を指示（入力）する処理を行う。
この他、クライアント装置２には、コマンドやデータを入力する入力装置（例えば、テンキーや文字キー、機能選択キーなど）、プログラムによって情報処理を行う演算装置、各種データを格納する記憶装置、制御装置を備えている。
なお、画像表示部２１および属性情報選択部２２は、ＨＴＭＬ、ＣＨＴＭＬ等のブラウザアプリケーションまたはサーバからダウンロードしたアプリケーションを用いて作られ、インタフェースとして機能する。

次に、このように構成される画像表示システムにおける文書画像の提供処理の動作について説明する。
図２は、本実施の形態に係る画像表示システムにおける動作処理の手順を示したフローチャートである。
サーバ１に格納されている文書画像の閲覧を希望する場合、まず、クライアント装置２は、文書画像の閲覧要求をサーバ１へ送信する（ステップ１１）。詳しくは、閲覧を希望する文書画像の指定情報、およびクライアント装置２の画像表示部２１における表示サイズの情報をネットワーク３を介してサーバ１へ送信する。

次に、サーバ１は、クライアント装置２からの文書画像の閲覧要求を受信すると、文書画像の指定情報に基づいて、該当する元文書画像４を記憶装置から読み出す。
なお、元文書画像４は、画像データ、即ちイメージデータそのままの形式で記憶装置内に保存されている。
サーバ１は、第１画像処理部１１において、図３に示すように、読み出した元文書画像４から項目ごとに個別の文書画像として項目文書画像４１を抽出する（ステップ２１）。
詳しくは、元文書画像４から、文書と文書の間の切れ目を判断し、その文書画像から文章が書かれている部分のみ矩形領域ごとに切り出す処理を行う。

続いて、サーバ１は、図３に示すように、第１画像処理部１１において、抽出された項目文書画像４１を行ごとに、即ち行文書画像４２に分割する（ステップ２２）。
詳しくは、項目文書画像４１から、文書と文書の間の空白から文章の行を判断し、文書の行ごとに分割する処理を行う。
さらに、サーバ１は、第２画像処理部１２において、行分割された文書画像、即ち行文書画像４２をクライアント装置２から送信された表示サイズの情報に基づいた改行幅で改行した表示用文書画像４３を生成する（ステップ２３）。
詳しくは、文書の行ごとに分割された行文書画像４２から、例えば、クライアント装置２から得られた画像表示部２１の画面サイズ（表示サイズ）以下の領域における画素値をスキャンし、文字と文字の間の空白が判断されたところで切り出す処理を行う。

図４は、展開された元文書画像４のデータ構造を示した図である。
上述したように、サーバ１の第１画像処理部１１および第２画像処理部１２において処理された元文書画像４は、項目文書画像４１、行文書画像４２、表示用文書画像４３に展開された状態で保存される。
さらに、図４に示すように、設定ＸＭＬデータとして、処理された文書画像の位置情報や領域情報が格納されるようになっている。

図２の説明に戻り、表示用文書画像４３が生成されると、サーバ１は、属性情報判断部１３において、項目文書画像４１ごとに、その項目の属性情報を判断する（ステップ２４）。
なお、属性情報とは、該当する項目の文書画像情報を示し、例えば、タイトル、本文、差出人情報（氏名、電話番号など）、ヘッダ、フッタ等を示す。
属性情報の判断は、例えば、図５に示すような属性情報を判断する属性テンプレートと、項目文書画像４１の配置場所（位置情報）を照らし合わせることによって行う。
詳しくは、図５に示す属性テンプレートは、上から１ブロック目をヘッダ、２ブロック目を差出人、３ブロック目を本文、４ブロック目をフッタと定義されており、その領域に含まれている文書画像をその属性情報として判断する。

サーバ１は、属性情報付加部１４において、判断された属性情報を、項目文書画像４１のデータに付加する（ステップ２５）。
続いて、サーバ１は、属性情報、例えば、属性情報に関する文字情報である、項目文書画像４１から正規表現を用いて抜き取った電話番号、ＦＡＸ番号、メールアドレス、ＵＲＬ等の文字情報（テキストデータまたはイメージデータ）を属性情報格納部１５に格納する（ステップ２６）。

次に、サーバ１は、各項目文書画像４１における表示用文書画像４３の先頭の一行目をそれぞれ抽出した簡略画像データを用いて項目リストを作成し、これをクライアント装置２へネットワーク３を介して送信する（ステップ２７）。
なお、本実施の形態では、項目文書画像４１の一部を切り出す切り出し手段において、表示用文書画像４３の先頭の一行目をそれぞれ抽出するように構成されているが、項目リストを作成する際に用いる簡略画像データは、これに限定されるものではない。例えば、項目文書画像４１の先頭の一部の領域（一文字領域）を抽出して簡略画像データとして扱うようにしてもよい。
本実施の形態では、抽出した表示用文書画像４３の先頭の一行目に属性情報を付加した項目リストを作成するように構成されている。
なお、項目リストに対する属性情報の付加（添付）の有無は、任意に設定可能となっている。

続いて、クライアント装置２は、サーバ１から送信される項目リストを受信し、受信した項目リストを画像表示部２１に表示する（ステップ１２）。
図６（ａ）は、クライアント装置２の画像表示部２１における項目リストの表示例を示した図である。
図６（ａ）に示すように、画像表示部２１には、属性情報と表示用文書画像４３の先頭の一行目の画像（イメージデータ）の一覧が、選択可能に表示される。

次に、クライアント装置２のユーザ（操作者）は、画像表示部２１に表示された項目リストから、属性情報選択部２２を操作することによって、閲覧（詳細表示）を希望する項目を選択する（ステップ１３）。
この項目の選択は、クライアント装置２の入力装置を操作することによって可能であり、最終的に「決定」ボタンが押下された時点で選択されている項目が選択情報となる。
クライアント装置２は、項目の選択情報（選択指示）をネットワーク３を介してサーバ１へ送信する（ステップ１４）。

サーバ１は、クライアント装置２からの選択情報を受信すると、この選択情報に基づいて、該当項目の表示用文書画像４３を記憶装置から読み出し、クライアント装置２へネットワーク３を介して送信する（ステップ２８）。
クライアント装置２は、サーバ１から送信される表示用文書画像４３を受信し、受信した表示用文書画像４３を画像表示部２１に表示する（ステップ１５）。
図６（ｂ）は、クライアント装置２の画像表示部２１における表示用文書画像４３の表示例を示した図である。
図６（ｂ）に示すように、画像表示部２１には、項目リストにオーバーレイさせて（重ねて）表示用文書画像４３が表示される。
なお、画像表示部２１における表示用文書画像４３の表示方法は、このような重ね表示に限定されるものではなく、例えば、表示用文書画像４３を画像表示部２１の全面に表示させる切替表示であってもよい。
画像表示部２１における表示形式は、クライアント装置２において任意に設定可能とする。また、表示用文書画像４３を表示する前に表示形式の選択をユーザに促すようにしてもよい。

次に、クライアント装置２は、文書画像の閲覧処理の操作が続行されたか否かを判断する（ステップ１６）。即ち、再度、属性情報選択部２２が操作されたか否かを判断する。
属性情報選択部２２が操作された場合、即ち、文書画像の閲覧処理の操作が続行されたと判断された場合（ステップ１６；Ｙ）、クライアント装置２は、引き続きステップ１２の処理に戻り、一連の処理を繰り返す。
一方、例えば、「終了キー」が押下された場合、即ち、文書画像の閲覧処理の操作が終了したと判断された場合（ステップ１６；Ｎ）、クライアント装置２は、そのまま処理を終了する。

このように、クライアント装置２では、一度目の操作では、元文書画像４の全ての領域に対する項目リストを表示する処理を行う。つまり、各項目（領域）の項目文書画像４１の一部および属性情報の一覧を画像表示部２１に表示させる。
二度目の操作では、選択された項目の項目文書画像４１に基づいて生成された表示用文書画像４３を１つの画像として画像表示部２１に表示させる。
従って、一度目の操作において、閲覧したい項目（属性情報）を項目リストから選択することによって、その選択された属性情報を含む（有する）項目文書画像４１に対応した表示用文書画像４３のみを表示させることができる。

本実施の形態によれば、クライアント装置２において、サーバ１に格納されている文書画像の全ての情報を閲覧表示させることが可能となり、さらに、視認性の高い文書画像を表示させることができる。また、選択された項目についてのみの表示用文書画像４３を表示させるため、画像を表示させるまでの時間を削減することができる。
本実施の形態によれば、項目文書画像４１に属性情報を付加することにより、項目リストにおける文書画像の全体の構成が分かりやすくなり、視認性を向上することが可能となる。即ち、属性情報を付加することにより、冗長である可能性の高い情報が削除されるので視認性を向上することができる。
クライアント装置２においても、項目リストとして、属性情報を表示させることにより、表示する情報（文書画像に関する情報）の冗長部分をより少なくすることができるので視認性を向上させることが可能となる。
さらに、属性情報を属性情報格納部１５に格納することにより、格納された属性情報を他の処理に流用することができる。

本実施形態の画像表示システムの概要構成を表した図である。 本実施の形態に係る画像表示システムにおける動作処理の手順を示したフローチャートである。 サーバにおける画像処理の説明図である。 展開された元文書画像のデータ構造を示した図である。 属性テンプレートの一例を示した図である。 （ａ）はクライアント装置の画像表示部における項目リストの表示例を示した図であり、（ｂ）はクライアント装置の画像表示部における表示用文書画像の表示例を示した図である。

符号の説明

１ サーバ
２ クライアント装置
３ ネットワーク
４ 元文書画像
１１ 第１画像処理部
１２ 第２画像処理部
１３ 属性情報判断部
１４ 属性情報付加部
１５ 属性情報格納部
２１ 画像表示部
２２ 属性情報選択部
４１ 項目文書画像
４２ 行文書画像
４３ 表示用文書画像

Claims (7)

1. クライアント装置からの表示要求に基づいて、特定の画像を前記クライアント装置へ送信する画像表示システムであって、
   文書画像から項目ごとに個別の文書画像として項目文書画像を抽出する抽出手段と、
   前記抽出手段により抽出された前記項目文書画像を文書の行ごとに分割し、さらに、この行分割された文書画像を前記クライアント装置における表示サイズに基づいた改行幅で改行した表示用文書画像を生成する生成手段と、
   前記抽出手段により抽出された前記項目文書画像の一部を切り出す切り出し手段と、
   前記切り出し手段により切り出された前記項目文書画像の一部を項目ごとに示す項目リストを前記クライアント装置に送信するリスト送信手段と、
   前記クライアント装置による前記項目の選択を受け付ける受付手段と、
   前記受付手段により受け付けられた項目に該当する前記項目文書画像の表示用文書画像を前記クライアント装置へ送信する項目文書画像送信手段と、
   を備えたことを特徴とする画像表示システム。
2. 前記リスト送信手段は、前記生成手段により生成された表示用文書画像の先頭の一行を項目ごとに示す項目リストを前記クライアント装置に送信することを特徴とする請求項１記載の画像表示システム。
3. 前記抽出手段により抽出された項目文書画像の属性情報を付加する属性付加手段を備え、
   前記リスト送信手段は、前記属性付加手段により付加された前記項目文書画像の属性情報を前記項目リストと共に前記クライアント装置に送信することを特徴とする請求項２記載の画像表示システム。
4. 前記リスト送信手段は、前記項目文書画像の属性情報の送信の有無を任意に設定可能とすることを特徴とする請求項３記載の画像表示システム。
5. 前記受付手段は、前記クライアント装置による前記属性情報の選択を受け付け、
   前記項目文書画像送信手段は、前記受付手段により受け付けられた前記属性情報に該当する前記項目文書画像の表示用文書画像を前記クライアント装置へ送信することを特徴とする請求項３または請求項４記載の画像表示システム。
6. 前記属性情報を格納する属性情報格納部を備えたことを特徴とする請求項３、請求項４または請求項５記載の画像表示システム。
7. クライアント装置からの表示要求に基づいて、特定の画像を前記クライアント装置へ送信する画像表示システムにおけるデータ処理方法であって、
   文書画像から項目ごとに個別の文書画像として項目文書画像を抽出する第１のステップと、
   前記第１のステップにより抽出された前記項目文書画像を文書の行ごとに分割し、さらに、この行分割された文書画像を前記クライアント装置における表示サイズに基づいた改行幅で改行した表示用文書画像を生成する第２のステップと、
   前記第１のステップにより抽出された前記項目文書画像の一部を切り出す第３のステップと、
   前記第３のステップにより切り出された前記項目文書画像の一部を項目ごとに示す項目リストを前記クライアント装置に送信する第４のステップと、
   前記クライアント装置による前記項目の選択を受け付ける第５のステップと、
   前記第５のステップにより受け付けられた項目に該当する前記項目文書画像の表示用文書画像を前記クライアント装置へ送信する第６のステップと、
   を備えたことを特徴とするデータ処理方法。
   

Images