JP2001101164A - 文書画像処理装置及び文書画像処理方法 - Google Patents

文書画像処理装置及び文書画像処理方法

Info

Publication number
JP2001101164A
JP2001101164A JP27682799A JP27682799A JP2001101164A JP 2001101164 A JP2001101164 A JP 2001101164A JP 27682799 A JP27682799 A JP 27682799A JP 27682799 A JP27682799 A JP 27682799A JP 2001101164 A JP2001101164 A JP 2001101164A
Authority
JP
Japan
Prior art keywords
layout
image
display
unit
display screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP27682799A
Other languages
English (en)
Inventor
Katsumi Kato
克己 加藤
Yoshiaki Kurosawa
由明 黒沢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP27682799A priority Critical patent/JP2001101164A/ja
Publication of JP2001101164A publication Critical patent/JP2001101164A/ja
Pending legal-status Critical Current

Links

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • Processing Or Creating Images (AREA)
  • Document Processing Apparatus (AREA)

Abstract

(57)【要約】 【課題】本発明は、オペレータに、操作が簡単で見易く
使い勝手の良い文書画像インタフェースを提供できる、
文書画像処理装置及び文書画像処理方法を提供すること
を課題とする。 【解決手段】表示画像作成部１３は操作データ入力部１
５からのオペレータ指示に従い、レイアウト解析部１２
で取得したレイアウト構成要素を用いて、画像入力部で
読み取った原画像を加工し、見易い表示画面を作成し
て、表示部１４に表示出力する。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、文書画像を入力
し、その内容を表示画面上でオペレータに提示する表示
機能を備えた文書画像処理装置、及び文書画像処理方法
に関する。
【０００２】また、本発明は、例えばスキャナ等で読み
取った文書画像を入力し、その内容を表示画面上で編集
可能にオペレータに提示するビューア機能を備えた文書
画像処理装置、及び文書画像処理方法に関する。
【０００３】
【従来の技術】スキャナ等で読み取った帳票類の文書画
像をコンピュータ画面中に表示する従来技術を図３１を
参照して説明する。図３１に於いて、２０１は表示対象
文書画像であり、２０２、２０３、２０４はそれぞれ表
示すべきテキスト領域である。例えば符号２０２で示す
テキスト領域を表示する場合、たまたま表示エリアが符
号２０５で示す位置に設定されると、表示画面（表示ウ
ィンドウ）は符号２０８で示すようになる。この表示画
面２０８は、テキスト領域２０２の右側部分が欠けてい
るので、当該領域の文書を読むにはスクロールバー２０
９を用いて一行毎に右にスクロール作業を行なう必要が
ある。
【０００４】一方、表示エリアがたまたま符号２０６で
示す位置に設定されていると表示画面は符号２１１で示
すようになり、スクロールすることなく、テキスト領域
２０２の文書を読むことができるが、この場合には、表
示画面２１１に、読み取りに必要のないテキスト領域２
０３の一部分が混入していることや、また文字が小さく
なって読み難くなる。
【０００５】また、表示エリアが符号２０７で示す位置
に設定されていると、表示画面は符号２１２のようにな
る。ここにはテキスト領域２０２の下位行部分が表示エ
リア２１３に表示されているが、その領域の下に、テキ
スト領域２０４の上位行部分が表示エリア２１４に表示
されている。このように表示されると、表示エリア２１
３の文と表示エリア２１４の文が恰も続き文であるかの
ように見えて非常に見難い画面となる。また表示エリア
２１３の文が何処に繋がるのかも画面からは分かり難く
なり、この場合には全体を見るためにも縮小表示をし
て、全体表示を行ない、レイアウト全体を把握し、次に
続くべきテキスト領域２０３を確認して後、改めて表示
領域の位置やサイズ変更を行ない、文書を読み進めてい
かなければならない。
【０００６】上記したように従来技術では、オペレータ
は表示エリアのサイズや位置変更を手作業で行なわなけ
ればならなくなり、しかもその手続きが複雑で、効率の
良い文書画像の画面での読取り作業が困難であった。
【０００７】この種、レイアウト解析技術を用いて文書
画像を加工する文書画像処理技術として、特開昭６３−
１９７２６６号公報、特開昭６３−１９７２６７号公
報、特開昭６３−２９３６８２号公報、特開平２−３３
６５６号公報、特開平３−１２２７７３号公報、特開平
５−１０８７９３号公報、特開平６−１８７３３３号公
報、特開平７−８５２９８号公報等があるが、これらの
技術は、画像上で文書を読むための処理ではなく、文書
を加工する技術であって、これらの技術に於いては、操
作が簡単で見易い文書画像インタフェースをオペレータ
に提供することができない。
【０００８】また、ＯＣＲの分野ではリジェクト文字
（読み取り不能文字）をコンピュータ画面に表示して修
正作業を支援する仕組みがあるが、これは読み取り結果
中に表示されているリジェクト文字を指示することによ
り対応する文字画像を原画像から切り出すか、または文
字認識装置内に記憶されている文字パターンデータを表
示するものであり、この機能を拡張しただけでは、やは
り操作が簡単で見易い文書画像インタフェースをオペレ
ータに提供することができない。
【０００９】
【発明が解決しようとする課題】上記したように、従来
では、スキャナ等で読み取った帳票類の文書画像をコン
ピュータ画面中に表示してオペレータに提供する機能を
もつシステムに於いて、読み取りが容易な操作性の良い
画面を表示する機能がなく、オペレータにかかる操作負
担が大きいという問題があった。
【００１０】本発明は上記実情に鑑みなされたもので、
オペレータに、操作が簡単で見易く使い勝手の良い文書
画像インタフェースを提供できる、文書画像処理装置及
び文書画像処理方法を提供することを目的とする。
【００１１】更に本発明は、より簡単な操作で見易いコ
ンピュータ画面を作成して、表示画面上で編集可能にオ
ペレータに提示するビューア機能を備えた文書画像処理
装置及び文書画像処理方法を提供することを目的とす
る。
【００１２】
【課題を解決するための手段】本発明に係る文書画像処
理装置は、帳票イメージ等を読み取るスキャナ等の画像
入力部から入力された文書画像のレイアウトを解析し
て、原画像のレイアウト構成要素を取得し、オペレータ
の指示に基づき、当該レイアウト構成要素により原画像
を加工して表示画面を作成し、オペレータに、見易い表
示形態で提示することを特徴とする。
【００１３】即ち、本発明は、画像入力部と、前記画像
入力部から入力された文書画像のレイアウトを解析しレ
イアウト構成要素を取得するレイアウト解析部と、前記
レイアウト解析部より得られるレイアウト構成要素の位
置サイズ情報に基づいて、原画像中の表示すべきレイア
ウト構成要素の全部または一部分を取り出し、当該レイ
アウト構成要素に基づいて表示画面を作成する表示画像
作成部と、前記表示画像作成部で作成された表示画面を
表示する表示部と、オペレータの指示を入力する操作デ
ータ入力部とを備えた文書画像処理装置であって、前記
表示画像作成部に、前記オペレータの指示に従い、前記
レイアウト解析結果及び表示画面サイズの情報をもと
に、原画像を表示画面サイズに合わせて加工し表示画面
を作成する処理手段を有してなることを特徴とする。
【００１４】上記したように、レイアウト解析結果とし
て得られるレイアウト構成要素の位置サイズ情報に基づ
いて、原画像中の表示すべきレイアウト構成要素の全部
または一部分を取り出し、それに基づいて表示画面を作
成表示し、オペレータの指示に基づいて、レイアウト解
析結果と原画像の一部またはすべてと、表示画面サイズ
の情報とを用いて原画像を加工し表示画面を作成して表
示する機能をもつことにより、見易く使い勝手の良い文
書画像をオペレータに提供できる。
【００１５】また、本発明は、画像入力部と、前記画像
入力部から入力された文書画像のレイアウトを解析しレ
イアウト構成要素を取得するレイアウト解析部と、前記
レイアウト解析部より得られるレイアウト構成要素の位
置サイズ情報に基づいて、原画像中の表示すべきレイア
ウト構成要素の全部または一部分を取り出し、当該レイ
アウト構成要素に基づいて表示画面を作成する表示画像
作成部と、前記表示画像作成部で作成された表示画面を
表示する表示部と、オペレータの指示を入力する操作デ
ータ入力部とを備えた文書画像処理装置であって、前記
表示画像作成部に、前記オペレータの指示に従い、前記
レイアウト解析結果及び表示画面サイズの情報をもと
に、原画像内の表示すべき領域を決定し、当該領域に従
い表示画面を作成する処理手段を有してなることを特徴
とする。
【００１６】上記したように、レイアウト解析結果とし
て得られるレイアウト構成要素の位置サイズ情報に基づ
いて、原画像中の表示すべきレイアウト構成要素の全部
または一部分を取り出し、それに基づいて表示画面を作
成表示し、オペレータの指示に基づいて、レイアウト解
析結果と原画像の一部またはすべてと表示画面サイズの
情報とを用いて原画像内の表示すべき領域を決定し、そ
の領域に従い表示画面を作成し表示する機能をもつこと
により、見易く使い勝手の良い文書画像をオペレータに
提供できる。
【００１７】また、本発明は、画像入力部と、前記画像
入力部から入力された文書画像のレイアウトを解析しレ
イアウト構成要素を取得するレイアウト解析部と、前記
レイアウト解析部より得られるレイアウト構成要素の位
置サイズ情報に基づいて、原画像中の表示すべきレイア
ウト構成要素の全部または一部分を取り出し、当該レイ
アウト構成要素に基づいて表示画面を作成する表示画像
作成部と、前記表示画像作成部で作成された表示画面を
表示する表示部と、オペレータの指示を入力する操作デ
ータ入力部とを備えた文書画像処理装置であって、前記
表示画像作成部に、前記オペレータの指示に従い、前記
レイアウト解析結果及び表示画面サイズの情報をもと
に、原画像を表示画面サイズに合わせて加工し表示画面
を作成する処理手段と、前記オペレータの指示に従い、
前記レイアウト解析結果及び表示画面サイズの情報をも
とに、原画像内の表示すべき領域を決定し、当該領域に
従い表示画面を作成する処理手段とを具備してなること
を特徴とする。
【００１８】上記したように、レイアウト解析結果とし
て得られるレイアウト構成要素の位置サイズ情報に基づ
いて、原画像中の表示すべきレイアウト構成要素の全部
または一部分を取り出し、それに基づいて表示画面を作
成表示し、オペレータの指示に基づいて、レイアウト解
析結果と原画像の一部またはすべてを用い、さらに、表
示画面サイズの情報を用いて原画像を加工して表示画像
を作成する手段と、原画像中の表示すべき領域を決定し
その領域に従う表示画像を作成する手段とを備えること
によって、操作が簡単で見易く使い勝手の良い文書画像
をオペレータに提供できる。
【００１９】また、本発明に係る文書画像処理装置は、
オペレータの指示を入力する操作データ入力部と、画像
入力部と、前記画像入力部から入力された文書画像のレ
イアウトを解析しレイアウト構成要素を取得するレイア
ウト解析部と、前記操作データ入力部で入力された指示
に従い、前記レイアウト解析部より得られるレイアウト
構成要素に含まれる位置サイズ及び読み順の情報を用い
て、読み順に従い文書構成要素を配置した表示画面を作
成する処理手段を有してなる表示画像作成部と、前記表
示画像作成部で作成された表示画面を表示する表示部と
を具備してなることを特徴とする。
【００２０】上記したように、レイアウト解析結果とし
て得られるレイアウト構成要素の位置サイズ情報と位置
サイズ情報と該レイアウト構成要素の読み順とを用い
て、その読み順に従って構成要素を並べて表示画面を作
成し表示する機能を備えることによって、操作が簡単で
見易く使い勝手の良い文書画像をオペレータに提供でき
る。
【００２１】また、本発明に係る文書画像処理装置は、
オペレータの指示を入力する操作データ入力部と、画像
入力部と、前記画像入力部から入力された文書画像のレ
イアウトを解析しレイアウト構成要素を取得するレイア
ウト解析部と、前記操作データ入力部で入力された指示
に従い、前記レイアウト解析部より得られるレイアウト
構成要素に含まれる位置サイズ及び読み順の情報を用い
て、表示画面中に表示されているレイアウト構成要素の
次に表示すべきレイアウト構成要素を表示することを指
示するためのマーク、または次に表示すべきレイアウト
構成要素の存在方向を知らせるマークを表示する処理手
段を有してなる表示画像作成部と、前記表示画像作成部
で作成された表示画面を表示する表示部とを具備してな
ることを特徴とする。
【００２２】上記したように、レイアウト解析結果とし
て得られるレイアウト構成要素の位置サイズ情報と該レ
イアウト構成要素の読み順を用いて、表示画面中に表示
されているレイアウト構成要素の次に表示すべきレイア
ウト構成要素を表示することを指示するためのマーク
か、またはその存在方向を知らせるマークを表示する機
能を備えることによって、操作が簡単で見易く使い勝手
の良い文書画像をオペレータに提供できる。
【００２３】また、本発明に係る文書画像処理装置は、
オペレータの指示を入力する操作データ入力部と、画像
入力部と、前記画像入力部から入力された文書画像のレ
イアウトを解析しレイアウト構成要素を取得するレイア
ウト解析部と、前記操作データ入力部で入力された指示
に従い、前記レイアウト解析部より得られるレイアウト
構成要素に含まれる位置サイズの情報を用いて、レイア
ウト構成要素を分割し、当該分割した構成要素を並べて
表示画面を作成する処理手段を有してなる表示画像作成
部と、前記表示画像作成部で作成された表示画面を表示
する表示部とを具備してなることを特徴とする。
【００２４】上記したように、レイアウト解析結果とし
て得られるレイアウト構成要素の位置サイズ情報を用い
て、該レイアウト構成要素を分割し、これを並べて表示
画面を作成して表示する機能を備えることによって、操
作が簡単で見易く使い勝手の良い文書画像をオペレータ
に提供できる。
【００２５】また、本発明は、画像入力部と、前記画像
入力部から入力された文書画像のレイアウトを解析しレ
イアウト構成要素を取得するレイアウト解析部と、前記
レイアウト解析部より得られるレイアウト構成要素の位
置サイズ情報に基づいて、原画像中の表示すべきレイア
ウト構成要素の全部または一部分を取り出し、当該レイ
アウト構成要素に基づいて表示画面を作成する表示画像
作成部と、前記表示画像作成部で作成された表示画面を
表示する表示部と、オペレータの指示を入力する操作デ
ータ入力部とを備えた文書画像処理装置であって、前記
表示画像作成部に、前記オペレータの指示に従い、レイ
アウト解析結果と原画像を用いた表示画面を作成し表示
する第１の表示部分と、全体レイアウトを表示する第２
の表示部分とでなり、かつ前記レイアウト構成要素の位
置サイズ情報に基づいて、前記第１の表示部分へ表示画
面を表示し、前記第１の表示部分に表示されている表示
部分の全体の中での位置を示す画像を第２の表示部分に
表示する表示画面を作成する処理手段を有してなること
を特徴とする。
【００２６】上記したように、レイアウト解析結果と原
画像を用いた表示画面を作成し表示する第１の表示部
と、全体レイアウトを表示する第２の表示部分とを有
し、レイアウト解析結果として得られるレイアウト構成
要素の位置サイズ情報に基づいて、第１の表示部分へ表
示画面を作成して表示し、また、第１の表示部分に表示
されている表示部分の全体の中での位置を示す画像を作
成し、第２の表示部分に表示する機能を備えることによ
って、操作が簡単で見易く使い勝手の良い文書画像をオ
ペレータに提供できる。
【００２７】また、本発明は、前記第１の表示部分へ表
示画面を表示し、前記第１の表示部分に表示されている
表示部分の全体の中での位置を示す画像を第２の表示部
分に表示する表示画面を作成する処理手段を有してなる
文書画像処理装置に於いて、前記第１の表示部分に複数
箇所の表示画像を同時に表示することを特徴とする。
【００２８】上記したように、レイアウト解析結果と原
画像を用いた表示画面を作成し表示する第１の表示部
と、全体レイアウトを表示する第２の表示部分とを有
し、レイアウト解析結果として得られるレイアウト構成
要素の位置サイズ情報に基づいて、第１の表示部分へ表
示画面を作成して表示し、また、第１の表示部分に表示
されている表示部分の全体の中での位置を示す画像を作
成し、第２の表示部分に表示する機能、及び第１の表示
部分に複数箇所の表示画像を同時に表示する機能を備え
ることによって、より操作が簡単で見易く使い勝手の良
い文書画像をオペレータに提供できる。
【００２９】また、本発明は、画像入力部と、前記画像
入力部から入力された文書画像のレイアウトを解析しレ
イアウト構成要素を取得するレイアウト解析部と、前記
レイアウト解析部より得られるレイアウト構成要素の位
置サイズ情報に基づいて、原画像中の表示すべきレイア
ウト構成要素の全部または一部分を取り出し、当該レイ
アウト構成要素に基づいて表示画面を作成する表示画像
作成部と、前記表示画像作成部で作成された表示画面を
表示する表示部と、オペレータの指示を入力する操作デ
ータ入力部とを備えた文書画像処理装置であって、前記
表示画像作成部に、前記オペレータの指示に従い、表の
罫線の位置情報と表の欄内に記載または印刷された文字
列の位置情報を用いて、原画像から必要な画像を切り出
し、貼り合わせることによって、新たな表画像を作成す
る処理手段を有してなることを特徴とする。
【００３０】上記したように、表の罫線の位置情報と表
の欄内に記載または印刷された文字列の位置情報を用い
て、原画像から必要な画像を切り出し貼り合わせること
によって、新たな表画像を作成し表示する機能を備える
ことによって、より簡単な操作で見易いコンピュータ画
面を作成して、表示画面上で編集可能にオペレータに提
示することができる。
【００３１】また、本発明は、前記表の罫線の位置情報
と表の欄内に記載または印刷された文字列の位置情報を
用いて、原画像から必要な画像を切り出し貼り合わせる
ことによって、新たな表画像を作成し表示する機能を備
えた文書画像処理装置に於いて、前記表の一部分を繰り
返し用いて新たな表を複数作成し、これらの表を並べた
表示画面を作成する機能を付加したことを特徴とする。
【００３２】上記したように、表の罫線の位置情報と表
の欄内に記載または印刷された文字列の位置情報を用い
て、原画像から必要な画像を切り出し貼り合わせること
によって、新たな表画像を作成し表示する機能、及び表
の一部分を繰り返し用いて新たな表を複数作成し、それ
らを並べて表示する機能をもつことにより、より簡単な
操作で見易いコンピュータ画面を作成して、表示画面上
で編集可能にオペレータに提示することができる。
【００３３】また、本発明は、前記表の罫線の位置情報
と表の欄内に記載または印刷された文字列の位置情報を
用いて、原画像から必要な画像を切り出し貼り合わせる
ことによって、新たな表画像を作成し表示する機能を備
えた文書画像処理装置に於いて、オペレータの操作によ
り前記表の罫線が指示され移動操作されたとき、移動し
た罫線に対応してそれ以外の表示部分の表示を変更する
処理手段を有して、当該処理手段により新たな表画像を
作成する機能をもつことを特徴とする。
【００３４】上記したように、表の罫線の位置情報と表
の欄内に記載または印刷された文字列の位置情報を用い
て、原画像から必要な画像を切り出し貼り合わせること
によって、新たな表画像を作成し表示する機能、表の一
部分を繰り返し用いて新たな表を複数作成し、それらを
並べて表示する機能、及び表の罫線をオペレータが指示
する機能とその罫線を移動させて表示する機能と移動し
た罫線に対応してそれ以外の表示部分の表示を変更する
機能とを有し、これらによって新たな表画像を作成し表
示する処理手段を備えることによって、より簡単な操作
で見易いコンピュータ画面を作成して、表示画面上で編
集可能にオペレータに提示することができる。
【００３５】また、本発明に係る文書画像処理装置は、
オペレータの指示を入力する操作データ入力部と、画像
入力部と、前記画像入力部から入力された文書画像のレ
イアウトを解析しレイアウト構成要素を取得するレイア
ウト解析部と、前記操作データ入力部で入力された指示
に従い、前記レイアウト解析部より得られるレイアウト
構成要素中の文字列を文字認識して得られる文字列情報
の中から特定の共通するキーワードによって関連付けら
れる複数のレイアウト構成要素を表示する表示画面を作
成する処理手段を有してなる表示画像作成部と、前記表
示画像作成部で作成された表示画面を表示する表示部と
を具備してなることを特徴とする。
【００３６】上記したように、レイアウト解析結果とし
て得られるレイアウト構成要素中の文字列を文字認識し
て得られる文字列情報の中から特定の共通するキーワー
ドによって関連付けられる複数のレイアウト構成要素を
同時に、または関連付けて表示する機能を備えることに
よって、より簡単な操作で見易いコンピュータ画面を作
成して、表示画面上で編集可能にオペレータに提示する
ことができる。
【００３７】また、本発明に係る文書画像処理装置は、
オペレータの指示を入力する操作データ入力部と、画像
入力部と、前記画像入力部から入力された文書画像のレ
イアウトを解析しレイアウト構成要素を取得するレイア
ウト解析部と、前記操作データ入力部で入力された指示
に従い、前記レイアウト解析部より得られるレイアウト
構成要素中の特定の構成要素について、対応する原画像
中の部分画像を複数切り出し、これらを纏めて表示画像
リストを作成し、かつオペレータの指示に基づいて前記
表示画像リストから該当する表示画像を得て表示画面を
作成する処理手段を有してなる表示画像作成部と、前記
表示画像作成部で作成された表示画面を表示する表示部
とを具備してなることを特徴とする。
【００３８】上記したように、レイアウト解析結果とし
て得られるレイアウト構成要素の中の特定の構成要素に
ついて、その対応する原画像中の部分画像を複数切り出
して、これらをまとめて表示画像リストを作成し、オペ
レータの指示に基づいてその表示画像リストから該当す
る表示画像を得て、表示画面を作成する機能を備えるこ
とによって、より簡単な操作で見易いコンピュータ画面
を作成して、表示画面上で編集可能にオペレータに提示
することができる。
【００３９】また、本発明に係る文書画像処理装置は、
オペレータの指示を入力する操作データ入力部と、画像
入力部と、前記画像入力部から入力された文書画像のレ
イアウトを解析しレイアウト構成要素を取得するレイア
ウト解析部と、前記操作データ入力部で入力された指示
に従い、前記レイアウト解析部より得られるレイアウト
構成要素中の特定の構成要素について、対応する原画像
中の部分画像を複数切り出し、所定の変形操作を加え
て、原画像中の該当する位置の部分画像に置き換えて貼
り込み、表示画面を作成する処理手段を有してなる表示
画像作成部と、前記表示画像作成部で作成された表示画
面を表示する表示部とを具備してなることを特徴とす
る。
【００４０】上記したように、レイアウト解析結果とし
て得られるレイアウト構成要素の中の特定の構成要素に
ついて、その対応する原画像中の部分画像を複数切り出
して、所定の変形操作を加え、それを原画像中のその位
置の部分画像に置き換えて貼り込み、表示画面を作成す
る機能を備えることによって、より簡単な操作で見易い
コンピュータ画面を作成して、表示画面上で編集可能に
オペレータに提示することができる。
【００４１】また、本発明は、画像入力部で読み取った
文書画像のレイアウトを解析しレイアウト構成要素を取
得し、当該レイアウト構成要素の位置サイズ情報に基づ
いて、原画像中の表示すべきレイアウト構成要素の全部
または一部分を取り出し、当該レイアウト構成要素に基
づいて表示画面を作成する文書画像処理方法であって、
オペレータの指示に従い、前記レイアウト解析結果及び
表示画面サイズの情報をもとに、原画像を表示画面サイ
ズに合わせて加工し表示画面を作成することを特徴とす
る。
【００４２】上記したように、オペレータの指示に基づ
いて、レイアウト解析結果と原画像の一部またはすべて
と、表示画面サイズの情報とを用いて原画像を加工し表
示画面を作成して表示する機能をもつことにより、見易
く使い勝手の良い文書画像をオペレータに提供できる。
【００４３】また、本発明は、画像入力部で読み取った
文書画像のレイアウトを解析しレイアウト構成要素を取
得し、当該レイアウト構成要素の位置サイズ情報に基づ
いて、原画像中の表示すべきレイアウト構成要素の全部
または一部分を取り出し、当該レイアウト構成要素に基
づいて表示画面を作成する文書画像処理方法であって、
オペレータの指示に従い、前記レイアウト解析結果及び
表示画面サイズの情報をもとに、原画像内の表示すべき
領域を決定し、当該領域に従い表示画面を作成すること
を特徴とする。
【００４４】上記したように、オペレータの指示に基づ
いて、レイアウト解析結果と原画像の一部またはすべて
と表示画面サイズの情報とを用いて原画像内の表示すべ
き領域を決定し、その領域に従い表示画面を作成し表示
する機能をもつことにより、見易く使い勝手の良い文書
画像をオペレータに提供できる。
【００４５】
【発明の実施の形態】以下図面を参照して本発明の実施
形態を説明する。
【００４６】先ず、図１に示すブロック図、図２に示す
フローチャート、及び図５、図６に示す表示画面構成例
を参照して全体の基本構成及び動作について説明する。
【００４７】図１は本発明の実施形態に於ける装置の構
成を示すブロック図である。
【００４８】図中、１１は帳票類（Ｐ）の文書画像を入
力する、例えばスキャナ等を用いて構成された画像入力
部であり、１２は画像入力部１１で読み取った文書画像
からレイアウト構成要素を取得するレイアウト解析部で
ある。
【００４９】１３はレイアウト解析部１２より得られる
レイアウト構成要素の位置サイズ情報に基づいて、原画
像中の表示すべきレイアウト構成要素の全部または一部
分を取り出し、当該レイアウト構成要素に基づいて表示
画面を作成する表示画像作成部であり、後述するような
各種の機能を実現する。
【００５０】１４は表示画像作成部１３で作成された表
示画面を表示する表示部であり、１５はオペレータの各
種指示を入力する操作データ入力部である。
【００５１】上記構成に於いて、画像入力部１１から入
力された文書画像はレイアウト解析部１２に送られ、そ
のレイアウトが解析されて、レイアウト構成要素が出力
される。レイアウト解析技術とは、文書画像理解分野で
知られている既存の技術である。ここで、レイアウト構
成要素とは、文字の位置サイズ情報、行の位置サイズ情
報、ブロック（複数行からなるパラグラフに相当するも
の）の位置サイズ情報、などの情報の他、写真、図、テ
キストなどの領域の位置サイズ情報、種類などである。
さらに、その領域をさらに細かく、タイトル、著者名、
日付け、ヘッダー、フッターなどの分類情報を含むこと
も可能である。
【００５２】尚、上記説明で使った「位置サイズ情報」
の意味は次の通りである。位置とサイズは互いに関係し
ており、例えば、矩形の左端と右端の位置座標の差が横
方向のサイズであるので、その意味で、特に位置とサイ
ズを区別せず、これらの情報を位置サイズ情報と呼んで
いる。
【００５３】次に、このレイアウト解析結果のレイアウ
ト構成要素と原画像とを用いて表示画面作成部１３によ
り図５及び図６に示すような表示画面を作成する。
【００５４】ここでは、図５及び図６に示すように、レ
イアウト解析で得られたブロックを取り出して表示する
ように画面を構成する。例えば、図５に於いて、符号１
２１は、入力された原画像の例を示し、そこからレイア
ウト解析の結果、得られるブロックを符号１２２〜１２
４で示している。この複数の文書ブロックをもつ原画像
から、ブロック１２２を取り出して表示画面を構成した
例を図６に示している。図６に於いて、符号１２７がそ
の表示画像の例である。ここでは上記ブロック１２２の
表示画像１２７のエリアを分かり易く表示するための枠
（枠線）を符号１２６で示している。
【００５５】このようにして構成された表示画面は表示
部１４に送られて表示される。
【００５６】この表示画面を見てオペレータは操作を行
なう。例えば、図６に符号１２８で示すスクロールバー
を操作することによって、画面を上下に動かす等の操作
を行なう。この操作情報は操作データ入力部１５から入
力され、これを受けて、表示画面作成部１３は改めて表
示画面を作成し直して表示を行なうように動作する。
【００５７】図２はこの際の一連の処理手順を示すフロ
ーチャートであり、ステップＳ１１から順にステップＳ
１５まで処理が実行されるが、ステップＳ１４の操作デ
ータ入力判別に於いて、操作データ入力の結果が次の画
像に移ることを指示するものであった場合は、ステップ
Ｓ１１の画像入力ステップに戻り、またステップＳ１５
の操作データ入力判別に於いて、上記操作データ入力の
結果が表示変更の指示で、レイアウトの解析のやり直し
を含むものであれば、ステップＳ１２のレイアウト解析
処理ステップに戻る。一方、上記ステップＳ１５の操作
データ入力判別に於いて、操作データ入力の結果がレイ
アウト解析のやり直しを含まないものであればステップ
Ｓ１３の表示画面作成処理ステップに戻る。
【００５８】ここで、レイアウト解析のやり直しとは、
例えば、レイアウト理解の結果が間違えている場合に、
それを修正するような場合に発生するものである。例え
ば、図３１を参照すると、読み取った文書画像中に、２
つのブロック２０２，２０３があった場合に、これを纏
めて一つのブロック２０１としてしまうのは誤りである
が、レイアウト解析部１２がこのような結果を出力する
ことがあり得る。このような場合に、オペレータが、例
えば、上記ブロック２０２をポインタで指示し、かつレ
イアウト解析のやり直しを指示することにより、レイア
ウト解析部１２は別の可能性として、分離したブロック
２０２，２０３をその新たな解析結果として出力する。
この結果はブロック２０１が否定されるという情報をレ
イアウト解析部１２が利用することによって得られるも
のである。この際、オペレータが明示的に２つに分かれ
るブロックをポインタで指示し、それをレイアウト解析
結果に置き換えるようにすることもできるし、またその
ような指示とレイアウト解析の組み合わせで新たなレイ
アウト解析結果を得ることも可能である。
【００５９】図３及び図４は上記図１に示す表示画像作
成部１３により実行される図２に示す表示画像作成処理
の具体的な処理例を示すフローチャートであり、ここで
は表示画像作成部１３に於いて、操作データ入力部１５
のオペレータ操作による指示に従い、レイアウト解析部
１２で取得したレイアウト解析結果及び表示画面（表示
画像の表示ウィンドウ）サイズの各情報をもとに、原画
像を表示画面サイズに合わせて加工し表示画面作成処理
と、上記レイアウト解析結果及び表示画面サイズの情報
をもとに、原画像内の表示すべき領域を決定し、当該領
域に従い表示画面を作成する画面作成処理とを実現する
処理例を示している。ここでは横書き文章を対象に、原
画像内の表示すべき領域を決定して当該領域に従う表示
画面を作成する画面作成処理として、行を分割して並べ
替えを行う処理、及び読み順に従う表示画像制御を例に
示している。
【００６０】この表示画像作成処理では、表示画面上に
表示する文書ブロックの幅が表示画面（表示ウィンド
ウ）の幅より広いか否かを判断し（図３ステップＳ２
０）、文書ブロックの幅が表示ウィンドウの幅より広け
れば、文書ブロックの幅が表示ウィンドウの９０％にな
るように当該ブロックの表示画像を縮小し（図３ステッ
プＳ２１）、その縮小した文字サイズが閾値より大きけ
れば（図３ステップＳ２２）、縮小画面の作成処理を実
行する（図３ステップＳ３０）。
【００６１】ここで、９０％という基準は、表示ウィン
ドウ内に文章ブロックを見易く表示するための目安の例
であり、文章を見易く表示することができるならば他の
値であつてもよい。
【００６２】また、縮小した文字サイズが閾値以下であ
るときは（図３ステップＳ２２）、表示文字が小さくな
り過ぎるので、行を分割して並べ替えを行い、閾値より
大きな表示文字サイズを確保する（図３ステップＳ２２
〜Ｓ２６）。
【００６３】また、文書ブロックの幅が表示ウィンドウ
の幅以下であるときは（図３ステップＳ２０）、表示さ
れている文章ブロックの幅が表示ウィンドウの幅の９０
％に達しているか否かを判定し（図３ステップＳ２
７）、９０％に達していれば、文章ブロックを表示ウィ
ンドウの中央に配置して見易くし（図３ステップＳ２
９）、表示画像作成処理を終えて次の操作データ入力を
待つ。９０％に達していなければ文書ブロックの幅が表
示ウィンドウの幅の９０％になるように拡大し、同様に
表示ウィンドウの中央に文章ブロックを配置して（図３
ステップＳ２８）、表示画像作成処理を終える。
【００６４】また、表示部１４に、表示対象ブロックの
表示画像をもつ表示ウィンドウが表示されている状態
で、文書ブロックの最下行が表示された際は（図４ステ
ップＳ３１）、レイアウト構成要素の読み順から次の文
書ブロックを検索し（図４ステップＳ３２）、当該検索
した文書ブロックを見易く表示するための画像作成処理
を行う（図４ステップＳ３３）。この際の画像作成処理
としては、例えば読み順に従う次の文書ブロックを現在
表示している文書ブロックのスクロール方向に配置し
て、ブロックを跨る文書を連続して読めるようにする処
理、または、次の文書ブロックの開始位置に移動するた
めのマーク、ボタン等を表示する処理等、オペレータ操
作に伴う各事象毎の種々の処理があり、これらの具体的
な処理例については後述する。
【００６５】ここで、本発明の実施形態に於ける、より
詳細な文書画像処理例を図５乃至図３０を参照して説明
する。尚、以下に示す各実施形態に於ける処理は、上記
図１に示す表示画像作成部１３により、図２の表示画面
作成処理（ステップＳ１３）に於いて実行されるもの
で、それらの各処理手順については上記した図３及び図
４のフローチャートを参照することにより容易に理解で
きる程度のものである。
【００６６】先ず、図５及び図６を参照して本発明の第
１実施形態による文書画像処理動作を説明する。
【００６７】図５及び図６は、オペレータの指示に基づ
き、レイアウト解析結果と表示画面サイズの情報を用い
て原画像を加工し、表示画像を作成する処理の一例を示
している。
【００６８】図５は入力画像とそのレイアウト解析結果
を示すもので、符号１２１が全体画像、符号１２２〜１
２４がレイアウト解析で抽出されたブロックである。読
み順もレイアウト解析で得られているものとして、その
読み順はブロック１２２、ブロック１２３、ブロック１
２４の順である。この結果から、まず、ブロック１２２
に相当する原画像の部分を入力画像から切り出し、表示
画面サイズ（表示するウィンドウのサイズ）の情報を用
いて原画像を加工する。この場合は、縮小または拡大を
行なって、図６に符号１２７で示す表示画像が、表示全
体画面１２５の中にそのまま収まるように表示する。こ
の際、上記した例のように、横書きの場合には、横の長
さを表示画面に合わせるようにする。具体的には、例え
ば、ブロックの横サイズが表示画面の横サイズの９０％
になるように拡大または縮小を行なって、その画像の横
方向の配置を出力画面の横に合わせ、例えば、横方向の
中央にくるように配置する。特に拡大、縮小する必要が
なければ、そのままの状態で表示画面の横に合わせ、例
えば、横方向の中央に配置する（図３に示すフローチャ
ート参照）。
【００６９】また、別の処理手段として、特にブロック
の画像の切り出しを行なわず、逆に当該ブロックが画面
に表示すべき領域にそのまま収まるように、すなわち、
中央に当該ブロックがくるように、表示すべき画面を設
定することもできる。この際、拡大表示、縮小表示を行
なってもよい。図６の例の場合には、縦の領域が画面の
外にはみ出すが、そのままの状態でよい。
【００７０】ブロック内の文が縦書きの場合は、上記の
場合と同様にブロックの縦の長さを表示画面の縦の長さ
に合わせるようにする。また配置は表示画面の縦に合わ
せ、例えば、縦方向の中央に配置する。
【００７１】ブロック内の文が縦書きであるか横書きで
あるかの判定をレイアウト解析結果から得るか、または
新たに判定して、縦横の判定を自動的に行ない、その結
果に基づいて表示方法を決めるように構成することがで
きる。文の縦横判定は既存の技術であるが、最も簡単な
方法は、縦横２つの方向を仮想して実際に文字認識を行
い、その認識結果から縦横の判定を行なうことにより実
現される。また、表示の際に表示画像１２７の外枠を意
味する枠線１２６を前記表示画像１２７に重ね合わせる
ようにして表示画面を構成してもよい。
【００７２】図６に於いて、スクロールバー１２８の操
作に応じて表示画像１２７をスクロールする。このスク
ロールは１画素ごとにスムーズにずらしてもよいし、ま
たレイアウト解析結果として得られている行単位にずら
してもよい。すなわち、表示エリアを下にずらす場合、
画面の一番下に位置する行の次の行エリア（この行エリ
アはまだ表示されていない）まで表示できるように、そ
の行までを含む画像を次に表示すべき画像として作成し
表示することにより上記スクロールが実現される。
【００７３】次に図７参照して本発明の第２実施形態に
よる文書画像処理動作を説明する。
【００７４】図７は上記第１実施形態に於けるレイアウ
ト構成要素のうち、更に読み順の情報を用いて表示画像
を作成する処理例を示している。
【００７５】図７に於いて、表示エリアが下に下がって
ゆくと、表示ブロック１２７の下側が空いてしまう。こ
の空き領域に、図７に示すように、次の読み順のブロッ
ク１２３の表示画像１２９を表示する。表示画像１２７
と表示画像１２９との間に若干のスペースを置いてもよ
いし、レイアウト解析結果として得られるブロック１２
２やブロック１２３の行ピッチに基づいて表示領域１２
７、表示領域１２９の行が連続するように表示してもよ
い。いずれにしてもスクロール時には表示領域１２７と
表示領域１２９とが同時にスクロールアップ、ダウンす
るように表示する。このようにして実際の画像では目線
を横方向に移動させて読むべきものをブロックの切れ目
があるにも拘わらず統一的に下へのスクロール操作のみ
で読めるようになる。
【００７６】このように、レイアウト構成要素の読み順
を用いて、その読み順に従って構成要素を並べて表示画
面を作成する。この際、読み順はレイアウト解析結果と
して得られる読み順を用いてもよいし、またオペレータ
によって指示された読み順でもよいし、それらを併用し
たものであってもよい。
【００７７】この例のように、ブロック内が横書きの時
は縦に並べ、縦書きの時は横に並べる。換言すると、ス
クロール方向に並べる。勿論ここで並べると言っている
ものは、画面外にはスクロールすることによって見るこ
とのできる仮想的なエリアに対して並べるということで
ある。
【００７８】次に図８乃至図１０参照して本発明の第３
実施形態による文書画像処理動作を説明する。
【００７９】図８は上記したレイアウト構成要素の読み
順に従い連携するブロックの表示画像位置を案内するマ
ーク表示を行う処理例を示している。
【００８０】図８に於いては、表示画像１２７の下に原
画像で実際に存在している画像が表示されている、すな
わち、ここではブロック１２４の表示領域の一部の画像
が表示されている例を示している。これはブロック１２
２の下部分が表示全体画面１２５の上部に収まるよう
に、表示全体画面１２５の画像全体に相当する原画像の
一部を切り抜いて適切な拡大または縮小を行なって表示
全体画面１２５の画像全体に表示したものである。この
ように表示することによって原画像の構成を変化させな
いようにしてオペレータに画像を提示できるようにな
る。この場合、読み順が次のブロックへ飛べることをオ
ペレータに明示的に示すように、読み順指示マーク１３
１を画面を重ねて表示する。読み順指示マーク１３１内
の矢印は次のブロックの存在方向を示している。この読
み順指示マーク１３１をクリックすると、表示は図９に
示すブロック１２３に対応する表示画像１３２の表示画
面に切り替わる。
【００８１】このように、レイアウト構成要素の読み順
を用いて、表示画面中に表示されているレイアウト構成
要素の次に表示すべきレイアウト構成要素を表示するこ
とを指示するためのマークか、またはその存在方向を知
らせるマーク（読み順指示マーク１３１）を表示するこ
とによって、オペレータに読み順に従った読み取りを容
易にするガイド機能を実現できる。
【００８２】この実施形態において、図８に符号１３０
で示す表示画像の表示を止めるようにしてもよいし、ま
たは表示形態を変化させるようにしてもよい。すなわ
ち、表示画像１３０の部分を空白で示してもよいし、ま
た色や濃度を変えたりブロック枠の色や濃度を変えたり
してもよい。
【００８３】また、図１０に示すように、ブロック１２
２の下側に相当する表示画像１２７の表示より下側には
スクロールできないようにしてもよい。この場合もマー
ク１３３をクリックすることにより次のブロックの表示
に移る。
【００８４】次に図１１乃至図１４を参照して本発明の
第４実施形態による文書画像処理動作を説明する。
【００８５】図１１乃至図１４は上述したように行を分
割して並び替える処理例を示したもので、図１１に於い
て、符号３００は原画像とそのレイアウト解析結果であ
る。符号３０１〜３０４はそれぞれ抽出された行である
が、この行３０１〜３０４の横サイズを表示画面の横サ
イズに合わせると文字が小さくなって読み難くなる。こ
のとき、レイアウト構成要素に含まれる各行内の各文字
の存在位置を用いて各行の中央付近でその行を左右に分
離する。行３０１は前半部１Ａと後半部１Ｂに分離され
る。同様に、行３０２は前半部２Ａと後半部２Ｂ、行３
０３は前半部３Ａと後半部３Ｂ、行３０４は前半部ｎＡ
と後半部ｎＢにそれぞれ分離される。この各行の前半部
（Ａの部分）と、後半部（Ｂの部分）を図１２に示すよ
うに交互に並べて、すなわち１Ａ，１Ｂ，２Ａ，２Ｂ…
…の順に縦に配置して表示する。このように行を分割し
て並べ替えを行うことにより、そのまま行の横サイズと
画面の横サイズを合わせて表示する場合に比べ、ほぼ２
倍の大きさで文字画像を表示することができる。
【００８６】このように、レイアウト構成要素を分割
し、これを並べて表示画面を作成して表示することによ
って、読み易い画面を作成することができる。尚、ここ
でも、並べるという処理は、前に並べた場合と同様に、
仮想的なエリアに対して並べるということである。
【００８７】また、上記した行の分割表示に於いて、Ａ
の部分とＢの部分の色や濃度を変えて表示してもよい
し、それぞれ、または一方の先頭にＡまたはＢであるこ
とを識別するためのマークをつけるようにしても良い。
また図１３に示すようにＢの部分を字下げして表示する
ようにしてもよい。もちろんＡの部分のみを字下げして
行単位を分かり易くすることも可能である。
【００８８】図１４に示す例では、もとの（本来の）行
毎に、分割された行をまとめて表示するもので、もとの
第１行目に相当する前後半部１Ａ、１Ｂと、第２行目に
相当する前後半部２Ａ、２Ｂとの間に、スペース３０５
を置いた例である。第３行目以降も同様である。
【００８９】ここでは行を２分割する例を説明したが、
それ以外のｎ分割も同様に可能である。また画面の横サ
イズと表示すべきブロックの横サイズから自動的にこの
分割における分割数ｎを決定するように構成してもよ
い。
【００９０】また、見易さを考慮して、文字の大きさの
最低限の閾値を決め、まず、分割せずに表示画面の横サ
イズに合わせてブロックを表示した場合の文字サイズを
調べて、それが前記の閾値以上であった場合はそのまま
分割せずに表示を行ない、閾値以下であった場合に、さ
らに２分割の処理を行ない、文字の大きさを調べ、それ
が閾値以上であった場合にそれ以上分割せずに表示を行
ない、閾値以下であった場合に、さらに３分割の処理を
行なうというような分割処理を繰り返すことによって適
切な数の分割を自動的に行なうこともできる。このよう
にして行分割を行うことにより、文字を大きくし過ぎる
と分割数が上がって見にくくなり、また分割数を下げる
と文字が小さくなって見難くなるという状況の中間の最
適な見易い設定を自動的に行うことができる。
【００９１】上記したような見易さの基準に基づいた分
割処理に於ける、見易さの基準とは上記した閾値と、そ
れを維持した上でなるべく分割数を減らすという考え方
になる。この見易さの基準は、様々なかたちで、本発明
の他の実施形態でも使われている。ここでの分割数は、
もちろんオペレータの指示によって決定するように構成
してもよい。
【００９２】次に図１５及び図１６を参照して本発明の
第５実施形態による文書画像処理動作を説明する。
【００９３】この第５実施形態では、図１５に示すよう
に、全体レイアウトを表示するウィンドウ４００を、拡
大表示している表示画面に加えて表示することを可能に
している。ここで、拡大表示されている部分の、全体レ
イアウトの中での位置を全体レイアウト表示の中で強調
して示すように、全体レイアウトを表示するウィンドウ
４００の表示画面を作成する。
【００９４】上記ウィンドウ４００の中の領域４０１が
表示画像４０３に、領域４０２が表示画像４０４に対応
しており、ここでは上記各領域４０１，４０２をそれぞ
れ斜線を付して示している。
【００９５】このように、拡大表示されている部分（ウ
ィンドウに表示された表示画像領域）を他とは色を変え
たり濃度を変えたり、枠で囲むようにして、現在の表示
位置を分かり易く強調表示した全体レイアウト表示ウィ
ンドウ４００をユーザ（オペレータ）に提示する。
【００９６】この際、当然、スクロールによって表示位
置が変われば、ウィンドウ４００内の強調表示も対応し
て変化する。
【００９７】上記したような全体レイアウト表示や、強
調表示、または拡大表示するとき等に於いて、それぞれ
必要に応じレイアウト解析結果を用いている。上記した
図１５に示す例では、レイアウト表示がレイアウト解析
結果として得られるブロックの位置情報に基づいて作成
されており、また拡大表示やそれに対応したレイアウト
表示上の強調表示もレイアウト解析結果として得られる
ブロックの位置情報に基づいて作成される。
【００９８】図１６は、上記図１５に示す実施形態に関
して、レイアウト表示を大きく取った別の実施形態を示
している。ここでは表示全体画面４１０に全体レイアウ
トを表示し、ウィンドウ４１５に、その一部を拡大表示
した例を示している。ブロック４１１の一部分４１４が
強調表示され、その対応部分がウィンドウ４１５に表示
されている。拡大表示部分はスクロールボタン４１６〜
４１９によってスクロールする。この実施形態でも全体
レイアウト表示や強調表示、または拡大表示するとき
に、レイアウト解析結果が用いられている。この例では
ブロックの位置情報の他、行の位置情報、文字の位置情
報に基づいて表示画面が作成される。
【００９９】図１７はレイアウト解析結果を用いた強調
表示の例を示したもので、ここでは表示画面に、ブロッ
ク４０５，４０６が表示されている。ブロック４０５内
の一部分である、文字列４０７をオペレータが指示する
ことによって、その文字列部分の表示を変化させたもの
である。変化のさせ方としては、色を変える、濃度を変
える、枠で囲む、アンダーラインをつける、暈かして文
字を太くさせる、アフィン変換のような座標変換によっ
て斜字体にする等がある。このままの状態でスクロール
するように画像を表示することによって、目視文書中の
任意の部分にマーキングを施すことができる。このよう
な強調表示もレイアウト解析結果を用いて行なうことに
より、容易に任意の部分にマーキングすることができ
る。例えば、マーキング開始位置や終了位置をレイアウ
ト解析結果として得られている文字位置に基づいた文字
の切れ目に相当する位置に自動的に設定することができ
る。アンダーラインの位置を文字行として抽出されてい
る矩形の下の線に基づいてその作成位置を自動的に決め
ることができる。また囲み枠や塗りつぶしや色変化や濃
度変化についても文字行として得られている矩形に基づ
いて自動的に処理対象領域を設定できるので、オペレー
タの指示のための操作は格段に低減される。この際、レ
イアウト解析結果を用いないと、矩形の位置や開始位
置、終了位置などを正確に入力しなければならないが、
レイアウト解析結果を用いることで、大凡の開始位置と
終了位置の指定だけでマーキングエリアの指定を行なう
ことができる。
【０１００】図１８は表示ウィンドウに表示された表示
画像にメモ領域を確保した例を示している。まず、オペ
レータにより入力されたメモ記載位置に最も近い行と切
れ目の位置４０８から縦方向に１行分のメモ記載用の余
白４０９を取り、その余白４０９を挟んで、続くべき行
の表示を行なうようにする。操作データ入力部１５のキ
ーボード等から入力されるテキストデータをこの余白４
０９部分に表示してゆき、その入力が１行を越えるよう
であれば、次々と余白部分を縦に拡大し、それに応じて
４０８の位置の下に続くべき行の表示を下方へずらして
いく。このようにして随時、メモ書きを挿入することが
できる。これにより、ユーザ（オペレータ）が自身で記
載したメモ書きを見ながら文書を読むことができる。
【０１０１】また、各文書ブロックの表示画像につい
て、レイアウト構成要素の種類毎に、色や濃度を変えて
表示することもできる。他に、囲み線やアンダーライン
の有無や、それらに色、濃度、線の種類を変えて表示す
ることができる。それ以外に、特定の文字列のみ、上記
と同様に色などを変えて表示することができる。文字の
種類（英字、日本語など）によって色を変えることもで
きる。
【０１０２】次に図２２を参照して上記第５実施形態に
関連する第６実施形態による文書画像処理動作を説明す
る。
【０１０３】図２２に於いて、符号５１０は表全体を縮
小表示したウィンドウである。この表ウィンドウ５１０
の中で、オペレータの指示により決められた、拡大表示
すべき２つの列領域５１１，５１２を強調表示してい
る。レイアウト解析結果によって罫線位置が分かってい
るので、オペレータによる大凡の列位置指定によって、
自動的に表示エリアを決めることができる。符号５１３
はその拡大表示ウィンドウであり、当該ウィンドウ内に
於いて符号５１４が上記列領域５１１に対応した拡大表
示部分、符号５１５が上記列領域５１２に対応した拡大
表示部分である。横の罫線位置や、もともとの縦方向の
座標値がずれないように２つの列画像を並べて表示し、
スクロール時には、その２つの列画像を同時にスクロー
ルする。この際、３箇所以上の列を同時表示してもよ
い。すなわち、ここでは複数箇所の表示画像を同時に関
連付けて表示し、より読み易い表示画面を作成する。
【０１０４】図２３は上記第５実施形態に関連する処理
動作例を示したもので、図２３に於いて、符号５２０は
表の全体レイアウト表示ウィンドウである。このウィン
ドウ５２０の中で拡大表示すべき欄５２１が強調表示さ
れ、さらにその強調表示された欄５２１の内容が拡大表
示ウィンドウ５２２に拡大表示されている。この拡大表
示指定は罫線位置等のレイアウト解析結果を用いるの
で、全体レイアウト表示の中で、大凡の位置を入力する
だけで、拡大表示領域の自動設定ができる。これに基づ
いて原画像から該当部分を切り出してウィンドウのサイ
ズに合わせて拡大し、拡大表示ウィンドウ５２２として
表示する。
【０１０５】次に図１９及び図２０を参照して本発明の
第７実施形態による文書画像処理動作を説明する。
【０１０６】図１９は入力画像が、表であった場合の例
である。この入力画像をレイアウト解析することによ
り、表中に各罫線の位置情報、また枠の中に記載された
文字列の位置情報が得られる。この情報と原画像から、
新たな表画像を生成する。
【０１０７】図２０はその一例を示したもので、ここで
は、先ず表中の文字列のサイズから表示画面の横のサイ
ズに合わせて各文字列の表示サイズを決める。次に各文
字列に対応する必要な画像を原画像から切り出して、そ
れを上記表示サイズを決めたときの縮尺で縮小または拡
大をして、原画像における配置の位置関係を維持して表
示画面中に並べ、貼り合わせる。次に罫線についても原
画像中の罫線を抜き出し、適切な縮尺による変形を行な
った後に前記表示画面中に重ねて配置する。このような
処理によって、図１９に於いて存在した余分な空白部分
をカットした新たな形態の表画像が作成され、表示画面
上に表示される。このような表の新規作成処理により、
原画像を画面に全体表示するには字が小さくなり、また
字を大きくするとスクロールが必要になって、表全体が
見難くなるという問題を回避できる。尚、この実施形態
に於いて、罫線の表示画面中への配置の際に、罫線の原
画像中から罫線画像をとらずに新たに適切な線分を発生
させて表示画面中に表示するようにしてもよい。
【０１０８】次に図１９及び図２１を参照して本発明の
第８実施形態による文書画像処理動作を説明する。
【０１０９】図２１は、図１９に示す表の各列５００〜
５０３を全て同時に表示してしまうと、画面をはみ出し
てしまうケースである。この場合、レイアウト解析結果
から得られる文字の位置や罫線位置に基づいて、原画像
から必要な部分画像を切り出し、まず、列５００，５０
１，５０２を原画像と同じ配置で表示する。次に再び列
５００の列画像と列５０３の各列画像を用いて、上記列
５００〜５０２の画像の下に、新たな表画像を作成す
る。これにより本来、横にはみ出して、スクロールしな
ければならない表画像が、１つの画面上で一覧できるよ
うになる。このように表の一部分を繰り返し用いて新た
な表を複数作成でき、それらを並べて表示することによ
って見易い画面を作成する。尚、この実施形態で、列５
００の部分はレイアウト解析の結果として項目名部分で
あると判定できれば、それを用いて自動的に繰り返し項
目名部分として用いてもよいし、またオペレータの指示
によって繰り返し用いる列部分を決めるようにしてもよ
い。
【０１１０】次に図２４及び図２５を参照して本発明の
第９実施形態による文書画像処理例を説明する。
【０１１１】図２４は罫線の位置をずらす操作の例を示
している。オペレータが表示画像中の罫線５３０を指示
すると、レイアウト解析結果に基づいて、その罫線を強
調表示し、また、オペレータの指示に基づいて、この例
では左右に罫線を動かす。すなわち、これはオペレータ
の指示によって罫線５３０を移動させて表示する機能で
ある。左に動かした場合には罫線５３０とそれに続く右
側の画像を左に移動して、図２５に示すような表示画面
を作成する。右に移動する場合には、罫線画像、および
それに続く右側の画像を右に移動する。このとき、移動
前に罫線のあった位置から新たに設定された罫線位置ま
でが空白となるが、その位置に対応する原画像があれば
それを戻す。原画像が無い場合には空白のままとする
が、横罫線は延長して移動された部分における横罫線に
接続するようにする。すなわち、罫線を移動させて表示
する機能と移動した罫線に対応してそれ以外の表示部分
の表示を変更する機能によって、新たな表画像を作成し
て表示する。
【０１１２】次に図２６乃至図２８を参照して本発明の
第１０実施形態による文書画像処理例を説明する。
【０１１３】図２６は図面を含む文書画像の処理例を示
している。図面を含む文書画像６５１に於いて、ブロッ
ク６５２の中に「図面Ｘ」という文字がある。この実施
形態ではレイアウト解析の後、レイアウト構成要素中の
文字列を文字認識し、文字認識結果として文字列情報を
取得しておく。この文字認識結果を調べて「図面」に関
連したキーワードを拾い出す。一方、図６５４の下に位
置するキャプション部６５５の領域についても文字認識
が施され、やはり「図面」に関連したキーワードが拾い
出される。抽出されたキーワード同士を比較し、キャプ
ション部（６５５がキャプション部であるということも
レイアウト解析結果として得られている）と本文中に同
じ「図面Ｘ」というキーワードが発見される。これによ
って本文中のキーワード「図面Ｘ」の位置情報と、キャ
プション部６５５に対応する図領域６５４（この対応関
係もレイアウト解析結果として得られている）の位置情
報が抽出される。これに基づく表示画面の例を図２７及
び図２８に示す。
【０１１４】図２７の符号６５７はブロック６５２を表
示した表示画像であり、上記抽出されたキーワード「図
面Ｘ」の位置情報に基づき、その部分６５８が強調表示
されている。次に当該部分６５８の位置がオペレータに
よって指示されたという操作データにより、関連する図
領域６５４に対応する表示画像６５９が別のウィンドウ
として表示される。図２８の例で原画像の一部が表示さ
れ、スクロールできるようになっている。このようにし
て、本文と図とを同時に画面中で見ることができる。
【０１１５】これらの実施形態に於いて予めキーワード
を拾い出ださないで処理する構成も可能である。すなわ
ち、オペレータの指示で図２７に符号６５８で示す文字
列画像「図面Ｘ」を切り出し、これに対応する文字認識
結果からキーワード「図面Ｘ」を得る。この際、予め文
字認識しておかずに、この時点で文字認識できるように
構成してもよい。次に全体の文字認識結果またはキャプ
ションと認識されたエリアに於ける文字認識結果の中か
らキーワード「図面Ｘ」を捜す。ここでも、上記と同じ
ように文字認識を予め行わずこの時点で文字認識するよ
うにしてもよい。見付かったエリアからそれに対応する
図を画面に別ウィンドウとして表示する。
【０１１６】上記実施形態は、要するに、文字列情報の
中から特定の共通するキーワードによって関連付けられ
る複数のレイアウト構成要素を同時に表示するというこ
とである。
【０１１７】上記処理を画像ベースで行なうこともでき
る。すなわち、入力された文書中からか（または別のソ
ースでもよいが）、検索対象部分画像を決め（これは必
ずしも文字列画像でなくともよい）、これを文書画像中
の一部分とマッチングさせて、一致した部分について、
その位置、またはその位置を含むブロックなど、その位
置に関連して決められるレイアウト構成要素を上記した
部分画像に対応付ける。上記部分画像が文字画像である
場合には、入力文書画像中のマッチング位置を、レイア
ウト解析結果として得られている文字の切れ目の位置に
限定すれば、上記部分画像にマッチする画像の検索が無
駄なく行なえる。
【０１１８】次に図２９を参照して本発明の第１１実施
形態による文書画像処理例を説明する。
【０１１９】図２９は図面の全体を処理対象とした例を
示している。ここでは文字列領域がレイアウト解析結果
として得られており、それが原画像に重ねて矩形で表示
されている。オペレータの指示により指示された文字列
エリアに関してその画像を原画像から切り出して拡大
し、別ウィンドウ６７０に表示する。このようなウィン
ドウ表示により、画面中の小さな文字も簡単な操作で見
易く表示される。このとき、予め文字列に対応する部分
画像を全て切り出して出力画像リストを作成しておくこ
とにより、指示に応じて即時に画像リストから該当する
画像を表示するように構成することができ高速な応答表
示が可能となる。
【０１２０】この実施形態に於いて、文字エリアが指示
されたときに、別のウィンドウを開いて当該文字列を拡
大表示するのではなく、その指示された位置で、もとの
文字列を消して、あるいはその上に重ねて拡大した文字
列を表示するように構成してもよい。また、この拡大表
示された文字列をもとに戻すには、拡大表示したエリア
に現画像中の画像を切り出して埋め込むようにする。
【０１２１】上記実施形態は、すなわち、レイアウト解
析結果として得られるレイアウト構成要素の中の特定の
構成要素について、その対応する原画像中の部分画像を
複数切り出して、これらを纏めて表示画像リストを作成
し、オペレータの指示に基づいてその表示画像リストか
ら該当する表示画像を得て、表示画面を作成するもの
で、これにより高速応答表示を可能にしている。この実
施形態は図面に限らず、表等、他の形式の文書について
も適用することができる。
【０１２２】次に図２９及び図３０を参照して本発明の
第１２実施形態による文書画像処理例を説明する。
【０１２３】図３０は、文字列として抽出されたエリア
について、他のエリアとは異なる縮尺で表示を行う処理
例を示している。
【０１２４】この図３０に示す例では、図２９に示す図
面について、その文字列エリアを拡大表示している。こ
れによって図面中の小さな文字も拡大されて読み易くな
る。この実施形態は、レイアウト解析結果として得られ
るレイアウト構成要素の中の特定の構成要素について、
その対応する原画像中の部分画像を切り出して、所定の
変形操作（上記の例ではサイズ変更）を行っているが、
例えば色、濃度、形などを変更する操作やアンダーライ
ン付加や、囲み枠付加などであってもよく、そのような
変形操作を加えて、それを原画像中のその位置の部分画
像に置き換えて貼り込み、表示画面を作成することも可
能である。この実施形態は図面に限らず、表など他の形
式の文書についても適用することができる。
【０１２５】上記したように、本発明の実施形態によれ
ば、オペレータが文書画像を読み取るときに、読み易い
表示の設定を、レイアウト解析結果である、レイアウト
構成要素の情報に基づいて自動的に設定でき、これによ
り従来技術ではオペレータが行わなければならなかった
複雑な操作を省略できることから、オペレータの操作負
担を著しく軽減することができる。また見易い画面の実
現によって、イメージで表示されている文書類の効率の
良い読み取り作業が可能となる。
【０１２６】尚、上記した実施形態に於いて、新たに作
成した画像またはその他の文書画像情報を、例えば通信
手段により伝送し、印刷し、または画像蓄積することも
可能である。また、上記実施形態では横書文書を中心に
説明してきたが、縦書に於いても同様に本発明を適用す
ることができる。また、本発明は上記実施形態に限定さ
れるものではなく、本発明の要旨を逸脱しない範囲で種
々変形して用いることができる。
【０１２７】
【発明の効果】以上詳記したように本発明によれば、操
作が簡単で見易く使い勝手の良い文書画像インタフェー
スを備えた文書画像処理装置及び文書画像処理方法が提
供できる。更に本発明によれば、より簡単な操作で見易
いコンピュータ画面を作成して、表示画面上で編集可能
にオペレータに提示するビューア機能を備えた文書画像
処理装置及び文書画像処理方法が提供できる。
【０１２８】即ち、本発明によれば、オペレータが文書
画像を読み取るときに、読み易い表示の設定を、レイア
ウト解析結果であるレイアウト構成要素の情報に基づい
て自動的に行うことができ、これによりオペレータの操
作負担を著しく軽減できるとともに、見易い画面の実現
により、イメージで表示されている文書の効率の良い読
み取り作業が可能となる。
【図面の簡単な説明】
【図１】本発明の実施形態に於ける装置の構成を示すブ
ロック図。
【図２】上記実施形態に於ける処理手順を示すフローチ
ャート。
【図３】上記図２に示す処理手順のうちの表示画面作成
処理の処理手順を示すフローチャート。
【図４】上記図２に示す処理手順のうちの表示画面作成
処理の処理手順を示すフローチャート。
【図５】上記実施形態の動作説明図。
【図６】上記実施形態の動作説明図。
【図７】上記実施形態の動作説明図。
【図８】上記実施形態の動作説明図。
【図９】上記実施形態の動作説明図。
【図１０】上記実施形態の動作説明図。
【図１１】上記実施形態の動作説明図。
【図１２】上記実施形態の動作説明図。
【図１３】上記実施形態の動作説明図。
【図１４】上記実施形態の動作説明図。
【図１５】上記実施形態の動作説明図。
【図１６】上記実施形態の動作説明図。
【図１７】上記実施形態の動作説明図。
【図１８】上記実施形態の動作説明図。
【図１９】上記実施形態の動作説明図。
【図２０】上記実施形態の動作説明図。
【図２１】上記実施形態の動作説明図。
【図２２】上記実施形態の動作説明図。
【図２３】上記実施形態の動作説明図。
【図２４】上記実施形態の動作説明図。
【図２５】上記実施形態の動作説明図。
【図２６】上記実施形態の動作説明図。
【図２７】上記実施形態の動作説明図。
【図２８】上記実施形態の動作説明図。
【図２９】上記実施形態の動作説明図。
【図３０】上記実施形態の動作説明図。
【図３１】従来技術を説明するための動作説明図。
【符号の説明】
１１…画像入力部 １２…レイアウト解析部 １３…表示画像作成部 １４…表示部 １５…操作データ入力部
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｇ０９Ｇ 5/38 Ｇ０６Ｆ 15/20 ５６４Ｇ 15/62 ３２２Ｎ Ｇ０９Ｇ 5/36 ５２０Ｌ Ｆターム(参考） 5B009 NC01 NC07 RB21 RB35 5B050 BA06 BA16 CA07 DA06 EA03 EA04 EA12 FA02 FA12 FA14 5C082 AA01 AA27 BA02 BA20 BA27 CA52 CA64 CB06 DA87 MM09

Claims (16)

    【特許請求の範囲】
  1. 【請求項１】 画像入力部と、前記画像入力部から入力
    された文書画像のレイアウトを解析しレイアウト構成要
    素を取得するレイアウト解析部と、前記レイアウト解析
    部より得られるレイアウト構成要素の位置サイズ情報に
    基づいて、原画像中の表示すべきレイアウト構成要素の
    全部または一部分を取り出し、当該レイアウト構成要素
    に基づいて表示画面を作成する表示画像作成部と、前記
    表示画像作成部で作成された表示画面を表示する表示部
    と、オペレータの指示を入力する操作データ入力部とを
    備えた文書画像処理装置であって、前記表示画像作成部
    に、前記オペレータの指示に従い、前記レイアウト解析
    結果及び表示画面サイズの情報をもとに、原画像を表示
    画面サイズに合わせて加工し表示画面を作成する処理手
    段を有してなることを特徴とする文書画像処理装置。
  2. 【請求項２】 画像入力部と、前記画像入力部から入力
    された文書画像のレイアウトを解析しレイアウト構成要
    素を取得するレイアウト解析部と、前記レイアウト解析
    部より得られるレイアウト構成要素の位置サイズ情報に
    基づいて、原画像中の表示すべきレイアウト構成要素の
    全部または一部分を取り出し、当該レイアウト構成要素
    に基づいて表示画面を作成する表示画像作成部と、前記
    表示画像作成部で作成された表示画面を表示する表示部
    と、オペレータの指示を入力する操作データ入力部とを
    備えた文書画像処理装置であって、前記表示画像作成部
    に、前記オペレータの指示に従い、前記レイアウト解析
    結果及び表示画面サイズの情報をもとに、原画像内の表
    示すべき領域を決定し、当該領域に従い表示画面を作成
    する処理手段を有してなることを特徴とする文書画像処
    理装置。
  3. 【請求項３】 画像入力部と、前記画像入力部から入力
    された文書画像のレイアウトを解析しレイアウト構成要
    素を取得するレイアウト解析部と、前記レイアウト解析
    部より得られるレイアウト構成要素の位置サイズ情報に
    基づいて、原画像中の表示すべきレイアウト構成要素の
    全部または一部分を取り出し、当該レイアウト構成要素
    に基づいて表示画面を作成する表示画像作成部と、前記
    表示画像作成部で作成された表示画面を表示する表示部
    と、オペレータの指示を入力する操作データ入力部とを
    備えた文書画像処理装置であって、 前記表示画像作成部に、 前記オペレータの指示に従い、前記レイアウト解析結果
    及び表示画面サイズの情報をもとに、原画像を表示画面
    サイズに合わせて加工し表示画面を作成する処理手段
    と、 前記オペレータの指示に従い、前記レイアウト解析結果
    及び表示画面サイズの情報をもとに、原画像内の表示す
    べき領域を決定し、当該領域に従い表示画面を作成する
    処理手段とを具備してなることを特徴とする文書画像処
    理装置。
  4. 【請求項４】 オペレータの指示を入力する操作データ
    入力部と、 画像入力部と、 前記画像入力部から入力された文書画像のレイアウトを
    解析しレイアウト構成要素を取得するレイアウト解析部
    と、 前記操作データ入力部で入力された指示に従い、前記レ
    イアウト解析部より得られるレイアウト構成要素に含ま
    れる位置サイズ及び読み順の情報を用いて、読み順に従
    い文書構成要素を配置した表示画面を作成する処理手段
    を有してなる表示画像作成部と、 前記表示画像作成部で作成された表示画面を表示する表
    示部とを具備してなることを特徴とする文書画像処理装
    置。
  5. 【請求項５】 オペレータの指示を入力する操作データ
    入力部と、 画像入力部と、 前記画像入力部から入力された文書画像のレイアウトを
    解析しレイアウト構成要素を取得するレイアウト解析部
    と、 前記操作データ入力部で入力された指示に従い、前記レ
    イアウト解析部より得られるレイアウト構成要素に含ま
    れる位置サイズ及び読み順の情報を用いて、表示画面中
    に表示されているレイアウト構成要素の次に表示すべき
    レイアウト構成要素を表示することを指示するためのマ
    ーク、または次に表示すべきレイアウト構成要素の存在
    方向を知らせるマークを表示する処理手段を有してなる
    表示画像作成部と、 前記表示画像作成部で作成された表示画面を表示する表
    示部とを具備してなることを特徴とする文書画像処理装
    置。
  6. 【請求項６】 オペレータの指示を入力する操作データ
    入力部と、 画像入力部と、 前記画像入力部から入力された文書画像のレイアウトを
    解析しレイアウト構成要素を取得するレイアウト解析部
    と、 前記操作データ入力部で入力された指示に従い、前記レ
    イアウト解析部より得られるレイアウト構成要素に含ま
    れる位置サイズの情報を用いて、レイアウト構成要素を
    分割し、当該分割した構成要素を並べて表示画面を作成
    する処理手段を有してなる表示画像作成部と、 前記表示画像作成部で作成された表示画面を表示する表
    示部とを具備してなることを特徴とする文書画像処理装
    置。
  7. 【請求項７】 画像入力部と、前記画像入力部から入力
    された文書画像のレイアウトを解析しレイアウト構成要
    素を取得するレイアウト解析部と、前記レイアウト解析
    部より得られるレイアウト構成要素の位置サイズ情報に
    基づいて、原画像中の表示すべきレイアウト構成要素の
    全部または一部分を取り出し、当該レイアウト構成要素
    に基づいて表示画面を作成する表示画像作成部と、前記
    表示画像作成部で作成された表示画面を表示する表示部
    と、オペレータの指示を入力する操作データ入力部とを
    備えた文書画像処理装置であって、 前記表示画像作成部に、 前記オペレータの指示に従い、レイアウト解析結果と原
    画像を用いた表示画面を作成し表示する第１の表示部分
    と、全体レイアウトを表示する第２の表示部分とでな
    り、かつ前記レイアウト構成要素の位置サイズ情報に基
    づいて、前記第１の表示部分へ表示画面を表示し、前記
    第１の表示部分に表示されている表示部分の全体の中で
    の位置を示す画像を第２の表示部分に表示する表示画面
    を作成する処理手段を有してなることを特徴とする文書
    画像処理装置。
  8. 【請求項８】 前記第１の表示部分に複数箇所の表示画
    像を同時に表示することを特徴とする請求項７記載の文
    書画像処理装置。
  9. 【請求項９】 画像入力部と、前記画像入力部から入力
    された文書画像のレイアウトを解析しレイアウト構成要
    素を取得するレイアウト解析部と、前記レイアウト解析
    部より得られるレイアウト構成要素の位置サイズ情報に
    基づいて、原画像中の表示すべきレイアウト構成要素の
    全部または一部分を取り出し、当該レイアウト構成要素
    に基づいて表示画面を作成する表示画像作成部と、前記
    表示画像作成部で作成された表示画面を表示する表示部
    と、オペレータの指示を入力する操作データ入力部とを
    備えた文書画像処理装置であって、 前記表示画像作成部に、 前記オペレータの指示に従い、表の罫線の位置情報と表
    の欄内に記載または印刷された文字列の位置情報を用い
    て、原画像から必要な画像を切り出し、貼り合わせるこ
    とによって、新たな表画像を作成する処理手段を有して
    なることを特徴とする文書画像処理装置。
  10. 【請求項１０】 前記表の一部分を繰り返し用いて新た
    な表を複数作成し、これらの表を並べた表示画面を作成
    する請求項９記載の文書画像処理装置。
  11. 【請求項１１】 オペレータの操作により前記表の罫線
    が指示され移動操作されたとき、移動した罫線に対応し
    てそれ以外の表示部分の表示を変更する処理手段を有
    し、当該処理手段により新たな表画像を作成する請求項
    ９記載の文書画像処理装置。
  12. 【請求項１２】 オペレータの指示を入力する操作デー
    タ入力部と、 画像入力部と、 前記画像入力部から入力された文書画像のレイアウトを
    解析しレイアウト構成要素を取得するレイアウト解析部
    と、 前記操作データ入力部で入力された指示に従い、前記レ
    イアウト解析部より得られるレイアウト構成要素中の文
    字列を文字認識して得られる文字列情報の中から特定の
    共通するキーワードによって関連付けられる複数のレイ
    アウト構成要素を表示する表示画面を作成する処理手段
    を有してなる表示画像作成部と、 前記表示画像作成部で作成された表示画面を表示する表
    示部とを具備してなることを特徴とする文書画像処理装
    置。
  13. 【請求項１３】 オペレータの指示を入力する操作デー
    タ入力部と、 画像入力部と、 前記画像入力部から入力された文書画像のレイアウトを
    解析しレイアウト構成要素を取得するレイアウト解析部
    と、 前記操作データ入力部で入力された指示に従い、前記レ
    イアウト解析部より得られるレイアウト構成要素中の特
    定の構成要素について、対応する原画像中の部分画像を
    複数切り出し、これらを纏めて表示画像リストを作成
    し、かつオペレータの指示に基づいて前記表示画像リス
    トから該当する表示画像を得て表示画面を作成する処理
    手段を有してなる表示画像作成部と、 前記表示画像作成部で作成された表示画面を表示する表
    示部とを具備してなることを特徴とする文書画像処理装
    置。
  14. 【請求項１４】 オペレータの指示を入力する操作デー
    タ入力部と、 画像入力部と、 前記画像入力部から入力された文書画像のレイアウトを
    解析しレイアウト構成要素を取得するレイアウト解析部
    と、 前記操作データ入力部で入力された指示に従い、前記レ
    イアウト解析部より得られるレイアウト構成要素中の特
    定の構成要素について、対応する原画像中の部分画像を
    複数切り出し、所定の変形操作を加えて、原画像中の該
    当する位置の部分画像に置き換えて貼り込み、表示画面
    を作成する処理手段を有してなる表示画像作成部と、 前記表示画像作成部で作成された表示画面を表示する表
    示部とを具備してなることを特徴とする文書画像処理装
    置。
  15. 【請求項１５】 画像入力部で読み取った文書画像のレ
    イアウトを解析しレイアウト構成要素を取得し、当該レ
    イアウト構成要素の位置サイズ情報に基づいて、原画像
    中の表示すべきレイアウト構成要素の全部または一部分
    を取り出し、当該レイアウト構成要素に基づいて表示画
    面を作成する文書画像処理方法であって、オペレータの
    指示に従い、前記レイアウト解析結果及び表示画面サイ
    ズの情報をもとに、原画像を表示画面サイズに合わせて
    加工し表示画面を作成することを特徴とする文書画像処
    理方法。
  16. 【請求項１６】 画像入力部で読み取った文書画像のレ
    イアウトを解析しレイアウト構成要素を取得し、当該レ
    イアウト構成要素の位置サイズ情報に基づいて、原画像
    中の表示すべきレイアウト構成要素の全部または一部分
    を取り出し、当該レイアウト構成要素に基づいて表示画
    面を作成する文書画像処理方法であって、オペレータの
    指示に従い、前記レイアウト解析結果及び表示画面サイ
    ズの情報をもとに、原画像内の表示すべき領域を決定
    し、当該領域に従い表示画面を作成することを特徴とす
    る文書画像処理方法。
JP27682799A 1999-09-29 1999-09-29 文書画像処理装置及び文書画像処理方法 Pending JP2001101164A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP27682799A JP2001101164A (ja) 1999-09-29 1999-09-29 文書画像処理装置及び文書画像処理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP27682799A JP2001101164A (ja) 1999-09-29 1999-09-29 文書画像処理装置及び文書画像処理方法

Publications (1)

Publication Number Publication Date
JP2001101164A true JP2001101164A (ja) 2001-04-13

Family

ID=17574966

Family Applications (1)

Application Number Title Priority Date Filing Date
JP27682799A Pending JP2001101164A (ja) 1999-09-29 1999-09-29 文書画像処理装置及び文書画像処理方法

Country Status (1)

Country Link
JP (1) JP2001101164A (ja)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005055791A (ja) * 2003-08-07 2005-03-03 Sony Corp 表示装置及び表示装置の表示方法
JP2006145642A (ja) * 2004-11-17 2006-06-08 Casio Comput Co Ltd 撮像装置及び画像表示方法
JP2009176298A (ja) * 2008-01-28 2009-08-06 Fuji Xerox Co Ltd セグメント化及びキーフレーズを利用してモバイル機器でのドキュメントナビゲーションをサポートする方法、プログラム及びデバイス
WO2009122872A1 (ja) * 2008-04-04 2009-10-08 株式会社角川グループパブリッシング 情報処理装置、情報処理方法、およびプログラム
US7616815B2 (en) 2003-01-29 2009-11-10 Ricoh Co., Ltd. Reformatting documents using document analysis information
US7761789B2 (en) 2006-01-13 2010-07-20 Ricoh Company, Ltd. Methods for computing a navigation path
US7788579B2 (en) 2006-03-06 2010-08-31 Ricoh Co., Ltd. Automated document layout design
JP2011034204A (ja) * 2009-07-30 2011-02-17 Internatl Business Mach Corp <Ibm> コンテンツ読み上げ順序を視覚化するための視覚化プログラム、視覚化方法、及び視覚化装置
JP2011077669A (ja) * 2009-09-29 2011-04-14 Sharp Corp プレビュー機能付き原稿読取装置
JP2011242821A (ja) * 2010-05-14 2011-12-01 Sony Corp 情報処理装置および方法、並びにプログラム
JP2012514792A (ja) * 2009-01-02 2012-06-28 アップル インコーポレイテッド 文書再構成の方法及びシステム
JP2013114266A (ja) * 2011-11-24 2013-06-10 Sharp Corp 表示制御装置、表示方法、制御プログラム、および記録媒体
US8583637B2 (en) 2007-03-21 2013-11-12 Ricoh Co., Ltd. Coarse-to-fine navigation through paginated documents retrieved by a text search engine
US8584042B2 (en) 2007-03-21 2013-11-12 Ricoh Co., Ltd. Methods for scanning, printing, and copying multimedia thumbnails
JP2014013490A (ja) * 2012-07-04 2014-01-23 Nippon Telegr & Teleph Corp <Ntt> 画像領域分割装置、その方法及びプログラム
JP2014120075A (ja) * 2012-12-18 2014-06-30 Canon Inc 画像表示装置、画像表示装置の制御方法およびコンピュータプログラム
US8812969B2 (en) 2007-03-21 2014-08-19 Ricoh Co., Ltd. Methods for authoring and interacting with multimedia representations of documents
JP2014174709A (ja) * 2013-03-08 2014-09-22 Canon Inc 情報処理装置、情報処理装置の制御方法、プログラム
US8886676B2 (en) 2011-01-18 2014-11-11 Apple Inc. Reconstruction of lists in a document
JP2021034772A (ja) * 2019-08-19 2021-03-01 大日本印刷株式会社 画像処理装置、画像処理方法、画像処理装置用プログラム、および、書類管理システム
JP7328771B2 (ja) 2019-03-14 2023-08-17 Ｆｃｎｔ株式会社 表示装置、表示制御プログラムおよび表示制御方法

Cited By (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7792362B2 (en) 2003-01-29 2010-09-07 Ricoh Co., Ltd. Reformatting documents using document analysis information
US7616815B2 (en) 2003-01-29 2009-11-10 Ricoh Co., Ltd. Reformatting documents using document analysis information
JP2005055791A (ja) * 2003-08-07 2005-03-03 Sony Corp 表示装置及び表示装置の表示方法
JP2006145642A (ja) * 2004-11-17 2006-06-08 Casio Comput Co Ltd 撮像装置及び画像表示方法
US7761789B2 (en) 2006-01-13 2010-07-20 Ricoh Company, Ltd. Methods for computing a navigation path
US7788579B2 (en) 2006-03-06 2010-08-31 Ricoh Co., Ltd. Automated document layout design
US8584042B2 (en) 2007-03-21 2013-11-12 Ricoh Co., Ltd. Methods for scanning, printing, and copying multimedia thumbnails
US8583637B2 (en) 2007-03-21 2013-11-12 Ricoh Co., Ltd. Coarse-to-fine navigation through paginated documents retrieved by a text search engine
US8812969B2 (en) 2007-03-21 2014-08-19 Ricoh Co., Ltd. Methods for authoring and interacting with multimedia representations of documents
US8601393B2 (en) 2008-01-28 2013-12-03 Fuji Xerox Co., Ltd. System and method for supporting document navigation on mobile devices using segmentation and keyphrase summarization
JP2009176298A (ja) * 2008-01-28 2009-08-06 Fuji Xerox Co Ltd セグメント化及びキーフレーズを利用してモバイル機器でのドキュメントナビゲーションをサポートする方法、プログラム及びデバイス
JP5374712B2 (ja) * 2008-04-04 2013-12-25 株式会社Ｋａｄｏｋａｗａ 情報処理装置、情報処理方法、およびプログラム
WO2009122872A1 (ja) * 2008-04-04 2009-10-08 株式会社角川グループパブリッシング 情報処理装置、情報処理方法、およびプログラム
US9460063B2 (en) 2009-01-02 2016-10-04 Apple Inc. Identification, selection, and display of a region of interest in a document
US8892992B2 (en) 2009-01-02 2014-11-18 Apple Inc. Methods for efficient cluster analysis
US9063911B2 (en) 2009-01-02 2015-06-23 Apple Inc. Identification of layout and content flow of an unstructured document
JP2012514792A (ja) * 2009-01-02 2012-06-28 アップル インコーポレイテッド 文書再構成の方法及びシステム
US9575945B2 (en) 2009-01-02 2017-02-21 Apple Inc. Efficient data structures for parsing and analyzing a document
US9959259B2 (en) 2009-01-02 2018-05-01 Apple Inc. Identification of compound graphic elements in an unstructured document
US8832549B2 (en) 2009-01-02 2014-09-09 Apple Inc. Identification of regions of a document
US8719701B2 (en) 2009-01-02 2014-05-06 Apple Inc. Identification of guides and gutters of a document
US8588526B2 (en) 2009-07-30 2013-11-19 International Business Machines Corporation Visualization program, visualization method and visualization apparatus for visualizing reading order of content
US8340424B2 (en) 2009-07-30 2012-12-25 International Business Machines Corporation Visualization program, visualization method and visualization apparatus for visualizing reading order of content
JP2011034204A (ja) * 2009-07-30 2011-02-17 Internatl Business Mach Corp <Ibm> コンテンツ読み上げ順序を視覚化するための視覚化プログラム、視覚化方法、及び視覚化装置
JP2011077669A (ja) * 2009-09-29 2011-04-14 Sharp Corp プレビュー機能付き原稿読取装置
JP2011242821A (ja) * 2010-05-14 2011-12-01 Sony Corp 情報処理装置および方法、並びにプログラム
US8886676B2 (en) 2011-01-18 2014-11-11 Apple Inc. Reconstruction of lists in a document
JP2013114266A (ja) * 2011-11-24 2013-06-10 Sharp Corp 表示制御装置、表示方法、制御プログラム、および記録媒体
JP2014013490A (ja) * 2012-07-04 2014-01-23 Nippon Telegr & Teleph Corp <Ntt> 画像領域分割装置、その方法及びプログラム
JP2014120075A (ja) * 2012-12-18 2014-06-30 Canon Inc 画像表示装置、画像表示装置の制御方法およびコンピュータプログラム
JP2014174709A (ja) * 2013-03-08 2014-09-22 Canon Inc 情報処理装置、情報処理装置の制御方法、プログラム
JP7328771B2 (ja) 2019-03-14 2023-08-17 Ｆｃｎｔ株式会社 表示装置、表示制御プログラムおよび表示制御方法
JP2021034772A (ja) * 2019-08-19 2021-03-01 大日本印刷株式会社 画像処理装置、画像処理方法、画像処理装置用プログラム、および、書類管理システム
JP7392322B2 (ja) 2019-08-19 2023-12-06 大日本印刷株式会社 画像処理装置、画像処理方法、画像処理装置用プログラム、および、書類管理システム

Similar Documents

Publication Publication Date Title
JP2001101164A (ja) 文書画像処理装置及び文書画像処理方法
US6396598B1 (en) Method and apparatus for electronic memo processing for integrally managing document including paper document and electronic memo added to the document
JP2862626B2 (ja) 電子辞書及び情報検索方法
US6751779B1 (en) Apparatus and method for processing document image
US6504540B1 (en) Method and apparatus for altering one or more attributes of one or more blocks of image data in a document
JP3288460B2 (ja) 表示データ生成装置及び方法
JP3741587B2 (ja) 文書画像表示装置および方法ならびに文書画像表示プログラムを記録したコンピュータで読取可能な記録媒体
JP3122417B2 (ja) 情報表示方法及び情報処理装置
JP2000172704A (ja) 文書処理装置及び文書校正方法
JP4218517B2 (ja) 色修正装置
JP4501731B2 (ja) 画像処理装置
JP3029822B2 (ja) 文書処理装置、文書処理方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
US6275609B1 (en) Image processing apparatus and method
JP2006031192A (ja) 手書き電子情報記録システム
JP2001273509A (ja) 文書画像編集装置及び文書画像編集方法
US9104649B2 (en) Information processing apparatus and program
JPH103516A (ja) 情報処理方法及び装置
JPH0388086A (ja) 文書読取装置
JP3897273B2 (ja) 構造化文書編集装置
JP4811306B2 (ja) 文書編集装置
JP2001051771A (ja) 画像処理システム及び方法
JP2005044138A (ja) 印刷プレビューシステム
JP2001318911A (ja) 文書処理装置、文書処理方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
JPH0973515A (ja) 文字認識装置
JPS63108430A (ja) 文書表示方式

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040915

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060516

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060718

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061031

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061227

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20070123