JP2001274981A - レイアウト画像編集装置及びレイアウト画像編集方法 - Google Patents

Abstract

(57)【要約】 【課題】本発明は、レイアウト認識技術により得られた
レイアウト構成要素に関する情報に基づいて行なわれ
る、文書編集作業のうち、特に表領域の拡大縮小、内容
変更、一部選択などの各種編集作業をユーザの操作負担
を著しく軽減して容易かつ迅速に行うことのできるレイ
アウト画像編集装置及びレイアウト画像編集方法を提供
することを課題とする。 【解決手段】 レイアウト解析部１３は画像入力部１１
あるいは画像記録部１２より出力された編集対象となる
文書画像データのレイアウトを解析する。表示管理部１
４は、レイアウト解析部１３より得られるレイアウト情
報と文書画像データとをもとにレイアウト画像編集のた
めの表示用画像データを生成し、操作入力部１６の入力
指示に従い画像の編集処理を実行する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、レイアウト認識技
術を利用した、例えば、デジタル複写機、文書情報を扱
うコンピュータシステム等に適用して好適なレイアウト
画像編集装置及びレイアウト画像編集方法に関する。

【０００２】また本発明は、文書が記録された紙面上を
スキャナ等により走査して得た文書画像データを入力
し、その内容を表示画面上で編集可能にオペレータに提
示する機能を備えたシステムに適用して好適なレイアウ
ト画像編集装置及びレイアウト画像編集方法に関する。

【０００３】

【従来の技術】紙面上の各種文書を画像データとして電
子化することにより、従来、複数の紙面上の文書を切り
貼りして新しい文書を作成していた編集作業を、コンピ
ュータ上で容易に行うことのできるようにした紙文書の
編集技術が種々開発されている。

【０００４】この際の編集機能の一つとして、レイアウ
トの変更に伴い、文章部分の領域サイズを拡大縮小する
編集作業に関して様々な試みがなされている。

【０００５】前処理として画像認識技術等を適用しない
場合には、画像中の文章部分を利用者が自分で領域選択
を行ない、かつサイズ指定することによって、画素単位
での画像の拡大／縮小処理が行なわれていた。この際、
画素の拡大縮小に伴う画像の劣化を軽減するために、平
滑化などの画像補正処理が行なわれる場合もある。

【０００６】しかしながら、このように文書画像を一般
の画像データとして編集操作する場合、文章部分に相当
する領域を正確に指定し選択するには微妙な操作が必要
であり、ユーザにかかる操作負担が大きいという問題が
生じる。このため前処理として画像認識技術等を用い、
ユーザ操作を省力化することが求められていた。

【０００７】文書画像に画像認識技術等の前処理を施す
場合には、まずレイアウト認識技術により文書のレイア
ウト構成要素を抽出し、文章と判定される部分があれ
ば、更に文字認識技術により文章部分が文字コード化さ
れ、コード化された文字情報に対して、文字サイズの変
更や、行間、文間間距離変更等の編集操作を行なうこと
によって、拡大縮小機能が実現される。

【０００８】しかしながら、現状の文字認識技術に於い
ては、文字を誤認識する可能性を含み、しかも一般的な
文書画像中に含まれる文字数が非常に多いことから、誤
認識した部分を必ずしもユーザが発見できるとは限ら
ず、また、線図や表の形状認識についても、同様に形状
や線種などを常に正しく認識できるとは限らない。

【０００９】従って文章内容を大幅に書き変えたり、大
規模なサイズ変更が必要な場合を除いて、文字認識まで
行なうことは不要であり、レイアウト構成要素の抽出ま
でに止めて、そこで得られた情報を利用して適切な編集
作業を行なう方が望ましい。

【００１０】また、文書画像中に含まれる表について、
表画像を構成する罫線には破線や二重線など様々な線種
が用いられ、ユーザの指定サイズに合わせてビットマッ
プとして拡大縮小するような場合、罫線の太さが不揃い
になったり、破線部の間隔が潰れたり、不自然に開いた
りして、正しく再現できず、元画像の印象、美観を損な
う可能性があった。

【００１１】また、表画像の一部の項目だけを抜きだし
たいとき、従来手法では、ユーザが必要な欄の範囲を正
確に範囲指定し、更にその欄に対応する見出し欄を別途
選択して合成しなくてはならず、精緻で手間の掛かる作
業が必要とされていた。

【００１２】

【発明が解決しようとする課題】上述したように従来で
は、紙面上の各種文書をレイアウト認識技術により得ら
れたレイアウト構成要素に関する情報に基づいて画像デ
ータとして電子化する際、文書画像中に含まれる表につ
いて、ユーザの指定サイズに合わせてビットマップとし
て拡大縮小する際、罫線の太さが不揃いになったり、破
線部の間隔が潰れたり、不自然に開いたりして、正しく
再現できず、元画像の印象、美観を損なう可能性があっ
た。また、表画像の一部の項目だけを抜きだしたいと
き、従来手法では、ユーザが必要な欄の範囲を正確に範
囲指定し、更にその欄に対応する見出し欄を別途選択し
て合成しなくてはならず、手間の掛かる精緻な作業が必
要とされる等、種々の問題があった。

【００１３】本発明は上記実情に鑑みなされたもので、
レイアウト認識技術により得られたレイアウト構成要素
に関する情報に基づいて行なわれる、文書編集作業のう
ち、特に表領域の拡大縮小、内容変更、一部選択などの
各種編集作業をユーザの操作負担を著しく軽減して容易
かつ迅速に行うことのできるレイアウト画像編集装置及
びレイアウト画像編集方法を提供することを目的とす
る。

【００１４】

【課題を解決するための手段】本発明は、紙文書を入力
する文書画像データの入力部、あるいは既に入力済みの
文書画像データを格納しておく画像記録部を備えて、上
記文書画像データをレイアウト解析し、その解析結果の
レイアウト情報と文書画像データから表示用データを生
成して表示する機能を備えたレイアウト画像編集装置に
於いて、表の構成要素をなす罫線部分とその罫線で囲ま
れる欄内の画像とを最適ビットマップイメージを意識し
ながら互いに連携して編集処理する表の編集処理機能を
備えることで、ユーザ操作に基づく文書画像の表領域の
編集操作を支援するものである。

【００１５】即ち、本発明は、文書が記録された紙面上
を走査して得た文書画像データのレイアウトを解析する
レイアウト解析部と、上記レイアウト解析部より得られ
るレイアウト情報と上記文書画像データから表示用デー
タを生成する表示管理部と、上記表示管理部で生成され
た表示用データを表示する表示部と、ユーザ入力の受け
付けを行う操作入力部とを備えてなるレイアウト画像編
集装置に於いて、上記操作入力手段より上記文書画像デ
ータ中の表部分のサイズ変更指示が入力された際に、上
記指示された変更サイズ情報に基づき、表の罫線部分の
画像を保持したまま上記指示された表部分の行間、列
間、文字間距離を調整して上記表部分を拡大縮小処理す
る処理手段を具備してなることを特徴とする。このよう
な表の編集処理機能をもつことにより、文書画像データ
の表部分のサイズ変更を行なう場合に、行間、列間、文
字間距離を調整しながら、文字画像のサイズを拡大縮小
することによって、ビットマップ画像からなる文字画像
の品質低下を抑え、表の原画像から抽出した罫線部の画
像を指定サイズに応じて継ぎ足して延長したり、または
不要部分を除去することによって、原画像のままの罫線
画像の画質を保つことができる。

【００１６】また、本発明は、文書が記録された紙面上
を走査して得た文書画像データのレイアウトを解析する
レイアウト解析部と、上記レイアウト解析部より得られ
るレイアウト情報と上記文書画像データから表示用デー
タを生成する表示管理部と、上記表示管理部で生成され
た表示用データを表示する表示部と、ユーザ入力の受け
付けを行う操作入力部とを備えてなるレイアウト画像編
集装置に於いて、上記操作入力手段により上記文書画像
データ中の表部分の罫線移動が指示された際に、上記表
部分のレイアウト情報を用いて、上記指示内容に従い、
上記表部分のビットマップ画像を再構成する処理手段を
具備してなることを特徴とする。このような表の編集処
理機能をもつことにより、文書画像データの表部分の罫
線部分の移動が指示された場合に、ユーザに指示された
位置に基づき、ビットマップからなる表部分の画像を再
構成して、文書中の表を原イメージのままの状態でユー
ザの指示に従う任意の位置に移動することができる。

【００１７】また、本発明は、文書が記録された紙面上
を走査して得た文書画像データのレイアウトを解析する
レイアウト解析部と、上記レイアウト解析部より得られ
るレイアウト情報と上記文書画像データから表示用デー
タを生成する表示管理部と、上記表示管理部で生成され
た表示用データを表示する表示部と、ユーザ入力の受け
付けを行う操作入力部とを備えてなるレイアウト画像編
集装置に於いて、上記操作入力手段により上記文書画像
データ中の表部分について欄内の内容の変更が指示され
た際に、上記表部分のレイアウト情報を用いて、上記指
示に従い変更された欄内の内容をその周囲の欄の内容配
置に従い配置する処理手段を具備してなることを特徴と
する。このような表の編集処理機能をもつことにより、
文書画像データの表の欄内の内容変更が可能であり、変
更した内容と周囲の欄の内容配置に応じて更新内容を自
動的に欄内に配置して、文書中の表を原イメージのまま
の状態でユーザの指示に従う内容に変更することができ
る。

【００１８】また、本発明は、文書が記録された紙面上
を走査して得た文書画像データのレイアウトを解析する
レイアウト解析部と、上記レイアウト解析部より得られ
るレイアウト情報と上記文書画像データから表示用デー
タを生成する表示管理部と、上記表示管理部で生成され
た表示用データを表示する表示部と、ユーザ入力の受け
付けを行う操作入力部とを備えてなるレイアウト画像編
集装置に於いて、上記操作入力手段により上記文書画像
データ中の表部分について欄内の内容の変更が指示され
た際に、上記表部分のレイアウト情報を用いて、上記指
示に従い変更された欄内の内容のサイズに伴い欄を構成
する罫線を再配置する処理手段とを具備してなることを
特徴とする。このような表の編集処理機能をもつことに
より、文書画像データ内の表の欄内の内容変更が指示さ
れた場合において、更新された内容のサイズに基づき罫
線を移動・伸縮し、ビットマップからなる表部分の画像
を再構成して、文書中のもとの表イメージを保持してユ
ーザの指示に従う内容に変更することができる。

【００１９】また、本発明は、文書が記録された紙面上
を走査して得た文書画像データのレイアウトを解析する
レイアウト解析部と、上記レイアウト解析部より得られ
るレイアウト情報と上記文書画像データから表示用デー
タを生成する表示管理部と、上記表示管理部で生成され
た表示用データを表示する表示部と、ユーザ入力の受け
付けを行う操作入力部とを備えてなるレイアウト画像編
集装置に於いて、上記操作入力手段により上記文書画像
データ中の表部分について表の一部の領域が選択された
際に、上記表部分のレイアウト情報を用いて、上記選択
された表の一部の領域のビットマップ画像を生成する処
理手段を具備してなることを特徴とする。このような表
の編集処理機能をもつことにより、文書画像データ内の
表の一部領域のみを容易に選択可能として、レイアウト
認識技術を適用した表の更新、新規作成等を容易に行う
こができる。

【００２０】また、本発明は、文書が記録された紙面上
を走査して得た文書画像データのレイアウトを解析する
レイアウト解析部と、上記レイアウト解析部より得られ
るレイアウト情報と上記文書画像データから表示用デー
タを生成する表示管理部と、上記表示管理部で生成され
た表示用データを表示する表示部と、ユーザ入力の受け
付けを行う操作入力部とを備えてなるレイアウト画像編
集装置に於いて、上記操作入力手段により上記文書画像
データ中の表部分について表の一部の領域が選択された
際に、上記表部分のレイアウト情報を用いて、上記選択
された表の一部の領域とその領域の各欄に対応する見出
し欄とでなるビットマップ画像を生成する処理手段を具
備してなることを特徴とする。このような表の編集処理
機能をもつことにより、文書画像データ内の表の一部領
域のみ選択した場合に、選択した欄に付随する見出し欄
も合わせて選択可能として、レイアウト認識技術を適用
した表の更新、新規作成等を容易に行うこができる。

【００２１】また、本発明は、文書が記録された紙面上
を走査して得た文書画像データのレイアウトを解析する
レイアウト解析手段を備えた装置に適用されるレイアウ
ト画像編集方法であって、紙面上を走査して得た文書画
像から、表部分のサイズ変更が指示されたとき、上記表
部分のレイアウト解析結果の情報を用いて、上記サイズ
変更の指示内容に従い、上記指示された表部分の行間、
列間、文字間距離を表の罫線部分でなる表内部の画像
（フレームイメージ）を保持した状態で調整し、上記表
部分のビットマップ画像のサイズを変更することを特徴
とする。このような表の編集処理機能をもつことによ
り、文字画像データの表部分のサイズ変更を行なう場合
に、行間、列間、文字間距離を調整しながら、文字画像
のサイズを拡大縮小することによって、ビットマップ画
像からなる文字画像の品質低下を抑え、表の原画像から
抽出した罫線部の画像を指定サイズに応じて継ぎ足して
延長したり、または不要部分を除去することによって、
原画像のままの罫線画像の画質を保つことができる。

【００２２】また、本発明は、文書が記録された紙面上
を走査して得た文書画像データのレイアウトを解析する
レイアウト解析手段を備えた装置に適用されるレイアウ
ト画像編集方法であって、紙面上を走査して得た文書画
像から、表部分のサイズ変更が指示されたとき、上記指
示された表部分のレイアウト解析結果の情報を用い、上
記指示された変更サイズをもとに、上記指示された表部
分の各罫線と罫線枠で囲まれる欄の内容とを相互に連携
させ、最適ビットマップイメージで上記表部分の画像サ
イズを変更することを特徴とする。これによりユーザに
かかる操作負担を著しく軽減して、文書中のもとの表に
忠実なビットマップイメージでユーザの指示に従う編集
処理が可能となる。

【００２３】

【発明の実施の形態】以下、図面を参照して本発明の実
施形態を説明する。

【００２４】図１は本発明の実施形態によるレイアウト
画像編集装置の構成を示すブロック図である。

【００２５】図に於いて、１１は紙面（Ｐ）上の文書画
像を入力する画像入力部であり、例えば図２に示すよう
な、文章、図等を含む各種の文書が記録された紙面
（Ｐ）上を走査して、紙面（Ｐ）上の文書画像を読み込
み、文書画像データとして出力する。１２は上記したよ
うな文書画像を保存し編集対象となる文書画像データを
出力する画像記録部である。

【００２６】１３は文書画像データのレイアウトを解析
するレイアウト解析部であり、上記画像入力部１１ある
いは画像記録部１２より出力された編集対象となる文書
画像データのレイアウトを解析する。この解析されたレ
イアウト情報は文書画像データと対応付けされて図示し
ない記憶装置に記憶され、後述する編集処理に用いられ
る。

【００２７】１４は編集対象となる表示用データを生成
する表示管理部であり、上記レイアウト解析部１３より
得られるレイアウト情報と上記文書画像データとをもと
にレイアウト画像編集のための表示用画像データを生成
し、操作入力部１６の入力指示に従い画像の編集処理を
実行する。ここでは表示部１５に表示された後述する図
２に示すような文書画像から、操作入力部１６の操作で
後述する図４に示すような表領域が選択され、サイズ変
更、移動等が指示されることにより、後述する図３に示
すような表領域のレイアウト情報を用いて後述する図５
乃至図７に示すような表領域のレイアウト画像編集処理
を実行する。

【００２８】１５は上記表示管理部１４で生成された表
示用データを表示出力する表示部であり、ここでは後述
する図２に示すような編集対象となる文書画像、及び当
該文書画像から選択された、後述する図４に示すような
編集処理の対象となる表領域等が表示される。１６はユ
ーザ入力の受け付けを行う操作入力部であり、ここでは
上記表領域を対象とした編集処理のための各種指示入力
に供される。

【００２９】上記構成に於いて、画像入力部１１または
画像記録部１２より出力された編集対象となる文書画像
データはレイアウト解析部１３に入力され、レイアウト
解析されて、編集操作に必要なレイアウト情報が生成さ
れる。更に表示管理部１４の制御の下に、上記レイアウ
ト情報をもとにレイアウト画像編集処理が実行される。
ここでは表示部１５に表示された後述する図２に示すよ
うな文書画像から、操作入力部１６の操作で、後述する
図４に示すような表領域が選択され、サイズ変更、移動
等が指示されることにより、後述する図３に示すような
表領域のレイアウト情報を用いて後述する図５乃至図７
に示すような表領域のレイアウト画像編集処理が実行さ
れる。

【００３０】ここで、レイアウト解析とは、文書画像デ
ータの中から、タイトル部分や文章の段落、図や表な
ど、一纏まりの構成要素として見做せる単位で抽出し、
その位置やサイズを求めるとともに、各構成要素の種類
を認識し、更に関連する情報を抽出することを言う。構
成要素が文章部分であれば、各行の位置や長さ、高さ、
行に含まれる文字単位の位置、大きさなども含む。構成
要素が表であれば、行や列の数、各欄の位置やサイズか
らなり、欄の内容が文字列であれば、文章部分と同様に
文字単位の位置、大きさの抽出を行なう。この際の編集
対象となる文書の原画像（文書画像データ）とレイアウ
ト情報とをもとに生成された文書の表示例を図２に示
し、レイアウト情報の例を図３に示している。

【００３１】図２は上記実施形態に於いて、文書の原画
像（文書画像データ）とレイアウト情報とをもとに生成
した編集対象となる文書画像の表示例を示したもので、
図中、２１〜２６は、レイアウト解析により得られた文
書画像２０の構成要素である。

【００３２】上記構成要素のうち、２１は文書のタイト
ル、２２，２３は本文の文章部分、２４は表、２５，２
６は図である。尚、上記各構成要素の領域範囲を示す矩
形はユーザが不要と判断して指示すれば表示しなくても
よい。また、文章部分については、行２７や文字単位２
８の範囲領域を追加表示してもよい。

【００３３】この図２に示すような編集対象となる文書
画像が表示部１５に表示され、その表示画面上で、ユー
ザが操作入力部１６により変更したい構成要素（例えば
表領域）を選択指定して、その希望サイズ、移動したい
位置等を指示することにより、表示管理部１４の処理制
御の下に、上記指示内容に従うサイズ変更、位置移動
等、後述する各種のレイアウト画像編集処理が実行され
る。

【００３４】図３は上記実施形態に於けるレイアウト情
報の一例を示したもので、ここでは、レイアウト構成要
素の内容が文章と表である場合について示している。

【００３５】図中、３１は共通部のデータブロック、３
２は文章部のデータブロック、３３は表部のデータブロ
ックである。

【００３６】共通部のデータブロック３１に於いて、
「ｂｌｏｃｋ＿ｉｄ」は文書データ上での構成要素の通
し番号、「ｂｌｏｃｋ＿ｔｙｐｅ」は構成要素の種類
（文章、表、図等、及び縦書き、横書き等）、「ｂｌｏ
ｃｋ＿ｐｏｓ（ｘ，ｙ）」は構成要素の領域の起点（左
上の座標）、「ｂｌｏｃｋ＿ｓｉｚｅ（ｘ，ｙ）」は構
成要素の領域のサイズである。

【００３７】文章部のデータブロック３２に於いて、
「ｔｘｔ＿ｉｄ」は文章部分の通し番号、「ｌｉｎｅ＿
ｎｕｍ」は文章部分の行の数、「ｌｉｎｅ＿ｉｄ（＝
１）」は行の通し番号、「ｌｉｎｅ＿ｐｏｓ（ｘ，
ｙ）」は行の位置、「ｌｉｎｅ＿ｓｉｚｅ（ｘ，ｙ）」
は行のサイズ、「ｃｈａｒ＿ｎｕｍ」は行に含まれる文
字数、「ｃｈａｒ＿ｉｄ」は文字の通し番号、「ｃｈａ
ｒ＿ｐｏｓ（ｘ，ｙ）」は文字の位置、「ｃｈａｒ＿ｓ
ｉｚｅ（ｘ，ｙ）」は文字のサイズである。上記した
「ｌｉｎｅ＿ｉｄ」〜「ｃｈａｒ＿ｓｉｚｅ」のデータ
ブロックが「ｌｉｎｅ＿ｎｕｍ」の数だけ設けられ、
「ｃｈａｒ＿ｉｄ」〜「ｃｈａｒ＿ｓｉｚｅ」のデータ
ブロックが「ｃｈａｒ＿ｎｕｍ」の数だけ設けられる。

【００３８】表部のデータブロック３３に於いて、「ｌ
ｉｎｅ＿ｎｕｍ」は表部分の行の数、「ｒｏｗ＿ｎｕ
ｍ」は表部分の列の数、「ｌｉｎｅ＿ｉｄ（＝１）」は
行の通し番号、「ｌｉｎｅ＿ｐｏｓ（ｘ，ｙ）」は行の
位置、「ｌｉｎｅ＿ｓｉｚｅ（ｘ，ｙ）」は行のサイ
ズ、「ｃｏｌｕｍｎ＿ｉｄ」は欄の通し番号、「ｃｏｌ
ｕｍｎ＿ｐｏｓ（ｘ，ｙ）」は欄の位置（起点；左上の
座標）、「ｃｏｌｕｍｎ＿ｓｉｚｅ（ｘ，ｙ）」は欄の
サイズ、「ｃｏｌｕｍｎ＿ｔｙｐｅ」は欄の種類（見出
し欄、文字、図、文字と罫線の混在等）、「ｌｉｎｅ＿
ｎｕｍ」（ｓｅｔ＿ｐｏｓ）は欄内の配置状態（左寄
せ、中央、右寄せ等）である。上記した「ｌｉｎｅ＿ｉ
ｄ」〜「ｌｉｎｅ＿ｎｕｍ」を含むデータブロックが
「ｌｉｎｅ＿ｎｕｍ」の数だけ設けられ、「ｃｏｌｕｍ
ｎ＿ｉｄ」〜「ｌｉｎｅ＿ｎｕｍ」と文章部の行情報と
同様の「行情報」とでなるデータブロックが「ｒｏｗ＿
ｎｕｍ」の数だけ設けられる。尚、文章部の行情報と同
様の「行情報」は、欄内に文字情報が存在しないときは
不要である。

【００３９】上記したように、ここでは各レイアウト項
目につき、共通部分のデータ３１があり、更にレイアウ
ト項目の種類に固有のデータブロック（図３に示す例で
は、文章部のデータブロック３２と表部のデータブロッ
ク３３）が続く。

【００４０】図４は上記実施形態に於ける動作を説明す
るための表画像の一例を示す図であり、ここではｍ行Ｘ
ｎ列の罫線で区切られた表画像を示している。図中、４
１は欄、４２は斜罫線、４３は罫線である。

【００４１】図５乃至図７はそれぞれ本発明の第１実施
形態に於ける表領域のレイアウト画像編集処理手順を示
すフローチャートである。

【００４２】図８は上記実施形態に於ける動作を説明す
るための表内の無効として扱う欄の表記例を示す図であ
る。ここでは、空白欄ｐ、無効表記された欄ｑ等が無効
欄として扱われる。

【００４３】図９は上記実施形態に於ける表罫線のレイ
アウト情報の一例を示す図である。図中、９１は共通部
のデータブロック、９２は見出し欄を含めた行数、列数
のデータブロック、９３は行のデータブロック、９４は
列のデータブロックである。

【００４４】共通部のデータブロック９１に於いて、
「ｂｌｏｃｋ＿ｉｄ」は文書データ上でのブロックの通
し番号、「ｂｌｏｃｋ＿ｔｙｐｅ」はブロックの種類
（文章、表、図等、及び縦書き、横書き等）、「ｂｌｏ
ｃｋ＿ｐｏｓ（ｘ，ｙ）」はブロックの領域の起点（左
上の座標）、「ｂｌｏｃｋ＿ｓｉｚｅ（ｘ，ｙ）」はブ
ロックの領域のサイズである。

【００４５】行数、列数のデータブロック９２に於い
て、「ｌｉｎｅ＿ｎｕｍ（＝ｍ＋１）」は見出し欄を含
めた行の数、「ｒｏｗ＿ｎｕｍ（＝ｎ＋１）」は見出し
欄を含めた列の数である。

【００４６】行のデータブロック９３に於いて、「ｌｉ
ｎｅ＿ｉｄ（＝１〜）」は行の通し番号、「ｌｉｎｅ＿
ｐｏｓ（ｘ，ｙ）」は行の起点位置、「ｌｉｎｅ＿ｌｅ
ｎ」は行の罫線の長さ、「ｌｉｎｅ＿ｗｉｄｅ」は行の
罫線の幅、「ｌｉｎｅ＿ｔｙｐｅ」は行の罫線の種類
（実線タイプ、破線タイプ、二重線タイプ、一点鎖線タ
イプ等）であり、上記した「ｌｉｎｅ＿ｉｄ」〜「ｌｉ
ｎｅ＿ｔｙｐｅ」でなるデータブロックが「ｌｉｎｅ＿
ｎｕｍ」＋１個設けられる。

【００４７】列のデータブロックに於いて、「ｒｏｗ＿
ｉｄ（＝１〜）」は列の通し番号、「ｒｏｗ＿ｐｏｓ
（ｘ，ｙ）」は列の起点位置、「ｒｏｗ＿ｌｅｎ」は列
の罫線の長さ、「ｒｏｗ＿ｗｉｄｅ」は列の罫線の幅、
「ｒｏｗ＿ｔｙｐｅ」は列の罫線の種類（実線タイプ、
破線タイプ、二重線タイプ、一点鎖線タイプ等）であ
り、上記した「ｒｏｗ＿ｉｄ」〜「ｒｏｗ＿ｔｙｐｅ」
でなるデータブロックが「ｒｏｗ＿ｎｕｍ」＋１個設け
られる。

【００４８】図１０上記実施形態に於ける表を構成する
罫線（表罫線）の罫線処理手順を示すフローチャートで
ある。

【００４９】図１１は上記実施形態に於ける表罫線の線
種の一例を示す図である。

【００５０】ここで上記各図を参照して本発明の第１実
施形態に於ける動作について説明する。

【００５１】この第１実施形態に於いては、文書画像デ
ータ中の表部分のサイズ変更指示に従い、指示された表
部分の行間、列間、文字間距離を表の罫線部分の画像を
保持したまま調整して上記表部分を拡大縮小処理する、
表の編集処理機能を実現している。

【００５２】表示部１５に表示された図２に示すような
文書画像から、操作入力部１６の操作で、編集処理の対
象として表２４が選択され、サイズ変更が指示されるこ
とにより、表示管理部１４の制御の下に、図３に示すよ
うな表領域のレイアウト情報（表部のデータブロック３
３）を用いて図５乃至図７に示すような表領域のレイア
ウト画像編集処理が実行される。ここでは、図４に示し
た、ｍ行Ｘｎ列の罫線で区切られた表画像を例にサイズ
変更処理の説明を行なう。

【００５３】図２に示す編集対象となる文書画像に含ま
れる図４に示すような構成の表領域を対象に、当該表領
域のサイズ変更を行なう場合、行間、文字間距離の調
整、および列間距離の調整が必要となる。また表を構成
する罫線部分の縮小、延長処理も必要となる。その処理
の流れを図５乃至図７に示すフローチャートを参照して
説明する。

【００５４】まず、表の各欄を一つのレイアウトブロッ
クに見立て、欄ごとに「基本サイズ」を求める（図５ス
テップＳ５１）。

【００５５】この際の基本サイズの定義と、その求め方
を以下に記す。

【００５６】まず欄内の内容を調べ（図５ステップＳ５
２）、欄内が文章のみで構成されていれば（図５ステッ
プＳ５２ａ）、その行情報から、行の太さ（横書きなら
行の高さ、縦書きなら行の幅）を合計する（図５ステッ
プＳ５３）。これは、行間距離を「０」としたときの、
文章ブロックの行に垂直な方向のサイズに等しい。

【００５７】次に、各行の行方向の文字サイズ（横書き
なら文字幅、縦書きなら文字の高さ）を合計して比較
し、最大値を求める（図５ステップＳ５４）。これは、
文字間距離を「０」としたときの、文章ブロックの行方
向サイズに相当する。

【００５８】この二つのサイズは、文章の行間、文字間
距離を無くして隙間なく文字画像を並べた場合の文章ブ
ロックのサイズであり、行間、文字間を調整するだけで
は、これ以上サイズを小さくすることはできない最小サ
イズである。このサイズを以後、ブロックの基本サイズ
と呼ぶ（図５ステップＳ５５）。

【００５９】また表の欄内が、図と文字との組合せで構
成されている場合（図５ステップＳ５２ｂ）は、図に対
する外接矩形領域を一文字からなる行と見做して（図５
ステップＳ５６）、文章のみの場合と同様の手順で基本
サイズを求める（図５ステップＳ５３〜Ｓ５５）。

【００６０】また、表の欄内が図のみで構成されている
場合（図５ステップＳ５２ｃ）には、その図に対する外
接矩形のサイズが、基本サイズとなる（図５ステップＳ
５７）。

【００６１】また、表の欄内が空白、あるいは「／」
「×」で無効にされている場合には、基本サイズは縦横
成分ともに「０」とする（図５ステップＳ５８）。この
際の無効として扱う欄の表記例を図８に示している。

【００６２】上記した処理をすべての欄について行う
（図５ステップＳ５９，Ｓ６０，…）。

【００６３】次に、各欄は罫線と呼ぶ直線で仕切られる
ため、表の同じ行、列に配置される各欄の高さおよび幅
は統一する必要がある。したがって、各列に含まれる欄
の中から、横方向に最長の基本サイズを、その列の基本
サイズの横方向成分とする（図６ステップＳ６１）。同
様に、各行に含まれる欄の中の縦方向に最長な基本サイ
ズを、その行の基本サイズの縦方向成分とする（図６ス
テップＳ６２）。

【００６４】この二つの値で、各行、各列に位置する欄
の基本サイズを更新する。

【００６５】表全体の基本サイズは、この各欄の基本サ
イズを合成したものとなる。

【００６６】各行の縦方向基本サイズを合計した値が表
全体の基本サイズの縦成分となり、各列の横方向基本サ
イズを合計した値が表全体の基本サイズの横成分とな
る。この縦成分と横成分とを合わせて表全体の基本サイ
ズとする（図６ステップＳ６３）。

【００６７】次に、表全体の基本サイズに対し、ユーザ
が指定したサイズの比の値を求める（図６ステップＳ６
４）。ここでは基本サイズ側を基準とした場合、比の値
が「１」より大きくなれば拡大となり、「１」より小さ
くなれば縮小となる。この比の値は、縦横両方について
計算する。

【００６８】この実施形態では、ビットマップの拡大縮
小による画質の劣化を抑える一つの手法として、画素単
位の拡大縮小はできるだけ避け、拡大縮小が必要な場合
にも整数倍での拡大、縮小に限定することにした。

【００６９】したがって、ここでは上記のようにして得
られた比の値が「１」より大きいか否かを判断し（図６
ステップＳ６５）、大きければ、それを越えない最大の
整数（例：比の値が２．６であれば、２）にし（図６ス
テップＳ６６）、また、「１」より小さい場合には、そ
れを越えない整数の逆数の最大値（例：比の値が０．４
２ならば、１／３に）に比の値を置き換えて（図６ステ
ップＳ６７）、画像の拡大縮小に用いる。

【００７０】この二つの比の値に基づいて、文字画像を
拡大するか、縮小するか、あるいはしない、といった判
別が行なわれる（図６ステップＳ６８ａ，Ｓ６８ｂ）。
ここで縦・横方向共に「１」より大きければ拡大し（図
６ステップＳ６９）、一方のみでも「１」より小さけれ
ば縮小とする（図６ステップＳ７１）。それ以外の、両
方とも「１」に等しいか、あるいは、一方が「１」で他
方が「１」より大な場合には、サイズ変更は行なわない
（図６ステップＳ７２）。

【００７１】ここで画素を定数倍拡大する場合、画像に
ジャギーが目立つことが考えられるので、拡大後に補間
および平滑化処理を行なってもよい（図６ステップＳ７
０）。

【００７２】このようにして、指定サイズに合わせて拡
大縮小した画像を用いて、表を再構成するが、ここで、
表の各欄のサイズは一般に均等になっていることが望ま
しい。

【００７３】そこで、この実施形態では最も幅の広い列
の横基本サイズ、最も高い行の縦基本サイズを合わせた
ものを、統一欄サイズとする（図７ステップＳ７３）。

【００７４】次に、表に含まれる全ての欄のサイズを、
この統一欄サイズに合わせて構成した場合の表全体のサ
イズが指定サイズに収まるか否かを調べ（図７ステップ
Ｓ７４）、収まる場合は、全ての欄のサイズを統一欄サ
イズに修正し（図７ステップＳ７５）、収まらない場合
は、欄サイズは修正せずに元のままとする。

【００７５】各欄のサイズ決定により、表全体の基本サ
イズが得られるので、表全体の基本サイズと、指定サイ
ズの差を求め、行間、列間距離に振り分ける。このと
き、各行間、各列間距離が等しくなるように、横方向の
差を（列数−１）で均等に割り、縦方向の差を（行数−
１）で均等に割り、得られた値を、各欄の位置に反映さ
せる（図７ステップＳ７６）。

【００７６】各欄の位置が決まったので、各欄のサイズ
に合わせて、欄内に配置する文章の文字間距離、行間距
離を決定し（図７ステップＳ７７）、得られた位置に文
字画像を配置する（図７ステップＳ７８）ことにより、
表内の文書配置が完了する。

【００７７】ここで、文字間距離は、欄のサイズに合わ
せて均等にしてもよいし、同列の欄では文字数に限らず
文字間距離を統一してもよいし、同様に同行の欄内の文
字間距離を共通にしてもよいし、ユーザ自身に選択させ
てもよい。

【００７８】次に、表を構成する罫線の処理について図
４を参照して説明する。

【００７９】図４に示す表の罫線は、見出し欄と他の欄
の間の罫線は二重線となっており、他の欄は一重線であ
る。また表全体の外周部分は他の罫線よりも太くなって
いる。

【００８０】この例のように、異なる種類、太さの罫線
が使われている表の画像を扱う場合には、各罫線ごとに
罫線部分の画像を管理する必要がある。

【００８１】図９は、各罫線が、その途中で太さや種類
が変わらないとした場合の、表の罫線に関するレイアウ
ト情報の例であり、ここでは（ｍ＋２）本の横罫線と、
（ｎ＋２）本の縦罫線から構成されている。

【００８２】この図９に示すレイアウト情報は一例であ
り、罫線が途中で太さや種類が変わるような表を扱うに
は、（ｍ＋２）＊（ｎ＋１）本の横罫線と、（ｎ＋２）
＊（ｍ＋１）本の縦罫線から構成されることになる。

【００８３】図１０は、罫線処理の流れを示すフローチ
ャートである。ここで、図５乃至図７の処理により、表
全体のサイズ、各欄の位置、及びサイズは既に得られて
いるものとする。

【００８４】まず、得られたサイズが、表の元画像のサ
イズよりも大きいか、小さいかを、横方向、縦方向につ
いてそれぞれ比較する（図１０ステップＳ８１，Ｓ８
２）。

【００８５】ここで、指定サイズの方が小さければ、元
画像の罫線部分の画像の指定サイズを越える分のデータ
を破棄する（図１０ステップＳ８３）。

【００８６】これにより、罫線の種類、太さを保持した
まま、指定サイズに合った罫線画像を生成することがで
きる。この罫線画像を、図５で示した処理によって得ら
れている、サイズ変更後の表全体の位置、サイズ、各欄
の位置に合わせて配置することにより（図１０ステップ
Ｓ８８）、サイズ変更後の表画像を完成することができ
る。

【００８７】逆に指定サイズが変更前のサイズより大き
い場合、元画像の罫線画像を指定サイズに合わせて延長
する必要が生じる。このとき、単に罫線画像を必要な長
さだけ繋ぎ合わせればよい場合と、そうでない場合が考
えられる。

【００８８】図１１に、罫線の種類の例を示すが、ここ
で実線タイプと名付けた罫線（１１−１）〜（１１−
４）は、進行方向に対する罫線の変化が無く、どの部分
を切り出しても同一の罫線画像が得られる。したがっ
て、この実線タイプの罫線を延長する場合には、足りな
い長さに相当する罫線画像を複写して繋げることによ
り、指定サイズに等しい罫線画像を得ることができる。

【００８９】一方、破線タイプと名付けた罫線（１１−
５）〜（１１−８）の場合、その進行方向に沿って罫線
の状態が変化する。そのため、変化の規則性に基づいて
不足分の罫線画像を生成して繋げないと、繋ぎ目部分の
画像が乱れ、不自然になってしまう。

【００９０】そこで、罫線画像を延長する場合、まず罫
線の種類についての判定を行なう（図１０ステップＳ８
４）。

【００９１】ここで、罫線の種類が実線タイプであれ
ば、元の罫線画像から、延長すべき長さ分複写し、合成
することにより、指定サイズの長さの罫線を得る（図１
０ステップＳ８５，Ｓ８７）。

【００９２】また、罫線が破線タイプであれば、破線の
規則性を調べ、元画像の延長する部分に正しく繋げるに
は、元の罫線画像の、どの位置から画像を取得すればよ
いのか求める（図１０ステップＳ８６）。

【００９３】ここで求めた位置から、延長に必要な長さ
に相当する罫線画像を複写し、元の罫線画像と合成する
ことにより、指定サイズに等しい長さの罫線を得る（図
１０ステップＳ８７）。

【００９４】これにより更新サイズに合った長さの各罫
線画像が得られたので、それらを図５乃至図７の処理で
得られている、表全体の位置、サイズ、各行、列の位置
に従って配置し、表画像を完成させる（図１０ステップ
Ｓ８８）。

【００９５】最後に、図４の左上の欄（４１）を斜めに
二分する斜罫線（４２）のサイズ変更について述べる。
欄（４１）のサイズが変化した場合、罫線（４２）は長
さだけでなく、方向も変化することが、これまで説明し
てきた縦方向、横方向の罫線の場合とは異なる。

【００９６】ここで罫線（４２）の方向は、欄（４１）
の対角線方向であるから、欄（４１）のサイズを得るこ
とにより、方向と長さは確定することができる。

【００９７】したがって、元画像から罫線（４２）部分
を抽出して罫線の種類を識別し、罫線（４２）部分の画
像を取り除いた欄（４１）領域に、欄の対角線に沿って
直線を追記することにより、サイズ変更に対応した罫線
画像を伴った欄（４１）の画像を生成することができ
る。

【００９８】次に、図１２を参照して本発明の第２実施
形態を説明する。この第２実施形態は、操作入力手段に
より上記文書画像データ中の表部分の罫線移動が指示さ
れた際に、その表部分のレイアウト情報を用いて、上記
指示内容に従い、上記表部分のビットマップ画像を再構
成する処理手段を具備して、文書画像データの表部分の
罫線部分の移動が指示された場合に、ユーザに指示され
た位置に基づき、ビットマップからなる表部分の画像を
再構成して、文書中の表を原イメージのままの状態でユ
ーザの指示に従う任意の位置に移動することができる表
の編集処理機能を実現している。

【００９９】図９に示したような罫線情報が上述したレ
イアウト認識により得られている場合、罫線の位置と長
さ、その太さが分かっているので、ユーザから操作入力
された、画像編集位置が表画像データ上の罫線の近傍か
否かを判定することが可能である。

【０１００】表の罫線移動指示が行なわれた場合、どの
ように表を再構成するかはユーザの要求により異なる。
図１２（ａ）の表の縦罫線（１２１）を左へと移動させ
る場合、同図（ｂ）のように、列ｂ１から左側の列は罫
線移動させた分だけ列の幅を保ったまま左に移動するこ
とにより列ｂ２の幅を広げたい、または同図（ｃ）のよ
うに、他の罫線は固定し、列ｂ１の幅は罫線を移動させ
た分だけ縮め、列ｂ２の幅は罫線移動させた分だけ広げ
たい、といった要求が考えられる。

【０１０１】また、表の外周部分の罫線（１２２）を内
側に移動させるときには、図（ｄ）のように、表全体の
幅（あるいは高さ）が縮まる（あるいは広がる）場合も
ある。

【０１０２】図１２に於いては、縦罫線の移動の例のみ
を例示したが、これと同様にして横罫線の移動を行なう
こともできる。

【０１０３】これらの機能については、ユーザの操作に
よって切替えることができてもよいし、そのいずれか一
つの機能のみを実装してもよい。

【０１０４】指定した罫線の移動先の位置が確定すれ
ば、指定した罫線の画像をそこに合成し、さらに図１２
に示す（ｂ），（ｃ），（ｄ）それぞれの状態に対応す
る場合に応じて、伸縮した部分の罫線の画像を再構成す
る。

【０１０５】図１２（ｂ）の場合に於いては、罫線が延
びた分の画像を上述した実施形態１の場合と同様にして
延長し、図１２（ｄ）の場合であれば、短くなった罫線
部分の画像は破棄する。

【０１０６】最後に、変更された列、行のサイズに対応
して、欄内の文字や図などの再配置を行なう。これは上
述した実施形態１の場合と同様に、欄サイズに応じて均
等配置してもよいし、更新された列、行単位で文字間距
離を統一してもよい。

【０１０７】尚、欄サイズが縮められた場合には、欄内
に内容が入り切れない可能性がある。そのときには、欄
サイズの変化する行、列の「基本サイズ」を求め、それ
より小さいサイズになるような罫線移動はキャンセルし
て、罫線移動を基本サイズに合わせてもよいし、上述し
た実施形態１に記した表の拡大縮小機能のように欄のサ
イズに応じて内容を縮小してもよいし、欄内の画像をそ
のままにして欄サイズに入り切らない分は破棄してもよ
いし、どのような処理を行なうかユーザに選択させても
よい。

【０１０８】次に本発明の第３実施形態を説明する。こ
の第３実施形態は、上記文書画像データ中の表部分につ
いて欄内の内容の変更が指示された際に、上記表部分の
レイアウト情報を用いて、上記指示に従い変更された欄
内の内容をその周囲の欄の内容配置に従い配置する処理
手段を具備して、文書画像データの表の欄内の内容変更
を可能とし、更に変更した内容と周囲の欄の内容配置に
応じて更新内容を自動的に欄内に配置して、文書中の表
を原イメージのままの状態でユーザの指示に従う内容に
変更することができる表の編集処理機能を実現してい
る。

【０１０９】上記図９に示したような罫線情報が、レイ
アウト認識により得られている場合、罫線の位置と長
さ、その太さが分かっているので、ユーザから操作入力
された、画像編集位置が表画像データ上の何れの欄内で
あるかを判定可能であることから、編集対象とする欄を
特定することができる。

【０１１０】次に、欄内の内容がレイアウト認識により
識別できていれば、ユーザの指示にしたがってその内容
を更新することができる。

【０１１１】上記内容が文字列であり、各文字の領域が
図２の（２８）のように判明していれば、その一部を除
去したり、移動させたりすることが可能となる。操作入
力部１６から文字入力が可能であるなら、入力した文字
コードから文字画像を生成することにより、内容を置き
換えることも可能である。

【０１１２】また、欄の内容が図であり、それを変更し
たい場合も同様である。除去したい図、置き換えたい図
等を指定し、選択欄への入力を指示することによって、
欄の内容を更新することができる。

【０１１３】ここで変更した内容は、周囲の欄の内容や
配置に応じて自動的に欄内に適切に配置されることが望
ましい。

【０１１４】欄の内容が文字列であるとき、それが数値
であれば、右寄せ、文章であれば左寄せ、単語であれば
中央寄せに配置されるのが一般的である。また、周囲の
欄の配置状態に合わせないと表としての統一感や美観が
失われる。

【０１１５】したがって、欄内の内容に関する情報や、
周囲の欄の配置状態に関するレイアウト情報（右寄せ、
左寄せ、中央配置等）から、更新する欄内の配置状態を
自動的に判定し、適正配置を行なう。勿論、この配置状
態は、ユーザが任意に指定してもよい。

【０１１６】次に本発明の第４実施形態を説明する。こ
の第４実施形態は、文書画像データ中の表部分について
欄内の内容の変更が指示された際に、上記表部分のレイ
アウト情報を用いて、上記指示に従い変更された欄内の
内容のサイズに伴い欄を構成する罫線を再配置する処理
手段とを具備して、文書画像データ内の表の欄内の内容
変更が指示された場合に、更新された内容のサイズに基
づき罫線を移動・伸縮し、ビットマップからなる表部分
の画像を再構成して、文書中のもとの表イメージを保持
してユーザの指示に従う内容に変更することができる表
の編集処理機能を実現している。

【０１１７】上述した第３実施形態に於いて、欄の内容
を更新した場合、変更内容によっては欄内に入り切らな
い場合がある。このとき、更新された内容に基づいてそ
の欄の「基本サイズ」を求め、編集した欄の属する行お
よび列の基本サイズと比較する。ここで行の基本サイズ
とは、その行に属する欄の基本サイズの高さ成分の最大
値であり、列の基本サイズはその列に属する欄の基本サ
イズの幅の最大値に相当する。したがって、編集した欄
の基本サイズの方が行、列の基本サイズより大きけれ
ば、行または列の基本サイズを更新し、それにしたがっ
て罫線および、他の欄の画像も自動的に更新する。

【０１１８】次に本発明の第５実施形態を説明する。こ
の第５実施形態は、文書画像データ中の表部分について
表の一部の領域が選択された際に、上記表部分のレイア
ウト情報を用いて、上記選択された表の一部の領域のビ
ットマップ画像を生成する処理手段を具備して、文書画
像データ内の表の一部領域のみを容易に選択可能とし、
レイアウト認識技術を適用した表の更新、新規作成等を
容易に行うことができる表の編集処理機能を実現してい
る。

【０１１９】上記した図９に示したような罫線情報がレ
イアウト認識により得られている場合、罫線の位置と長
さ、その太さが分かっているので、ユーザから操作入力
された、画像編集位置が表画像データ上の、どの欄内で
あるかを判定することが可能である。したがって、選択
範囲の始点〜終点を示すような矩形領域が入力部から指
定されたときに、その領域内に、どの欄が含まれるかを
特定することができ、表の一部領域のみを容易に選択す
ることができる。

【０１２０】また、シフトキー（Ｓｈｉｆｔ Ｋｅｙ）
やコントロールキー（ＣｎｔｒｌＫｅｙ）に代表される
ような機能キーを併用して表内の離れた位置にある、複
数の欄を同時に選択することができる。

【０１２１】次に、本発明の第６実施形態を図１３を参
照して説明する。この第６実施形態は、文書画像データ
中の表部分について表の一部の領域が選択された際に、
上記表部分のレイアウト情報を用いて、上記選択された
表の一部の領域とその領域の各欄に対応する見出し欄と
でなるビットマップ画像を生成する処理手段を具備し
て、文書画像データ内の表の一部領域のみ選択した場合
に、選択した欄に付随する見出し欄も合わせて選択可能
とし、レイアウト認識技術を適用した表の更新、新規作
成等を容易に行うことができる表の編集処理機能を実現
している。

【０１２２】一般に、表の内容は単独では用いられず、
その欄に対応する見出し欄とともに提示されることによ
って、はじめて表としての意味が生じる。したがって、
上述した第５実施形態に示したような、表の一部領域の
み選択して画像を切り出す場合にも、図１３に示すよう
に、選択した欄に対応する見出し欄も合わせて自動的に
選択状態として切り出せた方が有効である。

【０１２３】レイアウト認識により、各欄の位置関係が
得られていれば、その上端および左端欄を参照すること
によって、各欄に対応した見出し欄を特定することは容
易であり、図１３に記したように選択した複数の表内の
欄１３１と、それに対応した見出し欄１３２，１３３の
画像を取り出し、新規の表として再構成することが可能
となる。

【０１２４】上述したように本発明の実施形態によれ
ば、オペレータが文書画像中に含まれる表領域に様々な
編集作業を行なう際に、レイアウト認識技術により得ら
れたレイアウト情報を用いることによって、表画像の編
集が容易となり、簡略されたインタフェースを提供する
ことができる。

【０１２５】

【発明の効果】以上詳記したように本発明によれば、レ
イアウト認識技術により得られたレイアウト構成要素に
関する情報に基づいて行なわれる、文書編集作業のう
ち、特に表領域の拡大縮小、内容変更、一部選択などの
各種編集作業をユーザの操作負担を著しく軽減して容易
かつ迅速に行うことのできるレイアウト画像編集装置及
びレイアウト画像編集方法が提供できる。

【０１２６】また本発明によれば、オペレータが文書画
像中に含まれる表領域に様々な編集作業を行なう際に、
レイアウト認識技術により得られたレイアウト情報を用
いることによって、表画像の編集が容易となり、これに
よりビットマップイメージの表領域に於ける簡略された
編集インタフェースを提供することができる。

【０１２７】また、本発明によれば、文書が記録された
紙面上を走査して得た文書画像データのレイアウトを解
析するレイアウト解析部と、上記レイアウト解析部より
得られるレイアウト情報と上記文書画像データから表示
用データを生成する表示管理部と、上記表示管理部で生
成された表示用データを表示する表示部と、ユーザ入力
の受け付けを行う操作入力部とを備えてなるレイアウト
画像編集装置に於いて、上記操作入力手段より上記文書
画像データ中の表部分のサイズ変更指示が入力された際
に、上記指示された変更サイズ情報に基づき、上記指示
された表部分の行間、列間、文字間距離を表の罫線部分
の画像を保持したまま調整して上記表部分を拡大縮小処
理する処理手段を具備してなる表の編集処理機能をもつ
ことにより、文字画像データの表部分のサイズ変更を行
なう場合に、行間、列間、文字間距離を調整しながら、
文字画像のサイズを拡大縮小することによって、ビット
マップ画像からなる文字画像の品質低下を抑え、表の原
画像から抽出した罫線部の画像を指定サイズに応じて継
ぎ足して延長したり、または不要部分を除去することに
よって、原画像のままの罫線画像の画質を保つことがで
きる。

【０１２８】また、本発明によれば、文書が記録された
紙面上を走査して得た文書画像データのレイアウトを解
析するレイアウト解析部と、上記レイアウト解析部より
得られるレイアウト情報と上記文書画像データから表示
用データを生成する表示管理部と、上記表示管理部で生
成された表示用データを表示する表示部と、ユーザ入力
の受け付けを行う操作入力部とを備えてなるレイアウト
画像編集装置に於いて、上記操作入力手段により上記文
書画像データ中の表部分の罫線移動が指示された際に、
上記表部分のレイアウト情報を用いて、上記指示内容に
従い、上記表部分のビットマップ画像を再構成する処理
手段を具備してなる表の編集処理機能をもつことによ
り、文書画像データの表部分の罫線部分の移動が指示さ
れた場合に、ユーザに指示された位置に基づき、ビット
マップからなる表部分の画像を再構成して、文書中の表
を原イメージのままの状態でユーザの指示に従う任意の
位置に移動することができる。

【０１２９】また、本発明によれば、文書が記録された
紙面上を走査して得た文書画像データのレイアウトを解
析するレイアウト解析部と、上記レイアウト解析部より
得られるレイアウト情報と上記文書画像データから表示
用データを生成する表示管理部と、上記表示管理部で生
成された表示用データを表示する表示部と、ユーザ入力
の受け付けを行う操作入力部とを備えてなるレイアウト
画像編集装置に於いて、上記操作入力手段により上記文
書画像データ中の表部分について欄内の内容の変更が指
示された際に、上記表部分のレイアウト情報を用いて、
上記指示に従い変更された欄内の内容をその周囲の欄の
内容配置に従い配置する処理手段を具備してなる表の編
集処理機能をもつことにより、文書画像データの表の欄
内の内容変更が可能であり、変更した内容と周囲の欄の
内容配置に応じて更新内容を自動的に欄内に配置して、
文書中の表を原イメージのままの状態でユーザの指示に
従う内容に変更することができる。

【０１３０】また、本発明によれば、文書が記録された
紙面上を走査して得た文書画像データのレイアウトを解
析するレイアウト解析部と、上記レイアウト解析部より
得られるレイアウト情報と上記文書画像データから表示
用データを生成する表示管理部と、上記表示管理部で生
成された表示用データを表示する表示部と、ユーザ入力
の受け付けを行う操作入力部とを備えてなるレイアウト
画像編集装置に於いて、上記操作入力手段により上記文
書画像データ中の表部分について欄内の内容の変更が指
示された際に、上記表部分のレイアウト情報を用いて、
上記指示に従い変更された欄内の内容のサイズに伴い欄
を構成する罫線を再配置する処理手段とを具備してなる
表の編集処理機能をもつことにより、文書画像データ内
の表の欄内の内容変更が指示された場合において、更新
された内容のサイズに基づき罫線を移動・伸縮し、ビッ
トマップからなる表部分の画像を再構成して、文書中の
もとの表イメージを保持してユーザの指示に従う内容に
変更することができる。

【０１３１】また、本発明によれば、文書が記録された
紙面上を走査して得た文書画像データのレイアウトを解
析するレイアウト解析部と、上記レイアウト解析部より
得られるレイアウト情報と上記文書画像データから表示
用データを生成する表示管理部と、上記表示管理部で生
成された表示用データを表示する表示部と、ユーザ入力
の受け付けを行う操作入力部とを備えてなるレイアウト
画像編集装置に於いて、上記操作入力手段により上記文
書画像データ中の表部分について表の一部の領域が選択
された際に、上記表部分のレイアウト情報を用いて、上
記選択された表の一部の領域のビットマップ画像を生成
する処理手段を具備してなる表の編集処理機能をもつこ
とにより、文書画像データ内の表の一部領域のみを容易
に選択可能として、レイアウト認識技術を適用した表の
更新、新規作成等を容易に行うこができる。

【０１３２】また、本発明によれば、文書が記録された
紙面上を走査して得た文書画像データのレイアウトを解
析するレイアウト解析部と、上記レイアウト解析部より
得られるレイアウト情報と上記文書画像データから表示
用データを生成する表示管理部と、上記表示管理部で生
成された表示用データを表示する表示部と、ユーザ入力
の受け付けを行う操作入力部とを備えてなるレイアウト
画像編集装置に於いて、上記操作入力手段により上記文
書画像データ中の表部分について表の一部の領域が選択
された際に、上記表部分のレイアウト情報を用いて、上
記選択された表の一部の領域とその領域の各欄に対応す
る見出し欄とでなるビットマップ画像を生成する処理手
段を具備してなる表の編集処理機能をもつことにより、
文書画像データ内の表の一部領域のみ選択した場合に、
選択した欄に付随する見出し欄も合わせて選択可能とし
て、レイアウト認識技術を適用した表の更新、新規作成
等を容易に行うこができる。

【０１３３】また、本発明によれば、文書が記録された
紙面上を走査して得た文書画像データのレイアウトを解
析するレイアウト解析手段を備えた装置に適用されるレ
イアウト画像編集方法に於いて、紙面上を走査して得た
文書画像から、表部分のサイズ変更が指示されたとき、
上記表部分のレイアウト解析結果の情報を用いて、上記
サイズ変更の指示内容に従い、上記指示された表部分の
行間、列間、文字間距離を表の罫線部分でなるフレーム
イメージを保持した状態で調整し、上記表部分のビット
マップ画像のサイズを変更する表の編集処理機能をもつ
ことにより、文字画像データの表部分のサイズ変更を行
なう場合に、行間、列間、文字間距離を調整しながら文
字画像のサイズを拡大縮小することで、ビットマップ画
像からなる文字画像の品質低下を抑え、表の原画像から
抽出した罫線部の画像を指定サイズに応じて継ぎ足して
延長したり、または不要部分を除去することによって、
原画像のままの罫線画像の画質を保つことができる。

【０１３４】また、本発明によれば、文書が記録された
紙面上を走査して得た文書画像データのレイアウトを解
析するレイアウト解析手段を備えた装置に適用されるレ
イアウト画像編集方法に於いて、紙面上を走査して得た
文書画像から、表部分のサイズ変更が指示されたとき、
上記指示された表部分のレイアウト解析結果の情報を用
い、上記指示された変更サイズをもとに、上記指示され
た表部分の各罫線と罫線枠で囲まれる欄の内容とを相互
に連携させ、最適ビットマップイメージで上記表部分の
画像サイズを変更する表の編集処理機能をもつことによ
り、ユーザにかかる操作負担を著しく軽減して、文書中
のもとの表に忠実なビットマップイメージでユーザの指
示に従う編集処理が可能となる。

【図面の簡単な説明】

【図１】本発明の実施形態によるレイアウト画像編集装
置の構成を示すブロック図。

【図２】上記実施形態に於いて、文書の原画像（文書画
像データ）とレイアウト情報とをもとに生成した編集対
象となる文書画像の表示例を示す図。

【図３】上記実施形態に於けるレイアウト情報の一例を
示す図。

【図４】上記実施形態に於ける動作を説明するための表
画像の一例を示す図。

【図５】上記実施形態に於ける表の編集処理手順を示す
フローチャート。

【図６】上記実施形態に於ける表の編集処理手順を示す
フローチャート。

【図７】上記実施形態に於ける表の編集処理手順を示す
フローチャート。

【図８】上記実施形態に於ける動作を説明するための表
内の無効として扱う欄の表記例を示す図。

【図９】上記実施形態に於ける表罫線のレイアウト情報
の一例を示す図。

【図１０】上記実施形態に於ける表の罫線処理手順を示
すフローチャート。

【図１１】上記実施形態に於ける表罫線の線種の一例を
示す図。

【図１２】上記実施形態に於ける表の罫線移動処理例を
示す図。

【図１３】上記実施形態に於ける表の複数欄の切り出し
結果の例を示す図。

【符号の説明】

１１…画像入力部 １２…画像記録部 １３…レイアウト解析部 １４…表示管理部 １５…表示部 １６…操作入力部

フロントページの続き Ｆターム(参考） 5B009 NA01 NA14 NC05 PA05 PB03 5B050 BA16 EA12 EA13 5B057 AA11 BA02 CA12 CA16 CB12 CB16 CD05 CE08 CE09 CF05 5C076 AA02 AA17 AA21 AA22 BA06 CA02 CB02

Claims (9)

【特許請求の範囲】
1. 【請求項１】 紙面上を走査して得た文書画像データの
   レイアウト解析を行うレイアウト解析手段を有してなる
   レイアウト画像編集装置に於いて、前記文書画像データ
   に含まれる表部分のサイズ変更が指示された際に、前記
   表部分のレイアウト解析結果の情報を用いて、前記指示
   された変更サイズに基づき、表を構成する罫線と当該罫
   線で囲まれる欄内の情報とを相互に連携させて画像のサ
   イズ変更処理を実行する処理手段を具備してなることを
   特徴とするレイアウト画像編集装置。
2. 【請求項２】 紙面上を走査して得た文書画像データの
   レイアウトを解析するレイアウト解析手段と、前記レイ
   アウト解析手段より得られるレイアウト情報と前記文書
   画像データから表示用データを生成して表示する表示手
   段と、ユーザ入力の受け付けを行う操作入力手段と、前
   記操作入力手段により前記文書画像データ中の表部分の
   サイズ変更が指示された際に、前記表部分のレイアウト
   情報を用いて、前記指示内容に従い、前記表部分の行
   間、列間、文字間距離を調整し、前記表部分のビットマ
   ップ画像を拡大縮小処理する処理手段とを具備してなる
   ことを特徴とするレイアウト画像編集装置。
3. 【請求項３】 紙面上を走査して得た文書画像データの
   レイアウトを解析するレイアウト解析手段と、前記レイ
   アウト解析手段より得られるレイアウト情報と前記文書
   画像データから表示用データを生成して表示する表示手
   段と、ユーザ入力の受け付けを行う操作入力手段と、前
   記操作入力手段により前記文書画像データ中の表部分の
   罫線移動が指示された際に、前記表部分のレイアウト情
   報を用いて、前記指示内容に従い、前記表部分のビット
   マップ画像を再構成する処理手段とを具備してなること
   を特徴とするレイアウト画像編集装置。
4. 【請求項４】 紙面上を走査して得た文書画像データの
   レイアウトを解析するレイアウト解析手段と、前記レイ
   アウト解析手段より得られるレイアウト情報と前記文書
   画像データから表示用データを生成して表示する表示手
   段と、ユーザ入力の受け付けを行う操作入力手段と、前
   記操作入力手段により前記文書画像データ中の表部分に
   ついて欄内の内容の変更が指示された際に、前記表部分
   のレイアウト情報を用いて、前記指示に従い変更された
   欄内の内容をその周囲の欄の内容配置に従い配置する処
   理手段とを具備してなることを特徴とするレイアウト画
   像編集装置。
5. 【請求項５】 紙面上を走査して得た文書画像データの
   レイアウトを解析するレイアウト解析手段と、前記レイ
   アウト解析手段より得られるレイアウト情報と前記文書
   画像データから表示用データを生成して表示する表示手
   段と、ユーザ入力の受け付けを行う操作入力手段と、前
   記操作入力手段により前記文書画像データ中の表部分に
   ついて欄内の内容の変更が指示された際に、前記表部分
   のレイアウト情報を用いて、前記指示に従い変更された
   欄内の内容のサイズに伴い欄を構成する罫線を再配置す
   る処理手段とを具備してなることを特徴とするレイアウ
   ト画像編集装置。
6. 【請求項６】 紙面上を走査して得た文書画像データの
   レイアウトを解析するレイアウト解析手段と、前記レイ
   アウト解析手段より得られるレイアウト情報と前記文書
   画像データから表示用データを生成して表示する表示手
   段と、ユーザ入力の受け付けを行う操作入力手段と、前
   記操作入力手段により前記文書画像データ中の表部分に
   ついて表の一部の領域が選択された際に、前記表部分の
   レイアウト情報を用いて、前記選択された表の一部の領
   域のビットマップ画像を生成する処理手段とを具備して
   なることを特徴とするレイアウト画像編集装置。
7. 【請求項７】 紙面上を走査して得た文書画像データの
   レイアウトを解析するレイアウト解析手段と、前記レイ
   アウト解析手段より得られるレイアウト情報と前記文書
   画像データから表示用データを生成して表示する表示手
   段と、ユーザ入力の受け付けを行う操作入力手段と、前
   記操作入力手段により前記文書画像データ中の表部分に
   ついて表の一部の領域が選択された際に、前記表部分の
   レイアウト情報を用いて、前記選択された表の一部の領
   域とその領域の各欄に対応する見出し欄とでなるビット
   マップ画像を生成する処理手段とを具備してなることを
   特徴とするレイアウト画像編集装置。
8. 【請求項８】 紙面上を走査して得た文書画像から、表
   部分のサイズ変更が指示されたとき、前記表部分のレイ
   アウト解析結果の情報を用いて、前記サイズ変更の指示
   内容に従い、前記指示された表部分の行間、列間、文字
   間距離を表の罫線部分でなる表内部の画像を保持した状
   態で調整し、前記表部分のビットマップ画像のサイズを
   変更することを特徴とするレイアウト画像編集方法。
9. 【請求項９】 紙面上を走査して得た文書画像から、表
   部分のサイズ変更が指示されたとき、前記指示された表
   部分のレイアウト解析結果の情報を用い、前記指示され
   た変更サイズをもとに、前記指示された表部分の各罫線
   と罫線枠で囲まれる欄の内容とを相互に連携させ、最適
   ビットマップイメージで前記表部分の画像サイズを変更
   することを特徴とするレイアウト画像編集方法。