JP2022128427A - テーブル生成方法及びシステム - Google Patents

テーブル生成方法及びシステム Download PDF

Info

Publication number
JP2022128427A
JP2022128427A JP2022023364A JP2022023364A JP2022128427A JP 2022128427 A JP2022128427 A JP 2022128427A JP 2022023364 A JP2022023364 A JP 2022023364A JP 2022023364 A JP2022023364 A JP 2022023364A JP 2022128427 A JP2022128427 A JP 2022128427A
Authority
JP
Japan
Prior art keywords
image
cells
function
category
guide information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022023364A
Other languages
English (en)
Inventor
フンウン シム
Heungwoon Shim
デヒョン ナム
Dae Hyun Nam
ジェフン ソ
Jae Heung Surh
ヨンミン ペク
Yong-Min Baek
ヒョソン ワン
Hyosun Wang
スンボム チェー
Seung Beom Choi
ユンファン キム
Yun Hwan Kim
ヨンハン キム
Youn Han Kim
ムンビン イム
Moon Bin Yim
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Z Intermediate Global Corp
Naver Corp
Original Assignee
Line Corp
Naver Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Line Corp, Naver Corp filed Critical Line Corp
Publication of JP2022128427A publication Critical patent/JP2022128427A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/177—Editing, e.g. inserting or deleting of tables; using ruled lines
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/174—Form filling; Merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)
  • Document Processing Apparatus (AREA)

Abstract

【課題】テーブル生成アプリケーションを用いてテーブルを生成する方法及びシステムを提供する。【解決手段】テーブル生成アプリケーションのテーブル生成方法は、テーブル生成アプリケーションで提供されるタスク領域３００に、テーブル１１００、１２００を含むイメージ１０００を出力するステップと、タスク領域３００の一領域に含まれる複数の機能アイコン３２１～３２６のうちのいずれか１つの機能アイコンの選択を受け付けるステップと、いずれか１つの機能アイコンが選択された後、イメージ１０００に加えられる予め設定された方式の入力に基づいて、当該機能アイコンにマッチングされたテーブル構成要素に該当するガイド情報を出力するステップと、ガイド情報を用いて、イメージ１０００に含まれるテーブル１１００、１２００に対応する構造を有するテーブルを生成するステップとを含む。【選択図】図３Ａ

Description

本発明は、テーブル生成アプリケーションを用いてテーブルを生成する方法及びシステムに関する。
人工知能の辞書的意味は、人間の学習能力、推論能力、知覚能力、自然言語理解能力などをコンピュータプログラムで実現した技術である。このような人工知能は、マシンラーニングに人間の脳を模倣したニューラルネットワークを加えたディープラーニングにより飛躍的に発展してきた。
ディープラーニング（deep learning）とは、コンピュータが人間のように判断して学習することができるようにし、それにより物事やデータを群集化又は分類する技術をいい、近年、テキストデータだけでなく画像データまで分析できるようになり、非常に多様な産業分野に積極的に活用されている。
このような人工知能の発達により、オフィス・オートメーション（office automation）分野においても様々な自動化が進んでいる。特に、オフィス・オートメーション分野においては、人工知能を活用した画像データ分析技術に基づいて、紙（ペーパ）に印刷されたコンテンツをデータ化するために多くの努力をしている。その一環として、オフィス・オートメーション分野においては、紙文書をイメージ化し、イメージに含まれるコンテンツを分析するイメージ分析技術（又は、画像データ分析技術）により、文書に含まれるコンテンツをデータ化しており、その場合、文書に含まれるコンテンツの特性によってイメージを分析する技術が必要である。
例えば、テーブル（表）を含む文書をデータ化する場合、テーブルの形式、テーブルに含まれるテキストの内容、及びテーブルに含まれるテキストの位置、などのように、テーブルに関連する様々な要素についての正確な分析が必要である。
よって、イメージに含まれるテーブルを再現するために、イメージに含まれるデータを分析する様々なアプリケーションが開発されている。例えば、「ＲＯＳＳＵＭ（https://rossum.ai/）」アプリケーションでは、イメージに含まれるテーブルのテキストデータを抽出及びラベル付けする機能を提供している。
しかし、これまで開発されたアプリケーションは、イメージに含まれるテーブルの構造及びテキストデータを抽出するレベルなので、イメージに含まれるテーブルの構造及びテキストデータ間の関係性まで正確に再現できるアプリケーションの開発が求められ続けている。
本発明は、イメージに含まれるテーブルと同一の構成を有するテーブルを生成できるテーブル生成方法及びシステムを提供するためのものである。
また、本発明は、イメージに現れない非視覚的特性まで考慮して、イメージに含まれるテーブルと同一の構成を有するテーブルをより容易かつ直観的に生成できるユーザ環境を提供するためのものである。
さらに、本発明は、テーブルに含まれるデータ間の関係性を提供できるテーブル生成方法及びシステムを提供するためのものである。
上記課題を解決するために、本発明によるテーブル生成アプリケーションのテーブル生成方法は、前記アプリケーションで提供されるタスク領域にテーブルを含むイメージを出力するステップと、前記タスク領域の一領域に含まれる複数の機能アイコンのうちのいずれか１つの機能アイコンの選択を受け付けるステップと、前記いずれか１つの機能アイコンが選択された後、前記イメージに加えられる予め設定された方式の入力に基づいて、前記機能アイコンにマッチングされたテーブル構成要素に該当するガイド情報を出力するステップと、前記ガイド情報を用いて、前記イメージに含まれるテーブルに対応する構造を有するテーブルを生成するステップと、を含むようにしてもよい。
また、本発明による電子機器のディスプレイ部に出力されるタスク領域でテーブルを生成するシステムの制御部は、前記タスク領域にテーブルを含むイメージを出力し、ユーザから、前記タスク領域の一領域に含まれる複数の機能アイコンのうちのいずれか１つの機能アイコンの選択を受け付け、前記いずれか１つの機能アイコンが選択された後、前記イメージに加えられる予め設定された方式の入力に基づいて、前記機能アイコンにマッチングされたテーブル構成要素に該当するガイド情報を出力し、前記ガイド情報を用いて、前記イメージに含まれるテーブルに対応する構造を有するテーブルを生成する、ようにしてもよい。
さらに、本発明による電子機器で１つ以上のプロセスにより実施され、コンピュータ可読記録媒体に格納可能なコンピュータプログラムは、前記アプリケーションで提供されるタスク領域にテーブルを含むイメージを出力するステップと、前記タスク領域の一領域に含まれる複数の機能アイコンのうちのいずれか１つの機能アイコンの選択を受け付けるステップと、前記いずれか１つの機能アイコンが選択された後、前記イメージに加えられる予め設定された方式の入力に基づいて、前記機能アイコンにマッチングされたテーブル構成要素に該当するガイド情報を出力するステップと、前記ガイド情報を用いて、前記イメージに含まれるテーブルに対応する構造を有するテーブルを生成するステップと、を実行させるコマンドを含むようにしてもよい。
前述したように、本発明によるテーブル生成方法及びシステムは、ユーザ入力に基づいてイメージに含まれるテーブルの構成要素を抽出できるユーザ環境を提供することができる。よって、本発明によるテーブル生成方法及びシステムは、テーブルに含まれるテキストデータだけでなく、テーブルの構造を構成する構成要素まで抽出することができ、その結果、イメージに含まれるテーブルと同一の構造及び同一のデータを有するテーブルを生成することができる。
また、本発明によるテーブル生成方法及びシステムは、イメージに含まれるテーブルの構成要素により定義されるセルを特定し、ユーザ入力に基づいて、セル間の関係性を付与することにより、各セルに含まれるデータを有機的に分析できるユーザ環境を提供することもできる。
よって、本発明によるテーブル生成アプリケーションによるテーブル生成方法は、イメージに含まれるテーブルの構成要素を抽出する機能及びテーブルに含まれるデータ間の関係性を付与する機能を提供することにより、イメージに含まれるテーブルの視覚的な特性を再現すると共に、データ間の関係的な特性まで再現することができる。
本発明によるテーブル生成システムを説明するための概念図である。 テーブルの構成要素を説明するための概念図である。 本発明によるテーブル生成アプリケーションを説明するための概念図である。 本発明によるテーブル生成アプリケーションを説明するための概念図である。 本発明によるテーブル生成方法を説明するためのフローチャートである。 前記アプリケーションで提供されるユーザ環境でテーブルを生成する方法を説明するための概念図である。 前記アプリケーションで提供されるユーザ環境でテーブルを生成する方法を説明するための概念図である。 前記アプリケーションで提供されるユーザ環境でテーブルを生成する方法を説明するための概念図である。 前記アプリケーションで提供されるユーザ環境でテーブルを生成する方法を説明するための概念図である。 前記アプリケーションで提供されるユーザ環境でテーブルを生成する方法を説明するための概念図である。 前記アプリケーションで提供されるユーザ環境でテーブルを生成する方法を説明するための概念図である。 前記アプリケーションで提供されるユーザ環境でテーブルを生成する方法を説明するための概念図である。 前記アプリケーションで提供されるユーザ環境でテーブルを生成する方法を説明するための概念図である。 前記アプリケーションで提供されるユーザ環境でテーブルを生成する方法を説明するための概念図である。 前記アプリケーションで提供されるユーザ環境でテーブルを生成する方法を説明するための概念図である。 前記アプリケーションで提供されるユーザ環境でテーブルを生成する方法を説明するための概念図である。
以下、添付図面を参照して本発明の実施形態について詳細に説明するが、図面番号に関係なく、同一又は類似の構成要素には同一の符号を付し、それについての重複する説明は省略する。以下の説明で用いられる構成要素の接尾辞である「モジュール」や「部」は、明細書の作成を容易にするために付与又は混用されるものであり、それ自体が有意性や有用性を有するものではない。また、本発明の実施形態について説明するにあたり、関連する公知技術についての具体的な説明が本発明の実施形態の要旨を不明確にすると判断される場合は、その詳細な説明を省略する。さらに、添付図面は本発明の実施形態の理解を助けるためのものにすぎず、添付図面により本発明の技術的思想が限定されるものではなく、本発明の思想及び技術範囲に含まれるあらゆる変更、均等物乃至代替物を含むものと理解すべきである。
「第１」、「第２」などのように序数を含む用語は、様々な構成要素を説明するために用いられるが、上記構成要素は、上記用語により限定されるものではない。上記用語は、１つの構成要素を他の構成要素と区別する目的でのみ用いられる。
ある構成要素が他の構成要素に「連結」又は「接続」されていると言及された場合は、他の構成要素に直接連結又は接続されていてもよく、中間にさらに他の構成要素が存在してもよいものと解すべきである。それに対して、ある構成要素が他の構成要素に「直接連結」又は「直接接続」されていると言及された場合は、中間にさらに他の構成要素が存在しないものと解すべきである。
単数の表現には、特に断らない限り複数の表現が含まれる。
本明細書において、「含む」や「有する」などの用語は、本明細書に記載された特徴、数字、段階、動作、構成要素、部品、又はそれらの組み合わせが存在することを指定しようとするものであり、１つ又はそれ以上の他の特徴、数字、段階、動作、構成要素、部品、又はそれらの組み合わせの存在や付加可能性を予め排除するものではないと理解すべきである。
前述したように、人工知能が発達するにつれて様々な形態でオフィス・オートメーションが行われており、業務効率のために、紙文書に含まれるテーブル（表）を、紙文書に含まれるテーブルの形式のままデジタル化（データ化）するニーズがますます高まっている。
例えば、様々な種類の領収証（レシート）などの文書はテーブルを含み、保険会社や病院などでは、大量の紙文書に含まれるテーブルをデジタル化されたデータとして処理して電算化する必要がある。
よって、本発明は、イメージに含まれるテーブルと同一の構成を有するテーブルを生成できるテーブル生成アプリケーションを提供するものであり、特に、そのテーブル生成アプリケーションによるテーブル生成方法及びテーブル生成アプリケーションを構成するテーブル生成システムを提供するものである。
本発明に従った、テーブル生成アプリケーションによるテーブル生成方法及びシステムは、イメージに含まれるテーブルの構成要素を抽出する機能及びテーブルに含まれるデータ間の関係性を付与する機能を提供することにより、イメージに含まれるテーブルの視覚的な特性を再現すると共に、データ間の関係的な特性まで再現することができる。
以下、添付図面を参照して、テーブル生成アプリケーションを用いて紙文書に含まれるテーブルと同一の構成を有するテーブルを生成する方法及びシステムについて具体的に説明する。
図１は、本発明によるテーブル生成システムを説明するための概念図であり、図２は、テーブルの構成要素を説明するための概念図である。また、図３Ａ及び図３Ｂは、本発明によるテーブル生成アプリケーションを説明するための概念図であり、図４は、本発明によるテーブル生成方法を説明するためのフローチャートである。さらに、図５～図１５は、前記アプリケーションで提供されるユーザ環境でテーブルを生成する方法を説明するための概念図である。
本発明によるテーブル生成アプリケーションは、図１に示すイメージ１０００に含まれるテーブル１１００、１２００と同一又は対応する構造を有するテーブルを生成できるユーザ環境を提供することができる。
つまり、本発明によるテーブル生成システム１００は、アプリケーション又はソフトウェアの形で実現することができる。本発明によるテーブル生成システム１００のソフトウェア的な実現によれば、本明細書で説明されるプロシージャや機能などの実施形態は、別途のソフトウェアモジュールで実現することができる。ソフトウェアモジュールのそれぞれは、本明細書で説明される１つ以上の機能及び動作を実行することができる。
このようなテーブル生成アプリケーションは、図１に示すテーブル生成システム１００により実現される。以下、テーブル生成システム１００の構成について、より具体的に説明する。
本発明によるテーブル生成システム１００は、イメージ１０００からテーブル１１００、１２００を構成するテーブル構成要素（又は、構成成分）を認識し、認識された構成要素に基づいて、イメージ１０００に含まれるテーブル１１００、１２００と同一のテーブルを生成することができる。
このようなテーブル生成システム１００は、イメージ１０００に含まれるテーブル１１００、１２００の数に関係なく、イメージ１０００に含まれるテーブル１１００、１２００と同一又は対応する構成要素を有するテーブルを生成することができる。
ここで、イメージ１０００は、紙文書のスキャンにより取得されたイメージ、又はその他の様々な方法により取得されたイメージである。
なお、本発明によるテーブル生成システム１００により生成されたテーブルは、様々な名称で呼ぶことができ、例えば、再現テーブルや復元テーブルなどという。
本発明における「テーブル（table）」は、表ともいい、ある内容を所定の形式又は手順で示すものを意味する。図２を参照してテーブルの構成要素について説明すると、テーブル２００は、少なくとも１つのセル（又は、空間、領域）２１０を含んでよい。すなわち、テーブル２００は、少なくとも１つのセル２１０を含み、セル２１０内に情報を含むように構成される。
ここで、セル２１０とは、テーブル２００の構成要素により区画される空間を意味する。テーブル２００の構成要素は、外枠要素２０１、行（row）要素２０２及び列（column）要素２０３のうち少なくとも１つを含む。
外枠要素２０１は、テーブル２００の大きさ及び形状を決定する要素であり、必ずしも視覚的に示す必要はない。
行要素２０２は、外枠要素２０１内に含まれる横ライン（又は、横線分、水平ライン）であり、テーブル２００の構成に応じて、テーブル２００内には１本又はそれ以上の横ラインが備えられる。行要素２０２は、外枠要素２０１の少なくとも一部（横ラインに該当する枠）を含んでもよい。
列要素２０３は、外枠要素２０１内に含まれる縦ライン（又は、縦線分、垂直ライン）であり、テーブル２００の構成に応じて、テーブル２００内には１本又はそれ以上の縦ラインが備えられる。列要素２０３は、外枠要素２０１の少なくとも一部（縦ラインに該当する枠）を含んでもよい。
テーブル２００に含まれるセルの数、大きさ、位置などは、横ライン及び縦ラインの数や配置関係などに基づいて、様々に変形することができ、セルの結合によっても様々に変形することができる。
テーブル２００及びテーブル２００に含まれるセル２１０は、四角形（square）の形状を有する。
テーブル２００に含まれるセル２１０は、少なくとも４本のラインにより規定されるようにしてよい。すなわち、テーブル２００に含まれるセル２１０は、４本のライン（ａ，ｂ，ｃ，ｄ）で囲まれた四角形からなるようにしてよい。このように、１つの四角形状のセル２１０を形成するためには、少なくとも４本のラインが必要であり、２本の横ライン（ｂ，ｄ）及び２本の縦ライン（ａ，ｃ）からなるようにしてもよい。
なお、「ライン」という用語は、「線分」又は「辺（エッジ）」ともいう。
このように、四角形状のセル２１０は、２本の横ライン（ｂ，ｄ）及び２本の縦ライン（ａ，ｃ）の少なくとも一部が交差して形成されてもよい。
よって、テーブルは、少なくとも４本のラインを含み、横ラインの数、縦ラインの数、ラインの間隔、ラインの配列位置に応じて、セルの数、セルの大きさ、セルの位置などが規定される。
また、本発明におけるテーブルを構成する構成要素は、テーブルを構成するライン（横ライン及び縦ライン）と、テーブルを構成するラインが交差して形成されるコーナー（又は、角、頂点）（ｅ，ｆ，ｇ，ｈ）とを含んでもよい。
全てのテーブルが、少なくとも４つのコーナーを有し、それはテーブルの最外枠に含まれるコーナーであり得る。また、テーブルに含まれるコーナーの数は、テーブルに含まれるセルの数に応じて異なる。
一方、本発明によるテーブル生成システム１００は、図１に示すように、受信部１１０、保存部１２０、ＯＣＲ（Optical Character Reader）部１３０、及び制御部１４０の少なくとも１つを含む。
まず、受信部１１０は、テーブル１１００が含まれるイメージ１０００を受信する手段であって、通信部、スキャン部、及び入力部のうち少なくとも１つを含むようにしてもよく、その他のイメージ１０００を受信する手段からなるようにしてもよい。
テーブル生成システム１００は、受信部１１０を介して受信したイメージ１０００に含まれるテーブル１１００、１２００に基づいて、分析し、イメージ１０００に含まれるテーブル１１００、１２００と同一のテーブルを生成することができる。
次に、保存部１２０は、本発明による様々な情報を保存するようにしてもよい。保存部１２０は、その種類が非常に多様であり、少なくとも一部は、外部サーバ１５０（クラウドサバー１５１及びデータベース（ＤＢ）１５２の少なくとも一方）であってもよい。すなわち、保存部１２０は、本発明に関連する情報が保存される空間であればよく、物理的な空間の制約はない。
保存部１２０には、ｉ）テーブル１１００、１２００を含むイメージ１０００及びそれに関連するデータ、ｉｉ）テーブル１１００、１２００を再構成するために特定された構成要素（外枠、ライン、コーナーなど）及びそれに関連するデータ、ｉｉｉ）テーブル１１００、１２００に含まれるコンテンツ（例えば、テキスト、イメージなど）データの少なくとも１つが保存される。
次に、ＯＣＲ部１３０は、イメージ１０００に含まれるコンテンツを認識する手段であって、様々なコンテンツ認識アルゴリズムの少なくとも１つによりイメージ１０００に含まれるコンテンツを認識することができる。ＯＣＲ部１３０は、人工知能に基づくアルゴリズムを用いて、コンテンツを認識することができる。ここで、コンテンツには、テキスト（文字）が含まれてもよい。
ＯＣＲ部１３０は、イメージに含まれるテキスト及びテキストの位置情報を抽出することができる。ここで、テキストの位置情報には、受信部１１０を介して入力されたイメージ１０００内でのテキストの位置、又は、テーブル１１００、１２００内でのテキストの位置に関する情報が含まれてもよい。
次に、制御部１４０は、本発明に関連するテーブル生成システム１００の全般的な動作を制御する。制御部１４０は、人工知能アルゴリズムを処理するプロセッサ（又は、人工知能プロセッサ）を含んでもよい。制御部１４０は、ディープラーニングアルゴリズムに基づいて、イメージ１０００からテーブル１１００、１２００を認識し、イメージ１０００に含まれるテーブル１１００、１２００と同一のセル構成を有するテーブルを生成することができる。
また、制御部１４０は、図３Ａ及び図３Ｂに示すように、テーブルを生成するためのタスク領域３００を提供し、タスク領域３００は、テーブルを生成するための「ユーザ環境」又は「ユーザインタフェース」ともいう。
このようなタスク領域３００は、電子機器のディスプレイ部に出力（又は、提供）することができる。さらに、制御部１４０は、電子機器に備えられるか、又は、電子機器と連動するユーザ入力部（例えば、タッチスクリーン、マウスなど）を介して受信したユーザ入力に基づいて、テーブルを生成することができる。
なお、本発明において、タスク領域３００が出力される電子機器の種類には、特に制限がなく、本発明によるテーブル生成アプリケーションを起動できればよい。例えば、電子機器には、スマートフォン、携帯電話、タブレットＰＣ、コンピュータ、ノートブックコンピュータ、デジタル放送用端末、ＰＤＡ（Personal Digital Assistants）、ＰＭＰ（Portable Multimedia Player）、スマートミラー（smart mirror）、及びスマートテレビ（smart TV）、の少なくとも１つが含まれる。
本発明において、電子機器又は電子機器に備えられるディスプレイ部、ユーザ入力部に対しては符号を付さない。しかし、本発明において、タスク領域３００が電子機器のディスプレイ部に出力され、ユーザ入力が電子機器に備えられるか、又は、電子機器と連動するユーザ入力部を介して受信されることは、当業者にとって自明である。
一方、本発明によるテーブル生成方法及びシステムは、テーブル生成アプリケーションで提供されるユーザ環境（又は、ユーザインタフェース）に基づいて、テーブルを生成することができる。すなわち、テーブル生成アプリケーションは、イメージ１０００に含まれるテーブル１１００、１２００と同一又は対応する構造を有するテーブルを生成できるユーザインタフェースを提供することができる。このようなユーザインタフェースは、「テーブル生成ツール」ともいう。
テーブル生成アプリケーションは、図３Ａ及び図３Ｂに示すように、電子機器を介してユーザから入力されるユーザ入力に基づいて、テーブル生成タスクを実行できるタスク領域３００を提供することができる。
タスク領域３００は、複数の領域に分けられ、テーブルを生成するための様々な情報が出力されるようにしてもよい。
タスク領域３００に含まれる領域及び情報は、ユーザの選択や現在のタスクの状態によって消えるか、又は、変更される。
まず、タスク領域３００には、ヘッダ領域（header）３１０が含まれてもよい。ヘッダ領域３１０は、メニュー領域などともいい、少なくとも１つの機能アイコンが含まれる。ヘッダ領域３１０には、ユーザアカウントにログインするためのログイン機能が割り当てられた機能アイコン、及び、複数のテーブル生成タスク過程（又は、タスク）にそれぞれマッチングされた機能アイコンの少なくとも１つが含まれてもよい。
ここで、複数のテーブル生成タスク過程（又は、タスク）は、ｉ）イメージ１０００に含まれるテーブル１１００、１２００の構成要素を特定するタスク過程、ｉｉ）イメージ１０００に含まれるテーブル１１００、１２００の構成要素の特定を検証する過程、及び、ｉｉｉ）イメージ１０００に含まれるテーブル１１００、１２００に含まれるセル間の関係を特定する過程、を含んでもよい。
ヘッダ領域３１０には、ｉ）イメージ１０００に含まれるテーブル１１００、１２００の構成要素を特定するタスク過程に対応する機能アイコン（図３Ａのヘッダ領域３１０における「Ｔａｂｌｅ」アイコン）、ｉｉ）イメージ１０００に含まれるテーブル１１００、１２００の構成要素の特定を検証する過程に対応する機能アイコン（図３Ａのヘッダ領域３１０における「Ｔａｂｌｅ Ｉｎｓｐｅｃｔｉｏｎ」アイコン）、及びｉｉｉ）イメージ１０００に含まれるテーブル１１００、１２００に含まれるセル間の関係を特定する過程に対応する機能アイコン（図３Ａのヘッダ領域３１０における「Ｌａｂｅｌｉｎｇ」アイコン）の少なくとも１つが含まれてもよい。
ユーザは、ヘッダ領域３１０で異なるタスク過程に対応する機能アイコンのいずれか１つを選択し、選択された機能アイコンに対応するタスク過程を実行することができる。
次に、タスク領域３００には、テーブルの構成要素を特定するか、又は、テーブルに含まれるデータ間の関係を特定する機能が割り当てられた機能アイコンが含まれるツールバー領域（toolbar）３２０、３７０が含まれてもよい。
ツールバー領域３２０、３７０に含まれる機能アイコンの種類は、現在のタスク過程が前述した複数のテーブル生成タスク過程のうちのどの過程であるかによって異なる。
一例として、図３Ａに示すように、現在のタスク過程が、イメージ１０００に含まれるテーブル１１００、１２００の構成要素を特定するタスク過程である場合、ツールバー領域３２０には、テーブル１１００、１２００の構成要素（例えば、外枠要素、行要素、列要素など）を特定する機能がマッチングされた少なくとも１つの機能アイコン３２１、３２２、３２３、３２４、３２５、３２６が含まれてもよい。
他の例として、図３Ｂに示すように、現在のタスク過程が、イメージ１０００に含まれるテーブル１１００、１２００に含まれるセル間の関係を特定するタスク過程である場合、ツールバー領域３７０には、テーブル１１００、１２００に含まれるセル間の関係を特定する機能がマッチングされた少なくとも１つの機能アイコン３７１、３７２、３７３が含まれてもよい。
本発明における「セル間の関係を特定する」ことは、テーブルに含まれる複数のセルのうち、互いに関連するデータが含まれる複数のセルを特定（又は、グルーピング）する過程であるといえる。
ここで、互いに関連するデータが含まれる複数のセルは、少なくとも１つがカテゴリーセルであり、他の少なくとも１つがデータセルであってもよい。
ここで、カテゴリーは、同一又は類似の性質や意味を基準に分けられるものであり、範疇ともいう。同じカテゴリーに属するデータは、同じ意味、同じ種類、又は、同じ所属のデータであってもよい。すなわち、データセルに含まれるデータは、カテゴリーセルに対応するカテゴリーに該当するデータであってもよい。
この場合、データセルに含まれるテキストの意味は、カテゴリーセルに含まれるテキストの意味の下位概念であってもよい。
カテゴリーセルには、カテゴリー名又はカテゴリー名に関連するデータが含まれ、データセルには、カテゴリーセルに含まれるカテゴリー名に属するデータが含まれてもよい。ここで、カテゴリー名は、範疇名ともいえる。
一方、ツールバー領域３２０に含まれる機能アイコンの変更は、前述したヘッダ領域３１０で、タスク過程に対応する機能アイコンのうちどの機能アイコンが選択されるかに基づいて、行われるようにしてもよい。
例えば、ヘッダ領域３１０で、イメージ１０００に含まれるテーブル１１００、１２００の構成要素を特定するタスク過程に対応する機能アイコン（図３Ａのヘッダ領域３１０における「Ｔａｂｌｅ」アイコン）が選択されると、ツールバー領域３２０には、テーブル１１００、１２００の構成要素（例えば、外枠要素、行要素、列要素など）を特定する機能がマッチングされた少なくとも１つの機能アイコン３２１、３２２、３２３、３２４、３２５、３２６が出力されるようにしてもよい。
また、ヘッダ領域３１０で、イメージ１０００に含まれるテーブル１１００、１２００に含まれるセル間の関係を特定する過程に対応する機能アイコン（図３Ｂのヘッダ領域３１０における「Ｌａｂｅｌｉｎｇ」アイコン）が選択されると、ツールバー領域３７０には、テーブル１１００、１２００に含まれるセル間の関係を特定する機能がマッチングされた少なくとも１つの機能アイコン３７１、３７２、３７３が出力されるようにしてもよい。
次に、タスク領域３００には、図３Ａ及び図３Ｂに示すように、イメージ１０００の大きさ、方向などを制御するための少なくとも１つの機能アイコンが含まれる機能アイコン領域３３０が、さらに含まれてもよい。
次に、タスク領域３００には、図３Ａ及び図３Ｂに示すように、イメージ１０００が含まれ、タスク過程の結果物（又は、作業物）が視覚的に提供されるエディタ領域（editor pane）３４０が、さらに含まれてもよい。
次に、タスク領域３００には、図３Ａ及び図３Ｂに示すように、タスク過程中に特定されるテーブル１１００、１２００に関する情報、又は、テーブル１１００、１２００から抽出されたコンテンツ（又はテキスト）に関する情報が出力される属性領域（property pane）３５０が、さらに含まれてもよい。
以上で、タスク領域３００に含まれる領域をヘッダ領域３１０、ツールバー領域３２０、３７０、エディタ領域３４０、属性領域３５０などの名称を用いて、便宜上、説明したが、それらは一例にすぎず、タスク領域３００に含まれる領域の名称は、様々に変更することができ、「第１領域」、「第２領域」などのように一般的な名称にしてもよいことは言うまでもない。
以下に、前述したタスク領域３００の説明を参照して、テーブル生成アプリケーションでテーブルを生成する方法について、より具体的に説明する。まず、フローチャートを参照して、テーブルの構成要素を特定する方法について説明する。
本発明によるテーブル生成方法においては、テーブル１１００、１２００を含むイメージ１０００（図１参照）を出力する過程が行われる（Ｓ４１０）。
前述したように、テーブル１１００、１２００を含むイメージ１０００は、様々なルートで受信することができる。
より具体的には、イメージ１０００は、図３Ａ及び図３Ｂに示すように、テーブル生成アプリケーションで提供されるタスク領域３００に出力することができる。
特に、イメージ１０００は、タスク領域３００のエディタ領域３４０に出力することができる。以下では、それについて明確に区分せず、イメージ１０００がタスク領域３００に出力される（又は、含まれる）と表現する。
一方、図５に示すように、制御部１４０は、イメージ１０００がタスク領域３００に出力された状態で、特定の機能アイコン３２１が選択された後、イメージ１０００に加えられるユーザ入力に基づいて、イメージ１０００を回転させることができる。ここで、特定の機能アイコン３２１は、イメージ１０００を回転させる機能がマッチングされたアイコンであってもよい。また、前記ユーザ入力は、イメージ１０００の一領域を選択するクリック入力であってもよく、クリック入力が維持された状態で加えられるドラッグ入力であってもよい。
制御部１４０は、前記ドラッグ入力の程度に応じて、イメージ１０００を回転させることができる。また、制御部１４０は、前記ドラッグ入力が加えられると、テーブル１１００、１２００が正方向に表示されるように、イメージ１０００を適宜回転させることができる。
この場合、制御部１４０は、イメージ１０００に含まれるテーブル１１００、１２００を認識し、認識されたテーブルに該当する四角形が傾いて表示されないように、イメージ１０００を回転させることができる。
このようなイメージ１０００の回転過程は、必須の過程ではなく、必要に応じて行われる過程である。
次に、本発明においては、前述したようにテーブル１１００、１２００を含むイメージ１０００がタスク領域３００に出力されると、タスク領域３００の一領域に含まれる複数の機能アイコンのうちのいずれか１つの機能アイコンの選択を受け付ける過程が行われる（Ｓ４２０）。
図６に示すように、複数の機能アイコン３２１～３２６は、テーブル１１００、１２００の構成要素（又は、テーブル構成要素）を特定するか、又は、特定された構成要素に基づいて区画されたセルを結合する機能にそれぞれマッチングされた機能アイコンである。
例えば、複数の機能アイコン３２１～３２６のうち、第１機能アイコン３２２は、テーブル構成要素のうち、イメージ１０００に含まれるテーブル１１００、１２００の外枠要素を特定する機能にマッチングされたアイコンであってもよい。
また、複数の機能アイコン３２１～３２６のうち、第２機能アイコン３２３は、テーブル構成要素のうち、イメージ１０００に含まれるテーブル１１００、１２００の行要素を特定する機能にマッチングされたアイコンであってもよい。
さらに、複数の機能アイコン３２１～３２６のうち、第３機能アイコン３２４は、テーブル構成要素のうち、イメージ１０００に含まれるテーブル１１００、１２００の列要素を特定する機能にマッチングされたアイコンであってもよい。
さらに、複数の機能アイコン３２１～３２６のうち、第４～第６機能アイコン３２４、３２５、３２６は、前記特定されたテーブル構成要素により区画されたセルを横方向及び縦方向の少なくとも一方向に結合する結合機能にマッチングされたアイコンであってもよい。
本発明において、制御部１４０は、ユーザ入力に基づいて、いずれか１つの機能アイコンが選択されると、イメージ１０００に含まれるテーブル１１００、１２００から前記選択された機能アイコンに対応する構成要素を特定する過程を実行することができる。
一例として、複数の機能アイコン３２１～３２６のうち、第１機能アイコン３２２が選択されると、制御部１４０は、テーブル構成要素のうち、イメージ１０００に含まれるテーブル１１００、１２００の外枠要素を特定するようにしてもよい。
他の例として、複数の機能アイコン３２１～３２６のうち、第２機能アイコン３２３が選択されると、制御部１４０は、テーブル構成要素のうち、イメージ１０００に含まれるテーブル１１００、１２００の行要素を特定するようにしてもよい。
さらに他の例として、複数の機能アイコン３２１～３２６のうち、第３機能アイコン３２４が選択されると、制御部１４０は、テーブル構成要素のうち、イメージ１０００に含まれるテーブル１１００、１２００の列要素を特定するようにしてもよい。
次に、本発明においては、前述した機能アイコンのうちのいずれか１つの機能アイコンが選択されると、イメージ１０００に加えられる予め設定された方式の入力に基づいて、その選択された機能アイコンにマッチングされたテーブル構成要素に該当するガイド情報を出力する過程が行われる（Ｓ４３０）。
ここで、予め設定された方式の入力は、様々であり、イメージ１０００に加えられるドラッグ入力及びクリックの少なくとも一方を含む。例えば、予め設定された方式の入力は、クリックしたまま引きずるドラッグ入力であってもよい。
制御部１４０は、いずれか１つの機能アイコンが選択された後、イメージ１０００に対して前記予め設定された方式の入力（又は、ユーザ入力）が加えられると、加えられたユーザ入力を、選択された機能アイコンに対応する構成要素を特定又は認識する入力として処理することができる。
このとき、制御部１４０は、イメージ認識アルゴリズムに基づいて、選択された機能アイコンに対応する構成要素を認識することができる。
保存部１２０には、構成要素毎にそれぞれ対応する形状情報が保存されて存在するようにしてもよい。制御部１４０は、その形状情報に基づいて、テーブル１１００、１２００から、選択された機能アイコンに対応する構成要素を認識することができる。
例えば、制御部１４０は、外枠要素に該当する構成要素を特定する第１機能アイコンが選択されると、イメージ１０００において前記ユーザ入力が加えられた領域に含まれる外枠要素を認識又は特定するようにしてもよい。また、制御部１４０は、外枠要素に該当する構成要素が特定されたことを示すために、特定された構成要素に該当するガイド情報（例えば、ボックス（box）イメージ）を出力するようにしてもよい。
それとは異なり、制御部１４０は、外枠要素に該当する構成要素を特定する第１機能アイコンが選択されると、イメージ１０００において前記ユーザ入力が加えられた領域に対応するように、外枠要素を示すガイド情報を出力するようにしてもよい。
なお、ガイド情報は、視覚的な情報であり、各構成要素によって異なる。一例として、構成要素がテーブルの外枠要素に該当する場合、ガイド情報は、ボックスイメージにしてもよい。ボックスイメージが出力される領域は、イメージ１０００においてテーブル１１００、１２００が配置されるテーブル領域に対応する領域であってもよい。
他の例として、構成要素が行要素に該当する場合、ガイド情報は、横方向に延びる横ライン（又は、横線分）イメージにしてもよい。
さらに他の例として、構成要素が列要素に該当する場合、ガイド情報は、縦方向に延びる縦ライン（又は、縦線分）イメージにしてもよい。
以下に、構成要素をそれぞれ特定し、ガイド情報を出力する方法について、より具体的に説明する。
本発明においては、構成要素（外枠要素、行要素、列要素）を特定する過程の結果として、イメージ１０００に含まれるテーブル１１００、１２００と同一のテーブル構造を有するテーブルを描き出すことができる。イメージ１０００に含まれるテーブル１１００、１２００と同一の構造を有するテーブルを「再現テーブル」という。以下に説明する図６～図８の過程は、イメージ１０００に含まれるテーブル１１００、１２００と同一の構造を有する再現テーブルを生成するための過程であり、当該過程で描かれるテーブルも「再現テーブル」という。
すなわち、イメージ１０００に含まれるテーブル１１００、１２００と同一の構造を有する再現テーブルが完成する前でも、上記過程で描かれているテーブルは全て「再現テーブル」という。
まず、図６を参照して、外枠要素を特定し、ガイド情報を出力する方法について説明する。
例えば、図６に示すように、複数の機能アイコン３２１～３２６のうち、第１機能アイコン３２２が選択されると、制御部１４０は、テーブル構成要素のうち、イメージ１０００に含まれるテーブル１１００、１２００の外枠要素を特定ことができる。
制御部１４０は、第１機能アイコン３２２が選択されると、予め設定された方式の入力４０１、４０２、４０３、４０４により、イメージ１０００に含まれるテーブル１１００、１２００が配置されるテーブル領域の特定を受けることができる。
前記予め設定された方式の入力には、それぞれのテーブル１１００、１２００の一領域から他の領域へと引きずるドラッグ入力が含まれる。
ユーザは、ドラッグ入力により、イメージ１０００においてテーブル１１００、１２００が含まれるテーブル領域を選択することができる。
制御部１４０は、そのドラッグ入力に基づいて、イメージ１０００においてテーブル１１００、１２００が含まれるテーブル領域を特定し、特定されたテーブル領域にガイド情報を出力することができる。
このようなテーブル領域は、テーブル１１００、１２００の外枠に該当する領域であり、制御部１４０は、イメージ１０００に含まれるテーブル１１００、１２００の外枠を示すボックスイメージ６１０、６２０をガイド情報として出力することができる。ボックスイメージ６１０、６２０は、イメージ１０００に含まれるテーブル１１００、１２００をユーザに認識させるように、内部は空き領域からなり、境界は実線又は点線からなる、外観を有するようにしてもよい。
制御部１４０は、このようなガイド情報をイメージ１０００と重ねて表示することができる。すなわち、ガイド情報は、イメージ１０００とオーバーラップ（overlap）して出力することができる。
一方、本発明において、制御部１４０は、外枠要素を特定するためのユーザ入力が、イメージ１０００に含まれるテーブル１１００、１２００の大きさに完全に一致して加えられなくても、イメージ１０００に含まれるテーブル１１００、１２００の大きさに対応する大きさでボックスイメージ６１０、６２０を出力することができる。
これは、前述したように、制御部１４０は、イメージ認識アルゴリズムに基づいて、選択された機能アイコンに対応する構成要素を認識することができるからである。
保存部１２０には、構成要素毎にそれぞれ対応する形状情報が保存されて存在するようにしてもよい。制御部１４０は、その形状情報に基づいて、テーブル１１００、１２００から、選択された機能アイコンに対応する構成要素（例えば、外枠）を認識することができる。制御部１４０は、イメージ認識アルゴリズムにより、イメージ１０００において前記ユーザ入力が加えられた領域に含まれる外枠要素を認識又は特定することができる。
同図に示すように、イメージ１０００に複数のテーブル１１００、１２００が含まれる場合、制御部１４０は、第１テーブル１１００が含まれるテーブル領域への予め設定された方式の入力に基づいて、第１テーブル１１００の外枠要素を特定ことができる。
同様に、制御部１４０は、第２テーブル１２００が含まれるテーブル領域への予め設定された方式の入力に基づいて、第２テーブル１２００の外枠要素を特定ことができる。
このように、本発明においては、イメージ１０００に複数のテーブル１１００、１２００が含まれる場合でも、各テーブル１１００、１２００の構成要素を特定することができる。
一方、制御部１４０は、イメージ１０００において複数の外枠要素が特定された場合、イメージ１０００に複数のテーブル１１００、１２００が含まれていると判断することができる。
一方、このようにテーブル１１００、１２００の外枠要素が特定されると、制御部１４０は、生成対象テーブルを認識したと判断することができる。
この場合、制御部１４０は、現在まで再現されたテーブルの情報をタスク領域３００の一領域（例えば、属性領域３５０）に出力することができる。
属性領域３５０には、異なるテーブル単位で区分されて情報が出力されるようにしてもよい。制御部１４０は、外枠要素毎に異なるテーブルとして認識することができ、認識された外枠要素にそれぞれ対応するテーブルの属性情報３５１、３５２を属性領域３５０に提供することができる。
同図に示すように、属性情報３５１、３５２は、認識されたテーブル（又は、再現テーブル（外枠要素に対応するテーブル））のそれぞれの属性に関する情報を含み、その属性は、行の数（Ｒｏｗｓ）、列の数（Ｃｏｌｓ）、及び結合されたセルの数（Ｍｅｒｇｅｓ）の少なくとも１つに関する情報を含んでもよい。ここで、認識されたテーブル（又は、再現テーブル）とは、イメージ１０００に含まれるテーブル１１００、１２００とは区分されるものであって、ボックスイメージ６１０、６２０に対応するテーブルを意味する。
一方、属性領域３５０に出力される属性情報３５１、３５２は、テーブル１１００、１２００に含まれる構成要素を特定する過程を実行することによりアップデートすることができる。
例えば、前述したように、第１及び第２テーブル１１００、１２００のそれぞれに対してテーブルの外枠要素のみが特定された場合、第１及び第２テーブル１１００、１２００に基づいて、再現テーブルは、それぞれ行及び列を１つ含み、結合されたセルは存在しない。
次に、図７を参照して、行要素を特定し、ガイド情報を出力する方法について説明する。
例えば、図７に示すように、複数の機能アイコン３２１～３２６のうち、第２機能アイコン３２３が選択されると、制御部１４０は、テーブル構成要素のうち、イメージ１０００に含まれるテーブル１１００、１２００の行要素を特定ことができる。
行要素とは、横方向（又は、水平方向）に延びるライン（又は、線分）を意味する。このような行要素は、テーブルの構成によって１つ又は複数存在する。
制御部１４０は、第２機能アイコン３２３が選択されると、予め設定された方式の入力６０１により、イメージ１０００に含まれるテーブル１１００、１２００を構成する横ラインの特定を受けることができる。前記予め設定された方式の入力は、クリック入力であってもよい。
すなわち、制御部１４０は、第２機能アイコン３２３が選択された後、前記予め設定された方式の入力によりイメージ１０００に含まれるテーブルの行要素が特定された場合、イメージ１０００に含まれるテーブルの行要素を構成する少なくとも１本の横ラインに対応するガイド情報１１０１、１１０２、１１０３、１１０４、１２０１、１２０２、１２０３、１２０４、１２０５、１２０６、１２０７、１２０８をボックスイメージ６１０、６２０内に出力することができる。
ガイド情報１１０１、１１０２、１１０３、１１０４、１２０１、１２０２、１２０３、１２０４、１２０５、１２０６、１２０７、１２０８は、同図に示すように、実線又は点線で視覚的に示してもよく、ボックスイメージ６１０、６２０の一方側から当該一方側に対向する反対側まで延びるようにしてもよい。ここで、延びる方向は、横方向（又は、水平方向）であり得る。このようなガイド情報１１０１、１１０２、１１０３、１１０４、１２０１、１２０２、１２０３、１２０４、１２０５、１２０６、１２０７、１２０８により、ボックスイメージ６１０、６２０は、行方向に少なくとも２つのセルに区画される。
例えば、第１テーブル１１００に対応する第１ボックスイメージ６１０は、第１テーブル１１００から抽出された横ライン及びそれに対応するガイド情報１１０１、１１０２、１１０３、１１０４に基づいて、５つの行に区画される。
このような区画に基づいて、属性領域３５０に出力される属性情報がアップデートされる。アップデートの結果、第１テーブル１１００に対応する属性情報３５１は、再現された第１テーブル（第１ボックスイメージ６１０に対応するテーブル）が５つの行を含むものであり、行に関する情報（「Ｒｏｗｓ：５」）がアップデートされる。
同様に、第２テーブル１２００に対応する第２ボックスイメージ６２０は、第２テーブル１２００から抽出された横ライン、及び、それに対応するガイド情報１２０１、１２０２、１２０３、１２０４、１２０５、１２０６、１２０７、１２０８に基づいて、９つの行に区画される。
このような区画に基づいて、属性領域３５０に出力される属性情報がアップデートされる。アップデートの結果、第２テーブル１２００に対応する属性情報３５２は、再現された第２テーブル（第２ボックスイメージ６２０に対応するテーブル）が９つの行を含むものであり、行に関する情報（「Ｒｏｗｓ：９」）がアップデートされる。
一方、制御部１４０は、イメージ認識アルゴリズムに基づいて、前記予め設定された方式のユーザ入力が加えられた領域に含まれる横ラインを抽出することができる。テーブル１１００、１２００から「横ラインを抽出する」ことは、テーブル１１００、１２００から横ラインに該当する構成要素を認識し、当該構成要素を横ラインとして判断することを意味する。
次に、図８を参照して、列要素を特定し、ガイド情報を出力する方法について説明する。
例えば、図８に示すように、複数の機能アイコン３２１～３２６のうち、第３機能アイコン３２４が選択されると、制御部１４０は、テーブル構成要素のうち、イメージ１０００に含まれるテーブル１１００、１２００の列要素を特定ことができる。
列要素とは、縦方向（又は、垂直方向）に延びるライン（又は、線分）を意味する。このような列要素は、テーブルの構成によって１つ又は複数存在する。
制御部１４０は、第３機能アイコン３２４が選択されると、予め設定された方式の入力７０１により、イメージ１０００に含まれるテーブル１１００、１２００を構成する縦ラインの特定を受けることができる。前記予め設定された方式の入力は、クリック入力であってもよい。
すなわち、制御部１４０は、第３機能アイコン３２４が選択された後、前記予め設定された方式の入力によりイメージ１０００に含まれるテーブルの列要素が特定された場合、イメージ１０００に含まれるテーブルの列要素を構成する少なくとも１本の縦ラインに対応するガイド情報１１１１、１１１２、１１１３、１２１１、１２２１、１２２２、１２２３、１２２４、１２２５をボックスイメージ６１０、６２０内に出力することができる。
ガイド情報１１１１、１１１２、１１１３、１２１１、１２２１、１２２２、１２２３、１２２４、１２２５は、同図に示すように、実線又は点線で視覚的に示してもよく、ボックスイメージ６１０、６２０の一方側から当該一方側に対向する反対側まで延びるようにしてもよい。ここで、延びる方向は、縦方向（又は、垂直方向）であり得る。このようなガイド情報１１１１、１１１２、１１１３、１２１１、１２２１、１２２２、１２２３、１２２４、１２２５により、ボックスイメージ６１０、６２０は、列方向において少なくとも２つのセルに区画される。
例えば、第１テーブル１１００に対応する第１ボックスイメージ６１０は、第１テーブル１１００から抽出された縦ライン、及び、それに対応するガイド情報１１１１、１１１２、１１１３に基づいて、４つの列に区画される。
このような区画に基づいて、属性領域３５０に出力される属性情報がアップデートされる。アップデートの結果、第１テーブル１１００に対応する属性情報３５１は、再現された第１テーブル（第１ボックスイメージ６１０に対応するテーブル）が４つの列を含むものであり、列に関する情報（「Ｃｏｌｓ：４」）がアップデートされる。
同様に、第２テーブル１２００に対応する第２ボックスイメージ６２０は、第２テーブル１２００から抽出された縦ライン、及び、それに対応するガイド情報１２１１、１２２１、１２２２、１２２３、１２２４、１２２５に基づいて、７つの列に区画される。
このような区画に基づいて、属性領域３５０に出力される属性情報がアップデートされる。アップデートの結果、第２テーブル１２００に対応する属性情報３５２は、再現された第２テーブル（第２ボックスイメージ６２０に対応するテーブル）が７つの列を含むものであり、列に関する情報（「Ｃｏｌｓ：７」）がアップデートされる。
一方、制御部１４０は、イメージ認識アルゴリズムに基づいて、前記予め設定された方式のユーザ入力が加えられた領域に含まれる縦ラインを抽出することができる。テーブル１１００、１２００から「縦ラインを抽出する」ことは、テーブル１１００、１２００から縦ラインに該当する構成要素を認識し、当該構成要素を縦ラインとして判断することを意味する。
なお、テーブル１１００、１２００から構成要素を特定する順序は自由に変更することができる。
前述したように、本発明においては、機能アイコンの選択及びユーザ入力に基づいて、イメージ１０００に含まれるテーブル１１００、１２００の構成要素（外枠要素、行要素、列要素）を特定する。このような特定により、各構成要素に該当するガイド情報が出力され、よって、ガイド情報は、イメージ１０００に含まれるテーブル１１００、１２００を再現したテーブルに該当する。
一方、図８に示すように、テーブル１１００、１２００の外枠要素を特定したボックスイメージ６１０、６２０は、行要素及び列要素の特定により出力された横ライン及び縦ラインに該当するガイド情報１１０１、１１０２、１１０３、１１０４、１２０１、１２０２、１２０３、１２０４、１２０５、１２０６、１２０７、１２０８、１１１１、１１１２、１１１３、１２１１、１２２１、１２２２、１２２３、１２２４、１２２５により、複数のセルを含むように区画される。
すなわち、ボックスイメージ６１０、６２０は、機能アイコンにより特定された横ライン及び縦ラインにより、複数のセルを含むように区画される。
このような複数のセルは、イメージ１０００に含まれるテーブル１１００、１２００に存在する実際のセルに関係なく、テーブルに存在する全てのラインに基づいて区分されるサブセル単位で分割されたセルであってもよい。
一例として、第１テーブル１１００の場合、４本の横ライン１１０１、１１０２、１１０３、１１０４（図７参照）と３本の縦ライン１１１１、１１１２、１１１３（図８参照）により、２０個のサブセルで区画される。サブセルの数は、（横ラインの数＋１）×（縦ラインの数＋１）により求められる。
他の例として、第２テーブル１２００の場合、８本の横ライン１２０１、１２０２、１２０３、１２０４、１２０５、１２０６、１２０７、１２０８（図７参照）と６本の縦ライン１２１１、１２２１、１２２２、１２２３、１２２４、１２２５（図８参照）により、６３個のサブセルで区画される。
このように、イメージ１０００に含まれるテーブル１１００、１２００の構成要素に基づいてセルを区画する場合、ボックスイメージ６１０、６２０の構造は、イメージ１０００に含まれるテーブル１１００、１２００の構造とは異なることもある。
これは、ボックスイメージ６１０、６２０は、各テーブル１１００、１２００に含まれる全てのライン（横ライン及び縦ライン）に基づいて最小単位で分割されたセルを有するからである。
よって、本発明においては、イメージ１０００に含まれるテーブル１１００、１２００と同一の構造を有するテーブル（又は、再現テーブル）を生成するために、セルを結合する過程を行うことができる。
すなわち、本発明によるテーブル生成方法においては、ガイド情報を用いて、イメージに含まれるテーブルに対応する構造を有するテーブルを生成する過程が行われるようにしてもよい（Ｓ４４０）。
当該過程は、横ライン及び縦ラインの少なくとも一部を除去する過程であり、必要な場合に限って行われる。
すなわち、前述したステップＳ４１０～Ｓ４３０により、イメージ１０００に含まれるテーブル１１００、１２００と同一の構造を有する再現テーブルが生成された場合、ステップＳ４４０を行わなくてもよい。なお、再現テーブルは、前述した構成要素を特定する過程で描かれたボックスイメージ、横ライン、及び縦ラインに該当するガイド情報からなるテーブルであり得る。
一方、横ライン及び縦ラインの少なくとも一部を除去する過程とは、隣接する少なくとも２つのセル間に含まれる横ライン及び縦ラインの少なくとも一部を除去することにより、隣接する少なくとも２つのセルを結合する過程を意味する。
このような結合過程は、ツールバー領域３２０に含まれる複数の機能アイコンのうち、前記横ライン及び前記縦ラインの少なくとも一部を削除する機能（又は、結合機能）がマッチングされた機能アイコンが選択された後、ガイド情報に加えられるユーザ入力に基づいて行われるようにしてもよい。
結合機能がマッチングされた機能アイコンは、複数であってもよい。結合機能がマッチングされた機能アイコンは、ｉ）横方向及び縦方向に関係なく、ユーザ入力により特定された少なくとも２つのセル間に存在する横ライン及び縦ラインを全て除去する機能が割り当てられた第４機能アイコン３２５、ｉｉ）図１０に示すように、ユーザ入力により特定された領域（符号９２１、９２２、９２３、９２４、９２５、９２６、９２７、９２８、９２９、９３０、９３１、９３２のセルが含まれる領域）に含まれる複数のセル９２１、９２２、９２３、９２４、９２５、９２６、９２７、９２８、９２９、９３０、９３１、９３２間に存在する縦ライン９１１を除去し、複数のセル９２１、９２２、９２３、９２４、９２５、９２６、９２７、９２８、９２９、９３０、９３１、９３２を横方向に結合する機能が割り当てられた第５機能アイコン３２６、ｉｉｉ）図１１に示すように、ユーザ入力により特定された領域（符号９５１、９５２、９５３、９５４のセルが含まれる領域）に含まれる複数のセル９５１、９５２、９５３、９５４間に存在する横ライン９４１、９４２、９４３を除去し、隣接するセルを縦方向に結合する機能が割り当てられた第６機能アイコン３２７、の少なくとも１つを含んでもよい。
より具体的には、図９を参照すると、第４機能アイコン３２５が選択された後、イメージ１０００に加えられるユーザ入力に基づいて、制御部１４０は、ユーザ入力が加えられた領域に含まれる複数のセル間の横ライン及び縦ラインを全て除去（削除）し、１つのセルを生成することができる。例えば、第１テーブル１１００から、「患者番号」、「患者氏名」、「１２３４５６７８」、「ホン・ギルドン」の情報がそれぞれ含まれる４つのセルが予め設定された方式のユーザ入力により選択されると、制御部１４０は、前記４つのセル間に存在する横ライン及び縦ラインを全て除去し、前記４つのセルを１つのセルにすることができる。
また、図１０を参照すると、ｉ）図１０の（ａ）に示すように、第５機能アイコン３２６が選択された後、ｉｉ）図１０の（ｂ）に示すように、予め設定されたユーザ方式のユーザ入力が複数のセル９２１、９２２、９２３、９２４、９２５、９２６、９２７、９２８、９２９、９３０、９３１、９３２に対して加えられると、ｉｉｉ）図１０の（ｂ）及び（ｃ）に示すように、制御部１４０は、複数のセル９２１、９２２、９２３、９２４、９２５、９２６、９２７、９２８、９２９、９３０、９３１、９３２間に存在する縦ライン９１１を除去し、複数のセル９２１、９２２、９２３、９２４、９２５、９２６、９２７、９２８、９２９、９３０、９３１、９３２が横方向に結合された結合セル９２１’、９２３’、９２５’、９２７’、９２９’、９３１’を生成することができる。
さらに、図１１を参照すると、ｉ）図１１の（ａ）に示すように、第６機能アイコン３２７が選択された後、ｉｉ）図１１の（ｂ）に示すように、予め設定されたユーザ方式のユーザ入力が複数のセル９５１、９５２、９５３、９５４に対して加えられると、ｉｉｉ）図１１の（ｂ）及び（ｃ）に示すように、制御部１４０は、複数のセル９５１、９５２、９５３、９５４間に存在する横ライン９４１、９４２、９４３を除去し、複数のセル９５１、９５２、９５３、９５４が縦方向に結合された結合セル９５０を生成することができる。
このように、制御部１４０は、ユーザ入力に基づいて、少なくとも２つのセルを結合することができ、その結果、図９に示すように、ボックスイメージ６１０、６２０は、イメージ１０００に含まれるテーブル１１００、１２００と同一のセル構造を有するようになる。
一方、このような結合過程に基づいて、属性領域３５０に出力される属性情報がアップデートされる。アップデートの結果、第１テーブル１１００に対応する属性情報３５１は、再現された第１テーブル（第１ボックスイメージ６１０に対応するテーブル）が１つの結合されたセル１１２１を含むものであり、結合されたセルに関する情報（「Ｍｅｒｇｅｓ：１」）がアップデートされる。
また、アップデートの結果、第２テーブル１２００に対応する属性情報３５２は、再現された第２テーブル（第２ボックスイメージ６２０に対応するテーブル）が８つの結合されたセル１２２１、１２２２、１２２３、１２２４、１２２５、１２２６、１２２７、１２２８を含むものであり、結合されたセルに関する情報（「Ｍｅｒｇｅｓ：８」）がアップデートされる。
このような結合が完了すると、図１２に示すように、ボックスイメージ６１０、６２０は、イメージ１０００に含まれるテーブル１１００、１２００と同一のセル構造を有する再現テーブルとなる。つまり、制御部１４０は、再現テーブルを生成することができる。
上記過程では、セル間の関連性については考慮せず、イメージ１０００に含まれるテーブル１１００、１２００の構造に該当する構成要素を抽出する機能について説明した。以下では、イメージ１０００に含まれるテーブル１１００、１２００のセル間の関連性、すなわちデータ間の関係性を付与する方法についてより具体的に説明する。
図３Ｂを参照して説明したように、「セル間の関係を特定する」ことは、テーブルに含まれる複数のセルのうち、互いに関連するデータが含まれる複数のセルを特定（又は、グルーピング）する過程であり、当該過程のためにツールバー領域３７０の機能アイコン３７１、３７２、３７３が備えられてもよい。
また、前記セル間の関係を特定する過程は、意味的に上位概念のテキストと下位概念のテキストを区分してセルを特定する過程であってもよい。例えば、前記セル間の関係を特定する過程は、該当するテキストが上位概念と下位概念のどちらに属するかを指定し、上位概念として指定されたテキストを関連する下位概念のテキストと連結してグルーピングする過程であってもよい。
より具体的には、前記上位概念のテキストが配置されるセルはカテゴリーセルであり、前記下位概念のテキストが配置されるセルは当該カテゴリーセルに属するデータセルであってもよい。図３Ｂを参照して説明したように、カテゴリーは、同一又は類似の性質や意味を基準に分けられるものであり、範疇ともいう。同じカテゴリーに属するデータは、同じ意味、同じ種類、又は同じ所属のデータであってもよい。
カテゴリーセルには、カテゴリー名又はカテゴリー名に関連するデータが含まれ、データセルには、カテゴリーセルに含まれるカテゴリー名に属するデータが含まれてもよい。ここで、カテゴリー名は、範疇名ともいえる。
図１３を参照すると、まず、前記複数のセルのうち、前記イメージに含まれるテーブルのカテゴリー名が含まれるカテゴリーセルを特定するステップが行われる。
ツールバー領域３７０の機能アイコン３７１、３７２、３７３のうち、カテゴリーを指定する第１機能アイコン３７１が選択されると、前記カテゴリーセルを特定するステップが開始されるようにしてもよい。この場合、前記タスク領域の他の一領域には、前記カテゴリーセルが特定されることに基づいて、前記カテゴリーセルに含まれるカテゴリー名が前記カテゴリーセルの識別情報と共に出力されるようにしてもよい。
例えば、第１機能アイコン３７１の選択により第１機能アイコン３７１が選択されると、タスク領域３００の属性領域３５０には、キー（Ｋｅｙｓ）項目がアクティブになり、選択されたカテゴリーデータのリストが出力されるようにしてもよい。前記カテゴリーデータのリストには、前記カテゴリーセルに含まれるカテゴリー名が前記カテゴリーセルの識別情報（例えば、シリアル番号）と共に出力されるようにしてもよい。
このとき、タスク領域３００に出力されたテーブル１１００、１２００においてクリック入力やドラッグ入力によりセルが選択され、前記選択されたセルがカテゴリーセルとして指定されるようにしてもよい。例えば、テーブル１１００、１２００においてセル１３０１、１３０２、１３０３、１３０４、１３０５がクリック・アンド・ドラッグ方式で選択されると、それらがカテゴリーセルとして指定されるようにしてもよい。
前記カテゴリーデータのリストにおいて、前記カテゴリー名及び前記識別情報は、前記カテゴリーセルが選択される手順によって順次出力されるようにしてもよい。この場合、前記選択されたセルは、ハイライトなどにより、選択されたことが表示されるようにしてもよい。
一方、属性領域３５０には、タスク領域３００に出力されたテーブル１１００、１２００のそれぞれに対応するカテゴリー名のリスト領域が形成されてもよい。例えば、第１テーブル１１００に対応する第１リスト領域１３３０と第２テーブル１２００に対応する第２リスト領域１３４０が前記キー（Ｋｅｙｓ）項目の出力領域１３２０に表示されるようにしてもよい。ここで、第１リスト領域１３３０で前記カテゴリー名が出力される順序は、第２テーブル１２００と独立して、第１テーブル１１００においてセル１３０１、１３０２、１３０３、１３０４、１３０５が選択される手順による、ようにしてもよい。また、第２リスト領域１３４０で前記カテゴリー名が出力される順序は、第１テーブル１１００と独立して、第２テーブル１２００においてセル１３１１が選択される手順による、ようにしてもよい。
次に、本発明によるテーブル生成方法においては、前記複数のセルのうち、前記カテゴリーセルに関連するデータセルを特定するステップが行われる。例えば、タスク領域３００に出力されたテーブル１１００、１２００において、カテゴリーセルがキー（Ｋｅｙｓ）項目として選択されると、データセルを行と列に従って選択するステップが行われるようにしてもよい。
前記カテゴリーセルに関連するデータセルの特定は、前記カテゴリーセルから開始する予め設定された方式の入力に基づいて行われるようにしてもよい。以下に、その入力方式について、より詳細に説明する。
例えば、第２機能アイコン３７２が選択されると、図１４に示すように、行に従ってデータセルを選択する機能がアクティブになり、第３機能アイコン３７３が選択されると、図１５に示すように、列に従ってデータセルを選択する機能がアクティブになる、ようにしてもよい。
まず、図１４に示すように、第２機能アイコン３７２が選択されると、属性領域３５０には、行（Ｒｏｗｓ）項目がアクティブになり、行方向にグルーピングされたセルグループリストが出力されるようにしてもよい。
タスク領域３００に出力されたテーブル１１００、１２００において、いずれか１つのカテゴリーセル１４０２が選択され、カテゴリーセル１４０２に続いて選択されるデータセル１４０３、１４０４が、カテゴリーセル１４０２に属するデータセルとして指定される。前記セルの選択は、クリック入力、ドラッグ入力、又はクリック・アンド・ドラッグ入力により行われるようにしてもよい。その例として、カテゴリーセル１４０２がタッチされてから行方向に隣接するデータセル１４０３、１４０４を通るドラッグが入力されると、カテゴリーセル１４０２のカテゴリー名を上位概念とし、データセル１４０３、１４０４の内容を下位概念とするセルグループが形成される。
属性領域３５０には、タスク領域３００で選択されたセルによりグルーピングされたセルグループデータのリスト１４２０が出力されるようにしてもよい。リスト１４２０は、最上端にカテゴリー名が出力され、当該カテゴリー名の下方に選択されたデータセルの内容が順次出力されるようにしてもよい。
一方、前記行方向にセル間の関係を特定する過程において、１つのセルグループは、異なるカテゴリーセルの選択を基準にして、グルーピングの開始及び終了が指定されるようにしてもよい。
例えば、前記複数のセルから、複数のカテゴリーセルが特定され、前記複数のカテゴリーセルのうち、第１カテゴリーセルから開始する予め設定された方式の入力により、前記第１カテゴリーセルとは異なる第２カテゴリーセルが選択された場合、制御部１４０は、前記第２カテゴリーセルが選択されるまで、選択されたデータセルを前記第１カテゴリーセルに関連するデータセルとして特定するようにしてもよい。
図１４を参照すると、このような特定は、「診察料」に該当する第１カテゴリーセル１４０２がタッチされ、行方向に隣接するデータセル１４０３、１４０４を経て最後のデータである「３８，０４０」に該当するデータセルが選択され、その後「入院料」に該当する第２カテゴリーセル１４０５が選択された場合に行われる。前記第１カテゴリーセルと前記第２カテゴリーセル間で選択されたセルが前記第１カテゴリーセルに関連するデータセルとして特定される。また、前記第２カテゴリーセルが選択された後に選択されるデータセルは、前記第２カテゴリーセルに関連するデータセルとして特定される。
さらに、前記テーブルのセルの一部は、前記カテゴリーセルの属性と前記データセルの属性の両方を有するセルであってもよい。例えば、「診察料」は、データセル１４０３、１４０４である「７，６０８」と「３０，４３２」に対してはカテゴリーセルであるが、カテゴリーセル１４０１である「基本項目」に対してはデータセルである。この場合、前記「診察料」に該当するセルは、中間カテゴリーセルとして定義される。
本例示においては、行方向にカテゴリーセル１４０１、中間カテゴリーセル１４０２、データセル１４０３、１４０４の順に選択され、この場合、リスト１４２０には、上位概念（カテゴリー名）、中位概念（中間カテゴリー名）、下位概念（データ）の順に出力され、１つのセルグループを形成する。
次に、図１５に示すように、第３機能アイコン３７３が選択されると、属性領域３５０には、列（Ｃｌｏｓ）項目がアクティブになり、列方向にグルーピングされたセルグループリストが出力されるようにしてもよい。
タスク領域３００に出力されたテーブル１１００、１２００において、いずれか１つのカテゴリーセル１５０１が選択され、カテゴリーセル１５０１に続いて選択される中間カテゴリーセル１５０２が１つのセルグループを形成するようにしてもよい。この場合、前述の行方向にセル間の関係を特定する過程において、ある属性に指定されたセルが、本例示の列方向にセル間の関係を特定する過程において、他の属性に指定される。その例として、「基本項目」は、行方向にはカテゴリーセルとして特定されるが、列方向にはカテゴリーセル１５０１である「項目」の下位概念である、中間カテゴリーセル１５０２として特定される。
一方、本例示の列方向にセル間の関係を特定する過程においても、データセルが前記カテゴリーセル又は前記中間カテゴリーセルに属するデータセルとして指定されるようにしてもよい。なお、前記セルの選択は、クリック入力、ドラッグ入力、又はクリック・アンド・ドラッグ入力により行われるようにしてもよい。
また、図１４を参照して説明した行方向にセル間の関係を特定する過程、及び、図１５を参照して説明した列方向にセル間の関係を特定する過程で選択されたセルは、ハイライトなどにより、選択されたことが表示されるようにしてもよい。さらに、重複して選択されるセルは、選択の回数に応じてハイライトの形を変化させてもよい。その例として、選択の回数が増加するにつれて、ハイライトの色がより濃くなるように処理してもよい。
以上で説明したように、本発明によるテーブル生成方法及びシステムにおいては、イメージ１０００に含まれるテーブル１１００、１２００を視覚的に同一に再現するだけでなく、テーブル１１００、１２００を構成するセル間の関係まで同一に再現することによって、より活用度の高い再現テーブルを生成することができる。
一方、再現テーブル２１００、２２００は、エクセル（ｘｌｓｘ）構造のデータだけでなく、様々な形式のデータとして提供することができる。再現テーブルがエクセル構造のデータとして提供される場合、制御部１４０は、複数のセル間の関係性をエクセルデータに反映することができ、その場合、セル間の演算関係をエクセルデータに含めることもできる。制御部１４０は、セルに含まれるテキスト間の相互演算関係を推定し、推定された演算関係をエクセルデータに対応するセルに関数として適用することができる。
前述したように、本発明によるテーブル生成方法及びシステムは、ユーザ入力に基づいて、イメージに含まれるテーブルの構成要素を抽出できるユーザ環境を提供することができる。よって、本発明によるテーブル生成方法及びシステムは、テーブルに含まれるテキストデータだけでなく、テーブルの構造を構成する構成要素まで抽出することができ、その結果、イメージに含まれるテーブルと同一の構造及び同一のデータを有するテーブルを生成することができる。
また、本発明によるテーブル生成方法及びシステムは、イメージに含まれるテーブルの構成要素により定義されるセルを特定し、ユーザ入力に基づいてセル間の関係性を付与することにより、各セルに含まれるデータを有機的に分析できるユーザ環境を提供することができる。
よって、本発明によるテーブル生成アプリケーションによるテーブル生成方法は、イメージに含まれるテーブルの構成要素を抽出する機能及びテーブルに含まれるデータ間の関係性を付与する機能を提供することにより、イメージに含まれるテーブルの視覚的な特性を再現すると共に、データ間の関係的な特性まで再現することができる。
一方、前述した本発明は、コンピュータで１つ以上のプロセスにより実行され、コンピュータ可読媒体（又は、記録媒体）に格納可能なプログラムとして実現することができる。
また、前述した本発明は、プログラム記録媒体にコンピュータ可読コード又はコマンドとして実現することができる。すなわち、本発明は、コンピュータプログラムの形態で提供することができる。
一方、コンピュータ可読媒体は、コンピュータシステムにより読み取り可能なデータが記録されるあらゆる種類の記録装置を含む。コンピュータ可読媒体の例としては、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Disk）、ＳＤＤ（Silicon Disk Drive）、ＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピーディスク、光データ記憶装置などが挙げられる。
また、コンピュータ可読媒体は、ストレージを含み、電子機器が通信によりアクセスできるサーバ又はクラウドストレージであり得る。この場合、コンピュータは、有線又は無線通信により、サーバ又はクラウドストレージから本発明によるプログラムをダウンロードすることができる。
さらに、本発明において、前述したコンピュータは、プロセッサ、すなわち中央処理装置（Central Processing Unit, CPU）が搭載された電子機器であり、その種類は特に限定されない。
一方、本発明の詳細な説明は例示的なものであり、あらゆる面で制限的に解釈されてはならない。本発明の範囲は添付の特許請求の範囲の合理的解釈により定められるべきであり、本発明の等価的範囲内でのあらゆる変更が本発明の範囲に含まれる。
１００ テーブル生成システム
１１０ 受信部
１２０ 保存部
１３０ ＯＣＲ部
１４０ 制御部
１５０ 外部サーバ
１５１ クラウドサバー
１５２ データベース（ＤＢ）
２００ テーブル
２０１ 外枠要素
２０２ 行要素
２０３ 列要素
２１０ セル
３００ タスク領域
３１０ ヘッダ領域
３２０、３７０ ツールバー領域
３３０ 機能アイコン領域
３４０ エディタ領域
３５０ 属性領域
１０００ イメージ
１１００、１２００ テーブル

Claims (15)

  1. テーブル生成アプリケーションのテーブル生成方法であって、
    前記アプリケーションで提供されるタスク領域にテーブルを含むイメージを出力するステップと、
    前記タスク領域の一領域に含まれる複数の機能アイコンのうちのいずれか１つの機能アイコンの選択を受け付けるステップと、
    前記いずれか１つの機能アイコンが選択された後、前記イメージに加えられる予め設定された方式の入力に基づいて、前記機能アイコンにマッチングされたテーブル構成要素に該当するガイド情報を出力するステップと、
    前記ガイド情報を用いて、前記イメージに含まれるテーブルに対応する構造を有するテーブルを生成するステップと、を含む、
    ことを特徴とする、方法。
  2. 前記テーブル構成要素は、
    外枠要素、行要素、及び列要素の少なくとも１つを含み、
    前記ガイド情報を出力するステップにおいては、
    前記予め設定された方式の入力に基づいて、前記イメージに含まれるテーブルから前記機能アイコンにマッチングされたテーブル構成要素に該当する単位要素を特定し、前記特定された単位要素に対応するように前記ガイド情報を出力する、
    ことを特徴とする、請求項１に記載の方法。
  3. 前記予め設定された方式の入力は、
    前記イメージに加えられるドラッグ入力及びクリックのうち少なくとも一方を含み、
    前記ガイド情報を出力するステップにおいては、
    前記イメージに含まれるテーブルを構成する単位要素のうち、前記予め設定された方式の入力が加えられた領域に含まれる少なくとも１つの単位要素を認識する、
    ことを特徴とする、請求項２に記載の方法。
  4. 前記複数の機能アイコンのうちの第１機能アイコンは、前記テーブル構成要素のうち前記イメージに含まれるテーブルの外枠要素を特定する機能にマッチングされ、
    前記複数の機能アイコンのうちの第２機能アイコンは、前記テーブル構成要素のうち前記イメージに含まれるテーブルの行要素を特定する機能にマッチングされ、
    前記複数の機能アイコンのうちの第３機能アイコンは、前記テーブル構成要素のうち前記イメージに含まれるテーブルの列要素に対応するガイド情報を出力する機能にマッチングされる、
    ことを特徴とする、請求項１に記載の方法。
  5. 前記ガイド情報を出力するステップにおいては、
    前記第１機能アイコンが選択された後、前記予め設定された方式の入力により前記イメージに含まれるテーブルが配置されたテーブル領域が特定された場合、
    前記テーブル領域に、前記イメージに含まれるテーブルの外枠を示すボックスイメージをガイド情報として出力する、
    ことを特徴とする、請求項４に記載の方法。
  6. 前記ガイド情報を出力するステップにおいては、
    前記第２機能アイコンが選択された後、前記予め設定された方式の入力により前記イメージに含まれるテーブルの行要素が特定された場合、
    前記イメージに含まれるテーブルの行要素を構成する少なくとも１本の横ラインに対応するガイド情報を前記ボックスイメージ内に出力し、
    前記第３機能アイコンが選択された後、前記予め設定された方式の入力により前記イメージに含まれるテーブルの列要素が特定された場合、
    前記イメージに含まれるテーブルの列要素を構成する少なくとも１本の縦ラインに対応するガイド情報を前記ボックスイメージ内に出力する、
    ことを特徴とする、請求項５に記載の方法。
  7. 前記横ライン及び前記縦ラインは、それぞれに、前記ボックスイメージの一方側から前記一法側に対向する反対側まで延びるように出力される、
    ことを特徴とする、請求項６に記載の方法。
  8. 前記ボックスイメージは、
    前記横ライン及び前記縦ラインにより、複数のセルを含むように区画される、
    ことを特徴とする、請求項７に記載の方法。
  9. 前記複数の機能アイコンは、さらに、
    前記横ライン及び前記縦ラインの少なくとも一部を削除する機能がマッチングされた第４機能アイコンを含み、
    前記テーブルを生成するステップにおいては、
    前記第４機能アイコンが選択された後、前記イメージに加えられるユーザ入力に基づいて、前記横ライン及び前記縦ラインの少なくとも一部を削除することにより、前記複数のセルの少なくとも２つを結合する、
    ことを特徴とする、請求項８に記載の方法。
  10. 前記方法は、さらに、
    前記複数のセルのうち、前記イメージに含まれるテーブルのカテゴリー名が含まれるカテゴリーセルを特定するステップ、を含む、
    ことを特徴とする、請求項８に記載の方法。
  11. 前記タスク領域の他の一領域には、
    前記カテゴリーセルが特定されることに基づいて、前記カテゴリーセルに含まれるカテゴリー名が前記カテゴリーセルの識別情報と共に出力される、
    ことを特徴とする、請求項１０に記載の方法。
  12. 前記方法は、さらに、
    前記複数のセルのうち、前記カテゴリーセルに関連するデータセルを特定するステップ、を含み、
    前記カテゴリーセルに関連するデータセルの特定は、
    前記カテゴリーセルから開始する予め設定された方式の入力に基づいて行われる、
    ことを特徴とする、請求項１０に記載の方法。
  13. 前記複数のセルから、複数のカテゴリーセルが特定され、前記複数のカテゴリーセルのうち、第１カテゴリーセルから開始する予め設定された方式の入力により前記第１カテゴリーセルとは異なる第２カテゴリーセルが選択された場合、
    前記第２カテゴリーセルが選択されるまで選択されたデータセルを前記第１カテゴリーセルに関連するデータセルとして特定する、
    ことを特徴とする、請求項１２に記載の方法。
  14. 電子機器のディスプレイ部に出力されるタスク領域でテーブルを生成するシステムであって、
    前記システムの制御部は、
    前記タスク領域にテーブルを含むイメージを出力し、
    ユーザから、前記タスク領域の一領域に含まれる複数の機能アイコンのうちのいずれか１つの機能アイコンの選択を受け付け、
    前記いずれか１つの機能アイコンが選択された後、前記イメージに加えられる予め設定された方式の入力に基づいて、前記機能アイコンにマッチングされたテーブル構成要素に該当するガイド情報を出力し、
    前記ガイド情報を用いて、前記イメージに含まれるテーブルに対応する構造を有するテーブルを生成する、
    ことを特徴とする、システム。
  15. 複数の命令を含むコンピュータプログラムであって、命令が実行されると、
    アプリケーションで提供されるタスク領域にテーブルを含むイメージを出力するステップと、
    前記タスク領域の一領域に含まれる複数の機能アイコンのうちのいずれか１つの機能アイコンの選択を受け付けるステップと、
    前記いずれか１つの機能アイコンが選択された後、前記イメージに加えられる予め設定された方式の入力に基づいて、前記機能アイコンにマッチングされたテーブル構成要素に該当するガイド情報を出力するステップと、
    前記ガイド情報を用いて、前記イメージに含まれるテーブルに対応する構造を有するテーブルを生成するステップと、
    をコンピュータに実施させる、コンピュータプログラム。
JP2022023364A 2021-02-22 2022-02-18 テーブル生成方法及びシステム Pending JP2022128427A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2021-0023275 2021-02-22
KR1020210023275A KR102655430B1 (ko) 2021-02-22 2021-02-22 테이블 생성 방법 및 시스템

Publications (1)

Publication Number Publication Date
JP2022128427A true JP2022128427A (ja) 2022-09-01

Family

ID=83061075

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022023364A Pending JP2022128427A (ja) 2021-02-22 2022-02-18 テーブル生成方法及びシステム

Country Status (2)

Country Link
JP (1) JP2022128427A (ja)
KR (1) KR102655430B1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08329187A (ja) * 1995-06-06 1996-12-13 Oki Electric Ind Co Ltd 文書読取装置
JPH113433A (ja) * 1997-06-11 1999-01-06 Hitachi Ltd 表枠線の交点補正装置
JP2016027444A (ja) * 2014-07-07 2016-02-18 キヤノン株式会社 情報処理装置、情報処理方法、プログラム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101392739B1 (ko) * 2012-11-26 2014-05-09 주식회사 인프라웨어 터치 스크린 디스플레이를 통해 전자문서상에서 테이블을 생성하는 방법 및 장치
KR101484419B1 (ko) * 2013-12-17 2015-01-28 비플라이소프트(주) 전자문서의 레이아웃 자동인식 시스템 및 레이아웃 자동인식 방법
KR102309175B1 (ko) * 2014-08-29 2021-10-06 삼성전자주식회사 스크랩 정보를 제공하는 전자 장치 및 그 제공 방법
KR101907029B1 (ko) * 2017-08-24 2018-10-12 (주) 더존비즈온 서식 자동화를 위한 테이블 생성 장치 및 방법
US10592738B2 (en) * 2017-12-01 2020-03-17 International Business Machines Corporation Cognitive document image digitalization
KR102005067B1 (ko) * 2018-10-25 2019-10-01 지의소프트 주식회사 딥러닝 알고리즘을 이용한 문서 데이터 저장 시스템 및 그 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08329187A (ja) * 1995-06-06 1996-12-13 Oki Electric Ind Co Ltd 文書読取装置
JPH113433A (ja) * 1997-06-11 1999-01-06 Hitachi Ltd 表枠線の交点補正装置
JP2016027444A (ja) * 2014-07-07 2016-02-18 キヤノン株式会社 情報処理装置、情報処理方法、プログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
「読取革命VER.15」 取扱説明書（基本編）[ONLINE], vol. 第1版, JPN6023013369, September 2012 (2012-09-01), pages 10 - 15, ISSN: 0005029881 *

Also Published As

Publication number Publication date
KR102655430B1 (ko) 2024-04-08
KR20220119873A (ko) 2022-08-30

Similar Documents

Publication Publication Date Title
Mackay et al. The missing link: augmenting biology laboratory notebooks
KR100369213B1 (ko) 대화식 그래픽 사용자 인터페이스에서 윈도우들을중첩시키며 오디오 식별자를 구비한 데이터 프로세서 제어디스플레이 시스템
US5211563A (en) Computer assisted learning support system and processing method therefor
Collins et al. Visualization of uncertainty in lattices to support decision-making.
US11592967B2 (en) Method for automatically indexing an electronic document
CN108140018A (zh) 创作用于基于文本的文档的视觉表示
KR20130092536A (ko) 문서 콘텐츠의 순서화
US20130167016A1 (en) Panoptic Visualization Document Layout
US9524342B2 (en) Panoptic visualization document navigation
KR102351420B1 (ko) 단일 뷰에서의 검색 결과-기반 리스팅 생성
EP2711897B1 (en) Panoptic visualization document differencing
CN105144147A (zh) 检测并重构固定格式文档中的从右到左文本方向、连字和变音符号
CN104571804B (zh) 一种对跨应用程序的文档界面进行关联的方法和系统
US20150147742A1 (en) System and method for assembling educational materials
US20140095987A1 (en) Panoptic Visualization Document Access Control
JP2022128427A (ja) テーブル生成方法及びシステム
Zhang et al. A11yBoard: Making Digital Artboards Accessible to Blind and Low-Vision Users
CN110378378B (zh) 事件检索方法、装置、计算机设备及存储介质
KR101632951B1 (ko) 온라인 학습 콘텐츠로의 변환을 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 매체 및 온라인 학습 콘텐츠로의 변환 방법
US20200026503A1 (en) Systems and methods of diagram transformation
JP2020204855A (ja) キーワード検出装置、及びキーワード検出方法
JP7453731B2 (ja) 半構造化ドキュメントから情報を取り出す方法及びシステム
KR102649429B1 (ko) 반정형 문서로부터 정보를 추출하는 방법 및 시스템
JP7295463B2 (ja) 業務フロー作成支援装置、業務フロー作成支援方法、および、業務フロー作成支援プログラム
US20240127617A1 (en) Systems and methods for automated text labeling

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220218

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230327

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230404

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20230704

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20230817

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20230904

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231002

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231212

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240308