JP7440256B2 - 拡張現実の文書処理 - Google Patents
拡張現実の文書処理 Download PDFInfo
- Publication number
- JP7440256B2 JP7440256B2 JP2019227023A JP2019227023A JP7440256B2 JP 7440256 B2 JP7440256 B2 JP 7440256B2 JP 2019227023 A JP2019227023 A JP 2019227023A JP 2019227023 A JP2019227023 A JP 2019227023A JP 7440256 B2 JP7440256 B2 JP 7440256B2
- Authority
- JP
- Japan
- Prior art keywords
- interest
- bundle
- point
- top page
- physical document
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003190 augmentative effect Effects 0.000 title description 3
- 238000003384 imaging method Methods 0.000 claims description 26
- 238000000034 method Methods 0.000 claims description 21
- 230000000007 visual effect Effects 0.000 claims description 19
- 230000002452 interceptive effect Effects 0.000 claims description 7
- 238000012015 optical character recognition Methods 0.000 claims description 5
- 230000000694 effects Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 239000011521 glass Substances 0.000 description 4
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/5846—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using extracted text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/93—Document management systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Library & Information Science (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Character Discrimination (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Studio Devices (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
Description
前記物理的文書は複数の物理的文書の束内のページであり、
前記デジタルコピーは前記束内の全てのページを含み、
前記コンピュータプロセッサーは、更に
前記束の最上位ページを撮像し、
前記関心点が前記最上位ページの表面上にあると判定し、
プロジェクターを用いて、前記最上位ページの表面上に、前記視覚補助要素を投影して前記最上位ページの表面上にある関心点を強調表示するシステムであり、
前記コンピュータプロセッサーは、更に
前記最上位ページを撮像し、前記関心点が前記最上位ページ上にないと判定し、
前記最上位ページを前記束のデジタルコピー内の前記関心点を含むページと比較し、
前記比較に基づいて、前記束を前記関心点の位置までトラバースせよと、前記トラバースする前記束における割合又はページ数が含まれる、更新された指示を出力するシステム。
Claims (14)
- コンピューターを用いて、物理的文書の画像を処理し、前記物理的文書のデジタルサーチを可能にする方法であって、前記コンピューターが、
前記物理的文書のデジタルコピーを取得する工程と、
前記物理的文書内の関心点をサーチせよとの指示を受領する工程と、
前記物理的文書を撮像し、前記関心点が前記物理的文書の表面上にあると判定する工程と、
プロジェクターを用いて、前記物理的文書の表面上に、前記関心点に物理的に重なる視覚補助要素を投影して前記物理的文書の表面上にある関心点を強調表示する工程と、を含む方法であり、
前記物理的文書は複数の物理的文書の束内のページであり、
前記デジタルコピーは前記束内の全てのページを含み、
前記コンピューターが、
前記束の最上位ページを撮像する工程と、
前記関心点が前記最上位ページの表面上にあると判定する工程と、
プロジェクターを用いて、前記最上位ページの表面上に、前記視覚補助要素を投影して前記最上位ページの表面上にある関心点を強調表示する工程と、を更に含む方法であり、
前記コンピューターが、
前記最上位ページを撮像し、前記関心点が前記最上位ページ上にないと判定する工程と、
前記最上位ページを前記束のデジタルコピー内の前記関心点を含むページと比較する工程と、
前記比較に基づいて、前記束を前記関心点の位置までトラバースせよと、前記トラバースする前記束における割合又はページ数が含まれる、更新された指示を出力する工程と、を更に含む方法。 - 前記強調表示される関心点は、前記束内で最初に現れる関心点であり、
前記コンピューターが、
前記束内で2番目に現れる関心点をサーチせよとの指示を受領する工程と、
前記2番目に現れる関心点を探す前記束のデジタルコピーのサーチに基づいて、前記束を前記2番目に現れる関心点の位置までトラバースせよとの指示を出力する工程と、
前記束を撮像し、前記2番目に現れる関心点が前記束の最上位ページの表面上にあると判定する工程と、
プロジェクターを用いて、前記最上位ページの表面上に、前記視覚補助要素を投影して前記最上位ページの表面上にある2番目に現れる関心点を強調表示する工程と、を更に含む請求項1に記載の方法。 - 前記物理的文書は複数の物理的文書の束内のページであり、
前記物理的文書のデジタルコピーを取得する工程は、
前記コンピューターが、
前記束の各ページを撮像してデジタル化する工程と、
前記撮像されてデジタル化された束を前記複数の物理的文書のデジタルコピーとしてメモリに記憶する工程と、
前記束の最上位ページを撮像する工程と、
前記束の前記最上位ページを前記束の前記デジタルコピーのページと比較する工程と、
前記比較に基づいて、前記束の前記最上位ページが前記束のデジタルコピーのページの一つと合致すると判定する工程と、
前記判定に基づいて、前記メモリから前記束のデジタルコピーを取り出す工程と、を更に含む請求項1又は2に記載の方法。 - 前記物理的文書内の関心点をサーチせよとの指示は、音声コマンドとしてユーザーから受領される請求項1から3のいずれか一項に記載の方法。
- 前記束を前記関心点の位置までトラバースせよとの指示は、プロジェクターにより、前記複数の物理的文書から所定の距離内の表面上に投影される請求項1から4のいずれか一項に記載の方法。
- 前記束を前記関心点の位置までトラバースせよとの指示は、前記関心点が前記最上位ページ上にあると判定されるまで、継続して投影され、更新される請求項1から5のいずれか一項に記載の方法。
- 前記物理的文書は、イメージャーや前記プロジェクターを備えるインタラクティブキャプチャを伴う投影装置(PIC装置)を用いて撮像され、
前記デジタルコピーをサーチするのに光学的文字認識及び非テキスト内容分析が用いられる請求項1から6のいずれか一項に記載の方法。 - 前記関心点は、テキスト文字、非テキスト文字、テキストの列、画像、グラフ及び表からなるグループより選択されたものである請求項1から7のいずれか一項に記載の方法。
- 物理的文書の画像を処理し、前記物理的文書のデジタルサーチを可能にするためのプログラムを格納した、非一時的なコンピューター読取り可能な媒体(CRM)において、前記プログラムは、コンピューターに
前記物理的文書のデジタルコピーを取得させ、
前記物理的文書内で関心点をサーチせよとの指示を受領させ、
前記物理的文書を撮像して前記関心点が前記物理的文書の表面上にあると判定させ、
プロジェクターを用いて、前記物理的文書の表面上に、前記関心点に物理的に重なる視覚補助要素を投影して前記物理的文書の表面上にある関心点を強調表示させるプログラムであり、
前記物理的文書は複数の物理的文書の束内のページであり、
前記デジタルコピーは前記束内の全てのページを含み、
前記コンピューター読取り可能なプログラムコードは、コンピューターに更に
前記束の最上位ページを撮像させ、
前記関心点が前記最上位ページの表面上にあると判定させ、
プロジェクターを用いて、前記最上位ページの表面上に、前記視覚補助要素を投影して前記最上位ページの表面上にある関心点を強調表示させるプログラムであり、
前記プログラムは、コンピューターに更に
前記最上位ページを撮像させ、前記関心点が前記最上位ページ上にないと判定させ、
前記最上位ページを前記束のデジタルコピー内の前記関心点を含むページと比較させ、
前記比較に基づいて、前記束を前記関心点の位置までトラバースせよと、前記トラバースする前記束における割合又はページ数が含まれる、更新された指示を出力させるプログラム。 - 前記強調表示される関心点は、前記束内で最初に現れる関心点であり、
前記プログラムは、コンピューターに更に
前記束内で2番目に現れる関心点をサーチせよとの指示を受領させ、
前記2番目に現れる関心点を探す前記束のデジタルコピーのサーチに基づいて、前記束を前記2番目に現れる関心点の位置までトラバースせよとの指示を出力させ、
前記束を撮像させ、前記2番目に現れる関心点が前記束の最上位ページの表面上にあると判定させ、
プロジェクターを用いて、前記最上位ページの表面上に、前記視覚補助要素を投影して前記最上位ページの表面上にある2番目に現れる関心点を強調表示させる請求項9に記載のプログラム。 - 前記物理的文書は、イメージャーや前記プロジェクターを備えるインタラクティブキャプチャを伴う投影装置(PIC装置)を用いて撮像され、
前記デジタルコピーをサーチするのに光学的文字認識及び非テキスト内容分析が用いられ、
前記関心点は、テキスト文字、非テキスト文字、テキストの列、画像、グラフ及び表からなるグループより選択されたものである請求項9又は10に記載のプログラム。 - 物理的文書の画像を処理し、前記物理的文書のデジタルサーチを可能にするためのシステムであって、前記システムは
メモリと、
前記メモリに接続されたコンピュータプロセッサーを備え、
前記コンピュータプロセッサーは、
前記物理的文書のデジタルコピーを取得し、
前記物理的文書内で関心点をサーチせよとの指示を受領し、
前記物理的文書を撮像し、前記関心点が前記物理的文書の表面上にあると判定し、
プロジェクターを用いて、前記物理的文書の表面上に、前記関心点に物理的に重なる視覚補助要素を投影して前記物理的文書の表面上にある関心点を強調表示するシステムであり、
前記物理的文書は複数の物理的文書の束内のページであり、
前記デジタルコピーは前記束内の全てのページを含み、
前記コンピュータプロセッサーは、更に
前記束の最上位ページを撮像し、
前記関心点が前記最上位ページの表面上にあると判定し、
プロジェクターを用いて、前記最上位ページの表面上に、前記視覚補助要素を投影して前記最上位ページの表面上にある関心点を強調表示するシステムであり、
前記コンピュータプロセッサーは、更に
前記最上位ページを撮像し、前記関心点が前記最上位ページ上にないと判定し、
前記最上位ページを前記束のデジタルコピー内の前記関心点を含むページと比較し、
前記比較に基づいて、前記束を前記関心点の位置までトラバースせよと、前記トラバースする前記束における割合又はページ数が含まれる、更新された指示を出力するシステム。 - 前記強調表示される関心点は、前記束内で最初に現れる関心点であり、
前記コンピュータプロセッサーは、更に
前記束内で2番目に現れる関心点をサーチせよとの指示を受領し、
前記2番目に現れる関心点を探す前記束のデジタルコピーのサーチに基づいて、前記束を前記2番目に現れる関心点の位置までトラバースせよとの指示を出力し、
前記束を撮像し、前記2番目に現れる関心点が前記束の最上位ページの表面上にあると判定し、
プロジェクターを用いて、前記最上位ページの表面上に、前記視覚補助要素を投影して前記最上位ページの表面上にある2番目に現れる関心点を強調表示する請求項12に記載のシステム。 - 前記物理的文書は、イメージャーや前記プロジェクターを備えるインタラクティブキャプチャを伴う投影装置(PIC装置)を用いて撮像され、
前記PIC装置は前記コンピュータプロセッサーに制御され、
前記デジタルコピーをサーチするのに光学的文字認識及び非テキスト内容分析が用いられ、
前記関心点は、テキスト文字、非テキスト文字、テキストの列、画像、グラフ及び表から
なるグループより選択されたものである請求項12又は13に記載のシステム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/235,337 US11080547B2 (en) | 2018-12-28 | 2018-12-28 | Augmented reality document processing |
US16/235,337 | 2018-12-28 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2020149668A JP2020149668A (ja) | 2020-09-17 |
JP2020149668A5 JP2020149668A5 (ja) | 2022-07-28 |
JP7440256B2 true JP7440256B2 (ja) | 2024-02-28 |
Family
ID=71124018
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019227023A Active JP7440256B2 (ja) | 2018-12-28 | 2019-12-17 | 拡張現実の文書処理 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11080547B2 (ja) |
JP (1) | JP7440256B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114969464B (zh) * | 2021-10-15 | 2023-05-09 | 淮阴师范学院 | 基于毫米波通信的智能可视化显示系统 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120008820A1 (en) | 2010-07-08 | 2012-01-12 | Kahle Todd A | Microform Word Search Method and Apparatus |
JP2012043400A (ja) | 2010-08-16 | 2012-03-01 | Fuji Xerox Co Ltd | 情報処理システム、情報処理方法、およびコンピュータプログラム |
JP2013046151A (ja) | 2011-08-23 | 2013-03-04 | Ricoh Co Ltd | プロジェクタ、投影システム及び情報検索表示方法 |
JP2013254437A (ja) | 2012-06-08 | 2013-12-19 | Pfu Ltd | 画像処理装置、画像読取装置、画像処理方法及び画像処理プログラム |
JP2015011586A (ja) | 2013-06-28 | 2015-01-19 | キヤノン株式会社 | 情報提示装置、情報提示システム、情報提示方法及びプログラム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6260044B1 (en) * | 1998-02-04 | 2001-07-10 | Nugenesis Technologies Corporation | Information storage and retrieval system for storing and retrieving the visual form of information from an application in a database |
US9501467B2 (en) * | 2007-12-21 | 2016-11-22 | Thomson Reuters Global Resources | Systems, methods, software and interfaces for entity extraction and resolution and tagging |
WO2014027433A1 (ja) * | 2012-08-15 | 2014-02-20 | 日本電気株式会社 | 情報提供装置、情報提供方法、及び、プログラム |
WO2014126553A1 (en) * | 2013-02-13 | 2014-08-21 | Hewlett-Packard Development Company, L.P. | Paper feeding for an imaging system |
US9977785B2 (en) * | 2014-01-03 | 2018-05-22 | Legistek Corporation | Method and computer-readable medium for presenting displayable content to an audience |
WO2018107104A1 (en) * | 2016-12-08 | 2018-06-14 | ViaTech Publishing Solutions, Inc. | System and method to facilitate content distribution |
-
2018
- 2018-12-28 US US16/235,337 patent/US11080547B2/en active Active
-
2019
- 2019-12-17 JP JP2019227023A patent/JP7440256B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120008820A1 (en) | 2010-07-08 | 2012-01-12 | Kahle Todd A | Microform Word Search Method and Apparatus |
JP2012043400A (ja) | 2010-08-16 | 2012-03-01 | Fuji Xerox Co Ltd | 情報処理システム、情報処理方法、およびコンピュータプログラム |
JP2013046151A (ja) | 2011-08-23 | 2013-03-04 | Ricoh Co Ltd | プロジェクタ、投影システム及び情報検索表示方法 |
JP2013254437A (ja) | 2012-06-08 | 2013-12-19 | Pfu Ltd | 画像処理装置、画像読取装置、画像処理方法及び画像処理プログラム |
JP2015011586A (ja) | 2013-06-28 | 2015-01-19 | キヤノン株式会社 | 情報提示装置、情報提示システム、情報提示方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2020149668A (ja) | 2020-09-17 |
US20200210744A1 (en) | 2020-07-02 |
US11080547B2 (en) | 2021-08-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109215017B (zh) | 图片处理方法、装置、用户终端、服务器及存储介质 | |
JP2017130929A (ja) | 撮像装置により取得された文書画像の補正方法及び補正装置 | |
JP2010073114A (ja) | 画像情報検索装置、画像情報検索方法およびそのコンピュータプログラム | |
US10902277B2 (en) | Multi-region detection for images | |
TW201501016A (zh) | 資料搜尋方法與其電子裝置 | |
CN105607825B (zh) | 用于图像处理的方法和设备 | |
US8532431B2 (en) | Image search apparatus, image search method, and storage medium for matching images with search conditions using image feature amounts | |
JP7440256B2 (ja) | 拡張現実の文書処理 | |
US9864750B2 (en) | Objectification with deep searchability | |
US9798724B2 (en) | Document discovery strategy to find original electronic file from hardcopy version | |
US20150138077A1 (en) | Display system and display controll device | |
US20170344820A1 (en) | Method and system of identifying fillable fields of an electronic form | |
JP7398945B2 (ja) | 拡張現実の文書編集方法、プログラム及びシステム | |
CN113273167B (zh) | 数据处理设备、方法和存储介质 | |
US20170053003A1 (en) | System, method for processing information, and information terminal | |
KR20140134844A (ko) | 객체 기반 사진 촬영 방법 및 장치 | |
JP7019825B2 (ja) | 画像分類装置及び方法 | |
JP2014204268A (ja) | 画像処理装置および画像処理プログラム | |
US10976721B2 (en) | Information processing apparatus, method, and medium to generate management three-dimensional model data | |
US9912834B2 (en) | Document camera device and cutout assistance method | |
JP2017142690A (ja) | 情報処理装置及びその制御方法 | |
WO2020145164A1 (ja) | 画像処理装置、画像処理プログラム、及び画像処理方法 | |
JP2021144302A (ja) | 情報処理装置及び情報処理プログラム | |
JP2023020180A (ja) | 画像管理装置、画像管理方法、及びプログラム | |
JP2022066137A (ja) | 情報処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220720 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220720 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230728 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230815 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231114 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240206 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240215 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7440256 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |