WO2011077648A1 - リアルタイムなカメラ辞書 - Google Patents
リアルタイムなカメラ辞書 Download PDFInfo
- Publication number
- WO2011077648A1 WO2011077648A1 PCT/JP2010/007101 JP2010007101W WO2011077648A1 WO 2011077648 A1 WO2011077648 A1 WO 2011077648A1 JP 2010007101 W JP2010007101 W JP 2010007101W WO 2011077648 A1 WO2011077648 A1 WO 2011077648A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- character
- unit
- information
- dictionary
- display
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
- G06F40/58—Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0412—Digitisers structurally integrated in a display
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/26—Techniques for post-processing, e.g. correcting the recognition result
- G06V30/262—Techniques for post-processing, e.g. correcting the recognition result using context analysis, e.g. lexical, syntactic or semantic context
Abstract
Description
上述したとおり,本発明は,カメラが捉える画像が変化した瞬間に自動的に新しい翻訳語を連続的に表示できるリアルタイムレスポンスが可能なカメラ辞書に関するものである。
しかしながら,カメラによって撮影された全ての単語について,その翻訳語を画面に表示することとすると,コンピュータにおける処理速度が追いつかず,翻訳語の表示が遅れてしまうという改良すべき点があった。つまり,カメラによって単語を撮影し,その単語の翻訳語を表示するまでには,カメラによって撮影された単語を判別し,判別した単語の翻訳語を辞書から抽出し,抽出した翻訳語を表示装置に表示するという処理が行われる。特に,撮影した単語の翻訳語を辞書から抽出する処理は,複雑であり比較的長い所持時間を要するものである。そこで,ユーザが必要とする翻訳語のみを辞書から抽出し,表示することが求められている。
つまり,本発明のさらなる実施形態は,図9において示されるように,
対象物を撮影するための撮影部(11)と,
複数のキャラクタに関連した情報を記憶し,かつ,各キャラクタに関連した情報を難易度に応じて分類した難易度データベースを有する辞書(12)と,
前記撮影部(11)で撮影された対象物の種類を判別するための対象物判別部(13)
と,
前記撮影部(11)で撮影された対象物に含まれるキャラクタを判別するためのキャラ
クタ判別部(14)と,
前記キャラクタ判別部(14)により判別されたキャラクタそれぞれを,前記辞書(12)に含まれる難易度データベースに基づいて解析し,前記キャラクタそれぞれの難易度を決定することにより,前記撮影部(11)により前記対象物を撮影したユーザの語学レベルを判定するレベル判定部(51)と,
前記レベル判定部(51)により判定されたユーザの語学レベルに応じて,前記辞書(12)に含まれる難易度データベースを選択するデータベース選択部(52)と,
前記対象物判別部(13)により判別された対象物の種類及び前記キャラクタ判別部(12)により判別されたキャラクタに基づいて,前記データベース選択部(52)により選択された難易度データベースから,このキャラクタに対応した情報を抽出する情報抽出部(15)と,
前記情報抽出部(15)により抽出されたキャラクタに対応した情報を表示するための
表示部(16)と,
を含む,
情報表示装置である。
ただし,上述した実施形態と重複する箇所については,説明を省略する。従って,本発明のさらなる実施の形態においても,上述した実施の形態と同様の構成を適宜採用することができる。
11 撮影部
12 辞書
13 対象物判別部
14 キャラクタ判別部
15 情報抽出部
16 表示部
17 キャラクタ色判別部
18 キャラクタ背景判別部
19 キャラクタ表示判別部
31 画像処理部
32 画像記憶部
33 判別部
34 画像調整部
35 一時記憶部
41 制御部
42 入力部
43 主記憶部
44 出力部
51 レベル判定部
52 データベース選択部
Claims (7)
- 対象物を撮影するための撮影部(11)と,
複数のキャラクタに関連した情報を記憶する辞書(12)と,
前記撮影部(11)で撮影された対象物の種類を判別するための対象物判別部(13)と,
前記撮影部(11)で撮影された対象物に含まれるキャラクタを判別するためのキャラクタ判別部(14)と,
前記対象物判別部(13)により判別された対象物の種類及び前記キャラクタ判別部(12)により判別されたキャラクタに基づいて,前記辞書(12)から,このキャラクタに対応した情報を抽出する情報抽出部(15)と,
前記情報抽出部(15)により抽出されたキャラクタに対応した情報を表示するための表示部(16)と,
を含む,
情報表示装置。 - 前記情報抽出部(15)は,
前記対象物判別部(13)により判別された対象物の種類及び前記キャラクタ判別部(12)により判別されたキャラクタに基づいて,前記辞書(12)から,前記キャラクタに対応した最適語を1つ抽出するものであり,
前記表示部(16)は,前記最適語を表示するとともに,表示された最適語が誤っている場合に表示された最適語が誤っていることの入力を促す表示を行い,
表示された最適語が誤っていることの入力がなされた場合は,前記情報抽出部(15)は,前記辞書(12)から,前記キャラクタに対応した前記最適語とは別の語を抽出し,
前記表示部(16)は,前記別の語を表示する,
請求項1に記載の情報表示装置。 - 前記対象物判別部(13)は,
前記対象物のうちキャラクタ以外の部分の色情報を用いて,対象物の種類を判別するものであり,
前記辞書(12)は,
対象物の種類に応じたデータベースを有する辞書であり,
前記情報抽出部(15)は,
前記対象物判別部(13)により判別された対象物の種類を用いて前記辞書(12)に含まれる対象物の種類に応じたデータベースを選択し,
前記キャラクタ判別部(12)により判別されたキャラクタに基づいて,選択されたデータベースから,このキャラクタに対応した情報を抽出する,
請求項1に記載の情報表示装置。 - 前記対象物判別部(13)は,
前記撮影部(11)の向きに基づいて,対象物の種類を判別するものであり,
前記辞書(12)は,
対象物の種類に応じたデータベースを有する辞書であり,
前記情報抽出部(15)は,
前記対象物判別部(13)により判別された対象物の種類を用いて前記辞書(12)に含まれる対象物の種類に応じたデータベースを選択し,
前記キャラクタ判別部(12)により判別されたキャラクタに基づいて,選択されたデータベースから,このキャラクタに対応した情報を抽出する,
請求項1に記載の情報表示装置。 - 前記対象物判別部(13)は,
入力情報に基づいて,対象物の種類を判別するものであり,
前記辞書(12)は,
対象物の種類に応じたデータベースを有する辞書であり,
前記情報抽出部(15)は,
前記対象物判別部(13)により判別された対象物の種類を用いて前記辞書(12)に含まれる対象物の種類に応じたデータベースを選択し,
前記キャラクタ判別部(12)により判別されたキャラクタに基づいて,選択されたデータベースから,このキャラクタに対応した情報を抽出する,
請求項1に記載の情報表示装置。 - 前記表示部(16)は,撮影部(11)により撮影された対象物を表示するものであり,
前記キャラクタの色を判別するキャラクタ色判別部(17)と,
前記対象物のうち前記キャラクタの周辺の色を判別するキャラクタ背景判別部(18)と,
前記キャラクタの前記表示部(16)における位置,大きさ,及び角度を判別するキャラクタ表示判別部(19)と,
前記キャラクタに対応した情報を前記表示部(16)に表示される対象物に重畳して表示するための重畳表示制御部(20)と,
を含み,
前記重畳表示制御部(20)は,
前記キャラクタ表示判別部(19)が判別した前記キャラクタの前記表示部(16)における位置,大きさ,及び角度と,前記キャラクタ色判別部(17)が判別した前記キャラクタの色とに基づいて前記キャラクタに対応した情報を表示し,
前記キャラクタ背景判別部(18)が判別した前記対象物のうち前記キャラクタの周辺の色に基づいて,前記キャラクタが前記表示部に表示されないように前記キャラクタの周辺の色を表示する,
請求項1に記載の情報表示装置。 - 前記表示部(16)は,撮影部(11)により撮影された対象物を表示するものであり,
前記表示部(16)は,タッチパネルであり,
前記キャラクタ判別部(14)は,前記タッチパネルからの指示情報に基づいて前記キャラクタを特定して判別する,
請求項1に記載の情報表示装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/497,360 US8903131B2 (en) | 2009-12-25 | 2010-12-07 | Real-time camera dictionary |
EP10838888.5A EP2518605A4 (en) | 2009-12-25 | 2010-12-07 | Real-time camera dictionary |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009293667A JP4759638B2 (ja) | 2009-12-25 | 2009-12-25 | リアルタイムなカメラ辞書 |
JP2009-293667 | 2009-12-25 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2011077648A1 true WO2011077648A1 (ja) | 2011-06-30 |
Family
ID=44195202
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2010/007101 WO2011077648A1 (ja) | 2009-12-25 | 2010-12-07 | リアルタイムなカメラ辞書 |
Country Status (5)
Country | Link |
---|---|
US (1) | US8903131B2 (ja) |
EP (1) | EP2518605A4 (ja) |
JP (1) | JP4759638B2 (ja) |
KR (1) | KR20120069699A (ja) |
WO (1) | WO2011077648A1 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9082035B2 (en) | 2011-08-29 | 2015-07-14 | Qualcomm Incorporated | Camera OCR with context information |
JP5620414B2 (ja) | 2012-01-18 | 2014-11-05 | 株式会社スクウェア・エニックス | ゲーム装置 |
WO2013114988A1 (ja) * | 2012-02-03 | 2013-08-08 | 日本電気株式会社 | 情報表示装置、情報表示システム、情報表示方法およびプログラム |
JP2014174974A (ja) * | 2013-03-07 | 2014-09-22 | Yukinaga Honda | カメラつき電子辞書 |
US8761513B1 (en) * | 2013-03-15 | 2014-06-24 | Translate Abroad, Inc. | Systems and methods for displaying foreign character sets and their translations in real time on resource-constrained mobile devices |
CN105308535A (zh) * | 2013-07-15 | 2016-02-03 | 英特尔公司 | 无需用手的协助 |
JP2015069234A (ja) * | 2013-09-26 | 2015-04-13 | シャープ株式会社 | 表示処理装置、並びにその制御方法および制御プログラム |
JP2015069365A (ja) | 2013-09-27 | 2015-04-13 | シャープ株式会社 | 情報処理装置、および制御プログラム |
JP6234188B2 (ja) | 2013-11-27 | 2017-11-22 | シャープ株式会社 | 翻訳表示装置、翻訳表示方法、および制御プログラム |
JP6364182B2 (ja) | 2013-11-28 | 2018-07-25 | シャープ株式会社 | 文字列認識装置および文字列認識方法 |
US10346465B2 (en) | 2013-12-20 | 2019-07-09 | Qualcomm Incorporated | Systems, methods, and apparatus for digital composition and/or retrieval |
JP6812387B2 (ja) * | 2018-07-02 | 2021-01-13 | キヤノン株式会社 | 画像処理装置及び画像処理方法、プログラム、記憶媒体 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11212992A (ja) * | 1998-01-27 | 1999-08-06 | Sharp Corp | 画像ファイリングシステムおよび画像ファイリングシステムを制御するプログラムを記録した記録媒体 |
JP2000152125A (ja) | 1998-11-09 | 2000-05-30 | Sharp Corp | ヘッドマウントディスプレイ装置 |
JP2003302996A (ja) * | 2002-04-11 | 2003-10-24 | Yamagata Univ Research Institute | 情報処理システム |
JP2005044052A (ja) * | 2003-07-25 | 2005-02-17 | Hitachi Ltd | 携帯型文字認識装置 |
JP2006146454A (ja) * | 2004-11-18 | 2006-06-08 | Sony Corp | 情報変換装置および情報変換方法 |
JP2006309314A (ja) * | 2005-04-26 | 2006-11-09 | Konica Minolta Photo Imaging Inc | 翻訳装置 |
JP2007280166A (ja) | 2006-04-10 | 2007-10-25 | Nikon Corp | 電子辞書 |
JP2009110444A (ja) * | 2007-10-31 | 2009-05-21 | Fujitsu Ltd | 画像認識プログラム、画像認識装置および画像認識方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003010543A (ja) | 2001-06-29 | 2003-01-14 | Square Co Ltd | ビデオゲームのプログラムを記録したコンピュータ読み取り可能な記録媒体及びビデオゲームのプログラム及びビデオゲーム処理方法及びビデオゲーム処理装置 |
JP4591353B2 (ja) * | 2004-01-08 | 2010-12-01 | 日本電気株式会社 | 文字認識装置、移動通信システム、移動端末装置、固定局装置、文字認識方法および文字認識プログラム |
US20060083431A1 (en) * | 2004-10-20 | 2006-04-20 | Bliss Harry M | Electronic device and method for visual text interpretation |
US20080317346A1 (en) * | 2007-06-21 | 2008-12-25 | Microsoft Corporation | Character and Object Recognition with a Mobile Photographic Device |
JP3164748U (ja) * | 2010-10-01 | 2010-12-16 | 株式会社スクウェア・エニックス | 情報処理装置 |
-
2009
- 2009-12-25 JP JP2009293667A patent/JP4759638B2/ja active Active
-
2010
- 2010-12-07 WO PCT/JP2010/007101 patent/WO2011077648A1/ja active Application Filing
- 2010-12-07 EP EP10838888.5A patent/EP2518605A4/en not_active Withdrawn
- 2010-12-07 US US13/497,360 patent/US8903131B2/en active Active
- 2010-12-07 KR KR1020127007995A patent/KR20120069699A/ko not_active Application Discontinuation
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11212992A (ja) * | 1998-01-27 | 1999-08-06 | Sharp Corp | 画像ファイリングシステムおよび画像ファイリングシステムを制御するプログラムを記録した記録媒体 |
JP2000152125A (ja) | 1998-11-09 | 2000-05-30 | Sharp Corp | ヘッドマウントディスプレイ装置 |
JP2003302996A (ja) * | 2002-04-11 | 2003-10-24 | Yamagata Univ Research Institute | 情報処理システム |
JP2005044052A (ja) * | 2003-07-25 | 2005-02-17 | Hitachi Ltd | 携帯型文字認識装置 |
JP2006146454A (ja) * | 2004-11-18 | 2006-06-08 | Sony Corp | 情報変換装置および情報変換方法 |
JP2006309314A (ja) * | 2005-04-26 | 2006-11-09 | Konica Minolta Photo Imaging Inc | 翻訳装置 |
JP2007280166A (ja) | 2006-04-10 | 2007-10-25 | Nikon Corp | 電子辞書 |
JP2009110444A (ja) * | 2007-10-31 | 2009-05-21 | Fujitsu Ltd | 画像認識プログラム、画像認識装置および画像認識方法 |
Non-Patent Citations (1)
Title |
---|
See also references of EP2518605A4 |
Also Published As
Publication number | Publication date |
---|---|
US20120250943A1 (en) | 2012-10-04 |
EP2518605A4 (en) | 2018-01-17 |
US8903131B2 (en) | 2014-12-02 |
JP2011134144A (ja) | 2011-07-07 |
EP2518605A1 (en) | 2012-10-31 |
JP4759638B2 (ja) | 2011-08-31 |
KR20120069699A (ko) | 2012-06-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4759638B2 (ja) | リアルタイムなカメラ辞書 | |
CN109271945B (zh) | 一种在线实现作业批改的方法和系统 | |
US7283983B2 (en) | Computer and vision-based augmented interaction in the use of printed media | |
US7712028B2 (en) | Using annotations for summarizing a document image and itemizing the summary based on similar annotations | |
CN111160333A (zh) | Ar眼镜及其文本翻译方法、装置和计算机可读存储介质 | |
TW201322049A (zh) | 電子設備及其文本導讀方法 | |
JP4790080B1 (ja) | 情報処理装置,情報表示方法,情報表示プログラム,及び記録媒体 | |
KR100615058B1 (ko) | 휴대 정보 단말 장치의 문자인식에 있어서의 처리 대상 선택 방법 및 휴대 정보 단말 장치 | |
US5887086A (en) | Image pick-up apparatus | |
US20130082985A1 (en) | Content display apparatus, and content display method | |
CA3138285A1 (en) | System and method of extracting information in an image containing file for enhanced utilization and presentation | |
CN111680177A (zh) | 数据搜索方法及电子设备、计算机可读存储介质 | |
JP2009123020A (ja) | 情報処理装置、情報処理方法、プログラム及び記憶媒体 | |
JP3164748U (ja) | 情報処理装置 | |
JP4923134B2 (ja) | リアルタイムなカメラ辞書 | |
JP2003345335A (ja) | 読取補助画像表示装置 | |
JP6399371B1 (ja) | 情報処理装置、情報処理装置の制御方法及びプログラム | |
Hirayama | A book reading magnifier for low vision persons on smartphones and tablets | |
JP4474231B2 (ja) | 文書リンク情報取得システム | |
US11064094B2 (en) | Image forming apparatus for forming image represented by image data on recording paper sheet | |
JP6408055B2 (ja) | 情報処理装置、方法及びプログラム | |
US11442981B2 (en) | Information providing device, information providing method, and recording medium with combined images corresponding to selected genre | |
JP5605208B2 (ja) | 辞書機能を備えた電子機器およびプログラム | |
JP2017054167A (ja) | 情報端末装置およびプログラム | |
JP7231529B2 (ja) | 情報端末装置、サーバ及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 10838888 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 20127007995 Country of ref document: KR Kind code of ref document: A |
|
WWE | Wipo information: entry into national phase |
Ref document number: 2010838888 Country of ref document: EP |
|
WWE | Wipo information: entry into national phase |
Ref document number: 13497360 Country of ref document: US |
|
NENP | Non-entry into the national phase |
Ref country code: DE |