JP2004038840A - メモ画像管理装置、メモ画像管理システムおよびメモ画像管理方法 - Google Patents

メモ画像管理装置、メモ画像管理システムおよびメモ画像管理方法 Download PDF

Info

Publication number
JP2004038840A
JP2004038840A JP2002198367A JP2002198367A JP2004038840A JP 2004038840 A JP2004038840 A JP 2004038840A JP 2002198367 A JP2002198367 A JP 2002198367A JP 2002198367 A JP2002198367 A JP 2002198367A JP 2004038840 A JP2004038840 A JP 2004038840A
Authority
JP
Japan
Prior art keywords
memo
memo image
image
information
character information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002198367A
Other languages
English (en)
Inventor
Katsuto Fujimoto
藤本 克仁
Atsuko Obara
小原 敦子
Satoshi Naoi
直井 聡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2002198367A priority Critical patent/JP2004038840A/ja
Priority to US10/465,596 priority patent/US7286722B2/en
Priority to CNB031453007A priority patent/CN1226693C/zh
Publication of JP2004038840A publication Critical patent/JP2004038840A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content

Landscapes

  • Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

【課題】大量に蓄積されたメモ画像を管理し、検索可能なメモ画像管理装置、メモ画像管理システムおよびメモ画像管理方法を提供する。
【解決手段】メモ画像を交換および表示可能な携帯端末と接続されることができるメモ画像管理装置100は、メモ画像を管理する管理サーバ2と、メモ画像の文字情報を認識する文字情報認識サーバ3とを備え、管理サーバ2は、メモ画像を蓄積するメモ画像蓄積部21と、要求に応じて蓄積されているメモ画像から所定の画像の検索を行うメモ画像検索部22とを備え、文字情報認識サーバ3はメモ画像から文字情報を認識して抽出する文字情報認識部3を備える。
【選択図】    図1

Description

【0001】
【発明の属する技術分野】
本発明は、メモ画像管理装置、メモ画像管理システムおよびメモ画像管理方法に関し、特に携帯電話、PHS等の携帯端末(情報機器)から入手したメモ画像を管理するためのものに関する。
【0002】
【従来の技術】
近年、デジタル画像の送受信機能を有する携帯電話やPHS等の携帯端末が普及している。さらに、このような情報機器において、デジタルカメラを内蔵したり、あるいは小型のデジタルカメラと接続可能なインターフェースを備えているものが知られる。携帯端末に内蔵され、あるいは携帯端末と接続可能なデジタルカメラは、種々の場面で使用されている。特に、周囲に存在する情報をメモとして活用する用途が知られている。
【0003】
例えば、第1の従来技術として、特開平10−276274号公報には、画像データ中の文字列情報を文字認識により取得する機能を持つ電話装置が記載されている。
【0004】
また、第2の従来技術として、特開平5−22555公報および特開平6−339003号公報には、端末装置に備えられた文字認識機能により、取得した画像データ中から電話番号などの宛先情報を抽出し、自動的に発信する機能を有する通信システムが開示されている。
【0005】
さらに、第3の従来技術として、特開平11−205515号公報(通信システム及びその制御方法、コンピュータ可読メモリ)および特開平10−210167号公報(通信システムのデータ登録方法、通信システム及び通信装置)には、携帯電話とホスト局との間の画像のやりとりを可能とし、ホスト局に文字認識機能を持たせ、画像中の文字列情報を抽出できることが開示されている。
【0006】
【発明が解決しようとする課題】
第1の従来技術は、携帯端末等をスタンドアロンで用いるものであり、従って、蓄積・処理できるメモ画像の量は小さく抑えられてしまう。また、この装置では、ユーザが収集したメモ画像を第三者により広く活用するには困難を伴う。即ち、この装置を用いて他のユーザ間でメモ画像を交換する場合には、交換相手に1対1での通信を行わなければならず、複数のユーザ間で、同時にメモ画像を交換することはできず、メモ画像の交換を広く一般に行うことはできない。
【0007】
第2の従来技術においては、これらのシステムでは、取扱える情報が宛先情報に限定されてしまい、その他の情報、例えばメモの主要な目的を表すタイトルやメモに書かれているホームページのURL、その他の情報を抽出・活用したり、登録されたメモ画像を検索することができない。
【0008】
第3の従来技術では、メモ画像の管理を想定していないため、第1の従来技術と同様、複数ユーザ間でのメモ画像の交換、蓄積された大量のメモ画像の検索等を行うことができず、メモ画像の利用を広く一般的に行うことができない。
【0009】
本発明は、上述した課題を解決するためになされたものであり、大量に蓄積されたメモ画像を管理すると共に、そこから所定のメモ画像や所定の情報を容易に検索することができるメモ画像管理装置、メモ画像管理システムおよびメモ画像管理方法を提供することを目的としている。
【0010】
【課題を解決するための手段】
上記課題を解決する本発明は、メモ画像を扱うことができる情報機器(例えば携帯端末)と接続されることができるメモ画像管理装置であって、メモ画像を蓄積するメモ画像蓄積部と、前記情報機器または前記情報機器以外の端末からの要求に応じて蓄積されているメモ画像から所定の画像の検索を行うメモ画像検索部と、メモ画像から文字情報を認識して抽出する文字情報認識部と、前記メモ画像検索部により検索されたメモ画像又は前記文字情報認識部により抽出された文字情報を前記情報機器に配信するメモ画像配信部を備えることを特徴とするものである。このように構成することによって、携帯電話やPHS等の携帯端末(情報機器)で入手したメモ画像を多量に蓄積することが可能となり、携帯端末又はコンピュータシステム等の他の情報機器端末より、大量に蓄積されたメモ画像を管理し、検索することが可能となる。
【0011】
また、本発明のメモ画像管理装置において、前記メモ画像蓄積部は、情報機器のユーザ毎にメモ画像を分類して蓄積することを特徴とするものである。
このように構成することによって、ユーザ毎にメモ画像を蓄積でき、ユーザにとって使い勝手に優れたものとなる。ユーザ毎に管理するための一例としては、例えば携帯端末の電話番号毎に管理するようにする。
【0012】
また、本発明のメモ画像管理装置において、前記メモ画像蓄積部は、前記文字情報認識部により抽出された文字情報に基づいて、前記メモ画像を分類して蓄積することを特徴とするものである。このように構成することによって、蓄積されたメモ画像の検索を迅速、且つ容易に行うことが可能となる。
【0013】
さらに、本発明のメモ画像管理装置において、前記文字情報認識部により抽出された文字情報をメモ画像に対応させて記憶する文字情報記憶部を備えることを特徴とするものである。このように構成することによって、メモ画像を文字情報に対応させて管理することが可能となる。なお、文字情報記憶部は、実施の形態において、メモ画像蓄積部により構成されている。
【0014】
また、本発明のメモ画像管理装置においては、所定のメモ画像における文字情報に基づいて、インターネットのホームページにアクセスし、ホームページの情報をメモ画像として抽出するインターネット検索機能部を備え、前記メモ画像蓄積部は前記ホームページの情報をメモ画像として蓄積することを特徴とするものである。このように構成することによって、ユーザは1つのメモ画像からそれに関連する種々の情報を容易に取り出すことが可能となる。
【0015】
なお、本発明のメモ画像管理装置において、メモ画像の中から図形情報、表情報、又は写真情報を抽出することができる手段を備えるようにすることもできる。このように構成することによって、ユーザは、文字情報だけでなく、図形情報、表情報又は写真情報等の種々の関連情報を管理することが可能となる。
【0016】
また、本発明のメモ画像管理装置において、所定のメモ画像を二値化またはサムネールファイル化して圧縮画像を生成する画像圧縮手段を備えていることを特徴とするものである。このように構成することによって、ユーザは、メモ画像管理装置に蓄積したメモ情報を素早く認識することが可能となり、これらのメモ情報から必要な情報を素早く取り出すことが可能となる。
【0017】
さらに、本発明のメモ画像管理装置において、前記文字情報認識部は、メモ画像における文字情報の認識結果に基づいて文字認識候補ラティスを作成する機能を備えていることを特徴とするものである。このように構成することによって、文字認識した画像から正確な文字情報を得ることが可能となる。
【0018】
また、本発明のメモ画像管理装置において、前記メモ画像蓄積部と前記メモ画像検索部と前記メモ画像配信部とは、メモ画像を管理する管理サーバにより構成され、前記文字情報認識部は、前記管理サーバと通信回線を介して接続可能とされたメモ画像認識サーバにより構成されることを特徴とするものである。このように構成することによって、メモ画像管理装置の負荷を軽減することが可能となる。
【0019】
また、本発明のメモ画像管理システムは、メモ画像を扱うことができる情報機器と、前記情報機器と通信回線を介して接続可能とされ、前記情報機器からのメモ画像を交換、蓄積および検索可能なサーバであって、メモ画像を蓄積するメモ画像蓄積部と、前記情報機器または前記情報機器以外の端末からの要求に応じて蓄積されているメモ画像から所定の画像の検索を行うメモ画像検索部と、メモ画像から文字情報を認識して抽出する文字情報認識部と、前記メモ画像検索部により検索されたメモ画像又は前記文字情報認識部により抽出された文字情報を前記情報機器に配信するメモ画像配信部を有するサーバとを備えることを特徴とするものである。このように構成することによって、携帯電話やPHS等の情報機器で入手したメモ画像を多量に蓄積することが可能となり、携帯端末又はコンピュータシステム等の他の端末より、大量に蓄積されたメモ画像を管理し、検索することが可能となる。
【0020】
なお、前記サーバは、前記メモ画像蓄積部と前記メモ画像検索部と前記メモ画像配信部とを有する管理サーバと、前記管理サーバに通信回線を介して接続され、前記文字情報認識部を有するメモ画像認識サーバにより構成されることを特徴とすることができる。このように構成することによって、各サーバの負荷を軽減することが可能となる。
【0021】
また、本発明のメモ画像管理システムにおいて、前記情報機器はテキスト情報を含む画像をメモ画像として取得可能な光学的撮像手段を備えることを特徴とすることもできる。このように構成することによって情報機器から必要なメモ画像情報を直ちにメモ画像管理システムに蓄積することが可能となる。なお、本発明においてメモ画像として取得可能な光学的撮像手段とは、CMOSカメラ、CCDカメラ等のデジタルカメラ又はデジタルビデオカメラやイメージスキャナ等を含むことを意味し、情報機器が光学的撮像手段を有するとは、情報機器にかかる光学的撮像手段が内蔵されていること、および情報機器が端末自身の有するインターフェースを介して光学的撮像手段と接続されている状態を意味する。
【0022】
また、前記情報機器は、メモ画像認識部で認識された文字情報を取得し、取得した文字情報を修正または変更する文字情報修正または変更手段を有しており、修正または変更した文字情報を前記サーバに送信し、前記サーバは修正または変更された文字情報を修正または変更文字情報として蓄積することを特徴とすることもできる。このように構成することにより、文字認識の結果得られた文字情報の誤りを訂正するかメモ画像中に存在する不要情報を削除することが可能となり、正確な情報および必要な情報を管理することが可能となる。
【0023】
また、本発明のメモ画像管理システムにおいて、前記サーバは、前記情報機器より受信した前記修正または変更した文字情報をキーワードとして蓄積されているメモ画像集合を検索し、検索した結果を文字列情報またはメモ画像集合として前記情報機器に送信することを特徴とすることができる。このように構成することによって、蓄積したメモ画像の集合の表示に際し、それらの並び順序を定めたり、テキスト情報による検索を行うことが可能となり、携帯電話によりメモ画像を活用しようとするユーザにとって、使い勝手に優れたメモ画像活用環境を実現できる。
【0024】
本発明のメモ画像管理システムにおいて、前記情報機器は、前記サーバから取得したメモ画像からの文字情報をパラメータとして、所定の発信、又はURL接続、あるいはメモリ登録を行うことを特徴とすることもできる。
このように構成することによって、メモ画像より入手した情報をより便利に活用することが可能となる。なお、前記情報機器は、メモ画像と共に前記メモ画像の種類情報を送信する機能を有することを特徴とすることもできる。このように構成することによって、ユーザが検索する検索情報を容易に設定可能となる。さらに、前記情報機器は、メモ画像と共に、前記メモ画像に関連するキー項目を前記サーバに送信することを特徴とすることもできる。このように構成することによって、ユーザが検索する検索情報を容易に設定可能となる。
【0025】
また、本発明は、メモ画像を扱うことができる情報機器と、前記情報機器と通信回線を介して接続可能とされ、前記情報機器から送信されたメモ画像の交換、蓄積および検索を行うことが可能な管理サーバとを備えてメモ画像を管理するメモ画像管理方法であって、前記情報機器からメモ画像を送信する送信ステップと、送信されたメモ画像を蓄積するメモ画像蓄積ステップと、前記情報機器または前記情報機器以外の端末からの要求に応じて蓄積されているメモ画像から所定の画像の検索を行う検索ステップと、前記メモ画像蓄積ステップ又は前記検索ステップの前後において、必要に応じてメモ画像から文字情報を認識して抽出する文字情報認識ステップと、検索されたメモ画像又は前記文字情報認識部により抽出された文字情報を前記情報機器に配信する配信ステップを備えてなるものである。このように構成することによって、携帯電話やPHS等の携帯端末で入手したメモ画像を多量に蓄積することが可能となり、携帯端末又はコンピュータシステム等の他の端末より、大量に蓄積されたメモ画像を管理し、検索することが可能となる。
【0026】
なお、メモ画像の管理サーバへの送信時に、付加的検索情報を同時に送信することによって、サーバに蓄積されたメモ画像をより容易に検索することが可能となる。この付加的情報は、メモ画像の撮影場所等の位置情報、メモ画像の公開条件、メモ画像の種類、送信日時のいずれかとすることができる。このような情報を情報機器から管理サーバに送信することによって、管理サーバに蓄積したメモ画像の検索をより容易に行うことが可能となる。
【0027】
【発明の実施の形態】
以下、本発明の実施の形態を添付図面に従って説明する。
実施の形態1.
本発明のメモ画像管理装置およびメモ画像管理システムについて説明する。
図1は、本発明のメモ画像管理装置及びメモ画像管理システムを示す概略図であり、図2は、本発明で管理するメモ画像の一例を示す図であり、図3は、携帯端末における検索/検索情報設定画面の一例を示す図であり、図4は、管理サーバにおけるメモ画像管理画面の一例を示す図である。
【0028】
図1において、本発明のメモ画像管理装置100は、情報機器である携帯端末1にインターネット等の通信回線を介して接続可能なサーバであって、管理サーバ2と文字情報認識サーバ3とにより構成されている。管理サーバ2は、メモ画像を蓄積するメモ画像蓄積部(DB)21と、携帯端末1または携帯端末1以外の図示しない端末からの要求に応じて、メモ画像蓄積部21に蓄積されているメモ画像から所定の画像の検索を行うメモ画像検索部22と、データの送受信を行い、また検索結果を配信する送受信部(配信部)23とを備えている。なお、上記メモ画像管理装置100と携帯端末1とで本発明のメモ画像管理システムを構成している。
【0029】
文字情報認識サーバ3は、認識辞書を記憶した辞書データベース(DB)31と、認識辞書を用いてメモ画像から文字情報を認識して抽出する文字情報認識部32と、管理サーバ2及び携帯端末1とメモ画像を含むデータの送受信を行う送受信部(配信部)33とを備えている。
【0030】
なお、メモ画像とは、文字情報等を含む広告、看板等をディジタルカメラ等の光学的撮像手段により撮像してなる電子データであって、例えばJPG、PCX、GIF、TIF、BMP等の携帯端末で表示可能な画像データである。このメモ画像には、文字情報以外の情報、例えば地図情報、不動産間取り図等の図形データ、写真、イラスト等のデータを含んでもよい。
【0031】
メモ画像を蓄積するメモ画像蓄積部21は、ハードディスク、DVDRAM、DVDR、CD−R、CD−RW、MO等の電子データの蓄積および書換えが可能な保存手段であり、後述する検索操作により対応するメモ画像または文字情報を抽出可能にメモ画像や文字情報を蓄積することが可能である。
【0032】
文字情報認識部32は、画像データを文字情報(コード情報)に変換するための従来公知の光学文字認識ソフトウェアとこの光学文字認識を実行するためのハードウェアから構成されている。なお、文字情報認識部32は、比較的大容量の文字認識用の辞書を認識辞書として保持している。さらに、後述するようにこの文字情報認識部32は、文字認識結果をラティス表示して訂正することが可能な構成とすることもできる。なお、メモ画像蓄積部21や辞書データベース31はそれぞれのサーバ2,3と別個独立に設けるようにしても良いことは言うまでもない。
【0033】
管理サーバ2の送受信部23は、携帯端末1または図示しないコンピュータシステム、Lモード対応固定電話等のその他の端末からの要求に応じて検索した結果を携帯端末1を含む所定の端末に配信することができるモデム等の通信手段から構成されている。
【0034】
携帯端末1は、通信機能(通話機能)を有する携帯端末本体部10、この携帯端末本体部10に内蔵またはインターフェースを介して接続されたデジタルカメラ等の光学的撮像手段11、および携帯端末本体部10に内蔵または接続可能であり、メモ画像等の電子データを蓄積可能なローカル記憶部12とから主として構成されている。
【0035】
携帯端末本体部10は、図示しない通話部および情報表示部を有する携帯電話、PHS、PDA等により構成される。光学的撮像手段11は、CMOSカメラ、CCDカメラ等のデジタルカメラまたはデジタルビデオカメラやイメージスキャナ等である。本発明の好ましい実施の形態において、光学的撮像手段11は携帯端末1に内蔵または接続されたデジタルカメラである。
【0036】
近年、携帯電話等の携帯端末本体部10に搭載されるデジタルカメラが開発され、その画素数は開発当初は7.7万画素程度であったが、今や30万画素、48万画素等の高い画素数を有する携帯端末用デジタルカメラが開発されつつある。本発明においては、このような携帯端末に内蔵または接続されたデジタルカメラ11を使用することが、操作が容易である点、持ち運びおよびメモ画像取得が容易である点から好ましい。
【0037】
このようにして携帯端末1のデジタルカメラ11で撮像したメモ画像の例を図2(a)〜(d)に示す。図2(a)に示すメモ画像は広告看板のメモ画像であり、整形外科の名前(○△整形外科)、院長の名前、住所、電話番号、診療時間帯などのテキスト情報51を含み、これらがメモ画像中の有効情報を形成している。
【0038】
同様に図2(b)に示すメモ画像は、○×△歯科クリニックに関するテキスト情報52を含んだメモ画像である。図2(c)は、東京に所在する○○ゼミナールのメモ画像であり、ホームページアドレス(URL)をテキスト情報53に含んでいる。図2(d)は、○□英会話学校のメモ画像であり、所在地情報をテキスト情報54に含んでいる。本発明においては、ユーザは、このような街中に普通に存在する看板や広告などから、ユーザにとって必要な画像及びテキスト情報をデジタルカメラ11を用いてメモ画像として取得する。
【0039】
ローカル記憶部12は、このようにして取得されたメモ画像を一時的に蓄積し、あるいは後述する管理サーバ2から配信されたメモ画像等を蓄積する記憶部であり、例えば、携帯端末本体部10に内蔵のメモリやSDカード、スマートメディアカード、コンパクトなフラッシュカード等のメモリーカードの書換え可能な記憶装置から構成される。このローカル記憶部12のメモリ容量は、管理サーバ2に備えられたメモ画像蓄積部21のメモリ容量より小さい。
【0040】
本発明において、まず携帯端末1で取得されたユーザにとって興味あるテキスト情報を含むメモ画像は、ローカル記憶部12に蓄積された後、携帯端末1から管理サーバ2に送信される(メモ画像の蓄積要求:図1における矢印1→2)。携帯端末1から管理サーバ2へのメモ画像の送信に際しては、例えばローカル記憶部12に蓄積された複数のメモ画像を一括して送信してもよく、あるいは携帯端末1でメモ画像を取得する毎に行ってもよい。
【0041】
また、携帯端末1から管理サーバ2へメモ画像を送信する際に、例えば図3(a)または図3(b)のそれぞれに示される複数のメモ画像蓄積情報の中からいずれかを選択して同時に送信することもできる。図3(a)は、送信されるメモ画像の閲覧許可情報を示す画面であり、同図において[本人]とは、携帯端末のユーザ本人だけがメモ画像の検索・閲覧を許可されるという情報を示すものである。
【0042】
[グループ]とは、予め定められたグループのメンバのみがメモ画像の検索・閲覧を許可されるという情報を示すものである。[一般公開]とは、誰でも制限を受けることなく、メモ画像の検索・閲覧を許可されるという情報を示すものである。なお、[暗証番号]とは、所定の暗証番号(パスワード)を入力することにより検索・閲覧が許可されるという情報を示すものである。
【0043】
また、図3(b)は、メモ画像の検索のために選択設定される検索キーワードの項目を示すものである。この検索キーワードは、携帯端末1を管理サーバ2に接続して、メモ画像を検索する際に使用されるキーワードであり、「病院」「教育機関」「不動産」等のカテゴリーが設定されており、例えばこの内、「病院」を選択して送信すると、管理サーバ2のメモ画像検索部22は蓄積されるメモ画像に対して「病院」というカテゴリ種別を対応させて記憶することができる。なお、この検索キーワードには、メモ画像の取得日時や場所等を含めることができる。
【0044】
なお、図3(c)は、メモ画像の検索方法の設定項目を示すものであり、蓄積されたメモ画像を検索する場合には、図3(c)に示される検索方法の選択項目「日時順」「場所順」「カテゴリー種別」から希望する項目を選択して管理サーバ2に送信することにより、管理サーバ2はこの選択指定された検索方法に従ってメモ画像を検索する。
【0045】
図4はメモ画像蓄積部21に格納されたメモ画像についての管理データであり、メモ画像検索部22はこの管理データを用いて、メモ画像蓄積部21から指定された検索方法(図3(c)において選択された検索方法)によりメモ画像を検索する。なお、図3(b)に示した検索キーワードは一例に過ぎず、携帯端末1のユーザはこれらの検索キーワード以外に所望のキーワード項目を入力することも可能である。
【0046】
このようにして、携帯端末1から管理サーバ2にメモ画像データを送信した後、携帯端末1のユーザは、ローカル記憶部12に記憶された送信後のメモ画像データを削除することによって(データ開放)、ローカル記憶部12の記憶可能領域がオーバーフローするのを防止することができる。そのため、従来技術におけるメモリのオーバーフロー問題を解決することが可能となる。
【0047】
携帯端末1からメモ画像を受取った(メモ画像の蓄積要求された)管理サーバ2は、メモ画像をメモ画像蓄積部21内に蓄積すると共に、送信された情報に基づいて図4に示した管理データをメモ画像対応リストとして登録する。
【0048】
図4に示す管理データ(メモ画像対応リスト)は、携帯端末の電話番号、メモ画像の作成された日時(若しくは送信された日時)、病院、教育等のカテゴリー種別を示す項目1、場所、地域等の地理的情報を示す項目2、送信されたメモ画像のファイル名、必要に応じて後述する文字認識部3により文字認識されて作成されたテキストファイルのファイル名、公開方式等をメモ画像単位で管理するデータである。
【0049】
なお、上記管理データにおいて、項目は項目1、項目2の2つを示しているが、この他の項目を自由に設定できることは言うまでもない。なお、公開方式とは、図3(a)に示した携帯端末1からの閲覧制限情報に対応するものであり、例えば、本人のみの閲覧許可を1、グループにおける閲覧許可を2、一般公開を3として、閲覧制限情報を管理している。
【0050】
このようにして管理データを作成する際、又は作成後において、メモ画像は、必要に応じてその文字情報部分が文字情報認識サーバ3により画像情報からテキスト情報に変換される。なお、この文字情報認識サーバ3による画像情報から文字情報への変換は、メモ画像がメモ画像蓄積部21に格納される際、又は格納後にバッチ処理により自動的に行われる構成としてもよい(バッチ処理:図1における矢印2→3)。
【0051】
すなわち、管理サーバ2は、文字情報認識サーバ3に対して、例えばメモ画像蓄積部21に蓄積しているメモ画像のそれぞれに対して、テキスト情報の認識要求を行うことができ、文字情報認識サーバ3から管理サーバに返信されたメモ画像中のテキスト認識結果を検索のためのキーワードとして新たに管理データ(メモ画像対応リスト)に加えるようにしておくことができる。なお、図4に示した日時や項目1,項目2の内容も、携帯端末からの送信情報(メモ画像蓄積情報)に代えて(あるいはこの送信情報と共に)、文字情報認識サーバ3による文字情報認識結果に基づいて作成するようにしても良い。
【0052】
一方、文字情報認識サーバ3による文字情報認識は、メモ画像蓄積時のみだけでなく、携帯端末1からの要求により適宜行うようにすることも可能である。すなわち、携帯端末1は、文字情報認識サーバ3に対して、指定したメモ画像中に含まれるテキスト情報の認識を要求することができ(図1における矢印1→3)、これに対して、文字情報認識サーバ3では画像情報からテキスト情報への変換を行い、変換結果(文字認識結果)であるテキスト情報を携帯端末1に送付することができる(図1における3→1)。なお、このメモ画像は携帯端末1から直接送信しても、あるいは管理サーバ2から送信させるようにしても良い。
【0053】
このようにして、本実施の形態では、データ量の大きい例えばカラー画像であるメモ画像を該メモ画像から抽出された文字情報として取扱うことが可能となり、メモ画像の取り扱いが極めて容易となり得る。また、テキスト情報中の文字列を用いて、携帯端末1あるいはその他の各種端末(他のユーザの携帯端末、その他の各種情報機器を含む)から蓄積したメモ画像集合における表示日時順やテキスト情報による検索を行うことが可能となる。そのため、携帯端末1等を用いてメモ画像を活用しようとするユーザにとって、使い勝手の良いメモ画像活用環境を実現できる。
【0054】
さらに、本実施の形態では、メモ画像の認識機能を、携帯端末に内蔵したいわゆるスタンドアロンの機能として実装せず、メモ画像認識サーバに実装しているため、携帯端末の限られた演算リソースに制限されることなく、高精度のメモ画像認識を実現することができる。
【0055】
そして、携帯端末1のユーザまたはその他の端末(第三者の携帯端末を含む)は、管理サーバ2に対して、メモ画像の検索要求を行うことができ(図1中、矢印1→2)、管理サーバ2は大規模データベースに蓄積されている図4に示される管理データ(およびメモ画像の含んでいるテキスト情報)に基づいて、所望のメモ画像を検索し、携帯端末1またはその他の端末(第三者の携帯端末を含む)に返信することができる(図1中、矢印2→1)。
【0056】
これによってローカル記憶部12のメモ画像の多大な蓄積によるオーバーフローを防止できるとともに、複数の携帯電話ユーザに対して蓄積させたメモ画像を共有化させ、興味のあるメモ画像の流布・交換に寄与させることができる。
【0057】
実施の形態2.
次に、本発明の実施の形態2を図5に基づいて説明する。
図5(a)に示す実施の形態は、管理サーバ2が文字情報認識サーバ3によりメモ画像の画像情報を文字情報に変換させ、その文字情報を文字情報リスト(タイトルリスト)として携帯端末1に配信する場合について説明するものである。図5(a)に示すように、携帯端末1に送信されて表示されたメモ画像の文字情報リストの中から、メモ画像を表示したいタイトルを選択すると、そのタイトルが付されたメモ画像そのものが表示されるようになっており、メモ画像の閲覧を容易に行うことができる。
【0058】
実施の形態3.
また、図5(b)に示す実施の形態は、図3(b)で説明した検索キーワードを入力してメモ画像の検索を行う場合の一例を説明するものである。
この場合、カテゴリーとして「病院」を入力して検索を行うと、管理サーバ3はこのキーワードに基づいてリストから「病院」に対応付けられたテキスト情報を検索し、病院リストとして携帯端末1に送信して表示させる。なお、このメモ画像対応リストにおけるカテゴリーは、図3(b)にて説明したように、メモ画像を蓄積するべく送信するときに同時に送信しておくこともできるし、あるいは文字情報認識サーバ3にて認識されて管理データ(メモ画像対応リスト)に付加されるようにすることもできる。これらの構成によればユーザが特定のカテゴリに属するメモ情報を入手したい場合に、ユーザは、必要な情報をより素早く入手することが可能となる。
【0059】
実施の形態4.
次に、本発明の実施の形態4を図6に基づいて説明する。
図6に示す実施の形態は、携帯端末1のローカル記憶部12が検索用のデータベースを有する場合についてのものである。すなわち、ローカル記憶部12は、ユーザが直接入力した項目、文字情報認識サーバ3から取得し、必要により修正・変更を加えた文字情報に基づいたローカルデータベースをリストとして有している。このデータベースは、文字情報に基づいて作成されているので、メモ画像に比較してローカル記憶部12の容量を圧迫しない。このようにローカル記憶部12に、ユーザの興味ある情報に関するデータベースを持つことにより、データベースに登録された情報に関連する情報をキーとして管理サーバ2に簡単に検索を行わせることができ、興味ある情報(メモ画像又は文字情報)を連鎖的に収集することが可能となる。
【0060】
この実施の形態によれば、例えばユーザが携帯端末1で取得した、所定の店舗の看板のメモ画像を検索キーとして、その店舗に関連するメモ画像を検索してリストアップすることができる。例えば、所定の店が中華料理店であった場合、その中華料理店の広告・メニュー・雑誌の記事などを検索することが可能となる。また、別の中華料理店のリストが得られたり、関連する情報を連鎖的に収集することができる。
【0061】
ところで、メモ画像中のテキスト情報の認識において、現在の認識技術では完璧に行うことは困難である。そこで、認識結果を修正することにより、文字情報を正確にすることができると共に、一度得られた認識結果を修正する方が、全ての文字列を最初から手打ちで入力するよりもより効率的に文字情報を得ることができる。一方で、認識技術は完璧でないとは言えども、メモ画像認識サーバという形態で、大量の計算資源を用いた認識方式ならば、認識誤りを限りなくゼロに近づけることができて精度の高い文字情報認識を実現できる可能性がある。
【0062】
実施の形態5.
次に、本発明の実施の形態5について説明する。
実施の形態5では、携帯端末1が指定されたメモ画像の文字情報をパラメータとした、発信・番号メモリ機能などの通常の携帯電話の機能を起動するように構成される。メモ画像中に電話番号やURLアドレスが記述されている場合に、文字情報認識サーバ3にこれらのテキスト情報を文字認識させ、その認識結果を用いて発信・メモリ登録を行うことで、それらの操作がより効率的、且つ簡単となる。
【0063】
例えば、図2(a)又は図2(b)に示すメモ画像から文字情報認識サーバ3により電話番号を抽出したり、図2(c)に示すメモ画像からURLを抽出して、これらを携帯端末1に備わっているメモリに登録(メモリ登録)する。
【0064】
実施の形態6.
実施の形態6では、管理サーバ2は、メモ画像を携帯端末1のユーザごとに分類して蓄積するように構成する。例えば、図4に示す管理データ(メモ画像対応リスト)から、携帯端末1の電話番号により、ユーザ別にサブセットデータベースを作成するようにする。このように構成すると、大規模メモ画像データベースを携帯端末1のユーザごとに分類して蓄積することができ、各ユーザは自己の携帯端末のローカル記憶部12の容量の大小の如何に拘わらず、各自で大容量のメモ画像を自由に蓄積することができる。また、蓄積している場所が、公共に利用可能な大規模メモ画像データベースであるため、各ユーザの承認があれば、各ユーザのメモ画像データベースを他のユーザと共用することもでき、あるいは他のユーザの要望に応じて、閲覧・検索などの使用に供することができる。
【0065】
実施の形態7.
次に、本発明の実施の形態7について説明する。
実施の形態7においては、管理サーバ2は、蓄積しているメモ画像情報を、メモの種類(カテゴリー)別に分類して蓄積するように構成される。例えば、図4に示す管理データから、カテゴリー毎にサブセットデータベースを作成することによって達成される。この実施の形態では、メモ画像がそれらのカテゴリごとに、大規模メモ画像データベースに分類されて蓄積されるため、ユーザの検索要求に応じて、特定のカテゴリーについての閲覧・検索を迅速、且つ容易に行うことができる。
【0066】
実施の形態8.
実施の形態8において、管理サーバ2は、指定されたメモ画像のURLなどの文字列情報を元にインターネット検索機能を用いて関連するホームページの情報を抽出し、それに関連する画像をメモ画像として蓄積・交換・提示するように構成される。
【0067】
例えば、図2(c)に示された電車広告のメモ画像から、広告の対象のホームページのURLをテキスト情報として認識して抽出し、インターネットで当該URLのホームページをアクセスして、その内容をメモ画像として蓄積したり、あるいは、その内容を検索キーとして用いて大規模メモ画像データベースを検索することにより、最初のメモ画像である電車広告に関連するメモ画像の集合を取り出して、ユーザに提示する。この実施の形態によれば、ユーザは1枚のメモ画像からそれに関連するメモ画像の集合を迅速、且つ簡単に取得することができる。
【0068】
実施の形態9.
実施の形態9において、文字情報認識サーバ3は、指定されたメモ画像中から、文字情報のみでなく、図形情報・表中の罫線やセルなどの表情報・写真情報を取り出すように構成される。この検索処理は、例えば画像処理のパターンマッチング等の技術や計算機の分野で用いられている類似検索等の技術を用いることにより行われる。
【0069】
この実施の形態によれば、雑誌や新聞などの複雑なレイアウトを持つ文書をデジタルカメラで撮像して得られるメモ画像について、それに含まれる図形情報・表情報・写真情報を抽出できるため、図形の構造情報の再利用・表中の情報の再利用・写真の再利用や、これらを手がかりとした検索が可能となる。
【0070】
実施の形態10.
実施の形態10において、文字情報認識サーバ3は、指定されたメモ画像(カラー・濃淡画像)を高品質に二値化して、あるいはサムネールファイル化して圧縮画像を生成し、管理サーバ2に送付するように構成される。
【0071】
この実施に形態よれば、大容量のカラー/濃淡メモ画像を、二値化により得た少容量の白黒二値画像に変換することができる。二値化技術により、カラー/濃淡メモ画像中のテキスト情報・図形情報・表情報・写真情報などの有効な情報を効果的に残したまま、メモ画像を小容量化して交換・蓄積することができ、データベースの小容量化・メモ画像交換速度の向上を実現することができる。
【0072】
同様にして、サムネールファイル化してカラー画像のサイズを小さくすることによって図8に示すように、携帯端末1の表示画面に複数のメモ画像を表示することが可能となる。
【0073】
実施の形態11.
実施の形態11においては、図7に示すように、文字情報認識サーバ3の文字情報認識部32がメモ画像の認識結果として、文字認識候補・文字切り出し候補を文字候補ラティスで表現し、文字候補ラティスを携帯端末1および管理サーバ2の間で交換するように構成する。
【0074】
なお、文字候補ラティスとは、メモ画像中のテキスト情報を、文字情報認識部32により認識したときに得られる、テキスト情報の文字切り出し候補および文字認識結果候補を含む束構造を持つデータのことである。
この実施の形態によれば、メモ画像中のテキスト情報についての認識結果に多少の誤りが含まれていても、文字候補ラティスには正解が含まれている確率が高いため、ユーザとして文字候補ラティスを用いた高精度の検索結果を得ることができ、もってメモ画像の検索精度を向上できる利点がある。
【0075】
以上説明した様に、本発明により、携帯端末の処理限界によらずに、大量のメモ画像を蓄積・管理してユーザに使い勝手のよいメモ画像活用機能を提供することができる。また、メモ画像管理装置のバージョンアップ、文字情報認識部のバージョンアップにより、携帯端末のユーザに負担をかけることなく、メモ画像活用機能の高性能化・高機能化を実現することができる。また、複数のユーザ間でのメモ画像の交換を円滑に行うことを可能とし、従来技術の持つ問題点を克服できる効果がある。
【0076】
実施の形態12.
次に、実施の形態12として、本発明のメモ画像管理装置およびメモ画像管理システムの動作、すなわちメモ画像管理方法を説明する。
図9は、本発明のメモ画像管理方法においてメモ画像を管理サーバに登録するフローチャートを示し、図10は、本発明のメモ画像管理方法において登録されたメモ画像を検索するフローチャートを示し、そして、図11は、メモ画像を文字認識して文字情報に変換するフローチャートを示す。
【0077】
図9においては、まず、携帯端末1においてメモ画像を取得する(S1)。すなわち、ユーザは、ユーザが必要とする情報をデジタルカメラ等の光学的撮像手段11によりメモ画像として撮像する。次いで、ユーザは、このようにして取得したメモ画像を、携帯端末1からインターネット等の通信回線を介して管理サーバに送信する(S2)。なお、上述したように、この際にユーザは送信するメモ画像に対応する付加的情報、例えば位置情報、メモ画像の公開条件、メモ画像の種類、送信日時を同時に送信することも可能である。最後に、携帯端末から送信されたメモ画像を管理サーバのメモ画像蓄積部21に蓄積しデータベースとして付加的情報とともに保存する(S3)。なお、ユーザは段階S2で、メモ画像を送信した後、送信したメモ画像をローカル記憶部から消去することによって、ローカル記憶部の空き容量を確保することが可能となる。
【0078】
次いで、本発明において、このようにして管理サーバに登録されたメモ画像を、あるユーザの携帯端末(パソコン、PDA等を含む)により検索して、必要なメモ画像を入手することができる。
【0079】
この際に、図10に示すように、まず、携帯端末等の情報機器から管理サーバへアクセスし(S11)、メモ画像の検索を行う(S12)。メモ画像の検索は、(1)ユーザの携帯端末の電話番号から送信されたメモ画像全てを検索し、そして検索結果を表示させる。(2)メモ情報と同時に送信されたメモ画像に対応する付加的情報または文字認識により変換された文字情報をキーとして検索し、そしてその検出結果を抽出するようにする。このようにして、管理サーバにより検索され抽出されたメモ画像情報は、管理サーバから携帯端末等の端末に配信され、ユーザは、所望とするメモ画像を端末を介して取得する(S13)。
【0080】
なお、管理サーバに蓄積されたメモ画像は、図11に示す以下の手順に従って、文字情報へと変換され、検索キー等の利用に供される。すなわち、まず、携帯端末または管理サーバは、蓄積されたメモ画像から特定のメモ画像を選択する(S21)。次いで、選択されたメモ画像の文字認識を実行し(S22)、メモ画像中に含まれる文字情報からテキスト情報を作成し、そしてこのようにして作成された文字情報(テキスト)を管理サーバの蓄積部に登録する(S23)。
【0081】
この一連の段階(S21)〜(S23)を管理サーバ側から行う場合には、バッチシステムにより自動的に行うことが可能であり、また、携帯端末を介して行う場合には、メモ画像における文字情報の認識結果に基づいて文字認識候補ラティスを作成させ、作成された候補から正しいものを確定するステップを含めることが可能である。このようにして、特定のメモ画像から作成された文字情報は、段階(S11)〜段階(S13)のメモ画像の検索に有効に活用できる。
【0082】
以上、本発明の様々な実施の形態を説明したが、本発明は、上述した実施の形態に限定されることなく、本発明の主旨を逸脱しない範囲において種々の変更を行うことが可能であることは勿論である。
【0083】
以上に詳述したように、本発明の実施の形態によれば、携帯電話やPHS等の携帯端末で入手したメモ画像を多量に蓄積することができると共に、携帯端末やコンピュータシステム等の他の情報機器を用いて、これら蓄積されたメモ画像から希望するメモ画像を必要に応じて検索して取得することが可能となる。
また、ユーザ毎にメモ画像を分類して管理する構成とした場合において、例えばユーザの携帯端末の電話番号毎に管理するようにすれば、複数のユーザでメモ画像情報を共有する際にメモ画像の発信元が明確となり、その発信元を容易に知ることができる。
また、メモ画像をそのメモ画像から抽出された文字情報に基づいて、分類して管理する構成とした場合には、その検索のキーワードをメモ画像から自動的に得られて、その管理が迅速、且つ容易に行える。
また、所定のメモ画像における文字情報に基づいて、インターネットのホームページにアクセスし、ホームページの情報をメモ画像として抽出するインターネット検索機能部を備えることにより、例えばユーザは1つのメモ画像からそれに関連する種々の情報を容易に取り出すことが可能となる。
【0084】
(付記1)メモ画像を扱うことができる情報機器と接続されることができるメモ画像管理装置であって、
メモ画像を蓄積するメモ画像蓄積部と、
前記携帯端末または前記携帯端末以外の端末からの要求に応じて蓄積されているメモ画像から所定の画像の検索を行うメモ画像検索部と、
メモ画像から文字情報を認識して抽出する文字情報認識部と、
前記メモ画像検索部により検索されたメモ画像又は前記文字情報認識部により抽出された文字情報を前記携帯端末に配信するメモ画像配信部を備えてなるメモ画像管理装置。
(付記2)付記1に記載のメモ画像管理装置において、
前記メモ画像蓄積部は、携帯端末のユーザ毎にメモ画像を分類して蓄積することを特徴とするメモ画像管理装置。
(付記3)付記1又は付記2に記載のメモ画像管理装置において、
前記メモ画像蓄積部は、前記文字情報認識部により抽出された文字情報に基づいて、前記メモ画像を分類して蓄積することを特徴とするメモ画像管理装置。
(付記4)付記1乃至付記3のいずれかに記載のメモ画像管理装置において、
前記文字情報認識部により抽出された文字情報をメモ画像に対応させて記憶する文字情報記憶部を備えることを特徴とするメモ画像管理装置。
(付記5)付記1乃至付記4のいずれかに記載のメモ画像管理装置において、
所定のメモ画像における文字情報に基づいて、インターネットのホームページにアクセスし、ホームページの情報をメモ画像として抽出するインターネット検索機能部を備え、前記メモ画像蓄積部は前記ホームページの情報をメモ画像として蓄積することを特徴とするメモ画像管理装置。
(付記6)付記1乃至付記5のいずれかに記載のメモ画像管理装置において、
メモ画像の中から図形情報、表情報、又は写真情報を抽出することができる手段を備えていることを特徴とするメモ画像管理装置。
(付記7)付記1乃至付記6のいずれかに記載のメモ画像管理装置において、
所定のメモ画像を二値化またはサムネールファイル化して圧縮画像を生成する画像圧縮手段を備えていることを特徴とするメモ画像管理装置。
(付記8)付記1乃至付記7のいずれかに記載のメモ画像管理装置において、
前記文字情報認識部は、メモ画像における文字情報の認識結果に基づいて文字認識候補ラティスを作成する機能を備えていることを特徴とするメモ画像管理装置。
(付記9)付記1乃至付記8のいずれかに記載のメモ画像管理装置において、
前記メモ画像蓄積部と前記メモ画像検索部と前記メモ画像配信部とは、メモ画像を管理する管理サーバにより構成され、
前記文字情報認識部は、前記管理サーバと通信回線を介して接続可能とされたメモ画像認識サーバにより構成されることを特徴とするメモ画像管理装置。
(付記10)メモ画像を扱うことができる情報機器と、
前記携帯端末と通信回線を介して接続可能とされ、前記携帯端末からのメモ画像を交換、蓄積および検索可能なサーバであって、メモ画像を蓄積するメモ画像蓄積部と、前記携帯端末または前記携帯端末以外の端末からの要求に応じて蓄積されているメモ画像から所定の画像の検索を行うメモ画像検索部と、メモ画像から文字情報を認識して抽出する文字情報認識部と、前記メモ画像検索部により検索されたメモ画像又は前記文字情報認識部により抽出された文字情報を前記携帯端末に配信するメモ画像配信部を有するサーバと
を備えてなるメモ画像管理システム。
(付記11)付記10に記載のメモ画像管理システムにおいて、
前記サーバは、前記メモ画像蓄積部と前記メモ画像検索部と前記メモ画像配信部とを有する管理サーバと、前記管理サーバに通信回線を介して接続され、前記文字情報認識部を有するメモ画像認識サーバにより構成されることを特徴とするメモ画像管理システム。
(付記12)付記10又は付記11に記載のメモ画像管理システムにおいて、
前記携帯端末はテキスト情報を含む画像をメモ画像として取得可能な光学的撮像手段を備えることを特徴とするメモ画像管理システム。
(付記13)付記10乃至付記12のいずれかに記載のメモ画像管理システムにおいて、
前記携帯端末は、メモ画像認識部で認識された文字情報を取得し、取得した文字情報を修正または変更する文字情報修正または変更手段を有しており、修正または変更した文字情報を前記サーバに送信し、前記サーバは修正または変更された文字情報を修正または変更文字情報として蓄積することを特徴とするメモ画像管理システム。
(付記14)付記10乃至付記13のいずれかに記載のメモ画像管理システムにおいて、
前記サーバは、前記携帯端末より受信した前記修正または変更した文字情報をキーワードとして蓄積されているメモ画像集合を検索し、検索した結果を文字列情報またはメモ画像集合として前記携帯端末に送信することを特徴とするメモ画像管理システム。
(付記15)付記10乃至付記14のいずれかに記載のメモ画像管理システムにおいて、
前記携帯端末は、前記サーバから取得したメモ画像からの文字情報をパラメータとして、所定の発信、又はURL接続、あるいはメモリ登録を行うことを特徴とするメモ画像発信システム。
(付記16)付記10乃至付記15のいずれかに記載のメモ画像管理システムにおいて、
前記携帯端末は、メモ画像と共に前記メモ画像の種類情報を送信する機能を有することを特徴とするメモ画像管理システム。
(付記17)付記10乃至付記16のいずれかに記載のメモ画像管理システムにおいて、
前記携帯端末は、メモ画像と共に、前記メモ画像に関連するキー項目を前記サーバに送信することを特徴とするメモ画像管理システム。
(付記18)メモ画像を扱うことができる情報機器と、前記携帯端末と通信回線を介して接続可能とされ、前記携帯端末から送信されたメモ画像の交換、蓄積および検索を行うことが可能な管理サーバとを備えてメモ画像を管理するメモ画像管理方法であって、
前記携帯端末からメモ画像を送信する送信ステップと、
送信されたメモ画像を蓄積するメモ画像蓄積ステップと、
前記携帯端末または前記携帯端末以外の端末からの要求に応じて蓄積されているメモ画像から所定の画像の検索を行う検索ステップと、
前記メモ画像蓄積ステップ又は前記検索ステップの前後において、必要に応じてメモ画像から文字情報を認識して抽出する文字情報認識ステップと、
検索されたメモ画像又は前記文字情報認識部により抽出された文字情報を前記携帯端末に配信する配信ステップを備えてなるメモ画像管理方法。
(付記19)付記18に記載のメモ画像管理方法において、
メモ画像の管理サーバへの送信時に、付加的検索情報を同時に送信することを特徴とするメモ画像管理方法。
(付記20)付記19に記載のメモ画像管理方法において、
前記付加的情報が、位置情報、メモ画像の公開条件、メモ画像の種類、送信日時からなる群から選択された少なくとも1つであることを特徴とするメモ画像管理方法。
【0085】
【発明の効果】
以上に詳述したように、本発明によれば、携帯電話やPHS等の携帯端末で入手したメモ画像を多量に蓄積することができると共に、携帯端末やコンピュータシステム等の他の情報機器を用いて、これら蓄積されたメモ画像から希望するメモ画像を必要に応じて、容易に且つ迅速に検索して取得することができるという効果を奏する。
【図面の簡単な説明】
【図1】本発明のメモ画像管理装置及びメモ画像管理システムを示す全体ブロック図である。
【図2】本発明の実施の形態において管理されるメモ画像の一例を示す図である。
【図3】携帯端末における検索/検索情報設定画面の一例を示す図面である。
【図4】管理サーバにおける管理情報としてのメモ画像対応リストの一例を示す図である。
【図5】携帯端末に送信された検索結果の一例を示す図である。
【図6】本発明の他の実施の形態を示す図である。
【図7】文字認識した結果を携帯端末により修正を行う一例を示す図である。
【図8】圧縮したメモ画像を携帯端末に表示する一例を示す図である。
【図9】本発明のメモ画像管理方法においてメモ画像をメモ画像管理装置に登録する動作を示すフローチャートである。
【図10】本発明のメモ画像管理方法において登録されたメモ画像を検索する動作を示すフローチャートである。
【図11】メモ画像を文字認識して文字情報に変換する動作を示すフローチャートである。
【符号の説明】
1 携帯端末、2 管理サーバ、3 文字情報認識サーバ、10 携帯端末本体部、11 光学的撮像手段(デジタルカメラ)、12 ローカル記憶部、21メモ画像蓄積部、22 メモ画像検索部、23、33 送受信部、31 辞書データベース、32 文字情報認識部。

Claims (10)

  1. メモ画像を扱うことができる情報機器と接続されることができるメモ画像管理装置であって、
    メモ画像を蓄積するメモ画像蓄積部と、
    前記情報機器または前記情報機器以外の端末からの要求に応じて蓄積されているメモ画像から所定の画像の検索を行うメモ画像検索部と、
    メモ画像から文字情報を認識して抽出する文字情報認識部と、
    前記メモ画像検索部により検索されたメモ画像又は前記文字情報認識部により抽出された文字情報を前記情報機器に配信するメモ画像配信部を備えてなるメモ画像管理装置。
  2. 請求項1に記載のメモ画像管理装置において、
    前記メモ画像蓄積部は、情報機器のユーザ毎にメモ画像を分類して蓄積することを特徴とするメモ画像管理装置。
  3. 請求項1又は請求項2に記載のメモ画像管理装置において、
    前記メモ画像蓄積部は、前記文字情報認識部により抽出された文字情報に基づいて、前記メモ画像を分類して蓄積することを特徴とするメモ画像管理装置。
  4. 請求項1乃至請求項3のいずれかに記載のメモ画像管理装置において、
    前記文字情報認識部により抽出された文字情報をメモ画像に対応させて記憶する文字情報記憶部を備えることを特徴とするメモ画像管理装置。
  5. 請求項1乃至請求項4のいずれかに記載のメモ画像管理装置において、
    所定のメモ画像における文字情報に基づいて、インターネットのホームページにアクセスし、ホームページの情報をメモ画像として抽出するインターネット検索機能部を備え、前記メモ画像蓄積部は前記ホームページの情報をメモ画像として蓄積することを特徴とするメモ画像管理装置。
  6. 請求項1乃至請求項5のいずれかに記載のメモ画像管理装置において、
    所定のメモ画像を二値化またはサムネールファイル化して圧縮画像を生成する画像圧縮手段を備えていることを特徴とするメモ画像管理装置。
  7. 請求項1乃至請求項6のいずれかに記載のメモ画像管理装置において、
    前記文字情報認識部は、メモ画像における文字情報の認識結果に基づいて文字認識候補ラティスを作成する機能を備えていることを特徴とするメモ画像管理装置。
  8. 請求項1乃至請求項7のいずれかに記載のメモ画像管理装置において、
    前記メモ画像蓄積部と前記メモ画像検索部と前記メモ画像配信部とは、メモ画像を管理する管理サーバにより構成され、
    前記文字情報認識部は、前記管理サーバと通信回線を介して接続可能とされたメモ画像認識サーバにより構成されることを特徴とするメモ画像管理装置。
  9. メモ画像を扱うことができる情報機器と、
    前記情報機器と通信回線を介して接続可能とされ、前記情報機器からのメモ画像を交換、蓄積および検索可能なサーバであって、メモ画像を蓄積するメモ画像蓄積部と、前記情報機器または前記情報機器以外の端末からの要求に応じて蓄積されているメモ画像から所定の画像の検索を行うメモ画像検索部と、メモ画像から文字情報を認識して抽出する文字情報認識部と、前記メモ画像検索部により検索されたメモ画像又は前記文字情報認識部により抽出された文字情報を前記情報機器に配信するメモ画像配信部を有するサーバと
    を備えてなるメモ画像管理システム。
  10. メモ画像を扱うことができる情報機器と、前記情報機器と通信回線を介して接続可能とされ、前記情報機器から送信されたメモ画像の交換、蓄積および検索を行うことが可能な管理サーバとを備えてメモ画像を管理するメモ画像管理方法であって、
    前記情報機器からメモ画像を送信する送信ステップと、
    送信されたメモ画像を蓄積するメモ画像蓄積ステップと、
    前記情報機器または前記情報機器以外の端末からの要求に応じて蓄積されているメモ画像から所定の画像の検索を行う検索ステップと、
    前記メモ画像蓄積ステップ又は前記検索ステップの前後において、必要に応じてメモ画像から文字情報を認識して抽出する文字情報認識ステップと、
    検索されたメモ画像又は前記文字情報認識部により抽出された文字情報を前記情報機器に配信する配信ステップを備えてなるメモ画像管理方法。
JP2002198367A 2002-07-08 2002-07-08 メモ画像管理装置、メモ画像管理システムおよびメモ画像管理方法 Pending JP2004038840A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2002198367A JP2004038840A (ja) 2002-07-08 2002-07-08 メモ画像管理装置、メモ画像管理システムおよびメモ画像管理方法
US10/465,596 US7286722B2 (en) 2002-07-08 2003-06-20 Memo image managing apparatus, memo image managing system and memo image managing method
CNB031453007A CN1226693C (zh) 2002-07-08 2003-06-30 备注图像管理装置、备注图像管理系统和备注图像管理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002198367A JP2004038840A (ja) 2002-07-08 2002-07-08 メモ画像管理装置、メモ画像管理システムおよびメモ画像管理方法

Publications (1)

Publication Number Publication Date
JP2004038840A true JP2004038840A (ja) 2004-02-05

Family

ID=30437194

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002198367A Pending JP2004038840A (ja) 2002-07-08 2002-07-08 メモ画像管理装置、メモ画像管理システムおよびメモ画像管理方法

Country Status (3)

Country Link
US (1) US7286722B2 (ja)
JP (1) JP2004038840A (ja)
CN (1) CN1226693C (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007140784A (ja) * 2005-11-16 2007-06-07 Nihon Daily Tsushinsha:Kk 広告データ収集システム、広告データ収集方法、及びプログラム
JP2007316738A (ja) * 2006-05-23 2007-12-06 Murata Mach Ltd 文書管理システム
JP2009252087A (ja) * 2008-04-09 2009-10-29 Nec Corp 情報提供システムおよび情報提供方法
JP2010511253A (ja) * 2006-11-29 2010-04-08 グーグル・インコーポレーテッド モバイル機器システムを用いたデジタル画像アーカイブ及び検索

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4349183B2 (ja) * 2004-04-01 2009-10-21 富士ゼロックス株式会社 画像処理装置および画像処理方法
CN100419785C (zh) * 2004-04-08 2008-09-17 佳能株式会社 基于网络服务应用的光学字符识别系统和方法
US20050234896A1 (en) * 2004-04-16 2005-10-20 Nobuyuki Shima Image retrieving apparatus, image retrieving method and image retrieving program
KR100663515B1 (ko) * 2004-11-08 2007-01-02 삼성전자주식회사 휴대 단말 장치 및 이를 위한 데이터 입력 방법
JP2008165303A (ja) * 2006-12-27 2008-07-17 Fujifilm Corp コンテンツ登録装置、及びコンテンツ登録方法、及びコンテンツ登録プログラム
US8029316B2 (en) 2008-11-21 2011-10-04 Belden Inc. Hand tightenable coaxial cable connector
KR20100062575A (ko) * 2008-12-02 2010-06-10 삼성테크윈 주식회사 감시 카메라의 제어 방법 및 이를 사용한 제어 장치
JP5444115B2 (ja) * 2010-05-14 2014-03-19 株式会社Nttドコモ データ検索装置、データ検索方法及びプログラム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5574804A (en) * 1990-12-21 1996-11-12 Olschafskie; Francis Hand-held scanner
JP2726594B2 (ja) * 1991-04-01 1998-03-11 八洲電機株式会社 記憶ペン
US5530740A (en) * 1991-10-28 1996-06-25 Contigram Communications Corporation System and method for integrating voice, facsimile and electronic mail data through a personal computer
US5933478A (en) * 1994-09-28 1999-08-03 Hitachi, Ltd. Data transfer system and handheld terminal device used therefor
US5604788A (en) * 1995-03-16 1997-02-18 Motorola, Inc. Wireless messaging system with electronic mail replication
US6181867B1 (en) * 1995-06-07 2001-01-30 Intervu, Inc. Video storage and retrieval system
FR2741226B1 (fr) * 1995-11-15 1997-12-05 France Telecom Test de cellule dans un reseau de telecommunication cellulaire
EP0887753B1 (en) * 1996-11-15 2007-10-24 Toho Business Management Center Business management system
JPH11146435A (ja) * 1997-11-11 1999-05-28 Matsushita Electric Ind Co Ltd 無線選択呼出受信機及び外部登録装置
US6212504B1 (en) * 1998-01-12 2001-04-03 Unisys Corporation Self-authentication of value documents using encoded indices
JP2002259388A (ja) * 2001-03-05 2002-09-13 Fujitsu Ltd 画像検索システム、方法及び画像検索プログラム
US6714209B2 (en) * 2001-04-06 2004-03-30 Lightsurf Technologies, Inc. Browser-based system providing methodology for labeling of photo compact discs with a photo-facsimile table of contents

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007140784A (ja) * 2005-11-16 2007-06-07 Nihon Daily Tsushinsha:Kk 広告データ収集システム、広告データ収集方法、及びプログラム
JP2007316738A (ja) * 2006-05-23 2007-12-06 Murata Mach Ltd 文書管理システム
JP2010511253A (ja) * 2006-11-29 2010-04-08 グーグル・インコーポレーテッド モバイル機器システムを用いたデジタル画像アーカイブ及び検索
JP2013127815A (ja) * 2006-11-29 2013-06-27 Google Inc モバイル機器システムを用いたデジタル画像アーカイブ及び検索
JP2009252087A (ja) * 2008-04-09 2009-10-29 Nec Corp 情報提供システムおよび情報提供方法

Also Published As

Publication number Publication date
CN1471036A (zh) 2004-01-28
US7286722B2 (en) 2007-10-23
CN1226693C (zh) 2005-11-09
US20040019585A1 (en) 2004-01-29

Similar Documents

Publication Publication Date Title
US11616820B2 (en) Processing files from a mobile device
US10331729B2 (en) System and method for accessing electronic data via an image search engine
US8489583B2 (en) Techniques for retrieving documents using an image capture device
US7702681B2 (en) Query-by-image search and retrieval system
US7475092B2 (en) System and method for embedding symbology in digital images and using the symbology to organize and control the digital images
US8244037B2 (en) Image-based data management method and system
US20120194684A1 (en) System, Method, and Devices for Searching for a Digital Image over a Communication Network
US20140236722A1 (en) System And Method For Accessing Electronic Data Via An Image Search Engine
JP2003122864A (ja) カレンダ情報収集配布システム
US20160034496A1 (en) System And Method For Accessing Electronic Data Via An Image Search Engine
JP2004038840A (ja) メモ画像管理装置、メモ画像管理システムおよびメモ画像管理方法
US20090046320A1 (en) Method and apparatus for forwarding media...
JP4894253B2 (ja) メタデータ生成装置およびメタデータ生成方法
JP2007018166A (ja) 情報検索装置、情報検索システム、情報検索方法及び情報検索プログラム
US20110305406A1 (en) Business card recognition system
GB2404749A (en) Information retrieval using smart symbols
JP2011076336A (ja) ユーザによって視認されている表示装置を特定するデジタルサイネージシステム及び方法
JP4788016B2 (ja) カメラで撮影した画像をサーバで表示するシステム、そのサーバ及びそのサーバ用制御プログラムを記録した記録媒体
US20140104442A1 (en) Image information processing system
JP2002236682A (ja) データベース・システム
JP2009064371A (ja) 名刺情報提供システム
KR20100124952A (ko) 문자인식을 이용한 휴대형 단말기의 증강현실 기반 실시간 ar컨텐츠 제공시스템 및 그 방법
JP2005107978A (ja) 撮影機能付き情報端末による情報検索装置、及び、情報検索方法
JP4116852B2 (ja) 抽出文字列辞書検索装置及び方法並びにプログラム
JP2007328406A (ja) 描画検索システム、描画検索方法及び描画検索端末

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050112

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050613

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20071219

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080307

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20080819