JP5757366B2 - 文字認識と画像照合を組み合わせて名刺情報を交換する方法 - Google Patents

文字認識と画像照合を組み合わせて名刺情報を交換する方法 Download PDF

Info

Publication number
JP5757366B2
JP5757366B2 JP2014517388A JP2014517388A JP5757366B2 JP 5757366 B2 JP5757366 B2 JP 5757366B2 JP 2014517388 A JP2014517388 A JP 2014517388A JP 2014517388 A JP2014517388 A JP 2014517388A JP 5757366 B2 JP5757366 B2 JP 5757366B2
Authority
JP
Japan
Prior art keywords
business card
image
client
information
web server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014517388A
Other languages
English (en)
Other versions
JP2014522020A (ja
Inventor
羅希平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intsig Information Co Ltd
Original Assignee
Intsig Information Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intsig Information Co Ltd filed Critical Intsig Information Co Ltd
Publication of JP2014522020A publication Critical patent/JP2014522020A/ja
Application granted granted Critical
Publication of JP5757366B2 publication Critical patent/JP5757366B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/93Document management systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/94Hardware or software architectures specially adapted for image or video understanding
    • G06V10/95Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/63Scene text, e.g. street names
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40Document-oriented image-based pattern recognition
    • G06V30/41Analysis of document content
    • G06V30/414Extracting the geometrical structure, e.g. layout tree; Block segmentation, e.g. bounding boxes for graphics or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40Document-oriented image-based pattern recognition
    • G06V30/41Analysis of document content
    • G06V30/418Document matching, e.g. of document images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • General Business, Economics & Management (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Artificial Intelligence (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Geometry (AREA)
  • Computer Graphics (AREA)
  • Character Discrimination (AREA)
  • Information Transfer Between Computers (AREA)

Description

本発明は、画像処理及びネットワーク利用の技術分野に関し、特に、文字認識と画像照合を組み合わせて名刺の持ち主を確認し、名刺情報を交換する方法に関する。
名刺は、連絡方法を記載及び伝達するためにしばしば用いられる媒体であって、日常的なビジネス活動においては往々にして大量の名刺交換が行われ、人々は名刺交換によって連絡方法を伝達しあい、他者との関係を構築する。
現在、携帯電話やパソコンに広く用いられている名刺認識技術は、画像処理と光学文字認識(OCR,Optical Character Recognition)の原理を利用しており、デジタルカメラで撮像した、或いはスキャナーで読み取った名刺画像を自動で処理及び認識すると、その中から自動的に氏名、電話、E−mail等の有用な情報を抽出してアドレス帳に追加することで、名刺に記載された連絡先情報を電子機器に入力するにあたっての利便性を大いに高めている。例えば、トプダ(多普達)社製携帯電話Touch Diamondには、名刺認識ソフトが予めインストールされている。
現在の名刺認識の応用実例においては、ユーザーAとユーザーBが名刺を交換した場合、それぞれが手動で又は名刺認識ソフトを使用して、相手の名刺情報を自身の電子機器の連絡先リストへ追加する必要がある。
名刺認識で取得した文字を何らかのウェブサイトのサーバーに送信し、認識した氏名、電話番号、メールアドレス等の名刺の文字情報を用いて、当該ウェブサイトの登録ユーザーから名刺の持ち主を探し出し、名刺の持ち主と電子名刺情報を交換することができる。しかし、光学文字認識の原理に基づく名刺認識技術は認識結果において100%の精度を得られるわけではなく、光学文字認識によって取得した誤りを含む可能性のある文字情報を特定のウェブサイトのサーバーに送信すると、ウェブサイトのサーバーは、光学文字認識によって取得した文字から、これらの文字がウェブサイトのどの登録ユーザーによって保存された名刺なのか、或いはウェブサイトの登録ユーザーにより保存された名刺なのか否かを一意に特定できない場合が多い。例えば、会社によっては、営業マンの名刺は氏名を除き、会社の名称、住所、電話番号、メールアドレスといったその他の情報については共通であり、このような場合に名刺上の氏名の文字を認識できないと、ウェブサイトのサーバーはその他の文字情報からこの名刺の持ち主が誰なのかを特定することができない。
いわゆる画像照合とは、2枚の画像における撮像物体が同一物体か否かを判断することであり、学術界では長年に渡って画像照合の研究が行われている。一般的な手法としては、画像における撮像物体の特徴点を探し出し、続いて、これら特徴点周辺の一定範囲内の画素値から特徴ベクトルを得て、特徴点と特徴ベクトルの照合によって画像における撮像物体が同一物体か否かを判断する。例えば、論文“Speed−up Robust Feautre(SURF)”(Herbert Bay,Andreas Ess,Tinne Tuytelaars,Luc Van Gool,Computer Vision and Image Understanding 110(2008)346−359)に、このような方法が比較的詳細に記載されている。また、他の学術論文“Rate−efficient,real−time cd cover recognition on acamera−phone”(Sam S. Tsai,David Chen,Jatinder Pal Singh,Bernd Girod,Proceeding of the 16th ACM international conference on Multimedia)では、画像照合を用いて、入力された画像に最も近いCDジャケットをデータベースに存在する10000枚のCDジャケット画像の中から探し出す実際的なシステムについて述べている。
画像照合の手法を名刺認識に用いるにあたって、簡単で知覚的な方法としては、含まれる文字の認識・取得を要求すべくウェブサーバーに送信する名刺画像ごとに、特徴を抽出し、続いて、何らかの画像照合のアルゴリズムを用い、サーバーに含まれる全ての名刺の画像から入力された名刺画像に最も類似した名刺を探し出し、その名刺の文字情報をユーザーにフィードバックする。しかし、このような方法には主として次のような課題がある。
第一に、画像照合の手法は速度が非常に遅い。これは、サーバーのデータベースに保存されている名刺画像が膨大であり、一般的には数百万、数千万、更には数億もの異なる名刺画像から入力された画像と同じ名刺を探し出さねばならないことがあるからである。また、実際の応用にあたっては、ウェブサイトのサーバーは毎日のように数十万回から数百万回の名刺認識要求を処理する必要があるかもしれず、この作業量は、現在のコンピューティングハードウエアや画像照合のアルゴリズムではほぼ遂行不可能な任務である。
第二に、画像照合の手法は精度が十分に高くはない。名刺には、ユーザーの氏名、電話番号、電子メール、住所、会社の名称及び職務等が含まれているが、これらはいずれもプライバシー性の高い情報である。ユーザーが認識要求した名刺に対し、ウェブサイトのサーバーがフィードバックしたものが別の名刺に対応する文字情報であった場合、フィードバックした名刺の持ち主のプライバシーを侵害することになる。従って、画像照合の手法を用いた名刺認識において、認識精度への要求は100%であるといえる。ここで、認識精度とは、ウェブサイトのサーバーによってフィードバックされた文字情報を取得した100回の認識要求のうち、ウェブサイトのサーバーによってフィードバックされた文字情報の何回が、間違いなく認識要求した名刺画像に含まれる文字情報であったかをいう。ただし、認識精度を保証することを前提に、認識拒否率は低いほどよい。そうでなければ、この名刺認識が実質的な利用価値を失うからである。上記の認識拒否率とは、ウェブサイトのサーバーに提示された名刺認識要求100回のうち、何回がウェブサイトのサーバーから認識できないとの通知を受けたかをいう。認識できない原因としては、提供された画像が撮像された名刺画像及び対応する文字情報がウェブサイトのサーバーには保存されていなかったり、提供された画像が撮像されたのがどの名刺なのかをウェブサイトのサーバーが特定できなかったりすることで、対応する文字情報のフィードバックが拒否される可能性がある。現在の画像照合のアルゴリズムは100%の精度を保証しようとしているが、一般的に認識拒否率が比較的高い。
そこで、従来技術における種々の課題を解決するために、文字認識と画像照合を組み合わせた名刺情報交換技術を提供することが、当業者にとって早急に解決すべき課題となっている。
以上述べた従来技術における欠点に鑑みて、本発明は、名刺情報交換の精度と認識速度を確保するとともに、更に名刺情報のプライバシー性を保護可能な、文字認識と画像照合を組み合わせて名刺情報を交換する方法を提供することを目的とする。
上記の目的及びその他関連の目的を実現するために、本発明は、文字認識と画像照合を組み合わせて名刺情報を交換する方法を提供し、当該方法は、少なくともウェブサーバー、第1クライアント及び第2クライアントから構築されるネットワークシステムに適用され、前記ウェブサーバーは、名刺情報を予め保存した名刺データベースを備え、前記第1及び第2クライアントは、名刺画像取得、文字情報認識及び画像特徴抽出の機能を備え、前記名刺情報を交換する方法は、少なくとも、1)前記第1クライアントが前記第2クライアントのユーザーの名刺画像を取得して、前記名刺画像の文字情報を認識し、画像の特徴を抽出するステップと、2)前記第1クライアントが、認識した文字情報及び抽出した画像の特徴を前記ウェブサーバーにアップロードし、名刺認識要求を送信するステップと、3)前記ウェブサーバーが、当該名刺認識要求を受信すると前記文字情報に基づき、前記名刺データベースの中から当該文字情報に整合する全ての予め保存された名刺を検索し、検索された前記予め保存された各名刺の名刺画像を、前記第2クライアントのユーザーの名刺画像と画像特徴照合し、画像の特徴の類似度に基づき、予め保存されている名刺ごとに類似度の測定値を生成するステップと、4)前記ウェブサーバーが、予め保存されている全ての名刺のうち測定値が最大の名刺を候補名刺とするステップと、5)前記候補名刺が前記第2クライアントのユーザーに属するか否かを判断し、属する場合には、前記ウェブサーバーが前記第2クライアントに交換要求を送信し、前記第2クライアントが応じると、前記ウェブサーバーが、第2クライアントのユーザーの名刺情報を前記第1クライアントに送信するとともに、前記第1クライアントの名刺情報を第2クライアントに送信し、属さない場合にはステップを終了するステップとを含むことを特徴とする。
本発明の名刺情報を交換する方法において、前記名刺情報は、名刺画像、文字情報及び名刺の持ち主の画像、音声又は動画情報を含む。前記文字情報とは、名刺上の氏名、職名、電話、ファックス、住所、郵便番号、メールアドレス、ウェブアドレス、製品情報のうちの少なくとも一つである。
本発明の名刺情報を交換する方法のステップ1)において、前記第1クライアントは、デジタル撮像装置又はスキャナー装置で前記第2クライアントのユーザーの名刺画像を取得する。前記第1クライアントは、光学文字認識技術を用いて前記名刺画像における文字情報を認識し、画像の特徴を抽出する。
本発明の名刺情報を交換する方法において、前記ウェブサーバーには、前記測定値と比較するための参照値が予め設定されており、且つ前記測定値と参照値はいずれも整数であり、ステップ5)において、前記ウェブサーバーは前記候補名刺が前記第2クライアントのユーザーに属するか否かを判断する際には、前記測定値が前記参照値より大きいか否かを判断し、大きい場合には、前記ウェブサーバーが前記第2クライアントに交換要求を送信し、大きくない場合にはステップを終了する。
本発明の名刺情報を交換する方法のステップ3)において、前記ウェブサーバーが当該名刺認識要求を受信し、前記文字情報に基づき、前記名刺データベースの中から当該文字情報に整合する全ての予め保存された名刺が検索されなかった場合、ステップを終了する。前記画像特徴照合とは、前記予め保存された名刺の名刺画像と、第2クライアントのユーザーの名刺画像との特徴点及び各特徴点に対応する特徴ベクトルを照合することである。
本発明の名刺情報を交換する方法のステップ5)において、前記ウェブサーバーが前記第2クライアントに交換要求を送信し、前記第2クライアントが応じなかった場合、ステップを終了する。前記ウェブサーバーは、第1クライアントの名刺情報を第2クライアントに送信する際に、前記第1クライアントの名刺情報を前記ウェブサーバーに登録し、前記名刺データベースに保存する。
以上述べたように、本発明の文字認識と画像照合を組み合わせて名刺情報を交換する方法は、名刺画像を認識するにあたって、文字認識の結果を画像の特徴と組み合わせることで名刺の持ち主が当該ウェブサイトのどの登録ユーザーなのかを特定し、名刺の持ち主と名刺情報を交換する。これにより、紙媒体の名刺を交換した双方のうちの一方が名刺を撮像して認識するだけで、双方ともに相手の電子名刺情報を取得することが可能となり、名刺情報交換の精度と認識速度を確保できるだけでなく、画像照合によって更に名刺情報のプライバシー性の保護が可能となる。
図1は、本発明の文字認識と画像照合を組み合わせて名刺情報を交換する方法のフローチャートである。
以下に、特定の具体的実施例を用いて本発明の実施形態を説明するが、当業者は、本明細書に開示される内容から、本発明におけるその他のメリット及び効果を容易に理解可能である。本発明は、その他の異なる具体的な実施形態で実施又は応用してもよく、本明細書の各詳細事項については、別の観点及び応用に基づき、本発明の主旨から乖離しない範囲で各種の追加又は変更を加えてもよい。
図1は、本発明の文字認識と画像照合を組み合わせて名刺情報を交換する方法のフローチャートである。なお、本実施例で提供する図面は、略図形式で本発明の基本思想を説明するものにすぎず、本発明に関連する部材のみを示しているのであって、実際の実施時における部材数、形状及びサイズに基づいて描画してはおらず、実際に実施するにあたっては、各部材の形態、数量及び割合は任意に変更可能であり、且つ、部材の配置形態もより複雑となる可能性がある。
図に示すように、本発明は文字認識と画像照合を組み合わせて名刺情報を交換する方法を提供し、当該方法は、少なくともウェブサーバー(図示しない)、第1クライアント及び第2クライアント(図示しない)から構築されるネットワークシステムに適用され、前記ウェブサーバーは、名刺情報を予め保存した名刺データベースを備え、本実施例において、前記名刺データベースにおける前記名刺情報は、名刺画像、文字情報、及び名刺の持ち主の画像、音声又は動画情報を含み、例えば、ユーザーの名刺画像、ユーザーの顔写真及びユーザーが他者に提供すると自身で決めた文字、画像、音声、動画などの情報を含んでおり、前記文字情報とは、名刺上の氏名、職名、電話、ファックス、住所、郵便番号、メールアドレス、ウェブアドレス、製品情報のうちの少なくとも一つである。
前記第1及び第2クライアントは、名刺画像取得、文字情報認識及び画像特徴抽出の機能を備え、本実施例では、前記第1クライアントは名刺画像取得用にデジタル撮像装置又はスキャナー装置を備えるとともに、光学文字認識技術を用いて前記名刺画像における文字情報を認識し、画像の特徴を抽出することができる。本実施例では、前記第1及び第2クライアントはスマートフォン、タブレットパソコン、PDAなど、データ処理機能を備えた電子機器とすることができる。
本実施例では、前記ウェブサーバーのウェブサイトは連絡先情報を維持する機能を有するウェブサイトであって、当該ウェブサイトの登録ユーザーは、自身の1枚又は複数枚の名刺における文字情報及び名刺画像を含んだ名刺情報を、一括して名刺データベースに保存するとともに、自身のアカウントに関連付けさせることができる。保存される名刺の文字情報は、ユーザー自身或いはウェブサイト管理者によって検査・修正され、正確さを保証されている。同様の文字情報に対応する保存名刺画像は1枚又は複数枚あってもよく、例えば、同一ユーザーが、会社及び職務情報のみが異なり、氏名、電話、メールアドレス等のその他情報は全て同じである複数枚の名刺を所持する場合があげられる。
図1に示すように、前記名刺情報を交換する方法は、少なくとも以下のステップを含む。
まず、前記第1クライアントが前記第2クライアントのユーザーの名刺画像を取得して、前記名刺画像の文字情報を認識し、画像の特徴を抽出するというステップS1を実行する。本実施例において、前記第1クライアントは、デジタル撮像装置又はスキャナー装置で前記第2クライアントのユーザーの名刺画像を取得し、光学文字認識技術を用いて前記名刺画像の文字情報を認識し、画像の特徴を抽出する。続いて、ステップS2を実行する。
ステップS2において、前記第1クライアントは認識した文字情報及び抽出した画像の特徴を、有線又は無線ネットワークを介して前記ウェブサーバーにアップロードし、名刺認識要求を送信する。そして、ステップS3を実行する。
ステップS3において、前記ウェブサーバーは当該名刺認識要求を受信すると、前記文字情報に基づき、前記名刺データベースの中から当該文字情報に整合する全ての予め保存された名刺を検索する。本実施例では、前記ウェブサーバーは認識した文字情報を利用して、当該ウェブサイトの登録ユーザーが保存した名刺の文字情報において検索を実施する。文字検索は、次のステップで画像の特徴に基づく画像照合を必要とする画像数を大幅に減らす目的で実施され、これにより画像照合の速度と照合精度が高められる。前記の認識した文字情報を利用して文字検索を実施する具体的な方法としては、登録ユーザーが当該ウェブサイトの名刺データベースに保存した名刺の文字情報の中から、認識した文字に含まれる氏名、職名、電話、ファックス、住所、郵便番号、メールアドレス、ウェブアドレス、製品情報のうち少なくとも1つと完全に一致する予め保存された名刺を検出する。続いて、ステップS4を実行する。
ステップS4では検索されたか否かを判断し、YESの場合はステップS5に進む。NOの場合は、前記第2クライアントのユーザーの名刺情報が当該ウェブサイトに登録されていないことを示し、即ち、前記名刺データベースには当該第2クライアントのユーザーの名刺情報が存在しないため、そのままステップを終了する。
ここで、ステップS4において、認識した文字情報を利用して前記名刺データベースにおいて検索を実施した結果、第2クライアントのユーザーの名刺画像から認識した文字と一致する名刺が1枚のみ取得された場合であっても、ステップS5に移行して検証を実施せねばならない。これは、ウェブサーバーが、光学文字認識によって取得した文字からは、これらの文字がウェブサーバーに保存されている名刺のうちのどれに属するのか、或いは、ウェブサーバーに保存されている名刺に属するか否かを一意には特定できない場合があるからである。例えば、同一ユーザーが、会社及び職務情報のみが異なり、氏名、電話、メールアドレスといったその他情報は全て同じである複数枚の名刺を所持している場合がある。このような場合、会社と職務についての認識を誤り、氏名、電話、メールアドレス等の情報のみを正しく認識したとすると、ウェブサーバーは、これらの情報がユーザーのどの名刺に属するのかを一意に特定することはできない。続いて、ステップS5を実行する。
ステップS5では、検索された各前記予め保存された名刺の名刺画像を、前記第2クライアントのユーザーの名刺画像と画像特徴照合する。本実施例において、前記画像特徴照合とは、前記予め保存された名刺の名刺画像と、第2クライアントのユーザーの名刺画像との特徴点及び各特徴点に対応する特徴ベクトルを照合することである。続いて、ステップS6を実行する。
ステップS6では、画像の特徴の類似度に基づき、予め保存されている名刺ごとに類似度の測定値を生成する。本実施例において、前記ウェブサーバーには、前記測定値と比較するための参照値が予め設定されており、且つ前記測定値と参照値はいずれも整数である。前記測定値が前記参照値より大きい場合、前記測定値に対応する候補名刺が第2クライアントのユーザーの名刺であることを示す。換言すれば、前記測定値が大きいほど、前記測定値に対応する名刺が第2クライアントのユーザーの名刺と類似していることを示す。続いて、ステップS7を実行する。
ステップS7において、前記ウェブサーバーは、次のステップにおける比較の精度を確保すべく、予め保存されている全ての名刺のうち測定値が最大の名刺を候補名刺とする。続いて、ステップS8を実行する。
ステップS8では、前記候補名刺が前記第2クライアントのユーザーに属するか否かを判断する。換言すれば、前記ウェブサーバーは前記候補名刺が前記第2クライアントのユーザーに属するか否かを判断する際には、前記測定値が前記参照値より大きいか否かを判断し、YESの場合はステップS9に進む。NOの場合には、前記候補名刺が前記第2クライアントのユーザーには属さないことを意味するため、当該候補名刺の持ち主のプライバシーが漏洩しないように、名刺情報の交換をこれ以上は行わず、そのままステップを終了する。
ステップS9において、前記ウェブサーバーは前記第2クライアントに交換要求を送信し、続いてステップS10を実行する。
ステップS10では、前記第2クライアントが交換要求に応じたか否かを判断し、YESの場合はステップS11に進む。NOの場合は、前記第2クライアントのユーザーは前記第1クライアントのユーザーとの名刺情報の交換を望んでいないため、当該第2クライアントのユーザーのプライバシーが漏洩しないように、名刺情報の交換をこれ以上行わず、そのままステップを終了する。
ステップS11において、前記ウェブサーバーは、第2クライアントのユーザーの名刺情報を前記第1クライアントに送信するとともに、前記第1クライアントの名刺情報を第2クライアントに送信する。このとき、当該第1クライアントのユーザーがその名刺情報を当該ウェブサイトに登録していない場合、前記第1クライアントは、その名刺情報を第2クライアントに送信するとともに前記ウェブサーバーに登録し、前記名刺データベースへ保存することで、今後の名刺情報交換において、交換対象であるクライアントがウェブサイトから名刺情報を取得できるようにしてもよい。
以上述べたように、本発明の文字認識と画像照合を組み合わせて名刺情報を交換する方法は、名刺画像を認識するにあたって、文字認識の結果を画像の特徴と組み合わせることで名刺の持ち主が当該ウェブサイトのどの登録ユーザーなのかを特定し、名刺の持ち主と名刺情報を交換する。これにより、紙媒体の名刺を交換した双方のうちの一方が名刺を撮像して認識するだけで、双方ともに相手の電子名刺情報を取得することが可能となり、名刺情報交換の精度と認識速度を確保できるだけでなく、画像照合によって更に名刺情報のプライバシー性の保護が可能となる。従って、本発明は従来技術における種々の欠点を克服しており、高度な産業上の利用価値を有する。
上記の実施例は、本発明の原理及び効果を説明するための例示にすぎず、本発明を限定するものではない。当業者は、本発明の主旨及び範疇から乖離しないことを前提に、上記の実施例について追加又は変更を加えてもよい。よって、当業者が本発明に開示される主旨及び技術思想から乖離しないことを前提に実施する全ての等価の追加或いは変更は、いずれも本発明の特許請求の範囲に包括される。

Claims (10)

  1. 文字認識と画像照合を組み合わせて名刺情報を交換する方法において、当該方法は、少なくともウェブサーバー、第1クライアント及び第2クライアントから構築されるネットワークシステムに適用され、前記ウェブサーバーは、名刺情報を予め保存した名刺データベースを備え、前記第1及び第2クライアントは、名刺画像取得、文字情報認識及び画像特徴抽出の機能を備え、前記名刺情報を交換する方法は、少なくとも、
    1)前記第1クライアントが前記第2クライアントのユーザーの名刺画像を取得して、前記名刺画像の文字情報を認識し、画像の特徴を抽出するステップと、
    2)前記第1クライアントが、認識した文字情報及び抽出した画像の特徴を前記ウェブサーバーにアップロードし、名刺認識要求を送信するステップと、
    3)前記ウェブサーバーが、当該名刺認識要求を受信すると前記文字情報に基づき、前記名刺データベースの中から当該文字情報に整合する全ての予め保存された名刺を検索し、検索された各前記予め保存された名刺の名刺画像を、前記第2クライアントのユーザーの名刺画像と画像特徴照合し、画像の特徴の類似度に基づき、予め保存されている名刺ごとに類似度の測定値を生成するステップと、
    4)前記ウェブサーバーが、予め保存されている全ての名刺のうち測定値が最大の名刺を候補名刺とするステップと、
    5)前記候補名刺が前記第2クライアントのユーザーに属するか否かを判断し、属する場合には、前記ウェブサーバーが前記第2クライアントに交換要求を送信し、前記第2クライアントが応じると、前記ウェブサーバーが、第2クライアントのユーザーの名刺情報を前記第1クライアントに送信するとともに、前記第1クライアントの名刺情報を第2クライアントに送信し、属さない場合には、ステップを終了するステップとを含むことを特徴とする方法。
  2. 前記名刺情報は、名刺画像、文字情報及び名刺の持ち主の画像、音声又は動画情報を含むことを特徴とする、請求項1に記載の文字認識と画像照合を組み合わせて名刺情報を交換する方法。
  3. 前記文字情報とは、名刺上の氏名、職名、電話、ファックス、住所、郵便番号、メールアドレス、ウェブアドレス、製品情報のうちの少なくとも一つであることを特徴とする、請求項2に記載の文字認識と画像照合を組み合わせて名刺情報を交換する方法。
  4. ステップ1)において、前記第1クライアントは、デジタル撮像装置又はスキャナー装置で前記第2クライアントのユーザーの名刺画像を取得することを特徴とする、請求項1に記載の文字認識と画像照合を組み合わせて名刺情報を交換する方法。
  5. ステップ1)において、前記第1クライアントは、光学文字認識技術を用いて前記名刺画像における文字情報を認識し、画像の特徴を抽出することを特徴とする、請求項1に記載の文字認識と画像照合を組み合わせて名刺情報を交換する方法。
  6. 前記ウェブサーバーには、前記測定値と比較するための参照値が予め設定されており、且つ前記測定値と参照値はいずれも整数であり、ステップ5)において、前記ウェブサーバーが前記候補名刺が前記第2クライアントのユーザーに属するか否かを判断する際には、前記測定値が前記参照値より大きいか否かを判断し、大きい場合には、前記ウェブサーバーが前記第2クライアントに交換要求を送信し、大きくない場合にはステップを終了することを特徴とする、請求項1に記載の文字認識と画像照合を組み合わせて名刺情報を交換する方法。
  7. ステップ3)において、前記ウェブサーバーが当該名刺認識要求を受信し、前記文字情報に基づき、検索して前記名刺データベースの中から当該文字情報に整合する全ての予め保存された名刺が見つからなかった場合、ステップを終了することを特徴とする、請求項1に記載の文字認識と画像照合を組み合わせて名刺情報を交換する方法。
  8. ステップ3)において、前記画像特徴照合とは、前記予め保存された名刺の名刺画像と、第2クライアントのユーザーの名刺画像との特徴点及び各当該特徴点に対応する特徴ベクトルとの照合であることを特徴とする、請求項1に記載の文字認識と画像照合を組み合わせて名刺情報を交換する方法。
  9. ステップ5)において、前記ウェブサーバーが前記第2クライアントに交換要求を送信し、前記第2クライアントが応じなかった場合、ステップを終了することを特徴とする、請求項1に記載の文字認識と画像照合を組み合わせて名刺情報を交換する方法。
  10. ステップ5)において、前記ウェブサーバーは、第1クライアントの名刺情報を第2クライアントに送信する際に、前記第1クライアントの名刺情報を前記ウェブサーバーに登録し、前記名刺データベースに保存することを特徴とする、請求項1に記載の文字認識と画像照合を組み合わせて名刺情報を交換する方法。
JP2014517388A 2011-07-05 2011-08-04 文字認識と画像照合を組み合わせて名刺情報を交換する方法 Active JP5757366B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN2011101869504A CN102270296A (zh) 2011-07-05 2011-07-05 结合文字识别和图像匹配交换名片信息的方法
CN201110186950.4 2011-07-05
PCT/CN2011/078018 WO2013004035A1 (zh) 2011-07-05 2011-08-04 结合文字识别和图像匹配交换名片信息的方法

Publications (2)

Publication Number Publication Date
JP2014522020A JP2014522020A (ja) 2014-08-28
JP5757366B2 true JP5757366B2 (ja) 2015-07-29

Family

ID=45052598

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014517388A Active JP5757366B2 (ja) 2011-07-05 2011-08-04 文字認識と画像照合を組み合わせて名刺情報を交換する方法

Country Status (6)

Country Link
US (1) US9298708B2 (ja)
EP (1) EP2731048A4 (ja)
JP (1) JP5757366B2 (ja)
KR (1) KR101805731B1 (ja)
CN (1) CN102270296A (ja)
WO (1) WO2013004035A1 (ja)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102546645B (zh) * 2012-01-17 2015-05-06 深圳市乐唯科技开发有限公司 一种基于音频信息实现对象匹配的系统及方法
CN103778561B (zh) * 2012-10-23 2017-12-01 腾讯科技(深圳)有限公司 一种社交互动方法及系统
JP5312701B1 (ja) * 2013-02-08 2013-10-09 三三株式会社 名刺管理サーバ、名刺画像取得装置、名刺管理方法、名刺画像取得方法、およびプログラム
CN103269379B (zh) * 2013-06-05 2016-12-28 中国电子科技集团公司第十五研究所 水源信息采集系统及水源信息上传方法
US20150319612A1 (en) 2014-05-01 2015-11-05 Global Tel*Link Corp. System and Method for Authenticating Called Parties of Individuals Within a Controlled Environment
US10616368B2 (en) * 2014-09-05 2020-04-07 Mobicard Inc. Electronic interactive business card mobile software system with customer relationship management database
US10270880B2 (en) * 2014-09-05 2019-04-23 Mobicard Inc Electronic interactive business card mobile software system with customer relationship management database
US20160125387A1 (en) * 2014-11-03 2016-05-05 Square, Inc. Background ocr during card data entry
US20180330158A1 (en) * 2014-11-29 2018-11-15 Vishal Gupta Business card ocr with crowd sourcing
CN105100193B (zh) * 2015-05-26 2018-12-11 小米科技有限责任公司 云名片推荐方法及装置
CN105574208A (zh) * 2016-01-29 2016-05-11 北京橙鑫数据科技有限公司 名片推荐方法及装置
US10069955B2 (en) * 2016-04-29 2018-09-04 Samuel Philip Gerace Cloud-based contacts management
CN107679560B (zh) * 2017-09-15 2021-07-09 Oppo广东移动通信有限公司 数据传输方法、装置、移动终端及计算机可读存储介质
JP2019110466A (ja) * 2017-12-19 2019-07-04 キヤノン株式会社 画像読取装置、宛先情報の設定方法、及びプログラム。
CN108777806B (zh) * 2018-05-30 2021-11-02 腾讯科技(深圳)有限公司 一种用户身份识别方法、装置和存储介质
CN109271850B (zh) * 2018-08-02 2021-08-20 北京三快在线科技有限公司 一种商家信息上传方法、装置、电子设备及存储介质
CN109815268A (zh) * 2018-12-21 2019-05-28 上海诺悦智能科技有限公司 一种交易制裁名单匹配系统
KR20210006790A (ko) 2019-07-09 2021-01-19 권형석 정의된 코드체계에 따라 명함 이미지를 이용한 정보 관리방법 및 시스템.
KR20210008286A (ko) 2019-07-13 2021-01-21 권형석 실물 명함 이미지와 문자영역 정보를 이용한 데이터 관리방법 및 시스템.
CN110472121B (zh) * 2019-07-31 2022-04-26 北京金堤科技有限公司 名片信息搜索方法、装置、电子设备以及计算机可读存储介质
KR20210016245A (ko) 2019-08-03 2021-02-15 권형석 실물 명함 이미지와 문자영역 정보를 이용한 데이터 관리방법 및 시스템.
KR20210017916A (ko) 2019-08-09 2021-02-17 권형석 실물 명함 이미지와 문자영역 정보를 이용한 데이터 관리방법 및 시스템.
CN110569326A (zh) * 2019-08-29 2019-12-13 广州悦尔电子科技有限公司 一种依据位置信息推荐电子名片之方法、系统、电子设备及计算机可读存储介质
JP7440259B2 (ja) * 2019-12-19 2024-02-28 Sansan株式会社 情報処理装置、情報処理方法、プログラム
US20230336632A1 (en) * 2020-07-08 2023-10-19 Nec Corporation Server apparatus, online conference system, business card exchange method, and computer readable storage medium
CN113065782A (zh) * 2021-04-12 2021-07-02 山东壹典专业设计有限公司 一种设计师任务分配系统

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1265190B1 (en) * 1993-12-10 2009-06-24 Ricoh Company, Ltd. Image recognition method for extracting/recognizing specific image from input image signal
US5465353A (en) 1994-04-01 1995-11-07 Ricoh Company, Ltd. Image matching and retrieval by multi-access redundant hashing
AU6410699A (en) * 1998-10-13 2000-05-01 Chris Cheah Method and system for controlled distribution of information over a network
US7428569B1 (en) * 1999-05-14 2008-09-23 Sony Corporation Information processing apparatus, information processing method, and provision medium
US6816725B1 (en) 2001-01-31 2004-11-09 Palm Source, Inc. Method and apparatus for selection of one data set from among multiple related data sets and beaming the selected data set
JP2002269221A (ja) * 2001-03-13 2002-09-20 Just Syst Corp 電子名刺提供方法および電子名刺提供装置
DE10211080A1 (de) * 2002-03-13 2003-10-09 Oce Printing Systems Gmbh Verfahren, Gerätesysteme und Computerprogramme zum Erzeugen gedruckter Dokumente mit einer eindeutigen Kennung
CN1120782C (zh) * 2002-06-07 2003-09-10 北京龙浩亚安智能数码科技有限公司 车牌自动识别方法
US20070149208A1 (en) 2002-12-27 2007-06-28 Hanno Syrbe Location based services for mobile communication terminals
DE10353517A1 (de) * 2003-11-14 2005-06-16 Voith Turbo Gmbh & Co. Kg Hydrodynamische Kupplung und Verfahren zur Beeinflussung des von der hydrodynamischen Kupplung aufnehmbaren Momentes
US7263205B2 (en) * 2004-12-06 2007-08-28 Dspv, Ltd. System and method of generic symbol recognition and user authentication using a communication device with imaging capabilities
JP2006209183A (ja) * 2005-01-25 2006-08-10 Seiko Epson Corp 名刺情報管理サーバと名刺情報管理端末と名刺情報管理プログラムと記録媒体と名刺情報管理方法
US7826665B2 (en) * 2005-12-12 2010-11-02 Xerox Corporation Personal information retrieval using knowledge bases for optical character recognition correction
US20070158403A1 (en) * 2006-01-10 2007-07-12 Hasan Ertas Business card information exchange device and method
CN100446511C (zh) * 2006-11-29 2008-12-24 华为技术有限公司 交换电子名片的方法及名片服务器和名片交换系统
US20080134030A1 (en) 2006-12-05 2008-06-05 Palm, Inc. Device for providing location-based data
KR20080075297A (ko) 2007-02-12 2008-08-18 삼성전자주식회사 휴대용 단말기의 블루투스 연결 장치 및 방법
JP2009043075A (ja) 2007-08-09 2009-02-26 Baazu Joho Kagaku Kenkyusho:Kk 名刺登録管理システム
US8244037B2 (en) * 2007-11-15 2012-08-14 Master Wave International Company Ltd Image-based data management method and system
US8914024B2 (en) 2008-01-10 2014-12-16 Ximoxi, Inc. Discovery of network members by personal attributes
US20100255861A1 (en) 2009-04-03 2010-10-07 Tal Shlomo Raviv System and Method for Transferring Contact Information to a Recipient
US20100323729A1 (en) * 2009-06-17 2010-12-23 Carrie Chitsey Electronic card presentation and exchange
CN101827317A (zh) 2009-09-07 2010-09-08 上海银贵网络科技服务有限公司 一种通过移动终端寻找目标对象的控制方法以及控制装置
JP2011095889A (ja) * 2009-10-28 2011-05-12 Murata Machinery Ltd 画像読取装置
CN101882227B (zh) * 2010-07-13 2013-03-27 上海合合信息科技发展有限公司 基于图像匹配和网络查询的识别方法及系统
CN101916258B (zh) * 2010-07-13 2012-04-18 上海合合信息科技发展有限公司 通过网络查询自动校正识别结果的方法及系统

Also Published As

Publication number Publication date
CN102270296A (zh) 2011-12-07
WO2013004035A1 (zh) 2013-01-10
JP2014522020A (ja) 2014-08-28
EP2731048A4 (en) 2015-06-03
EP2731048A1 (en) 2014-05-14
US9298708B2 (en) 2016-03-29
KR101805731B1 (ko) 2017-12-06
KR20140051245A (ko) 2014-04-30
US20140126825A1 (en) 2014-05-08

Similar Documents

Publication Publication Date Title
JP5757366B2 (ja) 文字認識と画像照合を組み合わせて名刺情報を交換する方法
US9077678B1 (en) Facilitating photo sharing
WO2016177259A1 (zh) 一种相似图像识别方法及设备
WO2022134584A1 (zh) 房产图片验证方法、装置、计算机设备及存储介质
TW201508520A (zh) 設置背景圖像的方法及相關的伺服器和系統
WO2013004036A1 (zh) 结合文字识别和图像匹配的名片识别方法
US10339373B1 (en) Optical character recognition utilizing hashed templates
JP5863962B2 (ja) 追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法
US11367310B2 (en) Method and apparatus for identity verification, electronic device, computer program, and storage medium
JP2013540301A (ja) 連絡先情報を入力しネットワークを介して相手方が提供する情報を取得する方法
CN102982064A (zh) 一种自动分发媒体文件的方法及装置
WO2019047567A1 (zh) 服务提供方法、装置、存储介质和计算设备
US20150163322A1 (en) Method for acquiring information of client terminal, server and computer-readable medium
CN112330331A (zh) 基于人脸识别的身份验证方法、装置、设备及存储介质
CN107656959B (zh) 一种留言方法、装置及留言设备
JP5702478B1 (ja) 個人情報管理システム及び個人情報管理プログラム
JP6729678B2 (ja) 情報処理装置、容疑者情報生成方法及びプログラム
WO2023000792A1 (zh) 构建活体识别模型和活体识别的方法、装置、设备及介质
JP5946315B2 (ja) 画像検索システム
WO2019002556A1 (en) VERIFICATION OF USER ONLINE WITHOUT PRIOR KNOWLEDGE OF THE USER
CN111382408A (zh) 智能化用户识别方法、装置及计算机可读存储介质
JP2019105905A (ja) 名刺情報登録装置、名刺情報登録方法、およびプログラム
US20150030241A1 (en) Method and system for data identification and extraction using pictorial representations in a source document
KR20200009887A (ko) 디바이스에서 실시간 이미지 유사성을 결정하는 방법 및 시스템
Bhushan Concept of face recognition technique

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140730

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150410

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150428

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150520

R150 Certificate of patent or registration of utility model

Ref document number: 5757366

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R154 Certificate of patent or utility model (reissue)

Free format text: JAPANESE INTERMEDIATE CODE: R154

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250