JP5863962B2 - 追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法 - Google Patents

Description

本発明は文字認識及び画像処理分野に関し、特に、文字認識の結果と画像の特徴を組み合わせて、認識した名刺が連絡先リストに存在しているか否かを自動的に判断する方法に関する。

名刺は、連絡方法を記載及び伝達するためにしばしば用いられる媒体であって、日常的なビジネス活動においては往々にして大量の名刺交換が行われ、人々は名刺交換によって連絡方法を伝達しあい、他者との関係を構築する。

現在、携帯電話やパソコンに広く用いられている名刺認識技術は、画像処理と光学文字認識（ＯＣＲ，Ｏｐｔｉｃａｌ Ｃｈａｒａｃｔｅｒ Ｒｅｃｏｇｎｉｔｉｏｎ）の原理を利用しており、カメラで撮像した、或いはスキャナーで読み取った名刺画像を自動で処理及び認識すると、その中から自動的に氏名、電話、Ｅ−ｍａｉｌ等の有用な情報を抽出してアドレス帳に追加することで、名刺に記載された連絡先情報を電子機器に入力するにあたっての利便性を大いに高めている。一例として、アップル社のＡｐｐ ｓｔｏｒｅやＧｏｏｇｌｅ社のＡｎｄｒｏｉｄ ｍａｒｋｅｔで販売されている名刺万能王等の名刺認識ソフトがあげられる。

現在のあらゆる名刺認識ソフトでは、ユーザーが一枚の名刺を認識し、連絡先リストに保存すると、連絡先リストに項目が1つ追加される。当該項目には、認識した名刺の氏名、電話、Ｅ−ｍａｉｌ、会社、部門、職務、住所などの文字情報が含まれ、通常は、場合によって美化処理を施された撮像名刺画像が更に含まれる。ユーザーが同じ名刺を何度も入力すると、この名刺について新たな連絡先項目が何度も作成され、不要な重複が生じてしまう。現在の製品は、認識した名刺が連絡先リストに存在しているか否かを自動的に判断するための適切な方法を備えていない。

認識した名刺が連絡先リストに存在しているか否かを自動的に判断する知覚的な方法としては、認識した名刺の文字を連絡先リストに存在する項目の文字と比較することで、存在の有無を調べることがあげられる。こうした方法では、光学文字認識の原理に基づく名刺認識技術は認識結果において１００%の精度を得られるわけではないため、このように光学文字認識によって取得した誤りを含む可能性のある文字情報を用いて連絡先リストに存在する項目と比較しても、比較結果の信頼性を保証できないとの問題がある。例えば、肩書きの異なる複数種類の名刺を同時に所持する人も多いが、これら名刺の氏名、電話、Ｅ−ｍａｉｌ等の連絡先は同じで、会社と職務のみが異なっている場合、会社と職務を誤認識すると、認識した文字からは認識した名刺がどれなのかを特定できない。また、例えば、会社によっては営業マンの名刺は氏名を除き、会社の名称、住所、電話番号、メールアドレスといったその他の情報については共通であり、このような場合に名刺上の氏名の文字を認識できないと、その他の文字情報からこの名刺の持ち主が誰なのかを特定することはできない。

そこで、文字認識の結果と画像の特徴を組み合わせて、認識した名刺が連絡先リストに存在しているか否かを自動的に判断する方法を提供することで従来技術における種々の課題を解決することが、当業者にとって早急に解決すべき課題となっている。

以上述べた従来技術の欠点に鑑みて、ユーザーが連絡先リストに余分な項目を追加してしまうという従来技術によく見られる問題を解決するために、本発明は、文字認識の結果と画像の特徴を組み合わせて、認識した名刺が連絡先リストに存在しているか否かを自動的に判断するための、追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法を提供することを目的とする。

上記の目的及びその他関連の目的を実現するために、本発明は追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法を提供し、当該方法は名刺画像取得、文字情報認識及び画像特徴抽出の機能を少なくとも備える電子機器に応用され、且つ、前記電子機器には連絡先名刺情報を蓄積するための連絡先リストが更に備えられ、前記方法は少なくとも、１）前記電子機器が、追加を希望する名刺の名刺画像を取得して、当該名刺画像の文字情報を認識し、画像の特徴を抽出するステップと、２）前記文字情報に基づき、前記連絡先リストの中から当該文字情報に整合する全ての予め保存されている名刺を検索し、検索された各前記予め保存されている名刺の名刺画像を、前記追加を希望する名刺の名刺画像とそれぞれ画像特徴照合し、画像の特徴の類似度に基づき、予め保存されている名刺ごとに類似度の測定値を生成するステップと、３）予め保存されている全ての名刺のうち測定値が最大の名刺を候補名刺とするステップと、４）前記候補名刺と追加を希望する名刺とが同一のユーザーに属するか否かを判断し、属する場合、前記電子機器は当該ユーザーの名刺情報が前記連絡先リストに存在している旨を表示し、属さない場合、前記電子機器は当該ユーザーの名刺情報が前記連絡先リストに存在しない旨を表示するステップとを含むことを特徴とする。

前記連絡先リストにおける名刺情報は、名刺画像及び文字情報を含む。前記文字情報とは、名刺上の氏名、職名、電話、ファックス、住所、郵便番号、メールアドレス、ウェブアドレス、製品情報のうちの少なくとも一つである。

前記電子機器には、前記測定値と比較するための参照値が予め設定されており、且つ前記測定値と参照値はいずれも整数である。

本発明の方法のステップ１）において、前記電子機器は、デジタル撮像装置又はスキャナー装置で前記追加を希望する名刺の名刺画像を取得する。前記電子機器は、光学文字認識技術を用いて前記名刺画像における文字情報を認識し、画像の特徴を抽出する。

本発明の方法におけるステップ４）では、前記候補名刺と追加を希望する名刺とが同一のユーザーに属するか否かを判断する際、前記測定値が前記参照値より大きいか否かを判断し、大きい場合、前記電子機器は当該ユーザーの名刺情報が前記連絡先リストに存在している旨を表示し、小さい場合、前記電子機器は当該ユーザーの名刺情報が前記連絡先リストに存在しない旨を表示する。

本発明の方法におけるステップ４）では、更に、前記候補名刺と追加を希望する名刺とが同一の名刺に属するか否かを判断し、属する場合、前記電子機器は当該追加を希望する名刺情報が前記連絡先リストに存在している旨を表示し、属さない場合、前記電子機器は前記追加を希望する名刺の名刺情報が前記連絡先リストに存在しない旨を表示する。

本発明の方法におけるステップ２）において、前記文字情報に基づき、前記連絡先リストの中から当該文字情報に整合する全ての予め保存されている名刺が検索されなかった場合、前記電子機器は当該ユーザーの名刺情報が前記連絡先リストに存在しない旨を表示する。

本発明の方法におけるステップ２）において、前記画像特徴照合とは、前記予め保存されている名刺の名刺画像と、追加を希望する名刺の名刺画像との特徴点及び各当該特徴点に対応する特徴ベクトルを照合することである。

以上述べたように、本発明の追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法は、名刺画像を認識する際に、文字認識の結果と画像の特徴を組み合わせて、認識した名刺が連絡先リストに存在しているか否かを自動的に判断することで、連絡先リストに余分な項目を追加してしまうという従来技術によく見られる問題を回避した。

図１は、本発明の追加を希望する名刺が連絡先リストに存在しているか否かを判断するステップのフローチャートを示す。

以下に、特定の具体的実例を用いて本発明の実施形態を説明するが、当業者は、本明細書に開示される内容から、本発明におけるその他のメリット及び効果を容易に理解可能である。本発明は、その他の異なる具体的な実施形態で実施又は応用してもよく、本明細書の各詳細事項については、別の観点及び応用に基づき、本発明の主旨から乖離しない範囲で各種の追加又は変更を加えてもよい。

図１は、本発明の追加を希望する名刺が連絡先リストに存在しているか否かを判断するステップのフローチャートを示す。なお、本実施例で提供する図面は、略図形式で本発明の基本思想を説明するものにすぎず、本発明に関連する部材のみを示しているのであって、実際の実施時における部材数、形状及びサイズに基づいて描画してはおらず、実際に実施するにあたっては、各部材の形態、数量及び割合は任意に変更可能であり、且つ、部材の配置形態もより複雑となる可能性がある。

図に示すように、本発明は、追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法を提供し、当該方法は、名刺画像取得、文字情報認識及び画像特徴抽出の機能を少なくとも備える電子機器に応用され、且つ、前記電子機器には連絡先名刺情報を蓄積するための連絡先リストが更に備えられる。本実施例では、前記連絡先リストにおける名刺情報は名刺画像及び文字情報を含み、前記文字情報とは、名刺上の氏名、職名、電話、ファックス、住所、郵便番号、メールアドレス、ウェブアドレス、製品情報のうちの少なくとも一つである。また、前記連絡先リストにおいて同様の文字情報に対応して保存される名刺画像は１枚又は複数枚あってもよく、例えば、同一ユーザーが、会社及び職務情報のみが異なり、氏名、電話、メールアドレス等のその他情報は全て同じの複数枚の名刺を所持する場合があげられる。

本実施例において、前記電子機器は名刺画像を取得するためのデジタル撮像装置又はスキャナー装置を備え、光学文字認識技術を用いて前記名刺画像の文字情報を認識し、画像の特徴を抽出することができる。本実施例では、前記電子機器はスマートフォン、タブレットパソコン、ＰＤＡなど、データ処理機能を備えた電子機器とすることができる。

図１に示すように、前記の追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法は、少なくとも以下のステップを含む。

まず、前記電子機器が、追加を希望する名刺の名刺画像を取得して、当該名刺画像の文字情報を認識し、画像の特徴を抽出するというステップＳ１を実行する。本実施例において、前記電子機器は、デジタル撮像装置又はスキャナー装置で前記追加を希望する名刺の名刺画像を取得し、光学文字認識技術を用いて前記名刺画像の文字情報を認識し、画像の特徴を抽出する。続いてステップＳ２を実行する。

ステップＳ２では、前記文字情報に基づき、前記連絡先リストの中から当該文字情報に整合する全ての予め保存されている名刺を検索する。本実施例では、前記電子機器は認識した文字情報を用いて当該連絡先リストにおいて検索を行う。文字検索は、次のステップで画像の特徴に基づく画像照合を必要とする画像数を大幅に減らす目的で実施され、これにより画像照合の速度と照合精度が高められる。前記の認識した文字情報を用いて文字検索を実施する具体的な方法としては、当該連絡先リストに予め保存されている名刺の文字情報の中から、認識した文字に含まれる氏名、職名、電話、ファックス、住所、郵便番号、メールアドレス、ウェブアドレス、製品情報のうちの少なくとも１つと完全に一致する予め保存されている名刺を検出する。続いて、ステップＳ３を実行する。

ステップＳ３では検索されたか否かを判断し、ＹＥＳの場合はステップＳ４に進み、ＮＯの場合はステップＳ９に進む。

ここで、ステップＳ３において、認識した文字情報を用いて前記連絡先リストにおいて検索を実施した結果、追加を希望する名刺の名刺画像から認識した文字と一致する名刺が１枚のみ取得された場合であっても、ステップＳ４に移行して検証を実施せねばならない。これは、電子機器が、光学文字認識によって取得した文字からは、これらの文字が連絡先リストに保存されている名刺のうちのどれに属するのかを一意には特定できない場合があるからである。例えば、同一ユーザーが、会社及び職務情報のみが異なり、氏名、電話、メールアドレスといったその他情報は全て同じ複数枚の名刺を所持している場合、会社と職務を誤認識し、氏名、電話、メールアドレス等の情報のみを正しく認識したとすると、電子機器は、これらの情報がユーザーのどの名刺に属するのかを一意に特定することはできない。

ステップＳ４では、検索された各前記予め保存されている名刺の名刺画像を、前記追加を希望する名刺の名刺画像と画像特徴照合する。本実施例において、前記画像特徴照合とは、前記予め保存されている名刺の名刺画像と、追加を希望する名刺の名刺画像との特徴点及び各当該特徴点に対応する特徴ベクトルを照合することである。続いて、ステップＳ５を実行する。

ステップＳ５では、画像の特徴の類似度に基づき、予め保存されている名刺ごとに類似度の測定値を生成する。本実施例において、前記電子機器には、前記測定値と比較するための参照値が予め設定されており、且つ前記測定値と参照値はいずれも整数である。前記測定値が前記参照値より大きい場合、前記測定値に対応する候補名刺が追加を希望する名刺であることを示す。換言すれば、前記測定値が大きいほど、前記測定値に対応する名刺が追加を希望する名刺と類似していることを示す。続いて、ステップＳ６を実行する。

ステップＳ６では、次のステップにおける比較の精度を確保すべく、予め保存されている全ての名刺のうち測定値が最大の名刺を候補名刺とする。続いて、ステップＳ７を実行する。

ステップＳ７では、前記候補名刺と追加を希望する名刺とが同一のユーザーに属するか否かを判断する。本実施例では、前記候補名刺と追加を希望する名刺とが同一のユーザーに属するか否かを判断する際、前記測定値が前記参照値より大きいか否かを判断し、ＹＥＳの場合はステップＳ８に進み、ＮＯの場合はステップＳ９に進む。

ステップＳ８において、前記電子機器は当該ユーザーの名刺情報が前記連絡先リストに存在している旨を表示するが、同一ユーザーが会社及び職務情報のみが異なり、氏名、電話、メールアドレスといったその他情報は全て同じである複数枚の名刺を所持している場合があり、このような場合には、当該電子機器は、前記候補名刺と追加を希望する名刺とが同一の名刺に属するかどうかを更に検証するか否かを操作者に通知する必要がある。即ち、ステップＳ１０に進む。

ステップＳ９では、前記電子機器は当該ユーザーの名刺情報が前記連絡先リストに存在しない旨を表示し、このとき、当該電子機器の操作者は、当該ユーザーの名刺を連絡先リストに追加するか否かを必要に応じて決定すればよい。

ステップＳ１０では、前記候補名刺と追加を希望する名刺とが同一の名刺に属するか否かを判断し、ＹＥＳの場合はステップＳ１１に進み、ＮＯの場合はステップＳ１２に進む。

ステップＳ１１において、前記電子機器は当該追加を希望する名刺情報が前記連絡先リストに存在している旨を表示して、当該電子機器の操作者に対し、重複して名刺情報を追加する必要はないことを示す。

ステップＳ１２では、前記電子機器は前記追加を希望する名刺の名刺情報が前記連絡先リストに存在しない旨を表示し、このとき、当該電子機器の操作者は、同一ユーザーの別の名刺情報を連絡先リストに追加するか否かを必要に応じて決定すればよい。

以上述べたように、本発明の追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法は、名刺画像を認識する際に、文字認識の結果と画像の特徴を組み合わせて、認識した名刺が連絡先リストに存在しているか否かを自動的に判断することで、ユーザーが連絡先リストに余分な項目を追加してしまうとの問題を回避する。従って、本発明は従来技術における種々の欠点を克服しており、高度な産業上の利用価値を有する。

上記の実施例は、本発明の原理及び効果を説明するための例示にすぎず、本発明を限定するものではない。当業者は、本発明の主旨及び範疇から乖離しないことを前提に、上記の実施例について追加又は変更を実施してもよい。よって、当業者が本発明に開示される主旨及び技術思想から乖離しないことを前提に実施する全ての等価の追加或いは変更は、いずれも本発明の特許請求の範囲に包括される。

Claims (9)

1. 追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法において、当該方法は名刺画像取得、文字情報認識及び画像特徴抽出の機能を少なくとも備える電子機器に応用され、且つ、前記電子機器には連絡先名刺情報を蓄積するための連絡先リストが更に備えられ、前記方法は少なくとも、
   １）前記電子機器が、追加を希望する名刺の名刺画像を取得して、当該名刺画像の文字情報を認識し、画像の特徴を抽出するステップと、
   ２）前記文字情報に基づき、前記連絡先リストの中から当該文字情報に整合する全ての予め保存されている名刺を検索し、検索された各前記予め保存されている名刺の名刺画像を、前記追加を希望する名刺の名刺画像とそれぞれ画像特徴照合し、画像の特徴の類似度に基づき、予め保存されている名刺ごとに類似度の測定値を生成するステップと、
   ３）前記測定値が最大の名刺を候補名刺とするステップと、
   ４）前記候補名刺と追加を希望する名刺とが同一の人物に属するか否かを判断し、属する場合、前記電子機器は当該人物の名刺情報が前記連絡先リストに存在している旨を表示し、属さない場合、前記電子機器は当該人物の名刺情報が前記連絡先リストに存在しない旨を表示するステップ、及び
   前記候補名刺と追加を希望する名刺とが同一の名刺に属するか否かを判断し、属する場合、前記電子機器は当該追加を希望する名刺情報が前記連絡先リストに存在している旨を表示し、属さない場合、前記電子機器は前記追加を希望する名刺の名刺情報が前記連絡先リストに存在しない旨を表示するステップとを含むことを特徴とする方法。
2. 前記連絡先リストにおける名刺情報は、名刺画像及び文字情報を含むことを特徴とする請求項１に記載の追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法。
3. 前記文字情報とは、名刺上の氏名、職名、電話、ファックス、住所、郵便番号、メールアドレス、ウェブアドレス、製品情報のうちの少なくとも一つであることを特徴とする請求項２に記載の追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法。
4. ステップ１）において、前記電子機器は、デジタル撮像装置又はスキャナー装置で前記追加を希望する名刺の名刺画像を取得することを特徴とする請求項１に記載の追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法。
5. ステップ１）において、前記電子機器は、光学文字認識技術を用いて前記名刺画像における文字情報を認識し、画像の特徴を抽出することを特徴とする請求項１に記載の追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法。
6. 前記電子機器には、前記測定値と比較するための参照値が予め設定されており、且つ前記測定値と参照値はいずれも整数であることを特徴とする請求項１に記載の追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法。
7. ステップ４）では、前記候補名刺と追加を希望する名刺とが同一の人物に属するか否かを判断する際、前記測定値が前記参照値より大きいか否かを判断し、大きい場合、前記電子機器は当該人物の名刺情報が前記連絡先リストに存在している旨を表示し、小さい場合、前記電子機器は当該人物の名刺情報が前記連絡先リストに存在しない旨を表示することを特徴とする請求項１に記載の追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法。
8. ステップ２）において、前記文字情報に基づき、前記連絡先リストの中から当該文字情報に整合する全ての予め保存されている名刺が検索されなかった場合、前記電子機器は当該人物の名刺情報が前記連絡先リストに存在しない旨を表示することを特徴とする請求項１に記載の追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法。
9. ステップ２）において、前記画像特徴照合とは、前記予め保存されている名刺の名刺画像と、追加を希望する名刺の名刺画像との特徴点及び各当該特徴点に対応する特徴ベクトルを照合することであることを特徴とする請求項１に記載の追加を希望する名刺が連絡先リストに存在しているか否かを判断する方法。
   
   

Images