JP2020009145A - Business card management system, method, and program - Google Patents

Business card management system, method, and program Download PDF

Info

Publication number
JP2020009145A
JP2020009145A JP2018129603A JP2018129603A JP2020009145A JP 2020009145 A JP2020009145 A JP 2020009145A JP 2018129603 A JP2018129603 A JP 2018129603A JP 2018129603 A JP2018129603 A JP 2018129603A JP 2020009145 A JP2020009145 A JP 2020009145A
Authority
JP
Japan
Prior art keywords
business card
face image
attribute information
card record
search
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018129603A
Other languages
Japanese (ja)
Inventor
川口 五郎
Goro Kawaguchi
五郎 川口
通敏 河野
Michitoshi Kono
通敏 河野
正彦 長倉
Masahiko Nagakura
正彦 長倉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thi Corp
Original Assignee
Thi Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thi Corp filed Critical Thi Corp
Priority to JP2018129603A priority Critical patent/JP2020009145A/en
Publication of JP2020009145A publication Critical patent/JP2020009145A/en
Pending legal-status Critical Current

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

To provide a business card management system, a method, and a program that can access a business card record even if a name thereon is forgotten.SOLUTION: A business card management system 1 includes face image acquisition means 11c for acquiring a face image of a person in relation to a business card, attribute information acquisition means 11b for acquiring face image attribute information of a person from the acquired face image, business card record creation means 11d for creating a business card record by associating the acquired face image with the face image attribute information, storage means 17 for storing the created business card record, search execution means 11e for searching for the stored business card record using the face image attribute information as a search key, and thumbnail display means 11f for displaying a thumbnail of the face image of the business card record obtained as a search result.SELECTED DRAWING: Figure 1

Description

本発明は、名刺情報へのアクセスを支援する名刺管理システム、方法及びプログラムに関する。   The present invention relates to a business card management system, a method, and a program for supporting access to business card information.

名刺は、顧客の個人情報を取得する上で極めて重要なビジネスツールと位置付けられている。名刺には、姓名、会社名、所属部署、役職名、会社住所、電話番号だけでなく、電子メールアドレス、ホームページアドレスなども記載され、その情報量が増加してきている。また、光学スキャナやOCR(Optical Character Reader)を用いて、名刺に印刷されている情報を電子情報に変換し、その電子化された名刺情報を名刺DBに登録して管理する技術がある。   Business cards are regarded as a very important business tool in obtaining personal information of customers. Business cards include not only first and last names, company names, departments, post titles, company addresses, telephone numbers, but also e-mail addresses and homepage addresses, and the amount of information has been increasing. Further, there is a technique for converting information printed on a business card into electronic information using an optical scanner or an OCR (Optical Character Reader), and registering and managing the digitized business card information in a business card DB.

特許文献1には、名刺に表示された情報を含む名刺情報データベースを有するサーバを備えた名刺管理センターと、上記名刺管理センターのサーバにコンピュータネットワークを介して接続された複数の利用者端末と、名刺を持つ各利用者に対し固有の名刺番号を発行する名刺番号発行システムと、上記発行された名刺番号又はその他の名刺情報の各項目をキーとして上記サーバに登録済みの名刺情報の検索を行う名刺情報検索システムからなる名刺情報管理システムが記載されている。また、名刺情報データベースに顔情報を含めること(請求項3)、及び、顔写真を検索すること(0011)が記載されている。   Patent Literature 1 discloses a business card management center including a server having a business card information database including information displayed on a business card, a plurality of user terminals connected to the server of the business card management center via a computer network, A business card number issuing system for issuing a unique business card number to each user having a business card, and searching for business card information registered in the server using the issued business card number or other business card information items as keys. A business card information management system including a business card information search system is described. In addition, it is described that face information is included in the business card information database (claim 3) and that a face photograph is searched (0011).

特許文献2には、名刺を保持可能な名刺保持部材と、固有の分類コードを表示するコード表示部材と、前記名刺保持部材及び前記コード表示部材を撮像する撮像部と、前記名刺保持部材及び前記コード表示部材に関する情報を記憶する記憶部と、を備え、前記名刺を保持した状態の前記名刺保持部材の画像及び前記分類コードを表示する前記コード表示部材の画像の両者を含む撮像画像情報を取得し、前記撮像画像情報から前記分類コードを認識して分類情報を取得すると共に、名刺画像情報を抽出し、取得した分類情報と、抽出した名刺画像情報とを関連付けて前記記憶部に記憶する名刺管理システムが記載されている。また、分類情報によって分類されているグループの複数の名刺画像情報をサムネイル形式で表示すること(0036)が記載されている。   Patent Document 2 discloses a business card holding member capable of holding a business card, a code display member that displays a unique classification code, an imaging unit that images the business card holding member and the code display member, the business card holding member, and the A storage unit for storing information on a code display member, and obtains captured image information including both an image of the business card holding member holding the business card and an image of the code display member displaying the classification code. A business card that recognizes the classification code from the captured image information and obtains the classification information, extracts the business card image information, associates the obtained classification information with the extracted business card image information, and stores the business card in the storage unit. A management system is described. It also describes that a plurality of business card image information of a group classified by the classification information is displayed in a thumbnail format (0036).

このような従来の名刺管理システムは、名刺に記載された名前の頭文字によって各名刺を分類して収容している。   In such a conventional business card management system, each business card is classified and stored according to the initials of the name described on the business card.

特開2002−222270号公報JP 2002-222270 A 特開2014−002439号公報JP 2014-002439 A

しかしながら、このような従来の名刺管理システムは、名刺に記載された名前の頭文字によって各名刺を分類して収容しているので、名前を忘れてしまった場合、名刺レコードにアクセスすることができない。また、漢字・英字以外の特殊外国語文字(ロシア語文字など)であって普通の日本のパソコンでは入力・検索できない場合もある。   However, such a conventional business card management system classifies and stores each business card by the initials of the name written on the business card, so that if the name is forgotten, the business card record cannot be accessed. . There are also special foreign language characters (such as Russian characters) other than kanji and English characters that cannot be entered and searched on a normal Japanese personal computer.

本発明の目的は、名前を忘れても名刺レコードにアクセスすることができる名刺管理システム、方法及びプログラムを提供することにある。   An object of the present invention is to provide a business card management system, a method, and a program that can access a business card record even if the user forgets the name.

本発明に係る名刺管理システムは、名刺に関連して人物の顔イメージを取得する顔イメージ取得手段と、取得した顔イメージから該人物の顔イメージ属性情報を取得する属性情報取得手段と、取得した前記顔イメージと前記顔イメージ属性情報とを関連付けて名刺レコードを作成する名刺レコード作成手段と、作成した前記名刺レコードを記憶する記憶手段と、前記顔イメージ属性情報を検索キーとして記憶されている前記名刺レコードを検索する検索実行手段と、検索された結果の前記名刺レコードの前記顔イメージをサムネイル表示するサムネイル表示手段とを備えることを特徴とする。   A business card management system according to the present invention includes: a face image acquisition unit that acquires a face image of a person in relation to a business card; an attribute information acquisition unit that acquires face image attribute information of the person from the acquired face image; Business card record creation means for creating a business card record by associating the face image with the face image attribute information, storage means for storing the created business card record, and the face image attribute information stored as a search key. A search execution means for searching for a business card record, and a thumbnail display means for displaying a thumbnail of the face image of the business card record as a search result are provided.

これによって、名前を忘れてしまった場合、及び名前などが漢字・英字以外の特殊外国語文字の場合であっても名刺レコードにアクセスできる。名刺情報を利用するときの利便性を格段に向上させることができる。   As a result, even if the name is forgotten, or even if the name or the like is a special foreign language character other than kanji and English characters, the business card record can be accessed. Convenience when using business card information can be remarkably improved.

前記顔イメージ取得手段は、取り込んだ集合写真の複数の顔イメージの中から選択された顔イメージを切り出してそれぞれの顔イメージを取得することで、ユーザの希望する人物の顔イメージを作成して、名刺レコードに登録することができる。   The face image obtaining means cuts out a selected face image from a plurality of face images of the captured group photo and obtains each face image, thereby creating a face image of a person desired by the user, Can be registered in business card records.

前記顔イメージ属性情報は、顔イメージの撮影地若しくは撮影日時、又は顔イメージを切り出した日時を含むことで、顔イメージと、顔イメージの撮影地若しくは撮影日時、又は顔イメージを切り出した日時と、を関連付けて登録しておくことができる。   The face image attribute information, by including the shooting location or shooting date and time of the face image, or the date and time when the face image was cut out, the face image, the shooting location or shooting date and time of the face image, or the date and time when the face image was cut out, Can be associated and registered.

前記顔イメージ属性情報は、前記人物の性別、年令、又はメガネ着用の有無を含むことで、顔イメージを用いて検索する際の検索の絞り込み条件を拡大することができる。また、あいまい検索した場合でもヒット率を上げることができる。   The face image attribute information includes the gender, age, or presence or absence of wearing the glasses of the person, thereby making it possible to expand a search narrowing condition when performing a search using a face image. In addition, the hit rate can be increased even when a fuzzy search is performed.

本発明に係る名刺管理方法は、名刺に関連して人物の顔イメージを取得する顔イメージ取得ステップと、取得した顔イメージから該人物の顔イメージ属性情報を取得する属性情報取得ステップと、取得した前記顔イメージと前記顔イメージ属性情報とを関連付けて名刺レコードを作成する名刺レコード作成ステップと、作成した前記名刺レコードを記憶する記憶ステップと、前記顔イメージ属性情報を検索キーとして記憶されている前記名刺レコードを検索する検索実行ステップと、検索された結果の前記名刺レコードの前記顔イメージをサムネイル表示するサムネイル表示ステップとを備えることを特徴とする。   A business card management method according to the present invention includes: a face image obtaining step of obtaining a face image of a person in relation to a business card; an attribute information obtaining step of obtaining face image attribute information of the person from the obtained face image; A business card record creation step of creating a business card record by associating the face image with the face image attribute information, a storage step of storing the created business card record, and the face image attribute information stored as a search key. A search execution step for searching for a business card record and a thumbnail display step for displaying a thumbnail of the face image of the business card record as a search result are provided.

また、本発明は、コンピュータを、名刺に関連して人物の顔イメージを取得する顔イメージ取得手段と、取得した顔イメージから該人物の顔イメージ属性情報を取得する属性情報取得手段と、取得した前記顔イメージと前記顔イメージ属性情報とを関連付けて名刺レコードを作成する名刺レコード作成手段と、作成した前記名刺レコードを記憶する記憶手段と、前記顔イメージ属性情報を検索キーとして記憶されている前記名刺レコードを検索する検索実行手段と、検索された結果の前記名刺レコードの前記顔イメージをサムネイル表示するサムネイル表示手段とを備える名刺管理システムとして機能させるためのプログラムである。   Further, according to the present invention, a computer is provided with a face image acquisition unit for acquiring a face image of a person in relation to a business card, an attribute information acquisition unit for acquiring face image attribute information of the person from the acquired face image, Business card record creation means for creating a business card record by associating the face image with the face image attribute information, storage means for storing the created business card record, and the face image attribute information stored as a search key. This is a program for functioning as a business card management system including search execution means for searching for a business card record, and thumbnail display means for displaying a thumbnail of the face image of the business card record as a search result.

本発明によれば、名前を忘れても名刺レコードにアクセスすることができる名刺管理システム、方法及びプログラムを提供することができる。   According to the present invention, it is possible to provide a business card management system, method, and program that can access a business card record even if the user forgets the name.

本発明の実施の形態に係る名刺管理システムの第1の構成例を示す図である。It is a figure showing the 1st example of composition of the business card management system concerning an embodiment of the invention. 本発明の実施の形態に係る名刺管理システムの第2の構成例を示す図である。It is a figure showing the 2nd example of composition of the business card management system concerning an embodiment of the invention. 本発明の実施の形態に係る名刺管理システムの構成を示すブロック図である。It is a block diagram showing composition of a business card management system concerning an embodiment of the invention. 本発明の実施の形態に係る名刺管理システムの記憶部のDBに蓄積される名刺レコードの一例を示す図である。It is a figure showing an example of a business card record stored in DB of a storage part of a business card management system concerning an embodiment of the invention. 本発明の実施の形態に係る名刺管理システムの名刺レコードの顔イメージの一例を示す図である。It is a figure showing an example of a face image of a business card record of a business card management system concerning an embodiment of the invention. 本発明の実施の形態に係る名刺管理システムの集合写真から顔画像を切り出す説明をする図である。It is a figure explaining cutting out a face image from a group photograph of a business card management system concerning an embodiment of the invention. 本発明の実施の形態に係る名刺管理システムの集合写真から顔画像を切り出す説明をする図である。It is a figure explaining cutting out a face image from a group photograph of a business card management system concerning an embodiment of the invention. 本発明の実施形態に係る名刺管理システムのメインメニュー画面の例を示す図である。It is a figure showing the example of the main menu screen of the business card management system concerning the embodiment of the present invention. 本発明の実施形態に係る名刺管理システムの新規名刺登録画面の例を示す図である。It is a figure showing the example of the new business card registration screen of the business card management system concerning the embodiment of the present invention. 本発明の実施形態に係る名刺管理システムの文字検索画面の例を示す図である。It is a figure showing the example of the character search screen of the business card management system concerning the embodiment of the present invention. 本発明の実施形態に係る名刺管理システムの顔検索画面の例を示す図である。It is a figure showing the example of the face search screen of the business card management system concerning the embodiment of the present invention. 本発明の実施形態に係る名刺管理システムの名刺登録処理を示すフローチャートである。It is a flowchart which shows the business card registration process of the business card management system which concerns on embodiment of this invention. 本発明の実施形態に係る名刺管理システムの顔イメージ取り込み処理を示すフローチャートである。6 is a flowchart illustrating a face image capturing process of the business card management system according to the embodiment of the present invention. 本発明の実施形態に係る名刺管理システムの検索処理を示すフローチャートである。It is a flowchart which shows the search process of the business card management system which concerns on embodiment of this invention. 本発明の実施形態に係る名刺管理システムの検索処理を示すフローチャートである。It is a flowchart which shows the search process of the business card management system which concerns on embodiment of this invention.

以下、添付図面を参照しながら本発明を実施するための形態について詳細に説明する。
(実施の形態)
図1は、本発明の実施の形態に係る名刺管理システムの第1の構成例を示す図、図2は、本発明の実施の形態に係る名刺管理システムの第2の構成例を示す図である。
図1に示す第1の構成例の名刺管理装置10は、携帯型であり、例えば、情報処理機能が強化された携帯電話であるスマートホンや、携帯型情報端末であるPDA(Personal Digital Assistants)などにより実現されることを想定している。また、図2に示す第2の構成例の名刺管理装置10Aは、据置き型であり、例えば、デスクトップのパーソナルコンピュータ(以下、パソコンという)などで実現されることを想定している。
Hereinafter, embodiments for carrying out the present invention will be described in detail with reference to the accompanying drawings.
(Embodiment)
FIG. 1 is a diagram illustrating a first configuration example of a business card management system according to an embodiment of the present invention, and FIG. 2 is a diagram illustrating a second configuration example of a business card management system according to an embodiment of the present invention. is there.
The business card management device 10 of the first configuration example shown in FIG. 1 is a portable type, for example, a smart phone which is a mobile phone with an enhanced information processing function, and a PDA (Personal Digital Assistants) which is a mobile information terminal. It is assumed that it is realized by such as. The business card management device 10A of the second configuration example shown in FIG. 2 is of a stationary type, and is assumed to be realized by, for example, a desktop personal computer (hereinafter, referred to as a personal computer).

図1に示すように、名刺管理システム1は、スマートホン等の携帯型情報端末からなる名刺管理装置10を備える。名刺管理装置10は、撮像部12、操作部13、LCD(Liquid Crystal Display)表示部15、タッチパネル16を備える。   As shown in FIG. 1, the business card management system 1 includes a business card management device 10 including a portable information terminal such as a smart phone. The business card management device 10 includes an imaging unit 12, an operation unit 13, an LCD (Liquid Crystal Display) display unit 15, and a touch panel 16.

また、図2に示すように、名刺管理システム1は、PC(Personal Computer)等からなる名刺管理装置10Aを備える。名刺管理装置10Aには、撮影端末2や名刺管理装置10Aからアクセス可能なインターネットからなるネットワーク3が接続可能である。
撮影端末2は、電子カメラ又はカメラ機能を有するスマートホン等のPDAである。また、カメラ付き携帯電話機の携帯通信端末を用いてもよい。撮影端末2は、名刺管理装置10Aに例えばUSB(Universal Serial Bus)ケーブル4により接続可能である。
As shown in FIG. 2, the business card management system 1 includes a business card management device 10A including a PC (Personal Computer) or the like. To the business card management device 10A, a network 3 composed of the Internet accessible from the photographing terminal 2 and the business card management device 10A can be connected.
The photographing terminal 2 is a PDA such as an electronic camera or a smartphone having a camera function. Further, a mobile communication terminal of a camera-equipped mobile phone may be used. The imaging terminal 2 can be connected to the business card management device 10A by, for example, a USB (Universal Serial Bus) cable 4.

本実施の形態に係る名刺管理システム1は、図1のスマートホン等の名刺管理装置10、又は図2のPCを用いた名刺管理装置10Aのいずれに適用してもよい。以下、名刺管理システム1を図1の名刺管理装置10に適用した例について説明する。   The business card management system 1 according to the present embodiment may be applied to either the business card management device 10 such as a smart phone in FIG. 1 or the business card management device 10A using a PC in FIG. Hereinafter, an example in which the business card management system 1 is applied to the business card management device 10 of FIG. 1 will be described.

図3は、名刺管理システム1の構成を示すブロック図である。
図3に示すように、名刺管理装置10は、制御部11(制御手段)、操作部13、LCD(Liquid Crystal Display)表示部15、タッチパネル16、記憶部17(記憶手段)、及びインタフェース(I/F)部19を備える。また、名刺管理装置10には、撮像部12、フラッシュライト14、GPS(Global Positioning System)機能部18、無線通信のためのアンテナ、音声通話のためのマイクやスピーカーなどが設けられていてもよい。
FIG. 3 is a block diagram illustrating a configuration of the business card management system 1.
As shown in FIG. 3, the business card management device 10 includes a control unit 11 (control unit), an operation unit 13, an LCD (Liquid Crystal Display) display unit 15, a touch panel 16, a storage unit 17 (storage unit), and an interface (I / F) section 19. Further, the business card management device 10 may be provided with an imaging unit 12, a flashlight 14, a GPS (Global Positioning System) function unit 18, an antenna for wireless communication, a microphone and a speaker for voice communication, and the like. .

制御部11は、本装置全体を制御するマイクロコンピュータ等からなる。マイクロコンピュータは、ROM(Read Only Memory)に記憶された制御プログラムを読み出してRAM(Random Access Memory)に展開し、CPU(Central Processing Unit)が各種処理を実行する。
制御部11は、名刺情報取得部11a(名刺情報取得手段)と、属性情報取得部11b(属性情報取得手段)と、顔イメージ取得部11c(顔イメージ取得手段)と、名刺レコード作成部11d(名刺レコード作成手段)と、検索実行部11e(検索実行手段)と、サムネイル表示部11f(サムネイル表示手段)と、名刺レコード情報出力部11g(名刺レコード情報出力手段)と、を備える。
The control unit 11 includes a microcomputer or the like that controls the entire apparatus. The microcomputer reads a control program stored in a ROM (Read Only Memory) and expands the control program in a RAM (Random Access Memory), and a CPU (Central Processing Unit) executes various processes.
The control unit 11 includes a business card information acquisition unit 11a (business card information acquisition unit), an attribute information acquisition unit 11b (attribute information acquisition unit), a face image acquisition unit 11c (face image acquisition unit), and a business card record creation unit 11d ( A business card record creation unit), a search execution unit 11e (search execution unit), a thumbnail display unit 11f (thumbnail display unit), and a business card record information output unit 11g (business card record information output unit).

名刺情報取得部11aは、名刺に記載された人物の名前及び住所などの文字情報を取得する。
属性情報取得部11bは、名刺に関連して人物の顔イメージ属性情報を取得する。
The business card information acquisition unit 11a acquires character information such as the name and address of a person described on a business card.
The attribute information acquiring unit 11b acquires the face image attribute information of the person in relation to the business card.

顔イメージ取得部11cは、人物の顔イメージを取得する。人物の顔イメージ取得には、下記2パターンがある。
(パターン1:撮影画像から顔データの切り出しの場合)
顔イメージ取得部11cは、撮影画像から人物の顔位置を検出し、顔位置の画像データを顔イメージとして切り出す。顔イメージ取得部11cは、さらに撮影時の位置情報(GPS機能部18で取得した経度及び緯度)と撮影日時を切り出した顔イメージと共に記憶部17に記憶する。
The face image acquisition unit 11c acquires a face image of a person. There are the following two patterns for acquiring a face image of a person.
(Pattern 1: Extraction of face data from captured image)
The face image acquisition unit 11c detects the face position of a person from the captured image, and cuts out image data of the face position as a face image. The face image acquiring unit 11c further stores the positional information at the time of photographing (longitude and latitude acquired by the GPS function unit 18) and the photographing date and time in the storage unit 17 together with the cut out face image.

(パターン2:集合写真から顔データの切り出しの場合)
顔イメージ取得部11cは、取り込んだ集合写真の人物の中から顔認識できた人物の顔部分を枠で囲んで表示する。顔イメージ取得部11cは、集合写真から切り出した顔イメージをトリミングして撮影地及び撮影日時と共に保存する。顔イメージの撮影日時情報がない場合は、顔イメージを切り出した日時を保存する。
名刺レコード作成部11dは、取得した顔イメージと顔イメージ属性情報とを関連付けて名刺レコード20を作成する。
(Pattern 2: Extracting face data from a group photo)
The face image acquisition unit 11c displays a face portion of a person whose face has been recognized from among the persons of the captured group photograph by enclosing the frame with a frame. The face image acquisition unit 11c trims the face image cut out from the group photo and stores the trimmed image together with the shooting location and the shooting date and time. If there is no shooting date and time information of the face image, the date and time when the face image was cut out is stored.
The business card record creation unit 11d creates the business card record 20 by associating the acquired face image with the face image attribute information.

検索実行部11eは、名前などの文字情報、及び/又は、顔イメージ属性情報を検索キーとして記憶部17のDB17aに蓄積された名刺レコード20を検索する。   The search execution unit 11e searches the business card record 20 stored in the DB 17a of the storage unit 17 using character information such as a name and / or face image attribute information as a search key.

サムネイル表示部11fは、記憶部17に記憶されている名刺レコード20の顔イメージをサムネイル表示する。本実施形態では、サムネイル表示部11fは、記憶部17に記憶されている名刺レコード20の顔イメージの原画像を所定の縮小アルゴリズムによって縮小加工して表示する。サムネイルは、瞬時に表示させないと操作性が低下するため、高速で低品位な縮小アルゴリズムを用いる。なお、顔イメージの原画像を縮小加工した画像をあらかじめ用意し、呼び出して表示するサムネイル表示方法でもよい。この方法の場合、あらかじめ、高度なアルゴリズムを用いて縮小画像を作成しておくことができるので、より視認性の良いサムネイル表示となる。   The thumbnail display unit 11f displays the face image of the business card record 20 stored in the storage unit 17 as a thumbnail. In the present embodiment, the thumbnail display unit 11f reduces the original image of the face image of the business card record 20 stored in the storage unit 17 by a predetermined reduction algorithm and displays the reduced image. If thumbnails are not displayed instantly, the operability will be reduced. Therefore, a high-speed and low-quality reduction algorithm is used. Note that a thumbnail display method may be used in which an image obtained by reducing the original image of the face image is prepared in advance, and is called and displayed. In the case of this method, since a reduced image can be created in advance using an advanced algorithm, a thumbnail display with better visibility can be obtained.

名刺レコード情報出力部11gは、顔イメージの指定又は名前などの文字情報の指定によって名刺レコード20の情報を出力(表示)する。   The business card record information output unit 11g outputs (displays) the information of the business card record 20 by specifying a face image or character information such as a name.

撮像部12は、撮影レンズ、CCD(Charge Coupled Device)センサ、AFE(Analog Front End)、及びDSP(Digital Signal Processor)を備える。撮像部12は、LCD表示部15の裏側に設けられ、撮像時には、撮像部12で撮像された画像がそのままLCD表示部15に表示可能なように構成されている。   The imaging unit 12 includes a photographic lens, a charge coupled device (CCD) sensor, an analog front end (AFE), and a digital signal processor (DSP). The imaging unit 12 is provided on the back side of the LCD display unit 15, and is configured so that an image captured by the imaging unit 12 can be displayed on the LCD display unit 15 as it is at the time of imaging.

操作部13は、タッチパネルや小型のキーボードなどによって構成される。
フラッシュライト14は、暗い場所や撮影時等にユーザ操作等により発光する。
The operation unit 13 includes a touch panel, a small keyboard, and the like.
The flashlight 14 emits light in a dark place, at the time of photographing, or the like by a user operation or the like.

LCD表示部15は、LCDディスプレイ又は有機EL(Organic Electro-Luminescence)ディスプレイ、白色LEDバックライト及び各ドライバ等で構成され、撮影した画像やコンテンツ等を表示する。LCD表示部15は、名刺管理装置(携帯型情報端末)10がスマートホン等の場合、筐体の表面の略全面を覆う大型ディスプレイである。また、撮像部12が電子カメラの場合、筺体の背面を覆うように設けられる。
タッチパネル16は、LCD表示部15の表示画面内で、任意の位置を指示するためのポインティングデバイスである。タッチパネル16は、ユーザが上面を指で押したり、スライドしたり、離したりすることにより各操作を検出する。
The LCD display unit 15 includes an LCD display or an organic EL (Organic Electro-Luminescence) display, a white LED backlight, each driver, and the like, and displays a captured image, content, and the like. When the business card management device (portable information terminal) 10 is a smartphone or the like, the LCD display unit 15 is a large display that covers substantially the entire surface of the housing. When the imaging unit 12 is an electronic camera, the imaging unit 12 is provided to cover the rear surface of the housing.
The touch panel 16 is a pointing device for indicating an arbitrary position on the display screen of the LCD display unit 15. The touch panel 16 detects each operation when the user presses, slides, or releases the upper surface with a finger.

記憶部17は、大容量の不揮発性集積回路メモリであるフラッシュメモリなどによって構成される。記憶部17は、名刺レコード20(図4参照)を保存するデータベース(DB)17aを備え、DB17aには名刺に記載されている情報が顔イメージと関連付けられて記憶される。また、記憶部17は、撮像部12により撮像された対象物の画像情報を記憶する。画像情報は、例えば、jpeg又はgifなどのファイル形式により記憶される。また、記憶部17には、名刺管理装置10を制御するための制御プログラムが記憶されている。記憶部17は、SD(Secure Digital)カード、USB(Universal Serial Bus)メモリ、メモリスティック(Memory Stick)などの外部メモリであってもよい。   The storage unit 17 is configured by a flash memory, which is a large-capacity nonvolatile integrated circuit memory, or the like. The storage unit 17 includes a database (DB) 17a that stores a business card record 20 (see FIG. 4), and information described in the business card is stored in the DB 17a in association with a face image. The storage unit 17 stores image information of the target imaged by the imaging unit 12. The image information is stored in a file format such as jpeg or gif. Further, a control program for controlling the business card management device 10 is stored in the storage unit 17. The storage unit 17 may be an external memory such as an SD (Secure Digital) card, a USB (Universal Serial Bus) memory, and a memory stick.

GPS機能部18は、静止しているGPSの位置情報の電波をGPS衛星から受信するGPSアンテナ18aを備え、GPSアンテナ18aを介して受信した情報より、現在位置情報を、緯度/経度の2つのパラメータとして算出する。   The GPS function unit 18 includes a GPS antenna 18a that receives a radio wave of positional information of a stationary GPS from a GPS satellite. Based on information received via the GPS antenna 18a, the current position information is converted into two values of latitude / longitude. It is calculated as a parameter.

なお、GPS機能部18に代えて、基地局及び携帯電話通信網(図示省略)を介して携帯電話会社サーバと情報の送受信を行い、接近確認から自端末の現在位置情報を取得することも可能である。   It is also possible to transmit / receive information to / from a mobile phone company server via a base station and a mobile phone communication network (not shown) instead of the GPS function unit 18, and obtain the current location information of the own terminal from the approach confirmation. It is.

I/F部19は、USB等のインタフェースによる有線接続、又はBluetooth(登録商標)等の無線接続を利用してPC等の外部接続部に接続する。   The I / F unit 19 connects to an external connection unit such as a PC using a wired connection using an interface such as a USB or a wireless connection such as Bluetooth (registered trademark).

図4は、本発明の実施の形態に係る名刺管理システム1の記憶部17のDB17aに蓄積される名刺レコード20の一例を示す図である。
図4に示すように、名刺レコード20は、名刺レコード識別番号毎に、グループ番号(個人用/会社用)、顔イメージ、属性情報(性別、年令、メガネなど)、撮影地と日時、名前、住所、電話番号、携帯電話番号、FAX番号、メールアドレス、ニックネーム、会社名、部署名、会社電話番号、会社FAX番号、会社メールアドレス、会社住所、ホームページアドレス、更新有無等を格納する。年令は、既知でなければ、顔イメージからの推定年令でもよいし、30代などの幅があるものでもよい。属性情報には、薄毛、茶髪、左分けなどの髪形に関するものを含めてもよいし、長い、小さい、鼻が高いなどの顔の形を含めてもよい。
FIG. 4 is a diagram illustrating an example of the business card record 20 stored in the DB 17a of the storage unit 17 of the business card management system 1 according to the embodiment of the present invention.
As shown in FIG. 4, the business card record 20 includes, for each business card record identification number, a group number (for personal / company use), a face image, attribute information (gender, age, glasses, etc.), a shooting location, date and time, and a name. , Address, telephone number, mobile phone number, FAX number, mail address, nickname, company name, department name, company telephone number, company FAX number, company mail address, company address, homepage address, update presence / absence, and the like. If the age is not known, the age may be an estimated age from a face image, or may have a range such as thirties. The attribute information may include information on hairstyles such as thin hair, brown hair, left division, and the like, or may include face shapes such as long, small, and tall nose.

図5は、本発明の実施の形態に係る名刺管理システム1の名刺レコード20の顔イメージの一例を示す図である。
図5に示すように、名刺レコード20の顔イメージは、顔イメージ取得部11cによって取得された人物の顔イメージが格納される。また、この顔イメージと共に、撮影時の位置情報と撮影日時が保存される(図4の名刺レコード20の撮影地と日時参照)。ここで、集合写真から顔イメージを切り出した場合、集合写真から顔イメージを切り出した日時が保存される。
図5に示すように、顔イメージは、サムネイル表示を行う前の原画像を保存している。なお、サムネイル表示の呼び出し用画像として、原画像を縮小加工した画像を保存してもよい。顔イメージは、サムネイル表示した場合、性別、年令、メガネなど人物の顔の特徴が分かる程度の解像度で作成する。
FIG. 5 is a diagram illustrating an example of a face image of the business card record 20 of the business card management system 1 according to the embodiment of the present invention.
As shown in FIG. 5, the face image of the business card record 20 stores the face image of the person acquired by the face image acquisition unit 11c. Further, the positional information at the time of shooting and the shooting date and time are stored together with the face image (see the shooting location and date and time of the business card record 20 in FIG. 4). Here, when the face image is cut out from the group photo, the date and time when the face image is cut out from the group photo is stored.
As shown in FIG. 5, the face image stores the original image before performing the thumbnail display. It should be noted that an image obtained by reducing the original image may be stored as an image for calling the thumbnail display. When a thumbnail image is displayed, the face image is created with a resolution such that the characteristics of the face of the person such as gender, age, and glasses can be recognized.

図6A、図6Bは、本発明の実施の形態に係る名刺管理システム1の集合写真から顔画像を切り出す説明をする図である。
図6Aに示すように、顔イメージ取得部11c(図3参照)は、集合写真30から顔画像を切り出す場合、集合写真30の中の人物の顔認識を行う。そして、顔イメージ取得部11cは、顔認識できた顔部分を囲む枠31a〜31dを設定する。ユーザは操作部13を操作して目的の人物の顔を選択する。図6Aでは、枠31bの人物の顔が選択されたとする。
図6Bに示すように、顔イメージ取得部11cは、選択された枠31bの人物の顔部分を切り出して記憶部17のDB17aに顔イメージとして記憶する。
ここで、集合写真30を撮影した撮影場所(撮影地)や撮影日時の情報が得られる場合は、切り出した顔イメージと共に撮影地や撮影日時の情報も登録し、撮影地や撮影日時の情報が得られない場合は、集合写真30から顔イメージを切り出した日時を登録する。
FIG. 6A and FIG. 6B are diagrams illustrating the extraction of a face image from a group photograph of the business card management system 1 according to the embodiment of the present invention.
As shown in FIG. 6A, when cutting out a face image from the group photograph 30, the face image acquiring unit 11 c (see FIG. 3) performs face recognition of a person in the group photograph 30. Then, the face image acquiring unit 11c sets frames 31a to 31d surrounding the face part where the face has been recognized. The user operates the operation unit 13 to select a target person's face. In FIG. 6A, it is assumed that the face of the person in the frame 31b is selected.
As shown in FIG. 6B, the face image acquiring unit 11c cuts out the face portion of the person in the selected frame 31b and stores it as a face image in the DB 17a of the storage unit 17.
Here, if information on the shooting place (shooting place) and shooting date and time when the group photograph 30 was shot is obtained, information on the shooting place and shooting date and time is also registered along with the cut out face image, and the information on the shooting place and shooting date and time is registered. If not obtained, the date and time when the face image was cut out from the group photograph 30 is registered.

以下、上述のように構成された名刺管理システム1の動作を説明する。
<名刺登録>
図7Aは、本発明の実施の形態に係る名刺管理システム1のメインメニュー画面の例を示す図、図7Bは、その新規名刺登録画面の例を示す図である。
名刺管理装置10の制御部11(図3参照)が処理を開始すると、LCD表示部15(図3参照)に初期画面として、図7Aに示すようなメインメニュー画面50を表示する。メインメニュー画面50には、新規名刺登録ボタン51、文字から検索ボタン52、顔から検索ボタン53、データベース同期化ボタン54、終了ボタン55などのメニューボタンが表示される。
Hereinafter, the operation of the business card management system 1 configured as described above will be described.
<Business card registration>
FIG. 7A is a diagram showing an example of a main menu screen of the business card management system 1 according to the embodiment of the present invention, and FIG. 7B is a diagram showing an example of the new business card registration screen.
When the control unit 11 (see FIG. 3) of the business card management device 10 starts processing, a main menu screen 50 as shown in FIG. 7A is displayed on the LCD display unit 15 (see FIG. 3) as an initial screen. On the main menu screen 50, menu buttons such as a new business card registration button 51, a character-based search button 52, a face-based search button 53, a database synchronization button 54, and an end button 55 are displayed.

メインメニュー画面50において、メニューボタンのいずれかがタッチされると、制御部11は、そのタッチされたメニューボタンに対応付けられた所定の処理を実行する。例えば、新規名刺登録ボタン51がタッチされると、LCD表示部15には、図6Bに示す新規名刺登録画面60が表示される。   When any one of the menu buttons is touched on the main menu screen 50, the control unit 11 executes a predetermined process associated with the touched menu button. For example, when the new business card registration button 51 is touched, a new business card registration screen 60 shown in FIG.

新規名刺登録画面60には、顔画像を表示する顔画像表示領域61、名刺レコード20(図4参照)の入力欄62、ソフトキーボード63、戻るボタン64、登録ボタン65などが表示される。   The new business card registration screen 60 displays a face image display area 61 for displaying a face image, an input field 62 for the business card record 20 (see FIG. 4), a soft keyboard 63, a return button 64, a registration button 65, and the like.

ユーザは、顔画像表示領域61をタッチして、撮像部12で人物の顔を撮像すると、撮像された顔画像が顔画像表示領域61に表示される。この場合、撮像された顔画像は、適宜ファイル名称が付され、顔イメージとして記憶部17のDB17aの名刺レコード20に登録される。   When the user touches the face image display area 61 and picks up an image of a person's face with the image pickup unit 12, the picked-up face image is displayed in the face image display area 61. In this case, the captured face image is appropriately given a file name and registered as a face image in the business card record 20 of the DB 17a of the storage unit 17.

ユーザは、名刺レコード20の入力欄62の1つを選択し、ソフトキーボード63を適宜タッチすることによって、名刺レコード20の各フィールドにデータを入力することができる。フィールドとは、名刺レコード20を構成する1つ1つの要素であり、例えば入力欄62の1つが1フィールドである。図4の場合、名刺レコード20は24個のフィールドの項目(セル)を有する。
なお、入力欄62の表示は、上下にスクロールさせることができ、そのスクロールによって全フィールドの入力欄を表示させることができる。
The user can input data to each field of the business card record 20 by selecting one of the input fields 62 of the business card record 20 and appropriately touching the soft keyboard 63. The field is one element of each of the business card records 20. For example, one of the input fields 62 is one field. In the case of FIG. 4, the business card record 20 has items (cells) of 24 fields.
The display of the input field 62 can be scrolled up and down, and the input fields of all fields can be displayed by the scroll.

以上のようにして、名刺レコード20のフィールドデータが入力され、ユーザが登録ボタン65をタッチすると、入力されたフィールドデータに基づき、顔イメージを備える名刺レコード20が作成される。そして、その作成された名刺レコード20は、記憶部17のDBに登録される。
なお、登録ボタン65がタッチされるとき、名刺レコード20のすべてのフィールドにフィールドデータを入力する必要はない。例えば、顔イメージを先に登録する、あるいは文字データを先に入力し、後で顔イメージを登録することが可能である。
また、戻るボタン64がタッチされると、前のメインメニュー画面50が表示される。
As described above, when the field data of the business card record 20 is input and the user touches the registration button 65, the business card record 20 including the face image is created based on the input field data. Then, the created business card record 20 is registered in the DB of the storage unit 17.
When the registration button 65 is touched, it is not necessary to input field data in all fields of the business card record 20. For example, a face image can be registered first, or character data can be input first, and a face image can be registered later.
When the return button 64 is touched, the previous main menu screen 50 is displayed.

<名刺検索>
図8Aは、本発明の実施の形態に係る名刺管理システム1の文字検索画面の例を示す図、図8Bは、その顔検索画面の例を示す図である。
メインメニュー画面50(図7A参照)において、文字から検索ボタン52がタッチされると、図8Aに示す文字検索画面70が表示される。文字検索画面70には、文字入力欄71、名刺一覧72などが表示される。
なお、文字検索は、従来技術であり、文字検索に関して、例えば完全一致検索、部分検索、大文字・小文字区別などの方法が適用可能である。
文字入力欄71には、名前の1文字目を指定する50音の文字を選択するボタンが表示される。入力された文字に該当する名刺レコード20が記憶部17のDBから抽出され、その抽出された名刺情報に含まれる、例えば、名前+住所の一覧が名刺一覧72として表示される。
なお、文字検索画面70には、キーワード検索を行うためのキーワード入力欄が表示されるとしてもよく、その場合には、キーワード入力欄に入力されたキーワードでDBが検索され、その検索により抽出された名刺情報の一覧が名刺一覧72に表示される。
続いて、ユーザが、名刺一覧72に表示された名刺情報の一覧から、その1つを選択し、選択ボタン74をタッチすると、名刺詳細表示画面(図示省略)が表示される。この名刺詳細表示画面には、該当人物の名刺レコード20の詳細情報が表示される。
<Business card search>
FIG. 8A is a diagram illustrating an example of a character search screen of the business card management system 1 according to the embodiment of the present invention, and FIG. 8B is a diagram illustrating an example of the face search screen.
When the search button 52 is touched on the main menu screen 50 (see FIG. 7A), a character search screen 70 shown in FIG. 8A is displayed. The character search screen 70 displays a character input field 71, a business card list 72, and the like.
Note that the character search is a conventional technique, and for the character search, for example, a method such as an exact match search, a partial search, and case sensitivity can be applied.
In the character input field 71, a button for selecting the Japanese syllabary character for designating the first character of the name is displayed. The business card record 20 corresponding to the input character is extracted from the DB of the storage unit 17, and a list of, for example, names + addresses included in the extracted business card information is displayed as the business card list 72.
Note that a keyword input field for performing a keyword search may be displayed on the character search screen 70. In this case, the DB is searched using the keyword input in the keyword input field, and the DB is extracted by the search. A list of the business card information is displayed in the business card list 72.
Subsequently, when the user selects one of the business card information lists displayed on the business card list 72 and touches the selection button 74, a business card detail display screen (not shown) is displayed. On this business card detail display screen, detailed information of the business card record 20 of the person is displayed.

メインメニュー画面50(図7A参照)において、顔から検索ボタン53がタッチされると、図8Bに示す顔検索画面80が表示される。顔検索画面70には、属性入力欄81、顔イメージ一覧82などが表示される。
属性入力欄81には、属性情報(性別、年令、メガネなど)を入力するボタンが表示される。入力された属性情報に該当する名刺レコード20の顔イメージが記憶部17のDBから抽出され、その抽出された顔イメージが顔イメージ一覧82としてサムネイル形式で表示される。
続いて、ユーザが、顔イメージ一覧82に表示された顔イメージの一覧から、その1つの顔イメージを選択し、選択ボタン84をタッチすると、名刺詳細表示画面(図示省略)が表示される。この名刺詳細表示画面には、顔イメージに該当する人物の名刺レコード20の詳細情報が表示される。
以上のようにして、ユーザは、顔イメージから名刺情報を検索することができ、名刺レコード20の詳細情報を閲覧することができる。
When the search button 53 is touched from the face on the main menu screen 50 (see FIG. 7A), a face search screen 80 shown in FIG. 8B is displayed. The face search screen 70 displays an attribute input field 81, a face image list 82, and the like.
In the attribute input field 81, buttons for inputting attribute information (sex, age, glasses, etc.) are displayed. The face image of the business card record 20 corresponding to the input attribute information is extracted from the DB of the storage unit 17, and the extracted face image is displayed as a face image list 82 in a thumbnail format.
Subsequently, when the user selects one of the face images from the list of face images displayed in the face image list 82 and touches the selection button 84, a business card detail display screen (not shown) is displayed. On the business card detail display screen, detailed information of the business card record 20 of the person corresponding to the face image is displayed.
As described above, the user can search for the business card information from the face image, and can browse the detailed information of the business card record 20.

図9は、本発明の実施の形態に係る名刺管理システム1の名刺登録処理を示すフローチャートである。本フローは、名刺管理装置10の制御部11(図3参照)により実行される。
まず、ステップS1で名刺情報取得部11a(図3参照)は、名前、住所などの名刺文字データをOCRなどによって取り込む。
ステップS2で顔イメージ取得部11cは、人物の顔イメージを取り込む。顔イメージの取り込みについては、サブルーチン(集合写真から顔画像を切り出す例)(図10参照)で後記する。
ステップS3で顔イメージ取得部11cは、顔イメージの撮影場所若しくは撮影日時、又は画像更新日時を取得する。
ステップS4で顔イメージ取得部11cは、取り込んだ顔イメージから、顔の特徴(メガネ有無、男女区別、推定年令など)を抽出する。
ステップS5で属性情報取得部11bは、取り込んだ名刺文字データと、顔イメージ属性情報としての、取得した顔イメージの撮影場所若しくは撮影日時、又は画像更新日時、及び、抽出した人物の顔の特徴(メガネ有無、男女区別、推定年令など)と、を確認する画面を表示する。
FIG. 9 is a flowchart showing a business card registration process of the business card management system 1 according to the embodiment of the present invention. This flow is executed by the control unit 11 (see FIG. 3) of the business card management device 10.
First, in step S1, the business card information acquisition unit 11a (see FIG. 3) acquires business card character data such as a name and an address by OCR or the like.
In step S2, the face image acquiring unit 11c acquires a face image of a person. The capture of the face image will be described later in a subroutine (an example of cutting out a face image from a group photo) (see FIG. 10).
In step S3, the face image obtaining unit 11c obtains the shooting location or shooting date and time of the face image, or the image update date and time.
In step S4, the face image acquisition unit 11c extracts facial features (such as presence or absence of glasses, gender distinction, and estimated age) from the captured face image.
In step S5, the attribute information acquiring unit 11b retrieves the captured business card character data, the photographing location or photographing date or time of the acquired face image, or the image update date and time as the face image attribute information, and the extracted facial features of the person ( Screen for confirming the presence of glasses, gender distinction, estimated age, etc.).

ユーザが、表示された名刺文字データと顔イメージ属性情報を確認して、必要な修正をした後に、ステップS6で名刺レコード作成部11dは、取り込んだ名刺文字データ、顔イメージ属性情報、及び顔イメージを相互に関連付けた名刺レコード20(図4参照)を作成する。
前記図4に示すように、名刺レコード作成部11dは、名刺レコード識別番号毎に、グループ番号(個人用/会社用)、顔イメージ、顔イメージ属性情報(性別、年令、メガネ有無、撮影地と日時など)、名前、住所、電話番号、携帯電話番号、FAX番号、メールアドレス、ニックネーム、会社名、部署名、会社電話番号、会社FAX番号、会社メールアドレス、会社住所、ホームページアドレス、更新有無等からなる名刺レコード20を作成する。なお、名刺文字データ、及び、顔イメージ属性情報は、名刺管理システム1が確認画面を表示することに代えて、ユーザが、それらデータ及び情報をすべて文字入力するようにしてもよい。
ステップS7で名刺レコード作成部11dは、作成した名刺レコード20を確認する確認画面を表示する。
ユーザが、名刺レコード20のフィールド情報を確認した後に、ステップS8で名刺レコード作成部11dは、名刺レコード20を記憶部17のDB17aに登録して本フローの処理を終了する。
After the user checks the displayed business card character data and face image attribute information and makes necessary corrections, in step S6, the business card record creation unit 11d reads the captured business card character data, face image attribute information, and face image Are created in a business card record 20 (see FIG. 4).
As shown in FIG. 4 described above, the business card record creation unit 11d provides, for each business card record identification number, a group number (for personal / company), face image, face image attribute information (gender, age, presence or absence of glasses, shooting location, And date and time), name, address, phone number, mobile phone number, fax number, email address, nickname, company name, department name, company phone number, company fax number, company email address, company address, homepage address, update availability A business card record 20 is created. It should be noted that the business card character data and the face image attribute information may be input by the user as characters, instead of the business card management system 1 displaying the confirmation screen.
In step S7, the business card record creation unit 11d displays a confirmation screen for confirming the created business card record 20.
After the user confirms the field information of the business card record 20, the business card record creation unit 11d registers the business card record 20 in the DB 17a of the storage unit 17 and ends the processing of this flow in step S8.

図10は、本発明の実施の形態に係る名刺管理システム1の顔イメージ取り込み処理を示すフローチャートである。本フローは、図9のステップS2のサブルーチンである。
ステップS101で顔イメージ取得部11cは、集合写真から人物を取り込むか否かを判別する。
集合写真から人物を取り込む場合、ステップS102で顔イメージ取得部11cは、取り込んだ集合写真の人物の中から顔認識できた人物の顔部分を枠で囲んで表示する(図6A参照)。
FIG. 10 is a flowchart showing a face image capturing process of the business card management system 1 according to the embodiment of the present invention. This flow is a subroutine of step S2 in FIG.
In step S101, the face image acquiring unit 11c determines whether or not to take a person from a group photo.
When capturing a person from a group photo, in step S102, the face image acquiring unit 11c displays a face portion of a person whose face has been recognized from the captured group photo in a frame (see FIG. 6A).

ステップS103で顔イメージ取得部11cは、切り出し画面の確認待ちを行う。切り出し画面の確認は、顔認識できた複数の人物の顔の中から、ユーザが所望の人物の顔を選択することであり、選択すると確認終了となる。具体的には、LCD表示部15(図3参照)に取り込んだ集合写真と、その集合写真上に顔認識できた人物の顔部分の枠が表示される。ユーザはタッチパネル16により所望の人物の顔の枠をタッチすることで切り出し画面の確認が終了する。
切り出し画面の確認がされた場合、ステップS104で顔イメージ取得部11cは、切り出した顔イメージをトリミングして撮影地及び撮影日時と共に保存する。顔イメージ取得部11cは、顔イメージの撮影日時情報がない場合は、顔イメージを切り出した日時を保存する。
In step S103, the face image acquisition unit 11c waits for confirmation of the cutout screen. The confirmation of the cutout screen is that the user selects a desired person's face from the faces of a plurality of persons whose faces have been recognized. When the face is selected, the confirmation ends. More specifically, the group photo taken into the LCD display unit 15 (see FIG. 3) and the frame of the face portion of the person whose face has been recognized on the group photo are displayed. The user touches the frame of the desired person's face on the touch panel 16 to complete the cutout screen confirmation.
When the cut-out screen is confirmed, the face image acquiring unit 11c trims the cut-out face image and stores the trimmed face image together with the shooting place and the shooting date and time in step S104. If there is no shooting date and time information of the face image, the face image obtaining unit 11c stores the date and time when the face image was cut out.

一方、上記ステップS101で集合写真でない場合、ステップS105で顔イメージ取得部11cは、人物の画像データを取り込む。
ステップS106では、取り込んだ人物の画像データの確認待ちを行う。
取り込んだ人物の画像データの確認がされた場合、ステップS107で顔イメージ取得部11cは、取り込んだ人物の画像データから顔イメージを切り出し、撮影地及び撮影日時と共に保存して図9のステップS2に戻る。
On the other hand, when the face image is not a group photo in step S101, the face image acquisition unit 11c captures image data of a person in step S105.
In step S106, confirmation of the captured image data of the person is performed.
When the captured image data of the person is confirmed, in step S107, the face image acquisition unit 11c cuts out the face image from the captured image data of the person, saves the image together with the shooting location and the shooting date and time, and proceeds to step S2 in FIG. Return.

図11及び図12は、本発明の実施の形態に係る名刺管理システム1の検索処理を示すフローチャートである。
ステップS11で制御部11は、アクセス画面を表示する。例えば、前記図6Aに示すように、メインメニュー画面50を表示する。
ステップS12で制御部11は、顔イメージを用いて検索するか否かを判別する。例えば、前記図8Bに示すように、メインメニュー画面50において、顔から検索ボタン53がタッチされると、顔検索画面80が表示され、顔イメージを用いた検索となる。また、文字から検索ボタン52がタッチされると、図8Aに示す文字検索画面70が表示される。文字検索画面70には、文字入力欄71、名刺一覧72などが表示される。
FIGS. 11 and 12 are flowcharts showing search processing of the business card management system 1 according to the embodiment of the present invention.
In step S11, the control unit 11 displays an access screen. For example, as shown in FIG. 6A, the main menu screen 50 is displayed.
In step S12, the control unit 11 determines whether or not to search using the face image. For example, as shown in FIG. 8B, when the search button 53 is touched from the face on the main menu screen 50, a face search screen 80 is displayed and the search is performed using the face image. When the search button 52 is touched from the character, a character search screen 70 shown in FIG. 8A is displayed. The character search screen 70 displays a character input field 71, a business card list 72, and the like.

顔イメージを用いて検索しない場合、ステップS13で制御部11は、図8Aに示す文字検索画面70で検索キー入力を行う。
ステップS14で制御部11は、すべての検索キーが入力されたか否かを判別する。
すべての検索キーが入力された場合は、ステップS15で検索実行部11eは、記憶部17のDB17aに対し検索キーによる検索を実行する。
ステップS16で検索実行部11eは、検索結果を表示する。例えば、図8Aに示すように、キーワード入力欄に入力されたキーワードでDB17aが検索され、その検索により抽出された名刺情報の一覧が名刺一覧72に表示される。
ステップS17で名刺レコード情報出力部11gは、名刺レコード20にアクセスする。
If the search is not performed using the face image, the control unit 11 performs a search key input on the character search screen 70 shown in FIG. 8A in step S13.
In step S14, the control unit 11 determines whether all search keys have been input.
If all search keys have been input, the search execution unit 11e executes a search using the search keys in the DB 17a of the storage unit 17 in step S15.
In step S16, the search execution unit 11e displays a search result. For example, as shown in FIG. 8A, the DB 17a is searched for the keyword input in the keyword input field, and a list of business card information extracted by the search is displayed in the business card list 72.
In step S17, the business card record information output unit 11g accesses the business card record 20.

一方、上記ステップS2で顔イメージを用いて検索する場合、ステップS18で制御部11は、図8Bに示す顔検索画面80で、属性入力欄81及び顔イメージ一覧82などから検索キー入力を行う。
ステップS19で制御部11は、すべての検索キーが入力されたか否かを判別する。
すべての検索キーが入力された場合は、ステップS20で検索実行部11eは、記憶部17のDB17aに対し検索キーによる検索を実行する。
On the other hand, when the search is performed using the face image in step S2, in step S18, the control unit 11 inputs a search key from the attribute input field 81, the face image list 82, and the like on the face search screen 80 shown in FIG. 8B.
In step S19, the control unit 11 determines whether all search keys have been input.
If all the search keys have been input, the search execution unit 11e executes a search using the search keys in the DB 17a of the storage unit 17 in step S20.

ステップS21でサムネイル表示部11fは、検索結果による顔イメージをサムネイル表示する。複数候補の顔イメージがある場合は、例えば更新日時の新しい順に顔イメージを表示する。
ステップS22で検索実行部11eは、表示された顔イメージ一覧82から、その1つの顔イメージが選択されたか否かを判別する。
顔イメージが選択された場合、ステップS23で検索実行部11eは、サムネイル表示された顔イメージの名刺レコードにアクセスする。
In step S21, the thumbnail display unit 11f displays the face image based on the search result as a thumbnail. When there are a plurality of candidate face images, the face images are displayed, for example, in descending order of update date and time.
In step S22, the search execution unit 11e determines whether the one face image is selected from the displayed face image list 82.
When the face image is selected, in step S23, the search execution unit 11e accesses the business card record of the face image displayed as the thumbnail.

ステップS24で名刺レコード情報出力部11gは、ステップS17又はステップS23でアクセスされた名刺レコードの情報を表示して本フローの処理を終了する。
以上のようにして、ユーザは、顔イメージから名刺情報を検索することができ、名刺レコード20の詳細情報を閲覧することができる。
In step S24, the business card record information output unit 11g displays the information of the business card record accessed in step S17 or step S23, and ends the processing of this flow.
As described above, the user can search for the business card information from the face image, and can browse the detailed information of the business card record 20.

以上説明したように、本実施形態の名刺管理システム1は、名刺に関連して人物の顔イメージを取得する顔イメージ取得部11cと、取得した顔イメージから該人物の顔イメージ属性情報を取得する属性情報取得部11bと、取得した前記顔イメージと前記顔イメージ属性情報とを関連付けて名刺レコードを作成する名刺レコード作成部11dと、作成した前記名刺レコードを記憶する記憶部17と、前記顔イメージ属性情報を検索キーとして記憶されている前記名刺レコードを検索する検索実行部11eと、検索された結果の前記名刺レコードの前記顔イメージをサムネイル表示するサムネイル表示部11fとを備える。
名刺管理方法では、名刺に関連して人物の顔イメージを取得する顔イメージ取得ステップと、取得した顔イメージから該人物の顔イメージ属性情報を取得する属性情報取得ステップと、取得した前記顔イメージと前記顔イメージ属性情報とを関連付けて名刺レコードを作成する名刺レコード作成ステップと、作成した前記名刺レコードを記憶する記憶ステップと、前記顔イメージ属性情報を検索キーとして記憶されている前記名刺レコードを検索する検索実行ステップと、検索された結果の前記名刺レコードの前記顔イメージをサムネイル表示するサムネイル表示ステップと、を実行する。
As described above, the business card management system 1 of the present embodiment acquires the face image acquisition unit 11c that acquires a face image of a person in relation to a business card, and acquires the face image attribute information of the person from the acquired face image. An attribute information acquisition unit 11b, a business card record creation unit 11d for creating a business card record by associating the acquired face image with the face image attribute information, a storage unit 17 for storing the created business card record, A search execution unit 11e for searching for the business card record stored using the attribute information as a search key, and a thumbnail display unit 11f for displaying a thumbnail of the face image of the business card record as a search result.
In the business card management method, a face image acquisition step of acquiring a face image of a person in relation to a business card, an attribute information acquisition step of acquiring face image attribute information of the person from the acquired face image, and the acquired face image A business card record creation step of creating a business card record in association with the face image attribute information, a storage step of storing the created business card record, and searching for the business card record stored using the face image attribute information as a search key And a thumbnail display step of displaying a thumbnail of the face image of the business card record as a result of the search.

従来例では、名前を忘れてしまった場合や漢字・英字以外の特殊外国語文字の場合には、入力・検索できないことがあった。
これに対して、本実施形態では、一般に名刺に記載されることがない、年令又は性別の情報が顔画像とともに、名刺レコード20として登録されているので、名前を忘れても名刺レコード20にアクセスできる。また、文字入力では検索できない場合に、顔イメージに関連する情報を検索キーとして用いて名刺レコード20を検索することができる。文字入力では検索できない場合には、漢字・英字以外の特殊外国語文字であって入力又は検索できない場合が含まれる。
このように、文字入力から名刺情報を検索していた従来に比べ、顔イメージを用いて検索できるので、名前を忘れてしまった場合や文字入力に手間がかかる場合でも容易に、かつ直感的に名刺レコード20にアクセスできる。名刺情報を利用するときの利便性を格段向上させることができる。
In the conventional example, if the name is forgotten or special foreign language characters other than kanji and English characters, input / search may not be performed.
On the other hand, in the present embodiment, the age or gender information that is not generally described on the business card is registered as the business card record 20 together with the face image. Can access. If the search cannot be performed by character input, the business card record 20 can be searched using information related to the face image as a search key. The case where the character input cannot be searched includes a case where the character is a special foreign language character other than a kanji / English character and cannot be input or searched.
In this way, compared to the conventional method of searching for business card information from character input, it is possible to search using face images, so even if you forget your name or it takes time to input characters, it is easy and intuitive The business card record 20 can be accessed. The convenience when using the business card information can be remarkably improved.

以上の説明は本発明の好適な実施の形態の例証であり、本発明の範囲はこれに限定されるものではなく、特許請求の範囲に記載した本発明の要旨を逸脱しない限りにおいて、他の変形例、応用例を含む。
また、上記した実施形態例は本発明をわかりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施形態例の構成の一部を他の実施形態例の構成に置き換えることが可能であり、また、ある実施形態例の構成に他の実施形態例の構成を加えることも可能である。また、各実施形態例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
The above description is an exemplification of a preferred embodiment of the present invention, and the scope of the present invention is not limited thereto, and other scopes may be made without departing from the gist of the present invention described in the claims. Modifications and application examples are included.
In addition, the above-described embodiments are described in detail in order to easily explain the present invention, and are not necessarily limited to those having all the configurations described above. Further, a part of the configuration of one embodiment can be replaced with the configuration of another embodiment, and the configuration of one embodiment can be added to the configuration of another embodiment. . Further, for a part of the configuration of each embodiment, it is possible to add / delete / replace another configuration.

また、上記実施の形態では、名刺管理システム及び名刺管理方法という名称を用いたが、これは説明の便宜上であり、名刺管理装置、名刺検索方法等であってもよい。   In the above-described embodiment, the names of the business card management system and the business card management method are used, but this is for convenience of description, and may be a business card management device, a business card search method, or the like.

以上説明した名刺管理処理は、この名刺管理処理を機能させるためのプログラムでも実現される。このプログラムはコンピュータで読み取り可能な記録媒体に格納されている。   The business card management processing described above is also realized by a program for causing the business card management processing to function. This program is stored in a computer-readable recording medium.

また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行するためのソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、SSD(Solid State Drive)等の記録装置、又は、IC(Integrated Circuit)カード、SD(Secure Digital)カード、光ディスク等の記録媒体に保持することができる。また、本明細書において、時系列的な処理を記述する処理ステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理(例えば、並列処理あるいはオブジェクトによる処理)をも含むものである。
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしもすべての制御線や情報線を示しているとは限らない。実際にはほとんど全ての構成が相互に接続されていると考えてもよい。
Further, each of the above-described configurations, functions, processing units, processing means, and the like may be partially or entirely realized by hardware, for example, by designing an integrated circuit. Further, each of the above-described configurations, functions, and the like may be realized by software that causes a processor to interpret and execute a program that realizes each function. Information such as programs, tables, and files for realizing each function is stored in a memory, a hard disk, a recording device such as an SSD (Solid State Drive), or an IC (Integrated Circuit) card, an SD (Secure Digital) card, an optical disk, or the like. It can be stored in a recording medium. In this specification, processing steps describing time-series processing include, in addition to processing performed in a time-series manner in the order described, parallel processing or individual processing even if not necessarily performed in a time-series manner. (For example, parallel processing or processing by an object).
Further, the control lines and the information lines are shown to be necessary for the explanation, and not all the control lines and the information lines are necessarily shown on the product. In fact, it may be considered that almost all components are connected to each other.

1 名刺管理システム
10,10A 名刺管理装置
11 制御部
12 撮像部
13 操作部
15 LCD表示部
16 タッチパネル
17 記憶部(記憶手段)
17a データベース(DB)
11a 名刺情報取得部(名刺情報取得手段)
11b 属性情報取得部(属性情報取得手段)
11c 顔イメージ取得部(顔イメージ取得手段)
11d 名刺レコード作成部(名刺レコード作成手段)
11e 検索実行部(検索実行手段)
11f サムネイル表示部(サムネイル表示手段)
11g 名刺レコード情報出力部(名刺レコード情報出力手段)
20 名刺レコード
Reference Signs List 1 business card management system 10, 10A business card management device 11 control unit 12 imaging unit 13 operation unit 15 LCD display unit 16 touch panel 17 storage unit (storage means)
17a Database (DB)
11a Business card information acquisition unit (business card information acquisition means)
11b Attribute information acquisition unit (attribute information acquisition means)
11c Face Image Acquisition Unit (Face Image Acquisition Means)
11d Business card record creation unit (business card record creation means)
11e Search execution unit (search execution means)
11f thumbnail display section (thumbnail display means)
11g Business card record information output unit (business card record information output means)
20 business card records

Claims (6)

名刺に関連して人物の顔イメージを取得する顔イメージ取得手段と、
取得した顔イメージから該人物の顔イメージ属性情報を取得する属性情報取得手段と、
取得した前記顔イメージと前記顔イメージ属性情報とを関連付けて名刺レコードを作成する名刺レコード作成手段と、
作成した前記名刺レコードを記憶する記憶手段と、
前記顔イメージ属性情報を検索キーとして記憶されている前記名刺レコードを検索する検索実行手段と、
検索された結果の前記名刺レコードの前記顔イメージをサムネイル表示するサムネイル表示手段と
を備えることを特徴とする名刺管理システム。
A face image obtaining means for obtaining a face image of a person in relation to the business card;
Attribute information acquiring means for acquiring face image attribute information of the person from the acquired face image;
Business card record creation means for creating a business card record by associating the acquired face image with the face image attribute information,
Storage means for storing the created business card record;
Search execution means for searching for the business card record stored using the face image attribute information as a search key,
And a thumbnail display unit for displaying a thumbnail of the face image of the business card record as a result of the search.
前記顔イメージ取得手段は、取り込んだ集合写真の複数の顔イメージの中から選択された顔イメージを切り出してそれぞれの顔イメージを取得することを特徴とする請求項1記載の名刺管理システム。   2. The business card management system according to claim 1, wherein the face image obtaining unit cuts out a selected face image from a plurality of face images of the taken group photo and obtains each face image. 前記顔イメージ属性情報は、顔イメージの撮影地若しくは撮影日時、又は顔イメージを切り出した日時を含むことを特徴とする請求項1記載の名刺管理システム。   2. The business card management system according to claim 1, wherein the face image attribute information includes a shooting location or shooting date and time of the face image, or a date and time when the face image is cut out. 前記顔イメージ属性情報は、前記人物の性別、年令、又はメガネ着用の有無を含むことを特徴とする請求項1記載の名刺管理システム。   The business card management system according to claim 1, wherein the face image attribute information includes gender, age, or presence or absence of wearing of glasses of the person. 名刺に関連して人物の顔イメージを取得する顔イメージ取得ステップと、
取得した顔イメージから該人物の顔イメージ属性情報を取得する属性情報取得ステップと、
取得した前記顔イメージと前記顔イメージ属性情報とを関連付けて名刺レコードを作成する名刺レコード作成ステップと、
作成した前記名刺レコードを記憶する記憶ステップと、
前記顔イメージ属性情報を検索キーとして記憶されている前記名刺レコードを検索する検索実行ステップと、
検索された結果の前記名刺レコードの前記顔イメージをサムネイル表示するサムネイル表示ステップと
を備えることを特徴とする名刺管理方法。
A face image obtaining step of obtaining a face image of a person in relation to the business card;
An attribute information acquisition step of acquiring face image attribute information of the person from the acquired face image;
A business card record creation step of creating a business card record by associating the acquired face image with the face image attribute information,
A storage step of storing the created business card record;
A search execution step of searching for the business card record stored using the face image attribute information as a search key,
A thumbnail display step of displaying a thumbnail of the face image of the business card record as a result of the search.
コンピュータを、
名刺に関連して人物の顔イメージを取得する顔イメージ取得手段と、取得した顔イメージから該人物の顔イメージ属性情報を取得する属性情報取得手段と、取得した前記顔イメージと前記顔イメージ属性情報とを関連付けて名刺レコードを作成する名刺レコード作成手段と、作成した前記名刺レコードを記憶する記憶手段と、前記顔イメージ属性情報を検索キーとして記憶されている前記名刺レコードを検索する検索実行手段と、検索された結果の前記名刺レコードの前記顔イメージをサムネイル表示するサムネイル表示手段とを備える名刺管理システム
として機能させるためのプログラム。
Computer
Face image acquisition means for acquiring a face image of a person in relation to a business card; attribute information acquisition means for acquiring face image attribute information of the person from the acquired face image; and the acquired face image and the face image attribute information Business card record creating means for creating a business card record by associating the same, storage means for storing the created business card record, and search execution means for searching for the business card record stored using the face image attribute information as a search key. And a thumbnail display unit for displaying a thumbnail of the face image of the business card record as a result of the search as a business card management system.
JP2018129603A 2018-07-09 2018-07-09 Business card management system, method, and program Pending JP2020009145A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018129603A JP2020009145A (en) 2018-07-09 2018-07-09 Business card management system, method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018129603A JP2020009145A (en) 2018-07-09 2018-07-09 Business card management system, method, and program

Publications (1)

Publication Number Publication Date
JP2020009145A true JP2020009145A (en) 2020-01-16

Family

ID=69151735

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018129603A Pending JP2020009145A (en) 2018-07-09 2018-07-09 Business card management system, method, and program

Country Status (1)

Country Link
JP (1) JP2020009145A (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006011935A (en) * 2004-06-28 2006-01-12 Sony Corp Personal information management device, method for creating personal information file, and method for searching personal information file
CN101916271A (en) * 2010-08-10 2010-12-15 上海合合信息科技发展有限公司 Method and system for automatically acquiring contact head image
JP2012089974A (en) * 2010-10-18 2012-05-10 Nec Casio Mobile Communications Ltd Telephone directory retrieval device, telephone directory retrieval method, and telephone directory retrieval program
JP2014109864A (en) * 2012-11-30 2014-06-12 Canon Marketing Japan Inc Information processor, information processing system, control method therefor, and program
JP2015012437A (en) * 2013-06-28 2015-01-19 株式会社ニコン Digital camera
US20150278248A1 (en) * 2014-04-01 2015-10-01 Sagatek Co., Ltd. Personal Information Management Service System

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006011935A (en) * 2004-06-28 2006-01-12 Sony Corp Personal information management device, method for creating personal information file, and method for searching personal information file
CN101916271A (en) * 2010-08-10 2010-12-15 上海合合信息科技发展有限公司 Method and system for automatically acquiring contact head image
JP2012089974A (en) * 2010-10-18 2012-05-10 Nec Casio Mobile Communications Ltd Telephone directory retrieval device, telephone directory retrieval method, and telephone directory retrieval program
JP2014109864A (en) * 2012-11-30 2014-06-12 Canon Marketing Japan Inc Information processor, information processing system, control method therefor, and program
JP2015012437A (en) * 2013-06-28 2015-01-19 株式会社ニコン Digital camera
US20150278248A1 (en) * 2014-04-01 2015-10-01 Sagatek Co., Ltd. Personal Information Management Service System

Similar Documents

Publication Publication Date Title
US8279173B2 (en) User interface for selecting a photo tag
JP4552632B2 (en) Portable device
US8667384B2 (en) User interface for editing photo tags
US20090280859A1 (en) Automatic tagging of photos in mobile devices
KR101038222B1 (en) How to create, exchange and manage business card information using a portable information terminal
JP2006165822A (en) Electronic camera and program
CA2630947C (en) User interface for selecting a photo tag
US9147109B2 (en) Method for adding business card information into contact list
US20060290789A1 (en) File naming with optical character recognition
US20230336671A1 (en) Imaging apparatus
JP2018097580A (en) Information processing device and program
JP2007018166A (en) Information search device, information search system, information search method, and information search program
JP6253354B2 (en) Form reading device, program, and form reading system
KR20060103463A (en) Electronic device
US20110305406A1 (en) Business card recognition system
JP2011198070A (en) Business card &amp; memo information cooperation management device, business card &amp; memo information cooperation management method, and program
JP2020009145A (en) Business card management system, method, and program
CN110968710B (en) Image processing device, image processing method, and image processing program
JP6951529B2 (en) Display method of the image pickup device
WO2023004685A1 (en) Image sharing method and device
KR100889062B1 (en) Electronic business card managing method of mobile telephone using face recognition and mobile telephone thereof
US20130047102A1 (en) Method for browsing and/or executing instructions via information-correlated and instruction-correlated image and program product
EP2075669A1 (en) Method of generating a function output from a photographed image and related mobile computing device
JP2014139839A (en) Portable terminal and information providing method as well as programs therefor
JP2014059752A (en) Information processing device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180711

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190703

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20191225