JP2017090988A - 写真画像抽出装置、写真画像抽出方法およびプログラム - Google Patents

Abstract

【課題】インターネットなどのネットワークを用いることなく、壁面などに掲示された多数の写真の中から所望の写真を迅速に探し出すことが可能な写真画像抽出装置、写真画像抽出方法およびプログラムを提供する。【解決手段】本発明の写真画像抽出装置を適用したスマートフォン１は、複数の写真を撮像する撮像部１２０と、複数の写真を撮像した複数の写真画像を解析し、特定人物が写っている可能性が高い一部の写真画像を抽出する写真画像抽出部１５０と、写真画像抽出部１５０の抽出結果を表示する抽出結果表示部１６０と、を備える。【選択図】図５

Description

本発明は、複数の写真画像の中から特定人物が写っている可能性が高い写真画像を抽出する写真画像抽出装置、写真画像抽出方法およびプログラムに関する。

従来、この種の技術として、特許文献１が知られている。特許文献１には、タブレット端末等の情報処理端末からインターネットを介してサーバーにアクセスし、所望の写真を注文する写真注文システムが開示されている。当該写真注文システムでは、ユーザーが予め特定人物を登録しておくことで、サーバーから取得した複数の写真の中から特定人物が写っている写真が抽出され、ユーザー端末に表示される。このように、インターネットを利用することで、ユーザーは、都合のときに都合の良い場所で注文を行うことができる。

特開２０１３−１６１３９４号公報

ところが、特許文献１のように、インターネットを利用した写真注文システムでは、登録した特定人物の情報がインターネット上に流出してしまう可能性がある。

一方、従来から知られている写真の注文方法として、壁面などに掲示された複数の写真の中から所望の写真を選び、注文用封筒などに注文番号を書き込んで注文する方法が知られている。この方法は、ＰＣやタブレット端末の操作に不慣れな人でも簡単に注文を行うことができ、また写真販売業者またはイベント主催者にとってもユーザー（顧客）への写真の提示が容易であることから、現在でも多く利用されている。ところがこの方法では、多くの写真が掲示されていると、所望の写真を探し出すのに時間がかかってしまい、他にも掲示された写真を見たい人がいると、ゆっくりと時間を掛けて見ることが困難な場合がある。

本発明は、上記の問題点に鑑み、インターネットなどのネットワークを用いることなく、壁面などに掲示された多数の写真の中から所望の写真を迅速に探し出すことが可能な写真画像抽出装置、写真画像抽出方法およびプログラムを提供することを目的とする。

本発明の写真画像抽出装置は、複数の写真を撮像する撮像部と、複数の写真を撮像した複数の写真画像を解析し、特定人物が写っている可能性が高い一部の写真画像を抽出する写真画像抽出部と、写真画像抽出部の抽出結果を表示する抽出結果表示部と、を備えることを特徴とする。

本発明の写真画像抽出方法は、コンピューターが、複数の写真を撮像する撮像ステップと、複数の写真を撮像した複数の写真画像を解析し、特定人物が写っている可能性が高い一部の写真画像を抽出する写真画像抽出ステップと、写真画像抽出ステップの抽出結果を表示する抽出結果表示ステップと、を実行することを特徴とする。

本発明の構成によれば、撮像部で撮像した複数の写真画像の中から特定人物が写っている可能性が高い一部の写真画像を抽出し、その抽出結果を表示するため、壁面などに掲示された写真であっても、所望の写真を迅速に探し出すことができる。また、インターネットに接続することなく、オフラインで写真画像の閲覧が可能であるため、特定人物の情報が流出するなどのセキュリティ上の問題がない。

上記の写真画像抽出装置において、写真画像抽出部により抽出された一部の写真画像を、それぞれ一意に特定する特定情報を取得する特定情報取得部と、注文対象となる写真画像を選択する操作部と、操作部により選択された写真画像の写真を注文する注文部と、を備え、注文部は、特定情報を用いて写真画像の注文を行うことを特徴とする。

本発明の構成によれば、写真画像抽出装置により写真の注文ができるため（写真画像抽出装置の抽出結果を参照して、注文用封筒などで注文したり、別の装置で注文操作を行ったりする必要がないため）、所望の写真画像を迅速且つ簡単に注文することができる。

上記の写真画像抽出装置において、特定情報取得部は、複数の写真の中の各写真の位置と、各写真の特定情報と、を対応付けた対応テーブルを参照することにより、特定情報を取得することを特徴とする。

本発明の構成によれば、写真提供者は、ユーザーに対し対応テーブルを提供するだけで良く、写真掲示する際に、各写真に対応付けて特定情報を掲示する手間を省くことができる。

上記の写真画像抽出装置において、複数の写真には、電子透かしが埋め込まれており、特定情報取得部は、撮像部の撮像に伴い、電子透かしから特定情報を取得することを特徴とする。

本発明の構成によれば、ユーザーは、写真を撮像するだけで、写真画像と特定情報を同時に取得することができる。また、特定情報を電子透かしで写真に埋め込むため、所望の写真を特定し易い。

上記の写真画像抽出装置において、撮像部は、動画像を撮像し、写真画像抽出部は、動画像に含まれる複数の写真画像の中から一部の写真画像を抽出することを特徴とする。

本発明の構成によれば、動画像により複数の写真を撮像するため、静止画像を複数回に分けて撮像する場合と比較して、多数の写真画像を迅速に取得することができる。

上記の写真画像抽出装置において、抽出結果表示部は、抽出結果として、撮像部により撮像された複数の写真の写真画像のうち、写真画像抽出部により抽出された一部の写真画像を、他の写真画像より強調して表示することを特徴とする。

本発明の構成によれば、ユーザーは、撮像部より撮像された全写真の写真画像を確認しつつ、強調表示された一部の写真画像を確認することができる。これにより、所望の写真を迅速に探し出すことができると共に、特定人物が写っているにも関わらず抽出精度の問題で抽出漏れとなった写真や、特定人物が写っていなくても入手したい写真を確認することができる。

上記の写真画像抽出装置において、抽出結果表示部は、写真画像抽出部により抽出された一部の写真画像に写っている人物のうち、特定人物を、他の人物より強調して表示することを特徴とする。

本発明の構成によれば、特定人物が強調表示されるため、ユーザーは、抽出結果に誤りがないかを簡単に確認することができる。

上記の写真画像抽出装置において、過去に撮像された写真画像を記憶する写真画像記憶部と、写真画像記憶部内にある写真画像に写っている回数が多い人物を特定人物として特定する特定人物特定部と、を備えることを特徴とする。

本発明の構成によれば、ユーザーが特定人物を指定する手間を省くことができる。
なお、写真画像抽出装置をスマートフォンで実現した場合、「写真画像記憶部」としては写真用データベースを利用できる。この写真用データベースには、自分や家族、友人など、写真を入手したい対象者が写っている写真が格納されている可能性が高い。つまり、本発明の構成によれば、既存の機能を利用しつつ、特定人物を効率良く特定することができる。

上記の写真画像抽出装置において、個人情報に顔写真を関連付けて記憶する個人情報記憶部と、個人情報記憶部に記憶された個人情報に基づいて特定人物を特定する特定人物特定部と、を備え、写真画像抽出部は、特定された特定人物の顔写真を用いて、一部の写真画像を抽出することを特徴とする。

本発明の構成によれば、ユーザーが特定人物を指定する手間を省くことができる。
なお、写真画像抽出装置をスマートフォンで実現した場合、「個人情報記憶部」としては「連絡先一覧」や「アドレス帳」を利用できる。また、これらには、個人情報として、自分との関係性を示す情報（「父」、「息子」などの表示名、「家族」、「友人」などの分類など）が記憶されている可能性が高い。つまり、本発明の構成によれば、既存の機能を利用しつつ、特定人物を効率良く特定することができる。

上記の写真画像抽出装置において、撮像部により撮像された複数の写真の写真画像を解析し、特定人物と同じ写真に写っている関係人物を特定する関係人物特定部を備え、写真画像抽出部は、特定人物および関係人物の少なくとも一方が写っている可能性が高い写真画像を抽出することを特徴とする。

本発明の構成によれば、特定人物だけでなく、特定人物と同じ写真に写っている関係人物についても、写真画像の抽出対象とすることができる。

上記の写真画像抽出装置において、抽出結果表示部は、特定人物と関係人物を、識別可能に表示することを特徴とする。

本発明の構成によれば、ユーザーは、関係人物としてどのような人が特定されたのか、また特定人物と関係人物の特定結果に誤りがないか、などを簡単に確認することができる。

本発明のプログラムは、コンピューターに、上記の写真画像抽出方法における各ステップを実行させることを特徴とする。

このプログラムを用いることにより、インターネットなどのネットワークを用いることなく、壁面などに掲示された多数の写真の中から所望の写真を迅速に探し出すことが可能な写真画像抽出方法を実現できる。

写真注文システムのシステム構成図である。 写真の掲示例を示す図である。 対応テーブルの一例を示す図である。 スマートフォンの制御ブロック図である。 スマートフォンの機能ブロック図である。 動画像により写真を撮像する方法の一例を示す図である。 写真画像抽出結果の表示例を示す図である。 変形例１に係るスマートフォンの機能ブロック図である。 変形例２に係るスマートフォンの機能ブロック図である。 変形例２に係る写真画像抽出結果の表示例を示す図である。

以下、本発明の写真画像抽出装置、写真画像抽出方法およびプログラムについて、添付図面を参照しながら詳細に説明する。本実施形態では、本発明の写真画像抽出装置を、スマートフォンに適用した場合について例示する。

図１は、本発明の一実施形態に係る写真注文システムＳＹのシステム構成図である。写真注文システムＳＹは、写真を撮像するスマートフォン１（写真画像抽出装置）と、写真の注文を受け付ける注文受付サーバー３と、を備える。スマートフォン１は、無線通信４を介して基地局２と接続され、当該基地局２は、インターネット等のネットワーク５を介して注文受付サーバー３と接続される。また、スマートフォン１は、タッチパネル１１やカメラ１２など、一般的な構成を有している。

図２は、写真の掲示例を示す図である。同図は、壁面などの掲示場所６０に、イベントなどで撮像された多数の写真が掲示されている状態を示す。同図において、符号Ｐは、写真（現像された写真）を示す。同図では、全て同じ写真のように見えるが、実際には異なる写真が掲示される。また、各写真は、「ＳＡＭＰＬＥ」などの文字を重畳印刷したものであっても良い。さらに、写真フォルダーに各写真を収容した状態で掲示されても良い。

なお、掲示場所６０の一部には、２次元コードＣを印刷したラベル６５が貼付される。当該２次元コードＣは、スマートフォン１により写真の撮像に伴って撮像される。また、当該２次元コードＣには、写真を注文するために必要な情報となる、掲示場所コードおよび対応テーブルが記憶されている。掲示場所コードは、掲示場所６０を特定するための情報である。また、対応テーブルは、掲示場所６０における複数の写真の中の各写真の位置（配置）と、各写真を特定するための特定情報と、を対応付けたテーブルである。図３は、対応テーブルの一例を示す図である。図２に示すように、複数列且つ複数行に渡って写真が掲示されている場合、図３に示すように、各写真の位置として、何列目の何行目かを示す情報が記憶される。また、特定情報としては、写真の注文番号が記憶される。

次に、図４を参照し、スマートフォン１のハードウェア構成について説明する。
スマートフォン１は、タッチパネル１１、カメラ１２、通信部１３、記憶部１４および制御部１５を備える。

タッチパネル１１は、情報入力および情報表示に用いられる。カメラ１２は、写真を撮像する。通信部１３は、基地局２を介して注文受付サーバー３と通信する。なお、スマートフォン１が、通信部１３または他の構成により、ネットワーク５と接続可能な機能を有している場合には、スマートフォン１は、基地局２を介さずに、ネットワーク５と接続し、ネットワーク５を介して注文受付サーバー３と通信することも可能である。

記憶部１４は、ＯＳ（Operating System）など各種情報を不揮発に記憶する。本実施形態では、専用アプリケーション２１および写真画像データベース（以下、「写真画像ＤＢ２２」と表記する）を記憶する。専用アプリケーション２１は、撮像した複数の写真の写真画像の中から、スマートフォン１の所有者およびその家族など特定人物が写っている可能性が高い一部の写真画像を抽出し、その抽出結果をユーザーに提示すると共に、写真の注文を行うためのスマートフォン用アプリケーションである。また、写真画像ＤＢ２２は、写真用のデータベースである。写真画像ＤＢ２２には、過去にスマートフォン１で撮像した写真画像や、外部から取得した写真画像が、撮像日付や位置情報などの付加情報と共に記憶される。

制御部１５は、ＣＰＵ（Central Processing Unit）およびＲＡＭ（Random Access Memory）等により実現され、上記の各部１１〜１４を制御する。本実施形態では、主に、上記の専用アプリケーション２１に基づいて写真画像の抽出制御や注文受付サーバー３との通信制御を行う。

次に、図５を参照し、スマートフォン１および注文受付サーバー３の機能構成について説明する。スマートフォン１は、機能構成として、写真画像記憶部１１０、撮像部１２０、特定情報取得部１３０、特定人物特定部１４０、写真画像抽出部１５０、抽出結果表示部１６０、操作部１７０および注文部１８０を備える。一方、注文受付サーバー３は、機能構成として、注文受付部３１０を備える。

写真画像記憶部１１０は、写真画像ＤＢ２２に相当し、過去に撮像された多数の写真画像を記憶する。なお、写真画像は、スマートフォン１で撮像されたものであっても良いし、スマートフォン１以外の撮像装置で撮像されたものであっても良い。

撮像部１２０は、カメラ１２により、掲示場所６０に掲示された複数の写真を撮像する（撮像ステップ）。本実施形態の撮像部１２０は、動画像を撮像する。ここで、図６を参照し、撮像方法について説明する。同図において、符号７１は、撮像部１２０の撮像範囲を示す。また、符号７２は、撮像範囲の移動方向を示す。同図に示すように、ユーザーは、撮像範囲を移動させながら、掲示場所６０に掲示された複数の写真を撮像する。また、この撮像に伴って、２次元コードＣが印刷されたラベル６５も撮像される。なお、撮像範囲の移動方向は、同図に示したものに限らず、撮像範囲を列方向に往復移動させながら全体を撮像する、などの方法でも良い。

図５の説明に戻る。特定情報取得部１３０は、後述する写真画像抽出部１５０により抽出された各写真画像を、それぞれ一意に特定する特定情報を取得する。本実施形態では、図３に示した対応テーブルを参照することにより特定情報を取得する。つまり、特定情報取得部１３０は、撮像部１２０の撮像結果を解析することにより、各写真が何列目・何行目に位置するかを判定し、その判定結果に対応する特定情報を対応テーブルから読み出す。

特定人物特定部１４０は、写真画像記憶部１１０内の写真画像に写っている回数が多い人物を特定人物として特定する。特定方法は、既存の顔認識技術（特徴抽出比較法、テンプレートマッチング法など）を用いる。ここでは、例えば写真に写っている回数が多い上位数名を特定人物とする、所定回数以上写っている人物を特定人物とする、などが考えられる。なお、写真に付加された付加情報を利用し、ユーザーが日付や場所を指定することによって、その日付や場所で撮像された人物を特定人物として特定しても良い。また、掲示場所６０に掲示された写真を撮像し、撮像されてスマートフォン１に取り込まれた写真画像の内、ユーザーが指定する特定の写真画像に写っている人物を特定人物としてもよい。

写真画像抽出部１５０は、撮像部１２０の撮像結果を解析し、特定人物特定部１４０により特定された特定人物が写っている可能性が高い一部の写真画像を抽出する（写真画像抽出ステップ）。当該抽出方法も、既存の顔認識技術を用いる。なお、特定人物の性別、年齢、身長、体重など、ユーザーによって入力された任意の情報を手掛かりとして、一部の写真画像を抽出しても良い。また、写真画像の抽出は、撮像部１２０で撮像した動画像を一旦記憶した後でも良いし、動画像の撮像中にリアルタイム処理で行っても良い。

抽出結果表示部１６０は、写真画像抽出部１５０の抽出結果をタッチパネル１１に表示する（抽出結果表示ステップ）。本実施形態では、抽出結果として、撮像部１２０の撮像結果である複数の写真画像のうち、写真画像抽出部１５０により抽出された一部の写真画像を、他の写真画像より強調して表示する。

図７は、写真画像抽出結果の表示例を示す図である。同図において、符号Ｅａは、写真画像表示領域、符号Ｅｂは、操作領域を示す。また、符号ＰＧは、写真画像（掲示された写真を撮像した画像）を示す。各写真画像は、撮像部１２０の撮像結果から、各写真の領域判定を行って写真領域を切り出し、当該写真領域内の画像に対して、台形歪み補正やコントラスト調整など周知の画像補正処理を行ったものである。

また、符号ＰＧ１〜ＰＧ５は、抽出された写真画像、符号８１は、特定人物「Ａ」の強調マーク、符号８２は、特定人物「Ｂ」の強調マークを示す。このように、写真画像表示領域Ｅａでは、撮像された複数の写真の写真画像のうち、写真画像抽出部１５０により抽出された一部の写真画像（符号８１または符号８２の強調マークを含む写真画像）ＰＧ１〜ＰＧ５を、他の写真画像より強調して表示する。同図では、太枠を付すことによって強調しているが、写真枠の色を変える、ハイライト表示する、などの方法により強調しても良い。また、抽出結果表示部１６０は、特定人物によって、強調マークの表示形態（マークの色、マークの形、マークの線種など）を異ならせて表示する。なお、タッチパネル１１に表示された写真画像ＰＧを、タッチパネル１１上でタッチすることで、選択され強調表示された状態と、非選択により強調表示が解除された状態とを切り替えることができる。

一方、操作領域Ｅｂには、選択された写真の枚数、およびその枚数を注文した場合の金額を表示すると共に、「注文する」ボタン８５および「選択し直す」ボタン８６を表示する。ユーザーが、タッチパネル１１に表示された写真画像ＰＧの選択と非選択の状態を切り替えると、操作領域Ｅｂに表示される写真の枚数や金額も、都度、変化する。「注文する」ボタン８５が選択されると、強調表示された写真画像ＰＧ１〜ＰＧ５の写真が注文される。また、「選択し直す」ボタン８６が選択されると、ＰＧ１〜ＰＧ５に示す強調表示を非表示とし、ユーザーに選択を促す。

図５の説明に戻る。操作部１７０は、ユーザーがタッチパネル１１を操作し、注文対象となる写真画像を選択する。また、「注文する」ボタン８５が選択された場合は、それまでに強調表示されている写真画像ＰＧを選択したこととなり、「選択し直す」ボタン８６が選択された場合は、ユーザーが任意に選択した内容がリセットされて、写真画像抽出部１５０の抽出結果を表示した状態に戻され、表示された複数の写真画像の中からユーザーが所望の写真画像を任意に選択し直すことができる。

注文部１８０は、操作部１７０により選択された写真画像の写真を注文する。このとき、特定情報取得部１３０により取得された特定情報（注文番号）を用いて注文を行う。つまり、操作部１７０により選択された各写真画像の特定情報を注文受付サーバー３に送信することにより注文を行う。なお、このとき、ラベル６５の２次元コードＣから読み取った掲示場所コードと、専用アプリケーション２１に登録されたユーザー情報（氏名、住所、決済情報など）も同時に送信する。

注文受付サーバー３の注文受付部３１０は、スマートフォン１から、特定情報、掲示場所コードおよびユーザー情報を受信することにより、写真の注文を受け付ける。そして、注文受付サーバー３は、注文された写真の画像データを、ネットワーク５を介して提供する。なお、写真の提供は、現像（印刷）したものを配達する方法でも良い。

以上説明したとおり、本実施形態のスマートフォン１は、撮像部１２０で撮像した複数の写真画像の中から特定人物が写っている可能性が高い一部の写真画像を抽出し、その抽出結果をタッチパネル１１上に表示するため、掲示場所６０に掲示された写真であっても、所望の写真を迅速に探し出すことができる。また、インターネットに接続することなく、オフラインで写真画像の閲覧・選択が可能であるため、特定人物の情報が流出するなどのセキュリティ上の問題がない。また、サーバー等で写真画像を公開すると、ユーザー（顧客）は、公開された写真画像をユーザー端末にダウンロードできてしまうため、写真を注文しなくても画像データを入手できる可能性がある。その場合、写真提供者（写真販売業者またはイベント主催者）のビジネスとして成り立たなくなる可能性があるが、掲示場所６０に掲示された写真をユーザーに見せることにより、ビジネスとして成り立たなくなるといった問題を回避できる。

また、本実施形態の撮像部１２０は、動画像により複数の写真を撮像するため、静止画像により複数回に分けて撮像する場合と比較して、多数の写真画像を迅速に取得することができる。また、本実施形態の特定情報取得部１３０は、写真を注文するための特定情報を対応テーブルから取得するため、写真提供者にとっては、各写真に対応付けて特定情報を掲示する手間（例えば、写真上または写真近傍に、手書きまたはラベル等で注文番号を掲示する手間）を省くことが可能になる。また、ユーザーにとっては、写真の撮像に伴って（動画像の一部として）、２次元コードＣを取得可能であるため、対応テーブルを取得する手間も省略できる。さらに、本実施形態では、写真画像ＤＢ２２に記憶されている写真画像を画像解析することにより、自分や家族、友人などの特定人物を自動的に特定可能であるため、ユーザーが特定人物を指定する手間を省くことができる。

また、本実施形態の抽出結果表示部１６０は、抽出結果として、写真画像抽出部１５０により抽出された一部の写真画像を、他の写真画像より強調して表示するため、ユーザーは、撮像した全写真の写真画像を確認しつつ、強調表示された一部の写真画像を確認することができる。これにより、所望の写真を迅速に探し出すことができると共に、特定人物が写っているにも関わらず抽出精度の問題で抽出漏れとなった写真や、特定人物が写っていなくても入手したい写真を確認することができる。また、特定人物を強調表示するため、ユーザーは、抽出結果に誤りがないか（確かに特定人物が写っているか）を確認することができる。

なお、上記の実施形態によらず、以下の変形例を採用可能である。
[変形例１]
図８は、変形例１に係るスマートフォン１の機能ブロック図である。本変形例のスマートフォン１は、上記の実施形態の写真画像記憶部１１０（図５参照）に代えて、個人情報記憶部２１０を備える。個人情報記憶部２１０は、個人情報に顔写真を関連付けて記憶したものであり、スマートフォン１に一般的な機能として搭載されている「連絡先一覧」や「アドレス帳」に相当する。この個人情報記憶部２１０には、個人情報として、自分との関係性を示す情報（「父」、「息子」などの表示名、「家族」、「友人」などの分類）が記憶されている。本変形例の特定人物特定部１４０は、当該個人情報から、ユーザーとの関係性が深い人物を特定人物として特定する。そして、写真画像抽出部１５０は、写真画像記憶部１１０に記憶された特定人物の顔写真を利用して、撮像された複数の写真画像の中から一部の写真画像を抽出する。なお、本変形例では、操作領域Ｅｂにおいて（図７参照）、「Ａさん」、「Ｂさん」の氏名を個人情報記憶部２１０に記憶された個人名で表示する。

また、さらなる変形例として、「連絡先一覧」や「アドレス帳」に関連付けて記憶された通信履歴や通話履歴を参照し、これらの履歴に基づいて、特定人物を特定しても良い。特定方法としては、通信・通話回数が多い人物、通信量が多い人物、通話時間が長い人物、などを特定することが考えられる。

また、さらなる変形例として、ＳＮＳ（Social Networking Service）の情報を利用し、通信回数、通信時間、アクセス回数の多い人を特定人物として特定しても良い。この場合、写真画像抽出部１５０は、ＳＮＳで登録されているプロフィール写真を利用して、写真画像を抽出する。

[変形例２]
図９は、変形例２に係るスマートフォン１の機能ブロック図である。本変形例のスマートフォン１は、上記の実施形態の機能構成（図５参照）に加え、関係人物特定部２２０を備える。関係人物特定部２２０は、撮像部１２０により撮像された複数の写真の写真画像を解析し、特定人物と同じ写真に写っている関係人物を特定する。特定方法としては、特定人物と同じ写真に写っている回数が所定回数以上の人物、特定人物と同じ写真に写っている回数が多い上位数名、などを特定することが考えられる。本変形例の写真画像抽出部１５０は、特定人物および関係人物の少なくとも一方が写っている可能性が高い写真画像を抽出する。また、本変形例の抽出結果表示部１６０は、特定人物と関係人物を識別可能に表示する。

図１０は、本変形例に係る写真画像抽出結果の表示例を示す図である。同図において、符号８１は、特定人物「Ａ」の強調マーク、符号８３は、関係人物「Ｃ」の強調マークを示す。このように、写真画像表示領域Ｅａでは、特定人物と関係人物の強調マークの表示形態を異ならせて表示する。また、撮像された複数の写真の写真画像のうち、特定人物および関係人物の少なくとも一方が写っている写真画像（符号８１または符号８３の強調マークを含む写真画像）ＰＧ１，ＰＧ２，ＰＧ４，ＰＧ６を、他の写真画像より強調して表示する。本変形例によれば、特定人物だけでなく、特定人物と同じ写真に写っている関係人物（写真掲示の対象となるイベントで親しくなった人物など）についても、写真画像の抽出対象とすることができる。また、特定人物と関係人物を識別可能に表示するため、ユーザーは、関係人物としてどのような人が特定されたのか、また特定人物と関係人物の特定結果に誤りがないか、などを確認することができる。

なお、関係人物として複数人が特定された場合は、各人物についても、識別可能に表示することが好ましい。また、さらなる変形例として、特定人物が写っている写真画像のみ、または関係人物が写っている写真画像のみを、強調表示の対象としても良い。

[変形例３]
上記の実施形態の特定情報取得部１３０は、特定テーブルを参照して特定情報を取得したが、写真に電子透かしを埋め込み、これを読み取ることで特定情報を取得しても良い。本変形例では、掲示場所６０に掲示される全ての写真に、電子透かしとして特定情報を埋め込んでおく。特定情報としては、２次元コードやバーコード等のコード画像、文字、記号等を用いる。本変形例の特定情報取得部１３０は、撮像部１２０の撮像に伴って電子透かしを読み取り、当該電子透かしから各写真（各写真画像）の特定情報を取得する。この構成によれば、ユーザーは、写真を撮像するだけで、写真画像と特定情報を同時に取得することができる。また、特定情報を電子透かしで写真に埋め込むため、写真画像と特定情報を一致させることが容易である。

なお、さらなる変形例として、写真上に特定情報を視認可能に印刷しておく構成でも良い。また、写真近傍に、ラベル等で特定情報を明示しても良いし、手書きで特定情報（注文番号）を記載しても良い。本例においても、撮像部１２０の撮像に伴って、特定情報を取得可能である。

[変形例４]
また、上記の実施形態の特定人物特定部１４０は、写真画像記憶部１１０を参照して特定人物を特定したが、ユーザー操作に基づいて特定人物を特定しても良い。例えば、撮像部１２０により撮像された複数の写真画像をタッチパネル１１に表示し、それらの中からユーザーにより任意の写真画像が選択された場合、その任意の写真画像に写っている１人以上の人物を特定人物として特定しても良い。または、任意の写真画像に写っている任意の人物が選択されたとき、当該任意に選択された人物を特定人物として特定しても良い。また、この場合、写真画像抽出部１５０は、任意の写真画像に写っている１人以上の人物または任意に選択された人物の服装を考慮して、他の写真画像から特定人物を検索しても良い。これにより、同じ日に行なわれたイベントで写された写真画像であれば、イベントに参加している人物の服装は同じである可能性が高く、写っている人物の顔の向きによって顔認識が不十分であっても、服装の特徴により特定人物を抽出することが可能になる。この場合、抽出結果表示部１６０は、抽出結果として、任意の写真画像と、他の写真画像のうち特定人物が写っている可能性が高い写真画像を表示する。

[変形例５]
また、上記の実施形態では、撮像部１２０により掲示場所６０に掲示された写真を撮像したが、テーブル上に並べられた写真、写真アルバムに貼られた写真、大型モニターに映し出された写真を撮像対象としても良い。また、束になった写真を１枚ずつ送りながら撮像しても良い。

[変形例６]
また、上記の実施形態では、本発明の写真画像抽出装置を、１台のスマートフォン１で実現したが、２台のスマートフォン１で実現しても良い。つまり、撮像部１２０を有する第１の装置と、その他の各部を有する第２の装置と、で構成し、第１の装置で撮像した写真画像を第２の装置が取得して、写真画像の抽出や抽出結果の表示を行う構成でも良い。

[変形例７]
また、上記の実施形態では、掲示場所６０に貼付されたラベル６５から２次元コードＣを読み取って掲示場所コードおよび対応テーブルを取得したが、注文受付サーバー３にアクセスしてこれらの情報を取得するなど、他の方法で取得しても良い。なお、掲示場所コードについては、全ての掲示場所において異なる特定情報を割り振りできるのであれば、取得不要である。また、対応テーブルについても、規定の並び順にしたがって写真を貼付する構成であれば（スマートフォン１により、写真の貼付位置から特定情報を特定できるのであれば）、取得不要である。

[変形例８]
また、上記の実施形態では、撮像部１２０により動画像を撮像したが、静止画像を撮像しても良い。この場合、１枚の静止画像で複数枚の写真を撮像しても良い。

[変形例９]
また、抽出結果表示部１６０は、撮像部１２０により撮像した複数の写真画像を表示するのではなく、写真画像抽出部１５０により抽出された一部の写真画像のみを表示しても良い。また、撮像部１２０による撮像後に、一旦、複数の写真画像を表示し、写真画像抽出部１５０による抽出後に、図７に示した抽出結果または一部の写真画像を表示しても良い。

[その他の変形例]
また、上記に示したスマートフォン１の各構成要素をプログラムとして提供しても良い。また、そのプログラムを各種記録媒体（ＣＤ−ＲＯＭ、フラッシュメモリー等）に格納して提供しても良い。すなわち、コンピューターをスマートフォン１の各構成要素として機能させるためのプログラム（専用アプリケーション２１を含む）、およびそれを記録した記録媒体も、本発明の権利範囲に含まれる。なお、スマートフォン１の各構成要素として機能させるためのプログラムは、掲示場所６０に掲示されたラベル６５の２次元コードＣをキーとして、スマートフォン１がネットワーク上などから取得してもよい。

また、上記の実施形態では、本発明の写真画像抽出装置をスマートフォン１で実現したが、その他のタブレット端末、携帯電話、ノート型ＰＣ、デジタルカメラ、ビデオカメラなど、撮像機能を有する情報処理端末または撮像装置で写真画像抽出装置を実現しても良い。また、操作部１７０および注文部１８０を省略し、ユーザーが、注文用封筒などに注文番号を書き込んで注文する方法を採用しても良い。その他、本発明の要旨を逸脱しない範囲で、適宜変更が可能である。

１…スマートフォン、３…注文受付サーバー、１１０…写真画像記憶部、１２０…撮像部、１３０…特定情報取得部、１４０…特定人物特定部、１５０…写真画像抽出部、１６０…抽出結果表示部、１７０…操作部、１８０…注文部、２１０…個人情報記憶部、２２０…関係人物特定部、３１０…注文受付部

Claims (13)

1. 複数の写真を撮像する撮像部と、
   前記複数の写真を撮像した複数の写真画像を解析し、特定人物が写っている可能性が高い一部の写真画像を抽出する写真画像抽出部と、
   前記写真画像抽出部の抽出結果を表示する抽出結果表示部と、を備えることを特徴とする写真画像抽出装置。
2. 前記写真画像抽出部により抽出された前記一部の写真画像を、それぞれ一意に特定する特定情報を取得する特定情報取得部と、
   注文対象となる写真画像を選択する操作部と、
   前記操作部により選択された前記写真画像の写真を注文する注文部と、を備え、
   前記注文部は、の前記特定情報を用いて前記写真画像の注文を行うことを特徴とする請求項１に記載の写真画像抽出装置。
3. 前記特定情報取得部は、前記複数の写真の中の各写真の位置と、各写真の前記特定情報と、を対応付けた対応テーブルを参照することにより、前記特定情報を取得することを特徴とする請求項２に記載の写真画像抽出装置。
4. 前記複数の写真には、電子透かしが埋め込まれており、
   前記特定情報取得部は、前記撮像部の撮像に伴い、前記電子透かしから前記特定情報を取得することを特徴とする請求項２に記載の写真画像抽出装置。
5. 前記撮像部は、動画像を撮像し、
   前記写真画像抽出部は、前記動画像に含まれる前記複数の写真画像の中から前記一部の写真画像を抽出することを特徴とする請求項１ないし４のいずれか１項に記載の写真画像抽出装置。
6. 前記抽出結果表示部は、前記抽出結果として、前記撮像部により撮像された前記複数の写真の写真画像のうち、前記写真画像抽出部により抽出された前記一部の写真画像を、他の写真画像より強調して表示することを特徴とする請求項１ないし５のいずれか１項に記載の写真画像抽出装置。
7. 前記抽出結果表示部は、前記写真画像抽出部により抽出された前記一部の写真画像に写っている人物のうち、前記特定人物を、他の人物より強調して表示することを特徴とする請求項１ないし６のいずれか１項に記載の写真画像抽出装置。
8. 過去に撮像された写真画像を記憶する写真画像記憶部と、
   前記写真画像記憶部内にある写真画像に写っている回数が多い人物を前記特定人物として特定する特定人物特定部と、を備えることを特徴とする請求項１ないし７のいずれか１項に記載の写真画像抽出装置。
9. 個人情報に顔写真を関連付けて記憶する個人情報記憶部と、
   前記個人情報記憶部に記憶された前記個人情報に基づいて前記特定人物を特定する特定人物特定部と、を備え、
   前記写真画像抽出部は、特定された前記特定人物の前記顔写真を用いて、前記一部の写真画像を抽出することを特徴とする請求項１ないし７のいずれか１項に記載の写真画像抽出装置。
10. 前記撮像部により撮像された前記複数の写真の写真画像を解析し、前記特定人物と同じ写真に写っている関係人物を特定する関係人物特定部を備え、
    前記写真画像抽出部は、前記特定人物および前記関係人物の少なくとも一方が写っている可能性が高い写真画像を抽出することを特徴とする請求項１ないし９のいずれか１項に記載の写真画像抽出装置。
11. 前記抽出結果表示部は、前記特定人物と前記関係人物を、識別可能に表示することを特徴とする請求項１０に記載の写真画像抽出装置。
12. コンピューターが、
    複数の写真を撮像する撮像ステップと、
    前記複数の写真を撮像した複数の写真画像を解析し、特定人物が写っている可能性が高い一部の写真画像を抽出する写真画像抽出ステップと、
    前記写真画像抽出ステップの抽出結果を表示する抽出結果表示ステップと、を実行することを特徴とする写真画像抽出方法。
13. コンピューターに、請求項１２に記載の写真画像抽出方法における各ステップを実行させるためのプログラム。

Images