JP2017062859A - 出席者によるイベントの検索 - Google Patents

出席者によるイベントの検索 Download PDF

Info

Publication number
JP2017062859A
JP2017062859A JP2017003211A JP2017003211A JP2017062859A JP 2017062859 A JP2017062859 A JP 2017062859A JP 2017003211 A JP2017003211 A JP 2017003211A JP 2017003211 A JP2017003211 A JP 2017003211A JP 2017062859 A JP2017062859 A JP 2017062859A
Authority
JP
Japan
Prior art keywords
event
images
collection
event group
personal identification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017003211A
Other languages
English (en)
Inventor
アサフ ゾメット,
Zomet Asaf
アサフ ゾメット,
エフード リブリン,
Rivlin Ehud
エフード リブリン,
ガル チェチック,
Chechik Gal
ガル チェチック,
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of JP2017062859A publication Critical patent/JP2017062859A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/30Scenes; Scene-specific elements in albums, collections or shared content, e.g. social network photos or video

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Processing Or Creating Images (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Time Recorders, Dirve Recorders, Access Control (AREA)

Abstract

【課題】イベントから画像を自動的に検索するためのシステム、コンピュータ実装方法、および非一過性コンピュータ読み取り可能な媒体が、提供される。【解決手段】1つ以上のパーソナル識別タグが、提供され、パーソナル識別タグは、1人以上の個人に対する識別情報に関連する。次に、少なくとも1つのイベントグループが、識別され、イベントグループは、イベントに関連付けられた画像の集合体であり、画像の集合体は、提供されたパーソナル識別タグのうちの1つ以上でタグ付けされた1つ以上の画像を含む。識別されたイベントグループの各々に対する画像の集合体が、次いで、受信される。【選択図】図4

Description

本開示は、概して、デジタルメディアの分野に関し、より具体的には、イベントに基づいて、画像を検索することに関する。
デジタルメディアの共有は、典型的には、ユーザのコンピュータデバイス上で作動するブラウザまたは他のアプリケーションを使用して、例えば、PicasaおよびPicasa Web Albums等のメディア共有ウェブサイトへユーザがメディアをアップロードすることを伴う。メディアは、ウェブサイトによって運営される遠隔サーバに記憶され、ユーザがメディアを共有することを選択した、他のユーザによって後にアクセスされる。しかしながら、デジタルメディアおよびデジタルメディア集合体の量が増大するにつれて、具体的イベントに関連するメディアデータの検索は、困難となり得る。
実施形態は、イベントに関連する画像の検索に関連する。一実施形態では、1つ以上のパーソナル識別タグが、クライアントデバイスから提供され、パーソナル識別タグは、1人以上の個人に対する識別情報に関連する。次に、少なくとも1つのイベントグループが、識別される。イベントグループは、イベントに関連付けられた画像の集合体である。画像の集合体は、提供されたパーソナル識別タグのうちの1つ以上でタグ付けされた1つ以上の画像を含む。識別されたイベントグループの各々に対するメディアデータの集合体が、次いで、クライアントデバイスによって受信される。
別の実施形態では、イベントに関連する画像を検索するためのシステムが、提供される。実施形態では、1つ以上のプロセッサによって実行されると、1つ以上のプロセッサに、1つ以上のパーソナル識別タグを提供することであって、パーソナル識別タグは、1人以上の個人に対する識別情報に関連する、ことを含む、動作を行わせるように動作可能な命令を記憶する、1つ以上の記憶デバイスとを備えている、システムが、提供される。次に、少なくとも1つのイベントグループが、識別される。イベントグループは、イベントに関連付けられた画像の集合体であり、画像の集合体は、提供されたパーソナル識別タグのうちの1つ以上でタグ付けされた1つ以上の画像を含む。識別されたイベントグループの各々に対する画像の集合体が、次いで、受信される。
別の実施形態では、非一過性コンピュータ読み取り可能な媒体が、実行に応じて、1つ以上のプロセッサに、動作を行わせる、1つ以上のプロセッサによって実行可能な命令を含む、ソフトウェアを格納する。これらの動作は、1つ以上のパーソナル識別データタグを提供することと、少なくとも1つのイベントグループを識別することであって、イベントグループは、イベントに関連付けられた画像の集合体である、ことと、識別されたイベントグループの各々に対する画像の集合体へのアクセスを受信することとを含む。
さらなる実施形態、特徴、利点、ならびに種々の実施形態の構造および動作は、添付図面を参照して以下で詳細に説明される。本開示は、本明細書で説明される具体的実施形態に限定されないことに留意されたい。そのような実施形態は、例証目的のみで本明細書で提示される。追加の実施形態が、本明細書に含有される情報に基づいて、当業者に明白となるであろう。
添付図面を参照して、一例のみとして実施形態が説明される。図面中、類似参照番号は、同一または機能的に同様の要素を示し得る。要素が最初に現れる図面は、典型的には、対応する参照番号の中の1つまたは複数の左端の数字によって示される。さらに、本明細書に組み込まれ、本明細書の一部を形成する添付図面は、本開示の実施形態を図示し、説明とともに、さらに本開示の原則を説明し、当業者がその実施形態を作製して使用することを可能にする働きをする。
実施形態が実装され得る、例示的なシステムの略図である。 図実施形態による、クライアントアプリケーションの実施例の略図である。 実施形態による、イベントグループサービスが実装され得る、システムの実施例の略図である。 イベントに対する画像を検索するための方法の実施例の流れ図である。 実施形態を実装することができる、コンピュータシステムの実施例の略図である。
(概要)
画像の検索および共有を促進するために、ユーザは、アルバム名別または日付別に、デジタルメディア集合体を異なるフォルダに整理することができる。ユーザはまた、タグまたはタグワードを画像または一群の画像に関連付けることもできる。タグは、画像のコンテンツを説明する1つ以上のキーワードを含む。しかしながら、具体的イベントに関連する画像の検索は、限られた量の情報しかユーザによって知られていないとき、時間集約的タスクとなり得る。例えば、ユーザが、あるイベントに出席し、そのイベントで撮影された画像を見ることを所望し得る。そのようなシナリオでは、ユーザは、イベントの場所とともに、イベントに出席していた1人または2人の個人の氏名しかを知らない場合がある。有意な量の画像をデータベースが有する場合、ユーザは、各画像またはアルバムを手動で調べ、イベントからの画像を検索することになるであろう。
加えて、メディア共有サイトは、概して、具体的イベントに関連する画像を自動的に検索する能力を提供しない。例えば、ユーザが、あるイベントに出席し、イベントに出席した数人の他の個人を知っている場合があるが、しかしながら、そのイベントから写真を読み出す自動方法は存在しない。概して、ユーザは、イベントで画像を撮影した別の個人を知っており、画像に関してその個人のアルバムを検索する必要があるであろう。
実施形態は、イベントに基づいて、画像を自動的に検索することに関する。実施形態は、クライアントデバイスから1つ以上のパーソナル識別タグを提供する。パーソナル識別タグは、1人以上の個人に対する識別情報に関連する。少なくとも1つのイベントグループが、識別され、イベントグループは、イベントに関連付けられた画像の集合体である。画像の集合体は、提供されたパーソナル識別タグのうちの1つ以上でタグ付けされた1つ以上の画像を含む。識別されたイベントグループの各々に対する画像の集合体が、次いで、受信される。
例えば、ユーザは、イベントからの画像を検索する選択肢が提示され得る。ユーザは、イベントに出席した個人の氏名を入力することを可能にする、1つ以上の入力フィールドが提供され得る。個人の氏名が提供されると、サーバ上に常駐するデータベースが、一致するイベントグループに関して検索される。一致するイベントグループは、同一のまたは実質的に類似するパーソナル識別タグでタグ付けされた画像を含むであろう。イベントグループに関連付けられた画像の集合体は、次いで、ユーザによって受信される。ユーザは、次いで、イベントに基づいて、画像を閲覧し得る。実施形態はまた、イベントが、地理位置情報データ、時間、または目印情報を提供することによって読み出されることを可能にする。
本開示は、特定の用途に対する例証的実施形態を参照して本明細書で説明されるが、実施形態は、それらに限定されないことを理解されたい。他の実施形態が可能である、本明細書の教示、ならびに実施形態が有意に有用となる追加の分野の精神および範囲内で、修正を実施形態に行うことができる。さらに、特定の特徴、構造、または特性が、実施形態に関連して説明されるときに、明示的に説明されるかどうかにかかわらず、他の実施形態に関連して、そのような特徴、構造、または特性に影響を及ぼすことは、当業者の知識の範囲内であることが提示される。
また、本明細書で説明されるような実施形態は、図に図示されるソフトウェア、ハードウェア、ファームウェア、および/またはエンティティの多くの異なる実施形態で実装されることができることも、当業者に明白となるであろう。実施形態を実装するためのハードウェアの特殊制御を伴う、いずれの実際のソフトウェアコードも、詳細な説明の限定ではない。したがって、実施形態の動作挙動は、本明細書で提示される詳細のレベルを考慮して、実施形態の修正および変化例が可能であるという理解とともに説明される。
本明細書の詳細な実施例では、「一実施形態」、「実施形態」、「実施形態例」等への言及は、説明される実施形態が、特定の特徴、構造、または特性を含み得るが、全ての実施形態が必ずしも、特定の特徴、構造、または特性を含まなくてもよいことを示す。また、そのような語句は、必ずしも同じ実施形態を指しているとは限らない。さらに、特定の特徴、構造、または特性は、実施形態に関連して説明されるが、明示的に説明されるかどうかにかかわらず、他の実施形態に関連して、そのような特徴、構造、または特性に影響を及ぼすことは、当業者の知識の範囲内であることが提示される。
「メディア」および「デジタルメディア」という用語は、デジタル写真、またはデジタルフォト、およびデジタルビデオを広義かつ包括的に指すために、本明細書で交換可能に使用される。「画像」という用語は、1人以上の個人、1つ以上の目印、および/または1つ以上のオブジェクトを含むが、それらに限定されない、場面の画像およびその場面内のアイテムを描写する、デジタル写真を広義かつ包括的に指すために、本明細書で使用される。加えて、「画像」という用語は、デジタルビデオの少なくとも一部分からの1つ以上のフレームを指し得る。さらに、「写真/フォト」、「ビデオ」、「メディア」、および「画像」という用語は、用語が「デジタル」という用語によって修飾されるかどうかにかかわらず、デジタル写真およびデジタルビデオを指すために、本明細書で使用される。
「メディア共有サイト」という用語は、写真およびビデオを含む、デジタルメディアを種々のユーザ間で共有するように適合される、任意のウェブサイト、サービス、フレームワーク、またはプロトコルを広義かつ包括的に指すために、本明細書で使用される。そのようなウェブサイトまたはサービスはまた、サイトのメンバー間でメディアを共有する追加能力を伴うソーシャルネットワーキングサイトを含み得る。
(システム)
図1は、本明細書で説明される実施形態を実装することができる、イベント検索システム100を図示する、略図である。システム100は、クライアントデバイス110と、クライアントアプリケーション112と、ブラウザ114と、メディアビューア116と、デバイス入力118と、ネットワーク104と、サーバ102と、イベントグループ共有サービス106と、データベース108とを含む。
実施形態では、クライアントデバイス110は、クライアントアプリケーション112を実行する。さらなる実施形態では、クライアントデバイス110は、メディアビューア116を実行する。クライアントアプリケーション112およびメディアビューア116の動作は、以下にさらに詳細に説明される。クライアントアプリケーション112、ブラウザ114、およびメディアビューア116は、任意の種類のコンピュータデバイス上に実装され得る。そのようなコンピュータデバイスは、限定ではないが、パーソナルコンピュータ、携帯電話等のモバイルデバイス、タブレットデバイス、ラップトップコンピュータ、ワークステーション、埋め込みシステム、ゲームコンソール、テレビ、セットトップボックス、または任意の他のコンピュータデバイスを含むことができる。さらに、コンピュータデバイスは、命令を実行し、記憶するためのプロセッサおよびメモリを有する、デバイスを含むことができるが、それに限定されない。ソフトウェアは、1つ以上のアプリケーションと、オペレーティングシステムとを含み得る。ハードウェアは、プロセッサ、メモリ、およびグラフィカルユーザインターフェースディスプレイを含むことができるが、それらに限定されない。コンピュータデバイスはまた、複数のプロセッサと、複数の共有または別個のメモリ構成要素とを有し得る。例えば、コンピュータデバイスは、クラスタ化コンピュータ環境またはサーバファームであり得る。
一般に、イベント検索システム100は、以下のように動作する。クライアントデバイス110は、クライアントアプリケーション112、メディアビューア116、または任意のそれらの組み合わせを介して、1つ以上のパーソナル識別タグをサーバ102上のイベントグループ共有サービス106に提供し得る。パーソナル識別データタグは、1人以上の個人に対する識別情報に関連する。例えば、パーソナル識別タグは、個人の名前、名字、またはニックネームであり得る。一般に、パーソナル識別タグは、具体的イベントに対する画像を探しているユーザによって提供されるであろう。本シナリオでは、ユーザは、結婚式等の具体的イベントに出席した1人以上の個人に関するパーソナル識別タグを提供し得る。イベントに出席した1人以上の個人は、出席者と称され得る。
加えて、1つ以上のイベント特有データタグが、ある実施形態に従って提供され得る。イベント特有データタグは、イベントに関連する地理位置情報データ、時間データ、または目印識別データであり得る。例えば、ユーザは、イベント施設の名称または住所等の地理位置情報データを提供し得る。加えて、ユーザは、イベントが開催された日付および時間または画像中に現れ得る具体的目印等の情報を提供し得る。1つ以上のパーソナル識別タグおよび/または1つ以上のイベント特有データタグが、クライアントデバイス110上のデバイス入力118を使用して、イベントグループ共有サービス106に打ち込まれ、提供され得る。前述の実施例では、ユーザは、結婚式の住所または日付等の1つ以上のイベント特有データタグを提供し得る。デバイス入力118は、限定されないが、マウス、QWERTYキーボード、タッチスクリーン、マイクロホン、またはT9キーボードを含む、クライアントデバイス110に連結された任意の種類のユーザ入力デバイスであり得る。
1つ以上のパーソナル識別タグおよび/またはイベント特有データタグの提供に応答して、少なくとも1つのイベントグループが、識別される。イベントグループは、イベントに関連付けられた画像の集合体である。画像の集合体は、1つ以上の提供されたパーソナル識別データタグおよび/またはイベント特有データタグでタグ付けされた1つ以上の画像を含み得る。サーバ102上のイベントグループ共有サービス106は、パーソナル識別タグおよび/またはイベント特有データタグを受信する。少なくとも1つのイベントグループは、ユーザによって提供されるタグと一致するパーソナル識別タグおよび/またはイベント特有データタグでグループ化およびタグ付けられた画像に関してデータベース108を検索することによって識別される。例えば、ユーザは、パーソナル識別タグ「Jane Doe」および「John Doe」とともに、イベント特有地理位置情報データタグ「施設X」を提供し得る。ユーザは、Jane DoeおよびJohn Doeが施設Xにおいて出席したイベント(例えば、結婚式)からの画像を探していることを示す。パーソナル識別タグおよびイベント特有データタグの受信に応じて、データベース108は、提供されたタグ情報でタグ付けされた画像群に関して検索される。
画像は、イベントグループとして、データベース108内に記憶される。すでに述べたように、イベントグループは、イベントに関連付けられた画像の集合体である。イベントグループ共有サービス106は、イベントに基づいて、画像を受信および記憶するように構成される。イベントに基づく画像の記憶は、当業者に公知の技法を使用して、イベントグループ共有サービス106によって行われる。例えば、画像の受信に応じて、イベントグループ共有サービス106は、周知の顔検出アルゴリズムを使用して、各画像に対して顔検出動作を行い得る。加えて、顔認識動作が、周知の顔認識アルゴリズムを使用して、各画像に行われ得る。顔検出および顔認識動作が行われると、画像は、当業者に公知のクラスタ化アルゴリズムを使用して、イベントグループに一緒にクラスタ化される。イベントグループ共有サービス106およびその動作のさらなる議論は、以下に論じられる。
識別されたイベントグループからの画像の集合体は、クライアントデバイス110によって受信される。実施形態では、図1に図示されるように、クライアントデバイス110は、クライアントアプリケーション112、メディアビューア116、または任意のそれらの組み合わせを介して、サーバ102上のイベントグループ共有サービス106から画像を受信し、受信した画像を表示し得る。画像は、1つ以上のメディアファイルを含む。メディアファイルは、写真、ビデオ、または両方の組み合わせであり得る。加えて、メディアファイルは、読み出され、または表示されるメディアに対応するメディアコンテンツ情報およびメタデータを含み得る。クライアントアプリケーション112およびメディアビューア116は、クライアントデバイス110のディスプレイ上に読み出された画像の視覚表現を提示し得る。そのようなディスプレイは、デジタル写真および/またはビデオを閲覧するための任意のタイプのディスプレイであることができ、あるいはデジタル写真および/またはビデオを閲覧するために適合された任意のタイプのレンダリングデバイスであることができる。
実施形態では、メディアビューア116は、独立型アプリケーションであることができ、または、例えば、Google Chrome等のブラウザ114内で実行されることができる。メディアビューア116は、例えば、ブラウザ116内のスクリプトとして、ブラウザ116内のプラグインとして、またはブラウザプラグイン内で実行するプログラムとして、実行されることができる。
実施形態では、クライアントデバイス110は、ネットワーク104を経由して、イベントグループサービス106から通知を受信するように構成される。実施形態では、そのような通知は、閲覧されるべき画像が記憶されている、ウェブ上の場所へのアクセスリンクを含むことができる。例えば、アクセスリンクは、ユニフォームリソースロケータ(URL)等のウェブ場所アドレスの形態で、ウェブサイトへの場所を含み得る。通知は、いくつかの異なるプロトコルおよび方法のいずれかを使用して、イベントグループサービス106からクライアントデバイス110に送信され得る。例えば、通知は、イベントグループサービス106から、電子メールまたはショートメッセージサービス(SMS)を介して送信され得る。通知は、クライアントアプリケーション112、メディアビューア116、あるいは、例えば、電子メールクライアントまたはSMSアプリケーション等の通知を受信するように適合された任意の他のアプリケーションまたはユーティリティによって、クライアントデバイス110において受信され得る。
クライアントデバイス110は、例えば、ネットワーク104にわたって、サーバ102と通信する。サーバ102のみ、示されるが、より多くのサーバが必要に応じて使用され得る。同様に、クライアントデバイス110のみが示されているが、より多くのクライアントデバイスが必要に応じて使用され得る。クライアントデバイス110は、通信インターフェースを通してネットワーク104に通信可能に連結される。クライアントデバイス110は、1つ以上のプロセッサと、ネットワーク上でデータを受信および伝送することが可能な通信インフラストラクチャとを有する、任意の種類のコンピュータデバイスであり得る。クライアントデバイス110は、携帯電話、携帯情報端末(PDA)、コンピュータ、コンピュータ群、セットトップボックス、または命令を処理すること、ならびに人間および他のコンピュータデバイスからデータを受信し、そこへデータを伝送することが可能な他の同様の種類のデバイスを含むことができるが、それらに限定されない。
サーバ102は、同様に、データをクライアントデバイス110に供給することが可能な任意の種類のコンピュータデバイスであり得る。サーバ102は、イベントグループ化サービス106を実行する。イベントグループ化サービス106は、サーバ102に関して示されるが、イベント画像サービス102は、任意のサーバ上に実装され得る。さらに、イベントグループ化サービス102の機能性は、例えば、サーバ102等の単一のサーバ上で、あるいは、例えば、分散またはクラスタ化サーバ環境内の複数のサーバにわたって、実装され得る。
実施形態では、サーバ102は、データベース108に通信可能に連結される。データベース108は、当業者に公知である任意の種類のデータ記憶装置であり得る。データベース108は、サーバ102によってアクセス可能である、任意の種類のメディアおよび任意の対応メディアデータを記憶し得る。1つだけのデータベース108が示されているが、より多くのデータベースが必要に応じて使用され得る。
データベース108は、写真またはビデオデータ等の任意のタイプのメディアデータを記憶し得る。画像は、例えば、デジタルカメラから撮影された写真であり得る。画像は、JPEG、TIFF、またはデジタル画像ファイルのための他の同様のフォーマットでエンコードされ得る。各画像は、画像に関連付けられたメタデータを有し得る。例えば、画像は、画像の写真が撮影された時間、写真が撮影された場所、および画像内に現れる個人および/または目印に関する情報等の情報を記憶する、デジタルカメラ用のファイルフォーマット(EXIF)ヘッダを有し得る。写真が撮影された時間は、画像が画像捕捉デバイスに暴露された時間に対応し得る。ビデオは、フレームのシーケンスを含み、各フレームは、画像を含む。ビデオもまた、例えば、デジタルカメラ等、ビデオを捕捉可能な画像捕捉デバイスを使用して捕捉され得る。
ネットワーク104は、データ通信を運ぶことができる、任意のネットワークまたはネットワークの組み合わせであり得る。そのようなネットワーク104は、有線(例えば、イーサネット(登録商標))または無線(例えば、Wi−Fiおよび3G)ネットワークを含むが、それらに限定されない。加えて、ネットワーク104は、ローカルエリアネットワーク、中域ネットワーク、および/またはインターネット等の広域ネットワークを含むことができるが、それらに限定されない。ネットワーク104は、インターネットあるいはワールドワイドプロトコルおよび/またはサービスを含むが、それらに限定されない、プロトコルおよび技術をサポートすることができる。中間ネットワークルータ、ゲートウェイ、またはサーバが、特定の用途または環境に応じて、システム100の構成要素間に提供され得る。
(クライアントアプリケーション)
図2は、図1のクライアントデバイス110のクライアントアプリケーション112の例示的実施形態を図示する略図である。クライアントアプリケーション112は、ユーザインターフェースモジュール202と、画像読み出しモジュール204と、イベントグループマネージャ206とを含む。イベントグループ画像データベース208は、クライアントアプリケーション112に連結される。画像読み出しモジュール202と、ユーザインターフェースモジュール204と、イベントグループマネージャ206とを含む、クライアントアプリケーション112の構成要素のうちの各々は、互に通信可能に連結され得る。
動作時、クライアントアプリケーション112は、ユーザインターフェースモジュール204を使用して、クライアントデバイス110におけるユーザに、1つ以上のイベントグループを要求するための選択肢を表示する。ユーザの選択肢の選択に応じて、クライアントアプリケーション112は、画像読み出しモジュール204を使用して、デジタル写真またはビデオを受信する。ユーザインターフェースモジュール202は、ユーザに、1つ以上のパーソナル識別タグを提供するための選択肢を表示し得る。加えて、ユーザインターフェースモジュール202は、ある実施形態によると、ユーザに、1つ以上のイベント特有データタグを提供するための選択肢を表示し得る。例えば、ユーザは、1つ以上の入力フィールドが提示され、名前、名字、ニックネーム、または場所のうちの1つを提供し得る。ユーザは、提供された場所で開催され、提供された個人が出席した1つ以上のイベントから画像を検索するであろう。加えて、ユーザインターフェースモジュール202は、検索入力ボックスを提供し得る。検索入力ボックスは、ユーザが、イベントに関連する文字列を入力することを可能にし得る。例えば、ユーザは、「John DoeおよびErica Smithに関するイベント」という文字列を入力し得る。本クエリは、ユーザが、John DoeおよびErica Smithが出席したイベントからの画像を検索していることを示すであろう。
1つ以上のパーソナル識別タグおよび/または1つ以上のイベント特有データタグの提供に応答して、少なくとも1つのイベントグループが、画像読み出しモジュール204によって識別される。イベントグループは、同一のまたは実質的に類似するパーソナル識別タグおよび/またはイベント特有タグでタグ付けされた画像の集合体である。画像読み出しモジュール204は、識別されたイベントグループの各々に対する画像の集合体を受信するように構成される。別の実施形態では、イベントグループマネージャ206は、1つ以上の識別されたイベントグループの通知を受信するように構成される(例えば、図1のイベントグループサービス106から)。実施形態では、通知は、イベントグループへのアクセスリンクを含む。例えば、アクセスリンクは、ユニフォームリソースロケータ(URL)アドレスの形態のウェブベースの場所アドレスであり得、ユーザは、イベントグループに自動的に導かれるように選択することができる。図1に戻って参照すると、イベントグループの画像は、例えば、クライアントアプリケーション112、メディアビューア118、またはユーザがメディアを閲覧するために使用することができる、同様のタイプのアプリケーションを介して、アクセス可能であり得る。リンクへのアクセスに応じて、ユーザは、各識別されたイベントグループから全画像を見る能力を有するであろう。
代替として、1つ以上の画像をダウンロードするための選択肢が、ある実施形態によると、ユーザに提供され得る。例えば、画像読み出しモジュールは、識別されたイベントグループの通知とともに、識別されたイベントグループに関連付けられた画像をダウンロードするための選択肢を受信し得る。ユーザが、選択肢を選択し、画像をダウンロードすると、イベントグループ内の画像が全て、ネットワーク104を介して、クライアントデバイス110によって受信されるであろう。イベントグループマネージャ206は、ある実施形態によると、識別されたイベントグループに基づいて、画像の集合体をアルバムに分割するように構成される。
イベントグループマネージャ206は、イベントグループに基づいて、画像の集合体を1つ以上のアルバムにグループ化することによって、画像読み出しモジュール204によって受信された画像の集合体を分割する。イベントグループマネージャ206は、各イベントグループに対応するメタデータを決定する。各イベントグループの決定されたメタデータに基づいて、イベントグループマネージャ206は、画像の集合体を1つ以上のアルバムに分割する。例えば、イベントグループは、画像の集合体中に現れる個人のパーソナル識別のリストとともに、画像の集合体が捕捉された時間範囲および場所等のメタデータを含み得る。メタデータに基づいて、イベントグループマネージャ206は、画像の集合体または群を1つ以上のアルバムに分割し、各アルバムは、実質的に、同様のパーソナル識別、時間、および場所情報を有する画像を含む。
イベントグループマネージャ206は、ある実施形態によると、イベントグループ画像データベース208内のイベントグループ毎に1つ以上のアルバムを記憶するように構成される。別の実施形態では、イベントグループマネージャ206は、同様のメタデータを伴う画像を含む既存のアルバムに関して、イベントグループ画像データベース208を検索し得る。例えば、イベントグループマネージャ206は、画像読み出しモジュール204によって受信される画像と同様のパーソナル識別リスト、時間、および場所情報を有する画像を含む、イベントグループ画像データベース内の既存のアルバムを見つけ得る。本実施例では、イベントグループマネージャ206は、画像を既存のアルバムに追加するであろう。
(イベントグループサービス)
図3は、図1のサーバ102のイベントグループサービス106の例示的実施形態を図示する、略図である。イベントグループサービス106は、メディアマネージャモジュール302と、顔検出モジュール304と、顔認識モジュール306と、目印認識モジュール308と、画像クラスタ化モジュール308とを含む。イベントグループサービス106は、当業者に公知の処理を使用して、画像をイベントグループにグループ化する。例えば、同一のイベントに関連付けられた画像は、同一のグループにグループ化される。
顔検出モジュール304は、メディアがクライアントデバイスによって受信された後、メディアを分析するように構成されることができる。顔検出モジュール304は、1つ以上の提供される画像を分析し、画像内の顔を検出するように構成されることができる。例えば、一組の画像がサーバ102に提供される場合、顔検出モジュール304は、画像のその組内の各画像を分析し、顔を検出することができる。
顔が検出された場合、顔検出モジュール304は、検出された顔に対応する顔画像または顔モデルを生成するために、検出された顔を包含する領域、例えば、検出された顔を包含する長方形の領域のデジタルコピーを作製することができる。次いで、顔画像は、ローカルメモリ(図示せず)の中に記憶されることができる。代替として、顔画像は、ネットワーク(例えば、ネットワーク104)を介してクライアントアプリケーション112によってアクセス可能である、データベース108の中に記憶されることができる。顔検出モジュール304は、後に分析される画像の中で顔を検出するのに役立つために、記憶された顔画像を使用することができる。
この説明で挙げられる関連技術の当業者であれば、いくつかの周知の技法のうちのいずれか1つが、画像の中の顔を検出するために顔検出モジュール304で使用され得ることを理解するであろう。そのような技法の実施例として、米国特許第7,031,499号で説明されるような特徴値のフィルタリングおよび米国特許第7,099,510号で説明されるようなブーストされたプリミティブ特徴を使用した顔検出が挙げられるが、それらに限定されない。
顔認識モジュール306は、1つ以上の顔を認識するように自動顔認識を行うことによって、画像を解釈する。顔認識モジュール306の自動顔認識は、顔検出段階および顔認識段階といった、2つの段階で機能し得る。しかしながら、顔認識モジュール306は、顔検出情報が画像とともにすでに含まれている場合、顔検出段階を省略可能であり得る。例えば、顔検出情報を含む画像が、クライアントアプリケーションによって送信され得る。顔認識モジュール306は、画像内の顔を検出するように画像を分析する。1つ以上の顔が検出された場合、顔認識モジュール332は、例えば、画像内の検出された顔を包含する有界領域を含む、各検出された顔に対応する顔検出情報を生成し得る。
顔認識モジュール306の動作は、以前に認識された顔画像のうちの1つ以上に対して、検出された顔の比較を行うことを含み得る。例えば、以前に認識された顔は、顔認識モジュール306によってアクセス可能な1つ以上の顔画像データベース(図示せず)の中に記憶され得る。この説明で挙げられる関連技術の当業者であれば、いくつかの周知の技法の任意の1つが、顔認識モジュール306内で使用され、画像内の顔を認識し得ることを理解するであろう。そのような技法の実施例として、米国特許出願第12/416,632号に説明される顔認識アルゴリズムが挙げられるが、それらに限定されない。
目印認識モジュール308は、目印を有し、目印を識別する、画像の複数部分を検出する。目印認識モジュール308の一実施例は、その全体で参照することにより本明細書に組み込まれる、「Automatic Discovery of Popular Landmarks」と題された、共同に係る米国特許出願第12119,359号で説明されている。目印認識モジュール308は、例えば、目印を認識するために、視覚クラスタ化を使用し得る。
画像クラスタ化モジュール310は、顔検出モジュール304、顔認識モジュール306、および目印認識モジュール308からの情報を使用して、画像をイベントグループにグループ化する。例えば、画像クラスタ化モジュール310は、グラフ内のノードとして、各画像を表し得る。グラフ内のノード間のエッジは、加重相似関数に従って定義されることができる。例えば、相似関数は、色、勾配、および線形バイナリパターンのヒストグラムを含む、画像内の視覚的外観特徴等、当業者に公知の技法に基づき得る。加えて、相似関数は、Quelhas他、“Modeling scenes with local descriptors and latent aspects”,IEEE International Conference on Computer Vision (ICCV)会誌、2005に説明されるようなカラーとテクスチャのvisterms、またはLowe,D.“Distinctive image features from scale−invariant keypoints”International Journal of Computer Vision,60,2(2004),pp.91−110に説明されるようなスケール不変特徴量変換に基づき得る。
各特徴は、f(x)=11(lxl+1)(xは、特徴を表す)等の単調減少関数を適用することによって、相似関数に変換され得る。代替として、相似関数は、画像間の捕捉時間差およびGPS場所距離の単調減少関数に基づき得る。例えば、捕捉時間および/またはGPS情報が、一組の画像に関して利用可能な場合、エッジは、1週間または100km等、十分に小さい時間および場所差異を有する画像に関してのみ定義され得る。加えて、相似関数は、画像間で共有される、識別および認識される顔の数の単調減少関数に基づき得る。
相似関数の重み付けおよびイベントグループへの画像の後続クラスタ化は、画像トリプレットをサンプリングすることによって行われ得る。例えば、画像A、B、およびCが、サンプリングされ得、画像Aおよび画像Bは、同一のイベントに属し、画像Cは、別のイベントに属する。これは、タイプSim(A、B)>Sim(A、C)の不等式制約をもたらす。加えて、マージン学習が、Chechik他、“Large Scale Online Learning of Image Similarity Through Ranking”,Journal of Machine Learning Research, 11:1109−1135,2010に説明されるような不等式制約からの学習に適用され得る。画像クラスタ化モジュール310は、次いで、Gdalyahu他、“Self−Organization in Vision:Stochastic Clustering for Image Segmentation, Perceptual Grouping,and Image Database Organization”,IEEE Trans.Pattern Analysis and Machine Intelligence,vol.23,no.10,pp.1053−1074,Oct.2001に説明されるものに類似する技法を使用したイベントグループへの画像のグラフベースのクラスタ化を行い得る。
メディアマネージャモジュール302はまた、各イベントグループ、パーソナル識別リスト、または他のメタデータと連携し得る。例えば、イベントグループ内の各画像に対するパーソナル識別タグおよび/または各画像からのイベント特有データタグが、読み出され、顔識別リストまたは地理位置情報データリストを書き込む(populate)ために使用され得る。各イベントグループは、関連付けられた顔識別リストまたは地理位置情報データリストを有し得る。パーソナル識別タグおよび/または地理位置情報データタグが、クライアントアプリケーション112を利用して、ユーザによって提供されると、各イベントグループに対する顔識別リストまたは地理位置情報データリストが、一致するイベントグループを識別するために使用される。
ある実施例では、イベントグループサービスが、Picasa等のメディア共有サイト(図示せず)に連結され得る。ユーザは、メディア共有サイトからデータベース108にメディアをアップロードし得る。例えば、図1に戻って参照すると、ユーザは、クライアントデバイス110においてブラウザ114を使用して、メディア共有サイトにナビゲートし、メディア共有サイトによって提供されるユーザインターフェースを介して、画像をデータベース108にアップロードし得る。さらなる実施例では、ユーザはまた、データベース108から画像を読み出すことが可能であり得る。例えば、ユーザは、ローカルメモリ116内に記憶するために、画像をクライアント110上にダウンロードするか、あるいはクライアントアプリケーション112またはメディアビューア116を使用して、画像を閲覧するかのいずれかの選択肢を有し得る。
(方法)
図4は、イベントに対する画像を検索するための方法の実施例の流れ図である。方法400の利点として、ユーザが、イベントにもとづいて、画像を読み出すためのより高速、より効率的、かつ自動化された方法が挙げられるが、それらに限定されない。さらに、方法400は、ユーザが、具体的イベントに関連する画像に関する画像のアルバムまたは集合体を手動で検索しなければならない負担を軽減する。
段階402では、1つ以上のパーソナル識別タグが、提供される。例えば、1つ以上のパーソナル識別タグは、クライアントデバイス110上のクライアントアプリケーション112および/またはメディアビューア116によって提供され得る。1つ以上のパーソナル識別タグは、1つ以上の画像に関する識別情報に関連する。実施形態では、パーソナル識別タグは、個人の名前、名字、またはニックネームのうちの1つであり得る。ある実施形態によると、1つ以上のイベント特有データタグが、提供され得る。1つ以上のイベント特有データタグが、イベントの場所または時間に関連し得る。例えば、ユーザは、結婚式、パーティ、またはスポーツイベント等のイベントに出席していたかもしれない。イベントでは、多くの人々が写真を撮影し得る。ユーザは、イベントに存在し、写真中に現れ得る、知っている種々の人々から、イベントで撮影した画像を見つけるための便利な方法を所望し得る。その結果、ユーザは、以下のパーソナル識別タグ:「John Doe」、「Jane Doe」、「施設X」を提供し得る。「John Doe」および「Jane Doe」は、該当イベントに出席した2人の個人を表し、「施設X」は、イベントが開催された場所を表す。パーソナル識別タグを提供することによって、ユーザは、John DoeおよびJane Doeを含み得る、該当イベントからの1つ以上の画像を見つけることを意図する。
段階404では、少なくとも1つのイベントグループが、識別される。例えば、イベントグループは、クライアントデバイス110上のクライアントアプリケーション112および/またはメディアビューア116によって識別され得る。イベントグループは、イベントに関連付けられた画像の集合体である。画像の集合体は、1つ以上の提供されたパーソナル識別タグおよび/またはイベント特有データタグでタグ付けされる。それに応答して、1つ以上のパーソナル識別タグおよび/またはイベント/特有データタグを提供するために、一致するタグを伴う画像を含むイベントグループが、識別される。前述の実施例では、施設XにおけるJohn DoeおよびJane Doeを含む画像を含むイベントグループが、識別されるであろう。イベントグループは、John DoeおよびJane Doeの両方、John Doeのみ、またはJane Doeのみを有する画像を含み得る。加えて、2つ以上のイベントグループが存在し得る。例えば、John DoeおよびJane Doeは、施設Xにおいて複数のイベントに出席していたかもしれない。したがって、各イベントは、その独自の関連付けられたイベントグループを有するであろう。
段階406では、識別されたイベントグループの各々に対する画像の集合体が、受信される。例えば、識別されたイベントグループの各々に対する画像の集合体は、クライアントデバイス110上のクライアントアプリケーション112および/またはメディアビューア116によって受信され得る。イベントグループが識別されると、そのイベントグループ内の画像は全て、クライアントデバイス110によって受信される。ユーザが識別されたイベントグループに関連付けられた画像の全てをダウンロードすることを可能にする選択肢が、受信され得る。前述の実施例では、John Doe、Jane Doe、またはそれらの組み合わせを含む識別されたイベントグループの各々からの1つ以上の画像が、ユーザによって受信されるであろう。したがって、ユーザは、各識別されたイベントグループからの写真へのアクセスが提示されるであろう。ユーザは、結婚式等の該当イベントからの画像へのアクセスを有するであろう。
別の実施形態では、識別されたイベントグループの通知に続いて、アクセスリンクが、クライアントデバイス110によって受信され得る。アクセスリンクは、画像の集合体へのアクセスを提供する。例えば、アクセスリンクは、クライアントデバイス110上のブラウザ114を通してアクセスされ得るリンクとして、ユーザに提供され得る。リンクをクリックすると、ユーザは、識別されたイベントグループからの画像を閲覧し得る、ウェブサイトが提供されるであろう。
ある実施形態によると、識別されたイベントグループの各々に関して受信された画像の集合体は、イベントグループに基づいてセグメント化され得る。例えば、画像の集合体は、クライアントデバイス110上のクライアントアプリケーション112および/またはメディアビューア116によってセグメント化され得る。各イベントグループは、具体的イベントに対応し得る。イベントグループとして、各イベントに対する画像を受信すると、クライアントアプリケーション112またはメディアビューア116は、イベントに基づいて、画像をアルバムに分割し得る。したがって、ユーザは、異なるイベントに対するアルバムを閲覧し得る。
別の実施形態では、識別されたイベントグループ内の画像の各々は、メタデータ情報でタグ付けされ得る。例えば、識別されたイベントグループに関連付けられた画像の集合体の受信に応じて、全ての画像が、適切にタグ付けされるわけではない。ユーザは、イベントグループ内の画像の各々に関してタグ情報を定義することを選び得る。そのようなタグ情報は、イベントの名称または場所あるいはイベントに出席した個人に関連し得る。タグ情報の定義に応じて、イベントグループを伴う画像の各々は、タグ情報でタグ付けされるであろう。
(コンピュータシステム実装例)
図1−4に示される本開示の側面、あるいはそれらの任意の部分または機能は、ハードウェア、ソフトウェアモジュール、ファームウェア、その上に記憶された命令を有する有形コンピュータ読み取り可能な媒体、またはそれらの組み合わせを使用して実装され得、1つ以上のコンピュータシステムまたは他の処理システムで実装され得る。
図5は、本開示の実施形態またはそれらの複数部分が、コンピュータ読み取り可能なコードとして実装され得る、コンピュータシステム例500を図示する。例えば、図1のサーバ102およびクライアントデバイス110は、ハードウェア、ソフトウェアモジュール、ファームウェア、その上に記憶された命令を有する有形コンピュータ読み取り可能な媒体、またはそれらの組み合わせを使用して、コンピュータシステム500で実装されることができ、1つ以上のコンピュータシステムまたは他の処理システムで実装され得る。ハードウェア、ソフトウェア、またはそのようなものの任意の組み合わせは、図1−4のモジュールおよび構成要素のうちのいずれかを具現化し得る。
プログラム可能な論理が使用される場合、そのような論理は、市販の処理プラットフォームまたは特殊用途デバイス上で実行し得る。当業者であれば、開示された主題の実施形態は、マルチコアマルチプロセッサシステム、ミニコンピュータ、メインフレームコンピュータ、分散機能とリンクまたはクラスタ化されたコンピュータ、ならびに事実上あらゆるデバイスに組み込まれ得る普及型または小型コンピュータを含む、種々のコンピュータシステム構成を用いて実践できることを理解し得る。
例えば、少なくとも1つのプロセッサデバイスおよびメモリが、上記の実施形態を実装するために使用され得る。プロセッサデバイスは、単一のプロセッサ、複数のプロセッサ、またはそれらの組み合わせであり得る。プロセッサデバイスは、1つ以上のプロセッサ「コア」を有し得る。
本開示の種々の実施形態は、このコンピュータシステム例500に関して説明される。この説明を読んだ後に、他のコンピュータシステムおよび/またはコンピュータアーキテクチャを使用して、どのようにして本開示の実施形態を実装するかが、当業者に明白となるであろう。動作は、逐次過程として説明され得るが、動作のうちのいくつかは実際には、単一またはマルチプロセッサマシンによるアクセスのためにローカルまたは遠隔に記憶されたプログラムコードを用いて、並行して、同時に、および/または分散環境で行われ得る。加えて、いくつかの実施形態では、動作の順序は、開示された主題の精神から逸脱することなく再編成され得る。
プロセッサデバイス504は、専用または汎用プロセッサデバイスであり得る。当業者によって理解されるように、プロセッサデバイス504はまた、単独で動作するシステム等のマルチコア/マルチプロセッサシステムの中、あるいはクラスタまたはサーバファームの中で動作するコンピュータデバイス群の中の単一のプロセッサであり得る。プロセッサデバイス504は、通信インフラストラクチャ506、例えば、バス、メッセージ待ち行列、ネットワーク、またはマルチコアメッセージパッシングスキームに接続される。
コンピュータシステム500はまた、例えば、ランダムアクセスメモリ(RAM)等のメインメモリ508を含み得、また、二次メモリ510を含み得る。二次メモリ510は、例えば、ハードディスクドライブ512、取り外し可能な記憶ドライブ514を含み得る。取り外し可能な記憶ドライブ514は、フロッピー(登録商標)ディスクドライブ、磁気テープドライブ、光ディスクドライブ、フラッシュメモリ、または同等物を備え得る。取り外し可能な記憶ドライブ514は、周知の方式で取り外し可能な記憶ユニット518から読み取り、および/またはそこに書き込む。取り外し可能な記憶ユニット518は、取り外し可能な記憶ドライブ514によって読み取られ、それに書き込まれる、フロッピー(登録商標)ディスク、磁気テープ、光ディスク等を備え得る。この説明で挙げられる関連技術の当業者によって理解されるように、取り外し可能な記憶ユニット518は、その中にコンピュータソフトウェアおよび/またはデータを記憶している、コンピュータ利用可能な記憶媒体を含む。
代替実装では、二次メモリ510は、コンピュータプログラムまたは他の命令がコンピュータシステム500にロードされることを可能にするための他の同様の手段を含み得る。そのような手段は、例えば、取り外し可能な記憶ユニット522およびインターフェース520を含み得る。そのような手段の実施例は、(ビデオゲームデバイスで見られるもの等の)プログラムカートリッジおよびカートリッジインターフェースと、(EPROMまたはPROM等の)取り外し可能なメモリチップおよび関連ソケットと、他の取り外し可能な記憶ユニット522と、ソフトウェアおよびデータが取り外し可能な記憶ユニット522からコンピュータシステム500へ転送されることを可能にするインターフェース520とを含み得る。
コンピュータシステム500はまた、通信インターフェース524を含み得る。通信インターフェース524は、ソフトウェアおよびデータがコンピュータシステム500と外部デバイスとの間で転送されることを可能にする。通信インターフェース524は、モデム、(イーサネット(登録商標)カード等の)ネットワークインターフェース、通信ポート、PCMCIAスロットおよびカード、または同等物を含み得る。通信インターフェース524を介して転送されるソフトウェアおよびデータは、電子、電磁、光、または通信インターフェース524によって受信されることが可能な他の信号であり得る、信号の形態であり得る。これらの信号は、通信経路526を介して、通信インターフェース524に提供され得る。通信経路526は、信号を運び、ワイヤまたはケーブル、光ファイバ、電話回線、携帯電話リンク、RFリンク、または他の通信チャネルを使用して実装され得る。
この文書では、「コンピュータプログラム媒体」および「コンピュータ使用可能な媒体」という用語は、概して、取り外し可能な記憶ユニット518、取り外し可能な記憶ユニット522、およびハードディスクドライブ512にインストールされたハードディスク等の媒体を指すために使用される。コンピュータプログラム媒体およびコンピュータ使用可能な媒体はまた、メモリ半導体(例えば、DRAM等)であり得る、メインメモリ508および二次メモリ510等のメモリを指し得る。
コンピュータプログラム(コンピュータ制御論理とも呼ばれる)は、メインメモリ508および/または二次メモリ510の中に記憶される。コンピュータプログラムはまた、通信インターフェース524を介して受信され得る。そのようなコンピュータプログラムは、実行されると、コンピュータシステム500が、本明細書で論議されるように本開示を実装することを可能にする。具体的には、コンピュータプログラムは、実行されると、プロセッサデバイス504が、上記で論議される、図4の流れ図400によって図示される方法における段階等の本開示の過程を実装することを可能にする。したがって、そのようなコンピュータプログラムは、コンピュータシステム500のコントローラを表す。本開示の実施形態がソフトウェアを使用して実装される場合、ソフトウェアは、コンピュータプログラム製品の中に記憶され、取り外し可能な記憶ドライブ514、インターフェース520、ハードディスクドライブ512、または通信インターフェース524を使用してコンピュータシステム500にロードされ得る。
本開示の実施形態はまた、任意のコンピュータ使用可能な媒体上に記憶されたソフトウェアを備えている、コンピュータプログラム製品を対象とし得る。そのようなソフトウェアは、1つ以上のデータ処理デバイスにおいて実行されると、データ処理デバイスを本明細書で説明されるように動作させる。本開示の実施形態は、任意のコンピュータ使用可能または読み取り可能な媒体を採用する。コンピュータ使用可能な媒体の実施例は、一次記憶デバイス(例えば、任意の種類のランダムアクセスメモリ)、二次記憶デバイス(例えば、ハードドライブ、フロッピー(登録商標)ディスク、CD ROM、ZIPディスク、テープ、磁気記憶デバイス、および光学記憶デバイス、MEMS、ナノ技術記憶デバイス等)、および通信媒体(例えば、有線および無線通信ネットワーク、ローカルエリアネットワーク、広域ネットワーク、イントラネット等)を含むが、それらに限定されない。
(結論)
概要および要約の項は、発明者によって検討されるような本開示の例示的実施形態の全てではないが1つ以上を説明し得、したがって、決して本開示および添付の請求項を限定することを目的としていない。本開示は、特定機能の実装およびそれらの関係を図示する機能的構成要素を用いて、上記で説明されている。これらの機能的構成要素の境界は、説明の便宜上、本明細書では恣意的に画定されている。特定機能およびそれらの関係が適切に果たされる限り、代替的な境界を画定することができる。
具体的実施形態の先述の説明は、本開示の一般概念から逸脱することなく、必要以上の実験を伴わずに、当技術分野内の知識を適用することによって、他者がそのような具体的実施形態を容易に修正し、および/または種々の用途のために適合させることができるという、本開示の一般的性質を十分に明らかにするであろう。したがって、そのような適合および修正は、本明細書で提示される教示および指導に基づいて、開示された実施形態の同等物の意味および範囲内であることを目的としている。本明細書の用語または表現が、教示および指導を踏まえて当業者によって解釈されるものであるように、本明細書の表現または用語は、限定ではなく説明の目的のためであることを理解されたい。
本開示の幅および範囲は、上記の例示的実施形態のうちのいずれによっても限定されるべきではないが、以下の請求項およびそれらの同等物のみに従って定義されるべきである。

Claims (24)

  1. コンピュータ実装方法であって、
    クライアントデバイスから、1つ以上のパーソナル識別データタグを提供することであって、前記パーソナル識別データタグは、1人以上の個人に対する識別情報に関連する、ことと、
    少なくとも1つのイベントグループを識別することであって、前記イベントグループは、イベントに関連付けられた画像の集合体であり、前記画像の集合体は、前記1つ以上のパーソナル識別データタグでタグ付けされた1つ以上の画像を含む、ことと、
    前記識別されたイベントグループの各々に対する前記画像の集合体を受信することと
    を含む、方法。
  2. 前記識別されたイベントグループに基づいて、前記画像の集合体をセグメント化することをさらに含む、請求項1に記載の方法。
  3. 少なくとも1つのイベントグループを識別することは、各イベントグループに関連付けられた顔識別リスト内の一致するパーソナル識別タグを決定することをさらに含み、前記顔識別リストは、複数の個人に対する複数のパーソナル識別タグを含む、請求項1に記載の方法。
  4. 各イベントグループに対する前記顔識別リストは、前記画像の集合体内の1つ以上の顔の顔検出および認識に基づいて書き込まれる、請求項3に記載の方法。
  5. 前記パーソナル識別データタグは、個人の名前または名字のうちの1つである、請求項1に記載の方法。
  6. 前記クライアントデバイスから、1つ以上のイベント特有データタグを提供することをさらに含み、前記イベント特有データタグは、イベントの場所または時間に関連する、請求項1に記載の方法。
  7. 前記画像の集合体を受信することは、
    前記識別されたイベントグループの通知を受信することと、
    アクセスリンクを受信することであって、前記アクセスリンクは、前記画像の集合体へのアクセスを提供する、ことと
    をさらに含む、請求項1に記載の方法。
  8. 前記識別されたイベントグループ内の各画像を前記イベントに関連するメタデータ情報でタグ付けすることをさらに含む、請求項1に記載の方法。
  9. 1つ以上のプロセッサと、命令を記憶しているメモリとを備えているシステムであって、前記命令は、前記1つ以上のプロセッサによって実行されると、
    1つ以上のパーソナル識別データタグを提供することであって、前記パーソナル識別データタグは、1人以上の個人に対する識別情報に関連する、ことと、
    少なくとも1つのイベントグループを識別することであって、前記イベントグループは、イベントに関連付けられた画像の集合体であり、前記画像の集合体は、前記1つ以上のパーソナル識別データタグでタグ付けされた1つ以上の画像を含む、ことと、
    前記識別されたイベントグループの各々に対する前記画像の集合体を受信することと
    を含む動作を前記1つ以上のプロセッサに行わせるように動作可能である、システム。
  10. 前記動作は、前記識別されたイベントグループに基づいて、前記画像の集合体をセグメント化することをさらに含む、請求項9に記載のシステム。
  11. 前記動作は、各イベントグループに関連付けられた顔識別リスト内の一致するパーソナル識別タグを決定することをさらに含み、前記顔識別リストは、複数の個人に対する複数のパーソナル識別タグを含む、請求項9に記載のシステム。
  12. 各イベントグループに対する前記顔識別リストは、前記画像の集合体内の1つ以上の顔の顔検出および認識に基づいて書き込まれる、請求項11に記載のシステム。
  13. 前記パーソナル識別データタグは、個人の名前または名字のうちの1つである、請求項9に記載のシステム。
  14. 前記動作は、1つ以上のイベント特有データタグを提供することをさらに含み、前記地理位置情報データタグは、イベントの場所または時間に関連する、請求項9に記載のシステム。
  15. 前記動作は、
    前記識別されたイベントグループの通知を受信することと、
    アクセスリンクを受信することであって、前記アクセスリンクは、前記画像の集合体へのアクセスを提供する、ことと
    をさらに含む、請求項9に記載のシステム。
  16. 前記動作は、前記識別されたイベントグループ内の各画像を前記イベントに関連するメタデータ情報でタグ付けすることをさらに含む、請求項9に記載のシステム。
  17. 1つ以上のコンピュータによって実行可能な命令を含むソフトウェアを格納している非一過性コンピュータ読み取り可能な媒体であって、前記命令は、実行に応じて、
    1つ以上のパーソナル識別データタグを提供することであって、前記パーソナル識別データタグは、1人以上の個人に対する識別情報に関連する、ことと、
    少なくとも1つのイベントグループを識別することであって、前記イベントグループは、イベントに関連付けられた画像の集合体であり、前記画像の集合体は、前記1つ以上のパーソナル識別データタグでタグ付けされた1つ以上の画像を含む、ことと、
    前記識別されたイベントグループの各々に対する前記画像の集合体を受信することと
    を含む動作を1つ以上のコンピュータに行わせる、非一過性コンピュータ読み取り可能な媒体。
  18. 前記命令は、前記識別されたイベントグループに基づいて、前記画像の集合体をセグメント化することを前記1つ以上のコンピュータにさらに行わせる、請求項17に記載の非一過性コンピュータ読み取り可能な記憶媒体。
  19. 前記命令は、各イベントグループに関連付けられた顔識別リスト内の一致するパーソナル識別タグを決定することを前記1つ以上のコンピュータにさらに行わせ、前記顔識別リストは、複数の個人に対する複数のパーソナル識別タグを含む、請求項17に記載の非一過性コンピュータ読み取り可能な記憶媒体。
  20. 各イベントグループに対する前記顔識別リストは、前記画像の集合体内の1つ以上の顔の顔検出および認識に基づいて書き込まれる、請求項19に記載の非一過性コンピュータ読み取り可能な記憶媒体。
  21. 前記パーソナル識別データタグは、個人の名前または名字のうちの1つである、請求項17に記載の非一過性コンピュータ読み取り可能な記憶媒体。
  22. 前記命令は、1つ以上のイベント特有データタグを提供することを前記1つ以上のコンピュータにさらに行わせ、前記地理位置情報データタグは、イベントの場所に関連する、請求項17に記載の非一過性コンピュータ読み取り可能な記憶媒体。
  23. 前記命令は、
    前記識別されたイベントグループの通知を受信することと、
    アクセスリンクを受信することであって、前記アクセスリンクは、前記画像の集合体へのアクセスを提供する、ことと
    を前記1つ以上のコンピュータにさらに行わせる、請求項17に記載の非一過性コンピュータ読み取り可能な記憶媒体。
  24. 前記命令は、前記識別されたイベントグループ内の各画像を前記イベントに関連するメタデータ情報でタグ付けすることを前記1つ以上のコンピュータにさらに行わせる、請求項17に記載の非一過性コンピュータ読み取り可能な記憶媒体。
JP2017003211A 2012-06-25 2017-01-12 出席者によるイベントの検索 Pending JP2017062859A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/532,468 US9665773B2 (en) 2012-06-25 2012-06-25 Searching for events by attendants
US13/532,468 2012-06-25

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2015518644A Division JP6396897B2 (ja) 2012-06-25 2013-06-25 出席者によるイベントの検索

Publications (1)

Publication Number Publication Date
JP2017062859A true JP2017062859A (ja) 2017-03-30

Family

ID=48747789

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2015518644A Active JP6396897B2 (ja) 2012-06-25 2013-06-25 出席者によるイベントの検索
JP2017003211A Pending JP2017062859A (ja) 2012-06-25 2017-01-12 出席者によるイベントの検索

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2015518644A Active JP6396897B2 (ja) 2012-06-25 2013-06-25 出席者によるイベントの検索

Country Status (6)

Country Link
US (1) US9665773B2 (ja)
EP (1) EP2864906A4 (ja)
JP (2) JP6396897B2 (ja)
KR (2) KR101832680B1 (ja)
CN (1) CN104520848B (ja)
WO (1) WO2014004503A2 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9361626B2 (en) * 2012-10-16 2016-06-07 Google Inc. Social gathering-based group sharing
US9886173B2 (en) 2013-03-15 2018-02-06 Ambient Consulting, LLC Content presentation and augmentation system and method
US10365797B2 (en) * 2013-03-15 2019-07-30 Ambient Consulting, LLC Group membership content presentation and augmentation system and method
US9626365B2 (en) 2013-03-15 2017-04-18 Ambient Consulting, LLC Content clustering system and method
WO2015017865A1 (en) 2013-08-02 2015-02-05 Shoto, Inc. Discovery and sharing of photos between devices
US11030708B2 (en) 2014-02-28 2021-06-08 Christine E. Akutagawa Method of and device for implementing contagious illness analysis and tracking
US9704205B2 (en) 2014-02-28 2017-07-11 Christine E. Akutagawa Device for implementing body fluid analysis and social networking event planning
CN108024142B (zh) * 2017-12-05 2020-10-30 深圳市茁壮网络股份有限公司 一种视频流检测方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0816615A (ja) * 1994-07-01 1996-01-19 Canon Inc 画像入力方法及び装置と画像検索方法及び装置
JP2010218371A (ja) * 2009-03-18 2010-09-30 Olympus Corp サーバシステム、端末装置、プログラム、情報記憶媒体及び画像検索方法
JP2011203768A (ja) * 2010-03-24 2011-10-13 Seiko Epson Corp 画像検索装置および方法、情報端末、情報処理方法、画像検索システム、並びにプログラム

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7415662B2 (en) * 2000-01-31 2008-08-19 Adobe Systems Incorporated Digital media management apparatus and methods
US6629104B1 (en) * 2000-11-22 2003-09-30 Eastman Kodak Company Method for adding personalized metadata to a collection of digital images
US6629100B2 (en) * 2001-10-01 2003-09-30 Ipac Acquisition Subsidiary I, Llc Network-based photosharing architecture for search and delivery of private images and metadata
US6954543B2 (en) * 2002-02-28 2005-10-11 Ipac Acquisition Subsidiary I, Llc Automated discovery, assignment, and submission of image metadata to a network-based photosharing service
US20040126038A1 (en) * 2002-12-31 2004-07-01 France Telecom Research And Development Llc Method and system for automated annotation and retrieval of remote digital content
US20050246324A1 (en) * 2004-04-30 2005-11-03 Nokia Inc. System and associated device, method, and computer program product for performing metadata-based searches
JP2005346440A (ja) * 2004-06-03 2005-12-15 Ntt Docomo Inc メタデータ付与支援システム、制御装置、及び、メタデータ付与支援方法
JP4547214B2 (ja) * 2004-09-10 2010-09-22 富士フイルム株式会社 電子アルバム表示システム、電子アルバム表示方法、及びプログラム
US8407201B2 (en) * 2005-02-15 2013-03-26 Hewlett-Packard Development Company, L.P. Digital image search and retrieval system
US20060259511A1 (en) * 2005-05-13 2006-11-16 Yahoo! Inc. Media object organization across information management services
US7756866B2 (en) * 2005-08-17 2010-07-13 Oracle International Corporation Method and apparatus for organizing digital images with embedded metadata
US20070098303A1 (en) * 2005-10-31 2007-05-03 Eastman Kodak Company Determining a particular person from a collection
US7945653B2 (en) * 2006-10-11 2011-05-17 Facebook, Inc. Tagging digital media
JP2007226555A (ja) * 2006-02-23 2007-09-06 Matsushita Electric Ind Co Ltd 無意識に撮影された画像の閲覧装置及び方法
US9430587B2 (en) * 2006-06-05 2016-08-30 Qualcomm Incorporated Techniques for managing media content
US8117210B2 (en) * 2006-10-06 2012-02-14 Eastman Kodak Company Sampling image records from a collection based on a change metric
US7979388B2 (en) * 2006-11-17 2011-07-12 Microsoft Corporation Deriving hierarchical organization from a set of tagged digital objects
US7900225B2 (en) * 2007-02-20 2011-03-01 Google, Inc. Association of ads with tagged audiovisual content
KR20080087591A (ko) * 2007-03-27 2008-10-01 삼성전자주식회사 메타 데이터 기반 카테고리를 이용한 컨텐츠 검색 방법 및장치와 기록 매체
US8732161B2 (en) * 2007-04-27 2014-05-20 The Regents Of The University Of California Event based organization and access of digital photos
US8189880B2 (en) 2007-05-29 2012-05-29 Microsoft Corporation Interactive photo annotation based on face clustering
US8261092B2 (en) * 2007-12-04 2012-09-04 Ricoh Company, Ltd. Image retrieval system and method
WO2009070841A1 (en) 2007-12-05 2009-06-11 It Au0801806Rsity Of Technology Social multimedia management
JP4433327B2 (ja) * 2007-12-11 2010-03-17 ソニー株式会社 情報処理装置および方法、並びにプログラム
KR101618735B1 (ko) * 2008-04-02 2016-05-09 구글 인코포레이티드 디지털 영상 컬렉션에 자동 얼굴 인식 기능을 통합하는 방법 및 장치
US20100082653A1 (en) * 2008-09-29 2010-04-01 Rahul Nair Event media search
US8171043B2 (en) * 2008-10-24 2012-05-01 Yahoo! Inc. Methods for improving the diversity of image search results
JP5525737B2 (ja) * 2009-03-18 2014-06-18 オリンパス株式会社 サーバシステム、端末装置、プログラム、情報記憶媒体及び画像検索方法
US8213725B2 (en) * 2009-03-20 2012-07-03 Eastman Kodak Company Semantic event detection using cross-domain knowledge
US8392957B2 (en) * 2009-05-01 2013-03-05 T-Mobile Usa, Inc. Automatic content tagging, such as tagging digital images via a wireless cellular network using metadata and facial recognition
US20110044563A1 (en) * 2009-08-24 2011-02-24 Blose Andrew C Processing geo-location information associated with digital image files
US20110099199A1 (en) * 2009-10-27 2011-04-28 Thijs Stalenhoef Method and System of Detecting Events in Image Collections
JP2011108190A (ja) * 2009-11-20 2011-06-02 Canon Inc 画像再生装置
US8559731B2 (en) * 2010-01-18 2013-10-15 International Business Machines Corporation Personalized tag ranking
US20110211737A1 (en) * 2010-03-01 2011-09-01 Microsoft Corporation Event Matching in Social Networks
US8611678B2 (en) * 2010-03-25 2013-12-17 Apple Inc. Grouping digital media items based on shared features
US8270684B2 (en) 2010-07-27 2012-09-18 Google Inc. Automatic media sharing via shutter click
US9183557B2 (en) 2010-08-26 2015-11-10 Microsoft Technology Licensing, Llc Advertising targeting based on image-derived metrics

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0816615A (ja) * 1994-07-01 1996-01-19 Canon Inc 画像入力方法及び装置と画像検索方法及び装置
JP2010218371A (ja) * 2009-03-18 2010-09-30 Olympus Corp サーバシステム、端末装置、プログラム、情報記憶媒体及び画像検索方法
JP2011203768A (ja) * 2010-03-24 2011-10-13 Seiko Epson Corp 画像検索装置および方法、情報端末、情報処理方法、画像検索システム、並びにプログラム

Also Published As

Publication number Publication date
WO2014004503A3 (en) 2014-04-24
WO2014004503A2 (en) 2014-01-03
JP2015520472A (ja) 2015-07-16
CN104520848A (zh) 2015-04-15
US20130343618A1 (en) 2013-12-26
KR20170020550A (ko) 2017-02-22
US9665773B2 (en) 2017-05-30
EP2864906A2 (en) 2015-04-29
CN104520848B (zh) 2018-01-23
KR20150015016A (ko) 2015-02-09
EP2864906A4 (en) 2016-04-27
KR101832680B1 (ko) 2018-02-26
JP6396897B2 (ja) 2018-09-26

Similar Documents

Publication Publication Date Title
US8634603B2 (en) Automatic media sharing via shutter click
JP6396897B2 (ja) 出席者によるイベントの検索
US20180365489A1 (en) Automatically organizing images
US9972113B2 (en) Computer-readable recording medium having stored therein album producing program, album producing method, and album producing device for generating an album using captured images
US9727565B2 (en) Photo and video search
US9349077B2 (en) Computer-implemented method, a computer program product and a computer system for image processing
US8611678B2 (en) Grouping digital media items based on shared features
US8380039B2 (en) Method for aligning different photo streams
WO2012064532A1 (en) Aligning and summarizing different photo streams
KR101782590B1 (ko) 이미지 분석기반의 관계형 태그생성 및 추천 방법
US20240037142A1 (en) Systems and methods for filtering of computer vision generated tags using natural language processing
US9081801B2 (en) Metadata supersets for matching images
KR101479260B1 (ko) 사진 기반 인물 친밀도 검색 방법
US10885619B2 (en) Context-based imagery selection
WO2015022689A1 (en) Media object selection
WO2016173278A1 (zh) 图像管理方法及装置
US20160078033A1 (en) Physical Visual ID as Means to Tie Disparate Media Collections

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170209

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170209

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180507

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20190111