JP5622584B2 - ユーザ・プロファイルのための、画像レコードの傾向の識別 - Google Patents

ユーザ・プロファイルのための、画像レコードの傾向の識別 Download PDF

Info

Publication number
JP5622584B2
JP5622584B2 JP2010537926A JP2010537926A JP5622584B2 JP 5622584 B2 JP5622584 B2 JP 5622584B2 JP 2010537926 A JP2010537926 A JP 2010537926A JP 2010537926 A JP2010537926 A JP 2010537926A JP 5622584 B2 JP5622584 B2 JP 5622584B2
Authority
JP
Japan
Prior art keywords
user
digital image
trend
interest
trends
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010537926A
Other languages
English (en)
Other versions
JP2011507094A5 (ja
JP2011507094A (ja
Inventor
エム ゴベイン,ケヴィン
エム ゴベイン,ケヴィン
エフ マッキンタイアー,デール
エフ マッキンタイアー,デール
ビー ポエットカー,ロバート
ビー ポエットカー,ロバート
リチャード ディロング,ケヴィン
リチャード ディロング,ケヴィン
スキャリス,アンソニー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Publication of JP2011507094A publication Critical patent/JP2011507094A/ja
Publication of JP2011507094A5 publication Critical patent/JP2011507094A5/ja
Application granted granted Critical
Publication of JP5622584B2 publication Critical patent/JP5622584B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/56Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54
    • H04H60/59Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54 of video
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0269Targeted advertisements based on user profile or attribute
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4667Processing of monitored end-user data, e.g. trend analysis based on the log file of viewer selections
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4826End-user interface for program selection using recommendation lists, e.g. of programs or channels sorted out according to their score
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H04H60/46Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for recognising users' preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H04H60/48Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for recognising items expressed in broadcast information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32106Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file
    • H04N1/32112Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title separate from the image data, e.g. in a different computer file in a separate computer file, document page or paper sheet, e.g. a fax cover sheet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32128Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title attached to the image data, e.g. file header, transmitted message header, information on the same page or in the same computer file as the image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3204Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium
    • H04N2201/3205Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a user, sender, addressee, machine or electronic recording medium of identification information, e.g. name or ID code
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3212Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a job, e.g. communication, capture or filing of an image
    • H04N2201/3214Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a job, e.g. communication, capture or filing of an image of a date
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3212Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a job, e.g. communication, capture or filing of an image
    • H04N2201/3215Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to a job, e.g. communication, capture or filing of an image of a time or duration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3252Image capture parameters, e.g. resolution, illumination conditions, orientation of the image capture device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3253Position information, e.g. geographical position at time of capture, GPS data

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Finance (AREA)
  • Databases & Information Systems (AREA)
  • Strategic Management (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Computer Interaction (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Description

本発明は一般に、ユーザに関連付けられたディジタル画像レコードからの情報を使用してユーザの関心を識別することに関する。
当該技術分野において周知のターゲット・マーケティングは、効果的に「事前スクリーニング」されている視聴者に対する特別の訴求を有し得る製品を小売業者が提示することを可能にする。すなわち、ターゲット・マーケティングは、特定の製品及びサービスにおいて高い関心レベルを有する可能性が高い「事前スクリーニングされた」消費者を識別することを目的とする。
「事前スクリーニングされた」消費者を識別する1つのやり方は、「ユーザ・プロファイル」の使用によって行われる。本明細書及び特許請求の範囲記載の「ユーザ・プロファイル」の句は、収集物の形態、又はそれが記憶されたやり方にかかわらず、関連付けられたユーザの関心を示す情報の収集物を表す。ユーザ・プロファイルは、特定の消費者と関連付けられ得、例えば、特定の消費者がハイキングを好むということを示し得る。よって、ユーザ・プロファイルは、ハイキング商品に関する来るセールに関する、特定の消費者向けの広告を生成するために、ターゲット・マーケティング担当者によって使用することができる。
ターゲット・マーケッティングの効果が、前述のユーザ・プロファイルにおいて確保された情報の品質及び数量に依存するということが認識される。よって、ユーザ・プロファイルを生成するための更なる手法又は改善された手法に対する必要性が現在、存在している。
本発明の種々の実施例による、ユーザ・プロファイルを生成するためのシステム及び方法により、上記課題が解決され、当該技術分野において技術的解決策が実現される。
本発明の実施例では、1つ又は複数の傾向が、少なくとも、ユーザに関連付けられた複数のディジタル画像レコードからの画像コンテンツの解析に基づいて識別される。ディジタル画像レコードからの画像コンテンツを解析し、特に、前述の画像コンテンツからの傾向を識別することにより、ユーザ・プロファイルに組み入れることができるユーザについての価値のある情報が提供される。画像コンテンツの解析は、例えば、シーン分類処理、顔検出処理、対象検出処理、オーディオ解析処理、画像からテキストを抽出する処理、又はイベント・クラスタリング処理(これらは全て当該技術分野において既知である)を含み得る。
傾向の一例は、イベントを捕捉したとみなされる複数のディジタル画像レコードに関する。例えば、複数のディジタル画像レコードの解析は、それらのうちのいくつかが特定の誕生日パーティーを捕捉したことを示し得る。この例では、傾向は、誕生日を捕捉したとみなされるいくつかの画像レコードに関する。傾向の他の例は、再生起イベント、同じ対象を捕捉しているか、又は同じ場所で取得されたとみなされる複数のディジタル画像レコードに関する。よって、本明細書及び特許請求の範囲記載の「傾向」は、複数のディジタル画像レコード間の共通性に関するということが分かり得る。さもなければ、本発明は、識別された傾向のタイプに限定されるものでない。
傾向を識別すると、複数のユーザ関心事を、少なくとも、傾向の解析に基づいて識別することができる。ユーザ関心事の例には、個人、活動、場所、又はそれらの組合せであり得る対象がある。ユーザに関連付けられたユーザ・プロファイルは、少なくとも、ユーザ関心事に基づいて生成することができる。ユーザ・プロファイルを生成する意味合いで本明細書及び特許請求の範囲に記載の「生成」の語は、新たなユーザ・プロファイルの生成、又は既存のユーザ・プロファイルの更新を含むことが意図されている。生成されたユーザ・プロファイルは、プロセッサ・アクセス可能なメモリ・システムに記憶することができる。
本発明の一部の実施例によれば、少なくとも、識別された傾向の解析に基づいて、ユーザ選好を識別することができる。この点で、ユーザ・プロファイルは更に、少なくとも、ユーザ選好に基づいて生成することができる。ユーザ選好は、関心事のうちの少なくとも2つを併せて関係付けることができる。例えば、ユーザのディジタル画像レコードの解析は、2つのユーザ関心事(すなわち、スキー、及び特定の個人)を表し得る。ディジタル画像レコードの解析は、スキー活動を捕捉したディジタル画像が特定の個人も捕捉したということを明らかにし得る。よって、特定の個人にスキーを関係付けるユーザ選好を識別することができる。これは、特定の個人とのスキーをユーザが好むという推論につながり得る。
本発明の一部の実施例によれば、少なくとも、傾向の解析に基づいてユーザ関心事の少なくとも一部について、関心レベルが生成される。この点で、ユーザ・プロファイルは更に、少なくとも、関心レベルに基づいて生成することができる。関心レベルの例は、特定のユーザ関心事又はユーザ関心事の群とユーザが有する親近性の量の表示である。よって、前述の関心レベルは、1つのユーザ関心事よりも別のものをユーザが好むということを判定するために使用することができる。
本発明の特定の実施例では、ユーザ関心事に関連した勧誘を、少なくとも、ユーザ・プロファイルの解析に基づいてユーザに向けて生成することができる。前述の勧誘は、プロセッサ・アクセス可能なメモリ・システムに記憶することができる。勧誘の例には、広告がある。詳述すれば、ユーザ関心事がビーチであるものとする。勧誘は、ユーザに向けて生成されたビーチウェアの広告であり得る。これは、ユーザ関心事(この場合、ビーチ)に関連している。
上記実施例に加えて、更なる実施例は、添付図面を参照することにより、かつ、以下の詳細な説明を検討することによって明らかになるであろう。
本発明の実施例による、ユーザ・プロファイルを生成するシステムを示す図である。 本発明の種々の実施例による、ユーザ・プロファイル生成の方法を示す図である。 本発明の一実施例におけるデータ構造として形成されたユーザ・プロファイルを示す概略図である。 本発明の実施例による、データ構造として形成された別のユーザ・プロファイルを示す概略図である。 本発明の種々の実施例による、傾向情報、ユーザ関心事、及びユーザ選好をどのようにしてディジタル画像レコードから得ることが可能であるかを示す概略図である。 傾向が基づく共通性のインスタンスの数が関心レベルの判定において考慮される実施例を示す図である。 傾向が基づく共通性のインスタンスの数が関心レベルの判定において考慮される実施例を示す図である。 傾向が基づく共通性のインスタンスの数が関心レベルの判定において考慮される実施例を示す図である。
本発明は、添付図面に関して検討される、以下に提示する例示的な実施例の詳細な説明から容易に理解されるであろう。
添付図面は、本発明の概念を例証する目的のためであり、一律の縮尺に従って描かれていないことがあり得る。
本発明の実施例では、1つ又は複数の傾向が、少なくとも、ユーザに関連付けられた複数のディジタル画像レコードからの画像コンテンツの解析に基づいて識別される。傾向はそれぞれ、複数のディジタル画像レコード間の共通性を表し、前述の共通性から推測又は導出される。ディジタル画像レコードからの画像コンテンツを解析し、特に、前述の画像コンテンツからの傾向を識別することにより、ユーザについての価値のある情報が提供される。よって、前述の情報は効果的には、後に、ターゲット・マーケティングに使用することができるユーザ・プロファイルに組み入れることができる。
本明細書及び特許請求の範囲記載の「ディジタル画像レコード」という句は、ディジタル静止画像及びディジタル・ビデオを含むことを意図している。更に、別途明示されていない限り、又は前後関係によって必要でない限り、「or」の語は、本明細書及び特許請求の範囲において、非排他的に使用される。更に、本明細書及び特許請求の範囲記載の機能は、「ソフトウェア」又は「ソフトウェア・プログラム」として実現することができる。しかし、前述のソフトウェアの同等の機能は、ハードウェアにおいて容易に実行することも可能であるということを当業者は認識するであろう。
図1は、本発明の実施例による、ユーザ・プロファイルを生成するシステム22を示す。システム22は、データ処理システム26と、周辺装置システム30と、ユーザ・インタフェース・システム28と、プロセッサ・アクセス可能なメモリ・システム24とを含む。プロセッサ・アクセス可能なメモリ・システム24、周辺装置システム30、及びユーザ・インタフェース・システム28は、通信するよう、データ処理システム26に接続される。データ処理システム26は、本明細書及び特許請求の範囲記載の図2の例示的な処理を含む、本発明の種々の実施例の処理を実現する1つ又は複数のデータ処理装置を含む。
「データ処理装置」又は「データ・プロセッサ」の句は、何れかのデータ処理装置(中央処理装置(「CPU」)、デスクトップ・コンピュータ、ラップトップ・コンピュータ、汎用コンピュータ、携帯情報端末、ブラックベリー(商標)、ディジタル・カメラ、携帯電話機、又は、電気構成部分、機械構成部分、光構成部分、生体構成部分等で実現されるか否かにかかわらず、データを処理し、管理し、若しくは扱うための何れかの他の装置)を含むことを意図している。
プロセッサ・アクセス可能なメモリ・システム24は、本明細書及び特許請求の範囲記載の図2の例示的な処理を含む、本発明の種々の実施例の処理を実行するために必要な情報を含む、情報を記憶するよう構成された1つ又は複数のプロセッサ・アクセス可能なメモリを含む。プロセッサ・アクセス可能なメモリ・システム24は、通信するよう、複数のコンピュータ及び/又は装置を介してデータ処理システム26に接続された複数のプロセッサ・アクセス可能なメモリを含む分散型プロセッサ・アクセス可能なメモリ・システムであり得る。一方、プロセッサ・アクセス可能なメモリ・システム24は、分散型プロセッサ・アクセス可能なメモリ・システムでなくてもよく、よって、単一のデータ・プロセッサ又は装置内に配置された1つ又は複数のプロセッサ・アクセス可能なメモリを含み得る。
「プロセッサ・アクセス可能なメモリ」の句は、限定列挙でないが、フロッピー・ディスク(登録商標)、ハード・ディスク、コンパクト・ディスク、DVD、フラッシュ・メモリ、ROMやRAMを含む、揮発性又は不揮発性、電気的、磁気的、光学的、又はその他の何れかのプロセッサ・アクセス可能なデータ記憶装置を含むことを意図している。
「通信するよう接続された」の句は、データを通信することができる装置、データ・プロセッサ、又はプログラム間での、有線又は無線の何れかのタイプの接続を含むことを意図している。更に、「通信するよう接続された」の句は、単一のデータ・プロセッサ内の装置又はプログラム間の接続、別々のデータ・プロセッサに配置された装置又はプログラム間の接続、及び、データ・プロセッサに全く配置されていない装置間の接続を含むことを意図している。この点で、プロセッサ・アクセス可能なメモリ・システム24はデータ処理システム26と別個に示すが、プロセッサ・アクセス可能なメモリ・システム24が、データ処理システム26内で完全に又は部分的に記憶することができるということを当業者は認識するであろう。更にこの点で、周辺装置システム30及びユーザ・インタフェース・システム28はデータ処理システム26と別個に示しており、前述のシステムのうちの一方又は両方をデータ処理システム26内に完全に、又は部分的に記憶することができるということを当業者は認識するであろう。
周辺装置システム30は、ディジタル画像レコードをデータ処理システム26に供給するよう構成された1つ又は複数の装置を含み得る。例えば、周辺装置システム30は、ディジタル・ビデオ・カメラ、携帯電話機、通常のディジタル・カメラ、又は他のコンピュータを含み得る。周辺装置システム30における装置からディジタル画像レコードを受信すると、データ処理システム26は、前述のディジタル画像レコードをプロセッサ・アクセス可能なメモリ・システム24に記憶することができる。
ユーザ・インタフェース・システム28は、データがデータ処理システム26に入力されるマウス、キーボード、別のコンピュータ、又は何れかの装置若しくは装置の組合せを含み得る。この点で、周辺装置システム30は、ユーザ・インタフェース・システム28と別個に示されているが、ユーザ・インタフェース28の一部として含まれ得る。
ユーザ・インタフェース・システム28は、表示システム、プロセッサ・アクセス可能なメモリ、表示装置、及びプロセッサ・アクセス可能なメモリ、又はデータ処理システム26により、データが出力される何れかの装置又は装置の組合せも含み得る。この点で、ユーザ・インタフェース・システム28がプロセッサ・アクセス可能なメモリを含む場合、ユーザ・インタフェース・システム28及びプロセッサ・アクセス可能なメモリ・システム24を図1に別個に示しているが、プロセッサ・アクセス可能なメモリ・システム24の一部であり得る。
プロセッサ・アクセス可能なメモリ・システム24内のディジタル画像レコード収集物に記憶された画像レコードは、可変メタデータ量に関連付け得る。前述の画像メタデータは、画像コンテンツについて得られた情報、及び画像が捕捉された条件に関する種々の意味論的情報及び構造的情報を含み得る。例証として、ディジタル画像レコードのメタデータは、画像捕捉の日時、捕捉の場所(例えば、全地球測位衛星(GPS)によって供給される)、カメラの所有者、カメラのタイプ、画像の分解能、画像の操作者又は観測者からのコメント、及び、例えば、画像の主題を識別する情報を含む画像コンテンツ自体から得られる種々のデータを含み得る。ディジタル画像レコードのメタデータとして得られ、記憶される意味論的情報は、対象認識又は顔認識を提供する種々のソフトウェア・アプリケーションなどの、当該技術分野において知られている画像解析ツールからのデータを含む、画像内の対象から得られる種々の情報を含み得る。ディジタル画像レコードの意味論的情報は、ビーチのシーン、雪のシーン、屋外シーン、屋内シーン、及び多くの他のタイプのシーンを判定するために使用される通常のシーンの分類子から得ることも可能である。同様に、マテリアル分類子は、岩、砂、金属、ガラス、木や多くの他のタイプのマテリアルなどのマテリアルの存在を分類するためのディジタル画像レコードの意味論的情報を生成する。
図2を参照すれば、本発明の種々の実施例による、ディジタル画像レコード収集物10からユーザ・プロファイル20を生成する方法の論理フロー図が表される。傾向識別工程12は、ディジタル画像レコード収集物10から1つ又は複数の傾向を識別するよう実行される。ユーザ関心事は工程14で、少なくとも、工程12で識別された傾向の解析に基づいて識別される。任意的には、工程14で、ユーザ関心事に加えて、関心レベルを、少なくとも、工程12で識別された傾向の解析に基づいて生成することができる。関心レベルは、ユーザ関心事についてユーザが有する親近性のレベルを示し得る。任意の工程15では、ユーザ選好が、少なくとも、工程12で識別された傾向の解析に基づいて生成することができる。ユーザ選好は工程14で生成されるユーザ関心事を関係付ける。例えば、ユーザが第1のユーザ関心事に参加すると、第2のユーザ関心事における参加も好むということをユーザ選好は示し得る。工程16では、工程12、14及び15においてユーザについて得られた情報をカプセル化するユーザ・プロファイル20を生成することができる。ユーザ・プロファイル20は、プロセッサ・アクセス可能なメモリ・システム24に記憶することができる。必須でないが、ユーザ・プロファイル20における情報は、商品又はサービスをユーザが購入するために、広告などの適切な勧誘を行うために、後に使用することができる。
ユーザ・ディジタル画像レコード収集物10は、静止画像又はビデオ画像であり得る複数のディジタル画像レコードであり得る。前述のディジタル画像レコードは、各種ディジタル・カメラを使用して捕捉されていることがあり得るか、又は、通常の写真から走査され、ディジタル形式で記憶されていることがあり得る。ディジタル画像レコードが取得されたやり方に本発明が限定されないということを当業者は認識するであろう。ディジタル画像レコード収集物10におけるディジタル画像レコードは、日時スタンプ情報や、GPS位置、使用される捕捉装置のタイプ、画像捕捉状態、撮像状態等についての完全なデータに及ぶ付随メタデータを有し得る。
傾向識別工程12に関し、本明細書及び特許請求の範囲記載の語としての傾向を構成するものが何であるかを補足説明することが有益である。傾向は、少なくとも、複数のディジタル画像レコードからの画像コンテンツの解析に基づいて検出される、パターンなどの共通性を伴う。この点で、本明細書及び特許請求の範囲記載の「画像コンテンツ」の句は、ディジタル画像レコードに関連付けることができるメタデータや他のヘッダ又はテキスト情報に対して、ディジタル画像レコードに記録された放射又はオーディオの表現を表すことを意図している。共通性を検出するために使用される画像コンテンツの解析は、当該技術分野において知られている手法を使用して行うことができる。当該技術分野において知られている、シーン分類処理、顔検出処理、対象検出処理、オーディオ解析処理、画像コンテンツ自体においてオブジェクトとしてテキストを識別することができるテキスト抽出処理、又はイベント・クラスタ化処理を使用することができる。共通性は更に、メタデータ、又は、ディジタル画像レコードに関連付けられた他の情報の解析によって検出することができる。
傾向が導出される共通性は、イベント、対象、場所、時間又は他の要因に関し得、要因の組合せを有し得る。この点で、傾向の一タイプは、イベントベースの共通性から導き出される。例えば、イベントベースの共通性は、同じイベントを捕捉したとみなされる複数のディジタル画像レコードとして識別することができる。前述の共通性から、傾向を導き出すことができる。例えば、傾向を導き出すために、ヨーロッパへの旅行中に捕捉されたディジタル画像レコードを使用することができる。同じイベント(すなわち、ヨーロッパへの旅行)中に全て獲得された共通性を表すからである。前述の傾向は、例えば、ヨーロッパへの旅行をユーザ関心事として識別するために工程14で使用することができる。他のイベントの例には、休日、誕生日パーティー等、及び活動(ハイキング、ランニング、乗馬、ゴルフ等など)を含む。よって、本発明がイベント・タイプに限定されないということを当業者は認識するであろう。
少なくとも、画像コンテンツの解析に基づいてイベントの識別を、当該技術分野において知られた手法を使用して行うことができる。イベント検出手法は、例えば、本願の出願人に譲渡された、「Method for Automatically Classifying Images into Events」と題するLouiらによる米国特許6606411号明細書に開示されている。イベント・クラスタリング手法は例えば、本願の出願人に譲渡された、Louiらによる米国特許6606411号明細書に開示されている。
別のタイプの傾向は、対象ベースの共通性から導き出される。例えば、対象ベースの共通性を、当該技術分野において知られている対象認識解析を使用して、同じ個人、同じペット、同じ家、同じ服等を捕捉する複数の画像レコードとして識別することができる。この点で、本発明が、何れかの特定の種類の対象に限定されないということを、当業者は、認識するであろう。更に、本明細書及び特許請求の範囲記載の「対象」の語は、複数の部分を含み得る。例えば、車は、エンジン、タイヤ等などの多くの部分を含む対象である。人間の群は、数名の個人を含む対象である。よって、「対象」の語が、分離可能でない単一の対象に限定されず、代わりに、複数の部分を含む複雑な対象を含み得るということを当業者は認識するであろう。この点で、例えば、車、及び人々の群はそれぞれ、「対象」とみなし得る。
例えば、複数の画像レコードが、同じ個人を捕捉したとみなされる、対象ベースの共通性から導き出された傾向の場合、同じ個人を示す対応するユーザ関心事を工程14で生成することができる。複数の画像レコードは、顔検出又は顔認識手法などの通常の手法を使用することによって同じ個人を捕捉したとみなし得る。顔検出アルゴリズムは、周知であり、例えば、「Face Detection in Digital Images」と題する、Hoらによる米国特許7218759号明細書、及び「Method for Locating Faces in Digital Color Images」と題する、Chenらによる米国特許7110575号明細書に開示されている。顔認識アルゴリズムも当該技術分野において知られており、次いで、検出された1つ又は複数の顔に対して識別情報を割り当てるために、識別された顔ディジタル画像レコードを解析する。
「Pose− Invariant Face Recognition System and Process」と題する、Huangらによる米国特許7142697号明細書には、ディジタル画像レコードにおける顔を認識するための、ニューラル・ネットワークを訓練するためのツールとしてモデル・ディジタル画像レコードの使用が開示されている。
更に別のタイプの傾向は、位置ベースの共通性から導き出される。例えば、位置ベースの共通性は、同じ位置を捕捉したとみなされる複数のディジタル画像レコードとして識別することができる。例えば、ディジタル画像レコード収集物上で行われる通常の対象認識解析が、同じ位置又は同じ位置タイプでの画像撮像のパターンを示す場合に傾向を検出することができる。例えば、ユーザに関連付けられたディジタル画像レコード収集物は、識別されるエッフェル塔によって識別されるような、フランス・パリで撮影された写真の群を有し得る。ディジタル画像レコード収集物は、更に、別々の位置において撮影されたピクチャを有し得るが、しかし、前述の位置は全て、同じタイプのものとみなされる、例えば、前述の位置は全て、識別された砂及び海によって認識されるようなビーチとみなされ得る。
更に別のタイプの傾向は、時間ベースの共通性から導き出される。例えば、時間ベースの共通性は、例えば、時間スパン若しくは再生起する時間スパン内で連続して、又は実質的に連続して捕捉されたとみなされる複数のディジタル画像レコードとして識別することができる。例えば、時間ベースの共通性は、第1のディジタル画像レコード群がカボチャの画像を含むということを明らかにする画像コンテンツの解析から識別することができる。ディジタル画像レコードの第1の群はカボチャ画像を含むので、前述のディジタル画像レコード群が、9月又は10月に実質的に連続して捕捉されているということが推論され得る。前述の例を続けるために、第2のディジタル画像レコードの群は更に、カボチャ画像を有するものとする。しかし、ディジタル画像の第1の群は、特定のシャツを着た特定の個人の画像を含み、ディジタル画像の第2の群は、異なるシャツを着た特定の個人の画像を含む。よって、場合によっては、同じ年の間の、又は別々の年の間の、再生起する時間スパン(例えば、9月又は10月の別々の日)内に、ディジタル画像レコードの第1の群及び第2の群が捕捉されたということを推論することができる。前述の時間ベースの共通性から導き出される傾向の場合(例えば、複数の画像レコードが、9月中又は10月中に連続して、又は実質的に連続して捕捉されているとみなされている場合)、前述の時期におけるユーザの関心を示す対応するユーザ関心事を工程14で生成することができる。
傾向は、前述のイベント、対象、位置、時間等などの共通性要因の組合せから導き出すこともできる。例えば、傾向は、再生起するイベントを捕捉したとみなされる複数のディジタル画像レコードに関係し得る。ここで、再生起は、イベントベースの共通性要因と組み合わせた時間ベースの共通性要因である。例えば、複数のディジタル画像レコードの組の解析は、ユーザが、ビーチでの家族休暇を複数回、とったということを表し得る。すなわち、ビーチでの家族休暇(イベント)は、再生起している(時間)。前述の傾向は、工程14で、「ビーチでの家族休暇」におけるユーザ関心事の生成をもたらし得る。共通性要因の組合せに関する傾向の別の例は、特定の個人(対象)及び誕生パーティー(イベント)を捕捉したとみなされる複数のディジタル画像レコードに基づく。前述の傾向は、工程14で、「特定の個人との誕生日パーティー」におけるユーザ関心事の生成をもたらし得る。
本発明の特定の実施例では、傾向を識別するために、最小量の共通性が必要になり得る。すなわち、工程12で傾向が識別される前に、共通性閾値を満たす必要があり得る。必要でないが、共通性閾値の使用は、工程12で、意味ある強い傾向の識別を容易にする。例えば、前述の共通性閾値は、傾向が識別される前に、少なくともX個のディジタル画像レコードのうちから共通性を検出しなければならないということを示し得る。ここで、Xは所定の整数である。Xが5であり、収集物10における4つのディジタル画像レコードのみが、ヨットの画像(例えば、対象ベースの共通性)を含むとみなされる場合、前述の対象ベースの共通性に基づいて、工程12で、傾向が識別されないものである。しかし、収集物10における10個のディジタル画像レコードが、ビーチ(例えば、位置ベースの共通性)で捕捉されていると見なされた場合、傾向は、前述の位置ベースの共通性に基づいて、工程12で識別される。
上記例は、傾向を識別するためにディジタル画像レコードの画像コンテンツを解析することに関するが、何れかの他の適切な情報を、前述の解析を補助するために使用することができるということを当業者は認識するであろう。例えば、ディジタル撮像分野における当業者によく知られているように、一層増加する量のメタデータが、現在のディジタル・カメラから得られたディジタル画像レコードによって利用可能にされる。例えば、ディジタル・カメラから現在、得られるディジタル画像レコードは多くの場合、カメラによって得られるGPSデータからなどの、画像捕捉の日付、時刻及び位置を表す付随メタデータを有する。前述の情報は、画像が得られた状態、及びカメラマンの識別情報も含み、画像コンテンツ自体についての種々のデータも有し得る。ディジタル画像レコードに付随し得る標準情報データ・フィールド又は「タグ」は例えば、電子情報技術産業協会(JEIDA)CP−3451によるEXchangeable Image File又はEXIF標準v2.1とも呼ばれるディジタル・スチルカメラ画像ファイル形式標準において規定されている。
前述のメタデータは、図2中で、工程12において行われる傾向識別の信頼度又は精度(及び、工程14又は15で生成されるユーザ関心事又はユーザ選好の信頼度又は精度)を向上させるために使用することができる。例えば、ディジタル画像レコード群におけるディジタル画像レコードそれぞれが、カボチャの画像を含み、それにより、対象ベースの共通性傾向が示されるということを対象検出解析が明らかにするものとする。前述の対象ベースの共通性傾向は、ユーザがカボチャに関心があるかを判定するために工程14において使用することができる。しかし、カボチャを捕捉したディジタル画像レコードの群に関連付けられたメタデータは更に、それが、複数の年にわたり、10月の第1週に捕捉されており、それにより、時間ベースの共通性傾向を示し得る。よって、対象ベースの共通性傾向を識別するに過ぎない代わりに、メタデータは、より特定の対象及び時間ベースの共通性傾向を識別するために使用することができる。前述の組み合わせた共通性ベースの傾向は、「10月の第1の週のカボチャ」などの、カボチャ以外のより具体的なユーザ関心事を判定するために工程14で使用することができる。前述のユーザ関心事は、工程16におけるユーザ・プロファイル20に追加し、次いで、その後、ユーザによる、10月の第1の週の特定の農場でのカボチャ狩りへの勧誘を生成するために使用することが可能である。
メタデータは、工程12で使用される上記画像コンテンツ・ベースの解析に加えて使用することができる補助情報の一例に過ぎない一方、収集物10におけるディジタル画像レコード内の傾向の識別を支援するために、何れかの他の補助情報を使用することができるということを当業者は認識するであろう。
工程14で識別されるユーザ関心事は、工程12で識別された傾向に関連付けられたいくつかの項目のうちの何れかであり得る。ユーザ関心事は、イベント、対象、位置、時間、又はそれらの組合せに関係し得る。この点、単純なケースでは、ユーザ関心事は、傾向が基にする共通性から導き出し得る。例えば、夏の花火を捕捉したとみなされたディジタル画像レコードの群から、傾向が工程12において識別されるものとする。ディジタル画像レコードの前述の群の共通性は、それが、夏(時間ベースの共通性)に、花火(イベントベースの共通性)を捕捉したということである。よって、単純なケースでは、ユーザ関心事は、「夏花火」と見なされ得る。前述のユーザ関心事は、工程16において、ユーザ・プロファイル20に含まれ得る。
しかし、ユーザ関心事は、前述の単純なケースに限定されず、傾向に関連付けられた共通性を超える推論又は外挿を含み得る。前述の推論又は外挿は、傾向に関連付けられた共通性を超える更なる情報に基づき得る。例えば、前述の更なる情報は、ユーザが米国に居住しているという点であるものとする。更に、夏の花火を捕捉したとみなされたディジタル画像レコードの群から、傾向が工程12において識別されるものとする。この場合、より具体的なユーザ関心事が、単なる「夏の花火」を超えて推論され得る。その代わりに、例えば、ユーザ関心事は、「7月4日の花火」として識別することができる。ユーザが米国に居住しているということが知られているからである。前述の例は、ユーザについての更なる情報(すなわち、ユーザが米国に居住しているという点)を使用しているが、工程12で識別された傾向に基づいてユーザ関心事のより良い推定を、何れかの他の情報を使用して生成することができるということを当業者は認識するであろう。
この点では、前述の更なる情報を、工程12で識別された他の傾向から導き出すことができる。すなわち、傾向と、ユーザ関心事との間の1:1の対応関係は存在していなくてよい。例えば、工程12は、(1)ハイキングを捕捉したとみなされるディジタル画像レコード、(2)国立公園を捕捉したとみなされるディジタル画像レコード、及び(3)釣りを捕捉したとみなされるディジタル画像レコードという3つの傾向を識別する。工程14では、「屋外活動」というユーザ関心事は、少なくとも、前述の3つの傾向に基づいて生成することができる。
よって、ユーザ関心事を判定することは、単に傾向共通性をユーザ関心事に割り当てるよりも複雑であり得る。例えば、ユーザAは、別々の髪の色又は形状のメトリックによって検出することが可能であるように、別々の犬の、期間にわたって撮影された数多くの写真を有し得る。一方、ユーザBは、同じ犬であるようにみえるものの、別々の時点で撮影された数多くの写真を有し得る。よって、ユーザAは、ユーザAが愛犬家であるか、又は犬のブリーダーである旨を示すユーザ関心事を有し得る。一方、ユーザBは、ユーザBが犬の所有者である旨を示すユーザ関心事を有し得る。特に、この差分は、単一の画像のコンテンツに対して行われる解析から容易に推論することが可能でないが、特定の期間にわたって撮影された複数のディジタル・コンテンツ・レコードからの傾向を判定することから、より正確に得られる。
図5の概略図は、ディジタル画像レコード収集物から、傾向をどのようにして得ることが可能であるかの単純な例示を表し、ユーザ関心事と傾向がどのように異なるかを示すことに助力する。前述の例では、ユーザのディジタル画像レコード収集物10において1Ia、1Ib、1Ic、及び1Idとそれぞれが付された4つのディジタル画像レコードが存在している。各ディジタル画像レコードは、図5中のタイム・スタンプ90によって示すように別々の時点で撮られる。これは、ディジタル画像レコードに関連したメタデータによって示すことができる。前述の例では、各ディジタル画像レコード1Ia−1id内で識別された対象は、各ディジタル画像レコード1Ia−1Idの上に列挙されている。前述の例から分かるように、ディジタル画像レコード収集物10からのディジタル画像レコード間の対象の共通性を使用して、図5中の点線で示す傾向を識別することが可能である。
上記傾向から、ユーザ関心事を工程14で判定することができる。よって、この例では、「バックパック」及び「テント」という単純なユーザ関心事を傾向92、93それぞれから識別することができる。あるいは、又は更に、傾向92及び93、並びに、「釣り具」、「クマ」や「ハイキング・コース」などの、ディジタル・コンテンツ・レコードにおいて識別される他の対象などの更なる情報に基づいて、「奥地のキャンピング」という、より複雑なユーザ関心事を識別することができる。対照的に、犬の所有権は、ユーザの関心事として推論されることはない。ディジタル画像レコード11aのみが、犬の画像を含み、よって、傾向が存在していないからである。船遊びというユーザ関心事を生成することができる。ディジタル画像レコード11a、11bそれぞれにより、傾向91において、ボートという対象、及びカヌーという対象が識別されているからである。しかし、本発明の一部の実施例では、ヨットというユーザ関心事は、「バックパック」、「テント」や「奥地のキャンピング」というユーザ関心事よりも低い相対レベルの関心を有し得る。その傾向が、4つのディジタル画像レコードのうちの2つにまたがり、その他のユーザ関心事それぞれが、4つのディジタル画像レコード全てにまたがる傾向92、93、又は92及び93両方を有するからである。
設計の選択に応じて、図5は、ユーザ選好も示し得る。例えば、「バックパック」及び「テント」という単純なユーザ関心事が生成される場合、ユーザ関心事の両方が、重なるディジタル画像レコードを含む傾向から導き出されているということを、更なる処理工程によって判定することができる。すなわち、前述のユーザ関心事は何れも、4つのディジタル画像レコード1Ia乃至1Id全てを含む傾向92、93から導き出されている。前述の重なりは、ユーザ関心事をともに関係付けるユーザ選好を生成するための基礎として使用することができる。この場合、ユーザが、テントを持ってどこかに出かける際に、バックパックも持って行くということをユーザ選好は示し得る。
船遊びというユーザ関心事が傾向91に基づいて識別された場合、船遊びというユーザ関心事を、バックパック及びテントというユーザ関心事と関係付けることによって生成することができる。バックパック傾向92及びテント傾向92、93は傾向91と同じディジタル画像レコード1Ia、iIbを含むからである。この選好は、ユーザが、船遊びの際に、バックパック及びテントを持って行くことを好むということを示し得る。しかし、船遊びというユーザ関心事を、釣り具というユーザ関心事と関係付けるユーザ選好は、生成されない。対応する傾向91、94が、重なるディジタル画像レコードを含まないからである。補足説明すれば、船遊びというユーザ関心事は、ディジタル画像レコード11a、11bに関係する傾向に基づく一方、釣り具というユーザ関心事は、ディジタル画像レコード11e,11dを伴う傾向に基づく。
工程14(図2)における傾向の解析は、ユーザ関心事を識別するのみならず、特定のユーザによって表される関心レベルを任意に判定するための情報の豊富なベースを提供する。よって、工程14においてユーザ関心事を判定することに加え、本発明の実施例は、ユーザ関心事に関連付けられた関心レベルを判定する。前述の関心レベルは、商品又はサービスを購入するための特定の勧誘にユーザが応答する可能性の表示として使用することができる。
この点で、工程14は、ユーザ関心事を判定するための、工程12で識別された傾向の解析のみならず、ユーザ関心事に対する関心レベルを判定するための、工程12で識別された傾向の解析も含み得る。例えば、収集物10からの比較的高い割合のディジタル画像レコードを伴う傾向から、ユーザ関心事が識別された場合、比較的高い関心レベルをそのユーザ関心事と関連付けることができる。補足説明すれば、ユーザ関心事がスポーツとして規定され、このユーザ関心事が、収集物10中の1000個のディジタル画像レコードのうちの800個のディジタル画像レコードを伴う傾向から識別されているものとする。すなわち、800個のディジタル画像レコードの画像コンテンツが、特定のやり方でスポーツと関連付けられるものとする。前述の傾向は、収集物10におけるディジタル画像レコードの80%に関係するので、スポーツのユーザ関心事における関心レベルが高いとみなし得る。一方、前述の傾向が、収集物10におけるディジタル画像レコードの1%に関係する場合、スポーツのユーザ関心事における関心レベルが低いとみなし得る。
収集物10中のディジタル画像レコードの割合を考慮することに加えて、又は上記考慮の代わりに、ユーザ関心事の関心レベルを評価するための別の要因は、ユーザ関心事が基づく傾向において関係するディジタル画像レコードの新近性であり得る。よって、より最近のディジタル画像レコードに関係する傾向により、より最近でないディジタル画像レコードに関係する対応する傾向を有するユーザ関心事よりも高い関心レベルが、対応するユーザ関心事に与えられ得る。
上記要因のうちの一方又は両方に加えて、又は上記要因のうちの一方又は両方の代わりに、対象共通性ベースの傾向の場合、関心レベルを判定するための別の要因は、通常の対象が、対応するユーザ関心事が識別される傾向に関係するディジタル画像レコードの主題であるか否かであり得る。主題を識別する手法は、例えば、本願の出願人に譲渡された、「Digital Image Processing System and Method for Emphasizing a Main Subject of an Image」と題する、Luoらによる米国特許第7212668号号明細書に開示されている。対象が、傾向に関係するディジタル画像レコードの主題である場合、対象が通常、ディジタル画像レコードの主題でない場合よりも、高い関心レベルを、対応するユーザ関心事と関係付けることができる。
上記要因の1つ又は複数に加えて、又は上記要因の1つ又は複数の代わりに、関心レベルを判定するための別の要因は、傾向に、少なくとも2つの共通性が関係する場合に考慮することができる。この場合、前述の他方の要因は、2つの共通性のうちの少なくとも一方の別々のインスタンスの数である。一部の実施例では、別々のインスタンスは、任意的には、少なくとも2つの共通性のうちの少なくとも別のものを表す少なくとも閾値数のディジタル画像レコードに関係するとみなされなければならない。図6は、特定の年における月(すなわち、時間ベースの共通性)、及び特定の個人(すなわち、対象ベースの共通性)という2つの共通性に傾向が関係している例を提供する。傾向に、(a)特定の1年の期間中に捕捉されたとみなされ、かつ、(b)特定の個人の画像を捕捉したとみなされる、収集物10からのディジタル画像レコードの部分集合が関係する。前述の例の目的で、前述の傾向が、工程14で、特定の個人のユーザ関心事を識別するために使用される。
表600は、この部分集合におけるディジタル画像レコードが、特定の年における個々の月(すなわち、インスタンス)にどのようにして分けられるかを表す。表600のY軸602は、特定の個人の画像を捕捉したとみなされる、収集物10におけるディジタル画像レコードの数を表す。表のX軸604は、特定の年における個々の月(すなわち、インスタンス)を表す。閾値606は、関心レベルの算出において考慮されるために、月(すなわち、インスタンス)に必要なディジタル画像レコードの最小数(この例では8)を示す。この場合、月(5月、7月、11月及び12月)は、関心レベルの算出において考慮されるために充分な数(すなわち、この例の場合、8個)の関連したディジタル画像レコードを有する。この点で、別々の12の月のうちの4ヶ月(すなわち、インスタンス)が、少なくとも、特定の個人の意味ある数(この例では、8個)の画像を有するとみなされる。前述の情報は、例えば、一月のみが、特定の個人の意味ある数の画像を有するとみなされた場合に識別することができる、特定の個人における、より高い関心レベル(すなわち、ユーザ関心事)を識別するために使用することができる。
図7は、特定の空間領域(すなわち、位置ベースの共通性)内の位置、及び車のショーのイベント(すなわち、イベントベースの共通性)内の位置という2つの共通性が傾向に関係する例を示す。特定の空間領域は、望み通りに、より狭く、又はより広く規定することが可能である。例えば、特定の空間領域は、地球又は宇宙として広く規定することが可能であるか、又は、国、州、町等として、より狭く規定することが可能である。図7の例では、傾向には、(a)特定の空間領域内の位置で捕捉されたとみなされ、(b)車のショーのイベントの画像を捕捉したとみなされた、収集物10からのディジタル画像レコードの部分集合が関係する。前述の例の目的で、前述の傾向が、工程14で、車のショーというユーザ関心事を識別するために使用されるものとする。
表700は、この部分集合におけるディジタル画像レコードが、特定の空間領域における位置(すなわち、インスタンス)にどのようにして分けられるかを表す。表700のY軸702は、車のショーのイベントの画像を捕捉したとみなされる、収集物10におけるディジタル画像レコードの数を表す。表のX軸704は、特定の空間領域における個々の位置(すなわち、インスタンス)を表す。閾値706は、関心レベルの算出において位置(すなわち、インスタンス)が考慮されるために必要な、ディジタル画像レコードの最小数(この例では、5)を示す。この場合、位置A及びDは、閾値706を満たす、関連付けられたいくつかのディジタル画像レコードを有する。この点で、別々の5つの位置のうちの2つの位置(すなわち、インスタンス)が、少なくとも、車のショーのイベントの意義ある数(この例では、5)を有する。前述の情報は、例えば、別々の10個の位置が、車のショーのイベントの意味ある数の画像を有するとみなされた場合に識別され得るよりも、車のショーにおいて、より低い関心レベル(すなわち、ユーザの対象関心度)を識別するために使用することができる。すなわち、別々のいくつかの位置において車のショーの画像を取得するユーザは、1つの位置のみに、又は、別々の少数の位置において車のショーの画像を有するユーザよりも高い関心レベルを車のショーにおいて有する可能性がより高いことがあり得る。
図8は、(a)ロック・スター及び(b)ユーザという2つの対象ベースの共通性が傾向に関係する例を示す。この点で、(a)ロック・スターの画像を捕捉したとみなされ、(b)ユーザの画像を捕捉したとみなされた、収集物10からのディジタル画像レコードの部分集合が、傾向には関係する。前述の例の目的で、前述の傾向が、工程14で、ロック音楽という個人のユーザ関心事を識別するために使用されるものとする。
表800は、この部分集合におけるディジタル画像レコードが、撮像されたとみなされた個々のロック・スター(すなわち、インスタンス)でどのようにして分けられるかを表す。表800のY軸802は、ユーザを撮像したとみなされる、収集物10におけるディジタル画像レコードの数を表す。表800のX軸804は、撮像されている個々のロック・スター(すなわち、インスタンス)を表す。閾値806は、関心レベルの算出において考慮されるために、ロック・スター(すなわち、インスタンス)」に必要なディジタル画像レコードの最小数(この例ではゼロ)を示す。この場合、閾値806がゼロであるので、撮像されたロック・スターは全て、関心レベルの算出において考慮に入れられる。ユーザ及びロック・スターを有する単一画像を有することにも意味があるということがあり得る。よって、別々の四人のロック・スターとユーザが撮像されているということの判定を使用して、例えば、ユーザがロック・スターと撮像されたことがない場合に識別することができるよりも高い、ロック音楽(すなわち、ユーザ関心事)における関心レベルを識別することができる。
よって、ユーザ関心事に対する関心レベルを判定するために、工程12で識別された傾向の解析の特定のタイプに本発明が限定されないということが上記例から分かる。
工程14で、ユーザ関心事を生成し、任意的に、関心レベルを生成した後、工程15は任意的には、ユーザ選好を生成するために本発明の特定の実施例によって行うことができる。本明細書及び特許請求の範囲記載の「ユーザ選好」という句は、少なくとも、工程12で識別された傾向の解析に基づいて、複数のユーザ関心事を関係付けることを表すことを意図している。例えば、スキーの活動を捕捉する複数のディジタル画像レコードの第1の組において、工程12で、第1の傾向が識別され、特定の個人を捕捉する複数のディジタル画像レコードの第2の組において、第2の傾向が識別されるものとする。更に、ディジタル画像レコードの第2の組が、第1のディジタル画像レコードの部分集合であるので、特定の個人を捕捉したディジタル画像レコードが、スキーの活動を捕捉したディジタル画像レコードでもあるものとする。この場合、第1の傾向は、第1のユーザ関心事としての「スキー」の識別をもたらし得、第2の傾向は、第2のユーザ関心事としての「特定の個人」の識別をもたらし得る。更に、この場合、選好を識別する工程は、前述の2つのユーザ関心事の重なりを認識するよう構成することができる。これらは、同じディジタル画像レコードの少なくとも一部において生起するからである。前述の認識された重なりは、ユーザが、特定の個人とスキーに行くということを示すユーザ選好の生成をもたらし得る。すなわち、前述のユーザ選好は、「スキー」というユーザ関心事を、「特定の個人」というユーザ関心事と関係付ける。よって、ユーザ選好の判定は、ユーザ関心事が生成された後の更なる処理レイヤとして生起し得る。
前述の例では、少なくとも、本発明の一実施例における2つの傾向の解析に基づいて、工程14で、「特定の個人とのスキー」というユーザ関心事が生成されていることがあり得るということが分かる。上記実施例では、「特定の個人」というユーザ関心事と、「スキー」というユーザ関心事を関係付けたユーザ選好を生成することは必要にならない。前述の2つの関心を組み合わせたユーザ関心事が工程14で既に生成されているからである。しかし、本発明の特定の実施例では、「特定の個人とのスキー」などの特定のユーザ関心事の生成は好ましくないことがあり得る。前述の実施例では、特定のユーザ関心事を生成する代わりに、単純なユーザ関心事を関係付けるユーザ選好を生成することが有用であり得る。よって、本発明は、ユーザ関心事及びユーザ選好が生成されるやり方に限定されず、それらが生成されるやり方は、設計上の選択に従う。
ユーザ関心事の生成後又は生成中、及び任意的には、関心レベル又はユーザ選好の生成後若しくは生成中、図2中の工程16におけるプロファイル生成を行うことができる。この工程では、特定のタイプのデータ構造を、ユーザ・プロファイル20、及びユーザ関心事及び選好によって埋められたそのデータ・フィールドとして形成することが可能である。
本明細書及び特許請求の範囲記載の「ユーザ・プロファイル」の句は、情報収集物の形態、又はそれが記憶されたやり方にかかわらず、関連付けられたユーザの関心を示す情報の収集物を表す。ユーザ・プロファイル20は、工程14で識別されたユーザ関心事又はユーザ選好のみならず、ユーザを特徴付ける何れかのデータからも生成することができる。この点で、通常であるか否かにかかわらず、ユーザ・プロファイル20は、ユーザについての何れかの他の情報ソースにより、補足又は精緻化することができる。更に、ユーザ・プロファイル20は実際に、本発明の方法からのものとは別の1つ又は複数の情報ソースによって元々生成されていることがあり、本発明の方法によって補足又は精緻化することができる。
例えば、ユーザ・プロファイルは、「Method and System for Generating and Using a Computer User’s Personal Interest Profile」と題する、Kawasakiによる米国特許6539375号に開示されたものなどの手法を使用して、先行する数ヶ月にわたり、ユーザが訪問したインターネット・サイトに基づいて維持することが可能である。本発明の実施例による方法を使用して生成されたユーザ・ディジタル画像レコードからの情報は、Kawasakiの375特許の手法を使用して得られたユーザ・プロファイルを補足又は精緻化するために使用することが可能である。あるいは、代替策として、Kawasakiの375特許の手法によって生成されたユーザ・ディジタル画像レコードからの情報は、本発明の実施例による手法を使用して得られたユーザ・プロファイルを補足又は精緻化するために使用することができる。
更に、ユーザ・プロファイル20は、非揮発性メモリに無期限で記憶することができ、又は必要に応じて動的に生成することができる。よって、本発明が、ユーザ・プロファイルの何れかの特定のユーザ・プロファイルの形式、又は何れかの特定の内容に限定されないということを当業者は認識するであろう。
しかし、本発明の特定の実施例において関心があり得るデータの特徴及びタイプの一部を示す特定の例示的なユーザ・プロファイルを考慮に入れることがなお有益である。図3は、ディジタル画像レコード収集物アカウントを有する特定の個人に対するユーザ名、識別番号、又は他の識別子を格納し得るユーザ識別フィールド22を含む例示的なユーザ・プロファイルを示す。ユーザの名前は、ユーザ・プロファイル20を使用する組織又はエンティティに知られていないことがあり得る。よって、ユーザ識別フィールド22の中に名前を入れないでおくことは、特定のレベルの個人プライバシ保護を可能にするので、ユーザ・プロファイル30は、アカウント・ユーザのプライバシを損なうことなく、広告主、又は関心を有する他のエンティティにアクセス可能であり得る。
フィールド24は、ユーザ識別フィールド22と関係付けられ、1つ又は複数のユーザ関心事上にデータを格納する。図3の例では、任意的なレーティング・フィールド25は、前述のように、関連付けられたユーザ関心事に対応する関心レベル・レーティングを格納し得る。
一実施例では、図3のユーザ・プロファイル20は、ユーザ関心事が予め定義されている固定データ・フィールドである。例えば、ユーザ・プロファイル20は、特定の関心の組についての情報を得ることを企図していることがあり得る。よって、ユーザ関心事#1は、スポーツ又はスポーツ・イベントにおけるユーザの明らかな関心に関係し得る。ユーザ関心事#2は、家族の関与又は関心のレベルに関係し得る。ユーザ関心事#3は、ユーザの明らかな、旅行の関心に関係し得る。この点で、図2中の工程14は、工程12で識別された傾向から、前述の予め規定されたユーザ関心事をサーチすることができ、見つかったユーザ関心事に対する適切な関心レベル・レーティングを割り当て得る。
上記例について続ければ、関心事#1に対する関心レベル・レーティングは、スポーツ商品、試合チケットや、他の品目に対する、可能性の高い関心レベルを示し得る。関心事#3に対するレーティングは、航空運賃の特別オファー又はクルーズのパッケージに対する、このユーザの、可能性の高い関心レベルを示し得る。一実施例では、図3のモデルは、広告主が探していることがあり得る関心に基づいて、全ユーザ・アカウントについて使用される。しかし、図3に示すユーザ関心事は、ユーザ間で固定しなくてよく、代わりに、少なくとも、工程12において、特定のユーザのディジタル画像レコード収集物から識別された傾向に基づいて特定のユーザについて特に生成することができる。
別の例示的なユーザ・プロファイル20は、図4の実施例において示す。ここでは、ユーザ選好情報はユーザの関心事24と関連付けられる。特に、ユーザ選好データ・フィールド27はそれぞれ、別のユーザ関心事に対するリンクを示し得る。例えば、ユ―ザ関心事#1に関連付けられたユーザ選好1Aはユーザ関心事#2に対するリンクを示し得る。この点で、ユーザ選好1Aは、ユーザが、ユーザ関心事#1を楽しむ際に、ユーザが、ユーザ関心事#2も楽しむということを示し得る。
例示的な実施例は本発明を例証しているに過ぎず、上記実施例の多くの変形は、本発明の範囲から逸脱しない限り、当該技術分野における当業者によって考え出すことが可能である。したがって、前述の変形が全て、特許請求の範囲及びその均等物の範囲内に含まれることが意図されている。
構成部分リスト
10 ディジタル画像レコード収集物
11a、11b、11c、11d ディジタル画像レコード
12 傾向識別工程
14 関心事識別工程
15 任意的なユーザ選好工程
16 ユーザ・プロファイル生成工程
20 ユーザ・プロファイル
22 識別フィールド
23 ユーザ関心事フィールド
24 プロセッサ・アクセス可能なメモリ・システム
25 レーティング・フィールド
26 データ処理システム
27 ユーザ選好フィールド
28 ユーザ・インタフェース・システム
30 周辺装置システム
90 タイム・スタンプ
91乃至94 傾向
600 表
602 Y軸
604 X軸
606 閾値
700 表
702 Y軸
704 X軸
706 閾値
800 表
802 Y軸
804 X軸
806 閾値

Claims (6)

  1. 少なくとも部分的にデータ処理システムによって実現される方法であって、前記方法は、ユーザ・プロファイルを生成し、
    特定のユーザに関連付けられた複数のディジタル画像レコードからの画像コンテンツの解析に基づいて1つ又は複数の傾向を識別する工程であって、各傾向が、複数のディジタル画像レコードの画像コンテンツにおける特徴及び属性の共通性を表している当該工程と、
    識別された各傾向に関し、前記ディジタル画像レコードに関連するイベントメタデータ又は位置メタデータの少なくとも一部に基づき、前記複数のディジタル画像レコードを複数の傾向グループ(群)に分ける工程と、
    少なくとも前記傾向グループの解析に基づいて、複数の前記特定のユーザ関心事を識別する工程と、
    前記特定のユーザの関心事のそれぞれに対する関心レベルを、閾値を超える複数のディジタル画像レコードを有する前記特定のユーザの関心事に関連する傾向グループを識別することによって決定する工程と、
    少なくとも前記特定のユーザ関心事及び関連する関心レベルに基づいて、前記特定のユーザプロファイルを生成する工程と、
    前記特定のユーザプロファイルを、プロセッサ・アクセス可能なメモリ・システムに記憶する工程と
    を含む方法。
  2. 請求項1記載の方法であって、少なくとも前記傾向グループの解析に基づいて前記特定のユーザ選好を識別する工程を更に含み、前記特定のユーザ選好は、前記特定のユーザ関心事のうちの少なくとも2つを関係付け、前記特定のユーザプロファイルは、少なくとも前記特定のユーザ選好に基づいて更に生成又は更新される方法。
  3. 請求項1記載の方法であって、前記特定のユーザ関心事の少なくとも1つは、少なくとも、前記識別された傾向グループのうちの少なくとも2つの解析に基づいて識別される方法。
  4. 請求項1記載の方法であって、前記複数のディジタル画像レコードを複数の傾向グループに分ける工程は、前記複数のディジタル画像レコードからの時間メタデータに基づいて前記複数のディジタル画像レコードを分ける方法。
  5. 請求項1記載の方法であって、1以上の傾向グループを識別することは、共通性閾値を満たす1以上の傾向を識別することを含む方法。
  6. 請求項記載の方法であって、前記共通性閾値を満たす1以上の傾向を識別することは、前記1以上の傾向のそれぞれに関連する複数のディジタル画像レコードの数が所定の値を超えることを判定することを含む方法。
JP2010537926A 2007-12-11 2008-12-01 ユーザ・プロファイルのための、画像レコードの傾向の識別 Active JP5622584B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/953,908 2007-12-11
US11/953,908 US7836093B2 (en) 2007-12-11 2007-12-11 Image record trend identification for user profiles
PCT/US2008/013252 WO2009075738A1 (en) 2007-12-11 2008-12-01 Image record trend identification for user profiles

Publications (3)

Publication Number Publication Date
JP2011507094A JP2011507094A (ja) 2011-03-03
JP2011507094A5 JP2011507094A5 (ja) 2012-01-19
JP5622584B2 true JP5622584B2 (ja) 2014-11-12

Family

ID=40469773

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010537926A Active JP5622584B2 (ja) 2007-12-11 2008-12-01 ユーザ・プロファイルのための、画像レコードの傾向の識別

Country Status (5)

Country Link
US (1) US7836093B2 (ja)
EP (1) EP2232746B1 (ja)
JP (1) JP5622584B2 (ja)
CN (1) CN101897135B (ja)
WO (1) WO2009075738A1 (ja)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2538438A1 (en) 2006-03-01 2007-09-01 Legalview Assets, Limited Systems and methods for media programming
US20090297045A1 (en) * 2008-05-29 2009-12-03 Poetker Robert B Evaluating subject interests from digital image records
US8520979B2 (en) 2008-08-19 2013-08-27 Digimarc Corporation Methods and systems for content processing
WO2010093683A2 (en) * 2009-02-10 2010-08-19 Uniloc Usa, Inc. Web content access using a client device identifier
US20100325040A1 (en) * 2009-06-23 2010-12-23 Craig Stephen Etchegoyen Device Authority for Authenticating a User of an Online Service
US8492638B2 (en) * 2009-08-05 2013-07-23 Robert Bosch Gmbh Personalized entertainment system
EP2473100A4 (en) 2009-09-01 2014-08-20 Exxonmobil Upstream Res Co METHOD OF USING HUMAN PHYSIOLOGICAL RESPONSES AS INPUT DATA FOR HYDROCARBON MANAGEMENT DECISIONS
US9082128B2 (en) * 2009-10-19 2015-07-14 Uniloc Luxembourg S.A. System and method for tracking and scoring user activities
US8316421B2 (en) * 2009-10-19 2012-11-20 Uniloc Luxembourg S.A. System and method for device authentication with built-in tolerance
US8769296B2 (en) * 2009-10-19 2014-07-01 Uniloc Luxembourg, S.A. Software signature tracking
US20110093503A1 (en) * 2009-10-19 2011-04-21 Etchegoyen Craig S Computer Hardware Identity Tracking Using Characteristic Parameter-Derived Data
US8175617B2 (en) 2009-10-28 2012-05-08 Digimarc Corporation Sensor-based mobile search, related methods and systems
US8627379B2 (en) * 2010-01-07 2014-01-07 Amazon Technologies, Inc. Offering items identified in a media stream
US9123061B2 (en) * 2010-03-24 2015-09-01 Disney Enterprises, Inc. System and method for personalized dynamic web content based on photographic data
US9538209B1 (en) 2010-03-26 2017-01-03 Amazon Technologies, Inc. Identifying items in a content stream
JP2011215963A (ja) * 2010-03-31 2011-10-27 Sony Corp 電子機器、画像処理方法及びプログラム
US8406460B2 (en) * 2010-04-27 2013-03-26 Intellectual Ventures Fund 83 Llc Automated template layout method
GB2484268A (en) 2010-09-16 2012-04-11 Uniloc Usa Inc Psychographic profiling of users of computing devices
US20120169583A1 (en) * 2011-01-05 2012-07-05 Primesense Ltd. Scene profiles for non-tactile user interfaces
EP2684145A4 (en) 2011-03-07 2014-09-03 Kba2 Inc SYSTEMS AND METHOD FOR ANALYTICAL DATA ACQUISITION OF IMAGE PROVIDERS ON THE BASIS OF AN EVENT OR GEOGRAPHICAL LOCATION
AU2012100459B4 (en) 2011-08-15 2012-11-22 Uniloc Usa, Inc. Personal control of personal information
US8934722B2 (en) * 2011-09-19 2015-01-13 Given Imaging Ltd. System and method for classification of image data items based on indirect user input
US8831360B2 (en) 2011-10-21 2014-09-09 Intellectual Ventures Fund 83 Llc Making image-based product from digital image collection
US8881273B2 (en) 2011-12-02 2014-11-04 Uniloc Luxembourg, S.A. Device reputation management
JP5588074B2 (ja) * 2011-12-05 2014-09-10 インターナショナル・ビジネス・マシーンズ・コーポレーション プライバシー情報管理装置、方法及びプログラム
AU2012100464B4 (en) 2012-02-20 2012-11-29 Uniloc Usa, Inc. Computer-based comparison of human individuals
US8917943B2 (en) 2012-05-11 2014-12-23 Intellectual Ventures Fund 83 Llc Determining image-based product from digital image collection
US10395297B1 (en) * 2012-11-13 2019-08-27 Amazon Technologies, Inc. Social media data matching
US9264474B2 (en) 2013-05-07 2016-02-16 KBA2 Inc. System and method of portraying the shifting level of interest in an object or location
US20160148298A1 (en) * 2013-06-20 2016-05-26 Hewlett-Packard Development Company, L.P. Photo based user recommendations
US9367939B2 (en) * 2013-10-22 2016-06-14 Nokia Technologies Oy Relevance based visual media item modification
CA2929119C (en) 2013-10-30 2023-03-14 Trans Union Llc Systems and methods for measuring effectiveness of marketing and advertising campaigns
EP2905968A1 (en) * 2014-02-10 2015-08-12 Thomson Licensing Method and apparatus for determining data enabling generation of a user profile
US9311639B2 (en) 2014-02-11 2016-04-12 Digimarc Corporation Methods, apparatus and arrangements for device to device communication
US20150356081A1 (en) * 2014-06-04 2015-12-10 Grandios Technologies, Llc Advanced camera management function
KR102447970B1 (ko) * 2014-08-08 2022-09-27 삼성전자주식회사 환경 프로파일 생성 방법 및 환경 프로파일 생성 장치
US10469826B2 (en) 2014-08-08 2019-11-05 Samsung Electronics Co., Ltd. Method and apparatus for environmental profile generation
US9910922B2 (en) * 2014-08-28 2018-03-06 International Business Machines Corporation Analysis of user's data to recommend connections
US9767566B1 (en) * 2014-09-03 2017-09-19 Sprint Communications Company L.P. Mobile three-dimensional model creation platform and methods
US20160092773A1 (en) * 2014-09-26 2016-03-31 Microsoft Corporation Inference-based individual profile
JP6662698B2 (ja) * 2016-04-26 2020-03-11 株式会社Nttドコモ ユーザ状態推定装置
CN109478192B (zh) 2016-06-02 2023-08-29 柯达阿拉里斯股份有限公司 用于提供一种或多种定制的以媒体为中心的产品的方法
CN107124653B (zh) * 2017-05-16 2020-09-29 四川长虹电器股份有限公司 电视用户画像的构建方法
US11227069B2 (en) * 2018-09-24 2022-01-18 Salesforce.Com, Inc. Techniques and architectures for managing privacy information and permissions across disparate database tables

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1996042172A2 (en) 1995-06-09 1996-12-27 Philips Electronics N.V. Method for enabling a user to fetch a specific information item from a set of information items, and a system for carrying out such a method
JPH11134345A (ja) * 1997-10-27 1999-05-21 Fuji Xerox Co Ltd 嗜好情報選択装置
AUPP400998A0 (en) 1998-06-10 1998-07-02 Canon Kabushiki Kaisha Face detection in digital images
US6539375B2 (en) 1998-08-04 2003-03-25 Microsoft Corporation Method and system for generating and using a computer user's personal interest profile
US6606411B1 (en) 1998-09-30 2003-08-12 Eastman Kodak Company Method for automatically classifying images into events
US6389181B2 (en) 1998-11-25 2002-05-14 Eastman Kodak Company Photocollage generation and modification using image recognition
CN1116649C (zh) * 1998-12-23 2003-07-30 皇家菲利浦电子有限公司 个性化视频分类与获取系统
US6944319B1 (en) 1999-09-13 2005-09-13 Microsoft Corporation Pose-invariant face recognition system and process
US6785421B1 (en) 2000-05-22 2004-08-31 Eastman Kodak Company Analyzing images to determine if one or more sets of materials correspond to the analyzed images
JP3850013B2 (ja) * 2000-06-21 2006-11-29 日本電信電話株式会社 コンテンツ選択装置、コンテンツ選択方法および記録媒体
US6810149B1 (en) 2000-08-17 2004-10-26 Eastman Kodak Company Method and system for cataloging images
US7212668B1 (en) 2000-08-18 2007-05-01 Eastman Kodak Company Digital image processing system and method for emphasizing a main subject of an image
US20030101104A1 (en) 2001-11-28 2003-05-29 Koninklijke Philips Electronics N.V. System and method for retrieving information related to targeted subjects
US7110575B2 (en) 2002-08-02 2006-09-19 Eastman Kodak Company Method for locating faces in digital color images
US7313268B2 (en) 2002-10-31 2007-12-25 Eastman Kodak Company Method for using effective spatio-temporal image recomposition to improve scene classification
US20050018216A1 (en) 2003-07-22 2005-01-27 International Business Machines Corporation Apparatus and method to advertise to the consumer based off a digital image
CN1853415A (zh) 2003-09-16 2006-10-25 皇家飞利浦电子股份有限公司 利用常识知识来表征多媒体内容
JP4423131B2 (ja) 2004-08-02 2010-03-03 キヤノン株式会社 情報管理装置
US7873911B2 (en) 2004-08-31 2011-01-18 Gopalakrishnan Kumar C Methods for providing information services related to visual imagery
KR100738069B1 (ko) 2004-10-04 2007-07-10 삼성전자주식회사 디지털 사진 앨범의 카테고리 기반 클러스터링 방법 및시스템
EP1810505B1 (en) * 2004-11-04 2014-03-12 Koninklijke Philips N.V. Incorporation of lead actor information for tv recommenders
US7653249B2 (en) 2004-11-17 2010-01-26 Eastman Kodak Company Variance-based event clustering for automatically classifying images
JP4287392B2 (ja) * 2005-02-18 2009-07-01 富士フイルム株式会社 プリント推奨画像選択装置、方法およびプログラム
JP3789463B1 (ja) * 2005-02-07 2006-06-21 三菱電機株式会社 推奨番組抽出装置及び推奨番組抽出方法
JP2007013939A (ja) * 2005-05-30 2007-01-18 Matsushita Electric Ind Co Ltd メタデータ付与装置及びメタデータ付与方法
JP2008228154A (ja) * 2007-03-15 2008-09-25 Fujitsu Ltd 表示装置,および遠隔操作装置
JP2009044602A (ja) * 2007-08-10 2009-02-26 Olympus Imaging Corp 撮像装置、撮像システム及び撮像方法

Also Published As

Publication number Publication date
EP2232746A1 (en) 2010-09-29
US20090150330A1 (en) 2009-06-11
CN101897135A (zh) 2010-11-24
WO2009075738A1 (en) 2009-06-18
EP2232746B1 (en) 2014-01-29
US7836093B2 (en) 2010-11-16
JP2011507094A (ja) 2011-03-03
CN101897135B (zh) 2013-10-30

Similar Documents

Publication Publication Date Title
JP5622584B2 (ja) ユーザ・プロファイルのための、画像レコードの傾向の識別
Deng et al. Feeling a destination through the “right” photos: A machine learning model for DMOs’ photo selection
JP5580811B2 (ja) ユーザ関心対象を評価する方法
CN109478192B (zh) 用于提供一种或多种定制的以媒体为中心的产品的方法
US8645359B2 (en) Providing associations between objects and individuals associated with relevant media items
US9324006B2 (en) System and method for displaying contextual supplemental content based on image content
JP5710804B2 (ja) 意味分類装置を利用した自動的なストーリー生成
US8433993B2 (en) Context aware image representation
US9026917B2 (en) System and method for context enhanced mapping within a user interface
US7882112B2 (en) Image search device and image search method
KR101807561B1 (ko) 소셜 네트워킹 엔진의 사용자들에게 콘텐츠를 다이렉팅하는 시스템 및 방법
US20090161963A1 (en) Method. apparatus and computer program product for utilizing real-world affordances of objects in audio-visual media data to determine interactions with the annotations to the objects
CN113111026A (zh) 具有共享兴趣的消息的图库
US20140195345A1 (en) Customizing advertisements to users
US20090099853A1 (en) Contextual product placement
US20080172288A1 (en) Method and system of determining and issuing user incentives on a web server via assessment of user-generated content relevance and value
US8750684B2 (en) Movie making techniques
Schmallegger et al. The use of photographs on consumer generated content websites: practical implications for destination image analysis
Ivanov et al. Object-based tag propagation for semi-automatic annotation of images
JP2006106404A (ja) 広告表示方法
Saini et al. Towards storytelling by extracting social information from OSN photo's metadata
Chu et al. Travelmedia: An intelligent management system for media captured in travel
JP2014182681A (ja) 共有情報提供システム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111121

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20111121

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121119

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130415

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20130415

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130520

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131002

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20131227

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140110

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140401

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140903

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140922

R150 Certificate of patent or registration of utility model

Ref document number: 5622584

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250