JP4332399B2 - 情報提供方法及び情報提供プログラム - Google Patents

Description

本発明は、類似画像検索を用いて商品を検索し、その商品に関する情報を提供する情報提供方法及び情報提供プログラムに関する。

現在、商品の購入は、店舗だけでなく、インターネットを介して行われることもある。インターネットを介して購入する場合には、購入者は、キーワード等を用いて商品を検索することが通常であった。しかしながら、キーワードなどの言葉は、形状や模様を十分に表現することができない。このため、購入者が、所望の形状を有する商品や所望の模様を有する商品が欲しい場合には、所望の商品を言葉を用いて検索することは難しかった。そこで、このように特定の形状を有する商品や特定の模様を有する商品を、画像に基づいて検索する技術が開示されている（例えば、特許文献１参照。）。

特許文献１においては、不動産図面に基づいて類似する間取りの不動産や、画像に示した形状や模様に基づいて特定の形状や模様を有する商品を検索する。更に、特許文献１に記載の発明においては、画像の特徴を抽出し、画像の類似を判断する技術が用いられる。

一方、画像の類似を判断する技術については、例えば特許文献２及び特許文献３に詳細に記載されている。
特許文献２においては、まず画像を構成する画素毎の色に基づいて、各画素が予め複数の領域に分割された色空間中のいずれかの領域に属するかを特定する。そして、各領域に属する画素の数に基づいて、画像の色のヒストグラムを生成し、この色のヒストグラムに基づいて、画像の類似判断を行う。

また、特許文献３においては、まず、画素の色情報に基づいて画像のエッジを抽出する。そして、画像のエッジに基づいて、物品の輪郭及び画像の構成などについての画像の特徴量を抽出する。そして、この特徴量に基づいて画像の類似判断を行う。
特開２００２−２４５０４５号公報 特開２０００−１８７７３１号公報 特開２０００−２８５１４１号公報

ところが、ファッション関係の商品、例えば服などは、自分に合うか否かを決め手として購入することがある。店において購入する場合には、利用者は、販売員から服が合うか否かのアドバイスを受けることができる。このため、利用者は、販売員からのアドバイスを参考にして効率的に商品を購入することができる。しかしながら、インターネットを介して商品を販売する場合には、販売員が対応することが困難な場合が多い。このため、利用者は、服が自分に合うか否かがわからず、十分に検討してから購入することがあった。従って、効率的に商品の販売を行えないという問題があった。

本発明は、上述した課題に鑑みてなされ、その目的は、効率的に商品の販売を行うための情報提供方法及び情報提供プログラムを提供することにある。

上記問題点を解決するために、請求項１に記載の発明は、予め登録された人物の人物識別子、人物の画像及び前記人物の顔画像の特徴量を含む情報が記録された画像情報記憶部と、人物識別子、前記人物識別子に関連付けられた被服画像及び前記被服画像の特徴量を含む関連商品情報が記録された関連情報記憶部と、商品識別子、商品説明、商品画像及び前記商品画像の特徴量を含む情報が記録された商品情報記憶部と、利用者端末にネットワークを介して接続される管理コンピュータを用いて、商品に関する情報を提供する情報提
供方法であって、前記管理コンピュータが、前記利用者端末から、顔写真を含む画像データを受信する受信段階と、前記受信段階において受信した画像データから特徴量を算出する算出段階と、前記算出段階で算出した特徴量と、前記画像情報記憶部に記録された顔画像の特徴量とを比較して、前記受信段階において受信した画像データの画像に類似する類似画像の人物識別子を前記画像情報記憶部から抽出することにより類似する人物を特定する類似画像抽出段階と、前記類似画像抽出段階において抽出された前記類似画像の前記人物識別子に関連付けられた被服画像の特徴量を前記関連情報記憶部から抽出する関連商品抽出段階と、前記関連商品抽出段階において抽出された被服画像の特徴量と、前記商品情報記憶部に記録された商品画像の特徴量とを比較し、算出した類似度に基づいて、類似度の高い商品画像の商品識別子を抽出する商品抽出段階と、前記商品抽出段階において抽出された商品識別子の商品に関する情報を前記利用者端末に送信する商品情報送信段階とを実行することを要旨とする。

請求項２に記載の発明は、請求項１に記載の情報提供方法において、前記商品抽出段階は、前記類似画像を一部に含む全体画像を抽出する全体画像抽出段階と、前記全体画像の一部の画像と同一又は類似する画像を有する商品に関する情報を抽出する抽出段階と、を含むことを要旨とする。

請求項３に記載の発明は、請求項１又は２に記載の情報提供方法において、前記管理コンピュータが、前記利用者端末に送信した前記商品に関する情報を前記利用者端末から受信する購入段階を更に実行することを要旨とする。

請求項４に記載の発明は、予め登録された人物の人物識別子、人物の画像及び前記人物の顔画像の特徴量を含む情報が記録された画像情報記憶部と、人物識別子、前記人物識別子に関連付けられた被服画像及び前記被服画像の特徴量を含む関連商品情報が記録された関連情報記憶部と、商品識別子、商品説明、商品画像及び前記商品画像の特徴量を含む情報が記録された商品情報記憶部と、利用者端末にネットワークを介して接続される管理コンピュータを用いて、商品に関する情報を提供する情報提供プログラムであって、前記管理コンピュータを、前記利用者端末から、顔写真を含む画像データを受信する受信手段、前記受信手段において受信した画像データから特徴量を算出する算出手段、前記算出手段で算出した特徴量と、前記画像情報記憶部に記録された顔画像の特徴量とを比較して、前記受信手段において受信した画像データの画像に類似する類似画像の人物識別子を前記画像情報記憶部から抽出することにより類似する人物を特定する類似画像抽出手段、前記類似画像抽出手段において抽出された前記類似画像の前記人物識別子に関連付けられた被服画像の特徴量を前記関連情報記憶部から抽出する関連商品抽出手段、前記関連商品抽出手段において抽出された被服画像の特徴量と、前記商品情報記憶部に記録された商品画像の特徴量とを比較し、算出した類似度に基づいて、類似度の高い商品画像の商品識別子を抽出する商品抽出手段、及び前記商品抽出手段において抽出された商品識別子の商品に関する情報を前記利用者端末に送信する商品情報送信手段として機能させることを要旨とする。

請求項５に記載の発明は、請求項４に記載の情報提供プログラムにおいて、前記商品抽出手段は、前記類似画像を一部に含む全体画像を抽出する全体画像抽出手段と、前記全体画像の一部の画像と同一又は類似する画像を有する商品に関する情報を抽出する抽出手段と、を含むことを要旨とする。

請求項６に記載の発明は、請求項４又は５に記載の情報提供プログラムにおいて、前記管理コンピュータを、前記利用者端末に送信した前記商品に関する情報を前記利用者端末から受信する購入手段として更に機能させることを要旨とする。

（作用）
本発明によれば、管理コンピュータは、利用者端末から受信した画像データと類似する
類似画像データに関連付けられた商品に関する情報を利用者端末に送信する。すなわち、管理コンピュータは、類似画像に関連付けられた商品を利用者に提供することになるため、利用者端末から受信した画像に関連付けられても違和感がない商品を利用者に提案することができる。これにより、利用者は、利用者端末から送信した画像に対して関連付けが可能な商品の情報を取得することができ、商品の購入を効率的に行うことができる。従って、効率的に商品の販売を行うことができる。

本発明に記載の発明によれば、管理コンピュータは、類似画像を一部に含む全体画像を検索し、この全体画像の一部と同一又は類似する商品に関する情報を利用者端末に送信する。これにより、管理コンピュータは、全体画像を介して視覚的に類似画像に調和する商品を提案するため、利用者端末から受信した画像に、調和する可能性の高い商品を提案することができる。従って、利用者は、調和する可能性の高い商品についての情報を得ることができ、商品の購入を効率的に行うことができる。そして、効率的に商品の販売を行うことができる。

本発明によれば、管理コンピュータは、類似画像に関連付けられた音に関する情報を検索し、この音を商品に関する情報として利用者端末に送信する。このため、利用者は、送信した画像に合う音を取得することができる。

本発明によれば、利用者端末から利用者に関する画像データを受信する。ここで、利用者に関する画像データとは、利用者の自画像の画像や利用者が所有している物の画像データなどである。このため、管理コンピュータは、利用者に関する画像データに基づいて、調和する可能性が高い商品を提案することができる。従って、利用者は、自分に関する画像データに調和する可能性の高い商品についての情報を得ることができ、商品の購入を効率的に行うことができる。そして、効率的に商品の販売を行うことができる。

本発明によれば、利用者が商品を購入する場合には、管理コンピュータは、利用者端末に先に送信した商品に関する情報を受け取る。このため、利用者は、情報の提供を受けた商品に対して購入する旨を送信するだけで、簡単に商品を購入することができる。従って、効率的に商品の販売を行うことができる。

本発明によれば、効率的に商品に関する情報の提供を行うことができる。

（第１実施形態）
本発明を具体化した第１実施形態を図１〜図８に基づいて説明する。本実施形態においては、被服を販売する場合に用いる販売システムについて説明する。

本実施形態では、図１に示すように利用者は、利用者端末１０を用いる。この利用者端末１０は、例えばパーソナルコンピュータであり、図示しない記憶部を有する。この記憶部には、例えば利用者の自画像などの画像データが記録されている。更に、利用者端末１０には、ディスプレイ、キーボード及びマウスが設けられている。ディスプレイは、利用者端末１０が受信した情報などを表示するために用いられる。キーボードやマウスは、利用者が各種指示を入力するために用いられる。また、利用者端末１０は、ネットワークとしてのインターネットＩを介して販売システム２０に接続されている。

販売システム２０は、本実施形態では被服を販売する企業が保有するシステムである。この販売システム２０は、管理コンピュータ２１を備えている。管理コンピュータ２１は、利用者端末１０との間でデータ送受信や各種情報の処理を実行するためのデータの管理処理等を行う。管理コンピュータ２１は、図示しないＣＰＵ、ＲＡＭ及びＲＯＭ等を有し、後述する処理（特定段階、画像検索段階、全体画像検索段階及び情報検索段階から構成される商品検索段階、商品情報送信段階及び購入段階等を含む処理）を行う。このための情報提供プログラムを実行することにより、管理コンピュータ２１は、特定手段、画像検
索手段、全体画像検索手段及び情報検索手段から構成される商品検索手段、商品情報送信手段及び購入手段として機能する。

また、販売システム２０の管理コンピュータ２１は、人物情報記憶部２２、被服情報記憶部２３及び商品情報記憶部２４に接続されている。
図２に示すように、人物情報記憶部２２は、人物毎にその人に関する人物情報２２０が記録されている。この人物情報２２０は、販売システム２０によるサービスが行われる前に予め登録される。本実施形態では、この人物情報記憶部２２は、芸能人などの特定分野における人物についての情報を記録している。また、人物情報２２０は、人物識別子、顔画像及び特徴量に関するデータから構成される。

人物識別子データ領域には、人物を識別して特定するための識別子に関するデータが記録される。
顔画像データ領域には、人物識別子によって特定される人物の顔の画像に関するデータが記録される。

特徴量データ領域には、顔画像データ領域に記録される画像の特徴量に関するデータが記録される。特徴量は、画像の特徴を量的に示す値であり、全体色、色分布、輪郭及び模様の各項目の値を含んで構成される。

図３に示すように、被服情報記憶部２３には、人物情報記憶部２２に記憶されている人物の被服に関する被服情報２３０が記録されている。この被服情報２３０は、所定の人物が新たな服装をしたときに記録される。この被服情報２３０は、人物識別子、被服画像及び特徴量に関するデータから構成される。

人物識別子データ領域には、人物を識別するための識別子についてのデータが記録される。この人物識別子データ領域に記録されているデータに基づいて、人物情報２２０と被服情報２３０とが関連付けられる。

被服画像データ領域には、人物識別子によって識別される人物が着用していた被服の画像に関するデータが記録される。このデータは、具体的にはその人物の全体写真の画像データであり、本実施形態における全体画像のデータに相当する。

特徴量データ領域には、被服画像データ領域に記録される画像に含まれる被服部分の画像の特徴量に関するデータが記録される。
図４に示すように、商品情報記憶部２４には、販売される被服の商品情報２４０が記録されている。この商品情報２４０は、新たに被服が販売されるときまでに記録される。また、商品情報２４０は、商品識別子、商品説明、商品画像及び特徴量に関する画像データから構成される。

商品識別子データ領域には、販売している被服についての商品を特定するための識別子に関するデータが記録される。
商品説明データ領域には、被服についての説明に関するデータが記録される。この説明は、例えば被服のサイズ、価格及び材質などに関する説明である。

商品画像データ領域には、販売される被服の画像に関するデータが記録される。
特徴量データ領域には、商品画像データ領域に記録される画像の特徴量に関するデータが記録される。

次に、このように構成された販売システム２０における処理手順について、図５〜図８
を参照して説明する。
まず、利用者端末１０は、販売システム２０に対してアクセス処理を行う（ステップＳ１−１）。具体的には、利用者端末１０は、インターネットＩを介して販売システム２０に接続する。販売システム２０の管理コンピュータ２１は、利用者端末１０からのアクセスを受けると、利用者端末１０に対して画面データを送信する。利用者端末１０は、管理コンピュータ２１から受信した画面データに基づいて、図７に示す検索画面１００をディスプレイに表示する（ステップＳ１−２）。

検索画面１００には、ファイル名表示欄１０２及び送信ボタン１０３が含まれる。ファイル名表示欄１０２は、利用者に指定された画像ファイルのファイル名を表示する表示欄である。また、送信ボタン１０３は、ファイル名表示欄１０２に表示されたファイル名を有するファイルのデータ送信を指示するためのボタンである。

ここで、利用者は、キーボード及びマウスを用いて、自分の顔写真を含む画像データを格納しているファイルの名前をファイル名表示欄１０２に表示させる。
そして、利用者により送信ボタン１０３が選択されると、利用者端末１０は、画像データを販売システム２０に送信する（ステップＳ１−３）。このとき、利用者端末１０が送信する画像データは、ファイル名表示欄１０２に表示されたファイル名の画像データである。

次に、販売システム２０の管理コンピュータ２１は、受信した画像データの特徴量を算出する（ステップＳ１−４）。この特徴量の算出は、受信した画像データに基づいて行われる。具体的には、図６に示すように、管理コンピュータ２１は、利用者端末１０から受信した画像ＩＰの特徴量を、肌色の部分から顔の輪郭や顔の色味、赤色の部分から口、黒色の部分から髪などの輪郭を抽出することにより算出する。

そして、管理コンピュータ２１は、類似する人物の特定を行う（ステップＳ１−５）。具体的には、管理コンピュータ２１は、算出した画像ＩＰの特徴量と、人物情報記憶部２２に記録されている人物情報２２０の人物画像Ａ１，Ａ２・・・Ａｎの特徴量と比較する。この場合、管理コンピュータ２１は、画像の全体色よりも、口や目の形状や配置など輪郭や配置に重点を置いて比較を行う。そして、比較した結果、管理コンピュータ２１は、特徴量に基づく人物画像Ａ１，Ａ２・・・Ａｎの類似度を算出する。ここで、説明のために、図６に示すように、人物画像Ａ１の類似度は６０％、人物画像Ａ２の類似度は９５％、人物画像Ａｎの類似度は８０％として算出されたとする。

更に、管理コンピュータ２１は、算出した類似度に基づいて、９５％と最も類似度が高い人物画像Ａ２を抽出する。すなわち、管理コンピュータ２１は、受信した画像ＩＰと最も類似している人物画像Ａ２を抽出する。そして、管理コンピュータ２１は、抽出した人物画像Ａ２に対応する人物を特定し、その人物の人物識別子を取得する。

次に、管理コンピュータ２１は、被服画像の抽出を行う（ステップＳ１−６）。具体的には、管理コンピュータ２１は、抽出した人物画像Ａ２に対応する人物の人物識別子に基づいて、被服情報記憶部２３に記録されている被服情報２３０から、その人物が過去に着用していた被服画像Ｂ１，Ｂ２・・・Ｂｎを抽出する。

次に、管理コンピュータ２１は、商品の特定を行う（ステップＳ１−７）。具体的には、管理コンピュータ２１は、被服画像Ｂ１，Ｂ２・・・Ｂｎにおける各被服の特徴量を被服情報２３０から抽出する。更に、管理コンピュータ２１は、商品画像Ｃ１，Ｃ２，Ｃ３，Ｃ４をそれぞれ有する商品情報２４０から、それらの画像の特徴量を抽出する。そして、管理コンピュータ２１は、被服情報２３０の特徴量と商品情報２４０の特徴量とを比較
して、類似度を算出する。ここでは、図６で示すように、商品画像Ｃ１は被服画像Ｂ１に対して６０％、商品画像Ｃ２は被服画像Ｂ２に対して９５％、商品画像Ｃ３は被服画像Ｂ２に対して５５％、商品画像Ｃ４は被服画像Ｂｎに対して５０％の類似度が算出される。そして、管理コンピュータ２１は、算出した類似度に基づいて、最も類似度の高い商品である商品画像Ｃ２を有する商品を特定する。

次に、管理コンピュータ２１は、特定した商品に関する提案商品情報を利用者端末１０に送信する（ステップＳ１−８）。すなわち、管理コンピュータ２１は、最も高い類似度の商品画像Ｃ２を有する商品の商品識別子、商品説明及び商品画像Ｃ２に関するデータを利用者端末１０に送信する。

利用者端末１０は、受信した提案商品情報をディスプレイに表示する（ステップＳ１−９）。具体的には、利用者端末１０は、図８に示す検索結果画面１５０をディスプレイに表示する。図８に示す検索結果画面１５０は、商品画像Ｃ２及び商品識別子に関する情報を含む。更に、検索結果画面１５０は、詳細ボタン１５１、購入ボタン１５２及び終了ボタン１５３を含む。

ここで、利用者が詳細ボタン１５１を選択すると、利用者端末１０は、商品のサイズ、価格、質感などの商品説明に関する詳細情報を表示する。
また、利用者が購入ボタン１５２を選択すると、利用者端末１０は、ディスプレイに購入画面を表示する。そして、この購入画面に利用者の氏名や住所など商品購入に必要な情報が入力されて、送信ボタンが選択されると、利用者端末１０は、その商品購入に必要な情報と検索結果画面１５０に表示した商品識別子とを、販売システム２０の管理コンピュータ２１に送信する。これにより、利用者は、検索結果画面１５０に表示された商品を購入することができる。

更に、利用者が終了ボタン１５３を選択すると、利用者端末１０は、販売システム２０との接続を切断して、処理を終了させる。
以上述べたように、本実施形態によれば、以下のような効果を得ることができる。

・ 本実施形態においては、管理コンピュータ２１は、利用者端末１０から受信した利用者の自画像の画像データに類似する人物画像Ａ２を特定する。更に、管理コンピュータ２１は、特定された人物画像Ａ２に、人物を介して関連付けられた被服画像Ｂ２を抽出する。そして、管理コンピュータ２１は、抽出した被服画像Ｂ２の一部に類似する商品画像Ｃ２を有する被服の情報を利用者端末１０に送信する。これにより、利用者に類似する人物が着用した被服に類似する被服を提案することができる。従って、利用者に合う可能性が高い被服を効率的に提案することができる。また、人物画像Ａ２に関連付けられた被服画像Ｂ２の被服に類似する商品画像Ｃ２の被服を提案するため、提案される被服に利用者の主観が入り込む余地がほとんどない。従って、利用者は、より客観的な基準により被服の提案を受けることができる。そして、効率的に商品の販売を行うことができる。

・ 本実施形態においては、管理コンピュータ２１は、利用者端末１０から受信した画像データに最も類似する人物画像Ａ２を特定し、これに関連付けられた被服画像Ｂ２の一部に最も類似する商品画像Ｃ２の被服の情報を利用者端末１０に送信する。このため、管理コンピュータ２１は、利用者端末１０から受信した画像ＩＰの人物に合う可能性がより高い商品の情報を提供する。従って、利用者は、利用者端末１０から送信した画像に対して関連付けが可能な商品の情報を取得することができるので、被服の購入をいっそう効率的に行うことができる。

・ 本実施形態においては、利用者の自画像の画像ＩＰに類似する人物の人物画像Ａ２
と、提案した被服の商品画像Ｃ２に類似する被服とを一部に含む被服画像Ｂ２を介して、利用者端末１０から受信した利用者の自画像の画像データと、商品画像Ｃ２とが関連付けられている。このため、管理コンピュータ２１は、被服画像Ｂ２において、人物画像Ａ２と調和した商品と類似する商品画像Ｃ２を提案することができる。従って、利用者に合う可能性の高い商品を提案することができる。

・ 本実施形態においては、利用者は、検索結果画面１５０に表示された商品を購入する場合には、購入ボタン１５２を選択する。これにより利用者端末１０は、受信した商品を購入するための購入情報を管理コンピュータ２１に送信する。管理コンピュータ２１は、受信した購入情報に基づいて利用者に商品を販売する。従って、利用者は、購入ボタン１５２を選択するだけで、情報の提供を受けた被服を簡単に購入することができる。

・ 本実施形態においては、利用者端末１０は、検索結果画面１５０において利用者により詳細ボタン１５１が選択されると、商品画像Ｃ２の商品についての詳細情報をディスプレイに表示する。このため、利用者は、提案された商品の詳細情報を得ることができ、その商品についての購入判断を容易に行うことができる。

（第２実施形態）
次に、本発明を具体化した第２実施形態を図９〜図１３に基づいて説明する。第２実施形態においては、上記第１実施形態と異なり、音楽を商品として販売する場合について説明する。本実施形態において販売される音楽は、バックグランドミュージック（ＢＧＭ）として用いられる。なお、第２実施形態においては、上記第１実施形態と同様の部分については、同一の符号を付し、その詳細な説明は省略する。

本実施形態では、図９に示すように、携帯電話などのモバイル端末を利用者端末３０として用いる。この利用者端末３０は、撮像機構を有し、この撮像機構を用いて風景などを撮影して画像として保存することが可能である。また、利用者端末３０は、表示部３１及び選択ボタン３２や入力ボタン３３などを備えている。利用者端末３０は、選択ボタン３２や入力ボタン３３を押すことにより、画像を撮影して送信することができる。

利用者端末３０は、インターネットＩを介して音楽配信システム４０に接続されている。この音楽配信システム４０は、管理コンピュータ４１を備えている。管理コンピュータ４１は、利用者端末３０との間でデータ送受信や各種情報の処理を実行するためのデータの管理処理等を行う。管理コンピュータ４１は、図示しないＣＰＵ、ＲＡＭ及びＲＯＭ等を有し、後述する処理（特定段階、画像検索段階、商品検索段階及び商品情報送信段階等を含む処理）を行う。このための情報提供プログラムを実行することにより、管理コンピュータ４１は、特定手段、画像検索手段、商品検索手段及び商品情報送信手段として機能する。

また、音楽配信システム４０の管理コンピュータ４１は、風景情報記憶部４２及び音楽情報記憶部４３に接続されている。
図１０に示すように、風景情報記憶部４２には、風景画像に関する風景情報４２０が記録されている。この風景情報４２０は、撮影された静止画像に、少なくとも１つの音楽が関連付けられた場合に記録される。また、風景情報４２０は、風景識別子、風景画像及び特徴量に関するデータを含んで構成される。

風景識別子データ領域には、風景を特定するための識別子に関するデータが記録される。
風景画像データ領域には、風景の画像データが記録される。

特徴量データ領域には、風景画像データ領域に記録されている風景画像の特徴量に関するデータが記録される。
図１１に示すように、音楽情報記憶部４３には、提供するＢＧＭに関する音楽情報４３０が記録されている。この音楽情報４３０は、撮影された静止画像に新たな音楽が関連付けられた場合に記録される。また、音楽情報４３０は、風景識別子、音楽及び音楽説明に関するデータを含んで構成される。

風景識別子データ領域には、風景を特定するための識別子に関するデータが記録される。この風景識別子データ領域に記録されたデータを介して、風景情報４２０と音楽情報４３０とが関連付けられる。

音楽データ領域には、風景識別子によって特定される風景と関連付けられたＢＧＭの音データが記録される。ここにおける風景とＢＧＭとの関連付けは、イメージが共通するとか、その風景を放映したときに使用されたとかによって行われる。

音楽説明データ領域には、音楽データ領域に記憶されたＢＧＭの説明に関するデータが記録される。具体的には、ＢＧＭの演奏者や作曲者などの説明や、そのＢＧＭと風景識別子によって特定される風景とが関連付けられた理由などである。

次に、本実施形態の音楽配信システム４０の処理手順について、図１２を用いて説明する。
本実施形態のＢＧＭの配信を受ける場合には、利用者は音楽配信システム４０に予めユーザ登録をしておく。詳述すると、音楽配信システム４０は、利用者がＢＧＭの配信を受ける前に、利用者端末３０に関する情報や課金を行うために必要な利用者に関する情報を受信して、図示しない記憶部に記録して利用者の登録を行う。

そして、ＢＧＭの配信を受けたい場合には、利用者は、利用者端末３０を音楽配信システム４０に接続させる。言い換えると、利用者端末３０は、音楽配信システム４０に対してアクセス処理を行う（ステップＳ２−１）。具体的には、利用者端末３０は、音楽配信システム４０にアクセスすると、音楽配信システム４０の管理コンピュータ４１は、アクセスしてきた利用者のユーザ登録を確認する。そして、ユーザ登録の確認が完了し、管理コンピュータ４１は、利用者端末３０に対して画面データを送信する。

利用者端末３０は、受信した画面データに基づいて図１３に示す依頼画面２００を表示する（ステップＳ２−２）。
依頼画面２００は、音楽配信システム４０に送信するための画像を撮影する撮影ボタン２０２と、処理を中止するキャンセルボタン２０３とを含む。

ここで、利用者が、撮影ボタン２０２を選択すると、利用者端末３０は撮影可能状態になる。そこで、利用者により所定のボタンが押されると、利用者端末３０は、利用者の現在地の風景を撮影する（ステップＳ２−３）。そして、利用者端末３０は、撮影が完了して画像データを生成すると、今、撮影した画像データを音楽配信システム４０に送信する（ステップＳ２−４）。

音楽配信システム４０の管理コンピュータ４１は、受信した画像データに基づいて、その画像の特徴量を算出する（ステップＳ２−５）。本実施形態においても、画像の特徴量は、公知の算出方法によって求められる。

次に、管理コンピュータ４１は、類似する風景の特定を行う（ステップＳ２−６）。具体的には、ステップＳ２−４において算出した特徴量と、風景情報記憶部４２に記憶され
ている風景情報４２０の特徴量と比較し、類似度を算出する。そして、類似度が最も高い風景を類似する風景として特定する。

そして、管理コンピュータ４１は、音楽の抽出を行う（ステップＳ２−７）。具体的には、管理コンピュータ４１は、特定した風景の風景識別子を風景情報４２０から抽出する。次に、管理コンピュータ４１は、抽出した風景識別子に対応付けられている音楽（音データ）を音楽情報記憶部４３に記録されている音楽情報４３０から抽出する。

そして、管理コンピュータ４１は、抽出した音データを利用者端末３０に送信する（ステップＳ２−８）。利用者端末３０は、受信した音データに基づいて音楽（ＢＧＭ）を流す（ステップＳ２−９）。

本実施形態によれば、以下のような効果を得ることができる。
・ 本実施形態では、管理コンピュータ４１は、利用者端末３０から受信した風景画像データに基づいて、その風景画像と類似する風景画像に関連付けられたＢＧＭを利用者端末３０に送信する。このため、管理コンピュータ４１は、受信した風景画像に類似する風景画像に合うようなＢＧＭを提案することができる。また、イメージが共通するとか、その風景を放映したときに使用されたとかの理由により風景画像とＢＧＭとが関連付けられている場合には、風景画像に合う可能性が高いＢＧＭを利用者に提案することができる。

・ 本実施形態では、利用者端末３０は、画像を撮影するとその画像を音楽配信システム４０に送信する。更に、利用者端末３０は、管理コンピュータ４１から受信したＢＧＭをすぐに流す。このため、利用者は、画像を撮影するという簡単な操作だけで、撮影した現在地の風景に合うＢＧＭを簡単に得ることができる。

・ 本実施形態では、予め登録をした後に、利用者はＢＧＭの配信を受ける。すなわち、利用者は、ＢＧＭの配信を受ける場合には、風景画像を音楽配信システム４０に送信するだけでよい。このため、その風景にいる場合に、相応しいＢＧＭをすぐに聞くことができる。

なお、上記各実施形態は、以下のように変更してもよい。
○上記第１実施形態では、管理コンピュータ２１は、利用者端末１０から利用者の自画像の画像データを受信すると、商品情報記憶部２４に記憶している商品の商品画像Ｃ２のデータを利用者端末１０に送信した。利用者端末１０に送信する商品に関する情報はこれに限定しなくてもよい。例えば、上記実施形態のステップＳ１−６において抽出した被服画像Ｂ２を利用者端末１０に送信してもよいし、被服画像Ｂ２に使用されている商品に関する情報を利用者端末１０に送信してもよい。これにより、利用者は、被服画像Ｂ２を見ながら商品の購入を判断することができる。

○上記第１実施形態では、管理コンピュータ２１は、ステップＳ１−６において抽出した被服画像Ｂ１，Ｂ２・・・Ｂｎに対して最も類似度が高い商品画像Ｃ２の商品に関する情報を利用者端末１０に送信した。これに代えて、例えば類似度８０％以上など所定以上の類似度を有するすべての商品に関する情報を利用者端末１０に送信してもよい。これにより、利用者は、合う可能性が高い、より多くの商品に関する情報を得ることができる。

○上記第１実施形態では、全体画像としての被服画像Ｂ１，Ｂ２・・・Ｂｎを介して関連付けられた商品画像Ｃ２を有する商品を提供した。これに代えて、全体画像以外によって関連付けられた商品の情報を提供してもよい。例えば、人物自体に関連付けられている商品を提案してもよい。具体的には、芸能人が過去にコマーシャルを行った商品の情報と、その芸能人とを関連付けられて記録している記憶部を設ける。そして、管理コンピュー
タ２１は、利用者端末から受信した画像データに基づいて類似画像の芸能人を特定すると、特定された芸能人に関連付けられた商品を提供する。これにより多様な情報を提供することができる。

○上記第１実施形態では、利用者端末１０は、利用者の自画像の画像データを送信した。これに代えて、例えば被服や家具など、利用者が所有する品物の画像データを送信してもよい。この場合には、管理コンピュータ２１は、利用者が所有する被服や小物などの商品に調和する商品の情報を提供することができる。従って、効率的に商品の販売を行うことができる。

○上記第２実施形態では、管理コンピュータ４１は、利用者端末３０に対してＢＧＭを配信した。利用者端末３０に配信される音に関する情報はこれに限られるものではない。例えば、管理コンピュータ４１は、詩や文学作品のワンフレーズなどを配信してもよい。また、管理コンピュータ４１は、音楽のみならず、音を含んだ画像や、動画などを配信してもよい。

○上記第１実施形態では、利用者端末１０に対して被服に関する情報を送信した。また、上記第２実施形態では、利用者端末３０に対して音楽を送信した。管理コンピュータ２１，４１が送信する商品に関する情報は、これに限定されるものではない。例えば、上記第１実施形態において、管理コンピュータ２１は、受信した利用者の画像データに基づいて、髪型などを提案してもよい。具体的には、被服情報記憶部２３の代わりに、髪型情報として、人物が過去にしていた髪型を人物識別子に関連付けて記録している髪型情報記憶部を設ける。そして、利用者の画像データの特徴量から特定された人物の髪型を利用者端末１０に対して送信して、髪型を提案してもよい。

または、人材を紹介するための情報を提供してもよい。具体的には、人物ごとに、その人物の家族や恋人であるとして関連付けされた人物画像を記憶した記憶部を設ける。そして、管理コンピュータ２１は、利用者端末１０から利用者の自画像の画像データに基づいて類似する人物を特定した後、特定した人物の配偶者や恋人の顔画像を抽出する。そして、管理コンピュータ２１は、抽出した顔画像に類似する人物を、例えば人材紹介に登録している人物に関する情報を記憶した記憶部から抽出し、この抽出した人についての情報を利用者端末１０に送信してもよい。これにより、管理コンピュータ２１は、利用者に合う人物を利用者に対して効率的に提案することができる。

○上記各実施形態の管理コンピュータ２１，４１は、販売システム２０が有する商品情報記憶部２４又は音楽配信システム４０が有する音楽情報記憶部４３に記憶されている商品の情報を利用者端末１０，３０に提案した。これに代えて、管理コンピュータ２１，４１は、インターネットＩを介して他のシステムが販売している商品を検出して、この商品を提案してもよい。

○上記各実施形態の管理コンピュータ２１，４１においては、利用者端末１０，３０から受信した画像データを利用者端末１０，３０から指定された画像データとして特定した。画像データの特定の仕方はこれに限られるものではない。例えば、利用者端末１０，３０から画像データを所定のサーバに予め記憶させておいてもよい。この場合には、利用者が情報の提供を受けたいときには、サーバに記録している画像データを指定するための情報を管理コンピュータ２１，４１に送信してもよい。

本発明の第１実施形態におけるシステムの概略図。 人物情報記憶部に記録されたデータの説明図。 被服情報記憶部に記録されたデータの説明図。 商品情報記憶部に記録されたデータの説明図。 第１実施形態における処理手順を説明するための流れ図。 第１実施形態における処理手順の説明図。 第１本実施形態における利用者端末に表示される検索画面の画面図。 第１実施形態における利用者端末に表示される検索結果画面の画面図。 本発明の第２実施形態におけるシステムの概略図。 風景情報記憶部に記録されたデータの説明図。 音楽情報記憶部に記録されたデータの説明図。 第２実施形態における処理手順を説明するための流れ図。 本実施形態における利用者端末に表示される送信画面の画面図。

符号の説明

Ｂ１，Ｂ２，Ｂｎ…全体画像としての被服画像、Ｉ…ネットワークとしてのインターネット、１０，３０…利用者端末、２１，４１…管理コンピュータ。

Claims (6)

1. 予め登録された人物の人物識別子、人物の画像及び前記人物の顔画像の特徴量を含む情報が記録された画像情報記憶部と、
   人物識別子、前記人物識別子に関連付けられた被服画像及び前記被服画像の特徴量を含む関連商品情報が記録された関連情報記憶部と、
   商品識別子、商品説明、商品画像及び前記商品画像の特徴量を含む情報が記録された商品情報記憶部と、
   利用者端末にネットワークを介して接続される管理コンピュータを用いて、商品に関する情報を提供する情報提供方法であって、
   前記管理コンピュータが、
   前記利用者端末から、顔写真を含む画像データを受信する受信段階と、
   前記受信段階において受信した画像データから特徴量を算出する算出段階と、
   前記算出段階で算出した特徴量と、前記画像情報記憶部に記録された顔画像の特徴量とを比較して、前記受信段階において受信した画像データの画像に類似する類似画像の人物識別子を前記画像情報記憶部から抽出することにより類似する人物を特定する類似画像抽出段階と、
   前記類似画像抽出段階において抽出された前記類似画像の前記人物識別子に関連付けられた被服画像の特徴量を前記関連情報記憶部から抽出する関連商品抽出段階と、
   前記関連商品抽出段階において抽出された被服画像の特徴量と、前記商品情報記憶部に記録された商品画像の特徴量とを比較し、算出した類似度に基づいて、類似度の高い商品画像の商品識別子を抽出する商品抽出段階と、
   前記商品抽出段階において抽出された商品識別子の商品に関する情報を前記利用者端末に送信する商品情報送信段階と
   を実行することを特徴とする情報提供方法。
2. 前記商品抽出段階は、
   前記類似画像を一部に含む全体画像を抽出する全体画像抽出段階と、
   前記全体画像の一部の画像と同一又は類似する画像を有する商品に関する情報を抽出する抽出段階と、
   を含むことを特徴とする請求項１に記載の情報提供方法。
3. 前記管理コンピュータが、前記利用者端末に送信した前記商品に関する情報を前記利用者端末から受信する購入段階を更に実行することを特徴とする請求項１又は２に記載の情報提供方法。
4. 予め登録された人物の人物識別子、人物の画像及び前記人物の顔画像の特徴量を含む情報が記録された画像情報記憶部と、
   人物識別子、前記人物識別子に関連付けられた被服画像及び前記被服画像の特徴量を含む関連商品情報が記録された関連情報記憶部と、
   商品識別子、商品説明、商品画像及び前記商品画像の特徴量を含む情報が記録された商品情報記憶部と、
   利用者端末にネットワークを介して接続される管理コンピュータを用いて、商品に関する情報を提供する情報提供プログラムであって、
   前記管理コンピュータを、
   前記利用者端末から、顔写真を含む画像データを受信する受信手段、
   前記受信手段において受信した画像データから特徴量を算出する算出手段、
   前記算出手段で算出した特徴量と、前記画像情報記憶部に記録された顔画像の特徴量とを比較して、前記受信手段において受信した画像データの画像に類似する類似画像の人物識別子を前記画像情報記憶部から抽出することにより類似する人物を特定する類似画像抽出手段、
   前記類似画像抽出手段において抽出された前記類似画像の前記人物識別子に関連付けられた被服画像の特徴量を前記関連情報記憶部から抽出する関連商品抽出手段、
   前記関連商品抽出手段において抽出された被服画像の特徴量と、前記商品情報記憶部に記録された商品画像の特徴量とを比較し、算出した類似度に基づいて、類似度の高い商品画像の商品識別子を抽出する商品抽出手段、及び
   前記商品抽出手段において抽出された商品識別子の商品に関する情報を前記利用者端末に送信する商品情報送信手段
   として機能させることを特徴とする情報提供プログラム。
5. 前記商品抽出手段は、
   前記類似画像を一部に含む全体画像を抽出する全体画像抽出手段と、
   前記全体画像の一部の画像と同一又は類似する画像を有する商品に関する情報を抽出する抽出手段と、
   を含むことを特徴とする請求項４に記載の情報提供プログラム。
6. 前記管理コンピュータを、前記利用者端末に送信した前記商品に関する情報を前記利用者端末から受信する購入手段として更に機能させることを特徴とする請求項４又は５に記載の情報提供プログラム。

Images