JP6494974B2

JP6494974B2 - 情報提供システム、および情報公開装置

Info

Publication number: JP6494974B2
Application number: JP2014219979A
Authority: JP
Inventors: 智美細川
Original assignee: 株式会社フィール
Priority date: 2014-10-29
Filing date: 2014-10-29
Publication date: 2019-04-03
Anticipated expiration: 2034-10-29
Also published as: JP2016085706A

Description

本発明は、情報提供システム、および情報公開装置に関する。

次のような画像識別装置が知られている。この画像識別装置では、入力される画像を解析して、画像の柄や色を識別する技術が開示されている（例えば、特許文献１）。

特開２０１４−６７１７４号公報

ファッションアイテムの画像を提供するに際しては、ユーザは、好みの色と柄を組み合わせて画像の検索を希望することが想定されるため、ユーザにファッションアイテムの画像を提供するシステムや装置においては、色と柄に基づいて類似画像を選択するための技術が求められる。しかしながら、従来の画像識別装置では、入力された画像に基づいて画像の色や柄を識別することは可能であるが、識別した色と柄に基づいて、それに類似するファッションアイテム画像を選択するための具体的な方法については、何ら開示されていなかった。

本発明による情報提供システムは、ユーザが所持するユーザ端末と、ユーザ端末に情報を公開する情報公開装置とを通信回線を介して接続した情報提供システムであって、ユーザ端末は、取得した画像を対象画像として、ユーザによる対象画像内の範囲指定を受け付ける範囲指定受付手段と、対象画像内から、範囲指定受付手段によって指定を受け付けた範囲の画像を抽出し、抽出した抽出画像を情報公開装置へ送信する抽出画像送信手段と、情報公開装置から抽出画像送信手段で送信した抽出画像に基づいて選択されたファッションアイテム画像を受信するファッションアイテム画像受信手段と、ファッションアイテム画像受信手段によって受信されたファッションアイテム画像を表示装置に表示する表示手段とを備え、情報公開装置は、ユーザ端末から抽出画像を受信する抽出画像受信手段と、抽出画像受信手段によって受信された抽出画像の色と柄を特定する特定手段と、特定手段によって特定された色と柄の組に対応する色柄辞書を参照して、色柄辞書に登録されている色柄画像の中から、抽出画像に類似する色柄画像を選択する色柄画像選択手段と、ファッションアイテム画像が記録された画像データベースを参照して、色柄画像選択手段によって選択された色柄画像に類似する色柄で構成されるファッションアイテム画像を選択するファッションアイテム画像選択手段と、ファッションアイテム画像選択手段によって選択されたファッションアイテム画像を、ユーザ端末へ送信するファッションアイテム画像送信手段とを備えることを特徴とする。
本発明による情報公開装置は、ユーザが所持するユーザ端末から、対象画像からユーザによって指定された範囲の画像を抽出した抽出画像を受信する抽出画像受信手段と、抽出画像受信手段によって受信された抽出画像の色と柄を特定する特定手段と、特定手段によって特定された色と柄の組に対応する色柄辞書を参照して、色柄辞書に登録されている色柄画像の中から、抽出画像に類似する色柄画像を選択する色柄画像選択手段と、ファッションアイテム画像が記録された画像データベースを参照して、色柄画像選択手段によって選択された色柄画像に類似する色柄で構成されるファッションアイテム画像を選択するファッションアイテム画像選択手段と、ファッションアイテム画像選択手段によって選択されたファッションアイテム画像を、ユーザ端末へ送信するファッションアイテム画像送信手段とを備えることを特徴とする。

本発明によれば、ユーザの指定に基づいて抽出された抽出画像に、色と柄が類似するファッションアイテムの画像を選択して、ユーザに提供することができる。

情報提供システム１００の一実施の形態の構成を示すブロック図である。ユーザ端末２００としてスマートフォンを用いた場合の一実施の形態の構成を示すブロック図である。情報公開装置３００としてサーバ装置を用いた場合の一実施の形態の構成を示すブロック図である。色柄辞書のフォルダ構成例を模式的に示した第１の図である。色柄画像の記録例を模式的に示した図である。ユーザ端末２００で実行される処理の流れを示すフローチャート図である。情報公開装置３００で実行される処理の流れを示すフローチャート図である。色柄辞書のフォルダ構成例を模式的に示した第２の図である。

図１は、本実施の形態における情報提供システム１００の一実施の形態の構成を示すブロック図である。情報提供システム１００は、ユーザ端末２００と、情報公開装置３００とが、インターネットや携帯電話網などの通信回線を介して接続されることにより構成される。

ユーザ端末２００は、情報提供システム１００を利用して情報の提供を受けるユーザが所持する端末であって、例えばスマートフォン、タブレット端末、パーソナルコンピュータ等の情報端末が用いられる。情報公開装置３００は、ユーザ端末２００に対して情報を公開するための処理を実行する装置であって、例えば、サーバ装置やパソコン等の情報処理装置が用いられる。なお、図１では、情報提供システム１００は、ユーザ端末２００と、情報公開装置３００とがそれぞれ１台ずつで構成される例を示しているが情報提供システム１００の構成はこれに限定されない。例えば、複数の情報公開装置３００で処理を分散させるようにしてもよいし、ユーザ端末２００の数は特に限定されるものではない。

図２は、本実施の形態におけるユーザ端末２００としてスマートフォンを用いた場合の一実施の形態の構成を示すブロック図である。本実施の形態では、スマートフォンに情報公開装置３００と通信を行って、以下に説明する処理を実行するためのユーザ端末用アプリケーションがインストールされることにより、本実施の形態におけるユーザ端末２００として動作する。なお、ユーザ端末用アプリケーションのプログラムは、インターネットを介して接続されたサーバ上で公開されることにより提供され、ユーザがこれをダウンロードにより入手し、ユーザ端末２００にあらかじめインストールされているものとする。あるいは、ユーザ端末用アプリケーションのプログラムは、ＣＤ−ＲＯＭやＤＶＤ−ＲＯＭ等の記録媒体に記録されて提供されるようにしてもよい。

ユーザ端末２００は、タッチパネル２０１と、通信モジュール２０２と、マイク２０３と、制御装置２０４と、スピーカー２０５と、カメラ２０６とを備えている。

タッチパネル２０１は、液晶パネル等の表示装置とタッチパッドのような位置入力装置を組み合わせた電子部品であり、画面上の表示を押すことで機器を操作することができる入力装置である。例えば、ユーザ端末２００のユーザは、液晶パネル上に表示されたボタンやメニュー等の表示項目を指やタッチペンを用いてタッチまたはスライドさせることにより、ユーザ端末２００を操作することができる。タッチパネル２０１は、ユーザによるタッチやスライドといった操作を検出して、その検出信号を制御装置２０４へ出力する。

通信モジュール２０２は、無線または有線により、ＬＡＮや携帯電話通信網を介してインターネットに接続するためのモジュールが用いられる。ユーザ端末２００は、この通信モジュール２０２を介して情報公開装置３００と通信を行う。

マイク２０３は、ユーザによる発話音声を入力するための集音装置である。マイク２０３から入力されたアナログデータは、制御装置２０４でデジタル信号に変換される。

制御装置２０４は、ＣＰＵ、メモリ、およびその他の周辺回路によって構成され、ユーザ端末２００の全体を制御する。なお、制御装置２０４を構成するメモリは、例えばＳＤＲＡＭ等の揮発性のメモリやフラッシュメモリ等の不揮発性のメモリを含む。揮発性のメモリは、ＣＰＵがプログラム実行時にプログラムを展開するためのワークメモリや、データを一時的に記録するためのバッファメモリとして使用される。また、不揮発性のメモリには、ユーザ端末２００を動作させるためのファームウェアや種々のアプリケーションを動作させるためのソフトウェアのプログラムデータが記録される。本実施の形態では、この不揮発性のメモリに、上述したユーザ端末用アプリケーションのプログラムが記録されている。

スピーカー２０５は、音声を出力するための出力装置である。制御装置２０４は、他のユーザから着信があった場合の音声データや、不揮発性メモリに記録されている音声データをスピーカー２０５を介して出力する。

カメラ２０６は、レンズ、撮像素子、その他周辺回路によって構成される公知の撮像装置である。本実施の形態では、ユーザ端末用アプリケーションは、ユーザからの指示に基づいてカメラ２０６を用いた撮影を行う機能を備えている。

図３は、本実施の形態における情報公開装置３００としてサーバ装置を用いた場合の一実施の形態の構成を示すブロック図である。情報公開装置３００は、操作部材３０１と、接続インターフェース３０２と、制御装置３０３と、記録装置３０４とを備えている。

操作部材３０１は、情報公開装置３００の操作者によって操作される種々の装置、例えばキーボードやマウスを含む。

接続インターフェース３０２は、情報公開装置３００をインターネット等の通信回線に接続するためのインターフェースであり、例えば、インターネットに有線で接続するための有線ＬＡＮモジュールや、インターネットに無線で接続するための無線ＬＡＮモジュールなどが用いられる。情報公開装置３００は、この接続インターフェース３０２を介してユーザ端末２００と通信を行う。

制御装置３０３は、ＣＰＵ、メモリ、およびその他の周辺回路によって構成され、情報公開装置３００の全体を制御する。なお、制御装置３０３を構成するメモリは、例えばＳＤＲＡＭ等の揮発性のメモリである。このメモリは、ＣＰＵがプログラム実行時にプログラムを展開するためのワークメモリや、データを一時的に記録するためのバッファメモリとして使用される。例えば、接続インターフェース３０２を介して読み込まれたデータは、バッファメモリに一時的に記録される。

記録装置３０４は、情報公開装置３００が蓄える種々のデータや、制御装置３０３が実行するためのプログラムのデータ等を記録するための記録装置であり、例えばＨＤＤ（ＨａｒｄＤｉｓｋＤｒｉｖｅ）やＳＳＤ（ＳｏｌｉｄＳｔａｔｅＤｒｉｖｅ）等が用いられる。なお、記録装置３０４に記録されるプログラムのデータは、ＣＤ−ＲＯＭやＤＶＤ−ＲＯＭなどの記録媒体に記録されて提供されたり、ネットワークを介して提供され、操作者が取得したプログラムのデータを記録装置３０４にインストールすることによって、制御装置３０３がプログラムを実行できるようになる。

本実施の形態における情報提供システム１００では、ユーザ端末２００を所持するユーザは、ユーザ端末２００上で上述したユーザ端末用アプリケーションを起動して、洋服やアクセサリー等のファッションアイテムを撮影したファッションアイテム画像を検索することができる。

ファッションアイテム画像は、ファッションアイテムの画像の公開を希望する公開者が、あらかじめファッションアイテムを被写体として撮影したファッションアイテム画像を情報公開装置３００にアップロードすることにより、公開対象とすることができる。例えば、ファッションアイテムを販売する販売者が、自社が販売するファッションアイテムの画像を、販売者が所持するパソコンやスマートフォン等の端末を操作して、情報公開装置３００にアップロードすることができる。また、ファッションアイテムを販売する販売者は、各ファッションアイテムごとに、ファッションアイテムのカテゴリを示すカテゴリ情報、ファッションアイテムの名称を示す名称情報、ファッションアイテムの価格を示す価格情報などのファッションアイテムに関連する関連情報を入力することもできる。入力された関連情報は、ファッションアイテム画像に関連付けて情報公開装置３００にアップロードされる。

なお、カテゴリ情報としては、ファッションアイテムを分類するために用いられるカテゴリ名が入力される。ファッションアイテムのカテゴリ名としては、例えば、トップス、アウター、ボトムス、ワンピース、バッグ、アクセサリー、ジュエリー、シューズ、ウォレット、腕時計、モバイルアクセサリー、スポーツウェア、アンダー、フォーマル、レイングッズ、ベビー、キッズ、マタニティーといったファッションアイテムを分類するために用いられる一般的なカテゴリの名称を用いればよい。

情報公開装置３００では、制御装置３０３は、アップロードされたファッションアイテム画像を受信した場合には、記録装置３０４に記録されている画像データベースに、アップロードされたファッションアイテム画像を登録する。また、ファッションアイテム画像に関連付けられている関連情報も、その関連付けを維持したまま記録装置３０４に記録する。これによって、画像データベース登録されたファッションアイテム画像の公開準備が完了する。

ユーザは、ユーザ端末２００を操作して、あらかじめ取得した画像をタッチパネル２０１に表示させた後、タッチパネル２０１を操作して、表示されている対象画像内の所定範囲を選択する。例えば、ユーザは、タッチパネル２０１に表示されている対象画像に対して、画像内に任意の形状の領域を描くように指やタッチペン等でなぞることにより、対象画像内の所定範囲を選択することができる。本実施の形態では、ユーザは、カメラ２０６を用いた撮影機能を利用して撮影した画像や、インターネットを介してダウンロードした画像等を対象画像とすることができるものとする。これらの対象画像は、カメラ２０６を介して入力される等して一時的に揮発性のメモリに記録された画像でもよいし、あらかじめ取得されて不揮発性のメモリに記録されている画像でもよい。例えば、ユーザは、店で見かけたファッションアイテムや雑誌に掲載されていたファッションアイテムなどをあらかじめ撮影しておけば、お気に入りファッションアイテムが写った画像を対象画像とすることができる。

制御装置２０４は、ユーザから画像の表示指示を受け付けた場合には、表示が指示された画像を揮発性のメモリや不揮発性のメモリから取得して、対象画像としてタッチパネル２０１に表示する。その後、制御装置２０４は、ユーザによってタッチパネル２０１上でのタッチ操作に基づいて、対象画像上での範囲指定がされたことを検出した場合には、指定された範囲内の画像を抽出する。

また、ユーザは、タッチパネル２０１上で、閲覧したいファッションアイテムのカテゴリ名を指定する。例えば、制御装置２０４は、上述したカテゴリ名の一覧をタッチパネル２０１上に表示し、ユーザは、一覧の中から閲覧したいファッションアイテムのカテゴリ名を選択することにより指定することができる。

制御装置２０４は、対象画像から抽出して得た抽出画像と、ユーザに指定されたカテゴリ名を、通信モジュール２０２を介して情報公開装置３００へ送信する。

情報公開装置３００では、制御装置３０３は、ユーザ端末２００から抽出画像を受信すると、受信した抽出画像の色と柄を特定する。抽出画像の色と柄を特定するための方法は、画像内の色と柄を特定するための公知の画像処理技術を用いればよいため、ここでは詳細な説明を省略する。

記録装置３０４には、色と柄の組ごとに作成されたフォルダ内に、その色と柄に対応する色柄画像を記録した色柄辞書が記録されている。図４は、本実施の形態における色柄辞書のフォルダ構成例を模式的に示した図である。図４に示す例では、各フォルダを「柄×色」という表記方法を用いて示している。例えば、チェック柄とブルーの組み合わせの色柄画像を記録するフォルダは、「チェック×ブルー」と表記している。図４に示す色柄辞書では、チェック柄、フラワー柄、ゼブラ柄の各柄と、ブルー、ベージュ、ブラック、グリーン、オレンジ、ピンク、レッド、ホワイト、イエローの各色との全ての組み合わせについてフォルダが用意され、各フォルダ内に、それぞれの柄と色に応じた色柄画像が記録されている。

例えば、「ゼブラ×ブラック」フォルダ４ａには、図５に示すように、黒色のゼブラ柄で構成される複数パターンの色柄画像が記録されている。なお、図５において、各色柄画像の下部に表示されている文字列は、各色柄画像に付されたファイル名を示している。ここに表示されたファイル名は一例であって、これに限定されるものではない。

また、図４では、柄は、チェック柄、フラワー柄、ゼブラ柄の３つを例に挙げたが、ドット柄（水玉柄）、ボーダー柄、ウェーブ柄などのファッションアイテムの柄として想定される他の柄についても、各色との組み合わせに対してフォルダが設けられ、フォルダ内に色柄画像が記録される。また、色は、ブルー、ベージュ、ブラック、グリーン、オレンジ、ピンク、レッド、ホワイト、イエローの９色を例に挙げたが、パープル、ブラウン、アクアブルー、ネイビー、グレーなどのファッションアイテムの色として想定される他の色も対象となる。

制御装置３０３は、抽出画像の色と柄を特定した後、色柄辞書の特定した色と柄に対応するフォルダを参照して、フォルダ内に記録されている複数パターンの色柄画像の中から、抽出画像の画像パターンに類似する色柄画像を選択する。ここで、フォルダ内に記録されている複数パターンの色柄画像の中から、抽出画像の画像パターンに類似する色柄画像を選択するための方法としては、公知のパターンマッチングによる類似画像の特定方法等の公知の方法を用いればよい。

制御装置３０３は、上述した画像データベースに記録されているファッションアイテム画像のうち、関連情報に含まれるカテゴリ名が、抽出画像とともにユーザ端末２００から受信したカテゴリ名と一致するファッションアイテム画像の中から、色柄辞書を参照して選択した色柄画像に類似する色柄で構成される画像を選択する。例えば、制御装置３０３は、画像データベースに記録されているファッションアイテム画像の中から、関連情報に含まれるカテゴリ名が、抽出画像とともにユーザ端末２００から受信したカテゴリ名と一致するファッションアイテム画像を抽出し、抽出した各ファッションアイテム画像と、選択した色柄画像との類似度を示す指標値を算出し、算出した指標値があらかじめ設定された閾値以上のファッションアイテム画像を、色柄画像に類似する画像として選択する。なお、この場合も、ファッションアイテム画像の中から、色柄辞書を参照して選択した色柄画像に類似する色柄で構成される画像を選択するための方法としては、公知のパターンマッチングによる類似画像の特定方法等の公知の方法を用いればよい。

制御装置３０３は、上記処理により選択したファッションアイテム画像と、ファッションアイテム画像に関連付けられている関連情報とを、接続インターフェース３０２を介してユーザ端末２００へ送信する。このとき、選択したファッションアイテム画像が複数ある場合には、制御装置３０３は、それら複数のファッションアイテム画像をユーザ端末２００へ送信する。

ユーザ端末２００では、制御装置２０４は、情報公開装置３００から抽出画像に基づいて選択されたファッションアイテム画像と関連情報を受信した場合には、受信したファッションアイテム画像と関連情報とをタッチパネル２０１に表示する。このとき、制御装置２０４は、受信したファッションアイテム画像が複数の場合には、複数のファッションアイテム画像と関連情報をタッチパネル２０１に一覧表示する。これによって、ユーザは、指定したカテゴリ名に属するファッションアイテムを対象として、自身が範囲指定した抽出画像に柄と色が類似するファッションアイテムの画像を閲覧することができる。また、関連情報に基づいて、ファッションアイテムの名称や価格を確認することができる。

図６は、ユーザ端末２００で実行される処理の流れを示すフローチャートである。図６示す処理は、ユーザによってユーザ端末用アプリケーションの起動が指示されると起動するプログラムとして、制御装置２０４によって実行される。

ステップＳ１０において、制御装置２０４は、ユーザから画像の表示指示を受け付けたか否かを判断する。ステップＳ１０で肯定判断した場合には、ステップＳ２０へ進む。

ステップＳ２０では、制御装置２０４は、表示が指示された画像を揮発性のメモリや不揮発性のメモリから取得して、対象画像としてタッチパネル２０１に表示する。その後、ステップＳ３０へ進む。

ステップＳ３０では、制御装置２０４は、ユーザによるタッチパネル２０１上でのタッチ操作を検出して、対象画像上に範囲指定がされたか否かを判断する。ステップＳ３０で肯定判断した場合には、ステップＳ４０へ進む。

ステップＳ４０では、制御装置２０４は、ユーザによって指定された範囲内の画像を抽出画像として抽出する。その後、ステップＳ５０へ進む。

ステップＳ５０では、制御装置２０４は、ユーザによってファッションアイテムのカテゴリ名が指定されたか否かを判断する。ステップＳ５０で肯定判断した場合には、ステップＳ６０へ進む。

ステップＳ６０では、ステップＳ４０で抽出した抽出画像と、ユーザによって指定されたカテゴリ名を、通信モジュール２０２を介して情報公開装置３００へ送信する。その後、ステップＳ７０へ進む。

ステップＳ７０では、制御装置２０４は、情報公開装置３００から抽出画像に基づいて選択されたファッションアイテム画像と関連情報を受信したか否かを判断する。ステップＳ７０で肯定判断した場合には、ステップＳ８０へ進む。

ステップＳ８０では、制御装置２０４は、受信したファッションアイテム画像と関連情報とをタッチパネル２０１に表示する。その後、ステップＳ９０へ進む。

ステップＳ９０では、制御装置２０４は、ユーザによってユーザ端末用アプリケーションの終了が指示されたか否かを判断する。ステップＳ９０で否定判断した場合には、ステップＳ１０へ戻る。これに対して、ステップＳ９０で肯定判断した場合には、処理を終了する。

図７は、情報公開装置３００で実行される処理の流れを示すフローチャートである。図７に示す処理は、ユーザ端末２００から上述した抽出画像を受信すると起動するプログラムとして、制御装置３０３によって実行される。なお、図７に示す処理においては、上述した画像データベースへのファッションアイテム画像の登録と関連情報の記録、および上述した色柄辞書の登録は、あらかじめ完了しているものとする。

ステップＳ１１０において、制御装置３０３は、上述したように、ユーザ端末２００から受信した抽出画像の色と柄を特定する。その後、ステップＳ１２０へ進む。

ステップＳ１２０では、制御装置３０３は、上述したように、ステップＳ１１０で特定した色と柄に対応する色柄辞書のフォルダを参照して、フォルダ内に記録されている複数パターンの色柄画像の中から、抽出画像の画像パターンに類似する色柄画像を選択する。その後、ステップＳ１３０へ進む。

ステップＳ１３０では、制御装置３０３は、上述したように、画像データベースに記録されているファッションアイテム画像のうち、関連情報に含まれるカテゴリ名が、抽出画像とともにユーザ端末２００から受信した指定カテゴリ名と一致するファッションアイテム画像の中から、色柄辞書を参照して選択した色柄画像に類似する色柄で構成される画像を選択する。その後、ステップＳ１４０へ進む。

ステップＳ１４０では、制御装置３０３は、上記処理により選択したファッションアイテム画像と、ファッションアイテム画像に関連付けられている関連情報とを、接続インターフェース３０２を介してユーザ端末２００へ送信する。その後、処理を終了する。

以上説明した本実施の形態によれば、以下のような作用効果を得ることができる。
（１）ユーザ端末２００では、制御装置２０４は、ユーザによる対象画像内の範囲指定を受け付け、対象画像内から指定を受け付けた範囲の画像を抽出し、抽出した抽出画像を情報公開装置３００へ送信するようにした。また、制御装置２０４は、情報公開装置３００から抽出画像に基づいて選択されたファッションアイテム画像を受信し、受信したファッションアイテム画像をタッチパネル２０１に表示するようにした。情報公開装置３００では、制御装置３０３は、ユーザ端末２００から抽出画像を受信し、受信した抽出画像の色と柄を特定し、特定した色と柄の組に対応する色柄辞書を参照して、色柄辞書に登録されている色柄画像の中から、抽出画像に類似する色柄画像を選択するようにした。そして、制御装置３０３は、ファッションアイテム画像が記録された画像データベースを参照して、選択した色柄画像に類似する色柄で構成されるファッションアイテム画像を選択し、選択したファッションアイテム画像をユーザ端末２００へ送信するようにした。これによって、ユーザの指定に基づいて抽出された抽出画像に色と柄が類似するファッションアイテムの画像をユーザに提供することができる。

（２）色柄辞書は、色と柄の組ごとに作成されたフォルダ内に、その色と柄に対応する色柄画像を記録することにより構成され、制御装置３０３は、抽出画像に基づいて特定した色と柄の組に対応するフォルダ内に記録されている色柄画像の中から、抽出画像に類似する色柄画像を選択するようにした。これによって、抽出画像の色と柄に基づいて、抽出画像とマッチングを行う色柄画像を特定のフォルダ内の画像に絞り込むことができるため、処理負荷を低減するとともに、処理を高速化することができる。

（３）ユーザ端末２００では、制御装置２０４は、ユーザによるファッションアイテムのカテゴリの指定を受け付け、抽出画像とともに指定されたカテゴリを示す情報を情報公開装置３００へ送信するようにした。情報公開装置３００では、制御装置３０３は、ユーザ端末２００から抽出画像とともにカテゴリ名を受信し、画像データベースを参照して、抽出画像とともに受信したカテゴリに属するファッションアイテム画像の中から、ファッションアイテム画像を選択するようにした。これによって、ユーザは、指定したカテゴリ名に属するファッションアイテムを対象として、自身が範囲指定した抽出画像に柄と色が類似するファッションアイテムの画像を閲覧することができる。

（４）制御装置３０３は、画像データベースに登録されているファッションアイテムの各画像と、抽出画像との類似度を示す指標値を算出し、指標値が所定の閾値以上であると判定したファッションアイテム画像を選択するようにした。これによって、類似度が所定の閾値以上であるファッションアイテム画像が複数ある場合には、複数のファッションアイテム画像をユーザに提供することができる。また、閾値の設定値を調整することにより、ユーザに提供するファッションアイテム画像の適切さを調整することが可能となる。

（５）情報公開装置３００では、制御装置３０３は、複数のファッションアイテム画像を選択した場合には、それら複数のファッションアイテム画像をユーザ端末２００へ送信するようにし、ユーザ端末２００では、制御装置２０４は、受信したファッションアイテム画像が複数の場合には、複数のファッションアイテム画像をタッチパネル２０１に一覧表示するようにした。これによって、抽出画像に類似するファッションアイテム画像が複数ある場合には、ユーザに複数のファッションアイテム画像を提供することができる。

（６）制御装置２０４は、対象画像をタッチパネル２０１上に表示し、タッチパネル２０１上でユーザのタッチ操作による範囲指定を受け付けるようにした。これによって、ユーザは、タッチパネル２０１に表示された対象画像上で、直感的に任意の範囲を指定することができる。

（７）画像データベースには、ファッションアイテムを販売する販売者によって、あらかじめファッションアイテム画像が登録されるようにした。これによって、ユーザは、ファッションアイテムの販売者によって登録されたファッションアイテム画像を閲覧することができる。

―変形例―
なお、上述した実施の形態の情報提供システム１００は、以下のように変形することもできる。
（１）上述した実施の形態では、ユーザは、ファッションアイテムのカテゴリを指定して、指定したカテゴリに属するファッションアイテム画像のみを閲覧できる例について説明した。しかしながら、ユーザは、ファッションアイテムのブランドを指定して、指定したブランドのファッションアイテム画像のみを閲覧できるようにしてもよい。この場合は、上述した関連情報にファッションアイテムのブランドを示すブランド情報を含めておく。ユーザ端末２００では、制御装置２０４は、ユーザからブランド情報の指定を受け付けて、抽出画像とともに情報公開装置へ送信する。情報公開装置３００では、制御装置３０３は、関連情報に含まれるブランド情報が、ユーザ端末２００から抽出画像とともに受信したブランド情報と一致するファッションアイテム画像を対象として、色柄画像と類似する画像を選択する。これによって、ユーザは、指定したブランドのファッションアイテムを対象として、自身が範囲指定した抽出画像に柄と色が類似するファッションアイテムの画像を閲覧することができる。また、ユーザは、ファッションアイテムを購入する際の予算を指定して、指定した予算内で購入できるファッションアイテム画像のみを閲覧できるようにしてもよい。この場合は、この場合は、ユーザ端末２００では、制御装置２０４は、ユーザから予算の指定を受け付けて、抽出画像とともに情報公開装置へ送信する。情報公開装置３００では、制御装置３０３は、関連情報に含まれる価格情報に基づいて特定される価格が、ユーザ端末２００から抽出画像とともに受信した予算内に収まるファッションアイテム画像を対象として、色柄画像と類似する画像を選択する。これによって、ユーザは、指定した予算内で購入可能なファッションアイテムを対象として、自身が範囲指定した抽出画像に柄と色が類似するファッションアイテムの画像を閲覧することができる。また、ユーザは、カテゴリ名、ブランド名、予算の２つ以上を組み合わせて指定できるようにしてもよい。

（２）上述した実施の形態では、ユーザは、ファッションアイテムのカテゴリを指定して、指定したカテゴリに属するファッションアイテム画像のみを閲覧できる例について説明した。しかしながら、ユーザは、カテゴリを指定せずにファッションアイテム画像を閲覧できるようにしてもよい。この場合は、ユーザ端末２００の制御装置２０４は、抽出画像を情報公開装置３００へ送信し、情報公開装置３００では、制御装置３０３は、画像データベースに記録されている全てのファッションアイテム画像を対象として、色柄画像と類似するファッションアイテム画像を選択するようにすればよい。

（３）上述した実施の形態における情報提供システム１００では、ファッションアイテムの画像公開を希望する公開者、例えばファッションアイテムを販売する販売者は、自身のショップ情報、例えばショップ名、住所、電話番号、営業時間などを記録装置３０４に記録できるようにしてもよい。この場合、ユーザ端末２００では、制御装置２０４は、情報公開装置３００から受信したファッションアイテム画像をタッチパネル２０１に表示した後に、ユーザによって、表示中のファッションアイテムを販売するショップの情報を表示するように指示された場合には、情報公開装置３００からショップの情報を取得して、タッチパネル２０１に表示するようにしてもよい。これによって、ユーザは、ファッションアイテムを販売するショップの情報を把握することができる。さらに、販売者は、ユーザにショップ情報を知ってもらうことによって、ユーザの来店が期待できるという効果も得ることができる。

（４）上述した実施の形態では、色柄辞書は、図４に示すフォルダ構成とする例について説明した。しかしながら、色柄辞書のフォルダ構成はこれに限定されない。例えば、図８に示すように、上位階層のフォルダとして柄名のフォルダを設け、各柄名のフォルダの下位階層に色名のフォルダを設ける構成としてもよい。図８に示す例では、「ゼブラ」フォルダ内の「ブラック」フォルダ８ａに、図５に示した黒色のゼブラ柄で構成される複数パターンの色柄画像が記録されることになる。また、上位階層のフォルダとして色名のフォルダを設け、各色名のフォルダの下位階層に柄名のフォルダを設ける構成としてもよい。

（５）上述した実施の形態では、ユーザ端末２００では、制御装置２０４は、情報公開装置３００から抽出画像に基づいて選択されたファッションアイテム画像と関連情報を受信した場合には、受信したファッションアイテム画像と関連情報とをタッチパネル２０１に表示する例について説明した。しかしながら、制御装置２０４は、情報公開装置３００から抽出画像に基づいて選択されたファッションアイテム画像と関連情報を受信した場合には、ファッションアイテム画像のみをタッチパネル２０１に表示し、ユーザから関連情報の表示指示を受け付けた場合に、関連情報を表示するようにしてもよい。

（６）上述した実施の形態では、ユーザ端末２００では、制御装置２０４は、情報公開装置３００から抽出画像に基づいて選択されたファッションアイテム画像と関連情報を受信した場合には、受信したファッションアイテム画像と関連情報とをタッチパネル２０１に表示するようにした。このとき、ユーザは、表示されたファッションアイテム画像の中に気に入った画像がある場合には、その画像をお気に入りとして保存できるようにしてもよい。この場合、制御装置２０４は、ユーザによって特定のファッションアイテム画像に対するお気に入り登録指示を受け付けた場合には、そのファッションアイテム画像をメモリ内のお気に入りフォルダに記録するようにしてもよい。これによって、ユーザは、ファッションアイテム画像をお気に入り登録して管理することができる。

（７）上述した実施の形態では、制御装置３０３は、ユーザ端末２００から受信した抽出画像の色と柄を特定し、色柄辞書を参照して抽出画像の画像パターンに類似する色柄画像を選択するようにした。そして、制御装置３０３は、画像データベースに記録されているファッションアイテム画像のうち、関連情報に含まれるカテゴリ名が、抽出画像とともにユーザ端末２００から受信したカテゴリ名と一致するファッションアイテム画像の中から、色柄辞書を参照して選択した色柄画像に類似する色柄で構成されるファッションアイテム画像を選択して、ユーザ端末２００へ送信する例について説明した。この場合、ユーザは、情報公開装置３００で選択されたファッションアイテム画像の中に、ユーザの要望を満たす画像が無い場合には、色を変更してファッションアイテム画像の再検索を要求できるようにしてもよい。

例えば、ユーザは、タッチパネル２０１にファッションアイテム画像が一覧表示された後に、タッチパネル２０１を操作して、色の変更指示を行うことができる。色の変更方法としては、色柄辞書に登録されている色をタッチパネル２０１上に一覧表示し、ユーザが任意の色を選択できるようにする方法などを採用すればよい。制御装置２０４は、ユーザによって変更する色が選択された場合には、その色を示す情報を情報公開装置３００へ送信して、ファッションアイテム画像の再検索を指示する。情報公開装置３００では、制御装置３０３は、上述した処理で特定した、ユーザ端末２００から受信した抽出画像の色と柄のうち、色を、新たにユーザ端末２００から受信した色に変更する。制御装置３０３は、色柄辞書を参照して、上述した処理で特定した抽出画像の柄と、変更した色との組み合わせによる画像パターンに類似する色柄画像を選択する。その後の画像データベースを参照したファッションアイテム画像の選択方法は、上述した実施の形態と同様とする。これによって、ユーザは、抽出画像に基づいて表示されたファッションアイテム画像の中に要望を満たすものが無い場合には、色を変えてファッションアイテム画像を再検索することができる。

（８）上述した実施の形態では、ユーザ端末２００は、通話機能を備えたスマートフォンを想定しているため、マイクとスピーカーとを備えるが、ユーザ端末２００として通話機能を備えない携帯情報端末を用いる場合には、マイクとスピーカーは搭載されない。

（９）上述した実施の形態では、情報公開装置３００は、操作者が操作するための操作部材３０１を備えるが、通信回線を介してリモート操作を行う場合には、必ずしも操作部材３０１は備える必要がない。

なお、本発明の特徴的な機能を損なわない限り、本発明は、上述した実施の形態における構成に何ら限定されない。また、上述の実施の形態と複数の変形例を組み合わせた構成としてもよい。

１００情報提供システム
２００ユーザ端末
２０１タッチパネル
２０２通信モジュール
２０３マイク
２０４制御装置
２０５スピーカー
２０６カメラ
３００情報公開装置
３０１操作部材
３０２接続インターフェース
３０３制御装置
３０４記録装置

Claims

ユーザが所持するユーザ端末と、前記ユーザ端末に情報を公開する情報公開装置とを通信回線を介して接続した情報提供システムであって、
前記ユーザ端末は、
取得した画像を対象画像として、前記ユーザによる前記対象画像内の範囲指定を受け付ける範囲指定受付手段と、
前記対象画像内から、前記範囲指定受付手段によって指定を受け付けた範囲の画像を抽出し、抽出した抽出画像を前記情報公開装置へ送信する抽出画像送信手段と、
前記情報公開装置から前記抽出画像送信手段で送信した前記抽出画像に基づいて選択されたファッションアイテム画像を受信するファッションアイテム画像受信手段と、
前記ファッションアイテム画像受信手段によって受信された前記ファッションアイテム画像を表示装置に表示する表示手段とを備え、
前記情報公開装置は、
前記ユーザ端末から前記抽出画像を受信する抽出画像受信手段と、
前記抽出画像受信手段によって受信された前記抽出画像の色と柄を特定する特定手段と、
前記特定手段によって特定された色と柄の組に対応する色柄辞書を参照して、前記色柄辞書に登録されている色柄画像の中から、前記抽出画像に類似する色柄画像を選択する色柄画像選択手段と、
ファッションアイテム画像が記録された画像データベースを参照して、前記色柄画像選択手段によって選択された前記色柄画像に類似する色柄で構成されるファッションアイテム画像を選択するファッションアイテム画像選択手段と、
前記ファッションアイテム画像選択手段によって選択された前記ファッションアイテム画像を、前記ユーザ端末へ送信するファッションアイテム画像送信手段とを備えることを特徴とする情報提供システム。
請求項１に記載の情報提供システムにおいて、
前記色柄辞書は、色と柄の組ごとに作成されたフォルダ内に、その色と柄に対応する色柄画像を記録することにより構成され、
前記色柄画像選択手段は、前記特定手段によって特定された色と柄の組に対応するフォルダ内に記録されている色柄画像の中から、前記抽出画像に類似する色柄画像を選択することを特徴とする情報提供システム。
請求項１または２に記載の情報提供システムにおいて、
前記ユーザ端末は、
ユーザによる前記ファッションアイテムのカテゴリの指定を受け付けるカテゴリ指定受付手段をさらに備え、
前記抽出画像送信手段は、前記抽出画像とともに、前記カテゴリ指定受付手段によって指定を受け付けた前記カテゴリを示す情報を前記情報公開装置へ送信し、
前記情報公開装置では、前記画像データベースに記録された前記ファッションアイテム画像には、前記カテゴリを示す情報が関連付けられており、
前記抽出画像受信手段は、前記ユーザ端末から前記抽出画像とともに前記カテゴリを示す情報を受信し、
前記ファッションアイテム画像選択手段は、前記画像データベースを参照して、前記抽出画像とともに受信された前記カテゴリに属する前記ファッションアイテム画像の中から、前記ファッションアイテム画像を選択することを特徴とする情報提供システム。
請求項１〜３のいずれか一項に記載の情報提供システムにおいて、
前記ユーザ端末は、
ユーザによる色の変更を受け付ける色変更受付手段と、
前記色変更受付手段で受け付けた変更後の色を示す変更後色情報を前記情報公開装置へ送信する変更後色情報送信手段をさらに備え、
前記情報公開装置は、
前記ユーザ端末から前記変更後色情報を受信する変更後色情報受信手段と、
前記特定手段によって特定された色と柄のうち、色を前記変更後色情報受信手段によって受信された前記変更後色情報によって特定される色に変更する色変更手段とをさらに備え、
前記色柄画像選択手段は、前記特定手段によって特定された柄と、前記色変更手段によって変更された色との組に対応する色柄辞書を参照して、前記色柄辞書に登録されている色柄画像の中から、前記抽出画像に類似する色柄画像を選択することを特徴とする情報提供システム。
請求項１〜４のいずれか一項に記載の情報提供システムにおいて、
前記ファッションアイテム画像選択手段は、前記画像データベースに登録されているファッションアイテムの各画像と、前記抽出画像との類似度を示す指標値を算出し、前記指標値が所定の閾値以上であると判定したファッションアイテム画像を選択することを特徴とする情報提供システム。
請求項１〜５のいずれか一項に記載の情報提供システムにおいて、
前記ファッションアイテム画像送信手段は、前記ファッションアイテム画像選択手段によって複数の前記ファッションアイテム画像が選択された場合には、それら複数の前記ファッションアイテム画像を前記ユーザ端末へ送信し、
前記表示手段は、前記ファッションアイテム画像受信手段によって受信された前記ファッションアイテム画像が複数の場合には、複数の前記ファッションアイテム画像を前記表示装置に一覧表示することを特徴とする情報提供システム。
請求項１〜６のいずれか一項に記載の情報提供システムにおいて、
前記表示装置はタッチパネルであって、
前記範囲指定受付手段は、前記対象画像を前記タッチパネル上に表示し、前記タッチパネル上で前記ユーザのタッチ操作による範囲指定を受け付けることを特徴とする情報提供システム。
請求項１〜７のいずれか一項に記載の情報提供システムにおいて、
前記画像データベースには、ファッションアイテムを販売する販売者によって、あらかじめ前記ファッションアイテム画像が登録されていることを特徴とする情報提供システム。
ユーザが所持するユーザ端末から、対象画像から前記ユーザによって指定された範囲の画像を抽出した抽出画像を受信する抽出画像受信手段と、
前記抽出画像受信手段によって受信された前記抽出画像の色と柄を特定する特定手段と、
前記特定手段によって特定された色と柄の組に対応する色柄辞書を参照して、前記色柄辞書に登録されている色柄画像の中から、前記抽出画像に類似する色柄画像を選択する色柄画像選択手段と、
ファッションアイテム画像が記録された画像データベースを参照して、前記色柄画像選択手段によって選択された前記色柄画像に類似する色柄で構成されるファッションアイテム画像を選択するファッションアイテム画像選択手段と、
前記ファッションアイテム画像選択手段によって選択された前記ファッションアイテム画像を、前記ユーザ端末へ送信するファッションアイテム画像送信手段とを備えることを特徴とする情報公開装置。
請求項９に記載の情報公開装置において、
前記色柄辞書は、色と柄の組ごとに作成されたフォルダ内に、その色と柄に対応する色柄画像を記録することにより構成され、
前記色柄画像選択手段は、前記特定手段によって特定された色と柄の組に対応するフォルダ内に記録されている色柄画像の中から、前記抽出画像に類似する色柄画像を選択することを特徴とする情報公開装置。
請求項９または１０に記載の情報公開装置において、
前記画像データベースには、ファッションアイテムのカテゴリに分類されて前記ファッションアイテム画像が記録されており、
前記抽出画像受信手段は、前記抽出画像とともに、ユーザによって指定された前記ファッションアイテムのカテゴリを示す情報を前記ユーザ端末から受信し、
前記ファッションアイテム画像選択手段は、前記画像データベースを参照して、前記抽出画像とともに受信された前記カテゴリに属する前記ファッションアイテム画像の中から、前記ファッションアイテム画像の選択することを特徴とする情報公開装置。
請求項９〜１１のいずれか一項に記載の情報公開装置において、
前記ユーザ端末から、ユーザによって変更された色を示す変更後色情報を受信する変更後色情報受信手段と、
前記特定手段によって特定された色と柄のうち、色を前記変更後色情報受信手段によって受信された前記変更後色情報によって特定される色に変更する色変更手段とをさらに備え、
前記色柄画像選択手段は、前記特定手段によって特定された柄と、前記色変更手段によって変更された色との組に対応する色柄辞書を参照して、前記色柄辞書に登録されている色柄画像の中から、前記抽出画像に類似する色柄画像を選択することを特徴とする情報公開装置。
請求項９〜１２のいずれか一項に記載の情報公開装置において、
前記ファッションアイテム画像選択手段は、前記画像データベースに登録されているファッションアイテムの各画像と、前記抽出画像との類似度を示す指標値を算出し、前記指標値が所定の閾値以上であると判定したファッションアイテム画像を選択することを特徴とする情報公開装置。
請求項９〜１３のいずれか一項に記載の情報公開装置において、
前記ファッションアイテム画像送信手段は、前記ファッションアイテム画像選択手段によって複数の前記ファッションアイテム画像が選択された場合には、それら複数の前記ファッションアイテム画像を前記ユーザ端末へ送信することを特徴とする情報公開装置。
請求項９〜１４のいずれか一項に記載の情報公開装置において、
前記画像データベースには、ファッションアイテムを販売する販売者によって、あらかじめ前記ファッションアイテム画像が登録されていることを特徴とする情報公開装置。