JP2011060005A

JP2011060005A - ネットショッピング仮想試着システム

Info

Publication number: JP2011060005A
Application number: JP2009209208A
Authority: JP
Inventors: Kazunori Komatsuno; 一紀小松野
Original assignee: Hitachi Solutions Ltd
Current assignee: Hitachi Solutions Ltd
Priority date: 2009-09-10
Filing date: 2009-09-10
Publication date: 2011-03-24

Abstract

【課題】ブラウザ上で動作するアプリケーションに表示された映像読取装置（webカメラ等）の映像上で、商品の仮想試着を行うことができ、かつ携帯電話での簡単な操作だけで映像の縮小拡大、商品の切り替えなどを行いながら試着をすることができ、かつショッピングの楽しさを感じられるネットショッピング仮想試着システムを提供する。
【解決手段】商品ＤＢを備えた仮想試着システム管理サーバーを設け、利用者端末からインターネットを介してサーバーと接続し、利用者端末からの要求に応じて商品情報を取得し、利用者端末上のアプリケーションに映像読取装置から読込んだ映像と商品画像を合成した映像を表示する。
【選択図】図１

Description

本発明は、AR（Augmented Reality）技術を用いて、ブラウザ上で動作するアプリケーションに表示された映像読取装置（webカメラ等）の映像上で仮想試着を行うことができるネットショッピング仮想試着システムに関するものである。

現在、インターネット上では多数の仮想商店が開設され、ネットショッピングへの支出総額及び件数は増加の一途をたどっている。商品や役務を購入しようとする者は、パーソナルコンピュータから仮想商店のwebサイトにアクセスし、展示されている商品の中から所望のものを選択して、支払や配送などの購入手続を踏むことにより購入を行っている。

一方、ネットショッピングによる衣類やファッショングッズなどの商品の購入については、「試着ができない」、「ショッピングの楽しさが感じられない」などの理由で敬遠される傾向にある。これらの問題の解決のため、カメラから読込んだ動画像上で商品の仮想試着を行えるシステムも提案されている。

特許文献１の仮想試着装置は、試着者の動画像をカメラで撮影して取得する手段と、試着者の三次元体型データ及び様々な姿勢データから動画像に映る試着者の姿勢を推定する姿勢推定手段と、時系列の推定姿勢から滑らかで自然な姿勢時系列データを生成する姿勢修正手段と、衣服の動きを計算する衣服運動生成手段と、対象者が衣服を試着した状態を表示する表示手段とから構成されている。この表示を視ることで、より現実に近い試着をシミュレートすることを可能としている。

特開２００６−２４９６１８号公報

しかし、特許文献１の装置では、商品の切り替えや動画像の縮小拡大を、試着者がその場で簡単にできないという問題がある。

よって、本発明の目的は、ブラウザ上で動作するアプリケーションに表示された映像読取装置（webカメラ等）の映像上で、商品の仮想試着を行うことができ、かつ、携帯電話等の携帯端末による簡単な操作だけで商品の切り替え及び映像の縮小拡大を行いながら仮想試着することができ、それによりネットショッピングにおいてもショッピングの楽しさを感じられるようにしたネットショッピング仮想試着システムを提供することにある。

上記目的を達成するために、本発明のネットショッピング仮想試着システムは、以下の構成を有する。
仮想試着システム管理サーバーと、インターネットに接続され前記管理サーバーからダウンロードした携帯端末用アプリケーションにより動作する利用者の携帯端末と、インターネットに接続され前記管理サーバーからダウンロードした利用者端末用アプリケーションにより動作する利用者端末と、前記利用者端末に接続された映像読取装置とを有するネットショッピング仮想試着システムにおいて、前記仮想試着システム管理サーバーは、商品一覧情報と、各商品についての選択用商品画像、試着用商品画及びマーカー画像とを商品ＤＢに予め格納する手段と、前記利用者端末からの商品一覧情報取得要求に応じて、前記商品ＤＢから前記商品一覧情報と、各商品についての少なくとも試着用商品画像とを取得して該利用者端末へ送信する手段と、前記携帯端末からの商品一覧情報取得要求に応じて、前記商品ＤＢから前記商品一覧情報と、各商品についての少なくとも選択用商品画像及びマーカー画像とを取得して該携帯端末へ送信する手段と、を備え、前記携帯端末は、取得した商品一覧情報と各商品についての選択用商品画像とを表示し、いずれかの商品を利用者に選択させる手段と、選択された商品に対応するマーカー画像を表示する手段と、を備え、前記映像読取装置は、利用者と、該利用者が持つ前記携帯端末に表示された前記マーカー画像とを含む映像を読み込み、読み込んだ映像を前記利用者端末へ送信する手段を備え、前記利用者端末は、前記映像読取装置から取得した映像の中の前記マーカー画像に対応する試着用商品画像を３Ｄ画像に変換し、該映像上の該マーカー画像の位置に、変換した該３Ｄ画像を出力して表示する手段を備えたことを特徴とする。
また、上記システムにおいて、前記携帯端末は、縮小または拡大のためのボタンを表示し、いずれかのボタンを利用者に選択させる手段と、選択されたボタンに対応する縮小または拡大を表すマーカー画像を表示する手段と、を備え、前記利用者端末は、前記映像読取装置から取得した映像の中の前記マーカー画像に対応して、該映像に対して縮小または拡大の処理を行う手段を備えることが、さらに好適である。

本発明によれば、利用者はネットショッピングで衣類やファッショングッズを購入する際に仮想試着を行うことができ、かつ携帯端末による簡単な操作で商品の選択及び映像の縮小拡大を行うことができる。それにより、実際に店舗でショッピングをするのと同様の楽しさを味わうことができ、結果としてネットショッピングによる衣類・ファッショングッズの販売を促進することができる。

本発明の一実施例を示すシステム構成図である。本発明による商品データベースに格納されているデータの構成図である。本発明の一実施例を示すシーケンス図である。図３Ａに続く、本発明の一実施例を示すシーケンス図である。本発明による利用者端末用アプリケーションの一例を示した図である。本発明による携帯端末用アプリケーションの一例を示した図である。本発明による携帯端末用アプリケーション上で商品に対応するマーカー画像を表示させた一例である。

以下、本発明の実施形態を、一実施例を示した図面を参照して詳細に説明する。
図１は、本発明によるネットショッピング仮想試着システムの一実施例を示すシステム構成図である。
利用者端末１０１（パーソナルコンピュータ等）、仮想試着システム管理サーバー１０４、利用者の携帯端末１０３（携帯電話等）、インターネット１０５、映像読取装置１０２（webカメラ等）を有し、利用者端末１０１と、仮想試着システム管理サーバー１０４と、利用者の携帯端末１０３とは、インターネット１０５に接続されている。

仮想試着システム管理サーバー１０４は、ＣＰＵ、メモリ及び外部記憶装置等（図示せず）を具備する適宜のコンピュータに対し本システムの各機能を実現するためのアプリケーションを導入することにより実施される。これらのアプリケーションには、少なくとも、利用者端末用アプリケーション１０６、処理部（サーバーアプリケーション）１０７及び携帯端末用アプリケーション１０８が含まれる。これらのアプリケーションは、いわゆるリッチクライアントアプリケーションと呼ばれているもので、必要に応じて端末にダウンロードされ、実行画面上で動的に表示を変えることができる。例えば、携帯端末用アプリケーションの場合はFlash（登録商標）などで作成されている。

仮想試着システム管理サーバー１０４には、販売可能な商品の詳細情報を格納した商品ＤＢ１０９が接続されている。商品ＤＢ１０９は、商品画像を格納した商品画像格納フォルダ１１０及びマーカー画像を格納したマーカー画像格納フォルダ１１１と連係している。なお、商品画像には、選択用商品画像と試着用商品画像がある。

利用者端末１０１は、インターネット１０５を介して仮想試着システム管理サーバー１０４にアクセスし、利用者端末用アプリケーション１０６である利用者端末用アプリケーション１０６をダウンロードし、ブラウザ上に表示する。

利用者端末１０１には、利用者を映すための映像読取装置１０２（webカメラ等）が接続されている。

利用者端末用アプリケーション１０６は、利用者端末１０１上のブラウザで動作する。利用者端末用アプリケーション１０６は、処理部１０７を介して、商品ＤＢ１０９に格納された販売可能な商品の詳細情報から販売可能な商品の一覧情報を取得して表示する機能と、商品ＤＢ１０９に格納された販売可能な商品の詳細情報から商品画像ファイル名（試着用）を取得する機能と、取得した商品画像ファイル名に対応した試着用商品画像を商品画像格納フォルダ１１０から取得する機能と、商品の一覧情報の中から利用者が選択した商品の試着用商品画像を３Ｄ画像に変換する機能と、映像読取装置１０２から受信した現実の映像と３Ｄ画像とを合成して表示する機能とを有する。
利用者端末用アプリケーション１０６における映像の合成表示機能は、マーカー画像を用いたAR（Augmented Reality：拡張現実）技術による。マーカー画像は、現実の映像の中における、３Ｄ画像を合成する位置を示すマーカーとして用いる。

携帯端末１０３は、インターネット１０５を介して仮想試着システム管理サーバー１０４上にある携帯端末用アプリケーション１０８をダウンロードし、画面上に表示する。

携帯端末用アプリケーション１０８は、携帯端末１０３上のブラウザで動作する。携帯端末用アプリケーション１０８は、処理部１０７を介して、商品ＤＢ１０９に格納された販売可能な商品の詳細情報から販売可能な商品の一覧情報を取得して表示する機能と、商品ＤＢ１０９に格納された販売可能な商品の詳細情報から商品画像ファイル名（選択用）及び対応マーカーファイル名を取得する機能と、取得した商品画像ファイル名に対応した選択用商品画像を商品画像格納フォルダ１１０から取得して表示する機能と、取得した対応マーカーファイル名に対応したマーカー画像をマーカー画像格納フォルダ１１１から取得して表示する機能とを有する。

さらに、携帯端末用アプリケーション１０８は、商品一覧・縮小拡大選択画面と、マーカー表示画面とを備えている。ここで図５及び図６を参照する。図５は、利用者の携帯端末１０３に、携帯端末用アプリケーション１０８で商品一覧（選択用商品画像を含む）と、縮小及び拡大のためのボタンを表示させた状態を示す一例である。図６は、利用者のもつ携帯端末１０３に、携帯端末用アプリケーション１０８でマーカー画像を表示させた状態を示す一例である。マーカー画像は、例えばＱＲコード（登録商標）である。

処理部１０７は、利用者端末用アプリケーション１０６または携帯端末アプリケーション１０８からの要求に応じて、商品ＤＢ１０９、商品画像格納フォルダ１１０またはマーカー画像格納フォルダ１１１から上記のような所定の情報または画像を取得する機能を有する。

図２は、商品ＤＢ１０９の構成の一例を示したものである。
商品リストテーブル２０１は、ネットショッピングによって販売可能な商品の一覧情報を格納するテーブルであって、図示のように、商品を特定する「商品ＩＤ」、その商品の販売可否を示す「販売可否」から構成される。

商品テーブル２０２は、ネットショッピングによって販売可能な商品の詳細情報を格納するテーブルであって、図示のように、商品を特定する「商品ＩＤ」（キーとして商品リストテーブル２０１とリンク）、その名称である「商品名」、その価格を示す「価格」、その商品を利用者端末用アプリケーション１０６にて表示するために使用する画像の名称である「商品画像ファイル名（試着用）」、その商品を携帯端末用アプリケーション１０８にて表示するために使用する画像の名称である「商品画像ファイル名（選択用）」、その商品の説明を表す「商品説明」、その商品に対応するマーカー画像の名称である「対応マーカーファイル名」から構成される。なお、選択用及び試着用の商品画像ファイルは、図１に示した商品画像格納フォルダ１１０に格納されており、マーカー画像ファイルは、図１に示したマーカー画像格納フォルダ１１１に格納されている。

次に、以上のように構成されたネットショッピング仮想試着システムの動作を説明する。
図３Ａ及び図３Ｂは、本発明の一実施例を示すシーケンス図である。
先ず、図３Ａを参照する。利用者は携帯端末１０３を用い、インターネット１０５を介して仮想試着システム管理サーバー１０４にアクセスし、携帯端末用アプリケーション１０８を取得する（Ｓ３０１）。携帯端末１０３は画面上に携帯端末用アプリケーション１０８を表示する（Ｓ３０２）。

利用者端末１０１上に表示された利用者端末用アプリケーション１０６（予め利用者端末１０１にダウンロードされている）は、販売可能な商品の一覧情報取得要求を仮想試着システム管理サーバー１０４の処理部１０７に対して行う（Ｓ３０３）。

処理部１０７は、商品ＤＢ１０９から販売可能な商品の一覧情報を取得する。図２の商品リストテーブル２０１の「販売可否」が”TRUE”である商品ＩＤをキーとして、商品テーブル２０２から該当する商品ＩＤをもつ商品の詳細情報を抽出することにより、商品の一覧情報を取得する（Ｓ３０４）。次に、処理部１０７は、商品ＤＢ１０９の商品テーブル２０２から取得した「商品画像ファイル名」を基に、商品画像格納フォルダ１１０から選択用商品画像及び試着用商品画像を取得する（Ｓ３０５）。処理部１０７は、取得した商品の一覧情報並びに選択用商品画像及び試着用商品画像を利用者端末アプリケーションへ送信する。
利用者端末用アプリケーション１０６は、処理部１０７から受信した商品の一覧情報を画面上に表示する（Ｓ３０６）。

携帯端末１０３上の携帯端末用アプリケーション１０８は、販売可能な商品一覧情報取得要求を仮想試着システム管理サーバー１０４の処理部１０７に対して行う（Ｓ３０７）。

処理部１０７は、上記ステップ３０４と同様に、商品ＤＢ１０９から販売可能な商品の一覧情報を取得する（Ｓ３０８）。次に、処理部１０７は、商品ＤＢ１０９の商品テーブル２０２から取得した「商品画像ファイル名」を基に、商品画像フォルダ１１０から選択用商品画像を取得し（Ｓ３０９）、「マーカーファイル名」を基に、マーカー画像格納フォルダ１１１からマーカー画像を取得する（Ｓ３１０）。処理部１０７は、取得した商品の一覧情報並びに選択用商品画像及びマーカー画像を携帯端末アプリケーション１０８へ送信する。

続いて、図３Ｂを参照する。映像読取装置１０２は、永続的に、利用者と、利用者の持つ携帯端末１０３が表示する携帯端末用アプリケーション１０８に表示されたマーカー画像とを含む映像を読み取り、利用者端末用アプリケーション１０１へ送信する（S３１１、S３１２）。「永続的に」とは、一定サイクルでこの処理を繰り返すことを意味する。これにより、利用者端末用アプリケーション１０１は、実質的にリアルタイムで、利用者とマーカー画像とを含む現実の映像を取得することになる。

利用者は、携帯端末１０３上の携帯端末用アプリケーション１０８に表示されている商品一覧（選択用商品画像を含む）の中から試着したい商品を選択する。これにより、携帯端末用アプリケーション１０８は携帯端末１０３上に試着を行う商品に対応するマーカー画像を表示する（S３１３）。利用者端末用アプリケーション１０６は、映像読取装置が読み取った映像の中のマーカー画像に対応する試着用商品画像を３Ｄ画像に変換し、映像読取装置１０２が読取った映像上の当該マーカー画像の位置に、変換した３Ｄ画像を出力して表示する（S３１４）。別の商品を仮想試着したい場合は、Ｓ３１３に戻り、別の商品を選択すればよい。

利用者は、利用者端末用アプリケーション１０６に表示されている映像を縮小または拡大したいときは、携帯端末用アプリケーション１０８に表示されている縮小または拡大のためのボタンを選択する。これにより、携帯端末用アプリケーション１０８は、携帯端末１０３上に縮小または拡大を表すマーカー画像を表示する（Ｓ３１５）。利用者端末用アプリケーション１０６は、携帯端末１０３上に表示されているマーカー画像に対応する処理（縮小または拡大）を映像読取装置１０２から読込んだ映像に対して行う（Ｓ３１６）。

図４は利用者端末用アプリケーション１０６の表示画面の一例を示したものである。
利用者は、ブラウザ上の商品リスト４０１もしくは携帯端末用アプリケーション上の商品一覧の中から試着をしたい商品を選択する。ブラウザ上には映像読取装置１０２から読込んだ映像４０２と、利用者が選択した商品の試着用商品画像を変換した３Ｄ画像４０３とが合成されて表示される。利用者が選択した商品の３Ｄ画像４０３は、映像読取装置１０２から読込んだ映像上の携帯端末１０３が表示している携帯端末用アプリケーション１０８で表示したマーカー画像の位置に表示される。

１０１…利用者端末（パソコン等）、１０２…映像読取装置（webカメラ等）、１０３…携帯端末（携帯電話等）、１０４…仮想試着システム管理サーバー、１０５…インターネット、１０６…利用者端末用アプリケーション、１０７…処理部（サーバーアプリケーション）、１０８…携帯端末用アプリケーション、１０９…商品ＤＢ、１１０…商品画像格納フォルダ、１１１…マーカー画像格納フォルダ、２０１…商品リストテーブル、２０２…商品テーブル、４０１…商品リスト、４０２…映像読取装置から読込んだ映像、４０３…利用者が選択した商品の３Ｄ画像

Claims

仮想試着システム管理サーバーと、インターネットに接続され前記管理サーバーからダウンロードした携帯端末用アプリケーションにより動作する利用者の携帯端末と、インターネットに接続され前記管理サーバーからダウンロードした利用者端末用アプリケーションにより動作する利用者端末と、前記利用者端末に接続された映像読取装置とを有するネットショッピング仮想試着システムにおいて、
前記仮想試着システム管理サーバーは、
商品一覧情報と、各商品についての選択用商品画像、試着用商品画及びマーカー画像とを商品ＤＢに予め格納する手段と、
前記利用者端末からの商品一覧情報取得要求に応じて、前記商品ＤＢから前記商品一覧情報と、各商品についての少なくとも試着用商品画像とを取得して該利用者端末へ送信する手段と、
前記携帯端末からの商品一覧情報取得要求に応じて、前記商品ＤＢから前記商品一覧情報と、各商品についての少なくとも選択用商品画像及びマーカー画像とを取得して該携帯端末へ送信する手段と、を備え、
前記携帯端末は、
取得した商品一覧情報と各商品についての選択用商品画像とを表示し、いずれかの商品を利用者に選択させる手段と、
選択された商品に対応するマーカー画像を表示する手段と、を備え、
前記映像読取装置は、
利用者と、該利用者が持つ前記携帯端末に表示された前記マーカー画像とを含む映像を読み込み、読み込んだ映像を前記利用者端末へ送信する手段を備え、
前記利用者端末は、
前記映像読取装置から取得した映像の中の前記マーカー画像に対応する試着用商品画像を３Ｄ画像に変換し、該映像上の該マーカー画像の位置に、変換した該３Ｄ画像を出力して表示する手段を備えたことを特徴とするネットショッピング仮想試着システム。
前記携帯端末は、
縮小または拡大のためのボタンを表示し、いずれかのボタンを利用者に選択させる手段と、
選択されたボタンに対応する縮小または拡大を表すマーカー画像を表示する手段と、を備え、
前記利用者端末は、
前記映像読取装置から取得した映像の中の前記マーカー画像に対応して、該映像に対して縮小または拡大の処理を行う手段を備えることを特徴とする請求項１に記載のネットショッピング仮想試着システム。