JP2014215929A - 商品情報サーバ、ユーザ端末、商品情報提供方法、商品情報サーバ用プログラム - Google Patents
商品情報サーバ、ユーザ端末、商品情報提供方法、商品情報サーバ用プログラム Download PDFInfo
- Publication number
- JP2014215929A JP2014215929A JP2013094851A JP2013094851A JP2014215929A JP 2014215929 A JP2014215929 A JP 2014215929A JP 2013094851 A JP2013094851 A JP 2013094851A JP 2013094851 A JP2013094851 A JP 2013094851A JP 2014215929 A JP2014215929 A JP 2014215929A
- Authority
- JP
- Japan
- Prior art keywords
- product
- image
- product information
- user terminal
- information server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
-
- G06F17/30—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
Abstract
【課題】ユーザが商品の画像を撮影することで、商品情報を取得するとともに容易に購買行動を行うことを可能にする。【解決手段】ユーザ端末10が商品の実物、又は刊行物等に掲載された商品画像を撮影し、商品情報データベース250と商品画像データベース251を備える商品情報サーバ200に送信することで、商品情報の抽出を行い、当該商品の購入を容易に可能とするとともに、商品の価額についても、購入申し込み数に基づいて即時的に算出することを可能とする。【選択図】図1
Description
本発明は、カメラで撮影した商品の情報を提供するとともに、商品の価額を即時的に算出する商品情報サーバ、ユーザ端末、商品情報提供方法、商品情報サーバ用プログラムに関する。
近年、公衆回線網に接続された携帯端末をWebサーバ等と接続することで、ユーザに様々なサービスが提供されている。特に、スマートフォン(高機能携帯電話)の登場により、従来、パソコンに対して行われていた高度なサービスを、携帯電話で行うことが可能になってきた。
更に、昨今では公衆回線網上で商取引を行う環境が整備されており、個人のユーザであっても、電子マネーやクレジットカードを利用することで、店舗まで出向かずに電子的に買物を行う電子商取引(Electronic commerce、EC)を行うことが可能となっている。
その一方で、ユーザがある商品の購入を希望しても、その商品を購入できるECサイトを探せなかったり、ECサイトを発見してもECサイト内で膨大な商品群から目当ての商品を探せなかったりする場合に、販売の機会を逸してしまうという問題があった。
このような課題に対して、所定の範囲の商品に付されている商品ラベルを撮影することにより、当該商品を特定し、その商品属性をユーザに提供可能な商品識別装置が開示されている。
特許文献1では、商品識別装置が、識別したい商品ラベルの画像を受け付け、その画像を所定の分割ルールで所定の回数だけ分割し、分割した複数の商品ラベル分割画像の中から1つの商品ラベル分割画像を所定の選択ルールで選択し、商品属性データベースから最も類似する商品ラベル分割画像を抽出し、その抽出した商品ラベル分割画像に関連付けて記憶された商品の属性を抽出することで、商品の識別を行う手法が開示されている。
しかしながら、特許文献1に記載の手法では、識別する商品には所定のルールに従った商品ラベルが付されていることが必要であって、例えば店舗外で見かけた商品等、商品ラベルが外されている場合には、識別を行うことができないという問題がある。
そこで本発明の発明者は、商品そのものの画像を撮影し、画像処理を行う事で商品を同定できることに着目するとともに、洋服を初めとする決まった形を持たない商品については、商品の外観が予め画像化された印刷物や画像データを撮影することで、商品を間接的に撮影し、識別精度を向上できる点に着目した。
更に発明者は、ユーザを写真の撮影のみによって容易に購買行動に結びつけることを可能とする上で、商品を雑誌といった定期刊行物に紐づけてデータベース化することで、技術上の画像認識精度を改善するとともに、流行性等を加味し、在庫と販売数に基づく商品の適正な価額を算出できる点にも着目した。
本発明は、これらの課題に鑑み、定期刊行物に掲載された商品画像を撮影することで、当該商品の購入を容易に可能とするとともに、当該商品の価額についても、購入申し込み数に基づいて即時的に算出することを可能とする商品情報サーバ、ユーザ端末、商品情報提供方法、及び商品情報サーバ用プログラムを提供することを目的とする。
本発明では、以下のような解決手段を提供する。
第1の特徴に係る発明は、商品の情報を記憶させた商品情報データベースと、商品の画像、又は画像の特徴点と局所特徴量を記憶させた商品画像データベースを備え、一以上のユーザ端末と通信可能に接続された商品情報サーバであって、
前記ユーザ端末から、前記ユーザ端末を用いて撮影された画像を受信する撮影画像受信手段と、
前記受信した画像から、特徴点を抽出する特徴点抽出手段と、
前記画像について、前記抽出した特徴点の周辺領域について局所特徴量を記述する周辺領域記述手段と、
前記抽出した特徴点と、前記記述した局所特徴量に基づいて、前記商品の画像の一部又は全部が、前記撮影画像の一部又は全部と一致する前記商品を、商品画像データベースから抽出する商品抽出手段と、
前記抽出した商品の情報を前記商品情報データベースから抽出する商品情報抽出手段と、
前記抽出した商品情報を、前記撮影画像を受信した前記ユーザ端末に対して送信する商品情報提供手段と、
を備えることを特徴とする商品情報サーバを提供する。
前記ユーザ端末から、前記ユーザ端末を用いて撮影された画像を受信する撮影画像受信手段と、
前記受信した画像から、特徴点を抽出する特徴点抽出手段と、
前記画像について、前記抽出した特徴点の周辺領域について局所特徴量を記述する周辺領域記述手段と、
前記抽出した特徴点と、前記記述した局所特徴量に基づいて、前記商品の画像の一部又は全部が、前記撮影画像の一部又は全部と一致する前記商品を、商品画像データベースから抽出する商品抽出手段と、
前記抽出した商品の情報を前記商品情報データベースから抽出する商品情報抽出手段と、
前記抽出した商品情報を、前記撮影画像を受信した前記ユーザ端末に対して送信する商品情報提供手段と、
を備えることを特徴とする商品情報サーバを提供する。
第1の特徴に係る発明によれば、商品の情報を記憶させた商品情報データベースと、商品の画像、又は画像の特徴点と局所特徴量を記憶させた商品画像データベースを備え、一以上のユーザ端末と通信可能に接続された商品情報サーバは、前記ユーザ端末から、前記ユーザ端末を用いて撮影された画像を受信し、前記受信した画像から、特徴点を抽出し、前記画像について、前記抽出した特徴点の周辺領域について局所特徴量を記述し、前記抽出した特徴点と、前記記述した局所特徴量に基づいて、前記商品の画像の一部又は全部が、前記撮影画像の一部又は全部と一致する前記商品を、商品画像データベースから抽出し、前記抽出した商品の情報を前記商品情報データベースから抽出し、前記抽出した商品情報を、前記撮影画像を受信した前記ユーザ端末に対して送信する。
第1の特徴に係る発明は、商品情報サーバのカテゴリであるが、商品情報提供方法及び、商品情報サーバ用プログラムであってもカテゴリに応じた同様の作用、効果を奏する。
第2の特徴に係る発明は、第1の特徴に係る発明である商品情報サーバであって、
前記商品画像データベースに記憶され、又は特徴点と局所特徴量が記憶された画像とは、前記商品を直接撮影したものではなく、当該商品が掲載された印刷物又は電子的な出版物の一部であって、前記商品を間接的に撮影した画像に相当することを特徴とする、商品情報サーバを提供する。
前記商品画像データベースに記憶され、又は特徴点と局所特徴量が記憶された画像とは、前記商品を直接撮影したものではなく、当該商品が掲載された印刷物又は電子的な出版物の一部であって、前記商品を間接的に撮影した画像に相当することを特徴とする、商品情報サーバを提供する。
第2の特徴に係る発明によれば、第1の特徴に係る発明である商品情報サーバにおいて、前記商品画像データベースに記憶され、又は特徴点と局所特徴量が記憶された画像とは、前記商品を直接撮影したものではなく、当該商品が掲載された印刷物又は電子的な出版物の一部であって、前記商品を間接的に撮影した画像に相当する。
第3の特徴に係る発明は、第2の特徴に係る発明である商品情報サーバであって、
前記印刷物、又は電子的な出版物とは、定期又は不定期に刊行され、かつ販売される雑誌であって、前記商品画像データベースにおいて、前記商品と当該雑誌の情報とが関連付けられて記憶されていることを特徴とする、商品情報サーバを提供する。
前記印刷物、又は電子的な出版物とは、定期又は不定期に刊行され、かつ販売される雑誌であって、前記商品画像データベースにおいて、前記商品と当該雑誌の情報とが関連付けられて記憶されていることを特徴とする、商品情報サーバを提供する。
第3の特徴に係る発明によれば、第2の特徴に係る発明である商品情報サーバにおいて、前記印刷物、又は電子的な出版物とは、定期又は不定期に刊行され、かつ販売される雑誌であって、前記商品画像データベースにおいて、前記商品と当該雑誌の情報とが関連付けられて記憶されている。
第4の特徴に係る発明は、第1から第3のいずれかの特徴に係る発明である商品情報サーバであって、
前記ユーザ端末から、前記商品に対する購入の申し込みを受け付ける購入申し込み受付手段と、
前記商品について、予め商品毎に定められた当該商品の基準額と、受け付けた前記購入の申し込みの数とに基づいて、当該商品の現在の価額を決定する商品価額決定手段と、
を備え、前記決定した価額を前記ユーザ端末に対して送信する商品情報に含むことを特徴とする商品情報サーバを提供する。
前記ユーザ端末から、前記商品に対する購入の申し込みを受け付ける購入申し込み受付手段と、
前記商品について、予め商品毎に定められた当該商品の基準額と、受け付けた前記購入の申し込みの数とに基づいて、当該商品の現在の価額を決定する商品価額決定手段と、
を備え、前記決定した価額を前記ユーザ端末に対して送信する商品情報に含むことを特徴とする商品情報サーバを提供する。
第4の特徴に係る発明によれば、第1から第3のいずれかの特徴に係る発明である商品情報サーバは、前記ユーザ端末から、前記商品に対する購入の申し込みを受け付け、前記商品について、予め商品毎に定められた当該商品の基準額と、受け付けた前記購入の申し込みの数とに基づいて、当該商品の現在の価額を決定し、前記決定した価額を前記ユーザ端末に対して送信する。
第5の特徴に係る発明は、商品の情報を記憶させた商品情報データベースを備える商品情報サーバと通信可能に接続され、撮影手段を備えたユーザ端末であって、
前記撮影手段によって取得した画像を前記商品情報サーバに送信する撮影画像送信手段と、
前記送信した画像に関連付けられた商品の情報を、前記商品情報サーバから取得する商品情報取得手段と、
前記情報を取得した商品の、当該商品に対してなされた購入の申し込みによって決定された現在の価額を取得する商品価額取得手段と、
前記商品に対する購入の申し込みを前記商品情報サーバに送信する購入申し込み手段と、
を備えることを特徴とするユーザ端末を提供する。
前記撮影手段によって取得した画像を前記商品情報サーバに送信する撮影画像送信手段と、
前記送信した画像に関連付けられた商品の情報を、前記商品情報サーバから取得する商品情報取得手段と、
前記情報を取得した商品の、当該商品に対してなされた購入の申し込みによって決定された現在の価額を取得する商品価額取得手段と、
前記商品に対する購入の申し込みを前記商品情報サーバに送信する購入申し込み手段と、
を備えることを特徴とするユーザ端末を提供する。
第5の特徴に係る発明によれば、商品の情報を記憶させた商品情報データベースを備える商品情報サーバと通信可能に接続され、撮影手段を備えたユーザ端末は、前記撮影手段によって取得した画像を前記商品情報サーバに送信し、前記送信した画像に関連付けられた商品の情報を、前記商品情報サーバから取得し、前記情報を取得した商品の、当該商品に対してなされた購入の申し込みによって決定された現在の価額を取得し、前記商品に対する購入の申し込みを前記商品情報サーバに送信する。
第6の特徴に係る発明は、商品の情報を記憶させた商品情報データベースと、商品の画像、又は画像の特徴点と局所特徴量を記憶させた商品画像データベースを備え、一以上のユーザ端末と通信可能に接続された商品情報サーバが実行する商品情報提供方法であって、
前記ユーザ端末から、前記ユーザ端末を用いて撮影された画像を受信するステップと、
前記受信した画像から、特徴点を抽出するステップと、
前記画像について、前記抽出した特徴点の周辺領域について局所特徴量を記述するステップと、
前記抽出した特徴点と、前記記述した局所特徴量に基づいて、前記商品の画像の一部又は全部が、前記撮影画像の一部又は全部と一致する前記商品を、商品画像データベースから抽出するステップと、
前記抽出した商品の情報を前記商品情報データベースから抽出するステップと、
前記抽出した商品情報を、前記撮影画像を受信した前記ユーザ端末に対して送信するステップと、
を備えることを特徴とする商品情報提供方法を提供する。
前記ユーザ端末から、前記ユーザ端末を用いて撮影された画像を受信するステップと、
前記受信した画像から、特徴点を抽出するステップと、
前記画像について、前記抽出した特徴点の周辺領域について局所特徴量を記述するステップと、
前記抽出した特徴点と、前記記述した局所特徴量に基づいて、前記商品の画像の一部又は全部が、前記撮影画像の一部又は全部と一致する前記商品を、商品画像データベースから抽出するステップと、
前記抽出した商品の情報を前記商品情報データベースから抽出するステップと、
前記抽出した商品情報を、前記撮影画像を受信した前記ユーザ端末に対して送信するステップと、
を備えることを特徴とする商品情報提供方法を提供する。
第7の特徴に係る発明は、商品の情報を記憶させた商品情報データベースと、商品の画像、又は画像の特徴点と局所特徴量を記憶させた商品画像データベースを備え、一以上のユーザ端末と通信可能に接続された商品情報サーバに、
前記ユーザ端末から、前記ユーザ端末を用いて撮影された画像を受信するステップ、
前記受信した画像から、特徴点を抽出するステップ、
前記画像について、前記抽出した特徴点の周辺領域について局所特徴量を記述するステップ、
前記抽出した特徴点と、前記記述した局所特徴量に基づいて、前記商品の画像の一部又は全部が、前記撮影画像の一部又は全部と一致する前記商品を、商品画像データベースから抽出するステップ、
前記抽出した商品の情報を前記商品情報データベースから抽出するステップ、
前記抽出した商品情報を、前記撮影画像を受信した前記ユーザ端末に対して送信するステップ、
を実行させることを特徴とする商品情報提供方法を提供する。
前記ユーザ端末から、前記ユーザ端末を用いて撮影された画像を受信するステップ、
前記受信した画像から、特徴点を抽出するステップ、
前記画像について、前記抽出した特徴点の周辺領域について局所特徴量を記述するステップ、
前記抽出した特徴点と、前記記述した局所特徴量に基づいて、前記商品の画像の一部又は全部が、前記撮影画像の一部又は全部と一致する前記商品を、商品画像データベースから抽出するステップ、
前記抽出した商品の情報を前記商品情報データベースから抽出するステップ、
前記抽出した商品情報を、前記撮影画像を受信した前記ユーザ端末に対して送信するステップ、
を実行させることを特徴とする商品情報提供方法を提供する。
本発明によれば、定期刊行物に掲載された商品画像を撮影することで、当該商品の購入を容易に可能とするとともに、当該商品の価額についても、購入申し込み数に基づいて即時的に算出することを可能とする商品情報サーバ、ユーザ端末、商品情報提供方法、及び商品情報サーバ用プログラムを提供することが可能となる。
以下、本発明を実施するための最良の形態について図を参照しながら説明する。なお、これはあくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。
[商品情報提供システム1の概要]
図1は、本発明の好適な実施形態である商品情報提供システム1の概要を説明するための図である。この図1に基づいて、商品情報提供システム1の概要を説明する。商品情報提供システム1において、撮影手段を備えるユーザ端末10と、商品情報サーバ200とは、相互に通信可能になっている。
図1は、本発明の好適な実施形態である商品情報提供システム1の概要を説明するための図である。この図1に基づいて、商品情報提供システム1の概要を説明する。商品情報提供システム1において、撮影手段を備えるユーザ端末10と、商品情報サーバ200とは、相互に通信可能になっている。
初めに、ユーザ端末10は情報の取得や、購入を希望する商品の画像を撮影する(ステップS01)。ここで、商品は実物を直接撮影してもよいし、紙媒体やディスプレイ等に表示された商品画像を、間接的に撮影してもよい。
次に、ユーザ端末10は撮影した画像を商品情報サーバ200に送信する(ステップS02)。画像を受信した商品情報サーバ200は、所定のアルゴリズムに基づき、受信した画像から特徴点の抽出と周辺領域の局所特徴量を記述することで(ステップS03)、商品画像データベース251から同一商品の画像を抽出する(ステップS04)。
更に商品情報サーバ200は、抽出した画像に関連付けられている商品のID等を検索条件とすることで(ステップS05)、商品情報データベース250から商品情報を抽出する(ステップS06)。なお、抽出にあたっては、撮影された画像内に含まれる文字部分を読み取ることによって、その文字部分が商品名や説明文として関連付けられた商品情報を抽出してもよい。
更に、商品情報サーバ200は、それまでに当該商品に対して行われた購入申し込みの数と、メーカー希望小売価格といった基準額とから、商品の現在価額を算出してよい。ここで、価額を算出する数式は商品毎に異なっていてよく、例えば、多く売れるほど低価格になる商品や、在庫が少なくなるほど高価格になる商品といった、商品の市場における性質を反映した計算式が設定可能である。
次に、商品情報サーバ200は、抽出した商品情報と、算出した現在価額とを、ユーザ端末10に送信する(ステップS07)。商品情報には、例えば、商品名、定価、商品の外観写真が含まれる。
最後に、商品情報と現在の価額を受信したユーザ端末10は、表示部に情報を表示し、ユーザが購入を希望する場合には、購入の申し込みを受け付けて、商品情報サーバ200に対して購入の申し込みを行うことが可能である。以上が、商品情報提供システム1の概要である。
[情報共有システムのシステム構成]
図2は、本発明の好適な実施形態である商品情報提供システム1のシステム構成図である。商品情報提供システム1は、ユーザ端末10、商品情報サーバ200、公衆回線網3(インターネット網や第3世代、第4世代通信網など)から構成される。ここで、ユーザ端末10は、公衆回線網3を介して、商品情報サーバ200と通信可能に接続されている。
図2は、本発明の好適な実施形態である商品情報提供システム1のシステム構成図である。商品情報提供システム1は、ユーザ端末10、商品情報サーバ200、公衆回線網3(インターネット網や第3世代、第4世代通信網など)から構成される。ここで、ユーザ端末10は、公衆回線網3を介して、商品情報サーバ200と通信可能に接続されている。
ユーザ端末10は、ユーザが撮影を行い、電子商取引を行うための一般的な情報端末であってよく、後述する機能を備える情報機器や電化製品である。ユーザ端末10は、例えば、携帯電話、スマートフォン、テレビ、ルータ、コンピュータに加えて、電話機、ネットブック端末、スレート端末、電子書籍端末、電子辞書端末、携帯型音楽プレーヤ、携帯型コンテンツ再生・録画プレーヤ等の一般的な情報家電であってよい。
商品情報サーバ200は、ユーザ端末10に商品情報を提供するとともに、電子商取引機能を提供あるいは電子商取引の仲介を行うサーバである。商品情報サーバ200は、記憶部に商品情報データベース250と商品画像データベース251を備える。
[各機能の説明]
図3は、ユーザ端末10、商品情報サーバ200の機能ブロックと各機能の関係を示す図である。
図3は、ユーザ端末10、商品情報サーバ200の機能ブロックと各機能の関係を示す図である。
ユーザ端末10は、制御部11として、CPU(Central Processing Unit),RAM(Random Access Memory),ROM(Read Only Memory)等を備え、通信部12として、例えば、IEEE802.11に準拠したWiFi(Wireless Fidelity対応デバイス又は、第3世代移動通信システム等のIMT−2000規格に準拠した無線デバイス等を備える(有線によるLAN接続であってもよい)。
さらに、ユーザ端末10は、入出力部13として、制御部で制御したデータや画像を出力表示する表示部を備え、かつ、ユーザからの入力を受付けるタッチパネルやキーボード、マウス等のほか、カメラといった撮影部を備える。
ユーザ端末10において、制御部11が所定のプログラムを読み込むことで、通信部12と協働して、撮影画像送信モジュール14、商品情報取得モジュール15、商品価額取得モジュール16を実現する。また、ユーザ端末10において、制御部11が所定のプログラムを読み込むことで、通信部12、及び入出力部13と協働して、購入申し込みモジュール17を実現する。また、ユーザ端末10において、制御部11が所定のプログラムを読み込むことで、入出力部13と協働して、撮影モジュール18を実現する。
商品情報サーバ200は、同様に、制御部201として、CPU,RAM,ROM等を備え、通信部202として、例えば、IEEE802.11に準拠したWiFi対応デバイスを備える(有線であってもよい)。加えて、商品情報サーバ200は、記憶部203として、ハードディスクや半導体メモリによる、データのストレージ部を備える。商品情報サーバ200は、記憶部203に、商品情報データベース250と、商品画像データベース251を備える。
商品情報サーバ200の制御部201が所定のプログラムを読み込むことで、通信部202と協働して、撮影画像受信モジュール204、商品情報提供モジュール205、購入申し込み受付モジュール206、特徴点抽出モジュール207、周辺領域記述モジュール208を実現する。また、商品情報サーバ200の制御部201が所定のプログラムを読み込むことで、記憶部203と協働して、商品抽出モジュール209、商品情報抽出モジュール210、商品価額決定モジュール211を実現する。
[商品情報取得処理]
図4は、ユーザ端末10、商品情報サーバ200が実行する商品情報取得処理のフローチャートである。上述した各装置のモジュールが行う処理について、本処理にて併せて説明する。
図4は、ユーザ端末10、商品情報サーバ200が実行する商品情報取得処理のフローチャートである。上述した各装置のモジュールが行う処理について、本処理にて併せて説明する。
初めに、ユーザ端末10の撮影モジュール18は、商品の画像を撮影する(ステップS11)。ここで、洋服を初めとする自由に変形可能な商品は、後述の画像処理による同定が困難であることが知られている。そのため、本発明の利用目的に照らし、この撮影は、雑誌、カタログ、広告、又はディスプレイやテレビといった商品の外観画像を更に撮影することで、商品を間接的に撮影することがより好ましい。また、ユーザ端末は外部の撮影に替えてスクリーンショットの撮影を以て、それを撮影画像としても良い。
次に、ユーザ端末10の撮影画像送信モジュール14は、撮影画像を商品情報サーバ200に送信する(ステップS12)。ここで、撮影画像のファイル形式は特定の表現方法に限られない。一般に、画像をピクセルデータのまま送信すると、ファイル容量が膨大になり、特に携帯端末が利用する無線通信では通信に時間がかかるおそれがある。そのため、一例として画像をそのまま送信するのに替えて、撮影後に当該画像から抽出した特徴点と周辺領域の局所特徴量の情報を、商品情報サーバ200に対して送信してもよい。
商品情報サーバ200の撮影画像受信モジュール204が撮影画像を受信すると(ステップS13)、撮影画像に写っている商品の特定のために画像処理が行われる。初めに、商品情報サーバ200の特徴点抽出モジュール207は、受信した画像から特徴点を抽出する(ステップS14)。次に、周辺領域記述モジュール208は、前記抽出した特徴点について、周辺領域の特徴量を記述する(ステップS15)。
特徴点の抽出と局所特徴量については、様々なアルゴリズムが提案されているが、具体的な手法として、特徴点の抽出にはHarris−Affine detectorや、Hessian−Affine detectorといった手法が、局所特徴量としてはSIFT、GLOH、及びSURFといったものが提唱されている。本発明は、特定の画像処理アルゴリズムに限定されず、実施に際しては精度と実行速度から適切な組み合わせを選択してよい。また、PCA−SIFTのように、特徴点と局所特徴量を一括で扱ってもよい。
次に、商品情報サーバ200の商品情報抽出モジュール210は、商品画像データベース251に記憶された商品の画像群と、撮影画像とを照合する(ステップS16)。例えば、商品画像データベース251には、処理時間の短縮のため、画像ごとに抽出された特徴点と、特徴点ごとに記述された局所特徴量をベクトルとして表現した特徴ベクトルが予め記憶されているとする。
抽出手法の一例としては、以下が挙げられる。商品抽出モジュール209は、周辺領域記述モジュール208が記述した局所特徴量をベクトルとして扱い、前記商品画像データベース251に記憶された特徴ベクトルから、最も近い特徴ベクトルを検索して、その特徴ベクトルを含む画像に1点を加点する。続けて撮影画像から抽出された全ての特徴点について特徴ベクトルの検索と加点を行い、最後に最も点数が高かった画像を抽出する。この時、所定の基準に照らして得点がほぼ同一の候補が二以上あり、絞りきれない場合には、複数の商品画像を抽出してもよい。
また、特徴点を抽出するに際し特徴点ごとに重み付けをして、加点する得点に重みを反映することで、照合精度の向上が可能である。他方、最も近い特徴ベクトルの検索には最近傍探索が必要であるが、Approximate Nearest Neighborといった近似アルゴリズムによる近似解を用いることで、精度を犠牲にしつつも処理時間を短縮することが可能である。
なお、商品画像データベース251に記憶される商品画像は、一の商品と関連付けられた画像であれば足り、例えば、撮影の際に写り込む雑誌のページ枠、隣に掲載された別商品の画像の一部や、着用モデルの顔等を含んでいてよく、必ずしも商品の外観そのものである必要はない。
更に、商品画像が雑誌や掲載媒体と関連付けて記憶されていることで、同一ユーザから近接した時刻に複数回の利用があったときに、最新の利用に係る撮影画像は直前の利用に係る撮影画像によって抽出された画像と掲載媒体が同一である可能性が高いと考えられることから、加点時の重み付けや検索範囲の限定等によって、抽出精度及び速度を高めることが可能である。
尚、商品画像データベース251においては、一の商品には複数の画像が関連付けられていてよい。例えば、一の商品を様々な角度から撮影した場合には、その撮影角度に応じた特徴点と特徴ベクトルが得られる。所定の複数視点、例えば六点からの特徴ベクトルをそれぞれ視点毎にまとめて記憶させておくことで、商品の実物を様々な角度から撮影した場合でも、抽出精度を向上させることが可能である。加えて、商品情報サーバが、商品の三次元モデルを利用可能な場合には、当該三次元モデルを特定の視点から描画した描画結果を、商品画像データベース251に画像として記憶させてもよい。
図7は、商品画像データベース251内の、商品画像テーブルの一例である。商品画像テーブルには、商品ID、雑誌IDとともに、照合先となる画像の一覧が記憶されている。この時、ページ単位など、共に掲載されている複数の商品画像をまとめて一つの画像として照合してもよいし、商品ごとに分割された画像をもって照合を行っても良い。前者の場合には、一の画像に複数の商品が対応することとなり、商品毎に設定された座標と、抽出された画像内における撮影画像の位置座標とを比較することで、撮影された商品を特定することが可能となる。
商品情報抽出モジュール210は、上記処理によって抽出された画像と関連付けて記憶された商品の情報を、商品情報データベース250から抽出する(ステップS17)。このとき、同定された商品情報を元に、同じ雑誌に掲載され、又は同じブランドであるといった当該商品と関連した商品や、推薦アルゴリズムに基づいて推薦された他の商品の情報を共に抽出してもよい。
最後に、商品情報サーバ200の商品情報提供モジュール205は商品情報を送信し(ステップS18)、ユーザ端末10の商品情報取得モジュール15がそれを受信する(ステップS19)。ユーザ端末10は、受信した商品情報を表示部に表示してよい。以上が、商品情報取得処理の手順である。
[商品購入申し込み処理]
図5は、ユーザ端末10、商品情報サーバ200が実行する商品購入申し込み処理のフローチャートである。上述した各装置のモジュールが行う処理について、本処理にて併せて説明する。
図5は、ユーザ端末10、商品情報サーバ200が実行する商品購入申し込み処理のフローチャートである。上述した各装置のモジュールが行う処理について、本処理にて併せて説明する。
商品情報サーバ200は、前記商品情報取得処理の後、抽出された商品情報に関連して、当該商品に対する購入申し込み数と、基準額を読み込む(ステップS21)。申込数は、商品情報サーバ200自体がEC機能を提供する場合には記憶部から読み出してよいし、外部のサーバに購入申し込みを仲介する実装の場合には、当該外部のサーバから通信によって取得する。基準額は商品ごとに定められている基準となる価額であって、一般に定価であると考えてよいが、これに限られない。
次に、商品情報サーバ200の商品価額決定モジュール211は、読み込んだ購入申し込み数と、基準額とから、現在の価額を算出する(ステップS22)。当該算出には、商品毎に予め計算式が定められており、一例として「基準額×(購入申込数/仕入数)×50%」等が挙げられる。この式では、商品が完売する直前に購入を行うユーザは、基準額たる定価の半額に近い値で購入を行うことができる。
また、この計算式においては、発売からの期間による割引といった、通常商取引で価額決定の際に考慮されうる要素を変数として利用してよい。一方で、いわゆる共同購入といった、購入申込数が所定の期間において一定に満たない場合は商取引自体が成立しないといった条件の設定が可能であってよい。
図8は、商品情報データベース250内の、商品情報テーブルの一例である。商品情報テーブルには、商品IDと関連付けられて、商品名、基準額、価額算出式、購入成立数が記憶されている。購入成立数は、商品の購入が成立する最低数であって、商品によっては設定されない場合もある。なお、価額算出式は、定数であってもよい。
次に、商品情報サーバ200の商品情報提供モジュール205は、前記決定した現在の価額をユーザ端末10に対して送信する(ステップS23)。ここで、価額に最低購入申込数といった条件がある場合には、共に送信する。ユーザ端末10の商品価額取得モジュール16は、商品の現在の価額を受信する(ステップS24)。
次に、ユーザ端末10の購入申し込みモジュール17は、受信した商品情報と現在価額を表示部に表示するとともに、ユーザから購入の申し込みを受け付ける(ステップS25)。
図6は、ユーザ端末10に表示される購入申し込み画面の一例である。ユーザ端末10の表示部には、商品画像61と、基準額62、現在の価額63、商品名64に加え、存在する場合には、購入成立までの必要購入申し込み数65が表示される。ユーザが購入ボタン66を押し下げることで、購入申し込みモジュール17は、購入の申し込みを受け付ける。
ここで、購入申し込みモジュール17が申し込みを受け付けた場合(ステップS26:「YES」の場合)は、購入申し込みモジュール17が商品情報サーバ200に対して購入申し込みを送信し(ステップS27)、商品情報サーバ200の購入申し込み受付モジュール206が、購入申し込みを受信して受け付ける(ステップS28)。
一方、ユーザが購入の申し込みを行わなかった場合(ステップS26:「NO」の場合)には、そのまま処理を終了する。以上が、商品購入申し込み処理の手順である。
上述した手段、機能は、コンピュータ(CPU,情報処理装置,各種端末を含む)が、所定のプログラムを読み込んで、実行することによって実現される。プログラムは、例えば、フレキシブルディスク、CD(CD−ROMなど)、DVD(DVD−ROM、DVD−RAMなど)等のコンピュータ読取可能な記録媒体に記録された形態で提供される。この場合、コンピュータはその記録媒体からプログラムを読み取って内部記憶装置または外部記憶装置に転送し記憶して実行する。また、そのプログラムを、例えば、磁気ディスク、光ディスク、光磁気ディスク等の記憶装置(記録媒体)に予め記録しておき、その記憶装置から通信回線を介してコンピュータに提供するようにしてもよい。
以上、本発明の実施形態について説明したが、本発明は上述したこれらの実施形態に限るものではない。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施形態に記載されたものに限定されるものではない。
1 情報共有システム、3 公衆回線網、10 ユーザ端末、200 ネットワークサーバ、250 商品情報データベース、251 商品画像データベース
Claims (7)
- 商品の情報を記憶させた商品情報データベースと、商品の画像、又は画像の特徴点と局所特徴量を記憶させた商品画像データベースを備え、一以上のユーザ端末と通信可能に接続された商品情報サーバであって、
前記ユーザ端末から、前記ユーザ端末を用いて撮影された画像を受信する撮影画像受信手段と、
前記受信した画像から、特徴点を抽出する特徴点抽出手段と、
前記画像について、前記抽出した特徴点の周辺領域について局所特徴量を記述する周辺領域記述手段と、
前記抽出した特徴点と、前記記述した局所特徴量に基づいて、前記商品の画像の一部又は全部が、前記撮影画像の一部又は全部と一致する前記商品を、商品画像データベースから抽出する商品抽出手段と、
前記抽出した商品の情報を前記商品情報データベースから抽出する商品情報抽出手段と、
前記抽出した商品情報を、前記撮影画像を受信した前記ユーザ端末に対して送信する商品情報提供手段と、
を備えることを特徴とする商品情報サーバ。 - 請求項1に記載の商品情報サーバであって、
前記商品画像データベースに記憶され、又は特徴点と局所特徴量が記憶された画像とは、前記商品を直接撮影したものではなく、当該商品が掲載された印刷物又は電子的な出版物の一部であって、前記商品を間接的に撮影した画像に相当することを特徴とする、商品情報サーバ。 - 請求項2に記載の商品情報サーバであって、
前記印刷物、又は電子的な出版物とは、定期又は不定期に刊行され、かつ販売される雑誌であって、前記商品画像データベースにおいて、前記商品と当該雑誌の情報とが関連付けられて記憶されていることを特徴とする、商品情報サーバ。 - 請求項1乃至3のいずれか一項に記載の商品情報サーバであって、
前記ユーザ端末から、前記商品に対する購入の申し込みを受け付ける購入申し込み受付手段と、
前記商品について、予め商品毎に定められた当該商品の基準額と、受け付けた前記購入の申し込みの数とに基づいて、当該商品の現在の価額を決定する商品価額決定手段と、
を備え、前記決定した価額を前記ユーザ端末に対して送信する商品情報に含むことを特徴とする商品情報サーバ。 - 商品の情報を記憶させた商品情報データベースを備える商品情報サーバと通信可能に接続され、撮影手段を備えたユーザ端末であって、
前記撮影手段によって取得した画像を前記商品情報サーバに送信する撮影画像送信手段と、
前記送信した画像に関連付けられた商品の情報を、前記商品情報サーバから取得する商品情報取得手段と、
前記情報を取得した商品の、当該商品に対してなされた購入の申し込みによって決定された現在の価額を取得する商品価額取得手段と、
前記商品に対する購入の申し込みを前記商品情報サーバに送信する購入申し込み手段と、
を備えることを特徴とするユーザ端末。 - 商品の情報を記憶させた商品情報データベースと、商品の画像、又は画像の特徴点と局所特徴量を記憶させた商品画像データベースを備え、一以上のユーザ端末と通信可能に接続された商品情報サーバが実行する商品情報提供方法であって、
前記ユーザ端末から、前記ユーザ端末を用いて撮影された画像を受信するステップと、
前記受信した画像から、特徴点を抽出するステップと、
前記画像について、前記抽出した特徴点の周辺領域について局所特徴量を記述するステップと、
前記抽出した特徴点と、前記記述した局所特徴量に基づいて、前記商品の画像の一部又は全部が、前記撮影画像の一部又は全部と一致する前記商品を、商品画像データベースから抽出するステップと、
前記抽出した商品の情報を前記商品情報データベースから抽出するステップと、
前記抽出した商品情報を、前記撮影画像を受信した前記ユーザ端末に対して送信するステップと、
を備えることを特徴とする商品情報サーバ。 - 商品の情報を記憶させた商品情報データベースと、商品の画像、又は画像の特徴点と局所特徴量を記憶させた商品画像データベースを備え、一以上のユーザ端末と通信可能に接続された商品情報サーバに、
前記ユーザ端末から、前記ユーザ端末を用いて撮影された画像を受信するステップ、
前記受信した画像から、特徴点を抽出するステップ、
前記画像について、前記抽出した特徴点の周辺領域について局所特徴量を記述するステップ、
前記抽出した特徴点と、前記記述した局所特徴量に基づいて、前記商品の画像の一部又は全部が、前記撮影画像の一部又は全部と一致する前記商品を、商品画像データベースから抽出するステップ、
前記抽出した商品の情報を前記商品情報データベースから抽出するステップ、
前記抽出した商品情報を、前記撮影画像を受信した前記ユーザ端末に対して送信するステップ、
を実行させることを特徴とする商品情報サーバ用プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013094851A JP2014215929A (ja) | 2013-04-29 | 2013-04-29 | 商品情報サーバ、ユーザ端末、商品情報提供方法、商品情報サーバ用プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013094851A JP2014215929A (ja) | 2013-04-29 | 2013-04-29 | 商品情報サーバ、ユーザ端末、商品情報提供方法、商品情報サーバ用プログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2014215929A true JP2014215929A (ja) | 2014-11-17 |
Family
ID=51941598
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013094851A Pending JP2014215929A (ja) | 2013-04-29 | 2013-04-29 | 商品情報サーバ、ユーザ端末、商品情報提供方法、商品情報サーバ用プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2014215929A (ja) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016199537A1 (ja) * | 2015-06-12 | 2016-12-15 | 株式会社ギフトパッド | ギフト・システム |
JP2018106524A (ja) * | 2016-12-27 | 2018-07-05 | サイジニア株式会社 | 対話装置、対話方法、およびプログラム |
JP2019160000A (ja) * | 2018-03-15 | 2019-09-19 | ヤフー株式会社 | 検索装置、検索方法および検索プログラム |
KR20200034716A (ko) * | 2017-06-20 | 2020-03-31 | 나이키 이노베이트 씨.브이. | 표적 이미지 검출을 통한 증강 현실 경험 언록 |
CN111161022A (zh) * | 2019-12-26 | 2020-05-15 | 汉口北进出口服务有限公司 | 一种商品推荐方法及装置 |
CN111222377A (zh) * | 2018-11-27 | 2020-06-02 | 杭州海康威视数字技术股份有限公司 | 一种商品信息确定方法、装置及电子设备 |
JP2021184287A (ja) * | 2015-05-12 | 2021-12-02 | ピンタレスト,インコーポレイテッド | ユーザが提供する商品の表示を当該商品の販売者にマッチングさせること |
US11410191B2 (en) | 2017-09-11 | 2022-08-09 | Nike, Inc. | Apparatus, system, and method for target search and using geocaching |
US11443357B2 (en) | 2015-05-12 | 2022-09-13 | Pinterest, Inc. | Matching user provided representations of items with sellers of those items |
US11509653B2 (en) | 2017-09-12 | 2022-11-22 | Nike, Inc. | Multi-factor authentication and post-authentication processing system |
JP7447592B2 (ja) | 2020-03-19 | 2024-03-12 | カシオ計算機株式会社 | 情報処理装置、携帯端末及びプログラム |
US11935102B2 (en) | 2015-05-12 | 2024-03-19 | Pinterest, Inc. | Matching user provided representations of items with sellers of those items |
US11961106B2 (en) | 2017-09-12 | 2024-04-16 | Nike, Inc. | Multi-factor authentication and post-authentication processing system |
-
2013
- 2013-04-29 JP JP2013094851A patent/JP2014215929A/ja active Pending
Cited By (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021184287A (ja) * | 2015-05-12 | 2021-12-02 | ピンタレスト,インコーポレイテッド | ユーザが提供する商品の表示を当該商品の販売者にマッチングさせること |
JP7038880B2 (ja) | 2015-05-12 | 2022-03-18 | ピンタレスト,インコーポレイテッド | ユーザが提供する商品の表示を当該商品の販売者にマッチングさせること |
US11935102B2 (en) | 2015-05-12 | 2024-03-19 | Pinterest, Inc. | Matching user provided representations of items with sellers of those items |
US11443357B2 (en) | 2015-05-12 | 2022-09-13 | Pinterest, Inc. | Matching user provided representations of items with sellers of those items |
JPWO2016199537A1 (ja) * | 2015-06-12 | 2018-04-26 | 株式会社ギフトパッド | ギフト・システム |
WO2016199537A1 (ja) * | 2015-06-12 | 2016-12-15 | 株式会社ギフトパッド | ギフト・システム |
JP2018106524A (ja) * | 2016-12-27 | 2018-07-05 | サイジニア株式会社 | 対話装置、対話方法、およびプログラム |
JP7432647B2 (ja) | 2017-06-20 | 2024-02-16 | ナイキ イノベイト シーブイ | ターゲット画像の検出による拡張現実経験のロック解除 |
JP2020524347A (ja) * | 2017-06-20 | 2020-08-13 | ナイキ イノベイト シーブイ | ターゲット画像の検出による拡張現実経験のロック解除 |
KR20200034716A (ko) * | 2017-06-20 | 2020-03-31 | 나이키 이노베이트 씨.브이. | 표적 이미지 검출을 통한 증강 현실 경험 언록 |
KR102376816B1 (ko) * | 2017-06-20 | 2022-03-21 | 나이키 이노베이트 씨.브이. | 표적 이미지 검출을 통한 증강 현실 경험 언록 |
JP7116097B2 (ja) | 2017-06-20 | 2022-08-09 | ナイキ イノベイト シーブイ | ターゲット画像の検出による拡張現実経験のロック解除 |
US11978076B2 (en) | 2017-09-11 | 2024-05-07 | Nike, Inc. | Apparatus, system, and method for target search and using geocaching |
US11410191B2 (en) | 2017-09-11 | 2022-08-09 | Nike, Inc. | Apparatus, system, and method for target search and using geocaching |
US11509653B2 (en) | 2017-09-12 | 2022-11-22 | Nike, Inc. | Multi-factor authentication and post-authentication processing system |
US11961106B2 (en) | 2017-09-12 | 2024-04-16 | Nike, Inc. | Multi-factor authentication and post-authentication processing system |
JP6997656B2 (ja) | 2018-03-15 | 2022-01-17 | ヤフー株式会社 | 検索装置、検索方法および検索プログラム |
JP2019160000A (ja) * | 2018-03-15 | 2019-09-19 | ヤフー株式会社 | 検索装置、検索方法および検索プログラム |
CN111222377B (zh) * | 2018-11-27 | 2023-09-08 | 杭州海康威视数字技术股份有限公司 | 一种商品信息确定方法、装置及电子设备 |
CN111222377A (zh) * | 2018-11-27 | 2020-06-02 | 杭州海康威视数字技术股份有限公司 | 一种商品信息确定方法、装置及电子设备 |
CN111161022A (zh) * | 2019-12-26 | 2020-05-15 | 汉口北进出口服务有限公司 | 一种商品推荐方法及装置 |
JP7447592B2 (ja) | 2020-03-19 | 2024-03-12 | カシオ計算機株式会社 | 情報処理装置、携帯端末及びプログラム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2014215929A (ja) | 商品情報サーバ、ユーザ端末、商品情報提供方法、商品情報サーバ用プログラム | |
US20110320317A1 (en) | Image capture for purchases | |
JP5395920B2 (ja) | 検索装置、検索方法、検索プログラム、及びそのプログラムを記憶するコンピュータ読取可能な記録媒体 | |
WO2012096013A1 (ja) | オブジェクト表示サーバ、オブジェクト表示方法、オブジェクト表示プログラム、及びそのプログラムを記憶するコンピュータ読取可能な記録媒体 | |
JP5816393B1 (ja) | 商品評価装置、方法及びプログラム | |
US20180005305A1 (en) | Method for simultaneously one-step filling a virtual shopping cart with many items from one or multiple resources; all items of any type or characteristics from potential resources which have been embodied into a customized list which has been simultaneously generated and sourced in one-step then presented visually to user to select items; culminating and resulting acquisiion to be simultaneosly placed in a single virtual shpping cart and all are acquired simultaneously from many source | |
JP6185216B1 (ja) | 情報提供システム、情報提供装置、情報提供方法、及びプログラム | |
US20150046244A1 (en) | Server, Computer Readable Storage Medium, Computer Implemented Method and Mobile Computing Device for Discounting Payment Transactions, Facilitating Discounting Using Augmented Reality and Promotional Offering Using Augmented Reality | |
US11682068B2 (en) | Automating the creation of listings using augmented reality computer technology | |
JP6609434B2 (ja) | 商品情報提供システム、商品情報提供方法及び管理サーバ | |
JP6042367B2 (ja) | 資産管理サーバ、資産管理方法、及び、資産管理サーバ用プログラム | |
US9336549B2 (en) | Systems and methods for performing in-store and online transactions | |
JP2021131893A (ja) | 販売支援装置、販売支援方法、及び、プログラム | |
KR20130127733A (ko) | 음악 앨범 컨텐츠 서비스 제공 방법 | |
JP5987499B2 (ja) | 携帯型端末を利用した決済システムおよび決済方法 | |
KR101794882B1 (ko) | 촬영 지원 스텝 매칭 중개 방법 및 이를 실행하는 서버 | |
JP6097249B2 (ja) | 会計登録サーバ、会計登録方法、及び、会計登録サーバ用プログラム | |
KR20140102374A (ko) | 동영상을 이용한 실시간 모바일 상품 거래 방법 및 그 장치 | |
TW201942836A (zh) | 店面系統、物品搭配方法、裝置及電子設備 | |
JP6495223B2 (ja) | 資産管理システム、資産管理方法、及び、プログラム | |
JP7119173B1 (ja) | 商品情報処理システム、商品情報処理方法及びプログラム | |
JP6152188B1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP7190620B2 (ja) | 情報処理装置、情報配信方法、及び情報配信プログラム | |
US20240064377A1 (en) | Method for providing product information on content, and server executing same | |
KR20170055013A (ko) | 코드 기반의 가격 비교 서비스 제공 시스템 및 방법 |