JP2014081693A - Commodity information provision system, commodity information provision device, and commodity information output device - Google Patents
Commodity information provision system, commodity information provision device, and commodity information output device Download PDFInfo
- Publication number
- JP2014081693A JP2014081693A JP2012227502A JP2012227502A JP2014081693A JP 2014081693 A JP2014081693 A JP 2014081693A JP 2012227502 A JP2012227502 A JP 2012227502A JP 2012227502 A JP2012227502 A JP 2012227502A JP 2014081693 A JP2014081693 A JP 2014081693A
- Authority
- JP
- Japan
- Prior art keywords
- product
- product information
- information
- voice data
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004891 communication Methods 0.000 claims abstract description 18
- 230000004044 response Effects 0.000 claims description 65
- 238000012545 processing Methods 0.000 claims description 19
- 230000005540 biological transmission Effects 0.000 claims description 3
- 239000000284 extract Substances 0.000 claims description 2
- 238000009434 installation Methods 0.000 claims description 2
- 238000003384 imaging method Methods 0.000 abstract description 3
- 238000000034 method Methods 0.000 description 53
- 230000008569 process Effects 0.000 description 47
- 238000010586 diagram Methods 0.000 description 6
- 238000000605 extraction Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 230000004913 activation Effects 0.000 description 2
- 239000002537 cosmetic Substances 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Image Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
本発明は、商品情報提供システム、商品情報提供装置、及び商品情報出力装置に関する。 The present invention relates to a product information providing system, a product information providing device, and a product information output device.
次のような商品検索システムが知られている。この商品検索システムは、端末装置が検索対象の商品の画像パターンを用いて商品検索要求をすると、第一のサーバ装置で画像パターンと、データベースに予め格納されている商品の標準パターンとをマッチングさせて特定した商品認識情報を通信網を介して第二のサーバ装置へ送信し、第二のサーバ装置では、商品認識情報の受信に応答して、データベースに予め格納されている商品に関する情報から、商品認識情報により特定される商品に関する商品情報を抽出し、これを第一のサーバ装置を介して端末装置へ送信する（例えば、特許文献１）。 The following product search systems are known. In this product search system, when the terminal device makes a product search request using the image pattern of the search target product, the first server device matches the image pattern with the standard pattern of the product stored in the database in advance. The product recognition information specified in the above is transmitted to the second server device via the communication network, and the second server device responds to the reception of the product recognition information from the information about the product stored in advance in the database, Product information related to the product specified by the product recognition information is extracted and transmitted to the terminal device via the first server device (for example, Patent Document 1).
しかしながら、従来の商品検索システムでは、端末装置は、受信した商品情報の検索結果を表示部に表示するのみであった。このため、ユーザがその商品について疑問点や確認したい点がある場合でも、これらを解決するための手段は提供されていなかった。 However, in the conventional product search system, the terminal device only displays the search result of the received product information on the display unit. For this reason, even if there is a question or a point that the user wants to confirm about the product, a means for solving these problems has not been provided.
本発明による商品情報提供システムは、商品情報を提供する商品情報提供装置と、商品情報提供装置から商品情報を受信して出力する商品情報出力装置とが通信回線を介して接続され、商品情報出力装置は、ユーザからの指示に基づいて、商品を特定するための被写体を撮像して、商品特定用画像を取得する商品特定用画像取得手段と、商品特定用画像取得手段によって取得された商品特定用画像を商品情報提供装置へ送信して、商品特定用画像に基づいて特定される商品の商品情報を要求する商品情報要求手段と、商品情報提供装置から商品情報を受信する商品情報受信手段と、商品情報受信手段によって受信された商品情報を出力してユーザに提示する商品情報提示手段と、商品情報提示手段によって出力された商品情報に対するユーザからの質問を音声データとして取得する質問音声データ取得手段と、質問音声データ取得手段によって取得された質問音声データを商品情報提供装置へ送信して、質問に対する回答を要求する回答要求手段と、商品情報提供装置から質問に対する回答の音声データを回答音声データとして受信する回答受信手段と、回答受信手段によって受信された回答音声データを出力する音声データ出力手段とを備え、商品情報提供装置は、商品情報出力装置から商品特定用画像を受信する商品特定用画像受信手段と、商品特定用画像受信手段によって受信された商品特定用画像を画像処理して、ユーザが商品情報の取得を希望する商品を特定する商品特定手段と、あらかじめ記録装置に記録されている商品情報の中から、商品特定手段によって特定された商品の商品情報を読み出す商品情報読み出し手段と、商品情報読み出し手段によって読み出された商品情報を商品情報出力装置へ送信する商品情報送信手段と、商品情報出力装置から質問音声データを受信する質問音声データ受信手段と、質問音声データ受信手段によって受信された質問音声データに基づいて、ユーザからの質問内容を特定する質問内容特定手段と、あらかじめ記録装置に記録されている、ユーザから想定される質問内容を示す情報と、質問に対する回答音声データとが関連付けられた応答用情報の中から、質問内容特定手段によって特定された質問内容に関連付けて記録されている回答音声データを読み出す回答音声データ読み出し手段と、回答音声データ読み出し手段によって読み出された回答音声データを商品情報出力装置へ送信する回答音声データ送信手段とを備えることを特徴とする。 A product information providing system according to the present invention includes a product information providing device that provides product information and a product information output device that receives and outputs product information from the product information providing device via a communication line, and outputs product information. The apparatus captures a subject for specifying a product based on an instruction from a user and acquires a product specifying image acquisition unit that acquires a product specifying image, and a product specification acquired by the product specifying image acquisition unit Product information requesting means for transmitting product images to the product information providing device and requesting product information of products specified based on the product specifying image; product information receiving means for receiving product information from the product information providing device; The product information presenting means for outputting the product information received by the product information receiving means and presenting it to the user, and the user for the product information output by the product information presenting means Question voice data acquisition means for acquiring the questions as voice data, answer voice request means for sending the question voice data acquired by the question voice data acquisition means to the product information providing device, and requesting an answer to the question, The product information providing device includes: a response receiving unit that receives voice data of an answer to the question from the information providing device as response voice data; and a voice data output unit that outputs the response voice data received by the response receiving unit. The product specifying image receiving means for receiving the product specifying image from the information output device and the product specifying image received by the product specifying image receiving means are subjected to image processing, and the product for which the user wishes to obtain product information is obtained. The product specifying means to be specified and the product information recorded in advance in the recording device are specified by the product specifying means. Product information reading means for reading product information of products, product information transmitting means for transmitting product information read by the product information reading means to the product information output device, and question voice data for receiving question voice data from the product information output device A data receiving means, a question content specifying means for specifying a question content from the user based on the question voice data received by the question voice data receiving means, and a question assumed by the user recorded in the recording device in advance Answer voice data reading means for reading the answer voice data recorded in association with the question contents specified by the question contents specifying means from the information for response in which the information indicating the contents and the answer voice data for the question are associated Answer voice data read by the answer voice data reading means Answer voice data transmitting means for transmitting to the force device.
本発明によれば、ユーザは、商品情報出力装置上で提示された商品情報に対して、音声で質問をして、その回答を得ることができるため、その場で容易に商品情報に対する疑問点を解消したり、確認したい事項を確認したりすることができる。 According to the present invention, the user can make a question by voice and obtain an answer to the product information presented on the product information output device. You can solve the problem or check the items you want to check.
図１は、本実施の形態における商品情報提供システムの一実施の形態の構成を示すブロック図である。商品情報提供システム１０は、商品情報が記録された商品情報提供装置１００と、商品情報提供装置１００から商品情報の提供を受けてユーザへ出力する商品情報出力装置２００とが、インターネット等の通信回線を介して接続されている。
FIG. 1 is a block diagram showing a configuration of an embodiment of a product information providing system in the present embodiment. The product
商品情報提供装置１００としては、例えば、サーバ装置等が用いられる。また、商品情報出力装置２００としては、例えば、パーソナルコンピュータ（以下、「パソコン」と呼ぶ）の他、スマートフォン、携帯電話、タブレット端末といった種々の情報端末が用いられる。なお、本実施の形態では、インターネットに１台の商品情報提供装置１００と１台の商品情報出力装置２００とが接続されている例を示しているが、これらの台数は限定されない。
As the product
図２は、本実施の形態における商品情報提供装置１００としてサーバ装置を用いた場合の一実施の形態の構成を示すブロック図である。商品情報提供装置１００は、操作部材１０１と、接続ＩＦ１０２と、制御装置１０３と、記録装置１０４と、表示装置１０５とを備えている。
FIG. 2 is a block diagram showing a configuration of an embodiment when a server apparatus is used as the product
操作部材１０１は、商品情報提供装置１００の操作者によって操作される種々の装置、例えばキーボードやマウスを含む。
The
接続ＩＦ１０２は、商品情報提供装置１００をインターネット等の通信回線に接続するためのインターフェースであり、例えば、インターネットに有線で接続するための有線ＬＡＮモジュールや、インターネットに無線で接続するための無線ＬＡＮモジュールなどが用いられる。
The connection IF 102 is an interface for connecting the product
制御装置１０３は、ＣＰＵ、メモリ、およびその他の周辺回路によって構成され、商品情報提供装置１００の全体を制御する。なお、制御装置１０３を構成するメモリは、例えばＳＤＲＡＭ等の揮発性のメモリである。このメモリは、ＣＰＵがプログラム実行時にプログラムを展開するためのワークメモリや、データを一時的に記録するためのバッファメモリとして使用される。例えば、接続ＩＦ１０２を介して読み込まれたデータは、バッファメモリに一時的に記録される。
The
記録装置１０４は、商品情報提供装置１００が蓄える種々のデータや、制御装置１０３が実行するためのプログラムのデータ等を記録するための記録装置であり、例えばＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）やＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）等が用いられる。なお、記録装置１０４に記録されるプログラムのデータは、ＣＤ−ＲＯＭやＤＶＤ−ＲＯＭなどの記録媒体に記録されて提供されたり、ネットワークを介して提供され、使用者が取得したプログラムのデータを記録装置１０４にインストールすることによって、制御装置１０３がプログラムを実行できるようになる。
The
表示装置１０５は、例えば液晶モニタであって、制御装置１０３から出力される種々の表示用データが表示される。
The
図３は、本実施の形態における商品情報出力装置２００として、タブレット端末を用いた場合の一実施の形態の構成を示すブロック図である。商品情報出力装置２００は、タッチパネル２０１と、通信モジュール２０２と、制御装置２０３と、マイク２０４と、スピーカ２０５と、カメラ２０６とを備えている。
FIG. 3 is a block diagram showing a configuration of an embodiment when a tablet terminal is used as the product
タッチパネル２０１は、液晶パネル等の表示装置とタッチパッドのような位置入力装置を組み合わせた電子部品であり、画面上の表示を押すことで機器を操作することができる入力装置である。例えば、商品情報出力装置２００のユーザは、液晶パネル上に表示されたボタンやメニュー等の表示項目を指やタッチペンを用いてタッチまたはスライドさせることにより、商品情報出力装置２００を操作することができる。タッチパネル２０１は、ユーザによるタッチやスライドといった操作を検出して、その検出信号を制御装置２０３へ出力する。
The
通信モジュール２０２は、無線または有線により、ＬＡＮや携帯電話通信網を介してインターネットに接続するためのモジュールが用いられる。商品情報出力装置２００は、この通信モジュール２０２を介して商品情報提供装置１００と通信を行う。
As the
制御装置２０３は、ＣＰＵ、メモリ、およびその他の周辺回路によって構成され、商品情報出力装置２００の全体を制御する。なお、制御装置２０３を構成するメモリは、例えばＳＤＲＡＭ等の揮発性のメモリやフラッシュメモリ等の不揮発性のメモリを含む。揮発性のメモリは、ＣＰＵがプログラム実行時にプログラムを展開するためのワークメモリや、データを一時的に記録するためのバッファメモリとして使用される。また、不揮発性のメモリには、商品情報出力装置２００を動作させるためのファームウェアや種々のアプリケーションを動作させるためのソフトウェアのプログラムデータが記録される。
The
本実施の形態では、商品情報出力装置２００には、あらかじめ商品情報提供装置１００と通信して、商品情報の送信を要求したり、商品情報を受信したりするために必要なアプリケーション（以下、「商品情報アプリ」と呼ぶ）があらかじめインストールされているものとする。この商品情報アプリを起動することによって制御装置２０３で実行される処理については後述する。
In the present embodiment, the product
マイク２０４は、ユーザによる発話音声を入力するための集音装置であり、スピーカ２０５は、音声を出力するための出力装置である。
The
カメラ２０６は、レンズ、撮像素子、その他周辺回路によって構成される公知の撮像装置である。ユーザは、商品情報出力装置２００上で撮影用アプリケーションを起動させることにより、カメラ２０６を用いた撮影を行うことができる。
The
本実施の形態における商品情報提供システム１０では、商品情報を提供する商品情報提供者は、不図示の端末から商品情報提供者端末１００へアクセスして、商品情報を商品情報提供装置１００に登録する。これによって、商品情報提供装置１００で商品情報が公開され、ユーザは、商品情報出力装置２００を操作して商品情報の提供を受けることが可能となる。なお、商品情報の提供者としては、商品を製造するメーカーや商品を販売する販売店等が想定される。また、商品情報の提供を受けるユーザとしては、商品の購入を希望する消費者や商品に興味を持っている消費者が想定される。
In the product
以下、本実施の形態における商品情報提供システム１０において、商品情報提供装置１００と商品情報出力装置２００とによって行われる処理の内容を中心に説明を行う。
Hereinafter, in the merchandise
まず、商品情報提供装置１００への商品情報の登録処理について説明する。商品情報提供者は、不図示の端末上で、自社が製造または販売する商品に関する種々の情報を商品情報として入力する。商品情報としては、例えば、商品を特定するための商品特定用情報、商品の価格情報、商品の仕様情報、商品の在庫情報、商品の納期情報、当該商品と他製品とを比較した結果を示す比較情報、商品の３ＤＣＡＤデータ、商品に対して実施されているキャンペーン情報、商品のウェブサイト情報、商品のＣＭ動画情報の少なくとも１つを含んでいる。
First, a process for registering product information in the product
なお、商品特定用情報としては、商品を一意に特定するための情報として、例えば、商品名、商品番号、商品ＩＤ等が用いられる。また、商品の在庫情報としては、情報出力装置２００が設置されている店舗での商品の在庫情報、商品を製造するメーカーでの商品の在庫情報、商品の配送元である配送センターにおける商品の在庫情報等が記録される。また、商品の納期情報としては、情報出力装置２００が設置されている店舗での商品の納期情報、商品を製造するメーカーでの商品の納期情報、商品の配送元である配送センターにおける商品の納期情報等が記録される。
As the product specifying information, for example, a product name, a product number, a product ID, or the like is used as information for uniquely specifying a product. The product inventory information includes product inventory information at the store where the
不図示の端末上で入力された商品情報のデータは、該端末が備える不図示の制御装置が実行する処理によって、通信回線を介して商品情報提供装置１００へ送信される。
Product information data input on a terminal (not shown) is transmitted to the product
商品情報提供装置１００では、制御装置１０３は、商品情報提供者が操作する端末から送信された商品情報のデータを受信すると、受信したデータを記録装置１０４に記録する。これによって、商品情報提供者によって入力された商品情報が商品情報提供装置１００に登録される。
In the product
商品情報提供装置１００に登録された商品情報は、商品情報提供者が不図示の端末を操作して任意に変更することができる。すなわち、商品情報提供者が端末上で商品情報を修正した場合には、変更後の商品情報のデータが商品情報提供装置１００へ送信され、これを受信した商品情報提供装置１００では、制御装置１０３は、記録装置１０４に記録されている商品情報を修正後の内容に更新する。
The merchandise information registered in the merchandise
このように、商品情報提供装置１００に商品情報が登録されると、ユーザは、商品情報出力装置２００を操作して、自身が購入を検討している商品や興味を持っている商品の商品情報を閲覧することが可能となる。例えば、商品情報提供装置１００によって商品情報が提供される商品を販売する店舗では、店頭に商品情報出力装置２００を設置しておく。店舗を訪れたユーザは、設置されている商品情報出力装置２００を操作して、自身が購入を希望する商品や持っている商品の商品情報を確認することができる。
As described above, when the product information is registered in the product
具体的には、ユーザは、まず商品情報出力装置２００を操作して上述した商品情報アプリを起動する。制御装置２０３は、商品情報アプリの起動が指示されると、タッチパネル２０１上にアプリ画面を表示し、アプリ画面上でのユーザによる操作を待ち受ける。ユーザは、商品情報提供装置１００から商品情報を取得することを希望する場合には、商品情報提供装置１００に対してその商品を特定するための情報を送信して、商品情報を要求する必要がある。
Specifically, the user first operates the product
本実施の形態では、アプリ画面上でユーザによって商品情報の取得が指示された場合には、制御装置２０３は、カメラ２０６を使用した撮影機能を起動して、ユーザに対して商品を特定するための被写体を撮影するように促す。ユーザは、商品を特定するための被写体として、（Ａ）商品名、商品コード、商品番号などの商品を特定するための文字列、（Ｂ）商品のイラスト、広告に表示されている写真、図面などの商品を特定するための図形、（Ｃ）店舗に展示・陳列されている商品自体、（Ｄ）商品の模型やサンプル等の商品を模した立体物、（Ｅ）店舗に設置されている広告用看板や広告ポスターなどの商品の形状を模した図形が描かれた設置物等を被写体として選んで撮影を行う。
In the present embodiment, when acquisition of product information is instructed by the user on the application screen, the
制御装置２０３は、ユーザによって撮影が行われた場合には、カメラ２０６から出力される画像データを取り込んで、通信モジュール２０２を介して商品情報提供装置１００へ送信する。
The
商品情報提供装置１００では、制御装置１０３は、商品情報出力装置１００から商品を特定するための被写体を撮影した画像データを受信した場合には、受信した画像データを対象とした被写体抽出処理を行って、画像内から商品を特定するための被写体の画像を抽出する。なお、ここで実行される被写体画像を抽出するための処理は公知の処理であるため詳細な説明は省略するが、例えば、画像内からエッジを抽出して、抽出したエッジの形状に基づいて画像内から被写体画像を抽出する等の方法を用いればよい。
In the product
制御装置１０３は、抽出した被写体画像と、あらかじめ記録装置１０４に記録されている商品特定用の画像とをマッチングさせることにより、商品出力装置２００から受信した画像データ内に写っている被写体を特定する。商品特定用の画像は、例えば、商品情報の提供者が、ユーザが商品を特定するための被写体として選択する可能性があるものをあらかじめ撮影して記録装置１０４に記録しておけばよい。
The
制御装置１０３は、マッチング処理によって特定した被写体に基づいて、ユーザが撮影した被写体に対応する商品を特定する。例えば、マッチングに用いる商品特定用の画像には、記録装置１０４上で上述した商品特定用情報が関連付けられており、制御装置１０３は、マッチングの結果、被写体とマッチした商品特定用画像に関連付けられている商品特定用情報を抽出することにより商品を特定する。
The
制御装置１０３は、特定した商品特定用情報が一致する商品情報を記録装置１０４から読み出して、商品情報出力装置２００へ送信する。これによって、商品情報出力装置２００で撮影された被写体に基づいて特定された商品の商品情報が商品情報出力装置２００へ送信される。
The
商品情報出力装置２００では、制御装置２０３は、受信した商品情報をタッチパネル２０１へ出力して表示する。これによって、ユーザは自信が興味を持っている商品や購入を検討している商品の商品情報を商品情報出力装置２００上で確認することができる。
In the product
なお、商品情報提供装置１００の制御装置１０３は、受信した画像データから被写体が抽出できないことにより、商品を特定することができない場合には、商品を特定することができないことを示すエラーメッセージを商品情報出力装置２００へ送信する。商品情報出力装置２００では、制御装置２０３は、商品情報提供装置１００からエラーメッセージを受信した場合には、受信したエラーメッセージをタッチパネル２０１に出力して表示したり、スピーカ２０５を介して出力することにより、ユーザに通知する。
The
本実施の形態では、ユーザは、タッチパネル２０１上に表示された商品情報について疑問点がある場合、確認したい事項がある場合、または表示された商品情報だけでは情報が不足している場合など、商品に対する質問がある場合には、商品情報提供装置１００へ質問を行うことができる。例えば、タッチパネル２０１上には、商品情報とともに質問開始を指示するためのボタンが表示されており、ユーザは該ボタンにタッチすることにより、質問を行うことができる。
In the present embodiment, the user has a question about the product information displayed on the
制御装置２０３は、ユーザによって質問の開始が指示された場合には、マイク２０４を介した音声入力の待ち受けを開始する。このとき、制御装置２０３は、タッチパネル２０３上にユーザに対して質問の発話を促す表示を行うようにしてもよい。
When the start of the question is instructed by the user, the
制御装置２０３は、マイク２０４を介してユーザによる質問音声の入力が開始されたことを検出した場合には、入力された音声データをバッファメモリに記録した後に、通信モジュール２０２を介して商品情報提供装置１００へ送信する。
When the
商品情報提供装置１００では、制御装置１０３は、商品情報出力装置２００から質問の音声データを受信したことを検出した場合には、受信した音声データをバッファメモリに記録した後、公知の音声認識技術を利用して、音声データから質問内容を特定する。例えば、あらかじめ記録装置１０４に音声認識用の待ち受け単語を記録しておき、制御装置１０３は、バッファメモリに記録した音声データを対象として、待ち受け単語を利用した音声認識処理を実行する。待ち受け単語とのマッチングの結果、質問内容に含まれる単語が抽出され、ユーザからの質問内容が特定される。
In the merchandise
制御装置１０３は、特定したユーザの質問内容に応じて、ユーザへの回答処理を行う。例えば、記録装置１０４には、ユーザから想定される質問内容と、それに対する回答の音声データとを関連付けた応答用情報を記録しておき、制御装置１０３は、特定した質問内容が記録装置１０４に記録されている場合には、その質問内容に関連付けて記録されている回答の音声データを読み出して、商品情報出力装置２００へ送信する。なお、ここでユーザから想定される質問内容に関連付けて記録される回答の音声データは、デパートでの接客手法や、トップセールスマンの会話手法などを取り入れた回答内容を音声データ化したものとすれば、顧客満足度を向上させることができる。
The
商品情報出力装置２００では、制御装置２０３は、商品情報提供装置１００から回答の音声データを受信した場合には、受信した音声データをスピーカ２０５を介して出力する。これによって、ユーザは、質問に対する回答を商品情報提供装置１００から得ることができ、疑問点等を解消することができる。
In the merchandise
また、商品情報提供装置１００の制御装置１０３は、バッファメモリに記録した質問の音声データと、その質問に対する回答の音声データとを関連付けた応答データを記録装置１０４に記録する。これにより、記録装置１０４には、応答データの履歴が蓄積されていく。商品情報の提供者や商品情報提供システム１０の提供者は、記録装置１０４に記録されている当該応答データの履歴を参照することにより、商品や商品情報に対するユーザの質問傾向を把握することができるため、ユーザが質問をしなくても済むように商品情報の内容を充実させることができる。
Further, the
一方、商品情報提供装置１００の制御装置１０３は、特定した質問内容が記録装置１０４に記録されていない場合や、音声認識処理の結果、質問内容が特定できない場合には、音声認識ができないこと、または質問内容が特定できないことを示すエラーメッセージを商品情報出力装置２００へ送信する。商品情報出力装置２００では、制御装置２０３は、商品情報提供装置１００からエラーメッセージを受信した場合には、受信したエラーメッセージをタッチパネル２０１に出力して表示したり、スピーカ２０５を介して出力することにより、ユーザに通知する。これによって、ユーザは、商品情報提供装置１００から回答を得ることができなかったことを把握することができる。
On the other hand, the
この場合も制御装置１０３は、バッファメモリに記録した質問の音声データと、その質問に対して回答できなかったことを示すデータとを関連付けて記録装置１０４に記録する。これにより、商品情報の提供者や商品情報提供システム１０の提供者は、回答できなかった質問の履歴を把握することができるため、待ち受け単語の見直しや音声認識処理の見直しを行って音声認識精度の向上に努めたり、想定される質問とそれに対する回答を追加して、より多くの質問に対応できるように、システムをバージョンアップさせていくことができる。
In this case as well, the
図４は、本実施の形態における商品情報提供装置１００で実行される商品情報登録処理の流れを示すフローチャートである。図４に示す処理は、商品情報提供者が操作する不図示の端末から、上述した商品情報を受信すると起動するプログラムとして、制御装置１０３によって実行される。
FIG. 4 is a flowchart showing a flow of product information registration processing executed by the product
ステップＳ１０において、制御装置１０３は、不図示の端末から受信した商品情報を記録装置１０４に記録する。その後、処理を終了する。
In step S <b> 10, the
図５は、本実施の形態における商品情報提供装置１００で実行される商品情報提供処理の流れを示すフローチャートである。図５に示す処理は、商品情報出力装置２００から、商品情報の要求のために、上述した商品を特定するための被写体を撮影した画像データを受信すると起動するプログラムとして、制御装置１０３によって実行される。
FIG. 5 is a flowchart showing a flow of product information provision processing executed by the product
ステップＳ１１０において、制御装置１０３は、上述したように、受信した画像データを対象とした被写体抽出処理を行って、画像内から商品を特定するための被写体画像を抽出する。その後、ステップＳ１２０へ進む。
In step S110, as described above, the
ステップＳ１２０では、制御装置１０３は、ステップＳ１１０で被写体抽出処理の結果、画像内から被写体画像が抽出できたか否かを判断する。ステップＳ１２０で否定判断した場合には、ステップＳ１６０へ進み、制御装置１０３は、商品を特定することができないことを示すエラーメッセージを商品情報出力装置２００へ送信して、処理を終了する。これに対して、ステップＳ１２０で肯定判断した場合には、ステップＳ１３０へ進む。
In step S120, the
ステップＳ１３０では、制御装置１０３は、上述したように、抽出した被写体画像と、あらかじめ記録装置１０４に記録されている商品特定用の画像とをマッチングさせることにより、商品出力装置２００から受信した画像データ内に写っている被写体を特定する。その後、ステップＳ１４０へ進む。
In step S130, as described above, the
ステップＳ１４０では、制御装置１０３は、上述したように、マッチングの結果、被写体とマッチした商品特定用画像に関連付けられている商品特定用情報を抽出することにより商品を特定して、ステップＳ１５０へ進む。
In step S140, as described above, the
ステップＳ１５０では、制御装置１０３は、特定した商品特定用情報が一致する商品情報を記録装置１０４から読み出して、商品情報出力装置２００へ送信する。その後、処理を終了する。
In step S <b> 150, the
図６は、本実施の形態における商品情報出力装置２００で実行される商品情報出力処理の流れを示すフローチャートである。図６に示す処理は、上述したように、ユーザによって商品情報アプリの起動が指示されると起動するプログラムとして、制御装置２０３によって実行される。
FIG. 6 is a flowchart showing a flow of product information output processing executed by the product
ステップＳ２１０では、制御装置２０３は、タッチパネル２０１上にアプリ画面を表示し、アプリ画面上でのユーザによる操作を待ち受ける。その後、ステップＳ２２０へ進む。
In step S210, the
ステップＳ２２０では、制御装置２０３は、アプリ画面上でユーザによって商品情報の取得が指示されたか否かを判断する。ステップＳ２２０で肯定判断した場合には、ステップＳ２３０へ進む。
In step S220, the
ステップＳ２３０では、制御装置２０３は、上述したように、カメラ２０６を使用した撮影機能を起動して、ユーザに対して商品を特定するための被写体を撮影するように促す。その後、ステップＳ２４０へ進む。
In step S230, as described above, the
ステップＳ２４０では、制御装置２０３は、ユーザによって撮影が行われたか否かを判断する。ステップＳ２４０で肯定判断した場合には、ステップＳ２５０へ進む。
In step S240, the
ステップＳ２５０では、制御装置２０３は、カメラ２０６から出力される画像データを取り込んで、通信モジュール２０２を介して、商品を特定するための被写体が撮影された画像データを商品情報提供装置１００へ送信する。その後、ステップＳ２６０へ進む。
In step S250, the
ステップＳ２６０では、制御装置２０３は、商品情報提供装置１００から上述した商品情報を受信したか否かを判断する。ステップＳ２６０で肯定判断した場合には、ステップＳ２７０へ進み、制御装置２０３は、受信した商品情報をタッチパネル２０１へ出力して表示し、処理を終了する。これに対して、ステップＳ２６０で否定判断した場合には、ステップＳ２８０へ進む。
In step S260, the
ステップＳ２８０では、制御装置２０３は、商品情報提供装置１００からエラーメッセージを受信したか否かを判断する。ステップＳ２８０で否定判断した場合には、ステップＳ２６０へ戻る。これに対して、ステップＳ２８０で肯定判断した場合には、ステップＳ２９０へ進む。
In step S280, the
ステップＳ２９０では、制御装置２０３は、受信したエラーメッセージをタッチパネル２０１に出力して表示したり、スピーカ２０５を介して出力することにより、ユーザに通知する。その後、処理を終了する。
In step S <b> 290, the
図７は、本実施の形態における商品情報出力装置２００で実行される質問処理の流れを示すフローチャートである。図７に示す処理は、上述したように、ユーザによって質問開始が指示されると起動するプログラムとして、制御装置２０３によって実行される。
FIG. 7 is a flowchart showing a flow of question processing executed by the product
ステップＳ３１０では、制御装置２０３は、マイク２０４を介してユーザによる質問音声が入力されたか否かを判断する。ステップＳ２１０で肯定判断した場合には、ステップＳ３２０へ進む。
In step S <b> 310, the
ステップＳ３２０では、制御装置２０３は、入力された音声データをバッファメモリに記録した後に、通信モジュール２０２を介して商品情報提供装置１００へ送信する。その後、ステップＳ３３０へ進む。
In step S <b> 320, the
ステップＳ３３０では、制御装置２０３は、商品情報提供装置１００から回答の音声データを受信したか否かを判断する。ステップＳ３３０で肯定判断した場合には、ステップＳ３４０へ進む。
In step S <b> 330, the
ステップＳ３４０では、制御装置２０３は、受信した回答の音声データをスピーカ２０５を介して出力する。その後、処理を終了する。
In step S <b> 340, the
一方、ステップＳ３３０で否定判断した場合には、ステップＳ３５０へ進む。ステップＳ３５０では、制御装置２０３は、商品情報提供装置１００からエラーメッセージを受信したか否かを判断する。ステップＳ３５０で否定判断した場合には、ステップＳ３３０へ戻る。これに対して、ステップＳ３５０で肯定判断した場合には、ステップＳ３６０へ進む。
On the other hand, if a negative determination is made in step S330, the process proceeds to step S350. In step S350, the
ステップＳ３６０では、制御装置２０３は、受信したエラーメッセージをタッチパネル２０１に出力して表示したり、スピーカ２０５を介して出力することにより、ユーザに通知する。その後、処理を終了する。
In step S <b> 360, the
図８は、本実施の形態における商品情報提供装置１００で実行される回答処理の流れを示すフローチャートである。図８に示す処理は、商品情報出力装置２００から上述した質問の音声データを受信すると起動するプログラムとして、制御装置１０３によって実行される。
FIG. 8 is a flowchart showing the flow of answer processing executed by the product
ステップＳ４１０では、制御装置１０３は、商品情報出力装置２００から受信した音声データをバッファメモリに記録した後、上述したように、公知の音声認識技術を利用して、音声データから質問内容を特定する。その後、ステップＳ４２０へ進む。
In step S410, the
ステップＳ４２０では、制御装置１０３は、ステップＳ４１０の処理によって、質問内容が特定できたか否かを判断する。ステップＳ４２０で肯定判断した場合には、ステップＳ４３０へ進む。
In step S420, the
ステップＳ４３０では、制御装置１０３は、特定した質問内容及びそれに関連付けられた回答の音声データが記録装置１０４に記録されているか否かを判断する。ステップＳ４３０で肯定判断した場合には、ステップＳ４４０へ進む。
In step S430, the
ステップＳ４４０では、制御装置１０３は、ステップＳ４１０で特定した質問内容に関連付けて記録されている回答の音声データを記録装置１０４から読み出して、商品情報出力装置２００へ送信する。その後、ステップＳ４５０へ進む。
In step S440, the
ステップＳ４５０では、制御装置１０３は、質問の音声データと、その質問に対する回答の音声データとを関連付けて記録装置１０４に記録する。その後、処理を終了する。
In step S450, the
一方、ステップＳ４２０で否定判断した場合、またはステップＳ４３０で否定判断した場合には、ステップＳ４６０へ進む。ステップＳ４６０では、制御装置１０３は、音声認識ができないこと、または質問内容が特定できないことを示すエラーメッセージを商品情報出力装置２００へ送信する。その後、ステップＳ４７０へ進む。
On the other hand, if a negative determination is made in step S420 or a negative determination is made in step S430, the process proceeds to step S460. In step S460, the
ステップＳ４７０では、制御装置１０３は、上述したように、バッファメモリに記録した質問の音声データと、その質問に対して回答できなかったことを示すデータとを関連付けて記録装置１０４に記録する。その後、処理を終了する。
In step S470, as described above, the
以上説明した本実施の形態によれば、以下のような作用効果を得ることができる。
（１）商品情報出力装置２００では、制御装置２０３は、ユーザからの指示に基づいて、商品を特定するための被写体を撮像して、商品特定用の画像を取得し、取得した商品特定用の画像を商品情報提供装置１００へ送信して、商品特定用画像に基づいて特定される商品の商品情報を要求する。そして、商品情報提供装置１００から商品情報を受信し、受信した商品情報を出力してユーザに提示する。また、商品情報に対するユーザからの質問を音声データとして取得し、質問音声データを商品情報提供装置１００へ送信して、質問に対する回答を要求し、商品情報提供装置１００から質問に対する回答の音声データを回答音声データとして受信して出力するようにした。また、商品情報提供装置１００では、制御装置１０３は、商品情報出力装置２００から商品特定用画像を受信し、受信した商品特定用画像を画像処理して、ユーザが商品情報の取得を希望する商品を特定し、あらかじめ記録装置１０４に記録されている商品情報の中から、特定した商品の商品情報を読み出して、商品情報出力装置２００へ送信する。さらに、商品情報出力装置２００から質問音声データを受信し、受信した質問音声データに基づいて、ユーザからの質問内容を特定し、あらかじめ記録装置１０４に記録されている、ユーザから想定される質問内容を示す情報と、質問に対する回答音声データとが関連付けられた応答用情報の中から、特定した質問内容に関連付けて記録されている回答音声データを読み出して、商品情報出力装置２００へ送信するようにした。これによって、ユーザは、商品情報出力装置２００上で所望の商品情報を確認することができるとともに、提示された商品情報に対して、音声で質問をして、その回答を得ることができ、その場で会話をする感覚で、容易に商品情報に対する疑問点を解消したり、確認したい事項を確認したりすることができる。また、店舗では、人手不足や従業員の知識不足等により、顧客満足度が低下する可能性がある状況であっても、商品情報出力装置２００を設置することにより、顧客は店員を探さなくても、自由に商品情報を調べたり、それに対する質問をしたりすることができるので、顧客に対するサービスを向上させることができる。さらに、ユーザは、商品情報を取得するために、種々の検索条件を指定する必要がなく、その商品を特定するための被写体を撮影するだけでよいため、簡易な操作で商品情報の提供を受けることができる。
According to the present embodiment described above, the following operational effects can be obtained.
(1) In the product
（２）商品情報提供装置１００では、制御装置１０３は、ユーザによる質問の音声データと、その質問に対する回答の音声データとを関連付けた応答データを記録装置１０４に記録するようにした。これにより、記録装置１０４には、応答データの履歴が蓄積されるため、商品情報の提供者や商品情報提供システム１０の提供者は、記録装置１０４に記録されている応答データの履歴を参照することにより、商品や商品情報に対するユーザの質問傾向を把握することができ、ユーザが質問をしなくても済むように商品情報の内容を充実させることができる。
(2) In the product
（３）商品情報出力装置２００に商品情報を提供するために、商品情報提供装置１００の記録装置１０４に商品情報を記録するようにした。この場合、ユーザの要望に応えるためには、取り扱う商品の商品情報を記録装置１０４にデータベース化して登録しておく必要があるため、必然的に商品情報が一元管理されることになる。また、煩雑になりがちな商品情報の登録のために、この作業を専門的に行う社員の雇用が必要となったり、この作業を請け負う組織が設立されたりと、新たな雇用の創出につながる可能性もある。
(3) In order to provide the product information to the product
（４）商品情報提供者は、不図示の端末上で、自社が製造または販売する商品に関する種々の情報を商品情報として入力するようにし、商品情報としては、例えば、商品を特定するための商品特定用情報、商品の価格情報、商品の仕様情報、商品の在庫情報、商品の納期情報、当該商品と他製品とを比較した結果を示す比較情報、商品の３ＤＣＡＤデータ、商品に対して実施されているキャンペーン情報、商品のウェブサイト情報、商品のＣＭ動画情報の少なくとも１つを含むようにした。この場合、商品情報提供者は、商品名、価格情報、仕様情報のような一般的な商品情報の他に、在庫情報や納期情報といったユーザが気になると考えられる情報、さらには、他製品との比較情報やキャンペーン情報等の商品情報提供者が積極的に提供したいと考える情報等を任意に商品情報に含めることができる。よって、ユーザからの商品情報の提供要求に応える一方通行の情報提供ではなく、商品情報提供者側が提供する情報をコントロールできるというユーザと商品情報提供者の双方の要望を満たすことができるシステムを実現することができる。 (4) The merchandise information provider inputs various information regarding merchandise manufactured or sold by the company as merchandise information on a terminal (not shown). As merchandise information, for example, merchandise for specifying the merchandise Specific information, product price information, product specification information, product inventory information, product delivery date information, comparison information indicating the result of comparing the product with another product, 3D CAD data for the product, and product Current campaign information, product website information, and product CM video information. In this case, in addition to general product information such as product name, price information, and specification information, the product information provider can provide information such as inventory information and delivery date information that the user is interested in, and other products. Information such as comparison information and campaign information that the product information provider wants to actively provide can be arbitrarily included in the product information. Therefore, a system that can satisfy the demands of both the user and the product information provider that can control the information provided by the product information provider side, not the one-way information supply that responds to the product information provision request from the user. can do.
―変形例―
なお、上述した実施の形態の商品情報提供システムは、以下のように変形することもできる。
（１）上述した実施の形態では、商品情報提供装置１００の制御装置１０３は、ユーザによる質問の音声データと、その質問に対する回答の音声データとを関連付けた応答データを記録装置１０４に記録する例について説明した。このように記録した応答データに含まれる質問と回答の組み合わせは、過去に実際にユーザが質問した内容とそれに対する回答内容であるため、ユーザによって頻繁に質問される内容である可能性が高い。よって、制御装置１０３は、商品情報出力装置２００から質問の音声データを受信した場合には、まずこの応答データの履歴の中に同じ質問内容が無いかをチェックし、ある場合には応答データの履歴の中からそれに対応する回答の音声データを読み出して商品情報出力装置２００へ送信するようにしてもよい。このように、履歴として蓄積された応答データから優先して回答の音声データを読み出すようにすれば、過去に質問された実績のある内容に基づいて回答を行えるため、回答精度を向上させることができる。また、応答データの履歴を対象として質問の音声データを検索すればよいため、レスポンスを向上させることができる。
-Modification-
Note that the product information providing system of the above-described embodiment can be modified as follows.
(1) In embodiment mentioned above, the
（２）上述した実施の形態では、記録装置１０４には、ユーザから想定される質問内容と、それに対する回答の音声データとを関連付けた応答用情報を記録しておき、制御装置１０３は、特定した質問内容が記録装置１０４に記録されている場合には、その質問内容に関連付けて記録されている回答の音声データを読み出して、商品情報出力装置２００へ送信する例について説明した。このとき、ユーザから想定される１つの質問内容に対して、１つの回答の音声データを関連付けて応答用情報としてもよいし、ユーザから想定される１つの質問内容に対して、複数の回答の音声データを関連付けて応答用情報としてもよい。ユーザから想定される１つの質問内容に対して、複数の回答の音声データを関連付けるようにすれば、実際の人物が質問に回答する場合と同様に、１つの質問に対して複数通りの回答の仕方があることを考慮して、より実際の接客に近い形でのユーザへの対応が可能となる。なお、制御装置１０３は、特定した質問内容に対する回答の音声データが複数記録されている場合には、その中からランダムに選択した１つの回答の音声データを読み出して、商品情報出力装置２００へ送信すればよい。
(2) In the above-described embodiment, the
あるいは、制御装置は、過去の回答内容に対するユーザの満足度を判定し、満足度が高い回答の音声データを優先して読み出すようにしてもよい。この場合、制御装置１０３は、一定のデータが集まるまでは、複数の回答音声データの中からランダムで回答の音声データを選択して商品情報出力装置２００へ送信すればよい。そして、商品情報出力装置２００では、制御装置２０３は、受信した回答の音声データを出力した後に、その回答内容に満足したかをユーザに確認する。例えば、制御装置２０３は、「今の回答でよろしいですか？」のような音声を出力して、それに対してユーザに「はい」または「いいえ」の発話を促せばよい。制御装置２０３は、ユーザが「はい」と発話したことを検出した場合には、ユーザが回答に満足したことを示す情報を商品情報提供装置１００へ送信する。一方、制御装置２０３は、ユーザが「いいえ」と発話したことを検出した場合には、ユーザが回答に不満であったことを示す情報を商品情報提供装置１００へ送信する。
Alternatively, the control device may determine the degree of satisfaction of the user with respect to past answer contents, and preferentially read the voice data of the answer with a high degree of satisfaction. In this case, the
商品情報提供装置１００では、制御装置１０３は、商品情報出力装置２００から上記のようなユーザの満足度を示す情報を受信した場合には、当該満足度を示す情報に基づいて、回答の音声データの読み出し優先度を設定する。例えば、制御装置１０３は、ユーザの満足度を示す情報として、ユーザが回答に満足したことを示す情報を受信した場合には、優先度として１を設定し、この優先度情報を、その回答の音声データを含む応答データに関連付けて記録する。以降、その回答音声データに対してユーザが回答に満足したことを示す情報を受信した際には、その回答の音声データを含む応答データに関連付けて記録されている優先度情報に１を加算していく。
In the merchandise
一方、制御装置１０３は、ユーザの満足度を示す情報として、ユーザが回答に不満であったことを示す情報を受信した場合には、優先度として−１を設定し、この優先度情報を、その回答の音声データを含む応答データに関連付けて記録する。以降、その回答音声データに対してユーザが回答に不満であったことを示す情報を受信した際には、その回答の音声データを含む応答データに関連付けて記録されている優先度情報から１を減算していく。これにより、履歴として記録される各応答データには、読み出し時の優先情報が関連付けて記録されていく。
On the other hand, when the
制御装置１０３は、特定した質問内容に対する回答の音声データが複数記録されている場合には、その優先度が高く設定されている回答の音声データ、すなわち優先度情報として記録されている数値が大きい回答の音声データを読み出して、商品情報出力装置２００へ送信すればよい。
If a plurality of voice data of answers to the specified question content is recorded, the
また、商品情報出力装置２００では、制御装置２０３は、商品情報提供装置１００との間で同じ商品情報に対して、複数回の質問と回答のやりとりがあった場合には、その一連のやりとりに対して、ユーザに満足度を問い合わせるようにしてもよい。例えば、制御装置２０３は、「一連の回答に対する満足度をＡからＣの三段階でお答えください」のような音声を出力して、それに対してユーザに「Ａ」、「Ｂ」、「Ｃ」の発話を促せばよい。制御装置２０３は、ユーザが「Ａ」と発話したことを検出した場合には、一連の回答に対するユーザの満足度が「Ａ」であることを示す情報を商品情報提供装置１００へ送信する。制御装置２０３は、ユーザが「Ｂ」と発話したことを検出した場合には、一連の回答に対するユーザの満足度が「Ｂ」であることを示す情報を品情報提供装置１００へ送信する。制御装置２０３は、ユーザが「Ｃ」と発話したことを検出した場合には、一連の回答に対するユーザの満足度が「Ｃ」であることを示す情報を商品情報提供装置１００へ送信する。
Further, in the product
商品情報提供装置１００では、制御装置１０３は、一連の回答に対するユーザの満足度が「Ａ」であることを示す情報を受信した場合には、その一連のやりとりに含まれる全ての応答データに関連付けて記録されている優先度情報に１を加算する。また、制御装置１０３は、一連の回答に対するユーザの満足度が「Ｂ」であることを示す情報を受信した場合には、その一連のやりとりに含まれる全ての応答データに関連付けて記録されている優先度情報に対して加算も減算も行わない。制御装置１０３は、一連の回答に対するユーザの満足度が「Ｃ」であることを示す情報を受信した場合には、その一連のやりとりに含まれる全ての応答データに関連付けて記録されている優先度情報から１を減算する。これによって、複数の質問が続けて行われたときに、その一連の回答に対する満足度も加味して、応答データの読み出し優先度を設定することができる。
In the merchandise
制御装置１０３は、さらに、商品情報出力装置２００から一連の回答に対するユーザの満足度を示す情報を受信した場合には、その一連の応答データの組に対して、満足度に対する優先度情報を関連付けて記録するようにしてもよい。この場合も、受信した満足度が「Ａ」、「Ｂ」、「Ｃ」のいずれであるかに応じて、応答データの組に関連付けて記録された優先度情報に加減算を行えばよい。このようにすると、メーカーや販売店の担当者は、ユーザがどのような内容の質問をどのような順序で行ったかという質問の流れと、それに対する回答の内容とを把握することができるとともに、その質問の流れに対してどのような回答をすればユーザの満足度が高くなるかを把握することができる。このため、質問の音声データに関連付けて記録する回答の音声データに対して、回答内容の変更や回答内容のバリエーションの増加などの見直しを行って、さらなるユーザ満足度の向上につなげることができる。なお、ここでは満足度を「Ａ」、「Ｂ」、「Ｃ」の三段階で評価する例について説明したが、四段階、五段階など、評価の仕方はこれに限定されるものではない。
Further, when the
（３）上述した実施の形態では、商品情報提供装置１００の制御装置１０３は、ユーザによる質問の音声データと、その質問に対する回答の音声データとを関連付けた応答データの履歴を記録装置１０４に記録する例について説明した。この場合、制御装置１０３は、あらかじめ設定された所定のタイミング、例えば１日１回所定の時刻に、記録装置１０４に記録されている応答データの履歴情報を、質問がされた商品を提供するメーカーが有する端末へ送信するようにしてもよい。例えば、各商品情報に対応付けてメーカーの担当者のメールアドレスを登録しておき、制御装置１０３は、応答データの履歴情報を質問がされた商品のメーカー担当者へメールで送信するようにすればよい。これによって、メーカーでは、商品に対してユーザがどのような質問を行い、それに対してどのような回答がなされたのかを把握することができる。
(3) In the above-described embodiment, the
（４）上述した実施の形態では、制御装置１０３は、特定した質問内容が記録装置１０４に記録されておらず、質問内容に関連付けて記録されている回答の音声データを読み出すことができない場合には、エラーメッセージを商品情報出力装置２００へ送信する例について説明した。しかしながら、制御装置１０３は、質問内容に関連付けて記録されている回答の音声データを読み出すことができない場合には、あらかじめ登録された通知先端末と、商品情報出力装置２００との間で通信を確立して、通知先端末のオペレータとユーザとの音声通話を開始するようにしてもよい。これにより、商品情報提供装置１００では対応できない質問がされたときには、オペレータに繋いで、ユーザはオペレータに質問をして、疑問を解消することができる。
(4) In the above-described embodiment, the
また、この場合、通知先端末のオペレータとユーザとの音声通話内容を記録装置１０４に記録するようにしてもよい。これによって、ユーザとオペレータとのやり取りの履歴を、回答音声データの充実や、オペレータの質向上に役立てることができる。
In this case, the content of the voice call between the operator of the notification destination terminal and the user may be recorded in the
あるいは、制御装置１０３は、質問内容に関連付けて記録されている回答の音声データを読み出すことができない場合には、すぐにオペレータに繋ぐか、回答が準備できた段階でオペレータから連絡をもらうかをユーザに選択させるようにしてもよい。ユーザがすぐにオペレータに繋ぐことを選択した場合には、上記と同様に、制御装置１０３は、商品情報出力装置２００との間で通信を確立して、通知先端末のオペレータとユーザとの音声通話を開始すればよい。一方、ユーザが回答が準備できた段階でオペレータから連絡をもらうことを選択した場合には、制御装置１０３は、通知先端末へユーザによる質問音声データを送信して、ユーザから質問があったことを通知するようにすればよい。これを受けた通知先端末では、オペレータは、質問音声データの内容からユーザの質問内容を把握して、それに対する回答を準備した後に、通知先端末から商品情報出力装置２００を呼び出して回答を行うようにすればよい。これにより、ユーザは、すぐにオペレータと会話をするか、回答が準備された段階でオペレータと会話するかを選択できるため、ユーザの利便性を向上させることができる。また、ユーザは、回答が準備された段階でオペレータから連絡をもらうように選択すれば、時間がない場合に無駄な待ち時間が発生するのを防ぐことができる。なお、ユーザが回答が準備できた段階でオペレータから連絡をもらうことを選択した場合には、制御装置１０３は、ユーザに連絡先とする電話番号の入力を促し、ここで入力された電話番号を通知先端末へ送信するようにしてもよい。これにより、オペレータは、ユーザへ直接電話して質問への回答を行うこともできる。
Alternatively, if the
また、ユーザは、オペレータとの会話の結果、商品の購入を決めた場合には、オペレータに商品の購入意思を伝えることができ、この場合、オペレータは、通知先端末を操作して、ユーザが操作する商品情報出力装置２００へ商品注文用の画面を表示させるようにしてもよい。ユーザは、表示された商品注文用の画面上で必要事項を入力することにより、オペレータに問い合わせを行った商品の注文を行うことができる。
Further, when the user decides to purchase the product as a result of the conversation with the operator, the user can inform the operator of the purchase intention of the product. In this case, the operator operates the notification destination terminal, A product order screen may be displayed on the product
（５）上述した実施の形態では、制御装置１０３は、商品情報出力装置２００からユーザによる質問の音声データを受信した場合には、記録装置１０４に記録されているその質問に対する回答の音声データを読み出して、商品情報出力装置２００へ送信する例について説明した。しかしながら、ユーザは、既に商品情報出力装置２００に送信されている商品情報に含まれている内容について質問をしてくることも考えられる。このように、ユーザからの質問内容に対する回答が、送信済みの商品情報に含まれている場合には、制御装置１０３は、質問内容に対する回答が商品情報に含まれていることを通知するための音声データを回答音声データとして記録装置１０４から読み出して、商品情報出力装置２００へ送信するようにしてもよい。これによって、送信済みの商品情報を活用して、ユーザの質問に回答することができる。
(5) In the above-described embodiment, when the
（６）上述した実施の形態では、ユーザは、質問内容を音声で入力することができ、それに対する回答を音声で得ることができる例について説明した。この方法によると、ユーザは、あたかも商品情報出力装置２００と会話をするような感覚で、商品情報に対する質問を行うことができる。本発明では、これをさらに発展させて、制御装置２０３は、タッチパネル２０１内に人物の映像を表示させ、この人物が、回答音声データを話しているように、人物映像の動作を制御するようにしてもよい。これによって、ユーザはタッチパネル２０１内に表示された仮想的な人物と話をしているような感覚で、商品情報に対する質問をすることができる。また、さらにリアリティを出すために、制御装置２０３は、実空間上に人物の立体映像を表示させ、この人物が、回答音声データを話しているように、立体映像の人物の動作を制御するようにしてもよい。これによって、ユーザは実空間上に浮かび上がった仮想的な人物と話をしているような感覚で、商品情報に対する質問をすることができる。さらに、このように実空間上に人物の立体映像を表示させた場合には、実空間上に浮かび上がった仮想的な人物に質問をして、回答をさせることができるため、その人物を仮想的な接客員（デジタルアテンダント）として利用することができる。また、商品のメーカーや販売店は、商品に興味を持っているユーザを探し出して、実際にセールスマン等を送り込むことは困難であるが、このデジタルアテンダントは、商品に対して興味を持っているユーザが操作する商品出力装置２００に表示されるため、販売戦略に基づいて行動するセールスマンの役割を果たすデジタルアテンダントを、瞬時にユーザの元に送り込むことができる。
(6) In the above-described embodiment, the example has been described in which the user can input the contents of the question by voice and can obtain the answer to the voice by voice. According to this method, the user can make a question about the product information as if the user had a conversation with the product
（７）上述した実施の形態では、商品情報出力装置２００では、制御装置２０３は、ユーザによって撮影された商品を特定するための被写体の画像データを商品情報提供装置１００へ送信して、商品情報提供装置１００から商品情報を取得し、ユーザに提供する例について説明した。また、商品情報提供装置１００は、商品情報出力装置２００からの要求に応じて商品情報を送信する例について説明した。しかしながら、商品情報提供システム１０では、ユーザは、商品情報出力装置２００上で商品情報を確認した後に、その商品を注文できるようにしてもよい。この場合、例えば、商品情報を表示した画面上に注文ボタン等を表示し、制御装置２０３は、ユーザによって注文ボタンにタッチされたことを検出したときに、ユーザに注文に必要な情報の入力を促し、これらを注文情報として商品情報提供装置１００へ送信すればよい。商品情報提供装置１００では、制御装置１０３は、商品情報出力装置２００から注文情報を受信することにより商品の注文を受け付け、受け付けた商品の注文内容に基づいて、注文された商品の代金を清算するための決済情報を商品情報出力装置１００へ送信すればよい。商品情報出力装置２００では、制御装置２０３は、商品情報提供装置１００から受信した決済情報に基づいて、ユーザが注文した商品の決済画面をタッチパネル２０１上に表示し、該決済画面上で入力された情報を商品情報提供装置１００へ送信して、決済を行うようにすればよい。これにより、ユーザは、商品情報出力装置２００を操作して、商品の注文も行うことができる。
(7) In the above-described embodiment, in the product
（８）上述した実施の形態では、商品情報の提供者としては、商品を製造するメーカーや商品を販売する販売店等が想定される。また、商品情報の提供を受けるユーザとしては、商品の購入を希望する消費者や商品に興味を持っている消費者を想定し、商品情報出力装置２００は、商品情報提供装置１００によって商品情報が提供される商品を販売する店舗の店頭に設置される例について説明した。この場合、例えば、商品情報出力装置２００は、デパート、スーパー、家電量販店、個人商店等に設置され、ユーザは、これらの店舗で取り扱われている商品の情報を商品情報出力装置２００を操作して得ることができる。しかしながら、これら小売業界以外の他の業界でも本発明による商品情報提供システム１０を活用することができる。以下にその一例を挙げる。
(8) In the above-described embodiment, the product information provider is assumed to be a manufacturer that manufactures the product, a store that sells the product, or the like. Further, as a user who receives provision of merchandise information, a consumer who wants to purchase merchandise or a consumer who is interested in merchandise is assumed. The example installed in the shop front of the store which sells the goods provided was demonstrated. In this case, for example, the product
例えば、自動車業界では、本発明による商品情報提供システム１０を導入することによより、ショールームに商品情報提供装置２００を設置すれば、ショールームの人手不足を解消することができる。また、ユーザが所持する端末を商品情報提供装置２００とすれば、ユーザは路上を走る車の画像を撮影して商品情報提供装置１００にアクセスするだけで、その車の商品情報を取得することができる。また、この車に対する質問も行うことができる。
For example, in the automobile industry, by introducing the product
また、映画、演劇の切符売り場に商品情報提供装置２００を設置すれば、ユーザは、映画や演劇の出演者やあらすじなどを商品情報として把握することができ、さらに映画や演劇について質問をすることもできる。
In addition, if the product
化粧品業界では、ユーザが所持する端末を商品情報提供装置２００とすれば、ユーザは自宅にいながら化粧品の商品情報を取得することができる。また、質問を行う際には、同時に自身の肌の画像等を送るようにすれば、商品情報提供装置１００で肌の状態を診断して、お勧め商品や肌に関するアドバイスの音声データを回答するようなシステムにも応用することができる。
In the cosmetics industry, if the terminal possessed by the user is the product
また、出版業界に本システムを導入をすれば、これまでユーザは、通販カタログなどで得ていた商品の情報を、既存のファッション雑誌、趣味娯楽雑誌、その他、電子書籍を含めたあらゆる書籍上に掲載されている商品を特定するための情報を被写体として撮影することにより、これらの商品の商品情報を容易に取得して、商品を購入することが可能となる。 In addition, if this system is introduced to the publishing industry, users will be able to put information on products that have been obtained in mail-order catalogs, etc., into existing fashion magazines, hobby entertainment magazines, and other books including electronic books. By shooting information for specifying the posted products as a subject, it is possible to easily acquire the product information of these products and purchase the products.
また、宅配便業界に本システムを導入すれば、商品情報提供装置１００には、商品情報として荷物の配達情報を記録しておき、ユーザは、商品情報出力装置２００を操作して、配達伝票に表示された配達番号等を撮影して商品情報を問い合わせることにより、荷物の配達情報を確認することができる。また、ユーザは、表示された配達情報に対して質問がある場合には、音声で質問をしてその回答を得ることもできる。これにより、現在は、配達番号を画面上で入力して配達状況を問い合わせるのが一般的であるが、ユーザは、撮影を行うだけで問い合わせができるので、面倒な入力作業を省くことができる。また、伝票番号の入力ミスも防ぐことができる。
If this system is introduced into the courier industry, the delivery information of the package is recorded in the product
（９）上述した実施の形態では、商品情報提供装置１００の制御装置１０３は、ユーザによる質問の音声データと、その質問に対する回答の音声データとを関連付けた応答データの履歴を記録装置１０４に記録する例について説明した。この応答データは、ユーザごとに記録するようにしてもよい。例えば、ユーザを一意に特定するためのユーザＩＤ等を発行しておき、制御装置２０３は、ユーザには、上述した商品情報アプリを起動する際に、ユーザＩＤを用いたログインを要求するようにして、被写体特定用の画像データや質問音声データを商品情報提供装置１００へ送信する際にユーザＩＤも送るようにすれば、商品情報提供装置１００側でユーザを一意に特定することが可能となる。このように、履応答データをユーザごとに記録するようにすれば、商品情報の提供者は、ユーザごとに質問の傾向や興味を持っている商品を把握することができる。また、制御装置１０３は、ユーザごとに、商品情報の送信履歴を記録するようにしてもよい。これによって、商品情報の提供者は、各ユーザがどのような商品に興味を持っているかを把握することができる。
(9) In the embodiment described above, the
（１０）上述した実施の形態では、記録装置１０４には、ユーザから想定される質問内容と、それに対する回答の音声データとを関連付けた応答用情報を記録しておく例について説明した。この応答用情報は、商品情報提供システム１０を導入する国の言語に合わせて準備するようにしてもよいし、複数の言語に対応できるようにしてもよい。複数の言語に対応する場合には、質問が想定される言語の応答用情報を全て用意して記録装置１０４に記録しておいてもよいし、特定の言語、例えば日本語や英語による応答用言語のみを用意しておき、他の言語は、公知の機械翻訳技術を利用して翻訳することにより対応してもよい。
(10) In the embodiment described above, an example has been described in which the
なお、本発明の特徴的な機能を損なわない限り、本発明は、上述した実施の形態における構成に何ら限定されない。また、上述の実施の形態と複数の変形例を組み合わせた構成としてもよい。 Note that the present invention is not limited to the configurations in the above-described embodiments as long as the characteristic functions of the present invention are not impaired. Moreover, it is good also as a structure which combined the above-mentioned embodiment and a some modification.
１０ 商品情報提供システム
１００ 商品情報提供装置
１０１ 操作部材
１０２ 接続ＩＦ
１０３ 制御装置
１０４ 記録装置
１０５ 表示装置
２００ 商品情報出力装置
２０１ タッチパネル
２０２ 通信モジュール
２０３ 制御装置
２０４ マイク
２０５ スピーカ
２０６ カメラ
10 Product
103
Claims (17)
前記商品情報出力装置は、
ユーザからの指示に基づいて、商品を特定するための被写体を撮像して、商品特定用画像を取得する商品特定用画像取得手段と、
前記商品特定用画像取得手段によって取得された前記商品特定用画像を前記商品情報提供装置へ送信して、前記商品特定用画像に基づいて特定される商品の商品情報を要求する商品情報要求手段と、
前記商品情報提供装置から前記商品情報を受信する商品情報受信手段と、
前記商品情報受信手段によって受信された前記商品情報を出力して前記ユーザに提示する商品情報提示手段と、
前記商品情報提示手段によって出力された前記商品情報に対する前記ユーザからの質問を音声データとして取得する質問音声データ取得手段と、
前記質問音声データ取得手段によって取得された前記質問音声データを前記商品情報提供装置へ送信して、前記質問に対する回答を要求する回答要求手段と、
前記商品情報提供装置から前記質問に対する回答の音声データを回答音声データとして受信する回答受信手段と、
前記回答受信手段によって受信された前記回答音声データを出力する音声データ出力手段とを備え、
前記商品情報提供装置は、
前記商品情報出力装置から前記商品特定用画像を受信する商品特定用画像受信手段と、
前記商品特定用画像受信手段によって受信された前記商品特定用画像を画像処理して、前記ユーザが商品情報の取得を希望する商品を特定する商品特定手段と、
あらかじめ記録装置に記録されている前記商品情報の中から、前記商品特定手段によって特定された商品の前記商品情報を読み出す商品情報読み出し手段と、
前記商品情報読み出し手段によって読み出された前記商品情報を前記商品情報出力装置へ送信する商品情報送信手段と、
前記商品情報出力装置から前記質問音声データを受信する質問音声データ受信手段と、
前記質問音声データ受信手段によって受信された前記質問音声データに基づいて、前記ユーザからの質問内容を特定する質問内容特定手段と、
あらかじめ前記記録装置に記録されている、前記ユーザから想定される質問内容を示す情報と、前記質問に対する回答音声データとが関連付けられた応答用情報の中から、前記質問内容特定手段によって特定された前記質問内容に関連付けて記録されている前記回答音声データを読み出す回答音声データ読み出し手段と、
前記回答音声データ読み出し手段によって読み出された前記回答音声データを前記商品情報出力装置へ送信する回答音声データ送信手段とを備えることを特徴とする商品情報提供システム。 A product information providing system in which a product information providing device that provides product information and a product information output device that receives and outputs the product information from the product information providing device are connected via a communication line,
The product information output device includes:
Based on an instruction from the user, image a subject for specifying a product, and acquire product specifying image acquisition means for acquiring a product specifying image;
Product information requesting means for sending the product specifying image acquired by the product specifying image acquiring means to the product information providing device and requesting product information of the product specified based on the product specifying image; ,
Product information receiving means for receiving the product information from the product information providing device;
Commodity information presentation means for outputting the commodity information received by the commodity information receiving means and presenting it to the user;
Question voice data acquisition means for acquiring, as voice data, a question from the user for the product information output by the product information presentation means;
Answer request means for sending the question voice data acquired by the question voice data acquisition means to the product information providing device and requesting an answer to the question;
Answer receiving means for receiving voice data of answers to the question from the product information providing apparatus as answer voice data;
Voice data output means for outputting the answer voice data received by the answer receiving means,
The product information providing device includes:
Product specifying image receiving means for receiving the product specifying image from the product information output device;
A product specifying means for performing image processing on the product specifying image received by the product specifying image receiving means and specifying a product for which the user desires to obtain product information;
Product information reading means for reading the product information of the product specified by the product specifying means from among the product information recorded in advance in the recording device;
Product information transmitting means for transmitting the product information read by the product information reading means to the product information output device;
Question voice data receiving means for receiving the question voice data from the product information output device;
Question content specifying means for specifying the question content from the user based on the question voice data received by the question voice data receiving means;
The information indicating the question content assumed by the user, which is recorded in the recording device in advance, and the response information associated with the answer voice data for the question is specified by the question content specifying means Answer voice data reading means for reading the answer voice data recorded in association with the question content;
A product information providing system comprising: response voice data transmitting means for transmitting the answer voice data read by the answer voice data reading means to the product information output device.
前記商品情報提供装置は、
前記商品情報出力装置から受信した前記質問音声データと、それに対して回答した前記回答音声データとを関連付けた応答データの履歴情報を前記記録装置に記録する応答履歴情報記録手段をさらに備え、
前記回答音声データ読み出し手段は、前記記録手段に、前記質問音声データが前記履歴情報として記録されている場合には、前記履歴情報から優先して前記回答音声データを読み出すことを特徴とする商品情報提供システム。 The product information providing system according to claim 1,
The product information providing device includes:
Response history information recording means for recording, in the recording device, history information of response data in which the question voice data received from the product information output device is associated with the answer voice data answered in response,
The answer voice data reading means reads the answer voice data preferentially from the history information when the question voice data is recorded as the history information in the recording means. Offer system.
前記商品情報出力装置から送信した前記回答音声データに対する前記ユーザの満足度を示す情報を受信する満足度情報受信手段と、
前記満足度情報受信手段によって受信された前記満足度を示す情報に基づいて、前記回答音声データの読み出し優先度を設定する優先度設定手段とをさらに備え、
前記応答履歴情報記録手段は、前記優先度設定手段によって設定された前記回答音声データの読み出し優先度を示す情報を前記応答データに関連付けて前記記録装置に記録し、
前記回答音声データ読み出し手段は、前記記録手段に、前記質問音声データが前記履歴情報として記録されている場合には、前記優先度が高く設定されている前記回答音声データを優先して読み出すことを特徴とする商品情報提供システム。 The product information providing system according to claim 2,
Satisfaction information receiving means for receiving information indicating satisfaction of the user with respect to the answer voice data transmitted from the product information output device;
Priority setting means for setting a read priority of the answer voice data based on the information indicating the satisfaction received by the satisfaction information receiving means;
The response history information recording means records information indicating the read priority of the answer voice data set by the priority setting means in the recording device in association with the response data;
The answer voice data reading means preferentially reads the answer voice data set with a high priority when the question voice data is recorded as the history information in the recording means. Product information provision system featuring
前記応答履歴情報記録手段は、前記応答データの履歴情報を前記ユーザごとに記録することを特徴とする商品情報提供システム。 In the merchandise information provision system according to claim 2 or 3,
The response history information recording unit records history information of the response data for each user.
前記商品情報提供装置は、
前記記録手段に記録されている前記履歴情報を、質問対象の商品を提供するメーカーが有する端末へ送信する履歴情報送信手段をさらに備えることを特徴とする商品情報提供システム。 In the merchandise information provision system according to any one of claims 2 to 4,
The product information providing device includes:
A product information providing system, further comprising: history information transmitting means for transmitting the history information recorded in the recording means to a terminal of a maker that provides a questionable product.
前記商品情報提供装置は、
前記回答音声データ読み出し手段が前記質問内容特定手段によって特定された前記質問内容に関連付けて記録されている前記回答音声データを読み出すことができない場合には、あらかじめ登録された通知先端末と、前記商品情報出力装置との間で通信を確立して、前記通知先端末のオペレータと前記ユーザとの音声通話を開始する音声通話手段をさらに備えることを特徴とする商品情報提供システム。 In the merchandise information provision system according to any one of claims 1 to 5,
The product information providing device includes:
If the answer voice data reading means cannot read the answer voice data recorded in association with the question content specified by the question content specifying means, the notification destination terminal registered in advance and the product A product information providing system, further comprising a voice call unit that establishes communication with an information output device and starts a voice call between an operator of the notification destination terminal and the user.
前記商品情報提供装置は、
前記通知先端末のオペレータと前記ユーザとの音声通話内容を前記記録装置に記録する通話内容記録手段をさらに備えることを特徴とする商品情報提供システム。 The product information providing system according to claim 6,
The product information providing device includes:
A product information providing system, further comprising a call content recording means for recording the content of a voice call between the operator of the notification destination terminal and the user in the recording device.
前記商品情報提供装置は、
前記質問内容特定手段によって特定された前記ユーザからの質問内容に対する回答が、前記商品情報送信手段によって送信された前記商品情報に含まれているか否かを判定する判定手段をさらに備え、
前記回答音声データ読み出し手段は、前記判定手段によって前記商品情報に含まれていると判定されたときは、質問内容に対する回答が商品情報に含まれていることを通知するための音声データを前記回答音声データとして前記記録装置から読み出すことを特徴とする商品情報提供システム。 In the merchandise information provision system according to any one of claims 1 to 7,
The product information providing device includes:
A determination unit for determining whether an answer to the question content from the user specified by the question content specifying unit is included in the product information transmitted by the product information transmission unit;
When the determination means determines that the answer voice data reading means is included in the product information, the answer voice data reading means outputs voice data for notifying that the answer to the question content is included in the product information. A product information providing system which reads out from the recording device as audio data.
前記商品情報出力装置は、
表示装置内に人物の映像を表示させる第１の映像表示手段と、
前記第１の映像表示手段によって表示された人物映像が、前記回答音声データを話しているように、前記人物映像の動作を制御する動作制御手段とをさらに備えることを特徴とする商品情報提供システム。 In the merchandise information provision system according to any one of claims 1 to 8,
The product information output device includes:
First video display means for displaying a video of a person in the display device;
The product information providing system further comprising operation control means for controlling the operation of the person video so that the person video displayed by the first video display means is speaking the answer voice data. .
前記商品情報出力装置は、
実空間上に人物の立体映像を表示させる第２の映像表示手段と、
前記第２の映像表示手段によって表示された立体映像の人物が、前記回答音声データを話しているように、前記立体映像の人物の動作を制御する動作制御手段とをさらに備えることを特徴とする商品情報提供システム。 In the merchandise information provision system according to any one of claims 1 to 8,
The product information output device includes:
Second video display means for displaying a stereoscopic video of a person in real space;
The apparatus further comprises operation control means for controlling the action of the person of the stereoscopic video so that the person of the stereoscopic video displayed by the second video display means is speaking the answer voice data. Product information provision system.
前記商品情報提供装置は、
前記商品情報出力装置から、前記商品特定手段によって特定された商品の注文を受け付ける注文受付手段をさらに備えることを特徴とする商品情報提供システム。 In the merchandise information provision system according to any one of claims 1 to 10,
The product information providing device includes:
A product information providing system, further comprising order receiving means for receiving an order for the product specified by the product specifying means from the product information output device.
前記商品情報提供装置は、
前記注文受付手段が商品の注文を受け付けた場合には、受け付けた商品の注文内容に基づいて、注文された商品の代金を清算するための決済情報を前記商品情報出力装置へ送信する決済情報送信手段をさらに備え、
前記商品情報出力装置は、
前記商品情報提供装置から受信した前記決済情報に基づいて、ユーザが注文した商品の決済画面を表示装置に表示させる決済画面表示手段をさらに備えることを特徴とする商品情報提供システム。 The product information providing system according to claim 11,
The product information providing device includes:
When the order accepting unit accepts an order for a product, settlement information is transmitted to the product information output device for settlement information for clearing the price of the ordered product based on the order contents of the received product. Further comprising means,
The product information output device includes:
A merchandise information providing system, further comprising: a settlement screen display means for displaying a settlement screen of a product ordered by a user on a display device based on the settlement information received from the merchandise information providing apparatus.
前記商品情報出力装置は、商品を販売する店舗に設置された端末、または前記ユーザが所持する携帯端末であることを特徴とする商品情報提供システム。 In the merchandise information provision system according to any one of claims 1 to 12,
The product information output system, wherein the product information output device is a terminal installed in a store that sells products or a portable terminal possessed by the user.
前記商品特定用画像は、前記商品を特定するための文字列を前記商品を特定するための被写体とした画像、前記商品を特定するための図形を前記商品を特定するための被写体とした画像、前記商品自体を前記商品を特定するための被写体とした画像、前記商品を模した立体物を前記商品を特定するための被写体とした画像、前記商品の形状を模した図形が描かれた設置物を前記商品を特定するための被写体とした画像のいずれかであって、
前記商品特定手段は、前記商品特定用画像を画像処理して、前記商品特定用画像内から前記商品を特定するための被写体を抽出し、あらかじめ記録されている被写体データとマッチングさせることにより、前記ユーザが商品情報の取得を希望する商品を特定することを特徴とする商品情報提供システム。 In the merchandise information provision system according to any one of claims 1 to 13,
The product specifying image is an image with a character string for specifying the product as a subject for specifying the product, an image with a graphic for specifying the product as a subject for specifying the product, An image in which the product itself is an object for specifying the product, an image in which a three-dimensional object simulating the product is an object for specifying the product, and an installation in which a figure imitating the shape of the product is drawn Is one of the images used as a subject for specifying the product,
The product specifying means performs image processing on the product specifying image, extracts a subject for specifying the product from the product specifying image, and matches with pre-recorded subject data, A product information providing system in which a user specifies a product for which product information is desired to be acquired.
前記商品情報は、商品の価格情報、商品の仕様情報、前記商品の在庫情報、前記商品の納期情報、当該商品と他製品とを比較した結果を示す比較情報、商品の３ＤＣＡＤデータ、商品に対して実施されているキャンペーン情報、商品のウェブサイト情報、商品のＣＭ動画情報の少なくとも１つを含むことを特徴とする商品情報提供システム。 In the merchandise information provision system according to any one of claims 1 to 14,
The product information includes product price information, product specification information, product inventory information, product delivery date information, comparison information indicating a result of comparing the product with another product, product 3D CAD data, product A product information providing system including at least one of campaign information, product website information, and product CM video information.
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012227502A JP5142306B1 (en) | 2012-10-12 | 2012-10-12 | Product information providing system, product information providing device, and product information output device |
| EP13846062.1A EP2908281A4 (en) | 2012-10-12 | 2013-05-15 | Product information provision system, product information provision device, and product information output device |
| PCT/JP2013/063490 WO2014057704A1 (en) | 2012-10-12 | 2013-05-15 | Product information provision system, product information provision device, and product information output device |
| US14/253,096 US20140214622A1 (en) | 2012-10-12 | 2014-04-15 | Product information providing system, product information providing device, and product information outputting device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012227502A JP5142306B1 (en) | 2012-10-12 | 2012-10-12 | Product information providing system, product information providing device, and product information output device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP5142306B1 JP5142306B1 (en) | 2013-02-13 |
| JP2014081693A true JP2014081693A (en) | 2014-05-08 |
Family
ID=47789872
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012227502A Expired - Fee Related JP5142306B1 (en) | 2012-10-12 | 2012-10-12 | Product information providing system, product information providing device, and product information output device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5142306B1 (en) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5706562B1 (en) * | 2014-05-12 | 2015-04-22 | 株式会社 ディー・エヌ・エー | Server device, program, and system |
| WO2015190562A1 (en) * | 2014-06-11 | 2015-12-17 | シャープ株式会社 | Output message determination device, method for controlling output message determination device, history management device, and write data transmission indication device |
| KR20160008389A (en) * | 2014-07-14 | 2016-01-22 | 장수진 | System for searching goods of offline shops by online and method for processing thereof |
| JP2019125011A (en) * | 2018-01-12 | 2019-07-25 | 株式会社サテライトオフィス | Artificial intelligence loudspeaker system, and application software |
| JP2021096798A (en) * | 2019-12-19 | 2021-06-24 | 凸版印刷株式会社 | Providing apparatus, providing method, program, and data structure |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5717794B2 (en) * | 2013-06-19 | 2015-05-13 | ヤフー株式会社 | Dialogue device, dialogue method and dialogue program |
| JP2015038676A (en) * | 2013-07-02 | 2015-02-26 | 株式会社ＢｏｏｋＬｉｖｅ | Article sales system, article sales device and article sales method |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4552100B2 (en) * | 2001-04-27 | 2010-09-29 | ソニー株式会社 | Product search system, product search device, and product search method for product search device |
| JP2003122757A (en) * | 2001-10-10 | 2003-04-25 | Sony Corp | Retrieval guide system, terminal and server |
| JP2004133495A (en) * | 2002-10-08 | 2004-04-30 | Nec Fielding Ltd | Helpdesk system |
| JP3959343B2 (en) * | 2002-12-27 | 2007-08-15 | 株式会社東芝 | Natural language sentence generation device, method and program thereof, and information providing device, method and program thereof |
| JP2004272391A (en) * | 2003-03-05 | 2004-09-30 | Matsushita Electric Ind Co Ltd | Facility guide system |
-
2012
- 2012-10-12 JP JP2012227502A patent/JP5142306B1/en not_active Expired - Fee Related
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5706562B1 (en) * | 2014-05-12 | 2015-04-22 | 株式会社 ディー・エヌ・エー | Server device, program, and system |
| JP2015215810A (en) * | 2014-05-12 | 2015-12-03 | 株式会社 ディー・エヌ・エー | Server device, program and system |
| WO2015190562A1 (en) * | 2014-06-11 | 2015-12-17 | シャープ株式会社 | Output message determination device, method for controlling output message determination device, history management device, and write data transmission indication device |
| JPWO2015190562A1 (en) * | 2014-06-11 | 2017-04-20 | シャープ株式会社 | Output message determination device, output message determination device control method, history management device, and write data transmission instruction device |
| KR20160008389A (en) * | 2014-07-14 | 2016-01-22 | 장수진 | System for searching goods of offline shops by online and method for processing thereof |
| KR101664400B1 (en) | 2014-07-14 | 2016-10-10 | 장수진 | System for searching goods of offline shops by online and method for processing thereof |
| JP2019125011A (en) * | 2018-01-12 | 2019-07-25 | 株式会社サテライトオフィス | Artificial intelligence loudspeaker system, and application software |
| JP7041434B2 (en) | 2018-01-12 | 2022-03-24 | 株式会社サテライトオフィス | Artificial intelligence speaker system, application software |
| JP2021096798A (en) * | 2019-12-19 | 2021-06-24 | 凸版印刷株式会社 | Providing apparatus, providing method, program, and data structure |
| JP7456145B2 (en) | 2019-12-19 | 2024-03-27 | Ｔｏｐｐａｎホールディングス株式会社 | Providing device, method, and program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5142306B1 (en) | 2013-02-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5142306B1 (en) | Product information providing system, product information providing device, and product information output device | |
| WO2014057704A1 (en) | Product information provision system, product information provision device, and product information output device | |
| JP6440483B2 (en) | COMMUNICATION SYSTEM, SERVER DEVICE, ROBOT, INFORMATION PROCESSING METHOD, AND PROGRAM | |
| US10540707B2 (en) | Commercial information providing system and commercial information providing method | |
| US20090287534A1 (en) | System and method for providing contemporaneous product information and sales support for retail customers | |
| CN111095401B (en) | Digital image capture session and metadata association | |
| JP6185216B1 (en) | Information providing system, information providing apparatus, information providing method, and program | |
| JP5220953B1 (en) | Product information providing system, product information providing device, and product information output device | |
| US20160019594A1 (en) | Communication systems and methods | |
| CN112182426A (en) | User interface information display method and device and electronic equipment | |
| JP2011048462A (en) | Sales support device and program | |
| JP7106879B2 (en) | Information processing device and program | |
| CN108700979A (en) | Product introduction graphic user interface | |
| KR100985949B1 (en) | System and method for providing product information service by mobile network system | |
| WO2020195613A1 (en) | Information processing device, management system, information processing method, and recording medium | |
| CN112036865A (en) | Service providing method, device and equipment | |
| US20210249017A1 (en) | Voice-based transaction terminal ordering | |
| US20210195028A1 (en) | Systems and methods for providing call center service with visual search | |
| KR20160069176A (en) | Advertisement system and method using user terminal | |
| JP7227884B2 (en) | Purchase promotion system and purchase promotion method | |
| US10432894B2 (en) | Communication system, communication method, and program | |
| JP7417119B2 (en) | Information processing systems, information processing system control methods, electronic devices, programs | |
| JP7449337B2 (en) | Content provision system, content provision method, provision device and program | |
| JP7082219B1 (en) | Information processing equipment and information processing method | |
| JP2021033642A (en) | Reception apparatus, information processing method, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20121114 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20121115 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20151130 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5142306 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |