JP7156215B2

JP7156215B2 - サーバ装置、移動店舗、及び情報処理システム

Info

Publication number: JP7156215B2
Application number: JP2019161561A
Authority: JP
Inventors: 亮介小林; 文菜竹下; 直樹山室; 卓也前川; 雄吾櫻井
Original assignee: Toyota Motor Corp
Current assignee: Toyota Motor Corp
Priority date: 2019-09-04
Filing date: 2019-09-04
Publication date: 2022-10-19
Anticipated expiration: 2039-09-04
Also published as: JP2021039620A; US20210065284A1; CN112446759A; US11556976B2

Description

本開示は、サーバ装置、移動店舗、及び情報処理システムに関する。

出品者と購入者といった当事者間の任意かつ比較的自由な、たとえばフリーマーケットなどの商品取引を支援する技術が知られている。特許文献１には、出品者が購入者と対面しない無人フリーマーケットを支援するシステムの例が開示される。

特開２００７－０１１５１０号公報

しかしながら、出品、商品陳列、商品閲覧、商品購入及びこれに伴う課金といった各工程において、出品者及び購入者の作業・管理負荷を軽減し、利便性を向上させる余地がある。

本開示の目的は、当事者間の商品取引における作業・管理負荷を軽減し利便性を向上させるサーバ装置等を提供することにある。

本開示におけるサーバ装置は、移動店舗における商品陳列場所の撮像画像の経時変化に基づき購入される商品を検出し、第１の端末装置から購入者の認証情報を取得すると、前記購入者に対する前記商品の価格分の課金処理を行う制御部を有する。

本開示における移動店舗は、撮像部と、通信部と、前記撮像部を制御し、前記通信部を介して他の装置と情報を授受する制御部とを有する移動店舗であって、前記制御部は、サーバ装置からの指示に応答して出品される商品の回収地点へ移動するときに、商品が陳列される商品陳列場所の第１の撮像画像を前記撮像部に撮像させ、前記第１の撮像画像をサーバ装置へ送出する。

本開示における、第１の端末装置、移動店舗、及びサーバ装置を有する情報処理システムによれば、前記第１の端末装置が、出品される商品の回収地点の位置をサーバ装置へ送出し、前記サーバ装置から前記出品される商品を識別する識別情報を取得し、前記サーバ装置が、前記回収地点へ移動して前記商品を回収する指示を前記移動店舗へ送出し、前記移動店舗が、前記指示に応答して前記回収地点へ移動し、商品が陳列される商品陳列場所の撮像画像を撮像して、撮像画像をサーバ装置へ送出し、前記第１の端末装置が、前記識別情報を前記サーバ装置へ送出し、前記サーバ装置が、前記第１の端末装置から前記識別情報を取得したときの前記撮像画像に、過去の前記撮像画像に含まれていない商品が含まれているとき、前記陳列場所に追加された当該商品を出品された商品として検出する。

本開示におけるサーバ装置等によれば、当事者間の商品取引における作業・管理負荷を軽減し利便性を向上させることができる。

情報処理システムの構成例を示す図である。サーバ装置の構成例を示す図である。出品用端末装置の構成例を示す図である。購入用端末装置の構成例を示す図である。移動店舗の構成例を示す図である。商品出品時の情報処理システムの動作例を示すシーケンス図である。撮像画像の経時変化の例を示す図である。撮像画像の経時変化の例を示す図である。商品購入時の情報処理システムの動作例を示すシーケンス図である。撮像画像の経時変化の例を示す図である。撮像画像の経時変化の例を示す図である。変形例における情報処理システムの動作例を示すシーケンス図である。

以下、実施の形態について説明する。

図１は、一実施形態における情報処理システムの構成例を示す図である。情報処理システム１は、仮想的なフリーマーケット機能を各種商品の出品者及び購入者に提供する。情報処理システム１は、たとえば、ネットワーク１５を介して互いに情報通信可能に接続される、それぞれ１つ以上のサーバ装置１０、出品者端末装置１１、購入者端末装置１２、及び移動店舗１３を有する。サーバ装置１０は、たとえば、フリーマーケットの仲介事業者によるＥＣ（電子商取引）サイトを運用するＥＣサーバとして機能するとともに、移動店舗１３に移動などの動作を指示する。出品者端末装置１１及び購入者端末装置１２は、それぞれ出品者及び購入者が使用する情報処理端末装置であって、たとえば、パーソナルコンピュータ、タブレット端末装置、スマートフォンなどである。移動店舗１３は、たとえば手動運転または有人・無人での自動運転が可能な多目的車両であり、商品販売のための店舗設備を搭載する。ネットワーク１５は、たとえばインターネットであるが、アドホックネットワーク、ＬＡＮ、ＭＡＮ(Metropolitan Area Network)、もしくは他のネットワークまたはこれらいずれかの組合せが含まれる。

情報処理システム１では、概略次のように商品取引が行われる。サーバ装置１０は、出品を希望する出品者の出品者端末装置１１からの要請に応じて移動店舗１３を商品の回収地点へ向かわせ、商品を回収させる。サーバ装置１０が、商品情報をＥＣサイトに掲載することで購入者に提供し、商品の購入を希望する購入者の購入者端末装置１２から購入要求を取得すると、移動店舗１３を購入者が指定する購入地点へ向かわせる。購入者は、到着した移動店舗１３に入店して自らの認証を得た後、所望の商品を商品陳列場所から取り去る。移動店舗１３は、商品陳列場所を経時的に撮像して撮像画像をサーバ装置１０に送り、サーバ装置１０は、撮像画像の経時変化に基づいて、陳列場所に商品が出品されたことと、購入者により商品が取り去られたことを検出する。そして、サーバ装置１０は、商品が取り去られると、購入者に対する課金処理を実行する。

情報処理システム１は、移動店舗１３を介在させた上記のような動作により、出品者による出品、及び購入者による購入と支払いを、それぞれ省力化でき、出品者及び購入者の利便性を向上させることが可能となる。また、情報処理システム１は、移動店舗１３において陳列される商品を、撮像画像を用いて追跡することで、移動店舗１３に配置される人員を削減あるいは省略できる。よって、情報処理システム１は、フリーマーケットの仲介事業者の負荷をも軽減することが可能になる。

図２は、サーバ装置１０の構成例を示す。サーバ装置１０は、通信部２０、記憶部２１、及び制御部２２を有する。サーバ装置１０は、同等の構成を有する他のサーバ装置と通信して協働することで、本実施形態における動作を実行してもよい。

通信部２０は、ネットワーク１５に接続するための、１つ以上の有線または無線ＬＡＮ規格に対応する通信モジュールを有する。本実施形態において、サーバ装置１０は、通信部２０を介してネットワーク１５に接続される。

記憶部２１は、たとえば半導体メモリ、磁気メモリ、または光メモリなどを有する。記憶部２１は、たとえば主記憶装置、補助記憶装置、またはキャッシュメモリとして機能する。記憶部２１は、たとえば、サーバ装置１０の動作に用いられる任意の情報、制御・処理プログラム、及び会員情報データベース２３を記憶する。

制御部２２は、たとえば、ＣＰＵ（Central Processing Unit）などの１つ以上の汎用のプロセッサ、または特定の処理に特化した１つ以上の専用のプロセッサを有する。あるいは、制御部２２は、１つ以上の、ＦＰＧＡ（Field-Programmable Gate Array）、ＡＳＩＣ（Application Specific Integrated Circuit）といった専用回路を有してもよい。制御部２２は、制御・処理プログラムに従って動作したり、回路として実装された動作手順に従って動作したりすることで、サーバ装置１０の動作を統括的に制御する。そして、制御部２２は、通信部２０を介して、出品者端末装置１１及び購入者端末装置１２と各種情報の授受をしたり、移動店舗１３と撮像画像を含む各種情報の授受をしたりして、本実施形態にかかる動作を実行する。

図３は、出品者端末装置１１の構成例を示す。出品者端末装置１１は、たとえばパーソナルコンピュータ、タブレット端末装置、またはスマートフォンといった、情報処理端末装置である。出品者端末装置１１は、入出力部３０、通信部３１、記憶部３２、及び制御部３３を有する。

入出力部３０は、ユーザの入力を検出し、入力情報を制御部３３に送る入力インタフェースを有する。かかる入力インタフェースは、たとえば、物理キー、静電容量キー、パネルディスプレイと一体的に設けられたタッチスクリーン、各種ポインティングデバイス、音声入力を受け付けるマイクロフォン、撮像画像または画像コードを取り込むカメラなどを含む任意の入力インタフェースである。また、入出力部３０は、制御部３３が生成したりサーバ装置１０から取得したりする情報を、ユーザに対して出力する出力インタフェースを有する。かかる出力インタフェースは、たとえば、情報を画像・映像として出力する外付けまたは内蔵のディスプレイ、情報を音声として出力するスピーカ、または、外部の出力機器との接続インタフェースを含む、任意の出力インタフェースである。

通信部３１は、有線または無線ＬＡＮ規格に対応する通信モジュール、４Ｇ（4th Generation）、５Ｇ（5th Generation）などの移動体通信規格に対応するモジュール、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＡｉｒＤｒｏｐ（登録商標）、ＩｒＤＡ、ＺｉｇＢｅｅ（登録商標）、Ｆｅｌｉｃａ（登録商標）、ＲＦＩＤといった近距離通信に対応する通信モジュールなどを有する。出品者端末装置１１は、通信部３１により、近傍のルータ装置または移動体通信の基地局を介してネットワーク１５に接続され、ネットワーク１５経由でサーバ装置１０と情報通信を行う。また、出品者端末装置１１は、通信部３１により、近距離通信手段により通信可能な範囲に位置する他の装置と情報通信を行う。

記憶部３２は、たとえば半導体メモリ、磁気メモリ、または光メモリなどを有する。記憶部３２は、たとえば主記憶装置、補助記憶装置、またはキャッシュメモリとして機能する。記憶部３２は、出品者端末装置１１の動作に用いられる任意の情報を記憶する。たとえば、記憶部３２は、制御・処理プログラム、ネットワーク１５を介してダウンロードされる各種機能を提供するアプリケーションプログラムなどを記憶する。

制御部３３は、たとえば、ＣＰＵ、ＭＰＵ（Micro Processing Unit）などの１つ以上の汎用プロセッサ、または特定の処理に特化した１つ以上の専用プロセッサを有する。あるいは、制御部３３は、１つ以上の、ＦＰＧＡ、またはＡＳＩＣといった専用回路を有してもよい。制御部３３は、制御・処理プログラムに従って動作したり、あるいは、回路として実装された動作手順に従って動作したりすることで、出品者端末装置１１の動作を統括的に制御する。そして、制御部３３は、通信部３１を介してサーバ装置１０と各種情報を授受することで、本実施形態にかかる動作を実行する。

図４は、購入者端末装置１２の構成例を示す。購入者端末装置１２は、パーソナルコンピュータ、タブレット端末装置、またはスマートフォンといった、情報処理端末装置である。購入者端末装置１２は、入出力部４０、通信部４１、記憶部４２、及び制御部４３を有する。購入者端末装置１２の入出力部４０、通信部４１、記憶部４２、及び制御部４３は、それぞれ、図３で説明した出品者端末装置１１の入出力部３０、通信部３１、記憶部３２、及び制御部３３と同等の構成を有する。購入者端末装置１２では、制御部４３が、制御・処理プログラムに従って動作したり、あるいは、回路として実装された動作手順に従って動作したりすることで、購入者端末装置１２の動作を統括的に制御する。そして、制御部４３は、通信部３１を介してサーバ装置１０と各種情報を授受することで、本実施形態にかかる動作を実行する。

図５は、移動店舗１３の構成例を示す。移動店舗１３は、販売、宿泊、または旅客といった個体ごとに異なる用途に応じた設備を車内空間に搭載可能に構成される、手動運転または有人・無人での自動運転が可能な多目的車両であり、本実施形態では商品販売のための店舗設備を搭載する。店舗設備は、商品を陳列する商品陳列場所を有する。商品陳列場所は、たとえば、陳列棚、ショーケース、商品を吊り下げ可能なフックを有する壁面などである。商品陳列場所では、各商品が他の商品により覆い隠されることなく、各商品の少なくとも一部が視認可能に陳列される。移動店舗１３は、通信部５０、測位部５１、記憶部５２、撮像部５３、入出力部５５及び制御部５６を有する。各部は、たとえばＣＡＮ（Controller Area Network）などの車載ネットワーク又は専用線を介して、有線又は無線で互いに通信可能に接続される。通信部５０、測位部５１、記憶部５２、撮像部５３、入出力部５５及び制御部５６のその一部または全部は、移動店舗１３に直接設けられてもよいし、カーナビゲーション装置など移動店舗１３に着脱可能な情報処理装置に設けられていてもよい。移動店舗１３は、運転手によって運転されてもよく、或いは任意のレベルで運転が自動化されていてもよい。自動化のレベルは、たとえば、ＳＡＥ（Society of Automotive Engineers）のレベル分けにおけるレベル１からレベル５のいずれかである。

通信部５０は、有線または無線ＬＡＮ規格に対応する通信モジュール、４Ｇ、５Ｇなどの移動体通信規格に対応するモジュール、Ｂｌｕｅｔｏｏｔｈ、ＡｉｒＤｒｏｐ、ＩｒＤＡ、ＺｉｇＢｅｅ、Ｆｅｌｉｃａ、ＲＦＩＤといった近距離通信に対応する通信モジュールなどを有する。移動店舗１３は、通信部５０により移動体通信の基地局を介してネットワーク１５に接続され、ネットワーク１５経由でサーバ装置１０と情報通信を行う。また、移動店舗１３は、通信部５０により、近距離通信手段で通信可能な範囲に位置する購入者端末装置１２などの他の装置と情報通信を行う。

測位部５１は、移動店舗１３の位置を計測し、位置情報を生成する。位置情報は地図上での位置を特定する、たとえば２次元座標、３次元座標などの座標を含む情報である。また、位置情報は、座標に限られず、速度、移動経路、移動距離、またはそれらの変化量、変化率などを含んでいてもよい。測位部５１は、衛星測位システムに対応する受信機を含む。受信機が対応する衛星測位システムは、例えばＧＰＳ（Global Positioning System）であってもよい。あるいは、測位部５１は、加速度センサ、ジャイロセンサなどを有してもよい。例えばカーナビゲーション装置が、測位部５１として機能してもよい。

記憶部５２は、たとえば半導体メモリ、磁気メモリ、または光メモリなどを有する。記憶部５２は、たとえば主記憶装置、補助記憶装置、またはキャッシュメモリとして機能する。記憶部５２は、移動店舗１３の動作の制御に用いられる任意の情報を記憶する。たとえば、記憶部５２は、制御・処理プログラム、ネットワーク１５を介してダウンロードされる各種機能を提供するアプリケーションプログラムなどを記憶する。

撮像部５３は、移動店舗１３の商品陳列場所を撮像可能な位置に設けられる、１または複数のカメラとその制御回路とを有する。撮像部５３が有するカメラは、単眼カメラであってもよく、ステレオカメラであってもよい。

入出力部５５は、ユーザの入力を検出し、入力情報を制御部５６に送る入力インタフェースを有する。かかる入力インタフェースは、たとえば、物理キー、静電容量キー、パネルディスプレイと一体的に設けられたタッチスクリーン、各種ポインティングデバイス、音声入力を受け付けるマイクロフォン、撮像画像または画像コードを取り込むカメラなど、ＩＣカードリーダーを含む任意の入力インタフェースである。また、入出力部５５は、制御部５６が生成したりサーバ装置１０から取得したりする情報を、ユーザに対して出力する出力インタフェースを有する。かかる出力インタフェースは、たとえば、情報を画像・映像として出力する外付けまたは内蔵のディスプレイ、情報を音声として出力するスピーカ、または、外部の出力機器との接続インタフェースを含む、任意の出力インタフェースである。

制御部５６は、ＣＰＵ、ＭＰＵなどの１つ以上の汎用プロセッサ、または特定の処理に特化した１つ以上の専用プロセッサを有する。あるいは、制御部５６は、１つ以上の、ＦＰＧＡ、またはＡＳＩＣといった専用回路を有してもよい。制御部５６は、格納される制御・処理プログラムに従って動作したり、あるいは、回路として実装された動作手順に従って動作したりすることで、通信部５０、測位部５１、記憶部５２、撮像部５３及び入出力部５５を含む移動店舗１３の動作を統括的に制御する。また、制御部５６は、通信部５０を介して、撮像部５３による撮像画像を含む各種情報をサーバ装置１０と授受したり、出品者端末装置１１及び購入者端末装置１２と各種情報を授受したりして、本実施形態にかかる動作を実行する。

図６は、商品出品時の情報処理システム１の動作例を示すシーケンス図である。図６の手順は、出品者が出品者端末装置１１を操作して商品を出品する際に実行される。図６では、サーバ装置１０、出品者端末装置１１、購入者端末装置１２、及び移動店舗１３が、それぞれ他の装置と情報を授受し、情報処理・制御を行うステップが示される。各ステップは、各装置の制御部の動作に対応する。

出品者端末装置１１は、出品者の操作により、出品要求、商品情報及び出品者情報をサーバ装置１０へ送出し、サーバ装置１０が商品情報及び出品者情報を取得する（ステップＳ６００）。出品者は、商品情報及び出品者情報を、たとえば、タッチスクリーンから手動で入力する。商品情報は、たとえば、商品の種別、商品名、属性、価格、商品の撮像画像などを含む。出品者情報は、出品者の氏名などの識別情報、出品者が指定する商品の回収地点の位置情報を含む。これらの情報は、予め出品者がサーバ装置１０のＥＣサイトの会員登録として一回的にサーバ装置１０へ送出し、サーバ装置１０の会員情報ＤＢ２３に格納してもよいし、出品の都度、出品者端末装置１１がサーバ装置１０へ送出してもよい。

次いで、サーバ装置１０は、ＥＣサイトに掲載することで商品情報を購入者に提供し、出品された商品をその出品者に紐付けて一意に識別する出品識別情報を生成する（ステップＳ６０２）。

次いで、サーバ装置１０は、出品識別情報を出品者端末装置１１へ送出し、出品者端末装置１１は、出品識別情報を取得する（ステップＳ６０４）。

次いで、サーバ装置１０は、商品の回収地点への移動指示を移動店舗１３へ送出し、移動店舗１３の制御部５６が移動指示を取得する（ステップＳ６０６）。すると、制御部５６による制御のもと、移動店舗１３は商品の回収地点へ移動する（ステップＳ６０８）。

移動店舗１３では、撮像部５３が、商品陳列場所を撮像して（ステップＳ６１０）撮像画像をサーバ装置１０へ送出し、サーバ装置１０が撮像画像を取得する（ステップＳ６１２）。移動店舗１３の撮像部５３は、移動店舗１３がサーバ装置１０から移動指示を取得してから回収地点への到着までに少なくとも１回商品陳列場所を撮像し、撮像画像をサーバ装置１０へ送る。撮像部５３は、撮像と撮像画像送出とを、たとえば数十秒～十数分の所定周期で繰り返す。

移動店舗１３が、商品の回収地点に到着すると、出品者が出品者端末装置１１を操作して、出品者端末装置１１がサーバ装置１０から取得した出品識別情報を送出し、移動店舗１３の通信部５０が出品識別情報を取得する（ステップＳ６１４）。そして、移動店舗１３は出品識別情報をサーバ装置１０へ送出し、サーバ装置１０が出品識別情報を取得する（ステップＳ６１６）。出品識別情報は、たとえば近距離無線通信により出品者端末装置１１から移動店舗１３へ送られる。また、出品識別情報は、たとえばＱＲコード（登録商標）などの画像コードとして出品者端末装置１１に表示され、その画像コードを移動店舗１３の入出力部５５が備えるスキャナで読み取ることにより、移動店舗１３に取得されてもよい。あるいは、出品者端末装置１１から印刷出力された画像コードを商品に添付し、その画像コードを移動店舗１３の入出力部５５が備えるスキャナで読み取ってもよい。移動店舗１３が出品識別情報を取得するので、出品者が移動店舗１３を訪れたことがより確実に担保される。あるいは、出品者端末装置１１から移動店舗１３を介さずにサーバ装置１０へ出品識別情報が送られてもよい。そして、出品者自身、または移動店舗１３の店員により、商品が商品陳列場所の任意の位置に配置される。そして、撮像部５３が、商品が陳列された後の商品陳列場所を撮像し（ステップＳ６１８）、撮像画像がサーバ装置１０へ送出されてサーバ装置１０が撮像画像を取得する（ステップＳ６２０）。

サーバ装置１０は、移動店舗１３から出品識別情報を取得したときの撮像画像の、それ以前の撮像画像からの経時変化に基づき、出品された商品を検出し、検出した商品の形状その他の属性と商品陳列場所における位置とを、出品識別情報とその商品の価格情報とに対応づけて記憶部２１に記憶する（ステップＳ６２２）。ここで、サーバ装置１０では、制御部２２が、ステップＳ６０４で出品者端末装置１１へ送出する出品識別情報を記憶部２１へ記憶しておき、ステップＳ６１４で出品者端末装置１１から取得した出品者識別情報が記憶した出品者識別情報と合致することを条件として、出品された商品の検出を実行してもよい。そうすることで、撮像画像から検出する商品が出品要求にかかる商品であることが、より確実に担保される。さらに、サーバ装置１０では、出品者端末装置１１から取得した出品者識別情報が記憶した出品者識別情報と合致しない場合に、出品者端末装置１１に警告を送出し、出品者の注意を喚起してもよい。そうすることで、出品する商品の取り違えを回避することが可能となる。

ここで、撮像画像の経時変化の例を図７Ａ及び図７Ｂに示す。図７Ａに示すように、出品識別情報を取得する前の撮像画像７０には、商品陳列場所として陳列棚７１と、既に陳列された商品７２が含まれる。一方、図７Ｂに示すように、出品識別情報を取得したときの撮像画像７０には、陳列棚７１に既に陳列された商品７２に加え、新たに陳列された商品７３が追加されている。サーバ装置１０は、陳列棚７１、商品７２及び７３を、エッジ検出、パターン認識といった画像処理により検出する。ここで、出品識別情報を取得したときの撮像画像は、たとえば、出品識別情報を取得した時点の前後所定時間（数十秒～十数分）以内に取得した１または複数の撮像画像のいずれかである。よって、出品識別情報送出と商品の陳列との間に時間間隔が生じ、あるいは出品識別情報送出と商品の陳列の前後が入れ替わったとしても、新たに商品が追加され陳列された後の商品陳列場所の撮像画像をサーバ装置１０が取得することができる。ここにおいて、撮像画像７０における経時変化として、新たに陳列された商品７３が検出されるので、サーバ装置１０は商品７３を出品識別情報と対応付けて記憶部２１に記憶する。そうして、サーバ装置１０は、撮像画像７０において陳列棚７１に陳列される各商品をそれぞれ出品識別情報と対応づけることで一意に管理する。たとえば、どの出品者が何時どの商品を幾らで出品したかが記憶部２１に記憶される。

上述のようにして出品される商品の情報は、サーバ装置１０が提供するＥＣサイトにおいて購入者が閲覧することができる。購入者は、購入者端末装置１２を操作してＥＣサイトを閲覧し、所望の商品を購入する処理を、購入者端末装置１２を用いて行う。

図８は、商品購入時の情報処理システム１の動作例を示すシーケンス図である。図８の手順は、購入者が購入者端末装置１２を操作して商品を購入する際に実行される。図８の各ステップも、各装置の制御部の動作に対応する。

購入者端末装置１２は、購入者の操作により、商品を特定する購入要求と購入者情報をサーバ装置１０へ送出し、サーバ装置１０が購入要求及び購入者情報を取得する（ステップＳ８００）。購入者は、たとえば、タッチスクリーンから手動で、ＥＣサイトで商品を選択しつつ、購入要求及び購入者情報を入力する。サーバ装置１０は、選択された商品に対応する出品識別情報を特定する。購入者情報は、購入者の氏名などの識別情報、購入者が指定する購入地点の位置、購入者の金融口座情報などを含む。購入者情報は、予め購入者がサーバ装置１０のＥＣサイトの会員登録として一回的にサーバ装置１０へ送出し、サーバ装置１０の会員情報ＤＢ２３に格納してもよいし、購入の都度、購入者端末装置１２からサーバ装置１０へ送出してもよい。購入地点は、購入者が適宜指定する任意の地点であり、たとえば、購入者の住所、居所であってもよい。

次いで、サーバ装置１０は、購入地点への移動指示を移動店舗１３へ送出し、移動店舗１３の制御部５６が移動指示を取得する（ステップＳ８０２）。すると、制御部５６による制御のもと、移動店舗１３は購入地点へ移動する（ステップＳ８０４）。

移動店舗１３では、撮像部５３が、商品陳列場所を撮像して（ステップＳ８０６）、撮像画像をサーバ装置１０へ送出し、サーバ装置１０が撮像画像を取得する（ステップＳ８０８）。撮像部５３は、移動店舗１３がサーバ装置１０から移動指示を取得してから購入地点への到着までに少なくとも１回商品陳列場所を撮像し、撮像画像をサーバ装置１０へ送る。撮像部５３は、撮像と撮像画像送出とを、たとえば数十秒～十数分の所定周期で繰り返す。

移動店舗１３が、購入地点に到着すると、購入者が購入者端末装置１２を操作し、購入者端末装置１２が購入者の認証情報を送出し、移動店舗１３の通信部５０が認証情報を取得する（ステップＳ８１０）。そして、移動店舗１３は、認証情報をサーバ装置１０へ送出し、サーバ装置１０が認証情報を取得する（ステップＳ８１２）。認証情報は、購入者を一意に特定する情報であって、ステップＳ８００で購入者端末装置１２からサーバ装置１０へ送られる購入者情報と対応する。例えば、購入者情報が認証情報として採用されてもよい。認証情報は、たとえば近距離無線通信により出品者端末装置１１から移動店舗１３へ送られる。また、認証情報は、たとえばＱＲコード（登録商標）などの画像コードとして購入者端末装置１２に表示され、その画像コードを移動店舗１３の入出力部５５が備えるスキャナで読み取ることにより、移動店舗１３に取得されてもよい。移動店舗１３が購入者の認証情報を取得するので、購入者が移動店舗１３を訪れたことがより確実に担保される。あるいは、購入者端末装置１２から移動店舗１３を介さずにサーバ装置１０へ認証情報が送られてもよい。そして、購入者自身、または移動店舗１３の乗員により、商品が商品陳列場所から取り去られる。そして、撮像部５３が、商品陳列場所を撮像し（ステップＳ８１４）、撮像画像がサーバ装置１０へ送出されてサーバ装置１０が撮像画像を取得する（ステップＳ８１６）。

サーバ装置１０は、移動店舗１３から認証情報を取得したときの撮像画像の、それ以前の撮像画像からの経時変化に基づき、取り去られた商品を購入される購入対象商品として検出する（ステップＳ８１８）。

ここで、撮像画像の経時変化の例を図９Ａ及び９Ｂに示す。図９Ａに示す、認証情報を取得する前の撮像画像９０には、商品陳列場所として陳列棚７１と、既に陳列された商品７２及び７３が含まれる。一方、図９Ｂに示すように、認証情報を取得したときの撮像画像９０には、陳列棚７１に残された商品７２のみが含まれ、取り去られた商品７３は含まれない。ここで、認証情報を取得したときの撮像画像は、たとえば、認証情報を取得した時点の前後所定時間（数十秒～十数分）以内に取得した１または複数の撮像画像のいずれかである。よって、認証情報送出と商品の取去りとの間に時間間隔が生じ、あるいは認証情報送出と商品の取去りの前後が入れ替わったとしても、商品７３が取り去られた状態の商品陳列場所の撮像画像をサーバ装置１０が取得することができる。ここにおいて、撮像画像７０における経時変化として、商品７３が消失したことが検出されるので、サーバ装置１０は、商品７３に対応づけられた出品識別情報を特定する。

図８のステップＳ８１８では、サーバ装置１０は、たとえば、ステップＳ８００で購入者端末装置１２から購入要求を取得したときに特定した出品識別情報と取り去られた商品の出品識別情報とが一致した場合に、購入対象商品を検出する。これに加えて、あるいはこれに代わり、たとえば、ステップＳ８００で購入者端末装置１２から取得した購入者情報とステップＳ８１２において取得した認証情報とが合致した場合に、サーバ装置１０が購入対象商品を検出する。この場合、購入を希望する購入者が目的の商品を商品陳列場所から取り去った蓋然性が高いと判断できる。

購入対象商品を検出すると、サーバ装置１０は、出品識別情報に対応付けられた価格情報に基づいて、購入対象商品の代金を含む課金情報を購入者端末装置１２に送出し、購入者端末装置１２が課金情報を取得する（ステップＳ８２０）。そして、購入者端末装置１２は、課金情報を出力して購入者に対し課金確認を行い、確認結果の入力を購入者から受ける（ステップＳ８２２）。購入者端末装置１２は、たとえば、表示出力または音声出力により、商品代金が課金されることとその金額とを購入者に通知する。購入者は、所望の商品を商品陳列場所から取り去った後、その商品の価格分の課金情報を確認し、たとえばタッチパネルから課金を承認する入力を行う。すると、購入者端末装置１２は、課金承認をサーバ装置１０へ送出し、サーバ装置１０が課金承認を取得する（ステップＳ８２４）。

サーバ装置１０は、購入者情報に含まれる購入者の金融口座情報に基づき、購入者に対する課金処理を行う（ステップＳ８２６）。たとえば、サーバ装置１０は、購入者の金融口座を管理する他のサーバ装置に、課金処理依頼を送出することで、購入者に課金する。課金処理は、口座間の送金、クレジットカード決済、仮想通貨の送金等、任意の電子決済手段を含む。また、サーバ装置１０は、所定の手数料を差し引いた販売代金を出品者の金融口座に送金する送金依頼を、金融機関のサーバ装置に対し行う。サーバ装置１０が課金処理を行う前提として課金商品を得ることで、認証情報を照合した購入者が実際に商品を取得したことをより確実に確認することができる。

上述のように動作する情報処理システム１によれば、当事者間の商品取引における作業・管理負荷を軽減し利便性を向上させることができる。また、移動店舗１３が出品される商品を回収するので、出品者の出品にかかる作業負荷が軽減されうる。また、移動店舗１３が購入地点まで商品を搭載して移動するので、購入者はフリーマーケットが開催される地点まで移動する手間を省略することができる。さらに、移動店舗１３における商品陳列場所の撮像画像を用いてサーバ装置１０側で出品された商品の入りと出を管理するので、移動店舗１３に配置される人員を削減、ひいては無人化することが可能となる。

図１０は、本実施形態の変形例における情報処理システム１の動作手順を示すシーケンス図である。図１０は、複数の購入者がそれぞれの購入者端末装置１２、１２´を操作する場合（便宜上、購入者端末装置１２を操作する購入者を購入者Ａ、購入者端末装置１２´を操作する購入者を購入者Ａ´とする）における、課金処理に係る動作手順を示す。図８のステップＳ８１８以降の変形例であって、図８と同じステップには同じ符号が付される。

この変形例では、購入者Ａが購入者端末装置１２により購入を要求し、購入者Ａが指定した購入地点に移動店舗１３が到着している。そして、購入者Ａが単独で、あるいは購入者Ａ´とともに、移動店舗１３を訪れる。そして、購入者端末装置１２の購入者Ａが購入者端末装置１２により購入者Ａの認証情報を送出したとき、購入者Ａまたは購入者Ａ´が商品陳列場所から商品を取り去る。すると、サーバ装置１０が、購入者Ａによる購入対象商品を検出し（ステップＳ８１８）、購入者端末装置１２へ課金情報を送出して、購入者端末装置１２が課金情報を取得する（ステップＳ８２０）。

ここで、購入者Ａは、たとえば購入者Ａ´のために商品購入操作を行い、購入者Ａ´が実際の代金を支払うものとする。購入者端末装置１２は、課金調停用メニューを起動し、課金負担の他者との調停を購入者Ａに促す（ステップＳ１０００）。すると、購入者Ａは、購入者端末装置１２を操作し、購入者端末装置１２がサーバ装置１０から取得した課金情報を購入者端末装置１２´へ送出し、購入者端末装置１２´が課金情報を取得する（ステップＳ１００２）。購入者端末装置１２から購入者端末装置１２´への課金情報の転送は、たとえば、近距離無線、電子メールなどによりなされる。購入者端末装置１２から購入者端末装置１２´へ送られる課金情報は、商品代金の一部であってもよいし、全部であってもよい。購入者端末装置１２は、商品代金の一部または全部を購入者端末装置１２´へ送るための操作メニューを購入者Ａに提供する。

次いで、購入者端末装置１２は、課金情報を出力して購入者Ａに対し課金確認を行い、確認結果の入力を購入者Ａから受ける（ステップＳ８２２）。そして、購入者端末装置１２は、課金承認をサーバ装置１０へ送出し、サーバ装置１０が課金承認を取得する（ステップＳ８２４）。ここで、商品代金の一部を課金情報として購入者端末装置１２´へ送った場合には、商品代金の残余分についての課金確認、課金承認が購入者端末装置１２においてなされる。あるいは、商品代金の全部を課金情報として購入者端末装置１２´へ送った場合には、ステップＳ８２２、Ｓ８２４は省略される。

一方、購入者端末装置１２´は、課金情報を出力して購入者Ａ´に対し課金確認を行い、確認結果の入力を購入者Ａ´から受ける（ステップＳ１００４）。そして、購入者端末装置１２´は、課金承認及び金融口座情報を含む購入者Ａ´についての購入者情報をサーバ装置１０へ送出し、サーバ装置１０が課金承認を取得する（ステップＳ１００６）。

次いで、サーバ装置１０は、それぞれの購入者情報に含まれる購入者の金融口座情報に基づき、購入者Ａ及びＡ´、または購入者Ａ´に対する課金処理を行う（ステップＳ８２６）。なお、サーバ装置１０は、所定の期限（たとえば１０分～数時間）までに、購入者端末装置１２または購入者端末装置１２´から課金承認を取得しない場合、購入者端末装置１２に課金を督促する通知を送出してもよい。

かかる変形例によれば、購入者がたとえば友人とともに買い物をし、あるいは友人のために買い物をし、友人に代金の一部または全部を支払ってもらいたい場合において、購入に際しての課金の調停を簡便化することが可能となる。

上述の実施形態において、移動店舗１３の商品陳列場所の撮像画像の経時変化に基づき商品が出品されたり取り去られたりすることを検出する処理のすべてをサーバ装置１０が行う場合を例として示した。しかし、かかる処理の一部または全部を、移動店舗１３の制御部５６が行い、検出結果をサーバ装置１０が受け取ってもよい。

上述の実施形態において、出品者端末装置１１の制御部３３、及び購入者端末装置１２の制御部４３の動作を規定する処理・制御プログラムは、各端末装置にネットワーク１５経由で各端末装置にダウンロードされてもよいし、各端末装置に読取り可能な可搬型で非一過性の記録・記憶媒体に格納され、各端末装置が媒体から読み取ってもよい。また、移動店舗１３の制御部５６の動作を規定する処理・制御プログラムは、各端末装置にネットワーク１５経由で移動店舗１３の制御部５６にダウンロードされてもよいし、制御部５６に読取り可能な可搬型で非一過性の記録・記憶媒体に格納され、制御部５６が媒体から読み取ってもよい。

上記において、実施形態を諸図面及び実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形及び修正を行うことが容易であることに注意されたい。従って、これらの変形及び修正は本開示の範囲に含まれることに留意されたい。例えば、各手段、各ステップなどに含まれる機能などは論理的に矛盾しないように再配置可能であり、複数の手段、ステップなどを１つに組み合わせたり、或いは分割したりすることが可能である。

１情報処理システム
１０サーバ装置
１１出品者端末装置
１２購入者端末装置
１３移動店舗
１５ネットワーク
２０、３１、４１、５０通信部
２１、３２、４２記憶部
２２、３３、４３、５６制御部
２３会員情報データベース
３０、４０、５５入出力部
５１測位部
５３撮像部
７０、９０撮像画像
７１陳列棚
７２、７３商品

Claims

移動店舗における商品陳列場所の撮像画像の経時変化に基づき購入される商品を検出し、第１の端末装置から購入者の認証情報を取得すると、前記購入者に対する前記商品の価格分の課金処理を行う制御部を有し、
前記制御部は、前記商品が出品されるときに当該商品の回収地点の位置を第２の端末装置から取得すると、前記商品を回収するために前記回収地点へ移動する指示を前記移動店舗へ送出する、
サーバ装置。
請求項１において、
出品される商品の識別情報を記憶する記憶部をさらに有し、
前記制御部は、前記識別情報を前記第２の端末装置に送出し、前記商品陳列場所に前記商品が陳列されるときに前記第２の端末装置から取得した前記識別情報が、前記記憶部に記憶された識別情報と合致する場合に、前記陳列場所に追加された前記商品を出品された商品として検出する、
サーバ装置。
請求項２において、
前記制御部は、前記第２の端末装置から前記移動店舗を介して前記識別情報を取得する、
サーバ装置。
請求項２または３において、
前記制御部は、前記第２の端末装置から前記識別情報を取得したときの前記撮像画像に、過去の前記撮像画像に含まれていない商品が含まれているとき、前記出品された商品を検出する、
サーバ装置。
請求項４において、
前記制御部は、前記商品陳列場所に前記商品が陳列されるときに前記第２の端末装置から取得した前記識別情報が前記記憶部に記憶された識別情報と合致しない場合に、前記第２の端末装置に警告を送る、
サーバ装置。
請求項１乃至５のいずれかにおいて、
前記制御部は、前記認証情報を取得する前に前記撮像画像に含まれる前記商品が、当該認証情報を取得したときの当該撮像画像に含まれないときに、前記課金処理を行う、
サーバ装置。
請求項１乃至６のいずれかにおいて、
前記制御部は、前記第１の端末装置から購入者が指定する購入地点の位置を取得すると、前記購入地点への移動指示を前記移動店舗へ送出する、
サーバ装置。
請求項７において、
前記制御部は、前記購入地点への移動指示を前記移動店舗へ送出する前に前記第１の端末装置から取得した前記認証情報と、前記移動店舗が前記購入地点へ移動した後に前記第１の端末装置から取得する前記認証情報とが合致することを条件として、前記課金処理を行う、
サーバ装置。
請求項１乃至８のいずれかにおいて、
前記制御部は、前記移動店舗を介して前記第１の端末装置から前記認証情報を取得する、
サーバ装置。
請求項１乃至９のいずれかにおいて、
前記制御部は、前記第１の端末装置に前記価格を含む課金情報を送出し、前記第１の端末装置からの承認を取得することを条件として、前記課金処理を行う、
サーバ装置。
請求項１０において、
前記制御部は、前記第１の端末装置から前記課金情報を取得した第３の端末装置から前記承認を取得したときは、当該第３の端末装置から取得する認証情報に基づいて別の購入者に対し前記課金処理を行う、
サーバ装置。
撮像部と、
通信部と、
前記撮像部を制御し、前記通信部を介して他の装置と情報を授受する制御部とを有する移動店舗であって、
前記制御部は、サーバ装置からの指示に応答して出品される商品の回収地点へ移動するときに、商品が陳列される商品陳列場所の第１の撮像画像を前記撮像部に撮像させ、
前記第１の撮像画像をサーバ装置へ送出する、
移動店舗。
請求項１２において、
前記制御部は、前記商品陳列場所に陳列された商品を識別する識別情報を端末装置から取得して当該識別情報を前記サーバ装置へ送出するときに、前記商品が陳列された後の前記商品陳列場所の第２の撮像画像を前記撮像部に撮像させ、前記第２の撮像画像を前記サーバ装置へ送出する、
移動店舗。
請求項１３において、
前記制御部は、サーバ装置からの指示に応答して購入者が指定する購入地点へ移動すると、前記商品が前記商品陳列場所から取り去られた後の前記商品陳列場所の第３の撮像画像を前記撮像部に撮像させ、前記第３の撮像画像を前記サーバ装置へ送出する、
移動店舗。
請求項１４において、
前記制御部は、端末装置から購入者の認証情報を取得すると、当該認証情報を前記サーバ装置へ送出するとともに、前記第３の撮像画像を前記撮像部に撮像させる、
移動店舗。
第１の端末装置、移動店舗、及びサーバ装置を有する情報処理システムであって、
前記第１の端末装置が、
出品される商品の回収地点の位置をサーバ装置へ送出し、
前記サーバ装置から前記出品される商品を識別する識別情報を取得し、
前記サーバ装置が、
前記回収地点へ移動して前記商品を回収する指示を前記移動店舗へ送出し、
前記移動店舗が、
前記指示に応答して前記回収地点へ移動し、
商品が陳列される商品陳列場所の撮像画像を撮像して、撮像画像をサーバ装置へ送出し、
前記第１の端末装置が、
前記識別情報を前記サーバ装置へ送出し、
前記サーバ装置が、
前記第１の端末装置から前記識別情報を取得したときの前記撮像画像に、過去の前記撮像画像に含まれていない商品が含まれているとき、前記陳列場所に追加された当該商品を出品された商品として検出する、
情報処理システム。
請求項１６において、
第２の端末装置をさらに有し、
前記第２の端末装置が、
商品の購入要求と購入者が指定する購入地点の位置とを前記サーバ装置へ送出し、
前記サーバ装置が、
前記購入地点への移動指示を前記移動店舗へ送出し、
前記移動店舗が、
前記移動指示に応答して前記購入地点へ移動し、
購入される商品が陳列された商品陳列場所の撮像画像を撮像し、
前記第２の端末装置が、
前記購入者の認証情報を前記サーバ装置へ送出し、
前記サーバ装置が、
前記認証情報を取得したときの前記撮像画像の経時変化に基づいて購入される前記商品を検出し、前記購入者に対する課金処理を行う、
情報処理システム。
請求項１７において、
前記サーバ装置が、
前記第２の端末装置に前記商品の価格情報を含む課金情報を送出し、前記第２の端末装置からの承認を取得することを条件として、前記課金処理を実行する、
情報処理システム。
請求項１８において、
前記第２の端末装置が、
前記課金情報を別の端末装置へ送出し、
前記サーバ装置が、
前記別の端末装置から前記承認を取得したときは、当該別の端末装置から取得する認証情報に基づいて別の購入者に対し前記課金処理を行う、
情報処理システム。