JP7388850B2 - 出品支援プログラム、方法、及びシステム - Google Patents

Description

本発明は、広くインターネット等のネットワーク上で動作する出品支援システム等に関し、より詳細には、出品物に関する画像等を使用する出品支援システム等に関する。

従来、インターネット等のオンライン上で商品等の取引を行うための電子商取引システムが広く普及している。例えば、オークションシステムやオンラインフリーマーケットシステムなどである。そして、これらのシステムには、出品物に関する画像等を使用するものがある。

例えば、ウェブサイトに掲載される出品ページの作成を簡易化する出品支援装置等が提供されている（特許文献１）。

すわなち、特許文献１には、ユーザによって出品される商品の商品画像をユーザ端末から受信する受信手段と、前記ユーザによって過去に購入された商品の画像を記憶する画像記憶装置から、前記受信手段によって受信された商品画像と類似する類似画像を検索する検索手段と、前記受信手段によって受信された商品画像と、前記検索手段によって検索された類似画像に対応する商品に関する商品情報とを含む出品ページを生成する生成手段とを備えることを特徴とする出品支援装置が開示されている。

また、ユーザに対してインタラクティブ（対話型）に商品出品のための撮影ガイドが可能な商品出品支援システム等も提案されている（特許文献２）。

すなわち、特許文献２には、出品対象の商品の分類を示すカテゴリ情報の選択を受け付ける受付部と、前記カテゴリ情報に基づいて、ユーザに対して撮影をアシストするための撮影ガイド情報を出力する出力部と、前記出力された撮影ガイド情報に対応付けて、出品対象の商品の撮影指示を受け付ける撮影部と、前記撮影ガイド情報及び前記撮影部により撮影された出品対象の商品を表す画像情報を記憶する記憶部と、を備え、前記出力部は、前記記憶部に記憶された前回の前記撮影ガイド情報又は前記画像情報の少なくともいずれか一つに基づいて、次の撮影をアシストするための新たな撮影ガイド情報を出力する商品出品支援システムが開示されている。

特開２０１４－１１５９１２号公報 特開２０１９－０１２４７４号公報

しかしながら、従来の出品支援システム等は、出品物に関する画像等を使用する出品支援を行うものではあるが、たとえば、出品者（ユーザ）が使用する利用者端末のカメラ起動から出品手続き開始までの誘導を柔軟に行うものとは、必ずしも言えなかった。特に、多種多様にわたる出品物のカテゴリのスムーズな決定やカテゴリに応じた柔軟な出品支援を提供するものではなく、かかる観点から利便性の高いシステム等が求められる。

そこで、本発明の一実施形態にかかる出品支援プログラム等は、複数の利用者端末からアクセス可能に構成されたサーバによって運営される物品売買仲介サービスを提供するシステムにおける前記利用者端末上で実行されるプログラムであって、前記利用者端末上で実行されたとき、前記利用者端末に、前記利用者端末が撮影する画像中の物品を継続的に認識させるステップと、前記認識によって前記物品のカテゴリを抽出させるステップと、前記抽出されたカテゴリに基づき、前記物品を売買仲介の出品物として取り扱うための出品手続きを開始させるステップとを実行させることを特徴とする。

本発明の一実施形態にかかる出品支援プログラム等によれば、出品手続き開始後の誘導をスムーズに行い、特に、多種多様にわたる出品物のカテゴリに応じた柔軟な出品支援あるいは出品支援を行う出品支援システム等を提供できるという効果を奏する。

本発明の一実施形態にかかる出品支援プログラム等の基本概念を説明する説明図である。 本発明の一実施形態にかかる出品支援プログラム等の基本概念を説明する説明図である。 本発明の一実施形態にかかる出品支援システムの全体構成例を説明する説明図である。 本発明の一実施形態にかかる出品支援システムにおける情報処理装置の外観構成を説明する説明図である。 本発明の一実施形態にかかる出品支援システムにおける情報処理装置の機能ブロック（同図（Ａ））及び本発明の一実施形態にかかる出品代行支援システムにおけるサーバの機能ブロック（同図（Ｂ））を説明する説明図である。 本発明の一実施形態にかかる出品支援システム等の動作例を説明する説明図である。 本発明の一実施形態にかかる出品支援システム等の動作概念を説明する説明図である。 本発明の一実施形態にかかる出品支援システム等におけるキュー（結果保存キュー）の構成を説明する説明図である。 本発明の一実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面例を説明する説明図である。 本発明の一実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面例を説明する説明図である。 本発明の一実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面遷移例を説明する説明図である。 本発明の一実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面遷移例を説明する説明図である。 本発明の一実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面例を説明する説明図である。 本発明の一実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面例を説明する説明図である。 本発明の他の実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面遷移例を説明する説明図である。 本発明の他の実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面遷移例を説明する説明図である。 本発明の他の実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面遷移例を説明する説明図である。 本発明の一実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面遷移例を説明する説明図である。 本発明の一実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面遷移例を説明する説明図である。

はじめに、本実施例で使用される用語の定義を行う。
［出品］
商品取引、オークション等の取引において、出品者によって出品者の出品物が出品されること。オンラインシステム上で出品がなされる場合には、オンライン出品となる。また、オンラインシステム上で出品される場合には、出品情報がシステムに登録される。
［誘導］
ユーザないし利用者を目的の状態（ゴール）に導くためのコンピュータによる処理をいう。典型的には、ＵＩ／ＵＸを介して実現される。
［誘導トリガ（誘導発動）］
誘導や出品誘導を開始するためのトリガをいう。あるいは、誘導を開始するための条件を満たし、実際に誘導を開始あるいは発動させることをいう。
［商品サジェスト］
本発明に基づく独自の誘導に限定されない従来からの誘導手法を広く含む趣旨である。

図１Ａ及び図１Ｂは、本発明の一実施形態にかかる出品支援プログラム等の基本概念を説明する説明図である。理解の容易のために、利用者（ユーザ）端末からみたサービス利用時の画面操作例及び画面遷移例に基づいて、本発明の一実施形態にかかる出品支援プログラム等の基本概念が示されている。

図１Ａ及び図１Ｂには、利用者（ユーザ）端末の画面が操作に応じて遷移する様子が例示されている。図１Ａ及び図１Ｂにおける利用者（ユーザ）端末は、図示しない物品売買仲介サービスシステム（図２を参照して後述する情報処理サーバ（群）２１の一部であってもよい）に接続されており、図１Ａ（Ａ）に示される画面１１０は、これから出品を行うに際して表示される画面例である。

本発明の一実施形態において、画面１１０における出品ボタン１１１が押下されると（必ずしも物理的なボタンに対する押下に限られない。画面に表示されたボタンに対するタッチ操作、タップ操作、あるいはクリック操作でもよい。以下、「押下」の文言について同様。）、利用者（ユーザ）端末画面は、出品する商品に関する情報を入力するための画面１２０へ遷移する。画面１２０には、一実施形態として、出品方法を選択するための選択画面１２１が重畳表示されており、この画面には選択メニューとして、写真（静止画のみならず動画を含む。以下、同じ。）を撮って出品情報を入力するためのボタン１２１１（「写真を撮る」とのタイトルが付されている）と、アルバムやカタログから出品情報を取得して入力するためのボタン１２１２（「アルバムから選ぶ」とのタイトルが付されている）と、商品や商品の包装に付されたバーコードを読み取って出品情報を取得して入力するためのボタン１２１３（「バーコード（本・ゲーム）」とのタイトルが付されている）とが表示されている。ボタン１２１４は、下書きとして保存されている出品準備中のページ等を閲覧するためのボタンである（このボタンを押下すると、図示しない下書き中一覧画面へ遷移させることができる）。

画面１２１でボタン１２１１が押下されると、カテゴリ判定画面１３０（図１Ａ（Ｂ））へ遷移する。画面１３０では、カメラアプリが起動しており、図示しない利用者（ユーザ）端末のカメラで撮影されているものが領域１３１に写し出される。本発明の一実施形態においては、後述するように、映し出された物品のカテゴリを判定して画面１３０内にカテゴリ名や物品名を表示させることができる。

一実施形態において、ユーザがカメラボタン（アイコン）１３２を押下すると、画面内の領域１３４にある写真用枠の左端の画像（リップが映し出されている）が写真として記憶され、自動的に写真撮影画面１４０（図１Ａ（C））へ遷移する。このとき、画面１３０内に判定されたカテゴリ名や物品名を必ずしも表示させてなくてもよいが、カテゴリ名や物品名が非表示であっても、ユーザが出品しようとした写真を撮影する行動（一例として、カメラボタン１３２の押下）が、写真撮影画面１４０への遷移のトリガになりうることに留意されたい。

あるいは、他の実施形態において、ユーザの目からみて画面内１３０内に表示されたカテゴリや物品名が正しければ、ボタン１３３が押下される（「完了」とのタイトルが付されているが、これに制限されるものではなく、「決定」や「撮影」などでも良い）。ボタン１３３が押下されると、写真撮影画面１４０（図１Ａ（Ｃ））へ遷移する。このとき、画面１３０内に判定されたカテゴリ名や物品名を表示させてなくてもよい。

画面１４０には、カテゴリ毎の最適な出品方法が提案されており（つまり、判定された出品物のカテゴリに応じて提示される出品方法が異なる）、一実施形態として選択画面１４１が重畳表示されている。画面１４１には、バーコードを読み取って商品情報入力を行うためのボタン１４１１（「バーコードで探す」とのタイトルが付されている）と、ボタン１４１２（「キーワードで探す」とのタイトルが付されている）、ボタン１４１３（「自分で入力する」とのタイトルが付されている）とが表示されている。
ボタン１４１１が押下されるとバーコードスキャン画面１５０へ遷移し、ボタン１４１２が押下されるとカタログ検索画面１６０へ遷移し、ボタン１４１３が押下されると商品サジェスト画面１７０へ遷移する。

図１Ｂには、図１Ａからの遷移画面が示されており、図１Ｂ（Ｄ）にバーコードスキャン画面１５０が示されており、図１Ｂ（Ｅ）にカタログ検索画面１６０が示されており、図１Ｂ（Ｆ）に商品サジェスト画面１７０が示されている。それぞれ、必要に応じて後述するが、バーコードスキャン画面１５０では、商品または商品の包装に付されたバーコード１５１を読み取って商品情報を取得及び入力する。カタログ検索画面１６０では、商品に関するカタログ情報（メーカー名や製品型番等）を選択ないし入力していくことによって商品情報を取得及び入力する（一実施形態において、カタログ情報は、図２を参照して説明する情報処理サーバ（群）２１に格納されている）。商品サジェスト画面１７０では、たとえば画面１７１に示されるような商品を絞り込んでいくための推測処理を行いながら商品を特定し、特定された商品情報が取得及び入力される。

一実施形態において、画面１５０、１６０、１７０を介して取得及び入力された情報は、次に遷移する出品画面１８０に反映される（図１Ｂ（Ｇ））。図示されるとおり、取得及び入力された商品情報は、商品情報欄１８１に表示されている。

（本発明の一実施形態にかかる出品支援プログラム等の基本概念）
ここまでに表れている本発明の一実施形態にかかる出品支援プログラム等の基本概念は、次のとおりである。
（１）本発明の一実施形態にかかる出品支援プログラム等は、出品ボタン（出品手続きを開始するためのボタン）の押下によって始動する。
（２）少なくとも出品物のカテゴリを決定するために物体認識処理技術あるいはカテゴリ判定技術が用いられる。
（３）出品物のカテゴリが決定した後は、種々の方法で商品情報を補填ないし補完するための処理が実行される。このとき、商品情報を補填ないし補完するための処理は、決定された出品物カテゴリによって変化させることができる。

図２に、本発明の一実施形態にかかる出品支援システムの全体構成例を示す。図２に示されるように、出品支援システム２０は、その構成として、情報処理サーバ（群）２１と、ユーザまたは利用者が使用する各種情報処理装置（図において、例示的に、ＰＣなどの利用者端末２２ａ～２２ｂ、スマートフォン、携帯電話、携帯情報端末あるいはタブレット端末としての利用者端末２３ａ～２３ｅが示されている。以下、総称して「端末」とも言う）とで構成され、サーバ（群）及び各種端末間は、図２に示されるように専用回線やインターネット等の公衆回線（有線の回線として、２６～２８）で相互に通信可能に接続されている。また、回線は有線であっても無線であってもよく、利用者端末２３ａ～２３ｅは、無線で図示しない基地局や無線ルータ等を介してインターネット２９に乗り入れ、更に回線２８を介して情報処理サーバ（群）２１と相互に通信可能に接続されている。

本発明の一実施形態においては、情報処理サーバ（群）２１には、図１における端末同士がメッセージ等をやり取りするためのメッセージングサーバが含まれていてもよい。あるいは、図２に図示されない他のコミュニケーションサーバを介して図１における端末同士によるメッセージ等のやり取りが行われてもよい。

また、本願の出願時点での利用者端末は、ＰＣと同等の処理能力（通信処理速度や画像処理能力等）を備えているものも多く、小型のコンピュータとも言うべきものである。

また、本発明の実施に必要なプログラムないしソフトウェアは、通常、端末の記憶部におけるＨＤＤないしＳＳＤ等にインストールないし記憶され、プログラムないしソフトウェアの実行時には、必要に応じて記憶部内のメモリにその全部又は一部のソフトウェアモジュールとして読み出され、ＣＰＵにおいて演算実行される。

なお、演算実行は必ずＣＰＵ等の中央処理部で行われる必要はなく、図示しないＧＰＵ（Graphics Processing Unit）やＴＰＵ（Tensor processing unit）、ＤＳＰ（Digital Signal Processor）等の補助演算装置を用いることもできる。

また、情報処理サーバ１１のハードウェア構成も、基本的にはＰＣを採用することができる。なお、本発明はこれに限定されるものではないが、情報処理サーバ１１は、必要に応じてそのハードウェアスペックを上げるにあたり、複数のＰＣを並列的に作動させることによって大規模データの処理に適した構成をとることもできる。

図３に、本発明の一実施形態にかかる情報処理装置としてのスマートフォン（あるいは、タブレット端末等の他の利用者端末でも良いが、説明の便宜上スマートフォンとする）の外観構成を示す。図３において、情報処理装置（スマートフォン）３３は、筐体部３３１とディスプレイ３３２と筐体３３１の下部中央部に設けられたハードウェアボタン３３３とからなる。ディスプレイ３３２は典型的には液晶ディスプレイ（ＬＣＤ）等で構成され、文字や画像など様々な情報を表示することができる。また、ディスプレイ３３２にメニューボタンやソフトウェアキーボードを表示させ、これを指ないしタッチペン（不図示）等で触れることによりスマートフォン３３への指示（コマンド）とすることができる。この点で上記ハードウェアボタン３３３は必須の構成要素ではないが、本発明の説明の便宜上、一定の機能を担うボタンとして実装されている。もちろん、これらハードウェアボタン３３３を、ディスプレイ３３２の一部に表示させたメニューボタンで代替させることも可能である。

また、ディスプレイ３３２には、マルチタッチ入力パネルが含まれており、タッチ入力パネル上でのタッチ入力位置座標が入力デバイスインタフェース（不図示）を介してスマートフォン３３の処理系（ＣＰＵ）へ送信され処理される。そして、このマルチタッチ入力パネルは、パネルに対する複数の接触点を同時に感知することができるよう構成されている。この検出（センサ）については様々な方法で実現することができ、必ずしも接触センサに限られず、例えば、光学式のセンサを利用してパネルに対する指示点を抽出することも可能である。さらに、センサには、接触式のセンサや光学式のセンサのほか、人の肌の接触を感知する静電容量方式のセンサを用いることも可能である。

また、図３には現れていないが、スマートフォン３３は、マイクやスピーカを備えることもできる。この場合にはマイクより拾ったユーザの声などを判別して入力コマンドとすることも可能である。さらに、図３には現れていないが、スマートフォン３３の背面等には、ＣＭＯＳ等のカメラデバイスが実装されている。

図４に、本発明の一実施形態にかかるスマートフォン２３を構成するハードウェアの機能ブロック図（同図（Ａ））及び本発明の一実施形態にかかるサーバ（情報処理サーバ群を構成する一のもの）２１を構成するハードウェアの機能ブロック図（同図（Ｂ））を例示する。スマートフォン２３及びサーバ２１の動作は、以下に説明するハードウェアの個々の動作、及びこれらの連携動作によって実現されている。

図４（Ａ）において、ハードウェアブロック全体としてのスマートフォン４００は、大別すると、図３におけるハードウェアボタン３３３、ディスプレイ３３２に設けられたマルチタッチ入力パネル、マイク等で構成される入力部４０１と、プログラムやデータ等を記憶するためのハードディスク、ＲＡＭ及び／又はＲＯＭ等で構成される記憶部４０２と、プログラムによって様々な数値計算や論理演算を行うＣＰＵによって構成される中央処理部４０３と、ディスプレイ３３２等で構成される表示部４０４と、チップや電気系統等の制御を行うための制御部４０５と、インターネットにアクセスするためのスロットや光通信を行うためのポート、及び通信インタフェースから構成される通信インタフェース部４０６と、スピーカやバイブレーション等の出力部４０７と、時刻等を計時するための計時部４０８と、ＣＭＯＳ等のイメージセンサからなるセンサ部４０９と、装置内の各モジュールに電源を供給するための電源部４１０とからなり、これらのモジュールは必要に応じて適宜通信バスや給電線（図４（Ａ）においては、便宜上各線が適宜区分された結線４１１としてひとまとめに表す）によって接続されている。

なお、センサ部４０９には、スマートフォン４００（２３ａ等）の位置を特定するためのＧＰＳセンサモジュールを含めることとしても良い。また、センサ部４０９を構成するＣＭＯＳ等のイメージセンサによって検知された信号は、入力部４０１において入力情報として処理される。

また、本発明の実施に必要なプログラムないしソフトウェアは、通常、記憶部４０２を構成するハードディスクディスク等にインストールないし記憶され、プログラムないしソフトウェアの実行時には、必要に応じて記憶部４０２内のメモリにその全部又は一部のソフトウェアモジュールとして読み出され、ＣＰＵ等の中央処理部４０３において演算実行される。

なお、演算実行は必ずしもＣＰＵ等の中央処理部４０３で行われる必要はなく、図示しないＧＰＵ（Graphics Processing Unit）やＴＰＵ（Tensor processing unit）、ＤＳＰ（Digital Signal Processor）等の補助演算装置を用いることもできる。

図４（Ｂ）において、ハードウェアブロック全体としてのサーバ４５０は、大別すると、各種比較・演算処理を行うためのＣＰＵ４５１と、ＲＡＭ、ＲＯＭ、フラッシュメモリ等の記憶部４５２と、キーボードやポインティングデバイス等の入力部４５３と、ディスプレイやスピーカ等の出力部４５４と、各種信号制御のための制御部４５５と、通信（インタフェース）部４５６（無線、有線を問わない）と、時刻等を計時するための計時部４５７と、電源部４５８とからなる。

これらのモジュールは必要に応じて適宜通信バスや給電線（図４（Ｂ）においては、便宜上各線が適宜区分された結線４９９としてひとまとめに表す）によって接続されている。

また、本発明の実施に必要なサーバ４５０上で実行されるプログラムないしソフトウェアは、通常、記憶部４５２を構成するハードディスクディスク、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、フラッシュメモリ等にインストールないし記憶され、プログラムないしソフトウェアの実行時には、必要に応じて記憶部４５２内のメモリにその全部又は一部のソフトウェアモジュールとして読み出され、ＣＰＵ４５１において演算実行される。

なお、演算実行は必ずしもＣＰＵ４５１等の中央処理部で行われる必要はなく、図示しないＧＰＵ（Graphics Processing Unit）やＴＰＵ（Tensor processing unit）、ＤＳＰ（Digital Signal Processor）等の補助演算装置を用いることもできる。

次に、図５の動作フローを用いて、本発明にかかる一実施形態における出品支援システムにおける情報処理サーバ及び／または情報処理装置（ユーザ端末）の動作を説明する。

図５において、「ユーザ端末」は、情報処理装置であり、図２におけるユーザ端末２３ａ～２３ｅ等がこれに対応し、「情報処理サーバ」は、図１における情報処理サーバ（群）２１がこれに対応する。なお、図５では、一実施形態として、ユーザ端末と情報処理サーバ間のやり取りとして説明したが、本発明はこれに限定されるものではなく、情報処理サーバでの処理の一部または全部をユーザ端末内で処理されてもよい。すなわち、本発明の他の実施形態においては、同一のユーザ端末内において、図５に示される一部または全ての処理がなされてもよい。
以下、図５に沿って説明する。

まず、ステップＳ５０１において、ユーザがユーザ端末内に表示された出品ボタンをタップすると（図１Ａの出品ボタン１１１の押下に対応）、ユーザ端末からコマンドが発行または送信される（ステップＳ５０２）。一実施形態において、このコマンドによってユーザ端末におけるカテゴリ識別器が起動される（ステップＳ５０３）。一実施形態において、このカテゴリ識別器はソフトウェアとして実装される。なお、上述したとおり、他の実施形態においては、カテゴリ識別器は情報処理サーバ上で実行されてもよい。その場合、ステップＳ５０２は、ユーザ端末から情報処理サーバへのコマンドの送信となる。

ステップＳ５０４において、ユーザによる撮影準備が行われる。このとき、たとえばユーザは、カテゴリ識別器が起動したユーザ端末を構えて出品しようとしている被写体をユーザ端末付属のカメラで捉えようとする。
本発明の一実施形態においては、ステップＳ５０４は、出品ボタンを押下して遷移した図１Ａ（Ｂ）の画面１３０に対応する。ここでは、出品ボタンの押下によりカメラ機能が起動されるとともに、カテゴリ識別器がバックグラウンドで立ち上がっている。

次に、ユーザ端末からは、端末付属カメラで捉えられた画像が刻々と情報処理サーバへ送信される（ステップＳ５０５ａ～ステップＳ５０５ｃ）。このとき送信される画像は、静止画であってもよいし、動画であってもよい。

ステップＳ５０６では、すでに起動されているカテゴリ識別器による画像内の物体の推論が継続的に行われる。推論ロジックは、公知の物体認識技術あるいはカテゴリ判定技術を採用することができる。一例として、カテゴリ判定には一般物体認識技術が用いられ、必要に応じて特定物体認識技術が組み合わされてもよい。特定物体認識技術の古典的手法には、ＳＩＦＴ（Scale Invariant Feature Transform）がある。ＳＩＦＴは、その後、より高精度化するアプローチが検討され，「ＰＣＡ－ＳＩＦＴ」や「ＢＳＩＦＴ」といった特徴量を考慮する手法が提案されている。さらに、ＳＩＦＴに要する時間や計算コストの問題に対処するために、ＳＩＦＴアプローチを高速化した「ＳＵＲＦ（Speeded-Up Robust Features）」という手法が提案されたほか、ＧＰＵによる高速化も提案されている。また、これらの物体認識技術においては、適宜、畳み込みニューラルネットワーク等といったディープラーニングをはじめとする機械学習処理技術が採用されてもよい。

ステップＳ５０６での推論結果は、順次結果保存キューにプッシュされる（ステップＳ５０７）。一実施形態において、このプッシュ方式は、ＦＩＦＯ（First In First Out）であり、例えば１０ｍｓごとにプッシュされる。この場合、キューには常時１００個の推論結果がストックされることとなる。

図７に、本発明の一実施形態にかかる出品支援システム等における結果保存キューの構成を示す。このキューは、情報処理サーバ２１あるいは利用者端末２３ａ～２３ｅ等のいずれかの装置内のメモリに構成される。

図７において、キュー７００に対しては、例示的に、１０ｍｓごとに結果がプッシュされ、１０００ｍｓ分のスタック７０１～７９９（単純に計数すると個数は９９となるが、ここでは１００個あるものとする。あるいは、９９０ｍｓ分のスタック７０１～７９９ということでも差し支えない）を保持できるように構成されている。一実施形態において、このキューはＦＩＦＯ（First In First Out）方式が採用されるが、本発明はこれに制限されるものではない。既知の種々のスタック方式を採用することができる。

一実施形態において、１つのスタックの中には１つの推論結果が格納される。例えば、スタック７０４には、その瞬間に撮影されている画像中に映し出されている物品名（カテゴリ）として、｛book：0.60, box: 0.30, others: 0.10｝という推論結果が格納されており、この推論結果は時々刻々と変化し、次々とキュー７００の上からプッシュされていく（図７においては、例示的に、すでにスタック７０１～７０３が上からプッシュされている）。なお、スタック７０４の内容は、いま認識している物品の名称またはカテゴリは、「本（book）」である確率（推定確率）が６０％、「箱（box）」である確率が３０％、その他である確率が１０％という意味である。

図７において、ある瞬間に｛book：0.60, box: 0.30, others: 0.10｝と推論されてキュー７００にプッシュされ、次の瞬間に｛book：0.74, box: 0.20, others: 0.05｝と推論されてプッシュされ、その次の瞬間に｛book：0.84, box: 0.05, cosmetics: 0.05｝と推論されてプッシュされ、その次の瞬間に｛book：0.89, box: 0.03, cosmetics: 0.01｝と推論されてプッシュされた結果がスタック７０１～７０４であるとすると、カテゴリ識別器は、その精度を徐々に上げていることが分かるであろう（もちろん、図７に示したシーンにおいて、ユーザ端末で撮影しているのは、図示しない「本」である）。
そうして、ものの１秒と経たないうちに、キュー７００はプッシュされた推論結果でいっぱいになり、次は古いスタックから次々と破棄されていくことになる。

一実施形態において、ステップＳ５０８にて、結果保存キューに格納された結果における推論に関する閾値を超えたものとする。

このとき、本発明の一実施形態において、カテゴリ識別器が推論した被写体のカテゴリを決定するために、「閾値」という判断基準が採用される。この閾値には次のような基準を採用することができる。
（１）キュー７００における各スタックのうち、筆頭に上がっている同一物品ないし同一カテゴリが所定以上の割合（たとえば、９０％以上）を占める。
（２）キュー７００における各スタックのうち、筆頭に上がっている同一物品ないし同一カテゴリの推定確率が所定以上（たとえば、６０％以上）のものが、所定以上の割合（たとえば、７０％以上）を占める。
（３）上記（１）（２）の筆頭に上がっている同一物品ないし同一カテゴリを含む各スタッフは連続したものであることを条件とする。

ここでは、ステップＳ５０８において、カテゴリ識別器による被写体（出品予定物品）のカテゴリが確定したものと考えてよい。具体的なカテゴリは、たとえば、「ヘッドホン」、「本」、「化粧品」などである。

本発明の一実施形態において、ステップＳ５０８にて閾値を超えて以降、カテゴリに関しての結果がユーザ端末に返信される（ステップＳ５０９ａ、ステップＳ５０９ｂ）。この返信は、閾値を超えている限り、定期的に実施することもできるし、あらたに閾値を超えるたびに実施することもできる。この場合、ユーザ端末に映し出されている被写体が変わるたびに新たに認定されたその被写体のカテゴリが更新表示される。具体的には、はじめに「本」を撮影していると、ものの１秒と経たないうちに物品カテゴリとして「本」と認識されるが（認識された結果は非表示とすることができるが、適宜表示させてもよい）、カメラを別の物品（たとえば、ヘッドホン）に向け静止していると、また１秒と経たないうちに画面には新たに認定された物品カテゴリとして「ヘッドホン」と認識（さらに必要に応じて表示）されるなどである。

あるいは、ステップＳ５０９ａ及びＳ５０９ｂにかかる返信を一切させないように制御することもできる（そのため、ステップＳ５０９ａ及びＳ５０９ｂに対応する矢印は破線としている）。

次に、ステップＳ５１０において、図示しないユーザ操作によってユーザ端末から撮影コマンドが情報処理サーバへ送信される（ステップＳ５１０）。ここでは、このときはじめてユーザは現在カテゴリが認識された物品について出品用画像を撮影するための操作を行ったという位置づけである。このとき、結果保存キュー内の閾値は超えていることを前提に、情報処理サーバはユーザ端末に対して出品手続誘導処理を開始する（ステップＳ５１１）。

なお、オンラインオークションシステムやオンラインフリーマーケットシステムでは、出品時に商品等の写真（画像）の撮影は必要である。つまり、商品の写真（画像）を撮ることは、出品時の通常の手続きであるため、上記機能により、ユーザは通常の出品手続きを行うだけでカテゴリに応じた出品手続きをサジェストしてもらうことができ、この点で優れたＵＸが実現されている。

ステップＳ５１２では、対象カテゴリ専用の出品手続きへ誘導される。つまり、認定されたカテゴリによって出品手続きの進行ないしスタイルが異なる点は、本発明の特徴の一つとなっている。

また、図５では、一実施形態として、ユーザ端末と情報処理サーバ間のやり取りとして説明したが、本発明はこれに限定されるものではなく、本発明の他の実施形態においては、同一のユーザ端末内で図５に示される処理がなされる。この場合、ステップＳ５０２のコマンド送信は、ユーザ端末内でのコマンド発生となり、以下、ステップＳ５０５ａ～ステップＳ５０５ｃの画像送信は、ユーザ端末内での画像転送（たとえば、メモリ間）となり、ステップＳ５０９ａ及びステップＳ５０９ｂの結果返信は、ユーザ端末内での結果出力となる。ステップＳ５１０の撮影コマンド送信は、ユーザ端末内でのコマンド発生となる。

図６に、本発明の一実施形態にかかる出品支援システム等の動作概念を示す。同図において、ユーザ端末６００がその全容を示しているが、大きくはフォアグラウンド処理６１０とバックグラウンド処理６２０とで構成されている。フォアグラウンド処理６１０の主な機能は、出品物の継続的なカメラ撮影である。こうして撮影された出品物画像は、ユーザ端末画面において「プレビュー画像」として表示される（図１（Ａ）Ｂ）。フォアグラウンド処理６１０で撮影されたプレビュー画像は、継続的にバックグラウンド処理６２０へ送信ないし転送される。

バックグラウンド処理６２０の主な機能は、送信ないし転送されてきたプレビュー画像内に映し出されている物品のカテゴリ識別（あるいは、物体認識）である。このため、本発明の一実施形態においては、カテゴリ判定モデル６２１が稼働する。このモデルには、上述した公知のカテゴリ判定技術等を採用することができる（既知の一般物体認識技術やＳＩＦＴやＳＵＲＦといった特定物体認識技術等）。さらに、適宜ディープラーニング等の機械学習処理技術が適用されてもよい。

カテゴリ判定モデル６２１で判定された結果は、結果保存キュー６２３へ随時プッシュされる。そして、誘導トリガ機構６２２がキュー６２３内を監視しており、閾値を超えると物品のカテゴリを決定し、誘導発動させる（ここでは、図５のステップＳ５１０のようなボタン操作がトリガとはならない点に留意されたい）。
本発明の一実施形態においては、この誘導トリガにより、対象カテゴリ専用の出品手続きへ誘導される。

図８に、本発明の一実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面例を示す。図８（Ａ）の画面８１０には、ヘッドホン８１１が映し出されており、カテゴリ識別器は、これを「ヘッドホン」と認識しているので、画面８１０のカテゴリ表示欄８１２には、「ヘッドホン」と表示されている。同様に、図８（Ｂ）の画面８２０には、本（問題集）８２１が映し出されており、カテゴリ識別器は、これを「本」または「参考書」と認識しているので、画面８２０のカテゴリ表示欄８２３には、「参考書」と表示されている。映し出されている画像は、静止画像であっても動画像であってもよい。動画像の場合は、被写体が映し出されて１秒以内に物品名またはカテゴリ名が表示されるので、実質的にリアルタイムに物体認識（または、カテゴリ認識）されている様子を確認することができる（なお、１秒以内という時間は例示的な数字であって、本発明はこれに制限されるものではない）。
なお、一実施形態において、このような物体認識（または、カテゴリ認識）の様子は、図５のステップＳ５０９ａ、ステップＳ５０９ｂで確認できる。

図９～図１５に、本発明の一実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面例を示す。図９では、特に図５のステップＳ５１２において対象カテゴリ専用の出品手続きへ誘導する誘導例が示されている。すなわち、図９では、認識された物品のカテゴリが本（下位概念としての「問題集」や「参考書」も含まれる。以下同様の分脈において同じ）であったとき、それに合った出品誘導が実施される。
図５に示される例では、誘導が行われるタイミングは写真撮影後であるが、本発明はこれに限定されるものではなく、撮影前に誘導が行われてもよい。図９は、写真撮影前に誘導が行われる例である。この点、図５のステップＳ５１０とステップＳ５１１の関係は、ステップＳ５１０の前にステップＳ５１１が実施されてもよい。

図９（Ａ）の画面９１０では、物品９１１が参考書（本）であることがすでにカテゴリ識別器によって認識されており、メッセージウィンドウ９１２が表示されている（一例として、「本を出品しようとしていますか？バーコード出品が便利です」とのアドバイスが表示されている）。メッセージウィンドウ９１２には、アドバイスどおりにバーコード出品を進めるための「GO」ボタンと、アドバイスには従わず、図示しない通常手続きによって出品を進めるための「IGNORE」ボタンとが表示されている。
ここでは、ユーザは、「GO」ボタンを押下するものとする。そうして、図９（Ｂ）の画面９２０へ進む。

画面９２０には、バーコードを読み取る際の位置合わせのためのガイド９２２が表示されている。ユーザは、このガイド９２２の表示により、バーコードを撮影すべきことを認識し、参考書（本）９２１を裏返しにしてバーコードをカメラに向け、あるいは、参考書（本）９２１に印刷されたバーコードがこのガイド９２２付近にくるようにカメラ位置（ユーザ端末の向きや距離）を調整する。バーコードの読み取りに成功すると、図９（Ｃ）の画面９３０へ進む。

画面９３０には、ガイド９３２に位置合わせされた参考書（本）９３１が映し出されるとともに、読取結果欄９３３にバーコードから読み取られた書籍情報が表示されている。一実施形態として、バーコードにはＩＳＢＮ番号のような識別子が入っており、これを読み取ったユーザ端末は、一例として、読み取った識別子を情報処理サーバへ送信し、その本に関する情報（書籍名、著者名、出版社名、価格等）をサーバから引き渡してもらうことができる。
読取結果欄９３３には、そのようにして引き渡された情報が表示されている。

次に、読取結果欄９３３に表示された内容に間違いないことを確認したユーザは、同欄に表示されているボタン９３３１を押下し、現物の撮影にとりかかることになる。

図１０Ａ及び図１０Ｂに、本発明の一実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面遷移例を示す。ここでは、図１Ａや図５等を参照して説明した、カテゴリ認識結果に基づく対象カテゴリ専用の出品誘導に必ずしも縛られない多様なバリエーションが示されている（さらなるバリエーションは、図１３Ａ等を参照して後述する）。以下、図１０Ａ及び図１０Ｂを参照して説明する。

図１０Ａ（Ａ）には、一実施形態における出品方法選択画面１０１１（画面１２０の別形態である）が表示されている。この画面１０１１は、商品情報入力画面１０１０上に重畳表示されており、その内容は、例示的に、「写真を撮る」ボタン（１０１１１）、「写真をアルバムから選択」ボタン、「バーコード出品」ボタン（１０１１２）、「カタログ出品」ボタンから選択可能に構成されている（それぞれのメニューは押下ないしタッチ可能な選択メニューボタンを兼ねている）。なお、「下書き一覧へ」ボタンは、現在出品準備中の下書きを一覧するためのボタンである。その他、出品方法選択画面１０１１をキャンセルして商品情報入力画面１０１０に復帰するための「Ｃａｎｃｅｌ」ボタンも最下部に表れている。

画面１０１１において、ボタン１０１１１が押下された場合は、図１０Ａ（Ｂ）の写真撮影画面１０２０（画面１３０の別形態である）へ遷移し、ボタン１０１１２が押下された場合は、図１０Ａ（Ｃ）のバーコード撮影画面１０３０へ遷移する。

画面１０２０では、ユーザは、図示しないアプリからのガイド等を受けながら商品画像の撮影を行い、その後、商品情報補完設定ＯＮになっている場合には、図１０Ｂ（Ｇ）の出品画面（カテゴリ選択時）１０７０へ遷移する（この時点で、カテゴリ判定により、商品のカテゴリが決定されていてもよい）。画面１０２０での商品画像撮影後、商品情報補完設定ＯＦＦになっている場合には、図１０Ｂ（Ｈ）の出品画面（通常）１０８０へ遷移する。

一方、画面１０１１において、ボタン１０１１２が押下された場合は、図１０Ａ（Ｃ）のバーコード撮影画面１０３０へ遷移する。ここでは、商品または商品包装に印刷されたバーコード１０３１を読み取る。もし、読み取りに失敗した場合には、図１０Ａ（Ｄ）の画面１０４０へ遷移し、ここでは、ポップアップウィンドウ１０４１が表れ、商品が見つからなかった旨のメッセージが表示される。ポップアップウィンドウ１０４１のＯＫボタン１０４１１を押下すると画面１０３０へ復帰する。

バーコード撮影画面１０３０でのバーコード１０３１の読み取りに成功した場合には、図１０Ａ（Ｅ）の画面１０５０へ遷移し、バーコード１０５１から読み取られた商品情報が商品欄１０５２に表示される。一実施形態において、ユーザは、その中の「商品の画像を撮る」ボタン１０５２１を押下して、図１０Ｂ（Ｆ）の商品撮影画面１０６０へ遷移させる。

図１０Ｂ（Ｆ）に移り、商品撮影画面１０６０（画面１３０の別形態である）にて商品の撮影が完了すると、完了ボタン１０６１が押下され、図１０Ｂ（Ｉ）の出品画面（カタログ情報自動補完）１０９０へ遷移する。カタログ情報自動補完とは、商品の手掛かりとなる情報（商品型番等）から図示しないカタログデータベース（情報処理サーバ２１等に格納されている）を参照して、その商品に関する商品情報を取得し、出品画面（商品情報画面）に表示させる処理機能である。

なお、ここでカテゴリを自動識別できた場合、ユーザをその下位概念のカタログ情報を選択する画面にまで誘導することができる。例えば、リップまでカテゴリ識別できた場合、その下位概念のカタログ情報をユーザに選択させる画面からスタートさせる等である(つまり、ユーザは「コスメ」等は選択しなくてよい)。

一方、図１０Ｂ（Ｇ）の出品画面（カテゴリ選択時）１０７０では、一例として、バーコード入力するためのボタン１０７１が押下されて、図１０Ｂ（Ｊ）のバーコード撮影画面１０９５へ遷移する。バーコード読み取りに成功すると、図１０Ｂ（Ｋ）の画面１０９６へ遷移し、バーコードから読み取られた商品情報が画面下部の商品欄に表示される。そして、商品の写真を撮るためのボタン１０９９を押下すると、図１０Ｂ（Ｉ）の出品画面（カタログ情報自動補完）１０９０へ遷移する。

他方、図１０Ｂ（Ｈ）の出品画面（通常）１０８０では、カテゴリ入力をする必要があるためカテゴリ欄１０８１が押下されて、図１０Ｂ（Ｇ）の出品画面（カテゴリ選択時）１０７０へ遷移する。

本発明の一実施形態にかかる出品支援システム等においては、以上のような画面遷移制御を行わせることもできる。

（出品物品ないし商品のカテゴリごとの商品情報のバリエーション例）
本発明の一実施形態にかかる出品支援システム等においては、様々なカテゴリに属する物品ないし商品を出品することができる。しかしながら、物品ないし商品のカテゴリごとに入力すべき事項は異なっており、多岐にわたることもあるので、図１１～１２を参照しながらそのバリエーションを説明する。本発明の一実施形態にかかる出品支援システム等は、これらのカテゴリごとの商品情報を入力しやすくするための支援を行う。

図１１に、本発明の一実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面例であって、化粧品カテゴリに属する物品ないし商品に関する商品情報を示す。図１１の画面１１００において、商品情報入力選択欄１１１０の下には、これから出品しようとする商品についての商品情報入力欄１１２０が配置されており、商品の状態等に関する情報について、導入時期や残量に関する情報を入力できるように構成される。なお、＃マークの後に続く文字列は、検索用のハッシュタグである。また、同欄右上のテンプレートボタンを押下すると、このカテゴリについての図示しないテンプレートが表示される（ユーザは、提供されたテンプレートに基づいて入力情報の過不足分を適宜修正すればよい）。

商品の詳細情報表示欄１１３０には、商品カテゴリが下位概念まで表示されており、すでに入力されたこの商品の商品名及び製造会社名が表示されている。また、商品の状態等について入力されたコメントも表示させることができる。

配送関連情報表示欄１１４０には、配送料の負担や配送方法等に関する情報が表示され、販売価格表示欄１１５０には、現時点での販売価格が表示される。そして、販売手数料等表示欄１１６０には、例示的に、販売手数料や販売利益額（販売価格から販売手数料を差し引いたもの）が表示される。

図１２に、本発明の一実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面例であって、家電カテゴリに属する物品ないし商品に関する商品情報を示す。図１２の画面１２００において、商品情報入力選択欄１２１０の下には、商品の詳細情報表示欄１２２０が配置されており、下位概念を含めたカテゴリや商品の状態に関する情報のほか、その家電のサイズやブランドも表示させるように構成されている（家電においては、設置等の問題からそのサイズを表示させることは重要である）。

商品情報入力欄１２３０には、商品に関する情報について、商品名、型番、色、ブランド、発売日、サイズ等の種々の情報を入力させるように構成される。なお、＃マークの後に続く文字列は、検索用のハッシュタグである。また、同欄右上のテンプレートボタンを押下すると、このカテゴリについての図示しないテンプレートが表示される（ユーザは、提供されたテンプレートに基づいて入力情報の過不足分を適宜修正すればよい）。

配送関連情報表示欄１２４０には、配送料の負担や配送方法等に関する情報が表示され、販売価格表示欄１２５０には、現時点での販売価格が表示される。そして、販売手数料等表示欄１２６０には、例示的に、販売手数料や販売利益額（販売価格から販売手数料を差し引いたもの）が表示される。

（ユーザ端末の画面遷移例のバリエーション）
図１３Ａ～図１３Ｃに、本発明の他の実施形態にかかる出品支援システム等における情報処理装置（ユーザ端末）の画面遷移例を示す。これらの画面遷移例は、図１０Ａ～図１０Ｂを参照して説明した画面遷移例のバリエーションとなるものである。

図１３Ａ（Ａ）には、一実施形態における出品方法選択画面１３１１が表示されている。この画面１３１１は、商品情報入力画面１３１０上に重畳表示されており、その内容は、例示的に、「写真を撮る」ボタン（１３１１１）、「写真をアルバムから選択」ボタン、「バーコード出品」ボタン（１３１１２）から選択可能に構成されている（それぞれのメニューは押下ないしタッチ可能な選択メニューボタンを兼ねている）。なお、「下書き一覧へ」ボタンは、現在出品準備中の下書きを一覧するためのボタンである。その他、出品方法選択画面１３１１をキャンセルして商品情報入力画面１３１０に復帰するための「Ｃａｎｃｅｌ」ボタンも最下部に表れている。

画面１３１１において、ボタン１３１１１が押下された場合は、図１３Ａ（Ｂ）の写真撮影画面１３２０へ遷移し、ボタン１３１１２が押下された場合は、図１３Ａ（Ｃ）のバーコード撮影画面１３３０へ遷移する。

画面１３２０では、ユーザは、図示しないアプリからのガイド等を受けながら商品画像の撮影を行い、その後、商品情報補完等の設定がＯＮになっている場合には、その時点で判定されたカテゴリに応じて、図１３Ｂ（Ｅ）の出品画面（商品サジェスト）１３５０、同図Ｂ（Ｆ）の出品画面（商品カテゴリサジェスト）１３６０、同図Ｂ（Ｇ）の出品画面（商品情報補完時）１３７０のいずれかの画面へ遷移する。
画面１３２０での商品画像撮影後、商品情報補完等の設定がＯＦＦになっている場合には、図１３Ｂ（Ｄ）の出品画面（通常）１３４０へ遷移する。

一方、画面１３１１において、ボタン１３１１２が押下された場合は、図１３Ａ（Ｃ）のバーコード撮影画面１３３０へ遷移する。ここでは、商品または商品包装に印刷されたバーコード１３３１を読み取ることができる。さらに、画面１３３０には、「カタログ出品へ」ボタン１３３２が表示されることにより、カタログ情報からの商品情報入力への誘導もなされている。
ここでは、「カタログ出品へ」ボタンが押下されるものとし、その場合には、図１３Ｃ（Ｉ）のカテゴリ選択画面１３９１へ遷移する。

図１３Ｂに移り、同図Ｂ（Ｄ）の出品画面（通常）１３４０において、カテゴリーメニュー１３４１が押下された場合には、図１３Ｃ（Ｉ）のカテゴリ選択画面１３９１へ遷移する。
また、図１３Ｂ（Ｅ）の出品画面（商品サジェスト）１３５０では、すでに出品物のカテゴリ（一例として、本やＤＶＤ）について、タイトルを含めていくつか候補が絞られており、候補提示画面１３５１が重畳表示されている。ここで、ユーザが提示された候補のなかから出品しようとしている作品タイトル１３５１１を押下すると、図１３Ｃ（Ｏ）の出品画面（カタログ情報自動補完）１３９７へ遷移する。

図１３Ｂ（Ｆ）の出品画面（商品カテゴリサジェスト）１３６０では、すでに出品物のカテゴリ候補が絞られており、候補提示画面１３６１が重畳表示されている。ここで、ユーザが、提示された候補のなかから出品物のカテゴリ１３６１１を押下すると、図１３Ｂ（Ｈ）の出品画面（カテゴリ選択時）１３８０へ遷移する。

また、図１３Ｂ（Ｇ）の出品画面（商品情報補完時）１３７０では、商品情報入力方法の選択として、「バーコードでかんたん入力」する方法や「カタログから製品を選択する」方法が提示されている。ここで、ユーザが、提示された方法の中から「カタログから製品を選択する」ボタン１３７１を押下すると、図１３Ｃ（Ｊ）のメーカー選択画面１３９２へ遷移する。

図１３Ｂ（Ｈ）の出品画面（カテゴリ選択時）１３８０では、商品情報入力方法の選択として、「バーコードでかんたん入力」する方法や「カタログから製品を選択する」方法が提示されている。ここで、ユーザが、提示された方法の中から「カタログから製品を選択する」ボタン１３８１を押下すると、図１３Ｃ（Ｊ）のメーカー選択画面１３９２へ遷移する。

図１３Ｃにおいて、同図Ｃ（Ｉ）のカテゴリ選択画面１３９１から同図Ｃ（Ｌ）の製品選択画面１３９４までは、商品情報をカテゴリから製品（たとえば、型番等）までを順次絞り込んでいく様子を示す画面遷移である。一実施形態において、図１３Ｃ（Ｉ）のカテゴリ選択画面１３９１において提示されるカテゴリリストから適切なカテゴリを選択すると、同図Ｃ（Ｊ）のメーカー選択画面１３９２へ遷移し、ここで商品の適切なメーカーを選択すると、同図Ｃ（Ｋ）のシリーズ選択画面１３９３へ遷移し、ここで商品の適切なシリーズを選択すると、同図Ｃ（Ｌ）の製品選択画面１３９４へ遷移する。

図１３Ｃ（Ｌ）の製品選択画面１３９４において適切な製品型番等を選択すると同図Ｃ（Ｏ）の出品画面（カタログ情報自動補完）１３９７へ遷移する。この画面に遷移した時点で、そこまでで確定した製品情報をもとに、図示しないデータベース（一実施形態において、このデータベースは、情報処理サーバ２１に格納される）からその製品のカタログ情報（製品スペック等）が取得され、この画面に自動的に挿入される。

なお、本発明の一実施形態においては、図１３Ｃ（Ｊ）のメーカー選択画面１３９２及び同図Ｃ（Ｋ）のシリーズ選択画面１３９３において、「製品名で検索」ボタンが設けられており、このボタンを押下すると、同図１３Ｃ（Ｍ）の製品名選択画面１３９５へ遷移する。画面１３９５では、図示しない公知の手法により製品名や型番を検索することができ、一例として、その候補が候補選択画面１３９６に表示される。画面１３９６で適切な候補を選択すると、図１３Ｃ（Ｏ）の出品画面（カタログ情報自動補完）１３９７へ遷移する。この画面に遷移した時点で、そこまでで確定した商品情報をもとに、図示しないデータベースからその商品の詳細情報（商品に関する情報等）が取得され、この画面に自動的に挿入される。

（さらなるカテゴリ商品の出品に対応する本発明のバリエーション）
図１４及び図１５を参照して、本発明の一実施形態で取り扱うことのできる、さらに他の商品ないし製品カテゴリに対応する出品支援システム等における情報処理装置（ユーザ端末）の画面遷移例を示す。図１４に示された画面遷移例は、時計を出品する際の誘導画面例であり、図１５に示された画面遷移例は、自動車を出品する際の誘導画面例である。

時計や自動車は、それぞれの商品ないし製品としての個性が際立っており、出品に際しては特徴のある事項を入力していく必要があるが、本発明の一実施形態にかかる出品支援システム等によれば、これらの商品ないし製品の出品に際してもスムーズに支援することができる。

図１４（Ａ）には、出品を始める際のトップ画面１４１０が表示されている。画面１４１０中の出品ボタン１４１１を押下すると、商品情報入力画面１４２０へ遷移する。画面１４２０には、一実施形態として、出品方法を選択するための選択画面１４２１が重畳表示されており、この画面には選択メニューとして、写真を撮って出品情報を入力するためのボタン１４２１１（「写真を撮る」とのタイトルが付されている）と、アルバムやカタログから出品情報を取得して入力するためのボタン（「アルバムから選ぶ」とのタイトルが付されている）と、商品や商品の包装に付されたバーコードを読み取って出品情報を取得して入力するためのボタン（「バーコード（本・ゲーム）」とのタイトルが付されている）とが表示されている。また、「下書き一覧」ボタンは、下書きとして保存されている出品準備中のページ等を閲覧するためのボタンである（このボタンを押下すると、図示しない下書き中一覧画面へ遷移させることができる）。
ここでは、ボタン１４２１１を押下して、図１４（Ｂ）の写真撮影画面１４３０へ遷移する。

図１４（Ｂ）の写真撮影画面１４３０では、出品商品（時計）の出品画像を撮影するための画面であるが、一実施形態において、この画面に遷移する前の通常カメラアプリを介して映し出された画像の物体認識処理が開始されており、出品商品のカテゴリが時計であると判定されると、画面１４３０のような時計出品専用画面が立ち上がる。

本発明の一実施形態においては、画面１４３０へ遷移してからも継続して時計のブランド等を特定するための特定物体認識処理を継続させ、特定ブランド（たとえば、ロレックスやオメガ等）や特定型番が判明した時点で同画面中に判定結果を表示させてもよい。
次に、同図（Ｂ）の写真撮影画面１４３０から同図（Ｃ）の写真撮影画面（腕時計専用）１４４０へ遷移する。

図１４（Ｃ）の写真撮影画面（腕時計専用）１４４０では、時計を出品するための独自のアドバイスメッセージ１４４１及び独自のガイド画像１４４２が表示される。まず、メッセージ１４４１には、「正面から撮影しましょう」との表示がなされ、ガイド画像１４４２が表示されている。カメラによって同画面１４４０中に映し出されている時計（出品商品）は、やや距離をおいて斜めの角度から撮影されているため、ユーザに対して、ガイド画像１４４２に重なるように、もっと出品商品に近づき正面からのカットを撮影することを促すように作用する。
図１４には図示されていないが、同様の方法で、商品の横からの画像等、出品に際して望ましい向きと大きさの画像が撮影されるようにガイドを進行させることができる。
なお、図１４は、図９同様に写真撮影前に誘導が行われる例である。

図１５（Ａ）には、自動車の出品を始める際の開始画面１５１０が表示されている。本発明の一実施形態においては、この画面１５１０へ遷移してくる前に、カメラによって撮影された画像に対する物体認識（カテゴリ判定）処理により、出品しようとしている物品は自動車であることが、本発明の一実施形態にかかる出品支援システム等に認識されているものとする。以降、図１５（Ａ）から同図（Ｇ）までの画面遷移は、出品物が自動車であることを前提とした出品誘導となっている。

図１５（Ａ）の画面１５１０においては、これから出品しようとする自動車に関する情報入力を車検証に印刷されたＱＲコード（登録商標。以下同じ。）をスキャンすることによって進行させるか、手動入力によって進行させるかがメニュー表示されている（同画面中に、「車検証ＱＲスキャンで１０秒出品」ボタン１５１１と「手動でいれる」ボタンとが表示されているのが確認できる）。ここでは、ボタン１５１１が押下され、図１５（Ｂ）の画面１５２０へ遷移する。

図１５（Ｂ）の画面１５２０においては、画面上部に配置されたカメラ撮影画像と画面下部に配置されたガイドメッセージ及び処理進捗インジケータ１５２２が表示されている。一実施形態において、ユーザは、車検証に印刷されたＱＲコード１５２１が読み取れるようにカメラを近づけるなどすると、アプリによって必要なＱＲコードが順次読み込まれる（複数のＱＲコードを読み取る必要がある場合には、処理進捗インジケータ１５２２に処理の進捗を表示させることもできる）。
ＱＲコードの読み取りが完了すると、図１５（Ｃ）の画面１５３０へ遷移する。

図１５（Ｃ）の画面１５３０においては、商品情報入力画面が表示されている。ここでは、画面１５２０ですでに読み取られた情報に基づいて入力可能な事項は自動入力済みとなっている。なお、一実施形態において、図１５（Ｃ）の画面１５３０から図１５（Ｆ）の画面１５６０までは、スクロール閲覧可能な一連の画面であり、これらの画面を介して入力すべき商品情報やすでに自動入力済の情報を確認することができる。

画面１５３０から画面１５６０にかけて、自動入力されなかった項目（未入力欄）は、走行距離欄１５４１、集履歴欄１５４２、商品の利用状況欄１５４３、商品の状態欄１５５１、発送元地域欄１５５２である。これらの入力欄には、いずれも「未入力です」とのコメント、あるいは、「未設定です」とのコメントが付されているのが確認できる。

本発明の一実施形態において、これらの未入力欄には、図示しない公知の手法で情報を入力させることができる。例えば、走行距離については、走行距離欄１５４１をタップして図示しないセレクトボックスを表示させ（一実施形態において、図示されないこのセレクトボックスには、「０～１０００Ｋｍ」、「１０００～３０００ｋｍ」、「３０００～１００００ｋｍ」、「１００００～３００００ｋｍ」、「３００００～５００００ｋｍ」、「５００００ｋｍ以上」といった距離範囲が表示される）、ユーザが適切な距離範囲を選択して入力するなどである。
これらの未入力欄に対する必要な入力が完了すると、ユーザは、図１５（Ｆ）の画面１５６０へスクロールさせる。

図１５（Ｆ）の画面１５６０においては、必要な商品情報入力が完了した本商品について、ただちに出品するか、下書きに保存するかが選択できるように構成されている（同画面には、出品するための「出品する」ボタン１５６１、及び下書き保存するための「下書きに保存」ボタンが表示されている）。
ここでは、ボタン１５６１が押下されて、図１５（Ｇ）の画面１５７０へ遷移する。

図１５（Ｇ）の画面１５７０においては、出品が完了したことを通知するメッセージを含む出品完了画面が表示されている。

２０ 出品支援システム
２１ 情報処理サーバ（群）
２２ａ～２２ｂ 利用者端末（ＰＣなど）
２３ａ～２３ｅ 利用者端末（スマートフォン、タブレットなど）

Claims (8)

1. 複数の利用者端末からアクセス可能に構成されたサーバによって運営される物品売買仲介サービスを提供するシステムにおける前記利用者端末上で実行されるプログラムであって、前記利用者端末上で実行されたとき、
   前記利用者端末に、
   前記利用者端末が撮影する画像中の物品を認識させるステップと、
   前記認識によって前記物品のカテゴリを抽出させるステップと、
   前記抽出されたカテゴリが、前記物品に付されたコード情報による物品特定が可能なカテゴリであると判断される場合に、前記物品を売買仲介の出品物として取り扱うための前記物品の出品手続きであって、前記物品に付されたコード情報をスキャン入力させるための出品手続きに切り替えさせるステップと
   を実行することを特徴とするプログラム。
2. 前記ステップのうち少なくとも一部は、前記サーバ上で実行されることを特徴とする請求項１に記載のプログラム。
3. 前記物品に付されたコード情報をスキャン入力させるための出品手続きにおいて、前記コード情報から取得する前記利用者が入力すべき前記物品に関する情報が前記利用者端末に表示されることを特徴とする請求項１または２に記載のプログラム。
4. 前記物品を認識させるステップは、前記撮影が開始されるとともに実行される
   ことを特徴とする請求項１～３のいずれか１項に記載のプログラム。
5. 前記物品を認識させるステップは、認識結果に関する情報をキューに保存させることを含み、
   前記物品を売買仲介の出品物として取り扱うための出品手続きは、前記キューに保存された情報及び前記抽出されたカテゴリに基づき開始される
   ことを特徴とする請求項１～４のいずれか１項に記載のプログラム。
6. 出品手続き開始のトリガは、前記出品物の撮影画像が保存されたことである
   ことを特徴とする請求項１～５のいずれか１項に記載のプログラム。
7. 複数の利用者端末からアクセス可能に構成されたサーバによって運営される物品売買仲介サービスを提供するシステム上で実行される方法であって、
   前記サーバ及び／または前記利用者端末に、
   前記利用者端末が撮影する画像中の物品を認識させるステップと、
   前記認識によって前記物品のカテゴリを抽出させるステップと、
   前記抽出されたカテゴリが、前記物品に付されたコード情報による物品特定が可能なカテゴリであると判断される場合に、前記物品を売買仲介の出品物として取り扱うための前記物品の出品手続きであって、前記物品に付されたコード情報をスキャン入力させるための出品手続きに切り替えさせるステップと
   を実行することを特徴とする方法。
8. 複数の利用者端末からアクセス可能に構成されたサーバによって運営される物品売買仲介サービスを提供するシステムであって、
   前記サーバ及び／または前記利用者端末は、
   前記利用者端末が撮影する画像中の物品を認識し、
   前記認識によって前記物品のカテゴリを抽出し、
   前記抽出されたカテゴリが、前記物品に付されたコード情報による物品特定が可能なカテゴリであると判断される場合に、前記物品を売買仲介の出品物として取り扱うための前記物品の出品手続きであって、前記物品に付されたコード情報をスキャン入力させるための出品手続きに切り替えることを特徴とするシステム。