JP7388439B2

JP7388439B2 - 登録システム、処理装置、処理方法及びプログラム

Info

Publication number: JP7388439B2
Application number: JP2021540604A
Authority: JP
Inventors: 貴美佐藤; 浩太岩元; 壮馬白石
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 2019-08-22
Filing date: 2019-08-22
Publication date: 2023-11-29
Anticipated expiration: 2039-08-22
Also published as: JPWO2021033309A1; WO2021033309A1; US20220309714A1

Description

本発明は、登録システム、処理装置、処理方法及びプログラムに関する。

特許文献１乃至３は、会計対象の商品を撮影した画像と予め登録された各商品の参照画像とに基づき会計対象の商品を認識・登録する技術において、複数のカメラで複数の向きから会計対象の商品を撮影する技術を開示している。

特許文献４は、会計対象の商品を撮影した画像と予め登録された各商品の参照画像とに基づき会計対象の商品を認識・登録する技術において、鏡を利用して会計対象の商品の複数の外面を撮影する技術を開示している。

特許文献５は、カメラが生成した画像と、バーコードリーダで読み取られた商品識別情報とを紐付ける技術を開示している。

特開２０１７－２２０１９８号公報特開２０１７－６２７０３号公報特開２０１６－１１０５３７号公報国際公開第２０１５／１４０８５５号特開２００４－３０４０９号公報

会計対象の商品を撮影した画像と予め登録された各商品の参照画像とに基づき会計対象の商品を認識・登録する技術において、精度よく商品を認識するためには、各商品を複数の向きから撮影した複数の参照画像を登録しておく必要がある。このような複数の参照画像を生成する手段として、例えば、手作業で商品の向きを変えながら撮影する手段が考えられるが、非常に手間である。特許文献１乃至５はいずれも、参照画像を生成する場面における当該課題を開示していない。

本発明の課題は、商品を複数の向きから撮影した複数の参照画像を効率的に生成する技術を実現することである。

本発明によれば、
表裏を貫通する穴を有する板状の部材である載置部材と、
前記載置部材に載置された商品を前記載置部材の表面側から撮影する第１のカメラと、
前記載置部材に載置された前記商品を前記載置部材の裏面側から撮影する第２のカメラと、
前記第１のカメラが前記商品を撮影した第１の画像と、前記第２のカメラが前記商品を撮影した第２の画像とを、同一の商品識別情報に紐付けて登録する処理装置と、
を有する登録システムが提供される。

また、本発明によれば、
表裏を貫通する穴を有する板状の部材である載置部材に載置された商品を前記載置部材の表面側から撮影した第１の画像と、前記載置部材に載置された前記商品を前記載置部材の裏面側から撮影した第２の画像と、を同一の商品識別情報に紐付けて登録する処理装置が提供される。

また、本発明によれば、
コンピュータが、
表裏を貫通する穴を有する板状の部材である載置部材に載置された商品を前記載置部材の表面側から撮影した第１の画像と、前記載置部材に載置された前記商品を前記載置部材の裏面側から撮影した第２の画像と、を同一の商品識別情報に紐付けて登録する処理方法が提供される。

また、本発明によれば、
コンピュータに、
表裏を貫通する穴を有する板状の部材である載置部材に載置された商品を前記載置部材の表面側から撮影した第１の画像と、前記載置部材に載置された前記商品を前記載置部材の裏面側から撮影した第２の画像と、を同一の商品識別情報に紐付けて登録する処理を実行させるプログラムが提供される。

本発明によれば、商品を複数の向きから撮影した複数の参照画像を効率的に生成する技術が実現される。

上述した目的、および、その他の目的、特徴および利点は、以下に述べる好適な実施の形態、および、それに付随する以下の図面によって、さらに明らかになる。

本実施形態の登録システムの全体像の一例を示す図である。本実施形態の載置部材の一例を示す図である。本実施形態の載置部材の一例を示す図である。本実施形態の処理装置の機能ブロック図の一例である。本実施形態の処理装置のハードウエア構成の一例を示す図である。本実施形態の処理装置が処理する情報の一例を模式的に示す図である。本実施形態の処理装置の処理の流れの一例を示すフローチャートである。本実施形態の処理装置の処理の流れの一例を示すフローチャートである。本実施形態の登録システムの全体像の一例を示す図である。

＜第１の実施形態＞
まず、本実施形態の登録システムの概要を説明する。本実施形態の登録システムは、載置部材と、第１のカメラと、第２のカメラと、処理装置とを有する。載置部材は、表裏を貫通する穴を有する板状の部材である。穴は、載置部材に載置された商品の特徴的な部分（商品認識に寄与する部分）を穴越しに観察できる形状及び大きさとなっている。第１のカメラは、載置部材に載置された商品を載置部材の表面側から撮影する。第１のカメラが生成した画像には、商品の第１の部分が含まれる。第２のカメラは、載置部材に載置された商品を載置部材の裏面側から撮影する。第２のカメラが生成した画像には、商品の第２の部分が含まれる。そして、処理装置は、第１のカメラが第１の商品を撮影した第１の画像と、第２のカメラが第１の商品を撮影した第２の画像とを、同一の商品識別情報に紐付けて登録する。

このような本実施形態の登録システムによれば、各商品を複数の向きから撮影した複数の参照画像を効率的に生成することができる。

以下、登録システムの構成を詳細に説明する。図１に、本実施形態の登録システムの概念図を示す。なお、図示する例はあくまで一例であり、当該構成に限定されない。

図示するように、登録システム１は、処理装置１０と、第１のカメラ２０と、第２のカメラ３０と、載置部材４０とを有する。登録システム１は、さらに載置台５０を有してもよい。

載置部材４０は、表裏を貫通する穴を有する板状の部材である。載置部材４０は、載置台５０に設置される。

表裏を貫通する穴は、穴に重なるように載置部材４０に載置された商品６０の特徴的な部分（商品認識に寄与する部分）を穴越しに載置部材４０の裏面側から観察できる形状及び大きさとなる。なお、穴が大きすぎると商品６０が穴から落ちてしまうので、それを防止する形状及び大きさとする必要がある。図２及び図３に穴４１を有する載置部材４０の一例を模式的に示す。なお、載置部材４０は図２に示すように１つの穴４１を有してもよし、図３に示すように複数の穴４１を有してもよい。

また、登録システム１は、図２及び図３に示すような穴４１の形状、穴４１の大きさ及び穴４１の数の少なくとも１つが互いに異なる複数の載置部材４０を有してもよい。そして、複数の載置部材４０は取り替え可能に載置台５０に設置されてもよい。複数の載置部材４０が備える複数の穴４１は、複数種類の商品６０各々に適した形状及び大きさとなっている。各商品６０に適した穴４１の形状及び大きさは、穴４１に重なるように載置部材４０に載置された各商品６０の特徴的な部分（商品認識に寄与する部分）を穴４１越しに載置部材４０の裏面側から観察でき、かつ、各商品６０が穴４１から落ちてしまうのを防止できる形状及び大きさである。

図１に戻り、第１のカメラ２０は、載置部材４０に載置された商品６０を載置部材４０の表面側から撮影する。図では１台の第１のカメラ２０が示されているが、載置部材４０の表面側から撮影する第１のカメラ２０は、１台であってもよいし、複数台であってもよい。第１のカメラ２０は、載置部材４０に載置された商品６０を真上から撮影する位置及び向きで設置されてもよいし、同商品６０を斜め上方から撮影する位置及び向きで設置されてもよいし、同商品６０を真横から撮影する位置及び向きで設置されてもよい。第１のカメラ２０は動画像を撮影し、複数のフレーム画像を生成してもよい。その他、第１のカメラ２０は、所定の撮影タイミングで１又は複数の静止画像を生成してもよい。第１のカメラ２０が生成した第１の画像は処理装置１０に入力される。

第２のカメラ３０は、載置部材４０に載置された商品６０を載置部材４０の裏面側から撮影する。図では１台の第２のカメラ３０が示されているが、載置部材４０の裏面側から撮影する第２のカメラ３０は、１台であってもよいし、複数台であってもよい。第２のカメラ３０は、載置部材４０に載置された商品６０を真下から撮影する位置及び向きで設置されてもよいし、同商品６０を斜め下方から撮影する位置及び向きで設置されてもよい。第２のカメラ３０は動画像を撮影し、複数のフレーム画像を生成してもよい。その他、第２のカメラ３０は、所定の撮影タイミングで１又は複数の静止画像を生成してもよい。第２のカメラ３０が生成した第２の画像は処理装置１０に入力される。

処理装置１０は、第１のカメラ２０が第１の商品６０を撮影した第１の画像と、第２のカメラ３０が第１の商品６０を撮影した第２の画像とを、同一の商品識別情報（第１の商品６０の商品識別情報）に紐付けて登録する。「第１のカメラ２０が第１の商品６０を撮影した第１の画像」は、第１のカメラ２０が第１の商品６０を撮影することで生成された画像である。「第２のカメラ３０が第１の商品６０を撮影した第２の画像」は、第２のカメラ３０が第１の商品６０を撮影することで生成された画像である。処理装置１０は、当該機能を実現するための複数の機能部を備える。

図４に、処理装置１０の機能ブロック図の一例を示す。図示するように、処理装置１０は、取得部１１と、コード抽出部１２と、特定部１３と、登録部１４と、記憶部１５とを有する。なお、処理装置１０は、記憶部１５を有さなくてもよい。この場合、処理装置１０と通信可能に構成された外部装置が記憶部１５を備える。

処理装置１０の各機能部は、任意のコンピュータのＣＰＵ（Central Processing Unit）、メモリ、メモリにロードされるプログラム、そのプログラムを格納するハードディスク等の記憶ユニット（あらかじめ装置を出荷する段階から格納されているプログラムのほか、ＣＤ（Compact Disc）等の記憶媒体やインターネット上のサーバ等からダウンロードされたプログラムをも格納できる）、ネットワーク接続用インターフェイスを中心にハードウエアとソフトウエアの任意の組合せによって実現される。そして、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。

図５は、処理装置１０のハードウエア構成を例示するブロック図である。図５に示すように、処理装置１０は、プロセッサ１Ａ、メモリ２Ａ、入出力インターフェイス３Ａ、周辺回路４Ａ、バス５Ａを有する。周辺回路４Ａには、様々なモジュールが含まれる。処理装置１０は周辺回路４Ａを有さなくてもよい。なお、処理装置１０は物理的及び／又は論理的に分かれた複数の装置で構成されてもよいし、物理的及び／又は論理的に一体となった１つの装置で構成されてもよい。処理装置１０が物理的及び／又は論理的に分かれた複数の装置で構成される場合、複数の装置各々が上記ハードウエア構成を備えることができる。

バス５Ａは、プロセッサ１Ａ、メモリ２Ａ、周辺回路４Ａ及び入出力インターフェイス３Ａが相互にデータを送受信するためのデータ伝送路である。プロセッサ１Ａは、例えばＣＰＵ、ＧＰＵ（Graphics Processing Unit）などの演算処理装置である。メモリ２Ａは、例えばＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）などのメモリである。入出力インターフェイス３Ａは、入力装置、外部装置、外部サーバ、外部センサー、カメラ等から情報を取得するためのインターフェイスや、出力装置、外部装置、外部サーバ等に情報を出力するためのインターフェイスなどを含む。入力装置は、例えばキーボード、マウス、マイク、物理ボタン、タッチパネル等である。出力装置は、例えばディスプレイ、スピーカ、プリンター、メーラ等である。プロセッサ１Ａは、各モジュールに指令を出し、それらの演算結果をもとに演算を行うことができる。

図４に戻り、取得部１１は、第１のカメラ２０が商品６０を撮影した第１の画像、及び、第２のカメラ３０が商品６０を撮影した第２の画像を取得する。

例えば、第１のカメラ２０及び第２のカメラ３０と、処理装置１０とは有線及び／又は無線で通信可能に構成されてもよい。そして、取得部１１は、第１のカメラ２０及び第２のカメラ３０から第１の画像及び第２の画像を取得してもよい。

その他、取得部１１は、処理装置１０が有する入力装置を介したユーザ操作に応じて所定の記憶装置にアクセスし、当該記憶装置が記憶している第１の画像及び第２の画像を取得してもよい。所定の記憶装置は処理装置１０が備えてもよいし、処理装置１０と通信可能に構成された外部装置が備えてもよい。

なお、取得部１１は、取得した第１の画像及び第２の画像を編集してもよい。編集内容は、画像内の商品領域を切り出す処理等である。画像内に複数の商品６０が含まれる場合、商品６０毎に商品領域を切り出すことができる。商品領域の検出は、パターンマッチング等のあらゆる画像解析手段を利用して実現できる。

ここで、本明細書において、「取得」とは、ユーザ入力に基づき、又は、プログラムの指示に基づき、「自装置が他の装置や記憶媒体に格納されているデータを取りに行くこと（能動的な取得）」、たとえば、他の装置にリクエストまたは問い合わせして受信すること、他の装置や記憶媒体にアクセスして読み出すこと等を含んでもよい。また、「取得」とは、ユーザ入力に基づき、又は、プログラムの指示に基づき、「自装置に他の装置から出力されるデータを入力すること（受動的な取得）」、たとえば、配信（または、送信、プッシュ通知等）されるデータを受信すること等を含んでもよい。また、「取得」とは、受信したデータまたは情報の中から選択して取得すること、及び、「データを編集（テキスト化、データの並び替え、一部データの抽出、ファイル形式の変更等）などして新たなデータを生成し、当該新たなデータを取得すること」を含んでもよい。

コード抽出部１２は、第１の画像又は第２の画像から商品識別情報を示すコード（バーコード、２次元コード等）を抽出する。例えば、コード抽出部１２は、パターンマッチング等の手法を用いて、画像内に存在するコードを抽出することができる。コードを抽出する処理の対象となる第１の画像及び第２の画像は、取得部１１による上記編集が行われた後の第１の画像及び第２の画像であってもよいし、取得部１１による上記編集が行われていない第１の画像及び第２の画像であってもよい。編集後の第１の画像及び第２の画像を処理対象とする場合、パターンマッチング等でコードを検索する処理の対象領域が限定されるので、コンピュータの処理負担が軽減される。

特定部１３は、コード抽出部１２により抽出されたコードを解析し、当該コードが示す商品識別情報を特定する。

登録部１４は、特定部１３により特定された商品識別情報に、第１の画像及び第２の画像を紐付けて、記憶部１５に記憶させる。記憶部１５に記憶させる第１の画像及び第２の画像は、取得部１１による上記編集が行われた後の第１の画像及び第２の画像であってもよいし、取得部１１による上記編集が行われていない第１の画像及び第２の画像であってもよい。

図６に、記憶部１５が記憶する情報の一例を模式的に示す。図示する例では、商品識別情報と、第１の画像及び第２の画像を識別する画像識別情報（例：画像ファイル名）とが互いに紐付けられている。

次に、図７及び図８のフローチャートを用いて、処理装置１０の処理の流れの一例を説明する。

まず、オペレータは、例えば図１に示すように載置部材４０の上に撮影対象の第１の商品６０を載置する。そして、オペレータは、処理装置１０の入力装置を介して撮影開始入力を行う。すると、処理装置１０から第１のカメラ２０及び第２のカメラ３０に対して撮影指示が送信される。第１のカメラ２０及び第２のカメラ３０は、当該撮影指示に応じて第１の商品６０を撮影する。そして、第１のカメラ２０及び第２のカメラ３０は当該撮影により生成した第１の画像及び第２の画像を処理装置１０に送信する。

処理装置１０の取得部１１は、上記撮影指示に応じて第１のカメラ２０及び第２のカメラ３０から送信されてきた第１の画像及び第２の画像を取得すると（Ｓ１０）、それらをグループ化して記憶部１５に記憶させる。なお、取得部１１は、第１の画像及び第２の画像に対し、画像内の商品領域を切り出す編集を行い、編集後の第１の画像及び第２の画像（切り出された部分のみを含む画像）を記憶部１５に記憶させてもよい。

次いで、処理装置１０は、第１の商品６０の商品識別情報を取得する（Ｓ２０）。具体的には、図８のフローチャートに示すように、まず、コード抽出部１２は、パターンマッチング等の手法を用いて、記憶部１５に記憶されている第１の画像及び第２の画像からコードを抽出する（Ｓ２１）。次いで、特定部１３は、抽出されたコードを解析し、そのコードが示す商品識別情報を特定する（Ｓ２２）。

なお、Ｓ１０で取得され、グループ化された第１の画像及び第２の画像の中の少なくとも１つの画像の中からコードが抽出され、商品識別情報が特定されればよく、全ての第１の画像及び第２の画像に対してコード抽出及びコード解析を行う必要はない。

図７に戻り、Ｓ２０の後、登録部１４は、Ｓ２０で取得された商品識別情報に、Ｓ１０で取得され、グループ化された第１の画像及び第２の画像を紐付けて、記憶部１５に記憶させる（Ｓ３０）。

ここで、変形例を説明する。処理装置１０は、図７のＳ２０の商品識別情報を取得する処理において、図８のフローで示す処理と異なる処理を行ってもよい。例えば、Ｓ２０では、オペレータが、撮影対象の第１の商品６０に付されたコードをコードリーダに読み取らせる操作を行ってもよい。そして、処理装置１０は、コードリーダで読み取った商品識別情報を取得してもよい。その他、オペレータは、処理装置１０の入力装置（キーボード、マウス、タッチパネルディスプレイ等）を介して、撮影対象の第１の商品６０の商品識別情報を入力してもよい。そして、処理装置１０は、入力装置を介して入力された商品識別情報を取得してもよい。

以上、説明した本実施形態の登録システム１は、表裏を貫通する穴４１を有する板状の部材である載置部材４０を有し、当該載置部材４０に載置された商品６０を、載置部材４０の表面側及び裏面側の両方から撮影することができる。このような本実施形態の登録システム１によれば、各商品６０を複数の向きから撮影した複数の参照画像を効率的に生成することができる。

また、表裏を貫通する穴４１を有する板状の部材である載置部材４０を利用して穴４１越しに商品６０を撮影する本実施形態の場合、例えば、透明な板状の部材越しに商品６０を撮影する場合と異なり、その部材での光の反射を考慮する必要がない。このため、比較的容易に鮮明に商品６０を撮影することができる。

ところで、表裏を貫通する穴４１を有する板状の部材で載置部材４０を構成する場合、穴４１の形状及び大きさを最適化しないと、「商品６０の特徴的な部分（商品認識に寄与する部分）が穴４１越しに観察できない」、「商品６０が穴４１から落ちてしまう」等の問題が発生し得る。この問題に対し、本実施形態では、穴４１の形状、穴４１の大きさ及び穴４１の数の少なくとも１つが互いに異なる複数の載置部材４０を用意し、複数の載置部材４０を取り替え可能に載置台５０に設置して利用することができる。このため、各商品６０の撮影時に各商品６０に最適な穴４１を有する載置部材４０を利用できる。結果、上記問題を解消できる。

＜第２の実施形態＞
本実施形態の登録システム１は、「表裏を貫通する穴４１を有する板状の部材である載置部材４０」に代えて、「光を透過する板状の部材である載置部材４０」を採用する点で、第１の実施形態と異なる。

光を透過する部材で構成された板状の部材は、載置部材４０越しに商品６０を鮮明に撮影する観点から、透明な部材であることが好ましい。例えば、載置部材４０は、透明なプラスチック板（例：アクリル透明板）であってもよいし、透明なガラス板であってもよいし、その他であってもよい。

登録システム１のその他の構成は、第１の実施形態と同様である。

このような本実施形態の登録システム１によれば、第１の実施形態と同様の作用効果が実現される。また、第１の実施形態のように「表裏を貫通する穴４１を有する板状の部材である載置部材４０」を採用する場合、商品６０毎に適した載置部材４０を利用する必要がある。これに対し、本実施形態のように「光を透過する板状の部材である載置部材４０」」を採用する場合、１つの載置部材４０を複数の商品６０の撮影時に利用することができる。このように、汎用性の高い載置部材４０を採用することで、載置部材４０を商品毎に取り換える等の面倒な作業を回避できる。

＜第３の実施形態＞
本実施形態の登録システム１は、鏡を利用して商品６０を複数の向きから撮影した複数の参照画像を効率的に生成する。以下、詳細に説明する。

図９に示すように、載置部材４０の表面側から商品６０を撮影する第１のカメラ２０の少なくとも一部は、載置部材４０に載置された商品６０で反射した光を鏡８０で反射後に受光し、画像を生成する。また、第１のカメラ２０の少なくとも一部は、載置部材４０に載置された商品６０の第１の部分で反射した光を鏡８０で反射後に受光するとともに、その商品６０の第２の部分で反射した光を鏡８０の反射を介さずに受光し、ある商品６０の第１の部分及び第２の部分の両方を示す１つの画像を生成する。商品６０、鏡８０及び第１のカメラ２０は、このような撮影が可能な位置関係及び向きとなっている。

このような第１のカメラ２０によれば、鏡８０に映っている商品６０を撮影することができる。また、このような第１のカメラ２０によれば、例えば表裏の関係になっており、同時に撮影することが困難な商品６０の第１の部分及び第２の部分を、鏡８０を利用して同時に撮影することができる。

処理装置１０、載置部材４０及び載置台５０の構成は、第１又は第２の実施形態と同様である。

なお、図９では省略しているが、登録システム１は、第２のカメラ３０を備えることができる。第２のカメラ３０の構成は、第１又は第２の実施形態と同様である。

また、図９では省略しているが、登録システム１は、鏡８０を利用せずに商品６０を撮影する第１のカメラ２０を備えることができる。このような第１のカメラ２０の構成は、第１又は第２の実施形態と同様である。

以上、説明した本実施形態の登録システム１によれば、第１又は第２の実施形態と同様の作用効果が実現される。また、鏡８０を利用して商品６０を撮影することで、商品６０を複数の向きから撮影した複数の参照画像をより効率的に生成することが可能となる。

以上、実施形態（及び実施例）を参照して本願発明を説明したが、本願発明は上記実施形態（及び実施例）に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限定されない。
１．光を透過する板状の部材、又は、表裏を貫通する穴を有する板状の部材である載置部材と、
前記載置部材に載置された商品を前記載置部材の表面側から撮影する第１のカメラと、
前記載置部材に載置された前記商品を前記載置部材の裏面側から撮影する第２のカメラと、
前記第１のカメラが前記商品を撮影した第１の画像と、前記第２のカメラが前記商品を撮影した第２の画像とを、同一の商品識別情報に紐付けて登録する処理装置と、
を有する登録システム。
２．前記処理装置は、
前記第１の画像及び前記第２の画像を取得する取得手段と、
前記第１の画像又は前記第２の画像から前記商品識別情報を示すコードを抽出するコード抽出手段と、
抽出された前記コードが示す前記商品識別情報を特定する特定手段と、
特定された前記商品識別情報に、前記第１の画像及び前記第２の画像を紐付けて、記憶手段に記憶させる登録手段と、
を有する１に記載の登録システム。
３．前記穴の形状、前記穴の大きさ及び前記穴の数の少なくとも１つが互いに異なる複数の前記載置部材と、
複数の前記載置部材が取り替え可能に設置される載置台と、
を有する１又は２に記載の登録システム。
４．前記第１のカメラは、前記載置部材に載置された前記商品で反射した光を鏡で反射後に受光し、画像を生成する１から３のいずれかに記載の登録システム。
５．前記第１のカメラは、前記載置部材に載置された前記商品の第１の部分で反射した光を前記鏡で反射後に受光するとともに、前記載置部材に載置された前記商品の第２の部分で反射した光を前記鏡の反射を介さずに受光し、前記第１の部分及ぶ前記第２の部分を示す１つの画像を生成する４に記載の登録システム。
６．光を透過する板状の部材、又は、表裏を貫通する穴を有する板状の部材である載置部材に載置された商品を前記載置部材の表面側から撮影した第１の画像と、前記載置部材に載置された前記商品を前記載置部材の裏面側から撮影した第２の画像と、を同一の商品識別情報に紐付けて登録する処理装置。
７．前記第１の画像及び前記第２の画像を取得する取得手段と、
前記第１の画像又は前記第２の画像から前記商品識別情報を示すコードを抽出するコード抽出手段と、
抽出された前記コードが示す前記商品識別情報を特定する特定手段と、
特定された前記商品識別情報に、前記第１の画像及び前記第２の画像を紐付けて、記憶手段に記憶させる登録手段と、
を有する６に記載の処理装置。
８．コンピュータが、
光を透過する板状の部材、又は、表裏を貫通する穴を有する板状の部材である載置部材に載置された商品を前記載置部材の表面側から撮影した第１の画像と、前記載置部材に載置された前記商品を前記載置部材の裏面側から撮影した第２の画像と、を同一の商品識別情報に紐付けて登録する処理方法。
９．コンピュータに、
光を透過する板状の部材、又は、表裏を貫通する穴を有する板状の部材である載置部材に載置された商品を前記載置部材の表面側から撮影した第１の画像と、前記載置部材に載置された前記商品を前記載置部材の裏面側から撮影した第２の画像と、を同一の商品識別情報に紐付けて登録する処理を実行させるプログラム。

Claims

表裏を貫通する穴を有する板状の部材であり、前記穴の形状、前記穴の大きさ及び前記穴の数の少なくとも１つが互いに異なる複数の載置部材と、
複数の前記載置部材が取り替え可能に設置される載置台と、
前記載置部材に載置された商品を前記載置部材の表面側から撮影する第１のカメラと、
前記載置部材に載置された前記商品を前記載置部材の裏面側から撮影する第２のカメラと、
前記第１のカメラが前記商品を撮影した第１の画像と、前記第２のカメラが前記商品を撮影した第２の画像とを、同一の商品識別情報に紐付けて登録する処理装置と、
を有する登録システム。
前記処理装置は、
前記第１の画像及び前記第２の画像を取得する取得手段と、
前記第１の画像又は前記第２の画像から前記商品識別情報を示すコードを抽出するコード抽出手段と、
抽出された前記コードが示す前記商品識別情報を特定する特定手段と、
特定された前記商品識別情報に、前記第１の画像及び前記第２の画像を紐付けて、記憶手段に記憶させる登録手段と、
を有する請求項１に記載の登録システム。
前記第１のカメラは、前記載置部材に載置された前記商品で反射した光を鏡で反射後に受光し、画像を生成する請求項１又は２に記載の登録システム。
前記第１のカメラは、前記載置部材に載置された前記商品の第１の部分で反射した光を前記鏡で反射後に受光するとともに、前記載置部材に載置された前記商品の第２の部分で反射した光を前記鏡の反射を介さずに受光し、前記第１の部分及び前記第２の部分を示す１つの画像を生成する請求項３に記載の登録システム。
表裏を貫通する穴を有する板状の部材であり、前記穴の形状、前記穴の大きさ及び前記穴の数の少なくとも１つが互いに異なる複数の載置部材が取り換え可能に載置される載置台に載置された載置部材に載置された商品を前記載置部材の表面側から撮影した第１の画像と、前記載置部材に載置された前記商品を前記載置部材の裏面側から撮影した第２の画像と、を同一の商品識別情報に紐付けて登録する処理装置。
前記第１の画像及び前記第２の画像を取得する取得手段と、
前記第１の画像又は前記第２の画像から前記商品識別情報を示すコードを抽出するコード抽出手段と、
抽出された前記コードが示す前記商品識別情報を特定する特定手段と、
特定された前記商品識別情報に、前記第１の画像及び前記第２の画像を紐付けて、記憶手段に記憶させる登録手段と、
を有する請求項５に記載の処理装置。
コンピュータが、
表裏を貫通する穴を有する板状の部材であり、前記穴の形状、前記穴の大きさ及び前記穴の数の少なくとも１つが互いに異なる複数の載置部材が取り換え可能に載置される載置台に載置された載置部材に載置された商品を前記載置部材の表面側から撮影した第１の画像と、前記載置部材に載置された前記商品を前記載置部材の裏面側から撮影した第２の画像と、を同一の商品識別情報に紐付けて登録する処理方法。
コンピュータに、
表裏を貫通する穴を有する板状の部材であり、前記穴の形状、前記穴の大きさ及び前記穴の数の少なくとも１つが互いに異なる複数の載置部材が取り換え可能に載置される載置台に載置された載置部材に載置された商品を前記載置部材の表面側から撮影した第１の画像と、前記載置部材に載置された前記商品を前記載置部材の裏面側から撮影した第２の画像と、を同一の商品識別情報に紐付けて登録する処理を実行させるプログラム。