JP7477438B2 - 情報処理装置、情報処理方法及び情報処理システム - Google Patents
情報処理装置、情報処理方法及び情報処理システム Download PDFInfo
- Publication number
- JP7477438B2 JP7477438B2 JP2020206104A JP2020206104A JP7477438B2 JP 7477438 B2 JP7477438 B2 JP 7477438B2 JP 2020206104 A JP2020206104 A JP 2020206104A JP 2020206104 A JP2020206104 A JP 2020206104A JP 7477438 B2 JP7477438 B2 JP 7477438B2
- Authority
- JP
- Japan
- Prior art keywords
- product
- image data
- store
- information terminal
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 89
- 238000003672 processing method Methods 0.000 title claims description 5
- 230000005540 biological transmission Effects 0.000 claims description 78
- 238000012545 processing Methods 0.000 description 65
- 238000010586 diagram Methods 0.000 description 27
- 238000007726 management method Methods 0.000 description 20
- 238000004891 communication Methods 0.000 description 15
- 238000000034 method Methods 0.000 description 14
- 230000008569 process Effects 0.000 description 13
- 230000008859 change Effects 0.000 description 9
- 241000209094 Oryza Species 0.000 description 6
- 235000007164 Oryza sativa Nutrition 0.000 description 6
- 235000009566 rice Nutrition 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 235000021156 lunch Nutrition 0.000 description 4
- 238000011112 process operation Methods 0.000 description 3
- 240000006829 Ficus sundaica Species 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 235000008446 instant noodles Nutrition 0.000 description 2
- 235000013361 beverage Nutrition 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 235000011890 sandwich Nutrition 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000032258 transport Effects 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
前記画像送信部は、前記商品棚における同一の位置に対応する前記複数の店舗商品画像データのうち、商品を示す領域の輝度が最も高い店舗商品画像データを前記選択商品画像データとして選択してもよい。
前記画像送信部は、前記複数の位置のうち、前記店舗商品画像データが関連付けられていない位置を所定の態様にした前記表示用画像を送信してもよい。
図1は、本実施の形態に係る情報処理システムSの構成を示す図である。情報処理システムSは、店舗Mから離れた場所にいるユーザUが、店舗Mで販売される商品を購入することを可能にするためのシステムである。情報処理システムSは、情報処理装置1と、情報端末2と、を備える。情報処理装置1は、例えばコンピュータ又はサーバであり、情報端末2は、例えばスマートフォン、タブレット又はコンピュータである。情報処理装置1及び情報端末2はネットワークNに接続されており、ネットワークNを介して互いにデータを送受信することができる。ネットワークNは、例えばインターネット及び携帯電話網を含む。
以下、情報処理装置1及び情報端末2の構成及び動作について詳細に説明する。
図3は、情報処理装置1及び情報端末2の構成を示す図である。情報処理装置1は、通信部11と、記憶部12と、制御部13と、を有する。制御部13は、画像取得部131と、画像送信部132と、情報取得部133と、購入処理部134と、を有する。情報処理装置1の各部の詳細については後述する。
操作部23は、ユーザUの操作を受け付けるためのデバイスである。操作部23は、例えば表示部22に重ねて設けられたタッチパネルである。
以上の説明においては、店舗Mに設置された1台のカメラCが1つの方向で撮影することにより撮像画像データが生成される場合を例示した。ところが、店舗Mで販売される商品にはいろいろな種類があり、1つの方向で複数の商品を撮影した場合、商品の内容を識別しやすい画像が生成される商品もあれば、商品の内容を識別しやすい画像が生成されない商品もある。
以上のとおり、情報処理装置1は、商品棚における複数の登録位置と、複数の登録位置それぞれに置かれた商品の商品IDとが関連付けられた商品棚データベース122を参照することにより、店舗Mの商品棚Tの撮像画像データを表示する情報端末2においてユーザUが操作を行った位置に基づいて、操作された位置に対応する商品を特定する。店舗においては、商品の位置が変更になる場合がある。商品の位置が変更になったにもかかわらず、商品棚データベース122に登録されているデータが更新されていないと、情報処理装置1は、ユーザUが操作を行った位置に対応する商品を誤って特定してしまう。そこで、情報処理装置1は、商品の位置が変更されたことを検出し、商品の位置が変更されたにもかかわらず、商品棚データベース122のデータが更新されていない場合に、警告を出力したり、商品棚データベース122のデータを更新したりしてもよい。
以上説明したように、情報処理装置1は、店舗Mで撮影されることにより作成された撮像画像データを含む購入処理用画面を情報端末2に送信し、情報端末2から、購入処理用画面において所定の操作が行われた位置を示す操作位置情報を取得する。そして、購入処理部134は、操作位置情報が示す位置に対応する商品棚Tの位置(登録位置)を特定し、特定した位置に商品データベース121において関連付けられた商品IDに対応する商品をユーザUが購入するための購入処理を実行する。情報処理装置1がこのように構成されていることで、ユーザUは、実際の店舗Mに行って買物をする場合に近い感覚で、情報端末2を用いて買物をできるようになる。
2 情報端末
11 通信部
12 記憶部
13 制御部
21 通信部
22 表示部
23 操作部
24 記憶部
25 制御部
121 商品データベース
122 商品棚データベース
131 画像取得部
132 画像送信部
133 情報取得部
134 購入処理部
135 画像作成部
136 位置特定部
137 位置管理部
Claims (12)
- 店舗の商品棚と、前記商品棚に置かれた商品とを複数の異なる位置から撮影することにより作成された複数の撮像画像データを取得する画像取得部と、
前記複数の撮像画像データそれぞれに含まれる複数の商品の画像を切り出すことにより、1つの商品に対応する複数の店舗商品画像データを作成する画像作成部と、
前記複数の店舗商品画像データから、前記複数の店舗商品画像データに対応する商品に適した選択商品画像データを選択し、選択した前記選択商品画像データを情報端末に送信する画像送信部と、
前記商品棚における位置と商品の属性とが関連付けられた商品棚データベースを記憶する記憶部と、
を有し、
前記画像送信部は、前記店舗商品画像データに対応する商品の前記商品棚における位置を特定し、前記商品棚データベースにおいて、特定した位置に関連付けられた商品の前記属性に基づいて前記選択商品画像データを選択する、
情報処理装置。 - 店舗の商品棚と、前記商品棚に置かれた商品とを複数の異なる位置から撮影することにより作成された複数の撮像画像データを取得する画像取得部と、
前記複数の撮像画像データそれぞれに含まれる複数の商品の画像を切り出すことにより、1つの商品に対応する複数の店舗商品画像データを作成する画像作成部と、
前記複数の店舗商品画像データから、前記複数の店舗商品画像データに対応する商品に適した選択商品画像データを選択し、選択した前記選択商品画像データを情報端末に送信する画像送信部と、
商品の属性と商品の画像とが関連付けられた商品データベースを記憶する記憶部と、
を有し、
前記画像送信部は、前記商品データベースにおいて前記店舗商品画像データに最も類似する画像に関連付けられた商品の前記属性に基づいて前記選択商品画像データを選択する、
情報処理装置。 - 店舗の商品棚と、前記商品棚に置かれた商品とを複数の異なる位置から撮影することにより作成された複数の撮像画像データを取得する画像取得部と、
前記複数の撮像画像データそれぞれに含まれる複数の商品の画像を切り出すことにより、1つの商品に対応する複数の店舗商品画像データを作成する画像作成部と、
前記複数の店舗商品画像データから、前記複数の店舗商品画像データに対応する商品に適した選択商品画像データを選択し、選択した前記選択商品画像データを情報端末に送信する画像送信部と、
を有し、
前記画像送信部は、前記商品棚における同一の位置に対応する前記複数の店舗商品画像データのうち、商品を示す領域の面積が最も大きい店舗商品画像データを前記選択商品画像データとして選択する、
情報処理装置。 - 店舗の商品棚と、前記商品棚に置かれた商品とを複数の異なる位置から撮影することにより作成された複数の撮像画像データを取得する画像取得部と、
前記複数の撮像画像データそれぞれに含まれる複数の商品の画像を切り出すことにより、1つの商品に対応する複数の店舗商品画像データを作成する画像作成部と、
前記複数の店舗商品画像データから、前記複数の店舗商品画像データに対応する商品に適した選択商品画像データを選択し、選択した前記選択商品画像データを情報端末に送信する画像送信部と、
を有し、
前記画像送信部は、前記商品棚における同一の位置に対応する前記複数の店舗商品画像データのうち、商品を示す領域の輝度が最も高い店舗商品画像データを前記選択商品画像データとして選択する、
情報処理装置。 - 店舗の商品棚と、前記商品棚に置かれた商品とを複数の異なる位置から撮影することにより作成された複数の撮像画像データを取得する画像取得部と、
前記複数の撮像画像データそれぞれに含まれる複数の商品の画像を切り出すことにより、1つの商品に対応する複数の店舗商品画像データを作成する画像作成部と、
前記複数の店舗商品画像データから、前記複数の店舗商品画像データに対応する商品に適した選択商品画像データを選択し、選択した前記選択商品画像データを情報端末に送信する画像送信部と、
前記情報端末に表示させる前記店舗商品画像データの大きさを示す操作情報を前記情報端末から取得する情報取得部と、
を有し、
前記画像送信部は、第1の大きさで前記店舗商品画像データを前記情報端末に表示させることを前記操作情報が示している場合には、同一の位置からの撮影により作成された1つの撮像画像データに含まれる複数の前記店舗商品画像データを前記情報端末に提供し、前記第1の大きさよりも大きい第2の大きさで前記店舗商品画像データを前記情報端末に表示させることを前記操作情報が示している場合には、前記選択商品画像データを前記情報端末に送信する、
情報処理装置。 - 店舗の商品棚と、前記商品棚に置かれた商品とを複数の異なる位置から撮影することにより作成された複数の撮像画像データを取得する画像取得部と、
前記複数の撮像画像データそれぞれに含まれる複数の商品の画像を切り出すことにより、1つの商品に対応する複数の店舗商品画像データを作成する画像作成部と、
前記複数の店舗商品画像データから、前記複数の店舗商品画像データに対応する商品に適した選択商品画像データを選択し、選択した前記選択商品画像データを情報端末に送信する画像送信部と、
を有し、
前記画像送信部は、前記商品棚における複数の位置に関連付けて複数の前記店舗商品画像データを含む表示用画像を送信する、
情報処理装置。 - 前記画像送信部は、前記複数の位置のうち、前記店舗商品画像データが関連付けられていない位置を所定の態様にした前記表示用画像を送信する、
請求項6に記載の情報処理装置。 - 店舗の商品棚と、前記商品棚に置かれた商品とを複数の異なる位置から撮影することにより作成された複数の撮像画像データを取得する画像取得部と、
前記複数の撮像画像データそれぞれに含まれる複数の商品の画像を切り出すことにより、1つの商品に対応する複数の店舗商品画像データを作成する画像作成部と、
前記複数の店舗商品画像データから、前記複数の店舗商品画像データに対応する商品に適した選択商品画像データを選択し、選択した前記選択商品画像データを情報端末に送信する画像送信部と、
を有し、
前記画像取得部は、前記商品棚の前方から前記商品を撮影することにより作成された前方撮像画像データと、前記商品棚の上方から前記商品を撮影することにより作成された上方撮像画像データとを、前記複数の撮像画像データとして取得する、
情報処理装置。 - 前記画像送信部は、商品の属性と商品の画像とが関連付けられた商品データベースを参照し、前記前方撮像画像データに商品の特徴が表れることを前記属性が示している場合に、前記前方撮像画像データを前記情報端末に提供し、前記上方撮像画像データに商品の特徴が表れることを前記属性が示している場合に、前記上方撮像画像データを前記情報端末に送信する、
請求項8に記載の情報処理装置。 - 店舗の商品棚と、前記商品棚に置かれた商品とを複数の異なる位置から撮影することにより作成された複数の撮像画像データを取得する画像取得部と、
前記複数の撮像画像データそれぞれに含まれる複数の商品の画像を切り出すことにより、1つの商品に対応する複数の店舗商品画像データを作成する画像作成部と、
前記複数の店舗商品画像データから、前記複数の店舗商品画像データに対応する商品に適した選択商品画像データを選択し、選択した前記選択商品画像データを情報端末に送信する画像送信部と、
を有し、
前記画像送信部は、前記選択商品画像データに関連付けて、前記選択商品画像データに対応する商品の名称を前記情報端末に送信する、
情報処理装置。 - コンピュータが実行する、
店舗の商品棚と、前記商品棚に置かれた商品とを複数の異なる位置から撮影することにより作成された複数の撮像画像データを取得するステップと、
前記複数の撮像画像データそれぞれに含まれる複数の商品の画像を切り出すことにより、1つの商品に対応する複数の店舗商品画像データを作成するステップと、
前記店舗商品画像データに対応する商品の前記商品棚における位置を特定し、前記商品棚における位置と商品の属性とが関連付けられた商品棚データベースにおいて、特定した位置に関連付けられた商品の前記属性に基づいて、前記複数の店舗商品画像データから、前記複数の店舗商品画像データに対応する商品に適した選択商品画像データを選択するステップと、
選択した前記選択商品画像データを情報端末に送信するステップと、
を有する情報処理方法。 - 情報端末と、前記情報端末に商品に関する情報を提供する情報処理装置と、を備え、
前記情報処理装置は、
店舗の商品棚と、前記商品棚に置かれた商品とを複数の異なる位置から撮影することにより作成された複数の撮像画像データを取得する画像取得部と、
前記複数の撮像画像データそれぞれに含まれる複数の商品の画像を切り出すことにより、1つの商品に対応する複数の店舗商品画像データを作成する画像作成部と、
前記複数の店舗商品画像データから、前記複数の店舗商品画像データに対応する商品に適した選択商品画像データを選択し、選択した前記選択商品画像データを前記情報端末に送信する画像送信部と、
前記商品棚における位置と商品の属性とが関連付けられた商品棚データベースを記憶する記憶部と、
を有し、
前記画像送信部は、前記店舗商品画像データに対応する商品の前記商品棚における位置を特定し、前記商品棚データベースにおいて、特定した位置に関連付けられた商品の前記属性に基づいて前記選択商品画像データを選択し、
前記情報端末は、前記選択商品画像データを表示する表示部を有する、
情報処理システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020206104A JP7477438B2 (ja) | 2020-12-11 | 2020-12-11 | 情報処理装置、情報処理方法及び情報処理システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020206104A JP7477438B2 (ja) | 2020-12-11 | 2020-12-11 | 情報処理装置、情報処理方法及び情報処理システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022093040A JP2022093040A (ja) | 2022-06-23 |
JP7477438B2 true JP7477438B2 (ja) | 2024-05-01 |
Family
ID=82069342
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020206104A Active JP7477438B2 (ja) | 2020-12-11 | 2020-12-11 | 情報処理装置、情報処理方法及び情報処理システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7477438B2 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005309786A (ja) | 2004-04-21 | 2005-11-04 | Stylink Kk | 情報処理システム及び情報処理方法 |
JP2006093972A (ja) | 2004-09-22 | 2006-04-06 | Tsukuba Multimedia:Kk | ライブカメラ画像自動取得商品データベース作成ウェブサーバシステム |
JP2018092455A (ja) | 2016-12-06 | 2018-06-14 | 株式会社野村総合研究所 | 店頭商品ecシステム |
JP2019200697A (ja) | 2018-05-18 | 2019-11-21 | 東芝テック株式会社 | 棚管理システムおよびプログラム |
WO2020195763A1 (ja) | 2019-03-22 | 2020-10-01 | 日本電気株式会社 | 情報処理装置、情報処理方法と記録媒体 |
-
2020
- 2020-12-11 JP JP2020206104A patent/JP7477438B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005309786A (ja) | 2004-04-21 | 2005-11-04 | Stylink Kk | 情報処理システム及び情報処理方法 |
JP2006093972A (ja) | 2004-09-22 | 2006-04-06 | Tsukuba Multimedia:Kk | ライブカメラ画像自動取得商品データベース作成ウェブサーバシステム |
JP2018092455A (ja) | 2016-12-06 | 2018-06-14 | 株式会社野村総合研究所 | 店頭商品ecシステム |
JP2019200697A (ja) | 2018-05-18 | 2019-11-21 | 東芝テック株式会社 | 棚管理システムおよびプログラム |
WO2020195763A1 (ja) | 2019-03-22 | 2020-10-01 | 日本電気株式会社 | 情報処理装置、情報処理方法と記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
JP2022093040A (ja) | 2022-06-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11257145B2 (en) | In-store product detection system | |
JP6489262B2 (ja) | 誘導画像キャプチャユーザインタフェース | |
US20190220805A1 (en) | Continuous Display Shelf Edge Label Device | |
KR101863894B1 (ko) | 연속 디스플레이 선반 에지 라벨 디바이스 | |
TWI444918B (zh) | A provider, a provider, a provider, and a computer-readable recording medium that memorizes the program | |
JP5395920B2 (ja) | 検索装置、検索方法、検索プログラム、及びそのプログラムを記憶するコンピュータ読取可能な記録媒体 | |
US20160125252A1 (en) | Image recognition apparatus, processing method thereof, and program | |
JP6439566B2 (ja) | 多言語表示装置、多言語表示システム、多言語表示方法及び多言語表示プログラム | |
JP7104948B2 (ja) | 在庫管理サーバ、在庫管理システム、在庫管理プログラムおよび在庫管理方法 | |
WO2014017392A1 (ja) | 情報処理装置、そのデータ処理方法、およびプログラム | |
JP6395012B1 (ja) | コンピュータプログラム | |
JP6185216B1 (ja) | 情報提供システム、情報提供装置、情報提供方法、及びプログラム | |
US20110050900A1 (en) | Image processing apparatus, wearable image processing apparatus, and method of controlling image processing apparatus | |
KR100935680B1 (ko) | 화면 정보의 편집 장치 및 방법과 프로그램, 기록 매체,정보처리 단말의 생산 방법 | |
US20190325497A1 (en) | Server apparatus, terminal apparatus, and information processing method | |
US20170038924A1 (en) | Graphical user interface indicating virtual storage of consumable items | |
US10469910B2 (en) | Methods for supplying, ordering, and transacting items based on motion images | |
US9672436B1 (en) | Interfaces for item search | |
JP2019174959A (ja) | 商品棚位置登録プログラム、及び情報処理装置 | |
JP2019079439A (ja) | コンピュータプログラム、表示装置、表示方法、画像出力装置、画像出力方法、画像表示システム | |
JP6924662B2 (ja) | 情報処理装置 | |
WO2014027433A1 (ja) | 情報提供装置、情報提供方法、及び、プログラム | |
JP7477438B2 (ja) | 情報処理装置、情報処理方法及び情報処理システム | |
JP7477439B2 (ja) | 情報処理装置、情報処理方法及び情報処理システム | |
JP2019164803A (ja) | 表示制御装置、制御方法、プログラム及び記憶媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230214 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20231016 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231129 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240227 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240402 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240418 |