JP7305320B2 - 位置関係検出装置 - Google Patents
位置関係検出装置 Download PDFInfo
- Publication number
- JP7305320B2 JP7305320B2 JP2018168798A JP2018168798A JP7305320B2 JP 7305320 B2 JP7305320 B2 JP 7305320B2 JP 2018168798 A JP2018168798 A JP 2018168798A JP 2018168798 A JP2018168798 A JP 2018168798A JP 7305320 B2 JP7305320 B2 JP 7305320B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- code
- positional relationship
- unit
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 claims description 90
- 238000001514 detection method Methods 0.000 claims description 63
- 238000000034 method Methods 0.000 claims description 44
- 230000008569 process Effects 0.000 description 39
- 238000010586 diagram Methods 0.000 description 15
- 239000011888 foil Substances 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000010411 cooking Methods 0.000 description 4
- 229920001777 Tupperware Polymers 0.000 description 3
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 3
- 229910052782 aluminium Inorganic materials 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 1
- 238000005352 clarification Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Landscapes
- Display Racks (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
複数の棚板(2a~2c)にて仕切られた陳列棚(1,1a,1b)に陳列される複数種類の物品(G1~G9)の位置関係を検出する位置関係検出装置(10)であって、
それぞれの種類の物品が陳列される位置ごとに前記棚板を利用して当該物品の種類を特定可能な特定情報が記録された情報コード(C1~C9,C11~C13,C21~C27)がそれぞれ配置され、
撮像部(22)と、
前記撮像部により撮像された撮像画像に含まれる前記情報コードから前記特定情報を読み取る読取部(21)と、
前記撮像部により撮像された1つの撮像画像に前記読取部にて前記特定情報が読み取られる前記情報コードが2以上含まれる場合に、当該2以上の情報コードについて相対位置関係を検出可能な検出部(21)と、
前記検出部により相対位置関係が検出された情報コードの前記特定情報が、検出済コードの前記特定情報として前記相対位置関係に関する相対位置情報とともに記憶される記憶部(25)と、
前記撮像部により撮像された1つの撮像画像に前記読取部にて前記特定情報が読み取られる前記情報コードが2以上含まれる場合に、少なくとも1つの前記検出済コードとともに、前記記憶部に前記特定情報が記憶されていない前記情報コードが未検出コードとして含まれる一部未検出状態であるか否かについて判定する判定部(21)と、
を備え、
前記検出部は、
前記記憶部に前記検出済コードが記憶されていない状態で前記撮像部により撮像された1つの撮像画像に前記読取部にて前記特定情報が読み取られる2以上の前記情報コードが含まれていると、当該2以上の情報コードについて相対位置関係を検出し、
前記判定部により前記一部未検出状態であると判定された前記撮像画像について、前記検出済コードに対する前記未検出コードの相対位置関係を、前記検出済コードに基づいて検出し、
前記情報コードには、前記特定情報に加えて、当該情報コードの実寸法に関する情報が記録され、
前記検出部は、前記情報コードから読み取られる当該情報コードの実寸法に関する情報を基準に、前記相対位置関係を実寸法で算出して検出することを特徴とする。
なお、上記各括弧内の符号は、後述する実施形態に記載の具体的手段との対応関係を示すものである。
以下、本発明に係る位置関係検出装置を携帯端末に適用した第1実施形態について、図面を参照して説明する。
図1に示す携帯端末10は、情報コードを利用して陳列棚1に陳列される複数種類の物品の位置関係を検出する位置関係検出装置として構成される。本実施形態では、図1に示すような陳列棚1に陳列される各商品の位置関係を検出対象としており、陳列棚1は、3つの棚板2a~2cにて上下に仕切られて、通路に沿って左右に長くなるように構成されている。
携帯端末10は、陳列棚1の陳列状態等を確認する作業者が携帯するタブレット端末やスマートフォンなどの携帯型の情報端末として構成されている。この携帯端末10は、撮像部及び表示部等を有し、撮像した情報コードの読み取り結果を利用して陳列棚1に陳列される各商品の位置関係等を画面表示するための所定のアプリケーションプログラム(以下、位置関係検出アプリともいう)がインストールされて構成されるものである。
次に、第2実施形態に係る携帯端末について、図面を参照して説明する。
本第2実施形態では、陳列棚1の長手方向における両端を示す2つの情報コードをさらに追加して配置する点が、上記第1実施形態と主に異なる。したがって、第1実施形態と実質的に同一の構成部分には、同一符号を付し、その説明を省略する。
次に、第3実施形態に係る携帯端末について、図面を参照して説明する。
本第3実施形態では、陳列棚に配置されるそれぞれの情報コードのサイズ(実寸法)を取得していない状態で各情報コードの実際の距離等を算出する点が、上記第2実施形態と主に異なる。したがって、第2実施形態と実質的に同一の構成部分には、同一符号を付し、その説明を省略する。
次に、第4実施形態に係る携帯端末について、図面を参照して説明する。
本第4実施形態では、記憶部25に記憶される相対位置情報を利用して生成した陳列棚のパノラマ画像に対して各商品が陳列される陳列範囲を明示する点が、上記第1実施形態と主に異なる。したがって、第1実施形態と実質的に同一の構成部分には、同一符号を付し、その説明を省略する。
(1)本発明は、上述のように陳列された商品G1~G9の相対位置関係を情報コードを用いて検出する携帯端末(位置関係検出装置)に適用されることに限らず、食品や雑貨等、他の種別の物品について陳列された状態での相対位置関係を情報コードを用いて検出する携帯端末(位置関係検出装置)に適用されてもよい。また、本発明は、上述したような位置関係検出装置と各情報コードが設置された陳列棚とを備える位置関係検出システムにも適用することができる。
2a~2c…棚板
10…携帯端末(位置関係検出装置)
21…制御部(読取部,検出部,判定部,算出部,生成部,特定部)
22…撮像部
23…表示部
23a…表示画面
23b…第1表示領域
23c…第2表示領域
25…記憶部
C1~C9,C11~C13,C21~C27…情報コード
G1~G9,G21~G27…商品(物品)
Ca…一端側コード
Cb…他端側コード
Pg…物品画像
S21~S27…陳列範囲
Claims (11)
- 複数の棚板にて仕切られた陳列棚に陳列される複数種類の物品の位置関係を検出する位置関係検出装置であって、
それぞれの種類の物品が陳列される位置ごとに前記棚板を利用して当該物品の種類を特定可能な特定情報が記録された情報コードがそれぞれ配置され、
撮像部と、
前記撮像部により撮像された撮像画像に含まれる前記情報コードから前記特定情報を読み取る読取部と、
前記撮像部により撮像された1つの撮像画像に前記読取部にて前記特定情報が読み取られる前記情報コードが2以上含まれる場合に、当該2以上の情報コードについて相対位置関係を検出可能な検出部と、
前記検出部により相対位置関係が検出された情報コードの前記特定情報が、検出済コードの前記特定情報として前記相対位置関係に関する相対位置情報とともに記憶される記憶部と、
前記撮像部により撮像された1つの撮像画像に前記読取部にて前記特定情報が読み取られる前記情報コードが2以上含まれる場合に、少なくとも1つの前記検出済コードとともに、前記記憶部に前記特定情報が記憶されていない前記情報コードが未検出コードとして含まれる一部未検出状態であるか否かについて判定する判定部と、
を備え、
前記検出部は、
前記記憶部に前記検出済コードが記憶されていない状態で前記撮像部により撮像された1つの撮像画像に前記読取部にて前記特定情報が読み取られる2以上の前記情報コードが含まれていると、当該2以上の情報コードについて相対位置関係を検出し、
前記判定部により前記一部未検出状態であると判定された前記撮像画像について、前記検出済コードに対する前記未検出コードの相対位置関係を、前記検出済コードに基づいて検出し、
前記情報コードには、前記特定情報に加えて、当該情報コードの実寸法に関する情報が記録され、
前記検出部は、前記情報コードから読み取られる当該情報コードの実寸法に関する情報を基準に、前記相対位置関係を実寸法で算出して検出することを特徴とする位置関係検出装置。 - 前記情報コードは、全て同じサイズに形成されることを特徴とする請求項1に記載の位置関係検出装置。
- 前記陳列棚の長手方向一端に位置する前記棚板の部位には、当該長手方向一端を示す一端側情報が記録された情報コードが配置され、前記陳列棚の長手方向他端に位置する前記棚板の部位には、当該長手方向他端を示す他端側情報が記録された情報コードが配置され、
前記記憶部には、前記読取部により読み取られた前記一端側情報が記憶されるとともに、前記読取部により読み取られた前記他端側情報が記憶されることを特徴とする請求項1又は2に記載の位置関係検出装置。 - 前記一端側情報及び前記他端側情報の少なくともいずれか一方には、前記陳列棚を特定する情報が含まれることを特徴とする請求項3に記載の位置関係検出装置。
- 前記検出部は、
前記記憶部に前記検出済コードが記憶されていない状態で前記撮像部により撮像された1つの撮像画像に前記読取部にて前記特定情報が読み取られる2以上の前記情報コードが含まれていると、いずれか1つの情報コードを基準コードとして、当該基準コードの前記撮像画像でのコード画像サイズを基準に、残りの情報コードの前記基準コードに対するサイズ比を検出するとともに、当該2以上の情報コードについて相対位置関係を検出し、
前記判定部により前記一部未検出状態であると判定された前記撮像画像について、当該撮像画像に含まれる前記基準コード又は前記検出済コードの前記サイズ比に基づいて、前記未検出コードの前記基準コードに対するサイズ比を検出するとともに、前記基準コード又は前記検出済コードに対する前記未検出コードの相対位置関係を検出することを特徴とする請求項1に記載の位置関係検出装置。 - 前記記憶部に記憶される複数の前記相対位置情報に基づいて各情報コード間の実際の距離を算出する算出部を備え、
前記陳列棚の長手方向一端に位置する前記棚板の部位には、当該長手方向一端を示す一端側情報が記録された情報コードとして一端側コードが配置され、前記陳列棚の長手方向他端に位置する前記棚板の部位には、当該長手方向他端を示す他端側情報が記録された情報コードとして他端側コードが配置され、
前記一端側情報及び前記他端側情報の少なくともいずれか一方には、前記陳列棚の前記長手方向の長さに関する情報が含まれ、
前記算出部は、前記一端側コードと前記他端側コードとの間の前記長手方向の実際の距離が前記読取部の読み取りにより得られた前記陳列棚の前記長手方向の長さに一致することを前提に、複数の前記相対位置情報に基づいて各情報コード間の実際の距離を算出することを特徴とする請求項5に記載の位置関係検出装置。 - 前記記憶部に記憶される2以上の前記検出済コードからそれぞれ特定される物品の種類を示す情報が、前記相対位置情報に応じて第1表示領域にそれぞれ表示され、前記撮像部により撮像されている現在の撮像画像が、第2表示領域に表示される表示部を備えることを特徴とする請求項1~6のいずれか一項に記載の位置関係検出装置。
- 前記記憶部には、前記撮像部にて前記情報コードを撮像した撮像画像が複数記憶され、
前記記憶部に記憶される前記相対位置情報を利用して、前記記憶部に記憶される複数の前記撮像画像を前記情報コードの位置を基準に連結して前記陳列棚のパノラマ画像を生成する生成部と、
前記生成部により生成された前記パノラマ画像の少なくとも一部が表示される表示部と、
を備えることを特徴とする請求項1~6のいずれか一項に記載の位置関係検出装置。 - 前記記憶部には、物品を撮像した物品画像が前記特定情報に関連付けられて当該物品ごとに予め記憶され、
前記生成部により生成された前記パノラマ画像と前記記憶部に記憶される複数の前記物品画像とをそれぞれ画像比較することで、当該パノラマ画像において前記物品が陳列される陳列範囲を当該物品ごとに特定する特定部を備え、
前記表示部には、前記特定部により特定された複数の前記陳列範囲が前記パノラマ画像に対して明示されることを特徴とする請求項8に記載の位置関係検出装置。 - 前記物品画像を、前記読取部にて読み取った前記特定情報を利用して当該特定情報ごとに外部から取得して前記記憶部に記憶する取得部を備えることを特徴とする請求項9に記載の位置関係検出装置。
- 前記表示部には、前記パノラマ画像の少なくとも一部が拡大可能に表示されることを特徴とする請求項8~10のいずれか一項に記載の位置関係検出装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/363,388 US11049279B2 (en) | 2018-03-27 | 2019-03-25 | Device for detecting positional relationship among objects |
CN201910235147.1A CN110310330B (zh) | 2018-03-27 | 2019-03-27 | 位置关系检测装置 |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018060268 | 2018-03-27 | ||
JP2018060268 | 2018-03-27 | ||
JP2018104393 | 2018-05-31 | ||
JP2018104393 | 2018-05-31 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019212262A JP2019212262A (ja) | 2019-12-12 |
JP7305320B2 true JP7305320B2 (ja) | 2023-07-10 |
Family
ID=68845285
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018168798A Active JP7305320B2 (ja) | 2018-03-27 | 2018-09-10 | 位置関係検出装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7305320B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113569830B (zh) * | 2021-06-22 | 2024-08-02 | 邬国锐 | 陈列物品行列位置的确定方法、装置、设备及存储介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016177643A (ja) | 2015-03-20 | 2016-10-06 | 株式会社デンソーウェーブ | 情報コード読取装置 |
WO2016163564A1 (ja) | 2015-04-09 | 2016-10-13 | 日本電気株式会社 | 情報処理装置、情報処理システム、位置報知方法及びプログラム記録媒体 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5138210B2 (ja) * | 2006-12-18 | 2013-02-06 | シャープ株式会社 | 符号読み取り装置、符号読み取り装置の制御プログラム、符号読み取り装置の制御プログラムを記録した記録媒体 |
JP2011092482A (ja) * | 2009-10-30 | 2011-05-12 | Seiko Instruments Inc | 位置情報取得装置および位置情報取得方法 |
-
2018
- 2018-09-10 JP JP2018168798A patent/JP7305320B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016177643A (ja) | 2015-03-20 | 2016-10-06 | 株式会社デンソーウェーブ | 情報コード読取装置 |
WO2016163564A1 (ja) | 2015-04-09 | 2016-10-13 | 日本電気株式会社 | 情報処理装置、情報処理システム、位置報知方法及びプログラム記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
JP2019212262A (ja) | 2019-12-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110310330B (zh) | 位置关系检测装置 | |
JP7163760B2 (ja) | 位置関係検出装置及び位置関係検出システム | |
JP6925443B2 (ja) | 店舗内の在庫レベルを追跡する方法 | |
US11373320B1 (en) | Detecting inventory changes by comparing image data | |
CN206601173U (zh) | 使用图像数据计算重量 | |
US10268892B1 (en) | System and methods for volume dimensioning for supply chains and shelf sets | |
JP6508419B2 (ja) | 画像表示装置、画像表示システム、画像表示方法及びプログラム | |
WO2017085771A1 (ja) | 精算支援システム、精算支援プログラム、及び精算支援方法 | |
US10157452B1 (en) | Image processing system for image rectification | |
US20170262724A1 (en) | High accuracy localization system and method for retail store profiling via product image recognition and its corresponding dimension database | |
JP2009003701A (ja) | 情報システム及び情報処理装置 | |
CN107992820A (zh) | 基于双目视觉的货柜自助售货方法 | |
CN112215142B (zh) | 基于深度图像信息检测货架缺货率的方法、装置及设备 | |
CN110889317A (zh) | 操作辅助装置 | |
CN111295683A (zh) | 基于增强现实的包裹查找辅助系统 | |
JP7305320B2 (ja) | 位置関係検出装置 | |
CN109816298B (zh) | 物流管理方法及系统 | |
CN112907168A (zh) | 动态商品识别方法、无人售货柜及其售货方法 | |
CN109166257B (zh) | 一种购物车商品核验方法及其装置 | |
CN112560563A (zh) | 物品布局的识别方法、装置及电子设备 | |
CN111428743A (zh) | 商品识别方法、商品处理方法、装置及电子设备 | |
CN109191546A (zh) | 地图生成法、信息获取方法、装置及系统 | |
CN112154488B (zh) | 信息处理装置、控制方法和程序 | |
JP2005184624A (ja) | 商品販売・管理方法、商品販売・管理システムおよびサーバ | |
JP6550736B2 (ja) | 撮影対象管理プログラム及び情報処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210303 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220111 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220310 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20220719 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221011 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20221011 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20221018 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20221025 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20221228 |
|
C211 | Notice of termination of reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C211 Effective date: 20230110 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20230307 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20230418 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230628 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7305320 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |