JP2021087029A - Position detection system, position detection device, and position detection method - Google Patents
Position detection system, position detection device, and position detection method Download PDFInfo
- Publication number
- JP2021087029A JP2021087029A JP2019212409A JP2019212409A JP2021087029A JP 2021087029 A JP2021087029 A JP 2021087029A JP 2019212409 A JP2019212409 A JP 2019212409A JP 2019212409 A JP2019212409 A JP 2019212409A JP 2021087029 A JP2021087029 A JP 2021087029A
- Authority
- JP
- Japan
- Prior art keywords
- information
- light emission
- unit
- light
- position detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 117
- 238000003384 imaging method Methods 0.000 claims abstract description 23
- 230000005540 biological transmission Effects 0.000 claims description 88
- 238000004891 communication Methods 0.000 claims description 26
- 238000000034 method Methods 0.000 description 16
- 238000010586 diagram Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 230000008569 process Effects 0.000 description 9
- 230000004397 blinking Effects 0.000 description 6
- 230000003190 augmentative effect Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000004270 retinal projection Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 210000004556 brain Anatomy 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Images
Landscapes
- Telephone Function (AREA)
Abstract
Description
本発明は、位置検出システム、位置検出装置及び位置検出方法に関する。 The present invention relates to a position detection system, a position detection device, and a position detection method.
無線通信信号を用いてデバイスの位置を測定する技術には、電波強度や指向性や三点測位等を利用するものがある。三点測位を利用して位置を測定する技術は、特許文献１に記載されている。 Some technologies for measuring the position of a device using wireless communication signals use radio field strength, directivity, three-point positioning, and the like. A technique for measuring a position using three-point positioning is described in Patent Document 1.
しかしながら、上述した技術では、位置を特定したい対象デバイスの大まかな位置を把握することはできるが、複数のデバイスが密集している場合には、どのデバイスが対象デバイスであるかを特定することが困難である。例えば、店舗等における商品棚には複数の商品が密集して陳列されているが、その中から特定の商品を探したい場合に、上述した技術では、その商品の位置を特定することは難しい。 However, with the above-mentioned technology, it is possible to grasp the rough position of the target device whose position is to be specified, but when a plurality of devices are densely packed, it is possible to identify which device is the target device. Have difficulty. For example, a plurality of products are densely displayed on a product shelf in a store or the like, but when it is desired to search for a specific product from among them, it is difficult to specify the position of the product by the above-mentioned technique.
そこでこの発明は、上述の課題を解決する位置検出システム、位置検出装置及び位置検出方法を提供することを目的としている。 Therefore, an object of the present invention is to provide a position detection system, a position detection device, and a position detection method that solve the above-mentioned problems.
本発明の第１の態様によれば、位置検出システムは、対象物に取り付けられ、自無線デバイスを識別する存在情報を無線によって発信する無線デバイスと、前記対象物に取り付けられ、自発光デバイスを識別する発光情報を光によって出力する発光デバイスと、前記存在情報と前記発光情報とを対応付けて記憶する記憶部と、撮像部と、撮像結果の画像に基づいて、発光情報を検出する光源検出部と、前記無線デバイスから受信した存在情報に対応する発光情報を前記記憶部を参照して特定し、特定された発光情報が前記光源検出部によって検出されているか否かを判定する判定部と、前記判定部の判定結果に基づいて、前記発光情報が検出されている場合に、当該検出された光源の前記画像上における位置に基づいて前記対象物に関する情報を出力する出力部と、を有することを特徴とする。 According to the first aspect of the present invention, the position detection system includes a wireless device attached to an object and wirelessly transmitting existence information identifying the own wireless device, and a self-luminous device attached to the object. A light emitting device that outputs light emission information to be identified by light, a storage unit that stores the existence information and the light emission information in association with each other, an imaging unit, and a light source detection that detects light emission information based on an image of an imaging result. A unit and a determination unit that identifies light emission information corresponding to the existence information received from the wireless device with reference to the storage unit and determines whether or not the identified light emission information is detected by the light source detection unit. It has an output unit that outputs information about the object based on the position of the detected light source on the image when the light emission information is detected based on the determination result of the determination unit. It is characterized by that.
本発明の第２の態様によれば、位置検出装置は、対象物に取り付けられ、自デバイスを識別する存在情報を無線によって発信し、自デバイスを識別する発光情報を光によって出力するデバイスから前記存在情報を受信する通信部と、前記存在情報と前記発光情報とを対応付けて記憶する記憶部と、撮像部と、撮像結果の画像に基づいて、発光情報を検出する光源検出部と、前記デバイスから受信した存在情報に対応する発光情報を前記記憶部を参照して特定し、特定された発光情報が前記光源検出部によって検出されているか否かを判定する判定部と、前記判定部の判定結果に基づいて、前記発光情報が検出されている場合に、当該検出された光源の前記画像上における位置に基づいて前記対象物に関する情報を出力する出力部と、を有することを特徴とする。 According to the second aspect of the present invention, the position detection device is attached to an object, transmits presence information for identifying the own device by radio, and outputs light emission information for identifying the own device by light. A communication unit that receives existence information, a storage unit that stores the existence information and the light emission information in association with each other, an imaging unit, a light source detection unit that detects light emission information based on an image of an imaging result, and the above. A determination unit that identifies light emission information corresponding to the existence information received from the device with reference to the storage unit, determines whether or not the specified light emission information is detected by the light source detection unit, and a determination unit of the determination unit. It is characterized by having an output unit that outputs information about the object based on the position of the detected light source on the image when the light emission information is detected based on the determination result. ..
本発明の第３の態様によれば、位置検出方法は、対象物に取り付けられた無線デバイスが、自無線デバイスを識別する存在情報を無線によって発信し、前記対象物に取り付けられた発光デバイスが、自発光デバイスを識別する発光情報を光によって出力し、光源検出部が、撮像結果の画像に基づいて、発光情報を検出し、判定部が、前記無線デバイスから受信した存在情報に対応する発光情報を、前記存在情報と前記発光情報とを対応付けて記憶する記憶部を参照して特定し、特定された発光情報が前記光源検出部によって検出されているか否かを判定し、出力部が、前記判定部の判定結果に基づいて、前記発光情報が検出されている場合に、当該検出された光源の前記画像上における位置に基づいて前記対象物に関する情報を出力することを特徴とする。 According to the third aspect of the present invention, in the position detection method, the wireless device attached to the object wirelessly transmits the existence information for identifying the own wireless device, and the light emitting device attached to the object transmits the existence information. , The light source information for identifying the self-luminous device is output by light, the light source detection unit detects the light emission information based on the image of the imaging result, and the determination unit emits light corresponding to the existence information received from the wireless device. The information is specified by referring to a storage unit that stores the existence information and the light emission information in association with each other, and it is determined whether or not the specified light source information is detected by the light source detection unit, and the output unit determines. When the light emission information is detected based on the determination result of the determination unit, the information regarding the object is output based on the position of the detected light source on the image.
本発明によれば、対象物の位置を精度良く特定することができる。 According to the present invention, the position of the object can be specified with high accuracy.
以下、本発明の一実施形態による位置検出システム、位置検出装置及び位置検出方法を図面を参照して説明する。 Hereinafter, a position detection system, a position detection device, and a position detection method according to an embodiment of the present invention will be described with reference to the drawings.
図１は、本実施形態による位置検出システムの構成を示す概略図である。
位置検出システム１００は、位置検出装置１と１又は複数の発信デバイス２とを備える。位置検出システム１００は、位置検出装置１により発信デバイス２の位置を特定するためのシステムである。位置検出システム１００は、例えば、店舗や倉庫等において棚ＴＮに密集して陳列された商品の中から特定の商品を探す際等に用いられる。
FIG. 1 is a schematic view showing a configuration of a position detection system according to the present embodiment.
The
発信デバイス２は、例えば商品等が陳列される棚ＴＮにおいて、対応する商品等の値段等を表示する棚札それぞれに取り付けられる。棚札は、対応する商品群の近傍に取り付けられている。棚札又は商品等が、ユーザＵＳがその位置を特定したい対象物である。
位置検出装置１は、例えばスマートフォンやタブレット端末やデジタルカメラ等のユーザＵＳが使用する携帯端末である。
位置検出装置１と発信デバイス２とは、例えばＢＬＥ（Ｂｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙ）（Ｂｌｕｅｔｏｏｔｈは登録商標）等の近距離無線通信により通信する。近距離無線通信にＢＬＥを使用する場合、発信デバイス２がＰｅｒｉｐｈｅｒａｌデバイスとなり、位置検出装置１がＣｅｎｔｒａｌデバイスとなる。
The
The position detection device 1 is a mobile terminal used by a user US such as a smartphone, a tablet terminal, or a digital camera.
The position detection device 1 and the
図２は、本実施形態による発信デバイスの構成を示すブロック図である。
発信デバイス２は、制御部２１と、無線デバイス２２と、発光デバイス２３とを備える。
制御部２１は、発信デバイス２を統括して制御する。
無線デバイス２２は、自無線デバイス２２を識別する存在情報を無線によって発信する。
発光デバイス２３は、自発光デバイス２３を識別する発光情報を光によって出力する。発光デバイス２３は、例えばＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）等の発光素子である。なお、発光デバイス２３が発光する光は、撮像結果の画像に基づいてその発光情報を取得できるもの（例えば、その点滅周期が撮像周期より長いもの）であればよく、可視光であってもよいし、非可視光であってもよい。
FIG. 2 is a block diagram showing a configuration of a transmitting device according to the present embodiment.
The
The
The
The
図３は、本実施形態による位置検出装置の構成を示すブロック図である。
位置検出装置１は、制御部１１と、無線通信部１２と、撮像部１３と、記憶部１４と、表示部１５とを備える。
制御部１１は、位置検出装置１を統括して制御する。制御部１１は、通信部１１１と、光源検出部１１２と、判定部１１３と、出力部１１４とを備える。
通信部１１１は、無線通信部１２を介して存在情報の要求信号を送信し、発信デバイス２から存在情報を受信する。
光源検出部１１２は、撮像部１３による撮像結果の画像（以下、「撮像画像」とする。）に基づいて、発光情報を検出する。また、光源検出部１１２は、撮像結果の画像に基づいて、発光情報を出力する光源が撮像されている否かを検出することもできる。
判定部１１３は、無線デバイス２２から受信した存在情報に対応する発光情報を記憶部１４を参照して特定し、特定された発光情報が光源検出部１１２によって検出されているか否かを判定する。
出力部１１４は、判定部１１３の判定結果に基づいて、光源が検出されている場合に、当該検出された光源の撮像画像上における位置に基づいて対象物に関する情報を表示部１５に表示して出力する。
FIG. 3 is a block diagram showing a configuration of a position detection device according to the present embodiment.
The position detection device 1 includes a
The
The
The light
The
When a light source is detected, the
無線通信部１２は、発信デバイス２と近距離無線通信する無線デバイスである。また、無線通信部１２は、移動通信システムや無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）等により他の装置と無線通信する。
撮像部１３は、対象物を撮像するカメラである。撮像部１３は、撮像結果である撮像画像を生成して制御部１１に出力する。
表示部１５は、液晶ディスプレイや有機ＥＬ（Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイ等の表示装置である。また、表示部１５は、その表示画面上にタッチパネルが設置されており、入力を受け付ける。
記憶部１４は、各発信デバイス２の存在情報と発光情報とを対応付けるデバイス情報、及び各発信デバイス２が取り付けられた棚札（対応する商品）に関するＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ／拡張現実）情報を記憶する。
The
The
The
The
図４は、本実施形態による位置検出装置が記憶するデバイス情報のデータ構造及びデータ例を示す概略図である。
デバイス情報は、各発信デバイス２の存在情報と発光情報とを対応付けて記憶する。存在情報は、各発信デバイス２を識別する情報であって、例えば固有又は特定の情報を含む信号（以下、「存在信号」とする。）を発信する固有の発信パターンである。存在信号は、各発信デバイス２を識別するデバイスＩＤを含むものであってもよいし、複数の発信デバイス２に共通の情報であってもよい。本実施形態では、発信パターンは、例えば、発信開始から１秒、３秒、４秒、７秒経過したそれぞれの時点で発信するというサイクルを繰り返す等の、発信のタイミング（間隔）である。発光情報は、各発信デバイス２を識別する情報であって、発光パターンである。本実施形態における発光パターンは、発信パターンと同様に、発光のタイミング（発光間隔や点滅周期）である。或いは、発光パターンは、発信開始から１秒経過時に赤色、３秒経過時に青色、４秒経過時に緑色、７秒経過時に白色で発光するというサイクルを繰り返す等の、発光する色と発光のタイミングと組み合わせたものであってもよい。或いは、発光パターンは、発光する色のみから構成されていてもよい。
FIG. 4 is a schematic view showing a data structure and a data example of device information stored in the position detection device according to the present embodiment.
The device information is stored in association with the existence information of each
図示する例では、存在情報「発信パターン１」には発光情報「発光パターンＡ」が対応付けられており、存在情報「発信パターン２」には発光情報「発光パターンＢ」が対応付けられており、存在情報「発信パターン３」には発光情報「発光パターンＣ」が対応付けられており、存在情報「発信パターン４」には発光情報「発光パターンＤ」が対応付けられており、存在情報「発信パターン５」には発光情報「発光パターンＥ」が対応付けられている。
In the illustrated example, the existence information "transmission pattern 1" is associated with the light emission information "light emission pattern A", and the existence information "
図５は、本実施形態による位置検出装置が記憶するＡＲ情報のデータ構造及びデータ例を示す概略図である。
ＡＲ情報は、撮像画像に合成して拡張現実を実現するための情報であって、デバイスＩＤと付加情報とを対応付けて記憶する。付加情報は、発信デバイス２が取り付けられる対象物に関する情報である。付加情報は、撮像画像における発信デバイス２の位置とデバイスＩＤとが特定されると、撮像画像上に合成される情報である。
FIG. 5 is a schematic view showing a data structure and a data example of AR information stored in the position detection device according to the present embodiment.
The AR information is information for realizing augmented reality by synthesizing it with a captured image, and stores the device ID and additional information in association with each other. The additional information is information about an object to which the
図示する例では、デバイスＩＤ「Ｄ００１」に対応する付加情報は「値引きしました」であり、デバイスＩＤ「Ｄ００２」に対応する付加情報は「今月発売です」であり、デバイスＩＤ「Ｄ００３」に対応する付加情報は「秋の定番商品です」である。
なお、本例に限られず、付加情報は、対応する発信デバイス２に関連する情報であればよく、対応する商品の商品名、値段、商品メーカ名、クーポン、商品の在庫情報等であってもよい。例えば、位置検出装置１を店舗に来店したユーザが利用する場合には、付加情報は、購入する上で参考になる情報であればよい。また、位置検出装置１を店舗の担当者が利用する場合には、付加情報は、在庫情報（バックヤードにどれだけ在庫が残っているか等）、今週の販売数等のＰＯＳ（Ｐｏｉｎｔ Ｏｆ Ｓａｌｅ）システムと連動すれば得られる情報、販売開始日、販売終了予定日等であってもよい。
In the illustrated example, the additional information corresponding to the device ID "D001" is "discounted", the additional information corresponding to the device ID "D002" is "released this month", and corresponds to the device ID "D003". The additional information to be added is "Autumn standard product".
Not limited to this example, the additional information may be any information related to the
続いて、本位置検出システム１００の動作について説明する。
以下、店舗や倉庫等において、位置検出装置１を保持するユーザＵＳが棚ＴＮに陳列された商品Ａ、商品Ｂ及び商品Ｃを探す場合を例に説明する。まず、位置検出装置１は、位置を特定したい対象物に取り付けられた発信デバイス２に対して発信の要求信号を送信する。例えば、位置検出装置１は、予め存在情報を発信することが可能な発信デバイス２のリストを記憶している。そして、位置検出装置１は、表示部１５に発信デバイス２（或いは、発信デバイス２の取り付けられた対象物の商品等）をリスト表示し、その中から探したい対象物の発信デバイス２をユーザＵＳに選択させてもよい。そして、位置検出装置１は、選択された発信デバイス２に対して信号の要求信号を送信する。
Subsequently, the operation of the
Hereinafter, a case where the user US holding the position detection device 1 searches for the product A, the product B, and the product C displayed on the shelf TN in a store, a warehouse, or the like will be described as an example. First, the position detection device 1 transmits a transmission request signal to the
各発信デバイス２は、要求信号を受信すると、各発信デバイス２それぞれに予め設定された発信パターンで無線デバイス２２から存在信号を無線により発信する。発信パターンは、発信デバイス２毎に異なり、それぞれ記憶部１４に記憶されたデバイス情報のものと同一である。また、各発信デバイス２は、各発信デバイス２それぞれに予め設定された発光パターンで発光デバイス２３を発光させて、点滅させる。発光パターンは、発信デバイス２毎に異なり、それぞれ記憶部１４に記憶されたデバイス情報のものと同一である。位置検出装置１は、各発信デバイス２から存在信号を受信すると、デバイスリストを生成する。
When each transmitting
図６は、本実施形態による位置検出装置が生成するデバイスリストの一例を示す概略図である。
図示するように、位置検出装置１は、存在信号の発信元の発信デバイス２の発信パターン（存在情報）を解析してデバイスリストに追加する。
図示する例では、デバイスリストには、商品Ａの棚札に設置された発信デバイス２の発信パターン１と、商品Ｂの棚札に設置された発信デバイス２の発信パターン２と、商品Ｃの棚札に設置された発信デバイス２の発信パターン３とが含まれる。
FIG. 6 is a schematic view showing an example of a device list generated by the position detection device according to the present embodiment.
As shown in the figure, the position detection device 1 analyzes the transmission pattern (existence information) of the
In the illustrated example, the device list includes the transmission pattern 1 of the
続いて、位置検出装置１は、撮像部１３のカメラを起動して商品が陳列された棚ＴＮを撮像するとともに、撮像部１３による撮像結果の画像である撮像画像を表示部１５の表示画面に表示する。
Subsequently, the position detection device 1 activates the camera of the
図７は、本実施形態による位置検出装置が表示する撮像画像の一例を示すイメージ図である。
本図には、棚ＴＮに陳列された商品Ａ、商品Ｂ及び商品Ｃとそれらの棚札ＴＦを撮像しているときの撮像画像５０１の一例を示している。本図に示す撮像画像５０１では、商品Ａの棚札ＴＦに設置された発光デバイス２３が発光パターンＡで点滅しており、商品Ｂの棚札ＴＦに設置された発光デバイス２３が発光パターンＢで点滅しており、商品Ｃの棚札ＴＦに設置された発光デバイス２３が発光パターンＣで点滅している。
FIG. 7 is an image diagram showing an example of an captured image displayed by the position detection device according to the present embodiment.
This figure shows an example of the captured
位置検出装置１は、撮像画像に基づいて、画像解析等により、発光情報を出力する光源が撮像されている否かを検出する。例えば、位置検出装置１は、撮像している各発光デバイス２３の発光パターンを解析する。続いて、位置検出装置１は、記憶部１４が記憶するデバイス情報を参照して、デバイスリストにある存在情報に対応する発光情報を特定する。そして、位置検出装置１は、特定した発光情報を出力する光源が撮像されている場合に、撮像画像上で当該光源である発光デバイス２３が設置されている棚札ＴＦの外観形状に基づいてアウトラインを生成する。アウトラインは、撮像画像上における対象物の位置を特定するものであり、対象物である棚札ＴＦが存在する位置が認識された領域、或いは、当該認識された領域を囲むような枠である。そして、位置検出装置１は、生成したアウトラインに関するアウトライン情報と発光情報とを存在情報に対応付けてデバイスリストに追加する。
The position detection device 1 detects whether or not a light source that outputs light emission information is imaged by image analysis or the like based on the captured image. For example, the position detection device 1 analyzes the light emission pattern of each light emitting
図８は、本実施形態による位置検出装置が生成するデバイスリストの一例を示す概略図である。
図示するように、位置検出装置１は、存在情報に対応させて、発光情報とアウトライン情報とをデバイスリストに追加する。アウトライン情報は、例えば、撮像画像においてアウトラインを表示する座標や、アウトラインの大きさ、形等である。
図示する例では、発信パターン１には発光パターンＡ及びアウトラインＡが対応付けられており、発信パターン２には発光パターンＢ及びアウトラインＢが対応付けられており、発信パターン３には発光パターンＣ及びアウトラインＣが対応付けられている。
FIG. 8 is a schematic view showing an example of a device list generated by the position detection device according to the present embodiment.
As shown in the figure, the position detection device 1 adds light emission information and outline information to the device list in correspondence with the existence information. The outline information is, for example, the coordinates for displaying the outline in the captured image, the size and shape of the outline, and the like.
In the illustrated example, the transmission pattern 1 is associated with the light emission pattern A and the outline A, the
その後、位置検出装置１は、生成した各アウトライン情報に基づいて、撮像画像にアウトラインを重ねて表示する。 After that, the position detection device 1 superimposes and displays the outline on the captured image based on each generated outline information.
図９は、本実施形態による位置検出装置が表示するアウトライン表示画像の一例を示すイメージ図である。
位置検出装置１は、撮像画像にアウトラインを合成し、撮像画像上にアウトラインを重畳させて表示する。本図に示すアウトライン表示画像５０２では、商品Ａの棚札ＴＦ、商品Ｂの棚札ＴＦ、及び商品Ｃの棚札ＴＦそれぞれを囲うように各アウトラインＯＬが表示されている。
FIG. 9 is an image diagram showing an example of an outline display image displayed by the position detection device according to the present embodiment.
The position detection device 1 synthesizes an outline with the captured image, superimposes the outline on the captured image, and displays the outline. In the
このように、アウトラインを撮像画像上に表示することにより、ユーザＵＳは、自身が探している商品（棚札）がどこにあるかを明確に視覚的に特定することができる。更に、位置検出装置１は、アウトライン情報を生成したデバイスＩＤに対応する付加情報を記憶部１４が記憶するＡＲ情報から読み出し、読み出した付加情報を表示部１５に表示する。
By displaying the outline on the captured image in this way, the user US can clearly and visually identify where the product (shelf tag) that he / she is looking for is located. Further, the position detection device 1 reads the additional information corresponding to the device ID that generated the outline information from the AR information stored in the
図１０は、本実施形態による位置検出装置が表示する付加情報表示画像の一例を示すイメージ図である。
位置検出装置１は、撮像画像に付加情報を合成し、撮像画像上の各棚札ＴＦ近傍にそれぞれ対応する付加情報ＦＩを重畳させて表示する。本図に示す付加情報表示画像５０３では、商品Ａの棚札ＴＦ近傍には商品Ａの付加情報ＦＩ「商品名：ａａａ 在庫数：〇〇」が表示され、商品Ｂの棚札ＴＦ近傍には商品Ｂの付加情報ＦＩ「商品名：ｂｂｂ 在庫数：〇×」が表示され、商品Ｃの棚札ＴＦ近傍には商品Ｃの付加情報ＦＩ「商品名：ｃｃｃ 在庫数：×〇」が表示されている。また、各付加情報ＦＩは、対応する棚札ＴＦからの吹き出し画像によって表示されている。これにより、各商品群が密集していて棚札ＴＦ間の距離が短くても、どの棚札に関する情報であるかを容易に判別することができる。
FIG. 10 is an image diagram showing an example of an additional information display image displayed by the position detection device according to the present embodiment.
The position detection device 1 synthesizes additional information with the captured image, and superimposes and displays the corresponding additional information FI in the vicinity of each shelf label TF on the captured image. In the additional
このように、位置検出装置１は、ＡＲ技術を用いて撮像画像上に商品の付加情報をその棚札近傍に合成して表示することにより、ユーザＵＳは各商品を容易に特定することができ、さらに、各商品の在庫数等、商品に関する情報を簡単に手間なく取得することができる。例えば、棚札がディスプレイを有する場合には、ＱＲ（Ｑｕｉｃｋ Ｒｅｓｐｏｎｓｅ）コード（登録商標）等の２次元コードをそのディスプレイに表示させることで商品に関する情報を取得する技術があるが、この場合には、２次元コードをカメラが読み取り可能な距離まで近づかなければならない。この実施形態によれば、２次元コードを読み取り可能な距離まで近づくことなく、商品に関する情報を取得することができる。 In this way, the position detection device 1 synthesizes and displays the additional information of the product on the captured image in the vicinity of the shelf label by using the AR technology, so that the user US can easily identify each product. Furthermore, it is possible to easily and effortlessly obtain information on products such as the number of stocks of each product. For example, when a shelf label has a display, there is a technique for acquiring information about a product by displaying a two-dimensional code such as a QR (Quick Response) code (registered trademark) on the display. The two-dimensional code must be close enough to be read by the camera. According to this embodiment, it is possible to acquire information about the product without approaching the two-dimensional code to a readable distance.
続いて、位置検出システム１００における位置検出装置１及び発信デバイス２それぞれが実行する各処理の詳細について説明する。
図１１は、本実施形態による発信デバイスが実行する発信処理の手順を示すフローチャートである。
まず、制御部２１は、無線デバイス２２が発信の要求信号を受信したか否かを判定する（ステップＳ１０１）。要求信号を受信していない場合（ステップＳ１０１；Ｎｏ）、ステップＳ１０１の処理を再度実行する。
Subsequently, the details of each process executed by each of the position detection device 1 and the
FIG. 11 is a flowchart showing a procedure of transmission processing executed by the transmission device according to the present embodiment.
First, the
一方、要求信号を受信した場合（ステップＳ１０１；Ｙｅｓ）には、制御部２１は、自発信デバイス２に予め設定された発信パターンで存在信号を無線デバイス２２に無線により発信させる（ステップＳ１０２）。続いて、制御部２１は、自発信デバイス２に予め設定された発光パターンで発光デバイス２３を発光（点滅）させる（ステップＳ１０３）。その後、制御部２１は、要求信号を受信してから所定時間が経過したか否かを判定する（ステップＳ１０４）。所定時間が経過していない場合（ステップＳ１０４；Ｎｏ）には、ステップＳ１０２の処理に戻る。一方、所定時間が経過した場合（ステップＳ１０４；Ｙｅｓ）には、処理を終了する。
On the other hand, when the request signal is received (step S101; Yes), the
常時、発信デバイス２が発信や発光をすると、その電力の消費が増大する。そのため、本実施形態による発信デバイス２は、位置検出装置１から発信の要求信号の受信を受けて一定期間、発信及び発光をする。これにより、発信や発光を必要な期間にのみ行うことができるため、消費電力が増大してしまうことを抑えることができる。
When the transmitting
図１２は、本実施形態による位置検出装置が実行する位置検出処理の手順を示すフローチャートである。
まず、通信部１１１が、無線通信部１２から発信の要求信号を送信し、存在信号を受信することにより、周囲の発信デバイス２を探索する（ステップＳ２０１）。続いて、通信部１１１は、要求信号に応じて発信デバイス２が発信した存在情報に基づいてデバイスリストを生成する（ステップＳ２０２）。通信部１１１は、存在情報の発信パターンを解析し、解析した発信パターンをデバイスリストに追加する（ステップＳ２０３）。
FIG. 12 is a flowchart showing a procedure of the position detection process executed by the position detection device according to the present embodiment.
First, the
続いて、光源検出部１１２が、撮像部１３のカメラを起動し、商品の陳列された棚が撮像された結果である撮像画像を取得する（ステップ２０４）。光源検出部１１２は、撮像部１３による撮像画像に基づいて、発光情報を出力する発光デバイス２３が撮像されているか否かを検出する。その後、判定部１１３が、無線デバイス２２から受信した存在情報に対応する発光情報を記憶部１４を参照して特定し、特定された発光情報が光源検出部１１２によって検出されているか否かを判定する。そして、出力部１１４が、判定部１１３の判定結果に基づいて、光源が検出されている場合に、当該検出された光源の撮像画像上における位置に基づいて撮像画像上における対象物を特定する。そして、出力部１１４は、特定した対象物の位置及び外観形状に基づいてアウトライン情報を生成する（ステップＳ２０５）。出力部１１４は、生成したアウトライン情報と発光情報とを存在情報に対応付けてデバイスリストに追加する（ステップＳ２０６）。
Subsequently, the light
その後、出力部１１４は、表示部１５の表示画面上で撮像画像にアウトライン情報を重ねて表示する（ステップＳ２０７）。続いて、出力部１１４は、表示部１５の表示画面上で撮像画像に付加情報を重ねて表示する（ステップＳ２０８）。その後、出力部１１４は、表示画面上でアウトライン情報がタッチ入力されたか否かを判定する（ステップＳ２０９）。アウトライン情報がタッチ入力されていない場合（ステップＳ２０９；Ｎｏ）、ステップＳ２０９の処理を再度実行する。一方、アウトライン情報がタッチ入力された場合（ステップＳ２０９；Ｙｅｓ）、出力部１１４は、タッチされたアウトライン情報に対応する商品に関する詳細情報を表示画面上に表示する（ステップＳ２１０）。詳細情報は、他の装置（例えば、ＰＯＳシステムや外部のサーバ装置）から取得してもよいし、予め位置検出装置１が記憶していてもよい。或いは、位置検出装置１は、アウトライン情報がタッチ入力されると、付加情報を他の装置から取得することにより更新して表示してもよい。その後、処理を終了する。
After that, the
本実施形態による位置検出システム１００は、店舗に来店した客、及び店舗の担当者（店員）の双方が利用可能である。例えば、店舗の客は、自身の購入したい商品を探す際に利用することができる。
The
また、店舗の担当者は、棚卸業務に利用することができる。例えば、商品が保管された棚には、棚に商品を配置する位置が割り当てられており、その割り当てられた保管領域に商品が保管されている。そして、保管された領域（区域）毎に、発信デバイス２が取り付けられている。また、サーバには、在庫データベースが設けられている。在庫データベースには、商品毎に個数が記憶されている。店舗のＰＯＳと在庫データベースが連携していることで、在庫データベースは、販売に応じて在庫数が更新される。棚卸対象の店舗内において、店員は、位置検出装置１を利用していずれかの棚を撮像する。商品を保管する領域毎に設けられた発信デバイス２を撮像することで、画面上においてその発信デバイス２の近傍に、在庫数が表示されるので、店員はその在庫数と実際に棚に保管されている個数とが対応しているかを確認することができる。これにより、カメラで棚の発信デバイス２を撮像するだけでその在庫数が画面上において対応する位置に表示されるので、在庫数を簡単に把握することができる。例えば、店員は、在庫データベースをプリントアウトした票等を持って棚の近傍に行き、棚に置かれた商品が表のどこに記載されているかを探してから在庫数を確認するような煩雑な作業を行わなくてすむ。
棚卸をする対象領域は、店内（商品が陳列された領域）と、倉庫（バックヤード等）とがあり、少なくともいずれか一方で利用することができる。
In addition, the person in charge of the store can use it for inventory work. For example, a shelf on which products are stored is assigned a position for arranging the products on the shelves, and the products are stored in the allocated storage area. Then, a
The target area for inventory includes the inside of the store (the area where the products are displayed) and the warehouse (backyard, etc.), and at least one of them can be used.
このように、本実施形態によれば、位置検出システム１００は、対象物に取り付けられ、自発信デバイス２を識別する存在情報を無線によって発信する無線デバイス２２と、対象物に取り付けられ、自発信デバイス２を識別する発光情報を光によって出力する発光デバイス２３と、存在情報と発光情報とを対応付けて記憶する記憶部１４と、撮像部１３と、撮像結果の画像に基づいて、発光情報を出力する光源が撮像されている否かを検出する光源検出部１１２と、発信デバイス２から受信した存在情報に対応する発光情報を記憶部１４を参照して特定し、特定された発光情報が光源検出部１１２によって検出されているか否かを判定する判定部１１３と、判定部１１３の判定結果に基づいて、光源が検出されている場合に、検出された光源の画像上における位置に基づいて対象物に関する情報を出力する出力部１１４と、を有する。このような構成により、対象物の位置を精度良く特定することができる。
As described above, according to the present embodiment, the
例えば、ＧＮＳＳ（Ｇｌｏｂａｌ Ｎａｖｉｇａｔｉｏｎ Ｓａｔｅｌｌｉｔｅ Ｓｙｓｔｅｍ／全球測位衛星システム）を用いて位置を特定する場合には、位置推定の精度の誤差が大きい。例えば、数ｃｍの誤差であったとしても、商品が陳列された領域において、数ｃｍの誤差があると、本来特定したい商品ではなく、その商品に隣接する商品が対象の商品であると誤認する可能性が高い。また、棚には、上段から下段まで、複数段ある。ＧＮＳＳでは、高さ方向の位置を測定することが難しいため、商品の水平方向における位置を把握できたとしても、棚のどの段にあるかについては特定することが難しい。この実施形態によれば、高さ方向においても位置を特定することができ、位置特定の精度も向上することができる。また、画像上において対象物に対応する位置に情報を表示することができるため、拡張現実として、明確に視覚的に位置をナビゲーションすることができ、ユーザの利便性も向上する。 For example, when the position is specified by using GNSS (Global Navigation Satellite System), the error in the accuracy of position estimation is large. For example, even if there is an error of several centimeters, if there is an error of several centimeters in the area where the product is displayed, it is mistaken that the product adjacent to the product is the target product, not the product that is originally intended to be specified. Probability is high. In addition, there are a plurality of shelves from the upper to the lower. In GNSS, it is difficult to measure the position in the height direction, so even if the position in the horizontal direction of the product can be grasped, it is difficult to specify which stage of the shelf it is on. According to this embodiment, the position can be specified even in the height direction, and the accuracy of the position specification can be improved. Further, since the information can be displayed at the position corresponding to the object on the image, the position can be clearly and visually navigated as augmented reality, and the convenience of the user is improved.
また、棚札のように、対象物の外観が同じような物体である場合、対象物の外観を基に、個別に識別することが難しいが、この実施形態によれば、外観が類似する物体であっても、識別した上で、画像上において各種情報を表示することができる。 Further, when an object has a similar appearance such as a shelf label, it is difficult to individually identify the object based on the appearance of the object, but according to this embodiment, an object having a similar appearance. Even so, various information can be displayed on the image after being identified.
また、商品の棚への割り付けは、商品の入れ替えごとに変更されることがある。この実施形態によれば、商品の棚への割り付けが変更された場合であっても、変更された後の棚の割り付け情報を把握していなくても、対象物の位置を絞り込んだ上で、特定することができる。 In addition, the allocation of products to the shelves may change each time the products are replaced. According to this embodiment, even when the allocation of products to the shelves is changed, even if the allocation information of the shelves after the change is not grasped, the position of the object is narrowed down. Can be identified.
また、近距離無線通信に、ＢＬＥを用いることで、カメラで撮像しない状態で、見つけたい対象のデバイスが近くにあるか否か・どの領域にあるかを絞り込んだ上で、カメラで撮像することで、具体的な位置を特定することができる。
また、発信デバイス２が多数あり、対象物のそれぞれに異なる発光パターンを準備することが難しい場合には、発光パターンと存在情報との組み合わせを変えることで、発信デバイス２の数より発光パターンの数が少なかったとしても、発信デバイス２を識別することができる。
なお、発光素子のみ発信デバイス２に設けられる場合（ＢＬＥがない場合）には、光源の位置を撮像できれば位置を特定することができるが、探索する対象の領域が広い場合は、物体の裏側にあると、光源からの光が届かない。例えば倉庫では、沢山の棚があり、見つけたい対象物が別の棚の影にある場合には、その棚がどこにあるかを見つけなければならない。そのため、ＢＬＥを用いることで、物体の影にあったとしても、存在する領域を絞り込んだ上で、対象物を見つけることができる。
In addition, by using BLE for short-range wireless communication, it is possible to narrow down whether or not the target device to be found is nearby and in what area without taking an image with the camera, and then take an image with the camera. With, the specific position can be specified.
Further, when there are many transmitting
When only the light emitting element is provided in the transmitting device 2 (when there is no BLE), the position can be specified if the position of the light source can be imaged, but when the area to be searched is wide, it is on the back side of the object. If there is, the light from the light source does not reach. For example, in a warehouse, if you have many shelves and the object you want to find is in the shadow of another shelf, you have to find out where that shelf is. Therefore, by using BLE, even if it is in the shadow of an object, the object can be found after narrowing down the existing area.
また、この実施形態では、発信デバイス２と測定デバイスである位置検出装置１とが接続する必要がない。一般的には、ＢＬＥでは、発信デバイス２は、同時に１つの測定デバイスとしか接続できない。また、測定デバイスに関しても、同時に接続できる発信デバイス２の数に限りがある。そのため、発信デバイス２は、複数の測定デバイスが存在する場合に、１つの測定デバイスと接続してしまうと、他の測定デバイスとは同時期に接続することができない。この実施形態によれば、発信デバイス２と位置検出装置１とが接続することなく、発信デバイス２が取り付けられた対象物の位置を特定することができる。
Further, in this embodiment, it is not necessary to connect the transmitting
以上本発明の一実施形態について説明したが、本発明は、上記実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲において種々の変更を加えることが可能である。 Although one embodiment of the present invention has been described above, the present invention is not limited to the above embodiment, and various modifications can be made without departing from the spirit of the present invention.
例えば、上述した実施形態では、発信デバイス２の存在情報を信号の発信パターンとしているが、これに限らず、例えばデバイスＩＤ等、存在情報は発信デバイス２を識別できるものであればよい。
For example, in the above-described embodiment, the existence information of the
また、上述した実施形態では、位置検出装置１は、表示画面において対象物にアウトラインを表示することにより、対象物の位置を特定しているが、これに限らず、対象物を矢印等の図形で示す等、対象物の位置が判るような出力であればよい。 Further, in the above-described embodiment, the position detection device 1 identifies the position of the object by displaying an outline on the object on the display screen, but the present invention is not limited to this, and the object is represented by a graphic such as an arrow. The output may be such that the position of the object can be known, such as indicated by.
また、上述した実施形態では、発信デバイス２は、発信の要求信号に応じて発信及び発光をしているが、これに限らず、常時、発信及び発光をするようにしてもよい。
Further, in the above-described embodiment, the transmitting
また、位置検出装置１は、存在情報を受信することが出来ているが、発光デバイス２３から発光情報が得られていない（発光デバイス２３を撮像できていない）発信デバイス２について、表示画面上にリストを表示するようにしてもよい。これにより、通信圏内にある発信デバイス２がどれであるかを特定することができる。また、その発信デバイス２が特定できることで、対象物の一定範囲内に近づいていることを把握することができる。また、位置検出装置１は、例えば、その信号の受信強度に応じて、対象物までの距離を示す度合い（近い、やや近い、やや遠い、遠い、等）を表示するようにしてもよい。これにより、対象物までのおおまかな距離を把握することができる。
Further, the position detection device 1 can receive the existence information, but the
また、上述した実施形態において、表示画面上に表示された情報（例えばアウトライン情報等）に対する入力は、タッチパネルからタッチ入力する場合について説明したが、タッチパネル以外の入力デバイスを用いて入力されるようにしてもよい。例えば、位置検出装置１が、ヘッドマウントディスプレイなどの装着型のディスプレイ装置と、ジェスチャー入力デバイスとによって構成されるようにしてもよい。この場合、ヘッドマウントディスプレイに表示された情報に対し、ジェスチャー入力デバイスによって操作入力するようにしてもよい。
また、ヘッドマウントディスプレイの他に、網膜投影機器を用いるようにしてもよい。網膜投影機器は、眼鏡のように装着する機器であり、現実の物体はユーザの視覚を通じて認識され（ユーザの目で直接見る）るが、網膜投影機器の光源からの光（例えばレーザ光）をユーザの網膜上に直接投影することで、視覚によって認識することができるＡＲ（拡張現実）画像が、視認された現実の物体に重ねられるようにして表示されるものである。このような網膜投影機器とジェスチャー入力デバイスとによって位置検出装置１を構成し、ＡＲ画像に対しジェスチャー入力デバイスから操作入力するようにしてもよい。
また、表示画面上に表示された情報（例えばアウトライン情報等）に対する入力は、脳波を検出し、検出された脳波に応じて操作入力をするようにしてもよい。
Further, in the above-described embodiment, the case where the input for the information displayed on the display screen (for example, outline information) is touch-input from the touch panel has been described, but the input is made using an input device other than the touch panel. You may. For example, the position detection device 1 may be composed of a wearable display device such as a head-mounted display and a gesture input device. In this case, the information displayed on the head-mounted display may be operated and input by the gesture input device.
In addition to the head-mounted display, a retinal projection device may be used. A retinal projection device is a device that is worn like glasses, and a real object is recognized through the user's vision (directly viewed by the user's eyes), but the light from the light source of the retinal projection device (for example, laser light) is emitted. By projecting directly onto the user's retina, an AR (augmented reality) image that can be visually recognized is displayed so as to be superimposed on the visually recognized real object. The position detection device 1 may be configured by such a retinal projection device and a gesture input device, and the AR image may be operated and input from the gesture input device.
Further, as the input for the information displayed on the display screen (for example, outline information, etc.), the brain wave may be detected and the operation input may be performed according to the detected brain wave.
また、上述の実施形態において、存在情報（発信パターン）と発光情報（発光パターン）との対応関係を示すデバイス情報を記憶部１４に記憶する場合について説明した。しかし、デバイス情報をクラウドサーバ等に記憶しておき、必要なタイミングで位置検出装置１が、クラウドサーバから取得するようにしてもよい。
ここで、デバイス情報をクラウドサーバからから読み出すシステムである場合、このようなシステムを一般顧客等のユーザが利用しようとすると、デバイス情報をクラウドサーバから取得する際に、時間を要してしまうことも考えられる。
そのため、簡易紐付け機能として、発信パターンに合わせて、発光する様な紐付け機能を用いるようにしてもよい。つまり、デバイス情報を記憶領域に記憶していない場合において、当紐付けの関係を類推する機能として、発信パターンに同期する形で、発光しているかどうか等の対応関係を判定し、対応関係にあると判定された場合に、当紐付けルールで各パターンが紐づけられていると類推するようにしてもよい。より具体的に、例えば、発信開始から１秒、３秒、４秒、７秒経過したそれぞれの時点で発信するというサイクルを繰り返す発信パターンについて、この発信タイミングに同期するタイミングで、発光デバイスが発光しているか否かを判定部によって判定するようにしてもよい。そして、発信されるタイミングと、発光するタイミングが同期していると判定できた場合には、対応関係があると類推し、同期していないと判定された場合には、対応関係がないと類推するようにしてもよい。これにより、各環境の紐づけ情報を有することなく、紐付けを行うことも可能である。
このような対応関係判定機能、類推機能を用いる場合には、各店舗におけるデバイス情報を、位置検出装置１として用いられるモバイル機器に記憶しておく、あるいはクラウドサーバから取得する必要がない。このような構成は、例えば、コンビニやスーパーなどの店舗を限定しない、各地域のフランチャイズ店舗等を複数店舗利用する顧客にとって、有益である。
Further, in the above-described embodiment, the case where the device information indicating the correspondence between the existence information (transmission pattern) and the light emission information (light emission pattern) is stored in the
Here, in the case of a system that reads device information from a cloud server, if a user such as a general customer tries to use such a system, it takes time to acquire the device information from the cloud server. Is also possible.
Therefore, as a simple linking function, a linking function that emits light may be used according to the transmission pattern. That is, when the device information is not stored in the storage area, as a function of inferring the relationship of this association, the correspondence relationship such as whether or not the light is emitted is determined in synchronization with the transmission pattern, and the correspondence relationship is set. If it is determined that there is, it may be inferred that each pattern is linked by this linking rule. More specifically, for example, with respect to a transmission pattern that repeats a cycle of transmitting at each time point of 1 second, 3 seconds, 4 seconds, and 7 seconds after the start of transmission, the light emitting device emits light at a timing synchronized with this transmission timing. It may be determined by the determination unit whether or not it is done. Then, if it can be determined that the transmission timing and the light emission timing are synchronized, it is inferred that there is a correspondence relationship, and if it is determined that they are not synchronized, it is inferred that there is no correspondence relationship. You may try to do it. As a result, it is possible to perform the linking without having the linking information of each environment.
When such a correspondence relationship determination function and an analogy function are used, it is not necessary to store the device information in each store in the mobile device used as the position detection device 1 or to acquire the device information from the cloud server. Such a configuration is useful, for example, for customers who use a plurality of franchise stores in each region, which does not limit stores such as convenience stores and supermarkets.
なお、上述した位置検出装置１または発信デバイス２における各処理部の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより上述した各処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境（あるいは表示環境）を備えたＷＷＷシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。
A program for realizing the functions of each processing unit in the position detection device 1 or the
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。 Further, the program may be transmitted from a computer system in which this program is stored in a storage device or the like to another computer system via a transmission medium or by a transmission wave in the transmission medium. Here, the "transmission medium" for transmitting a program refers to a medium having a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line. Further, the above program may be for realizing a part of the above-mentioned functions. Further, a so-called difference file (difference program) may be used, which can realize the above-mentioned functions in combination with a program already recorded in the computer system.
１・・・位置検出装置
１１・・・制御部
１１１・・・通信部
１１２・・・光源検出部
１１３・・・判定部
１１４・・・出力部
１２・・・無線通信部
１３・・・撮像部
１４・・・記憶部
１５・・・表示部
２・・・発信デバイス
２１・・・制御部
２２・・・無線デバイス
２３・・・発光デバイス
１００・・・位置検出システム
1 ...
Claims (8)
前記対象物に取り付けられ、自発光デバイスを識別する発光情報を光によって出力する発光デバイスと、
前記存在情報と前記発光情報とを対応付けて記憶する記憶部と、
撮像部と、
撮像結果の画像に基づいて、発光情報を検出する光源検出部と、
前記無線デバイスから受信した存在情報に対応する発光情報を前記記憶部を参照して特定し、特定された発光情報が前記光源検出部によって検出されているか否かを判定する判定部と、
前記判定部の判定結果に基づいて、前記発光情報が検出されている場合に、当該検出された光源の前記画像上における位置に基づいて前記対象物に関する情報を出力する出力部と、
を有する位置検出システム。 A wireless device that is attached to an object and wirelessly transmits existence information that identifies its own wireless device,
A light emitting device that is attached to the object and outputs light emitting information that identifies the self-luminous device by light.
A storage unit that stores the existence information and the light emission information in association with each other,
Imaging unit and
A light source detection unit that detects light emission information based on the image of the imaging result,
A determination unit that identifies light emission information corresponding to the existence information received from the wireless device with reference to the storage unit, and determines whether or not the specified light emission information is detected by the light source detection unit.
An output unit that outputs information about the object based on the position of the detected light source on the image when the light emission information is detected based on the determination result of the determination unit.
Position detection system with.
前記無線デバイスは、前記要求信号を受信すると、前記存在情報を所定時間発信し、
前記発光デバイスは、前記無線デバイスが前記要求信号を受信すると、前記発光情報を所定時間出力する
請求項１に記載の位置検出システム。 It has a communication unit that transmits the request signal of the existence information, and has a communication unit.
When the wireless device receives the request signal, the wireless device transmits the existence information for a predetermined time.
The position detection system according to claim 1, wherein the light emitting device outputs the light emitting information for a predetermined time when the wireless device receives the request signal.
請求項１または請求項２に記載の位置検出システム。 The position detection system according to claim 1 or 2, wherein the output unit displays information about the object superimposed on the image.
請求項１から請求項３の何れか一項に記載の位置検出システム。 The position detection system according to any one of claims 1 to 3, wherein the information about the object specifies the position of the object on the image.
請求項１から請求項４の何れか一項に記載の位置検出システム。 From claim 1, the output unit identifies the object on the image based on the position of the detected light source on the image, and displays information about the object in the vicinity of the specified object. The position detection system according to any one of claims 4.
請求項１から請求項５の何れか一項に記載の位置検出システム。 The position detection system according to any one of claims 1 to 5, wherein the existence information is a transmission pattern for transmitting a signal.
前記存在情報と前記発光情報とを対応付けて記憶する記憶部と、
撮像部と、
撮像結果の画像に基づいて、発光情報を検出する光源検出部と、
前記デバイスから受信した存在情報に対応する発光情報を前記記憶部を参照して特定し、特定された発光情報が前記光源検出部によって検出されているか否かを判定する判定部と、
前記判定部の判定結果に基づいて、前記発光情報が検出されている場合に、当該検出された光源の前記画像上における位置に基づいて前記対象物に関する情報を出力する出力部と、
を有する位置検出装置。 A communication unit that is attached to an object, wirelessly transmits existence information that identifies its own device, and receives the existence information from a device that outputs light emission information that identifies its own device by light.
A storage unit that stores the existence information and the light emission information in association with each other,
Imaging unit and
A light source detection unit that detects light emission information based on the image of the imaging result,
A determination unit that identifies light emission information corresponding to the existence information received from the device with reference to the storage unit, and determines whether or not the specified light emission information is detected by the light source detection unit.
An output unit that outputs information about the object based on the position of the detected light source on the image when the light emission information is detected based on the determination result of the determination unit.
Position detector with.
前記対象物に取り付けられた発光デバイスが、自発光デバイスを識別する発光情報を光によって出力し、
光源検出部が、撮像結果の画像に基づいて、発光情報を検出し、
判定部が、前記無線デバイスから受信した存在情報に対応する発光情報を、前記存在情報と前記発光情報とを対応付けて記憶する記憶部を参照して特定し、特定された発光情報が前記光源検出部によって検出されているか否かを判定し、
出力部が、前記判定部の判定結果に基づいて、前記発光情報が検出されている場合に、当該検出された光源の前記画像上における位置に基づいて前記対象物に関する情報を出力する、
位置検出方法。 A wireless device attached to an object wirelessly transmits presence information that identifies its own wireless device.
The light emitting device attached to the object outputs light emitting information for identifying the self-luminous device by light.
The light source detection unit detects the light emission information based on the image of the imaging result, and
The determination unit identifies light emission information corresponding to the existence information received from the wireless device with reference to a storage unit that stores the existence information and the light emission information in association with each other, and the specified light emission information is the light source. It is determined whether or not it is detected by the detection unit, and it is determined.
When the light emission information is detected based on the determination result of the determination unit, the output unit outputs information about the object based on the position of the detected light source on the image.
Position detection method.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019212409A JP7404809B2 (en) | 2019-11-25 | 2019-11-25 | Position detection system, position detection device and position detection method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019212409A JP7404809B2 (en) | 2019-11-25 | 2019-11-25 | Position detection system, position detection device and position detection method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2021087029A true JP2021087029A (en) | 2021-06-03 |
| JP7404809B2 JP7404809B2 (en) | 2023-12-26 |
Family
ID=76088561
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019212409A Active JP7404809B2 (en) | 2019-11-25 | 2019-11-25 | Position detection system, position detection device and position detection method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7404809B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023117105A1 (en) * | 2021-12-23 | 2023-06-29 | Telefonaktiebolaget Lm Ericsson (Publ) | Method and a communication device for detecting another communication device |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010217093A (en) * | 2009-03-18 | 2010-09-30 | Kddi Corp | Positioning system |
| JP2011090646A (en) * | 2009-10-26 | 2011-05-06 | Seiko Instruments Inc | Information display system, management device, and terminal device |
| WO2014076919A1 (en) * | 2012-11-15 | 2014-05-22 | パナソニック株式会社 | Information-providing method and information-providing device |
| WO2017013811A1 (en) * | 2015-07-22 | 2017-01-26 | ビーコア株式会社 | Image processing system, light emitting device, image processing device, image processing method, light emitting method, and program |
-
2019
- 2019-11-25 JP JP2019212409A patent/JP7404809B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010217093A (en) * | 2009-03-18 | 2010-09-30 | Kddi Corp | Positioning system |
| JP2011090646A (en) * | 2009-10-26 | 2011-05-06 | Seiko Instruments Inc | Information display system, management device, and terminal device |
| WO2014076919A1 (en) * | 2012-11-15 | 2014-05-22 | パナソニック株式会社 | Information-providing method and information-providing device |
| WO2017013811A1 (en) * | 2015-07-22 | 2017-01-26 | ビーコア株式会社 | Image processing system, light emitting device, image processing device, image processing method, light emitting method, and program |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023117105A1 (en) * | 2021-12-23 | 2023-06-29 | Telefonaktiebolaget Lm Ericsson (Publ) | Method and a communication device for detecting another communication device |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7404809B2 (en) | 2023-12-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5280590B2 (en) | Information processing system, information processing method, and program | |
| WO2018159736A1 (en) | Information processing device, terminal device, information processing method, information output method, customer service assistance method, and recording medium | |
| US20170300926A1 (en) | System and method for surveying display units in a retail store | |
| JP6512283B2 (en) | Information processing apparatus and order support method | |
| US9984485B2 (en) | Virtual try-on apparatus, virtual try-on method, and computer program product | |
| US20160042564A1 (en) | Virtual try-on apparatus, virtual try-on method, and computer program product | |
| US10360613B2 (en) | System and method for monitoring display unit compliance | |
| JPWO2017085771A1 (en) | Checkout support system, checkout support program, and checkout support method | |
| JP2015141572A (en) | Merchandise information providing method, merchandise information providing device, and merchandise information providing program | |
| US20110050900A1 (en) | Image processing apparatus, wearable image processing apparatus, and method of controlling image processing apparatus | |
| US20160042565A1 (en) | Virtual try-on apparatus, virtual try-on system, virtual try-on method, and computer program product | |
| JP6076304B2 (en) | Article information providing apparatus, article information providing system, article information providing method, and article information providing program | |
| JP2015517137A (en) | Method for assisting in positioning an item in a storage position | |
| JP2017207999A (en) | Control system, management device, and control method for control system | |
| JP2014186552A (en) | Sales promotion information display system and sales promotion information display method | |
| JP7347480B2 (en) | Information processing device, information processing method and program | |
| JP6874335B2 (en) | Information processing system and display device | |
| JP7404809B2 (en) | Position detection system, position detection device and position detection method | |
| CN109889655A (en) | Mobile device and the method for establishing Radio Link | |
| US20170300927A1 (en) | System and method for monitoring display unit compliance | |
| JP2020205098A (en) | Electronic apparatus system and transmission method | |
| JP2021068314A (en) | Provision support system, provision support method, route guidance system, and route guidance method | |
| JP2019061430A (en) | Image forming apparatus and system | |
| WO2023112519A1 (en) | Wearable device, information processing method, information processing program, and information providing system | |
| WO2021176552A1 (en) | User terminal and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221026 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231020 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231114 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231127 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7404809 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |