JP6927936B2 - System and method for estimating the mounting position of the terminal in a person - Google Patents

System and method for estimating the mounting position of the terminal in a person Download PDF

Info

Publication number
JP6927936B2
JP6927936B2 JP2018173188A JP2018173188A JP6927936B2 JP 6927936 B2 JP6927936 B2 JP 6927936B2 JP 2018173188 A JP2018173188 A JP 2018173188A JP 2018173188 A JP2018173188 A JP 2018173188A JP 6927936 B2 JP6927936 B2 JP 6927936B2
Authority
JP
Japan
Prior art keywords
person
terminal
transmitter
area
mounting position
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018173188A
Other languages
Japanese (ja)
Other versions
JP2020046235A (en
Inventor
尚志 星
尚志 星
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2018173188A priority Critical patent/JP6927936B2/en
Publication of JP2020046235A publication Critical patent/JP2020046235A/en
Application granted granted Critical
Publication of JP6927936B2 publication Critical patent/JP6927936B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Position Fixing By Use Of Radio Waves (AREA)

Description

本発明は、近距離無線通信方式の電波を用いて、人物の位置を推定する技術に関する。 The present invention relates to a technique for estimating the position of a person using radio waves of a short-range wireless communication system.

従来、室内空間における人物の位置を、タグデバイスから発信された近距離無線通信方式の電波によって推定する技術がある。
室内空間の至る所に、広報パケットを発信するタグデバイスを配置する。その室内を、端末(例えばスマートフォン)を所持した人物が移動する。端末は、BLEのスキャナ機能によって、各タグデバイスに接近する度に、その広報パケットを受信する。このとき、端末は、受信した広報パケットに含まれるビーコンIDやその受信強度(RSSI:Received Signal Strength Indication)を取得し、アクセスネットワークを介して、位置推定装置へ送信する。
Conventionally, there is a technique of estimating the position of a person in an indoor space by a short-range wireless communication type radio wave transmitted from a tag device.
Tag devices that send public relations packets are placed throughout the indoor space. A person holding a terminal (for example, a smartphone) moves in the room. The terminal receives the publicity packet each time it approaches each tag device by the scanner function of BLE. At this time, the terminal acquires the beacon ID included in the received public relations packet and its reception strength (RSSI: Received Signal Strength Indication) and transmits it to the position estimation device via the access network.

位置推定装置は、端末から受信したビーコンIDや受信強度によって、その端末を所持する人物が、どこに位置しているかを推定する。具体的には、複数の所定位置毎に、学習フェーズとして、複数のタグデバイスからのRSSIの組を事前に計測した「フィンガープリント」を用いる。このフィンガープリントとしてのタグデバイス毎の受信強度群と、現時点で受信したクエリとなるタグデバイス単位の受信強度群とを比較する。そして、最も類似するフィンガープリントの受信強度群における参照点位置を、端末を所持する人物の位置と推定する。 The position estimation device estimates where the person who owns the terminal is located based on the beacon ID and the reception intensity received from the terminal. Specifically, as a learning phase for each of a plurality of predetermined positions, a "fingerprint" in which a set of RSSIs from a plurality of tag devices is measured in advance is used. The reception strength group for each tag device as a fingerprint is compared with the reception strength group for each tag device that is the query received at the present time. Then, the position of the reference point in the reception intensity group of the most similar fingerprint is estimated to be the position of the person who owns the terminal.

他の従来技術として、ユーザの行動コンテキストの把握のために、室内空間における人物の位置を、加速度センサ等によって推定する歩行者自律航行(PDR:Pedestrian Dead Reckoning)の技術もある。
その中でも、例えば人物が腰回りのどの箇所に、端末を装着しているかを推定する技術がある(例えば非特許文献1参照)。この技術によれば、端末に搭載された加速度センサを用いて、歩行によって加速度・角速度のデータを収集し、機械学習によって識別する。
具体的には、人物の歩行に使用する各関節の角度と、加速度センサの装着位置との関係を表す関節角表データを、事前に作成する。これは、人物の腰部又は腹部に装着した加速度センサから送信される加速度データを収集し、その加速度データを平滑化して最大値及び最小値を検出する。そして、2階の時間積分を行って事前に作成したテーブルに近い位置を、加速度センサの接地点に対する位置として算出する。
As another conventional technique, there is also a pedestrian dead reckoning (PDR) technique in which the position of a person in an indoor space is estimated by an acceleration sensor or the like in order to grasp the action context of the user.
Among them, for example, there is a technique for estimating where a person is wearing a terminal around his / her waist (see, for example, Non-Patent Document 1). According to this technology, the acceleration sensor mounted on the terminal is used to collect acceleration / angular velocity data by walking and identify by machine learning.
Specifically, joint angle table data showing the relationship between the angle of each joint used for walking of a person and the mounting position of the acceleration sensor is created in advance. It collects acceleration data transmitted from an acceleration sensor worn on the waist or abdomen of a person, smoothes the acceleration data, and detects maximum and minimum values. Then, the position close to the table created in advance by performing the time integration of the second floor is calculated as the position with respect to the grounding point of the acceleration sensor.

また、他の従来技術として、店内を行動する人物の動線を解析する技術がある(例えば特許文献1参照)。この技術によれば、動線解析装置が店内を撮影した映像に含まれる人物を追跡することにより、当該移動体に対応する動線を生成する。 Further, as another conventional technique, there is a technique of analyzing the flow line of a person who acts in the store (see, for example, Patent Document 1). According to this technique, a flow line analysis device tracks a person included in an image of the inside of a store to generate a flow line corresponding to the moving object.

特開2009−258782号公報Japanese Unexamined Patent Publication No. 2009-258782

「加速度・角速度を用いたセンサデバイスの装着位置・方向推定手法」、情報処理学会第74回全国大会 6X-6、[online]、[平成30年9月10日検索]、インターネット<URL:https://ipsj.ixsq.nii.ac.jp/ej/?action=repository_action_common_download&item_id=110210&item_no=1&attribute_id=1&file_no=1>"Method of estimating mounting position / direction of sensor device using acceleration / angular velocity", IPSJ 74th National Convention 6X-6, [online], [Search on September 10, 2018], Internet <URL: https //ipsj.ixsq.nii.ac.jp/ej/? action=repository_action_common_download & item_id = 110210 & item_no = 1 & attribute_id = 1 & file_no = 1>

端末を所持する人物が、室内の同じ位置にいても、人物が装着する端末の位置によっては、タグデバイスから受信する電波強度が異なるという現象がある。端末からみて、タグデバイスからの受信強度が、見通しが良い状態なのか、遮蔽物が介在した状態なのかを認識することはできない。
1つの原因として、端末を装着する人物自身が、タグデバイスから受信する電波に対する遮蔽物となる場合がある。例えば、人物が端末を左側に装着している場合、見通しの良い左側のタグデバイスからの電波強度は高くても、人物自身が遮蔽物となった右側のタグデバイスからの電波強度は低くなる。結果的に、推定される人物の位置も、大きく誤る可能性がある。
Even if the person holding the terminal is in the same position in the room, there is a phenomenon that the radio wave intensity received from the tag device differs depending on the position of the terminal worn by the person. From the terminal's point of view, it is not possible to recognize whether the reception strength from the tag device is in a state of good visibility or in a state of intervening a shield.
One cause is that the person wearing the terminal itself acts as a shield against radio waves received from the tag device. For example, when a person wears the terminal on the left side, the radio field strength from the tag device on the left side with good visibility is high, but the radio field strength from the tag device on the right side where the person himself / herself is a shield is low. As a result, the estimated position of the person can also be significantly wrong.

しかしながら、前述した非特許文献1によって人物における端末の装着位置を推定しようとしても、事前学習が必要であると共に、歩行していないと識別できないという問題点がある。また、非特許文献1は、人物の動き(歩く、走る、階段上る、階段下る)に影響を与えるであろう、腰周辺の装着位置を推定しようとしたものである。
これに対し、本願の発明者は、電波の受信強度に影響を与えるであろう、人物における端末の装着位置を推定する必要があると考えた。
However, even if an attempt is made to estimate the wearing position of a terminal in a person according to the above-mentioned Non-Patent Document 1, there is a problem that prior learning is required and it cannot be identified unless the person is walking. In addition, Non-Patent Document 1 attempts to estimate a mounting position around the waist, which will affect the movement of a person (walking, running, going up stairs, going down stairs).
On the other hand, the inventor of the present application considered that it is necessary to estimate the mounting position of the terminal in a person, which will affect the reception intensity of radio waves.

そこで、本発明は、人物における端末の装着位置を推定するシステム及び方法を提供することを目的とする。 Therefore, an object of the present invention is to provide a system and a method for estimating a mounting position of a terminal in a person.

本発明によれば、複数のエリアそれぞれに対応した異なる発信機ID(IDentifier)を含む広報パケットを発信する発信機と、
人物に装着された状態で、広報パケットを受信する端末と、
各エリアに人物動線が存在する時間帯を検知する人物検知装置と、
端末から広報パケットの発信機ID、端末ID及び受信強度を取得し、エリアに存在する人物動線の人物における当該端末の装着位置を推定する装着位置推定装置と
を有するシステムであって、
装着位置推定装置は、
エリア毎に、検索対象となる複数の発信機の発信機IDを登録したマップテーブルと、
当該エリアに人物動線が存在する時間帯に、当該エリアにおける発信機IDの広報パケットを受信した対象端末と当該人物動線とを対応付ける人物動線対応付け手段と、
対象端末について、マップテーブルを用いて当該エリアに対応する発信機IDを検索する発信機ID検索手段と、
当該エリアに存在する人物は、当該対象端末を、受信強度が相対的に高い発信機側の位置に装着していると推定する装着位置推定手段と
を有することを特徴とする。
According to the present invention, a transmitter that transmits a public relations packet including a different transmitter ID (IDentifier) corresponding to each of a plurality of areas, and a transmitter.
A terminal that receives public relations packets while attached to a person,
A person detection device that detects the time zone when a person flow line exists in each area,
It is a system having a mounting position estimation device that acquires a transmitter ID, a terminal ID, and a reception strength of a public relations packet from a terminal and estimates the mounting position of the terminal in a person on a person flow line existing in the area.
The mounting position estimation device is
A map table in which the transmitter IDs of multiple transmitters to be searched are registered for each area,
A person flow line associating means for associating a target terminal that has received a publicity packet of a transmitter ID in the area with the person flow line during a time zone in which the person flow line exists in the area.
For the target terminal, a transmitter ID search means for searching the transmitter ID corresponding to the area using the map table, and
A person existing in the area is characterized by having a mounting position estimating means for presuming that the target terminal is mounted at a position on the transmitter side having a relatively high reception intensity.

本発明のシステムにおける他の実施形態によれば、
人物検知装置は、当該エリアで検知された人物の人数が、所定数以下である場合にのみ、時間帯を検知することも好ましい。
According to other embodiments in the system of the present invention
It is also preferable that the person detection device detects the time zone only when the number of people detected in the area is equal to or less than a predetermined number.

本発明のシステムにおける他の実施形態によれば、
装着位置推定装置の人物動線対応付け手段について、対象端末は、当該エリアにおける発信機IDの広報パケットを最も多く受信した端末、又は、当該エリアにおける発信機IDの広報パケットを相対的に高い受信強度で受信した端末である
ことも好ましい。
According to other embodiments in the system of the present invention
Regarding the person flow line associating means of the mounting position estimation device, the target terminal receives the terminal that received the most publicity packets of the transmitter ID in the area, or receives the publicity packets of the transmitter ID in the area relatively high. It is also preferable that the terminal receives the signal with high intensity.

本発明のシステムにおける他の実施形態によれば、
撮影装置は、各エリアを撮影するカメラ、又は、各エリアに光波を照射するLIDER(light detection and ranging)である
ことも好ましい。
According to other embodiments in the system of the present invention
It is also preferable that the photographing device is a camera that photographs each area or a lidar (light detection and ranging) that irradiates each area with a light wave.

本発明のシステムにおける他の実施形態によれば、
人物検知装置は、カウンタを挟んで隣接する両方のエリアに人物が検出され、当該エリアにおける人物が当該カウンタに前向きで存在する時間帯を検知し、
装着位置推定装置の装着位置推定手段は、当該対象端末の装着位置として、人物の前向きに対して複数の側を推定する
ことも好ましい。
According to other embodiments in the system of the present invention
The person detection device detects a person in both areas adjacent to each other across the counter, and detects a time zone in which the person in the area is positively present in the counter.
It is also preferable that the mounting position estimating means of the mounting position estimating device estimates a plurality of sides with respect to the forward direction of the person as the mounting position of the target terminal.

本発明のシステムにおける他の実施形態によれば、
装着位置推定装置の装着位置推定手段について、複数の側は、人物を中心に等角度に位置する2つ以上の側である
ことも好ましい。
According to other embodiments in the system of the present invention
Regarding the mounting position estimating means of the mounting position estimating device, it is also preferable that the plurality of sides are two or more sides located at equal angles with respect to the person.

本発明のシステムにおける他の実施形態によれば、
端末は、角速度センサを搭載し又は接続し、
人物検知装置は、検知した人物の前向きを、端末から受信した角速度に基づいて補正する
ことも好ましい。
According to other embodiments in the system of the present invention
The terminal is equipped with or connected to an angular velocity sensor
It is also preferable that the person detection device corrects the forward orientation of the detected person based on the angular velocity received from the terminal.

本発明のシステムにおける他の実施形態によれば、
端末は、角速度を検知する角速度センサ又は、加速度を検知する加速度センサを搭載し又は接続し、
人物検知装置は、端末から受信した角速度又は加速度が所定閾値以上変化した場合、機能を停止する
ことも好ましい。
According to other embodiments in the system of the present invention
Terminal angular velocity sensor detects an angular velocity, or equipped with an acceleration sensor for detecting acceleration or connected,
It is also preferable that the person detection device stops functioning when the angular velocity or acceleration received from the terminal changes by a predetermined threshold value or more.

本発明のシステムにおける他の実施形態によれば、
発信機及び端末は、BLE(Bluetooth Low Energy)若しくはiBeacon(登録商標)又は無線LANの同一の近距離無線規格に基づくデバイスであり、
広報パケットに含まれる発信機IDは、Advertising Packetに含まれるビーコンIDである
ことも好ましい。
According to other embodiments in the system of the present invention
The transmitter and terminal are devices based on the same short-range wireless standard of BLE (Bluetooth Low Energy) or iBeacon (registered trademark) or wireless LAN.
It is also preferable that the transmitter ID included in the public relations packet is a beacon ID included in the Advertising Packet.

本発明によれば、複数のエリアそれぞれに対応した異なる発信機IDを含む広報パケットを発信する発信機と、
人物に装着された状態で、広報パケットを受信する端末と、
各エリアに人物動線が存在する時間帯を検知する人物検知装置と、
端末から広報パケットの発信機ID、端末ID及び受信強度を取得し、エリアに存在する人物動線の人物における当該端末の装着位置を推定する装着位置推定装置と
を有するシステムの装着位置推定方法であって、
装着位置推定装置は、
エリア毎に、検索対象となる複数の発信機の発信機IDを登録したマップテーブルを有し、
当該エリアに人物動線が存在する時間帯に、当該エリアにおける発信機IDの広報パケットを受信した対象端末と当該人物動線とを対応付ける第1のステップと、
対象端末について、マップテーブルを用いて当該エリアに対応する発信機IDを検索する第2のステップと、
当該エリアに存在する人物は、当該対象端末を、受信強度が相対的に高い発信機側の位置に装着していると推定する第3のステップと
を有することを特徴とする。
According to the present invention, a transmitter that transmits a public relations packet including different transmitter IDs corresponding to each of a plurality of areas, and a transmitter.
A terminal that receives public relations packets while attached to a person,
A person detection device that detects the time zone when a person flow line exists in each area,
A method of estimating the mounting position of a system having a mounting position estimation device that acquires the transmitter ID, terminal ID, and reception strength of a public relations packet from a terminal and estimates the mounting position of the terminal in a person with a person flow line existing in the area. There,
The mounting position estimation device is
Each area has a map table in which the transmitter IDs of a plurality of transmitters to be searched are registered.
The first step of associating the target terminal that received the publicity packet of the transmitter ID in the area with the person flow line during the time zone when the person flow line exists in the area, and
For the target terminal, the second step of searching for the transmitter ID corresponding to the area using the map table, and
A person present in the area is characterized by having a third step of presuming that the target terminal is attached to a position on the transmitter side where the reception intensity is relatively high.

本発明のシステム及び方法によれば、人物における端末の装着位置を推定することができる。 According to the system and method of the present invention, it is possible to estimate the mounting position of the terminal in a person.

本発明におけるシステム構成図である。It is a system block diagram in this invention. 人物が存在する室内空間を表すフロアマップである。It is a floor map showing the indoor space where people exist. 人物動線対応付け部の処理を表す説明図である。It is explanatory drawing which shows the process of the person flow line correspondence part. 発信機ID検索部及び装着位置推定部の処理を表す説明図である。It is explanatory drawing which shows the process of the transmitter ID search unit and the mounting position estimation unit. 端末の装着位置に基づく電波の受信強度を表す説明図である。It is explanatory drawing which shows the reception strength of the radio wave based on the mounting position of a terminal. 端末の装着位置に基づく電波の受信強度の矛盾を表す説明図である。It is explanatory drawing which shows the contradiction of the reception intensity of the radio wave based on the mounting position of a terminal. 発信機ID毎の受信強度を表すグラフである。It is a graph which shows the reception strength for each transmitter ID.

以下、本発明の実施の形態について、図面を用いて詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図1は、本発明におけるシステム構成図である。 FIG. 1 is a system configuration diagram according to the present invention.

図1によれば、店舗の室内で、店員が、カウンタを介して顧客に商品説明をしている状況が表されている。ここで、行動認識対象となる人物が店員である場合、その店員における端末の装着位置を推定することによって、その店員に対する近距離無線通信方式の電波を用いた行動認識の精度を高めることができる。 According to FIG. 1, a situation is shown in which a clerk is explaining a product to a customer via a counter inside the store. Here, when the person to be action-recognized is a clerk, the accuracy of the action recognition using the radio wave of the short-range wireless communication method for the clerk can be improved by estimating the mounting position of the terminal in the clerk. ..

図1のシステムによれば、装着位置推定装置1と、発信機2と、端末3と、人物検知装置4と、撮影装置5とを有する。 According to the system of FIG. 1, it has a mounting position estimation device 1, a transmitter 2, a terminal 3, a person detection device 4, and a photographing device 5.

[発信機2]
発信機2は、複数のエリアそれぞれに設置され、エリア毎に異なる発信機ID(IDentifier)を含む広報パケットを発信する。
発信機2は、近距離無線通信方式のタグデバイスであって、広報パケット(Advertising Packet)を常時発信している。近距離無線通信方式としては、例えばBluetooth(登録商標)やZigbee(登録商標)、又は、無線LANが用いられる。その中でも、特に電波の到達範囲が狭いBLE(Bluetooth Low Energy)」が適する。低消費電力版Bluetoothとして、1/3程度の電力で動作するために、ボタン電池であっても数年稼働する。また、広報パケットは、例えば100ms(規格として20ms〜10.24s)の間隔で、周期的に送信される。尚、Apple社のiOS7以降のOSに基づくiBeacon(登録商標)も、BLEに基づくものである。
BLE規格によれば、発信機2は「advertiser」として機能し、広報パケットには、発信機IDとして「ビーコンID」が含められる。ビーコンIDは、タグモジュールを識別するUUID(Universally Unique Identifier)を含む。
[Transmitter 2]
The transmitter 2 is installed in each of a plurality of areas, and transmits a public relations packet including a different transmitter ID (IDentifier) for each area.
The transmitter 2 is a tag device of a short-range wireless communication system, and constantly transmits an Advertising Packet. As the short-range wireless communication method, for example, Bluetooth (registered trademark), Zigbee (registered trademark), or wireless LAN is used. Among them, "BLE (Bluetooth Low Energy)", which has a narrow range of radio waves, is particularly suitable. As a low power consumption version of Bluetooth, it operates with about 1/3 of the power, so even a button battery can operate for several years. In addition, the public relations packet is periodically transmitted at intervals of, for example, 100 ms (20 ms to 10.24 s as a standard). In addition, iBeacon (registered trademark) based on Apple's iOS 7 or later OS is also based on BLE.
According to the BLE standard, the transmitter 2 functions as an "advertiser", and the public relations packet includes a "beacon ID" as the transmitter ID. The beacon ID includes a UUID (Universally Unique Identifier) that identifies the tag module.

図2は、人物が存在する室内空間を表すフロアマップである。 FIG. 2 is a floor map showing an indoor space in which a person exists.

図2によれば、店舗の室内空間は、複数のエリアに区分されている。例えば、カウンタ毎に、店員が滞在(着席)するエリアSと、顧客が滞在(着席)するエリアCとが分割されている。そして、行動認識対象が店員であるとすると、各エリアSに、人物が存在しているか否かが認識される。 According to FIG. 2, the interior space of the store is divided into a plurality of areas. For example, the area S where the clerk stays (seats) and the area C where the customer stays (seats) are divided for each counter. Then, assuming that the behavior recognition target is a clerk, it is recognized whether or not a person exists in each area S.

各エリアのカウンタの上(又は下)に、発信機2が配置されている。
また、エリアとビーコンIDとを対応付けた「マップテーブル」が既定されている。
図2によれば、マップテーブルには、エリアID毎に、少なくとも2つの発信機から発信されるビーコンIDが対応付けられている。
以下では、人物が自身の左側又は右側に、端末3を装着している場合を例として説明する。
・当該エリアに人物が滞在する場合に当該人物の左側となる発信機のビーコンID
・当該エリアに人物が滞在する場合に当該人物の右側となる発信機のビーコンID
尚、装着位置は、左右の2つの側に限られることなく、前後左右の4つの側や、人物の前向きに対して複数の側(例えば、人物を中心に等角度に位置する側)としてもよい。
図2によれば、例えばエリアS4には、人物が滞在する場合に当該人物の左側となる発信機のビーコンID:b4と、当該人物の右側となる発信機のビーコンID:b5とが対応付けられている。
The transmitter 2 is arranged above (or below) the counter in each area.
In addition, a "map table" that associates the area with the beacon ID is defined.
According to FIG. 2, the map table is associated with beacon IDs transmitted from at least two transmitters for each area ID.
In the following, a case where a person wears the terminal 3 on his / her left side or right side will be described as an example.
-Beacon ID of the transmitter on the left side of the person when the person stays in the area
-Beacon ID of the transmitter on the right side of the person when the person stays in the area
The mounting position is not limited to the two left and right sides, but may be four sides in front, back, left and right, or a plurality of sides (for example, sides located at equal angles with respect to the person). good.
According to FIG. 2, for example, when a person stays in the area S4, the beacon ID: b4 of the transmitter on the left side of the person and the beacon ID: b5 of the transmitter on the right side of the person are associated with each other. Has been done.

[端末3]
端末3は、人物に装着された状態で、広報パケットを受信する。端末3は、行動認識対象の人物である店員に所持された、例えばスマートフォンのようなものである。店員が、端末3を装着した状態で室内を移動することによって、端末3は、近接した発信機2から発信された広報パケットを受信する。即ち、端末3は、例えばBLE規格におけるスキャナとして機能する。
端末3は、その広報パケットに含まれるビーコンID(発信機ID)及び受信強度を取得する。そして、端末3は、広報パケットを受信する毎に記録された「受信時刻」「端末ID」「ビーコンID」「受信強度」を含むデータを、装着位置推定装置1へ送信する。
[Terminal 3]
The terminal 3 receives the public relations packet while being attached to the person. The terminal 3 is like, for example, a smartphone possessed by a clerk who is a person to be recognized for behavior. When the clerk moves around the room with the terminal 3 attached, the terminal 3 receives the public relations packet transmitted from the nearby transmitter 2. That is, the terminal 3 functions as, for example, a scanner in the BLE standard.
The terminal 3 acquires the beacon ID (transmitter ID) and reception strength included in the publicity packet. Then, the terminal 3 transmits data including the “reception time”, “terminal ID”, “beacon ID”, and “reception intensity” recorded each time the public relations packet is received to the mounting position estimation device 1.

他の実施形態として、端末3は、角速度センサ又は加速度センサを搭載し又は接続したものであってもよい。
端末3を所持した人物にとって、急に向きを変えた場合、大きい値の角速度が検知される。角速度とは、単位時間あたりの回転角である。人物が端末3を装着した状態で、人物が向きを変えたということは、端末3によって検知される各発信機からの広報パケットの受信強度も変化することとなる。
また、端末3を所持した人物が、着席しているときには加速度の変化が小さいのに対して、急に立ち上がった場合、大きい値の加速度が検知される。人物が端末3を装着した状態で、人物が急に立ち上がったということは、端末3によって検知される各発信機からの広報パケットの受信強度も変化することとなる。
端末3は、更に、角速度センサ又は加速度センサの計測値を、広報パケットを受信した際に送信するデータに含めて、装着位置推定装置1へ送信するものであってもよい。
As another embodiment, the terminal 3 may be equipped with or connected to an angular velocity sensor or an acceleration sensor.
For the person who owns the terminal 3, when the direction is suddenly changed, a large angular velocity is detected. Angular velocity is the angle of rotation per unit time. When a person changes direction while the person is wearing the terminal 3, the reception strength of the public relations packet from each transmitter detected by the terminal 3 also changes.
Further, when the person holding the terminal 3 is seated, the change in acceleration is small, whereas when the person suddenly stands up, a large value of acceleration is detected. When a person suddenly stands up with the terminal 3 attached, the reception strength of the public relations packet from each transmitter detected by the terminal 3 also changes.
The terminal 3 may further include the measured values of the angular velocity sensor or the acceleration sensor in the data transmitted when the publicity packet is received, and transmit the measured values to the mounting position estimation device 1.

[撮影装置5]
撮影装置5は、エリア周辺の映像を撮影する。撮影装置5としては、例えば、一般的なカメラであってもよいし、レーザによる画像を検出するLIDAR(light detection and ranging)であってもよい。
例えば全方位カメラの場合、天井などに設置され、室内を撮影し、その全方位画像を人物検知装置4へ送信する。
[Photographing device 5]
The photographing device 5 captures an image around the area. The photographing device 5 may be, for example, a general camera or a lidar (light detection and ranging) that detects an image by a laser.
For example, in the case of an omnidirectional camera, it is installed on the ceiling or the like, takes a picture of the room, and transmits the omnidirectional image to the person detection device 4.

[人物検知装置4]
人物検知装置4は、撮影装置5によって検知された映像に基づいて、人物の動線を解析する。映像内に映り込む人物を検知し、映像上の人物検出座標と撮影領域の物理空間上の座標系とから、人物の位置を検出する。そして、その人物が移動した位置を結ぶ動線に、任意の動線IDを付与し、その動線IDの人物を追跡する。
そして、人物検知装置4は、エリア毎に、人物動線が存在する時間帯を検知する。その人物動線が存在する「エリアID」及び「時間帯」と、その人物の「動線ID」とを、装置位置推定装置1へ送信する。
例えば図2によれば、エリアS3にはその時間帯に人物動線が存在していないために「人が不在」と検知され、エリアS4にはその時間帯に人物動線が存在しているために「人が存在」と検知される。
[People detection device 4]
The person detection device 4 analyzes the flow line of a person based on the image detected by the photographing device 5. The person reflected in the image is detected, and the position of the person is detected from the person detection coordinates on the image and the coordinate system in the physical space of the shooting area. Then, an arbitrary flow line ID is assigned to the flow line connecting the positions where the person has moved, and the person with the flow line ID is tracked.
Then, the person detection device 4 detects the time zone in which the person flow line exists for each area. The "area ID" and "time zone" in which the person's flow line exists and the "flow line ID" of the person are transmitted to the device position estimation device 1.
For example, according to FIG. 2, since there is no person flow line in the time zone in the area S3, it is detected that "there is no person", and the person flow line exists in the area S4 in the time zone. Therefore, it is detected that "a person exists".

人物検知装置4は、当該エリアで検知された人物の人数が、所定数(例えば1人)以下である場合にのみ、時間帯を検知することが好ましい。一般的にカウンタには、店員は1人であるために、その店員についてのみ端末3の装着位置を推定することができればよい。逆に、1つのエリアに、所定数より多い(例えば2人以上)の人物が存在する場合、端末の装着位置の推定を実行しない。 The person detection device 4 preferably detects a time zone only when the number of people detected in the area is a predetermined number (for example, one person) or less. Generally, since there is only one clerk in the counter, it is sufficient that the mounting position of the terminal 3 can be estimated only for that clerk. On the contrary, when there are more than a predetermined number of people (for example, two or more people) in one area, the estimation of the mounting position of the terminal is not executed.

また、人物検知装置4は、当該エリアにおける人物が「前向き」で存在する時間帯を検知するものであってもよい。接客カウンタを挟んで人物同士が存在する場合、エリアS4に存在する人物は、必ずカウンタを前向きにしている。そのために、カウンタを介して人物同士(店員と顧客)が対面している場合にのみ、人物を検知することも好ましい。例えば図2のエリアS4及びC4のように、カウンタを介して両方のエリアに人物が検知された場合のみ、エリアS4の人物が前向きに存在するとして、その時間帯を検知する。 Further, the person detection device 4 may detect a time zone in which a person in the area exists "forwardly". When there are people with each other across the customer service counter, the people in the area S4 always have the counter facing forward. Therefore, it is also preferable to detect the person only when the persons (the clerk and the customer) face each other through the counter. For example, as in areas S4 and C4 of FIG. 2, only when a person is detected in both areas via the counter, it is assumed that the person in area S4 exists positively, and the time zone is detected.

他の実施形態として、端末3から受信するデータに、角速度及び/又は加速度が含まれている場合、人物検知装置4は、以下のように機能する。
(1)角速度を受信した場合、人物検知装置4は、検知された人物の前向きを、端末3から受信した角速度に基づいて補正する。
(2)角速度又は加速度を受信した場合、人物検知装置4は、端末3から受信した角速度又は加速度が所定閾値以上変化した場合、機能を停止する。これによって、人物が前向きとなっている時間帯のみを抽出することができる。
As another embodiment, when the data received from the terminal 3 includes angular velocity and / or acceleration, the person detection device 4 functions as follows.
(1) When the angular velocity is received, the person detection device 4 corrects the forward direction of the detected person based on the angular velocity received from the terminal 3.
(2) When the angular velocity or acceleration is received, the person detection device 4 stops the function when the angular velocity or acceleration received from the terminal 3 changes by a predetermined threshold value or more. This makes it possible to extract only the time zone when the person is positive.

[装着位置推定装置1]
装着位置推定装置1は、人物における端末3の装着位置を推定する。装着位置推定装置1は、端末3から広報パケットの「発信機ID」「端末ID」「受信強度」を取得し、人物検知装置4によって検知されたエリアに滞在する人物における当該端末の装着位置を推定する。
[Mounting position estimation device 1]
The mounting position estimation device 1 estimates the mounting position of the terminal 3 on a person. The mounting position estimation device 1 acquires the "transmitter ID", "terminal ID", and "reception strength" of the public relations packet from the terminal 3, and determines the mounting position of the terminal in a person staying in the area detected by the person detection device 4. presume.

図1によれば、装着位置推定装置1は、マップテーブル101と、人物動線対応付け部11と、発信機ID検索部12と、装着位置推定部13とを有する。これら機能構成部は、装置に搭載されたコンピュータを機能させるプログラムを実行することによって実現される。また、これら機能構成部の処理の流れは、装着位置推定方法としても理解できる。 According to FIG. 1, the mounting position estimation device 1 has a map table 101, a person flow line associating unit 11, a transmitter ID search unit 12, and a mounting position estimation unit 13. These functional components are realized by executing a program that makes the computer mounted on the device function. Further, the processing flow of these functional components can be understood as a mounting position estimation method.

<人物動線対応付け部11>
人物動線対応付け部11は、当該エリアに人物動線が存在する時間帯に、当該エリアにおける発信機IDの広報パケットを受信した対象端末と当該人物動線とを対応付ける。
<Person flow line mapping unit 11>
The person flow line associating unit 11 associates the target terminal that has received the publicity packet of the transmitter ID in the area with the person flow line during the time zone when the person flow line exists in the area.

図3は、人物動線対応付け部の処理を表す説明図である。 FIG. 3 is an explanatory diagram showing the processing of the person flow line associating unit.

図3(a)は、各端末が広報パケットを受信する毎に記録した「受信時刻」「端末ID」「ビーコンID」「受信強度」を表すテーブルである。
<受信時刻><端末ID><ビーコンID><受信強度>
10:00 e2 b0 -65dBm
10:01 e1 b3 -70dBm
・・・ ・・・ ・・・ ・・・
FIG. 3A is a table showing the “reception time”, “terminal ID”, “beacon ID”, and “reception strength” recorded each time each terminal receives a publicity packet.
<Reception time><TerminalID><BeaconID><Receptionstrength>
10:00 e2 b0 -65dBm
10:01 e1 b3 -70dBm
・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・

図3(b)は、エリア毎に、人物の存在を検知した時間帯を表すテーブルである。これは、人物検知装置4から受信したものである。
<人物動線ID><エリアID><時間帯>
・・・ ・・・ ・・・
201 S2 9:45−9:49
202 S4 10:00−10:10
・・・ ・・・ ・・・
FIG. 3B is a table showing a time zone in which the presence of a person is detected for each area. This is received from the person detection device 4.
<Person flow line ID><AreaID><Timezone>
・ ・ ・ ・ ・ ・ ・ ・ ・
201 S2 9: 45-9: 49
202 S4 10: 00-10: 10
・ ・ ・ ・ ・ ・ ・ ・ ・

図3(c)は、図3(a)を、端末ID毎に、図3(b)の「時間帯」に区分してまとめたものである。
<端末ID><ビーコンID><平均受信強度><時間帯>
e1 b3 -80dBm 10:00−10:10
e1 b4 -65dBm 10:00−10:10
e1 b5 -70dBm 10:00−10:10
e2 b4 -75dBm 10:00−10:10
e2 b5 -70dBm 10:00−10:10
・・・ ・・・ ・・・ ・・・・・・
また、端末ID毎に、図3(b)の時間帯に受信したビーコンIDと、ビーコンID毎の平均受信強度とを対応付けている。
FIG. 3 (c) is a summary of FIG. 3 (a) divided into "time zones" of FIG. 3 (b) for each terminal ID.
<Terminal ID><BeaconID><Average reception strength><Timezone>
e1 b3 -80dBm 10: 00-10: 10
e1 b4 -65dBm 10: 00-10: 10
e1 b5 -70dBm 10: 00-10: 10
e2 b4 -75dBm 10: 00-10: 10
e2 b5 -70dBm 10: 00-10: 10
・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・ ・
Further, for each terminal ID, the beacon ID received in the time zone of FIG. 3B is associated with the average reception intensity for each beacon ID.

図3(d)は、図3(c)から、以下のようないずれかの方法で、「対象端末」となる端末IDを選択する。
(1)当該エリアにおける発信機IDの広報パケットを相対的に多く受信した端末
(2)当該エリアにおける発信機IDの広報パケットを相対的に高い受信強度で受信した端末
具体的には、例えばエリアS4に人物が存在している時間帯に、そのエリアS4に滞在する対象端末は、ビーコンID:b4を相対的に高い受信強度で受信することとなる。
In FIG. 3D, a terminal ID to be a “target terminal” is selected from FIG. 3C by any of the following methods.
(1) A terminal that receives a relatively large number of transmitter ID publicity packets in the area (2) A terminal that receives a relatively high receiver ID publicity packet in the area Specifically, for example, an area The target terminal staying in the area S4 during the time zone in which the person exists in S4 receives the beacon ID: b4 with a relatively high reception intensity.

例えば、人物検知装置4によって、エリアS4で時間帯10:00〜10:10に、人物動線ID202の人物が検知されたとする。その場合、端末ID毎に、時間帯10:00〜10:10に受信したビーコンIDを収集し、ビーコンID毎の平均受信強度を取得する。そして、エリアS4におけるその時間帯10:00〜10:10で、ビーコンID:b4の平均受信強度が相対的に高い端末ID:e1を検索する。
これによって、対象端末の端末IDに、その時間帯に滞在するエリアID及び人物動線IDを対応付ける(例えば「カウンタIDマッチング」と称す)。
For example, it is assumed that the person detection device 4 detects a person with the person flow line ID 202 in the area S4 in the time zone from 10:00 to 10:10. In that case, the beacon IDs received in the time zone from 10:00 to 10:10 are collected for each terminal ID, and the average reception intensity for each beacon ID is acquired. Then, the terminal ID: e1 having a relatively high average reception intensity of the beacon ID: b4 is searched for in the time zone 10:00 to 10:10 in the area S4.
As a result, the terminal ID of the target terminal is associated with the area ID and the person flow line ID staying in the time zone (for example, referred to as "counter ID matching").

これによって、人物動線対応付け部11は、当該エリアに人物動線が存在する時間帯に、当該エリアにおける発信機IDの広報パケットを受信した対象端末と当該人物動線とを対応付けることができる。 As a result, the person flow line mapping unit 11 can associate the target terminal that has received the publicity packet of the transmitter ID in the area with the person flow line during the time zone when the person flow line exists in the area. ..

<発信機ID検索部12>
発信機ID検索部12は、対象端末について、マップテーブル101を用いて当該エリアに対応する発信機IDを検索する。マップテーブル101は、図2で前述したように、エリアとビーコンIDとを対応付けたものである。
<Transmitter ID search unit 12>
The transmitter ID search unit 12 searches the target terminal for the transmitter ID corresponding to the area using the map table 101. As described above in FIG. 2, the map table 101 associates the area with the beacon ID.

図4は、発信機ID検索部及び装着位置推定部の処理を表す説明図である。 FIG. 4 is an explanatory diagram showing the processing of the transmitter ID search unit and the mounting position estimation unit.

図4によれば、対象端末について、マップテーブル101を用いて、そのエリアS4に対応付けられた左側のビーコンID:b4と、右側のビーコンID:b5とが検索される。 According to FIG. 4, the beacon ID: b4 on the left side and the beacon ID: b5 on the right side associated with the area S4 are searched for the target terminal using the map table 101.

例えば、具体的に以下のように、各エリアに各発信機が配置されていたとする。
エリア3に配置された発信機の発信機ID:b3
エリア4に配置された発信機の発信機ID:b4
エリア5に配置された発信機の発信機ID:b5
この場合、エリア4に滞在する人物における対象端末の装着位置が、左側か右側かを判断するために使用されるビーコンIDは、マップテーブル101によれば、ビーコンID:b4+b5となっている。
このとき、マップテーブルは、エリア4に対して、他の対応付けとしてビーコンID:b3+b5であってもよい。
For example, specifically, it is assumed that each transmitter is arranged in each area as follows.
Transmitter ID of the transmitter located in area 3: b3
Transmitter ID of the transmitter located in area 4: b4
Transmitter ID of the transmitter located in area 5: b5
In this case, the beacon ID used to determine whether the wearing position of the target terminal in the person staying in the area 4 is the left side or the right side is the beacon ID: b4 + b5 according to the map table 101.
At this time, the map table may have a beacon ID: b3 + b5 as another association with the area 4.

即ち、マップテーブルに登録されるエリアIDとビーコンIDとは、エリア毎に、最適なビーコンIDが登録されていればよい。即ち、当該エリアに対して必ずしも隣接するエリアに配置された発信機のビーコンIDに限られない。また、図2のように、エリアID4について、必ずしもビーコンID:b4を含む必要性もない。勿論、エリア4に対して、その他のID:b2+b6が対応付けられていてもよい。 That is, the area ID and the beacon ID registered in the map table may be the optimum beacon ID registered for each area. That is, it is not necessarily limited to the beacon ID of the transmitter arranged in the area adjacent to the area. Further, as shown in FIG. 2, it is not always necessary for the area ID 4 to include the beacon ID: b4. Of course, other IDs: b2 + b6 may be associated with the area 4.

<装着位置推定部13>
装着位置推定部13は、人物検知装置4によって当該エリアに存在する人物は、当該対象端末を、受信強度が相対的に高い発信機側の位置に装着していると推定する。最も簡単には、装着位置推定部13は、当該対象端末の装着位置として、人物の前向きに対して右側又は左側を推定する。
<Mounting position estimation unit 13>
The mounting position estimation unit 13 estimates that the person existing in the area by the person detection device 4 wears the target terminal at a position on the transmitter side where the reception intensity is relatively high. Most simply, the mounting position estimation unit 13 estimates the right side or the left side of the person facing forward as the mounting position of the target terminal.

図5は、端末の装着位置に基づく電波の受信強度を表す説明図である。 FIG. 5 is an explanatory diagram showing the reception intensity of radio waves based on the mounting position of the terminal.

図5によれば、エリアS4に滞在する人物(店員)が、端末3を腰に装着している。
人物が端末3を左側に装着している場合、左側の発信機のビーコンID:b4の受信強度は、右側の発信機のビーコンID:b5の受信強度よりも高くなっている。
一方で、人物が端末3を右側に装着している場合、エリアS4の右側の発信機のビーコンID:b5の受信強度は、エリアS4の左側の発信機のビーコンID:b4の受信強度よりも高くなっている。
このような広報パケットの受信強度の違いは、人物自身が電波遮蔽となっていることに基づく。
According to FIG. 5, a person (clerk) staying in the area S4 wears the terminal 3 on his waist.
When a person wears the terminal 3 on the left side, the reception strength of the beacon ID: b4 of the transmitter on the left side is higher than the reception strength of the beacon ID: b5 of the transmitter on the right side.
On the other hand, when the person wears the terminal 3 on the right side, the reception strength of the beacon ID: b5 of the transmitter on the right side of the area S4 is higher than the reception strength of the beacon ID: b4 of the transmitter on the left side of the area S4. It's getting higher.
Such a difference in the reception strength of the public relations packet is based on the fact that the person himself / herself is a radio wave shield.

図6は、端末の装着位置に基づく電波の受信強度の矛盾を表す説明図である。 FIG. 6 is an explanatory diagram showing a contradiction in the reception intensity of radio waves based on the mounting position of the terminal.

図6(a)によれば、人物が端末を左側に装着している場合、左側の発信機からの受信強度が、右側の発信機からの受信強度よりも高くなるのが、通常である。右側の発信機から受信強度は、人物自身の遮蔽物によって低下しているからである。
人物における端末の装着位置は左側:
左側発信機からの平均受信強度 > 右側発信機からの平均受信強度
According to FIG. 6A, when a person wears the terminal on the left side, the reception strength from the transmitter on the left side is usually higher than the reception strength from the transmitter on the right side. This is because the reception intensity from the transmitter on the right side is reduced by the shield of the person himself.
The terminal mounting position for a person is on the left side:
Average reception strength from the left transmitter> Average reception strength from the right transmitter

図6(b)によれば、人物が端末を左側に装着している場合、右側の発信機からの受信強度が、左側の発信機からの受信強度よりも大きくなるということは、矛盾する。 According to FIG. 6B, it is a contradiction that when a person wears the terminal on the left side, the reception strength from the transmitter on the right side is larger than the reception strength from the transmitter on the left side.

図6(c)によれば、人物が端末を右側に装着している場合、右側の発信機からの受信強度が、左側の発信機からの受信強度よりも高くなるのが、通常である。左側の発信機から受信強度は、人物自身の遮蔽物によって低下しているからである。
人物における端末の装着位置は右側:
左側発信機からの平均受信強度 < 右側発信機からの平均受信強度
According to FIG. 6C, when a person wears the terminal on the right side, the reception strength from the transmitter on the right side is usually higher than the reception strength from the transmitter on the left side. This is because the reception intensity from the transmitter on the left side is reduced by the shield of the person himself.
The mounting position of the terminal in a person is on the right side:
Average reception strength from the left transmitter <Average reception strength from the right transmitter

図6(d)によれば、人物が端末を右側に装着している場合、左側の発信機からの受信強度が、右側の発信機からの受信強度よりも大きくなるということは、矛盾する。 According to FIG. 6D, it is a contradiction that when a person wears the terminal on the right side, the reception strength from the transmitter on the left side is larger than the reception strength from the transmitter on the right side.

図7は、発信機ID毎の受信強度を表すグラフである。 FIG. 7 is a graph showing the reception strength for each transmitter ID.

図7によれば、端末e1における、縦軸に受信強度[dBm]と、横軸に経過時間とが表されている。
(1)横軸には、人物検知装置4によって例えばエリアS4に人物が検知された時間帯が表されている。
(2)端末e1は、他の端末と比較して、ビーコンID:b4の平均受信強度が相対的に高いために、エリアS4には、当該端末e1を所持する人物が滞在していると判断される。ここで、前述した図2のマップテーブルを用いて、ビーコンID:b4、b5を検索し、その平均受信強度も取得される。
(3)ここでは、ビーコンID:b4の平均受信強度は、ビーコンID:b5の平均受信強度よりも高い。
(4)そのために、端末e1を所持した人物は、端末e1を左側に装着していると判定することができる。前述の説明では、左右の装着位置を判断するために、発信機の平均受信強度を用いたが、その代わりに、所定以上の受信強度の発信機からの広報パケットの受信回数(即ち、受信回数の多い方の発信機の側に装着していると判定すること)を用いてもよい。
According to FIG. 7, in the terminal e1, the vertical axis represents the reception intensity [dBm] and the horizontal axis represents the elapsed time.
(1) The horizontal axis represents a time zone in which a person is detected in, for example, the area S4 by the person detection device 4.
(2) Since the terminal e1 has a relatively high average reception intensity of the beacon ID: b4 as compared with other terminals, it is determined that a person possessing the terminal e1 is staying in the area S4. Will be done. Here, the beacons IDs: b4 and b5 are searched using the map table of FIG. 2 described above, and the average reception intensity thereof is also acquired.
(3) Here, the average reception intensity of the beacon ID: b4 is higher than the average reception intensity of the beacon ID: b5.
(4) Therefore, it can be determined that the person who possesses the terminal e1 is wearing the terminal e1 on the left side. In the above description, the average reception strength of the transmitter is used to determine the left and right mounting positions, but instead, the number of receptions of the public relations packet from the transmitter having a reception strength equal to or higher than a predetermined number (that is, the number of receptions). It is determined that the transmitter is mounted on the side of the transmitter with the largest number of packets).

尚、前述した装着位置推定装置1は、例えば各店員について1日の1回、実行されればよい。端末は、それほど頻繁に付け替えるものでないためである。また、1日の中で実行する時間を固定してもよいし、任意に変化させるものであってもよい。 The mounting position estimation device 1 described above may be executed once a day for each store clerk, for example. This is because terminals are not replaced very often. Further, the execution time in the day may be fixed or may be arbitrarily changed.

以上、詳細に説明したように、本発明のシステム及び方法によれば、人物における端末の装着位置を推定することができる。
本発明によれば、端末の装着位置の推定のために、学習フェーズも必要ないし、人物自身が歩行する必要もない。特に、接客等のためにカウンタで静止する時間帯の多い店員に適する。
As described in detail above, according to the system and method of the present invention, it is possible to estimate the mounting position of the terminal in a person.
According to the present invention, the learning phase is not required and the person himself / herself does not need to walk in order to estimate the mounting position of the terminal. In particular, it is suitable for a clerk who often stands still at the counter for customer service.

前述した本発明の種々の実施形態について、本発明の技術思想及び見地の範囲の種々の変更、修正及び省略は、当業者によれば容易に行うことができる。前述の説明はあくまで例であって、何ら制約しようとするものではない。本発明は、特許請求の範囲及びその均等物として限定するものにのみ制約される。 With respect to the various embodiments of the present invention described above, various changes, modifications and omissions within the scope of the technical idea and viewpoint of the present invention can be easily made by those skilled in the art. The above explanation is just an example and does not attempt to restrict anything. The present invention is limited only to the claims and their equivalents.

1 装着位置推定装置
101 マップテーブル
11 人物端末対応付け部
12 発信機ID検索部
13 装着位置推定部
2 発信機
3 端末
4 人物検知装置
5 撮影装置
1 Mounting position estimation device 101 Map table 11 Person terminal association unit 12 Transmitter ID search unit 13 Mounting position estimation unit 2 Transmitter 3 Terminal 4 Person detection device 5 Imaging device

Claims (10)

複数のエリアそれぞれに対応した異なる発信機ID(IDentifier)を含む広報パケットを発信する発信機と、
人物に装着された状態で、前記広報パケットを受信する端末と、
撮影装置を用いて、各エリアに人物動線が存在する時間帯を検知する人物検知装置と、
前記端末から前記広報パケットの発信機ID、端末ID及び受信強度を取得し、エリアに存在する人物動線の人物における当該端末の装着位置を推定する装着位置推定装置と
を有するシステムであって、
前記装着位置推定装置は、
エリア毎に、検索対象となる複数の発信機の発信機IDを登録したマップテーブルと、
当該エリアに人物動線が存在する時間帯に、当該エリアにおける発信機IDの広報パケットを受信した対象端末と当該人物動線とを対応付ける人物動線対応付け手段と、
前記対象端末について、前記マップテーブルを用いて当該エリアに対応する発信機IDを検索する発信機ID検索手段と、
当該エリアに存在する人物は、当該対象端末を、受信強度が相対的に高い発信機側の位置に装着していると推定する装着位置推定手段と
を有することを特徴とするシステム。
A transmitter that sends a public relations packet containing a different transmitter ID (IDentifier) corresponding to each of multiple areas,
A terminal that receives the public relations packet while attached to a person,
A person detection device that detects the time zone when a person's flow line exists in each area using a shooting device,
A system including a mounting position estimation device that acquires a transmitter ID, a terminal ID, and a reception strength of the public relations packet from the terminal and estimates the mounting position of the terminal in a person on a person flow line existing in the area.
The mounting position estimation device is
A map table in which the transmitter IDs of multiple transmitters to be searched are registered for each area,
A person flow line associating means for associating a target terminal that has received a publicity packet of a transmitter ID in the area with the person flow line during a time zone in which the person flow line exists in the area.
With respect to the target terminal, a transmitter ID search means for searching a transmitter ID corresponding to the area using the map table, and
A system characterized in that a person existing in the area has a mounting position estimating means for presuming that the target terminal is mounted at a position on the transmitter side having a relatively high reception intensity.
前記人物検知装置は、当該エリアで検知された人物の人数が、所定数以下である場合にのみ、前記時間帯を検知する
ことを特徴とする請求項1に記載のシステム。
The system according to claim 1, wherein the person detection device detects the time zone only when the number of people detected in the area is equal to or less than a predetermined number.
前記装着位置推定装置の前記人物動線対応付け手段について、前記対象端末は、当該エリアにおける発信機IDの広報パケットを最も多く受信した端末、又は、当該エリアにおける発信機IDの広報パケットを相対的に高い受信強度で受信した端末である
ことを特徴とする請求項1又は2に記載のシステム。
Regarding the person flow line associating means of the mounting position estimation device, the target terminal relatively receives the terminal that received the most publicity packets of the transmitter ID in the area, or the publicity packets of the transmitter ID in the area. The system according to claim 1 or 2, wherein the terminal receives with a high reception strength.
前記撮影装置は、各エリアを撮影するカメラ、又は、各エリアに光波を照射するLIDER(light detection and ranging)である
ことを特徴とする請求項1から3のいずれか1項に記載のシステム。
The system according to any one of claims 1 to 3, wherein the photographing apparatus is a camera that photographs each area or a lidar (light detection and ranging) that irradiates each area with light waves.
前記人物検知装置は、カウンタを挟んで隣接する両方のエリアに人物が検出され、当該エリアにおける人物が当該カウンタに前向きで存在する時間帯を検知し、
前記装着位置推定装置の前記装着位置推定手段は、当該対象端末の装着位置として、人物の前向きに対して複数の側を推定する
ことを特徴とする請求項1から4のいずれか1項に記載のシステム。
The person detection device detects a person in both areas adjacent to each other with the counter in between, and detects a time zone in which the person in the area is positively present in the counter.
6. System.
前記装着位置推定装置の前記装着位置推定手段について、前記複数の側は、人物を中心に等角度に位置する2つ以上の側である
ことを特徴とする請求項5に記載のシステム。
The system according to claim 5, wherein the plurality of sides of the mounting position estimation device are two or more sides located at equal angles with respect to a person.
前記端末は、角速度センサを搭載し又は接続し、
前記人物検知装置は、検知した人物の前向きを、前記端末から受信した角速度に基づいて補正する
ことを特徴とする請求項5又は6に記載のシステム。
The terminal is equipped with or connected to an angular velocity sensor.
The system according to claim 5 or 6, wherein the person detection device corrects the forward orientation of the detected person based on the angular velocity received from the terminal.
前記端末は、角速度を検知する角速度センサ又は、加速度を検知する加速度センサを搭載し又は接続し、
前記人物検知装置は、前記端末から受信した前記角速度又は前記加速度が所定閾値以上変化した場合、機能を停止する
ことを特徴とする請求項1から6のいずれか1項に記載のシステム。
The terminal angular velocity sensor detects an angular velocity, or equipped with an acceleration sensor for detecting acceleration or connected,
The system according to any one of claims 1 to 6, wherein the person detection device stops functioning when the angular velocity or the acceleration received from the terminal changes by a predetermined threshold value or more.
発信機及び端末は、BLE(Bluetooth Low Energy)若しくはiBeacon(登録商標)又は無線LANの同一の近距離無線規格に基づくデバイスであり、
広報パケットに含まれる発信機IDは、Advertising Packetに含まれるビーコンIDである
ことを特徴とする請求項1から8のいずれか1項に記載のシステム。
The transmitter and terminal are devices based on the same short-range wireless standard of BLE (Bluetooth Low Energy) or iBeacon (registered trademark) or wireless LAN.
The system according to any one of claims 1 to 8, wherein the transmitter ID included in the public relations packet is a beacon ID included in the Advertising Packet.
複数のエリアそれぞれに対応した異なる発信機IDを含む広報パケットを発信する発信機と、
人物に装着された状態で、前記広報パケットを受信する端末と、
各エリアに人物動線が存在する時間帯を検知する人物検知装置と、
前記端末から前記広報パケットの発信機ID、端末ID及び受信強度を取得し、エリアに存在する人物動線の人物における当該端末の装着位置を推定する装着位置推定装置と
を有するシステムの装着位置推定方法であって、
前記装着位置推定装置は、
エリア毎に、検索対象となる複数の発信機の発信機IDを登録したマップテーブルを有し、
当該エリアに人物動線が存在する時間帯に、当該エリアにおける発信機IDの広報パケットを受信した対象端末と当該人物動線とを対応付ける第1のステップと、
前記対象端末について、前記マップテーブルを用いて当該エリアに対応する発信機IDを検索する第2のステップと、
当該エリアに存在する人物は、当該対象端末を、受信強度が相対的に高い発信機側の位置に装着していると推定する第3のステップと
を有することを特徴とするシステムの装着位置推定方法。
A transmitter that sends a public relations packet containing different transmitter IDs corresponding to each of multiple areas,
A terminal that receives the public relations packet while attached to a person,
A person detection device that detects the time zone when a person flow line exists in each area,
Mounting position estimation of a system having a mounting position estimation device that acquires the transmitter ID, terminal ID, and reception strength of the public relations packet from the terminal and estimates the mounting position of the terminal in a person with a person flow line existing in the area. It ’s a method,
The mounting position estimation device is
Each area has a map table in which the transmitter IDs of a plurality of transmitters to be searched are registered.
The first step of associating the target terminal that received the publicity packet of the transmitter ID in the area with the person flow line during the time zone when the person flow line exists in the area, and
For the target terminal, a second step of searching for a transmitter ID corresponding to the area using the map table, and
A person present in the area has a third step of presuming that the target terminal is mounted at a position on the transmitter side having a relatively high reception intensity. Method.
JP2018173188A 2018-09-18 2018-09-18 System and method for estimating the mounting position of the terminal in a person Active JP6927936B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018173188A JP6927936B2 (en) 2018-09-18 2018-09-18 System and method for estimating the mounting position of the terminal in a person

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018173188A JP6927936B2 (en) 2018-09-18 2018-09-18 System and method for estimating the mounting position of the terminal in a person

Publications (2)

Publication Number Publication Date
JP2020046235A JP2020046235A (en) 2020-03-26
JP6927936B2 true JP6927936B2 (en) 2021-09-01

Family

ID=69901240

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018173188A Active JP6927936B2 (en) 2018-09-18 2018-09-18 System and method for estimating the mounting position of the terminal in a person

Country Status (1)

Country Link
JP (1) JP6927936B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7457668B2 (en) 2021-03-26 2024-03-28 株式会社日立製作所 Location estimation system and location estimation method

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6459362B2 (en) * 2014-09-30 2019-01-30 ダイキン工業株式会社 Method for estimating position of wireless communication terminal and terminal position estimation system
US20170019769A1 (en) * 2015-07-17 2017-01-19 Samsung Electronics Co., Ltd. Robust Indoor Localization by Partitioning Space
JP2017201240A (en) * 2016-05-02 2017-11-09 日本電信電話株式会社 Position identifying device and position identifying method
JP6300131B1 (en) * 2017-01-24 2018-03-28 パナソニックIpマネジメント株式会社 Service situation analysis device and service situation analysis system

Also Published As

Publication number Publication date
JP2020046235A (en) 2020-03-26

Similar Documents

Publication Publication Date Title
US10037475B2 (en) Hybrid multi-camera based positioning
US10354145B2 (en) Associating a user identity with a mobile device identity
US10198625B1 (en) Association of unique person to a mobile device using repeat face image matching
EP3456040B1 (en) Surveillance system and method for camera-based surveillance
RU2019136741A (en) LOCATION-BASED WIRELESS AUTHENTICATION
Pirzada et al. Device-free localization technique for indoor detection and tracking of human body: A survey
WO2003092291A1 (en) Object detection device, object detection server, and object detection method
WO2017201663A1 (en) Moving object monitoring method, wearable apparatus, and server
Choi et al. Smartphone based indoor path estimation and localization without human intervention
US11132880B2 (en) System for tracking the location of people
JP6959888B2 (en) A device, program and method for estimating the terminal position using a model related to object recognition information and received electromagnetic wave information.
US10375667B2 (en) Enhancing indoor positioning using RF multilateration and optical sensing
JP2018061114A (en) Monitoring device and monitoring method
Schindhelm et al. Overview of indoor positioning technologies for context aware AAL applications
Jang et al. Survey of landmark-based indoor positioning technologies
US10997474B2 (en) Apparatus and method for person detection, tracking, and identification utilizing wireless signals and images
JP6927936B2 (en) System and method for estimating the mounting position of the terminal in a person
Chen et al. Rfcam: Uncertainty-aware fusion of camera and wi-fi for real-time human identification with mobile devices
JP6905965B2 (en) System and method to identify a person by the mounting position of the terminal
Ikeda et al. Person identification by integrating wearable sensors and tracking results from environmental sensors
JP2015040749A (en) Position estimation device and position estimation program
JP2017054229A (en) Person discrimination system
KR20160124543A (en) System and method for monitoring separated position of object by mobile device with antenna
Saputra et al. Advanced sensing and automation technologies
JP6894864B2 (en) Flow line management device, flow line management system and flow line management method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200718

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210414

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210426

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210513

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210803

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210805

R150 Certificate of patent or registration of utility model

Ref document number: 6927936

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150