JP2012128700A - Relation estimation device, relation estimation system, relation estimation program and relation estimation method - Google Patents

Relation estimation device, relation estimation system, relation estimation program and relation estimation method Download PDF

Info

Publication number
JP2012128700A
JP2012128700A JP2010280018A JP2010280018A JP2012128700A JP 2012128700 A JP2012128700 A JP 2012128700A JP 2010280018 A JP2010280018 A JP 2010280018A JP 2010280018 A JP2010280018 A JP 2010280018A JP 2012128700 A JP2012128700 A JP 2012128700A
Authority
JP
Japan
Prior art keywords
human
relationship
specific area
persons
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2010280018A
Other languages
Japanese (ja)
Inventor
Takayuki Kanda
崇行 神田
Masahiro Shiomi
昌裕 塩見
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ATR Advanced Telecommunications Research Institute International
Original Assignee
ATR Advanced Telecommunications Research Institute International
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ATR Advanced Telecommunications Research Institute International filed Critical ATR Advanced Telecommunications Research Institute International
Priority to JP2010280018A priority Critical patent/JP2012128700A/en
Publication of JP2012128700A publication Critical patent/JP2012128700A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a relationship estimation system 100 having a central control unit 10 with a plurality of LRF 12, in which the LRF 12 is configured to detect, for example, the position of each of persons who pass through the passage of a shopping mole, and especially a place which is much frequented or a place which is crowded with people is set as a specific area SA on this passage, and whether or not each of the positions of a plurality of persons is included in the specific area SA is determined, and the presence/absence of a human relationship is estimated based on the movement orbit data of persons which are not included in the specific area SA by the central control unit 10.SOLUTION: A relation estimation system 100 is configured to estimate a human relationship by excluding such a place where persons who have no relationship frequently come and go or gather. Thus, it is possible to accurately estimate the human relationship of persons.

Description

この発明は、関係推定装置、関係推定システム、関係推定プログラムおよび関係推定方法に関し、特にたとえば、複数の人間の人間関係を推定する、関係推定装置、関係推定システム、関係推定プログラムおよび関係推定方法に関する。   The present invention relates to a relationship estimation device, a relationship estimation system, a relationship estimation program, and a relationship estimation method, and more particularly to, for example, a relationship estimation device, a relationship estimation system, a relationship estimation program, and a relationship estimation method that estimate human relationships among a plurality of humans. .

特許文献1に開示されている、関係検知システムは、ロボットを中心とする所定領域内において、構成員の行動の履歴を記録する。そして、複数の構成員の行動の履歴に基づいて、構成員の他者との共存の仕方から、各構成員間の関係が把握される。   The relationship detection system disclosed in Patent Document 1 records a behavior history of members in a predetermined area centered on a robot. And the relationship between each member is grasped | ascertained from the way of coexistence with the other of a member based on the action | operation history of a some member.

また、特許文献2に開示されている、関係検知システムでは、無線タグが取り付けられている人間の移動軌跡が記録される。そして、複数の人間の移動軌跡に基づいて、人間同士の友好関係を把握することができる。
特開2005−131748号公報[B25J 13/00, B25J 5/00] 特開2005−327156号公報[G06F 19/00, G01V 15/00, G06K 17/00, H04B 5/02]
In addition, in the relationship detection system disclosed in Patent Document 2, a movement trajectory of a person to whom a wireless tag is attached is recorded. Based on the movement trajectories of a plurality of humans, it is possible to grasp the friendly relationship between humans.
JP 2005-131748 A [B25J 13/00, B25J 5/00] JP 2005-327156 A [G06F 19/00, G01V 15/00, G06K 17/00, H04B 5/02]

ところが、集まりが起きる広場では人間関係と関係なく同時存在が起きるため、特許文献1の関係検知システムでは人間関係の検出精度が低下してしまう。また、多くの人々が行き交う街角や、流れがある通路では多くの移動軌跡が類似したものになるため、特許文献2の関係検知システムでは友好関係を正しく把握できないことがある。   However, since the simultaneous existence occurs in the plaza where the gathering occurs regardless of the human relationship, the relationship detection system of Patent Document 1 deteriorates the detection accuracy of the human relationship. In addition, since many movement trajectories are similar in street corners where many people come and go and passages with flows, the relationship detection system of Patent Document 2 may not be able to correctly grasp the friendly relationship.

それゆえに、この発明の主たる目的は、新規な、関係推定装置、関係推定システム、関係推定プログラムおよび関係推定方法を提供することである。   Therefore, a main object of the present invention is to provide a novel relationship estimation device, relationship estimation system, relationship estimation program, and relationship estimation method.

この発明の他の目的は、人間関係を精度よく推定することができる、関係推定装置、関係推定システム、関係推定プログラムおよび関係推定方法を提供することである。   Another object of the present invention is to provide a relationship estimation device, a relationship estimation system, a relationship estimation program, and a relationship estimation method that can accurately estimate human relationships.

この発明は、上記の課題を解決するために、以下の構成を採用した。なお、括弧内の参照符号および補足説明等は、この発明の理解を助けるために記述する実施形態との対応関係を示したものであって、この発明を何ら限定するものではない。   The present invention employs the following configuration in order to solve the above problems. The reference numerals in parentheses, supplementary explanations, and the like indicate the corresponding relationship with the embodiments described in order to help understanding of the present invention, and do not limit the present invention.

第1の発明は、空間内に存在する複数の人間のそれぞれの位置を検出する検出手段を有する、関係推定装置であって、複数の人間の位置のそれぞれが特定領域に含まれているかを判断する判断手段、および特定領域に含まれていない少なくとも2人以上の人間のそれぞれの位置に基づいて、人間関係を推定する推定手段を備える、関係推定装置である。   1st invention is a relationship estimation apparatus which has a detection means to detect each position of a plurality of people who exist in space, and judges whether each of a plurality of people's positions is included in a specific field. A relationship estimation apparatus comprising: a determination unit configured to perform estimation; and an estimation unit configured to estimate a human relationship based on positions of at least two humans not included in the specific region.

第1の発明では、関係推定装置(10:実施例において対応する部分を例示する参照符号。以下、同じ。)は、検出手段(12)は、たとえば複数のLRFであり、それらのLRFから照射されたレーザーによって、空間内に存在する複数の人間のそれぞれの位置が検出される。また、空間内において、人通りが多い場所や、人が密集する場所が特定領域(SA)とされる。さらに、判断手段(16,S9)は、複数の人間の位置のそれぞれがその特定領域に含まれているかを判断する。そして、推定手段(16,S15)は、たとえば、特定領域に含まれていない2人の位置に基づいて、人間関係の有無を推定する。   In the first invention, in the relationship estimation apparatus (10: reference numerals exemplifying corresponding parts in the embodiment, hereinafter the same), the detection means (12) is, for example, a plurality of LRFs, and irradiation from these LRFs The position of each of a plurality of humans existing in the space is detected by the laser that has been used. In the space, a specific area (SA) is a place where there is a lot of traffic or a place where people are crowded. Furthermore, the determination means (16, S9) determines whether each of the plurality of human positions is included in the specific area. And an estimation means (16, S15) estimates the presence or absence of a human relationship based on the position of two persons who are not included in the specific area, for example.

第1の発明によれば、無関係な人々が頻繁に行き交ったり、集まったりする場所を除いて、人間関係を推定することができる。そのため、人々の人間関係を精度よく推定することができるようになる。   According to the first aspect of the present invention, it is possible to estimate human relationships except for places where irrelevant people frequently come and go. Therefore, it becomes possible to accurately estimate the human relationships of people.

第2の発明は、空間内に存在する複数の人間のそれぞれの位置を検出する検出手段(12)を有する、関係推定システム(100)であって、複数の人間の位置のそれぞれが特定領域に含まれているかを判断する判断手段(16,S9)、および特定領域に含まれていない少なくとも2人以上の人間のそれぞれの位置に基づいて、人間関係を推定する推定手段(16,S15)を備える、関係推定システムである。   A second invention is a relationship estimation system (100) having detection means (12) for detecting positions of a plurality of persons existing in a space, wherein each of the positions of the plurality of persons is in a specific region. A judging means (16, S9) for judging whether or not it is included, and an estimating means (16, S15) for estimating a human relationship based on the respective positions of at least two or more humans not included in the specific area A relationship estimation system is provided.

第2の発明でも、第1の発明と同様、無関係な人々が頻繁に行き交ったり、集まったりする場所を除いて、人間関係を推定することができる。そのため、人々の人間関係を精度よく推定することができるようになる。   In the second invention as well, as in the first invention, it is possible to estimate the human relationship except for places where irrelevant people frequently come and go. Therefore, it becomes possible to accurately estimate the human relationships of people.

第3の発明は、空間内に存在する複数の人間のそれぞれの位置を検出する検出手段(12)を有する、関係推定装置(10)のプロセッサ(16)を、複数の人間の位置のそれぞれが特定領域に含まれているかを判断する判断手段(S9)、および特定領域に含まれていない少なくとも2人以上の人間のそれぞれの位置に基づいて、人間関係を推定する推定手段(S15)として機能させる、関係推定プログラムである。   According to a third aspect of the present invention, there is provided a processor (16) of the relationship estimation device (10) having detection means (12) for detecting the positions of a plurality of persons existing in the space. Functions as a determination means (S9) for determining whether or not a specific area is included, and an estimation means (S15) for estimating a human relationship based on the positions of at least two persons not included in the specific area This is a relationship estimation program.

第3の発明でも、第1の発明と同様、無関係な人々が頻繁に行き交ったり、集まったりする場所を除いて、人間関係を推定することができる。そのため、人々の人間関係を精度よく推定することができるようになる。   In the third invention as well, as in the first invention, it is possible to estimate the human relationship except for places where irrelevant people frequently come and go. Therefore, it becomes possible to accurately estimate the human relationships of people.

第4の発明は、空間内に存在する複数の人間のそれぞれの位置を検出する検出手段(12)を有する、関係推定装置(10)の関係推定方法であって、複数の人間の位置のそれぞれが特定領域に含まれているかを判断し(S9)、そして特定領域に含まれていない少なくとも2人以上の人間のそれぞれの位置に基づいて、人間関係を推定する(S15)、関係推定方法である。   A fourth invention is a relationship estimation method of a relationship estimation device (10) having detection means (12) for detecting the positions of a plurality of humans existing in a space, and each of the plurality of human positions. Is included in the specific region (S9), and based on the respective positions of at least two persons not included in the specific region, human relationships are estimated (S15). is there.

第4の発明でも、第1の発明と同様、無関係な人々が頻繁に行き交ったり、集まったりする場所を除いて、人間関係を推定することができる。そのため、人々の人間関係を精度よく推定することができるようになる。   In the fourth invention as well, similar to the first invention, it is possible to estimate the human relations except for places where unrelated people frequently come and go. Therefore, it becomes possible to accurately estimate the human relationships of people.

この発明によれば、無関係な人々が頻繁に行き交ったり、集まったりする場所を除いて、人々の人間関係が推定されるため、人間関係の推定の精度を向上させることができる。   According to the present invention, since human relationships are estimated except for places where irrelevant people frequently come and go, it is possible to improve the accuracy of human relationship estimation.

この発明の上述の目的、その他の目的、特徴および利点は、図面を参照して行う以下の実施例の詳細な説明から一層明らかとなろう。   The above object, other objects, features, and advantages of the present invention will become more apparent from the following detailed description of embodiments with reference to the drawings.

図1はこの発明の一実施例の関係推定システムの概要を示す図解図である。FIG. 1 is an illustrative view showing an outline of a relationship estimation system according to an embodiment of the present invention. 図2は図1に示す中央制御装置の電気的な構成を示すブロック図である。FIG. 2 is a block diagram showing an electrical configuration of the central controller shown in FIG. 図3は図1および図2に示すLRFの計測領域を示す図解図である。FIG. 3 is an illustrative view showing a measurement region of the LRF shown in FIGS. 1 and 2. 図4は図3に示すLRFを利用して検出された移動軌跡の一例を示す図解図である。FIG. 4 is an illustrative view showing one example of a movement locus detected by using the LRF shown in FIG. 図5は図1に示すLRFが設置される或る場所の地図を示す図解図である。FIG. 5 is an illustrative view showing a map of a certain place where the LRF shown in FIG. 1 is installed. 図6は図2に示すメモリに記憶される移動軌跡テーブルの一例を示す図解図である。6 is an illustrative view showing one example of a movement locus table stored in the memory shown in FIG. 図7は図2に示すメモリに記憶される関係人間テーブルの一例を示す図解図である。FIG. 7 is an illustrative view showing one example of a related person table stored in the memory shown in FIG. 図8は図2に示すメモリのメモリマップの一例を示す図解図である。FIG. 8 is an illustrative view showing one example of a memory map of the memory shown in FIG. 図9は図2に示すCPUの移動軌跡選別処理を示すフロー図である。FIG. 9 is a flowchart showing the movement trajectory selection processing of the CPU shown in FIG. 図10は図2に示すCPUの人間関係推定処理を示すフロー図である。FIG. 10 is a flowchart showing human relationship estimation processing of the CPU shown in FIG.

図1を参照して、この実施例の関係推定システム100は、LRF12a,12bを含む数台のLRFを有する中央制御装置10を備える。LRF12a,12bは、人間が任意に移動することができる場所(空間または環境)に設置される。人間が任意に行動する場所は、会社のフロア、博物館、ショッピングモールまたはアトラクション会場などであり、LRF12a,12bは様々な場所に設置される。なお、この空間には、システムの管理者によって特定領域SAが設定されている。また、この特定領域SAについては後述するため、ここでの詳細な説明は省略する。   Referring to FIG. 1, a relationship estimation system 100 according to this embodiment includes a central controller 10 having several LRFs including LRFs 12a and 12b. LRF12a, 12b is installed in the place (space or environment) where a human can move arbitrarily. The place where humans act arbitrarily is a company floor, a museum, a shopping mall or an attraction venue, and the LRFs 12a and 12b are installed in various places. In this space, a specific area SA is set by the system administrator. Since the specific area SA will be described later, detailed description thereof is omitted here.

中央制御装置10は、所定時間(たとえば、1秒)毎にLRF12a,12bによって、任意に移動する人間の位置を検出し、検出された位置のデータを記憶する。また、中央制御装置10は、記憶された位置データに基づいて、少なくとも2人以上の人間の人間関係を推定する。   The central controller 10 detects the position of a human who moves arbitrarily by using the LRFs 12a and 12b every predetermined time (for example, 1 second), and stores data of the detected position. In addition, the central control apparatus 10 estimates the human relationship between at least two persons based on the stored position data.

また、位置が検出された人間には、検出された順番に人間IDが付与される。たとえば、図1では、人間Aには人間ID「001」が付与され、人間Bには人間ID「002」が付与され、人間Cには人間ID「003」が付与され、人間Dには人間ID「004」が付与され、人間Eには人間ID「005」が付与される。   In addition, a human ID is assigned to a person whose position is detected in the order of detection. For example, in FIG. 1, human ID “001” is assigned to human A, human ID “002” is assigned to human B, human ID “003” is assigned to human C, and human D is assigned to human D. An ID “004” is assigned, and a person ID “005” is assigned to the person E.

なお、図1では簡単のため人間は5人しか示していないが、中央制御装置10はさらに多くの人間の位置データおよび移動軌跡データを同時に検出することができる。また、中央制御装置10は関係推定装置と言われることもある。   Although only five people are shown in FIG. 1 for simplicity, the central controller 10 can detect more human position data and movement trajectory data at the same time. In addition, the central control device 10 is sometimes referred to as a relationship estimation device.

図2は中央制御装置10の電気的な構成を示すブロック図である。図2を参照して、中央制御装置10は、LRF12a−12f、CPU16およびメモリ18を含む。CPU16は、マイクロコンピュータ或いはプロセッサとも呼ばれ、時刻情報を出力するRTC16aを含む。また、CPU16には、先述したLRF12aおよびLRF12bに加えて、LRF12c,LRF12d,LRF12eおよびLRF12fも接続される。さらに、CPU16にはメモリ18も接続される。なお、LRF12a−12fを区別する必要がない場合、「LRF12」と言う。   FIG. 2 is a block diagram showing an electrical configuration of the central controller 10. Referring to FIG. 2, central controller 10 includes LRFs 12 a-12 f, CPU 16 and memory 18. The CPU 16 is also called a microcomputer or a processor, and includes an RTC 16a that outputs time information. In addition to LRF 12a and LRF 12b described above, LRF 12c, LRF 12d, LRF 12e, and LRF 12f are also connected to CPU 16. Further, a memory 18 is connected to the CPU 16. In addition, when it is not necessary to distinguish LRF12a-12f, it is called "LRF12."

LRF12は、レーザーを照射し、物体(人間も含む)に反射して戻ってくるまでの時間から当該物体までの距離を計測するものである。たとえば、トランスミッタ(図示せず)から照射したレーザーを回転ミラー(図示せず)で反射させて、前方を扇状に一定角度(たとえば、0.5度)ずつスキャンする。ここで、LRF12としては、SICK社製のレーザーレンジファインダ(型式 LMS200)を用いることができる。このレーザーレンジファインダを用いた場合には、距離8mを±15mm程度の誤差で計測可能である。   The LRF 12 measures the distance to the object from the time it takes to irradiate the laser, reflect off the object (including a human being), and return. For example, a laser beam emitted from a transmitter (not shown) is reflected by a rotating mirror (not shown), and the front is scanned in a fan shape by a certain angle (for example, 0.5 degrees). Here, as the LRF 12, a laser range finder (model LMS200) manufactured by SICK can be used. When this laser range finder is used, a distance of 8 m can be measured with an error of about ± 15 mm.

メモリ18は、図示は省略をするが、ROM,HDDおよびRAMを含む。ROMおよびHDDには、中央制御装置10の動作を制御するための制御プログラムが予め記憶される。また、RAMは、CPU16のワークメモリやバッファメモリとして用いられる。   The memory 18 includes a ROM, an HDD, and a RAM (not shown). In the ROM and the HDD, a control program for controlling the operation of the central controller 10 is stored in advance. The RAM is used as a work memory or buffer memory for the CPU 16.

なお、検出された人間の位置は、位置データとして記憶される際に、RTC16aが出力する時刻情報が関連付けられる。   The detected human position is associated with time information output from the RTC 16a when stored as position data.

次に、LRF12について詳細に説明する。図3を参照して、LRF12の計測範囲は、半径r(r≒8m)の半円形状(扇形)で示される。つまり、LRF12は、その正面方向を中心とした場合に、左右90度の方向を所定の距離(r)以内で計測可能である。   Next, the LRF 12 will be described in detail. Referring to FIG. 3, the measurement range of LRF 12 is indicated by a semicircular shape (fan shape) having a radius r (r≈8 m). That is, the LRF 12 can measure the direction of 90 degrees left and right within a predetermined distance (r) when the front direction is the center.

また、使用しているレーザーは、日本工業規格 JIS C 6802「レーザー製品の安全基準」におけるクラス1レーザーであり、人の眼に対して影響を及ぼさない安全なレベルである。また、この実施例では、LRF12のサンプリングレートを37Hzとした。これは、歩行するなどにより移動する人間の位置を連続して検出するためである。   The laser used is a class 1 laser in Japanese Industrial Standard JIS C 6802 “Safety Standard for Laser Products”, which is a safe level that does not affect human eyes. In this embodiment, the sampling rate of the LRF 12 is 37 Hz. This is because the position of a person who moves by walking or the like is continuously detected.

さらに、LRF12の各々は、計測範囲が重なるように配置され、図示は省略するが、床面から約90cmの高さに固定される。この高さは、被験者の胴体と腕(両腕)とを検出可能とするためであり、たとえば、日本人の成人の平均身長から算出される。したがって、中央制御装置10を設ける場所(地域ないし国)や被験者の年齢ないし年代(たとえば、子供,大人)に応じて、LRF12を固定する高さを適宜変更するようにしてよい。なお、本実施例では、設定されるLRF12は6台としたが、2台以上であれば、任意の台数のLRF12が設置されてもよい。   Further, each of the LRFs 12 is arranged so that the measurement ranges overlap, and although not shown, it is fixed at a height of about 90 cm from the floor surface. This height is for enabling detection of the body and arms (both arms) of the subject, and is calculated from, for example, the average height of Japanese adults. Therefore, the height at which the LRF 12 is fixed may be appropriately changed according to the location (region or country) where the central controller 10 is provided and the age or age of the subject (for example, children, adults). In this embodiment, six LRFs 12 are set, but any number of LRFs 12 may be installed as long as the number is two or more.

このような構成の中央制御装置10では、CPU16がLRF12からの出力(距離データ)に基づいて、パーティクルフィルタを用いて、人間の現在位置の変化を推定する。そして、推定された位置の変化が移動軌跡として記録される。   In the central controller 10 having such a configuration, the CPU 16 estimates a change in the current position of the human using a particle filter based on the output (distance data) from the LRF 12. Then, the estimated change in position is recorded as a movement trajectory.

たとえば、図4を参照して、LRF12a,12bは互いに向い合せに設置され、LRF12a,12bの計測範囲が重なる範囲は斜線が付されて示される。斜線が付された範囲は検出領域Eとされ、この検出領域E内では人間の位置が連続的に検出される。そして、連続的に検出された位置の変化が移動軌跡Tとなる。つまり、移動軌跡データは、複数の位置データから構成される。なお、検出領域EにはX−Y座標が設定され、人間の位置データは(X,Y)の座標で示すことができる。   For example, referring to FIG. 4, LRFs 12 a and 12 b are installed facing each other, and a range where the measurement ranges of LRFs 12 a and 12 b overlap is indicated by hatching. A hatched range is a detection area E, and the position of the person is continuously detected in the detection area E. And the change of the position detected continuously becomes the movement locus T. That is, the movement trajectory data is composed of a plurality of position data. Note that XY coordinates are set in the detection area E, and human position data can be indicated by coordinates (X, Y).

図5(A)はLRF12が設置される場所を示す地図を示す図解図である。図5(A)を参照して、地図が対応する場所は或るショッピングモールである。また、地図の左下側には店舗が示され、右上の中央付近にはショッピングモール内を案内するための案内図が示される。また、地図の右下には休憩スペースが設けられている。また、図5(A)の地図では、ショッピングモールの通路が検出領域Eである。そして、その検出領域E(通路)において、人通りが多い領域が特定領域SAとされる。   FIG. 5A is an illustrative view showing a map showing a place where the LRF 12 is installed. Referring to FIG. 5 (A), a place corresponding to the map is a shopping mall. In addition, a store is shown on the lower left side of the map, and a guide map for guiding the inside of the shopping mall is shown near the center of the upper right. There is a rest space at the bottom right of the map. In addition, in the map of FIG. Then, in the detection area E (passage), an area with a lot of traffic is set as the specific area SA.

図5(B)を参照して、人間Aおよび人間Bには人間関係が有り、2人は共に店舗から休憩スペースに移動している。また、人間C、人間Dおよび人間Eのそれぞれには人間関係は無く、3人はそれぞれが異なる目的を持って通路を移動している。人間Cの目的は案内図を見つけることであり、人間Dの目的は通路を通り抜けることであり、人間Eの目的は店舗に向かうことである。ただし、人間C、人間Dおよび人間Eは、略同時に検出領域E内に入っているため、ショッピングモールの通路に入ってからしばらくの間は、この3人の移動軌跡は似た形状になる。   Referring to FIG. 5B, human A and human B have a human relationship, and both of them are moving from the store to a rest space. In addition, each of the human C, the human D, and the human E has no human relationship, and the three persons move along the passage with different purposes. The purpose of human C is to find a guide map, the purpose of human D is to go through the passage, and the purpose of human E is to go to the store. However, since the human C, the human D, and the human E are in the detection area E almost at the same time, the movement trajectory of these three persons has a similar shape for a while after entering the shopping mall passage.

ここで、検出領域Eで検出された全ての移動軌跡の類似度に基づいて人間関係を推定した場合、人間Aおよび人間Bに対して人間関係が有ると推定されるだけでなく、人間C、人間Dおよび人間Eに対しても人間関係が有ると推定されてしまう。   Here, when the human relationship is estimated based on the similarity of all the movement trajectories detected in the detection region E, not only the human relationship with the human A and the human B is estimated, but also the human C, It is presumed that there is also a human relationship with the human D and the human E.

そこで、本実施例では、人通りが多い特定領域SAに存在する人間については、人間関係が推定されないようにする。具体的には、検出領域E内の全ての人間の位置が検出されたとき、検出された人間の位置が特定領域SAに含まれていなければ、その人間の位置データは移動軌跡テーブルに記録される。また、人間の位置が特定領域SAに含まれていれば、その人間の位置データは移動軌跡テーブルに記録されることは無い。そして、中央制御装置10は、移動軌跡テーブルに記録された移動軌跡データに基づいて、少なくとも2人以上の人間の人間関係を推定する。つまり、特定領域SAに存在する人間は位置データが記録されないため、人間関係が推定されない。   Therefore, in the present embodiment, human relations are not estimated for humans existing in the specific area SA where there are many people. Specifically, when all human positions in the detection area E are detected, if the detected human positions are not included in the specific area SA, the human position data is recorded in the movement trajectory table. The Further, if the human position is included in the specific area SA, the human position data is not recorded in the movement trajectory table. Then, the central control apparatus 10 estimates the human relationship between at least two persons based on the movement trajectory data recorded in the movement trajectory table. That is, since the position data is not recorded for the person existing in the specific area SA, the human relation is not estimated.

たとえば、図5(B)における人間Aおよび人間Bの位置は特定領域SAに含まれていないため、2人の移動軌跡データは図6に示す移動軌跡テーブルに記録される。図6を参照して、この移動軌跡テーブルは人間IDおよび移動軌跡データの列から構成される。また、人間IDの列には人間ID「001」および人間ID「002」などが記録される。移動軌跡データの列には、人間IDの欄に対応して、所定時間毎に連続して検出された位置データを表す座標が記録される。たとえば、人間ID「001(人間A)」に対応して、移動軌跡データの列には「(Xa1,Ya1),(Xa2,Ya2),…」が記録される。また、人間ID「002(人間B)」に対応して、移動軌跡データの列には、「(Xb1,Yb1),(Xb2,Yb2),…」が記録される。そして、移動軌跡テーブルにおいて、一行毎に記録されている複数の位置(座標)データが、移動軌跡データを表す。   For example, since the positions of the person A and the person B in FIG. 5B are not included in the specific area SA, the movement locus data of the two persons is recorded in the movement locus table shown in FIG. Referring to FIG. 6, this movement trajectory table is composed of columns of human IDs and movement trajectory data. In the human ID column, a human ID “001”, a human ID “002”, and the like are recorded. In the column of movement trajectory data, coordinates representing position data detected continuously every predetermined time are recorded corresponding to the human ID column. For example, “(Xa1, Ya1), (Xa2, Ya2),...” Is recorded in the movement locus data column corresponding to the human ID “001 (human A)”. Corresponding to the human ID “002 (human B)”, “(Xb1, Yb1), (Xb2, Yb2),. In the movement trajectory table, a plurality of position (coordinate) data recorded for each line represents the movement trajectory data.

また、本実施例では、移動軌跡テーブルに記録された移動軌跡データから人間関係を推定するために、DPマッチングが利用される。この場合、まず、移動軌跡データは全て状態列に変換される。次に、変換された状態列毎にDPマッチングによって類似度が算出される。そして、算出された類似度が閾値より大きい、状態列の組み合わせがある場合、その組み合わせに対応する2人の人間に対して、人間関係が有ると推定される。なお、DPマッチングを利用して移動軌跡を比較する手法については、同じ出願人の出願に係る同時係属中の特開2010−231470号公報に開示されているため、詳細な説明は省略する。   In this embodiment, DP matching is used to estimate the human relationship from the movement trajectory data recorded in the movement trajectory table. In this case, first, all the movement trajectory data is converted into a state string. Next, the similarity is calculated for each converted state sequence by DP matching. When there is a combination of state sequences in which the calculated similarity is greater than the threshold, it is estimated that there is a human relationship with the two persons corresponding to the combination. Note that a method for comparing movement trajectories using DP matching is disclosed in the co-pending Japanese Patent Application Laid-Open No. 2010-231470 relating to the same applicant's application, and thus detailed description thereof is omitted.

また、人間関係が有ると推定されると、推定された人間の人間IDが、推定結果として関係人間テーブルに記憶される。図7を参照して、図5(B)に示す人間Aと人間Bとに人間関係が有ると推定された場合、2人の人間ID「001」、「002」が関係人間テーブルに記憶される。   If it is estimated that there is a human relationship, the estimated human ID is stored in the related human table as an estimation result. Referring to FIG. 7, when it is estimated that there is a human relationship between human A and human B shown in FIG. 5B, two human IDs “001” and “002” are stored in the related human table. The

なお、ここでは記録される人間IDが2人分だけだが、3人以上の人間に1つの人間関係が有ると推定された場合、関係人間テーブルの1つの欄には、3人以上の人間の人間IDが記録される。たとえば、3人の家族に対して人間関係が有ると推定された場合、関係人間テーブルには、その3人の人間IDが1つの欄に記録される。また、関係人間テーブルには、人間IDと共に算出された類似度が記録されてもよい。   Here, only two human IDs are recorded, but if it is estimated that there are one human relationship among three or more people, one column of the related human table contains three or more human IDs. The human ID is recorded. For example, when it is estimated that there is a human relationship with three families, the three human IDs are recorded in one column in the related human table. The related person table may record the similarity calculated together with the human ID.

このように、本実施例では、日常的に人通りが多かったり、人が集まりやすかったりする領域を特定領域SAとし、その特定領域SAに存在する人間については人間関係が推定さないように出来る。そのため、人間関係の推定精度を向上させることができる。   As described above, in this embodiment, an area where there is a lot of traffic on a daily basis or where people are likely to gather is set as the specific area SA, and human relations can be prevented from being estimated for humans existing in the specific area SA. . Therefore, it is possible to improve human relationship estimation accuracy.

図8は図2に示す中央制御装置10におけるメモリ18のメモリマップ300の一例を示す図解図である。図8で示すように、メモリ18はプログラム記憶領域302およびデータ記憶領域304を含む。プログラム記憶領域302には、中央制御装置10を動作させるためのプログラムとして、移動軌跡選別プログラム310および人間関係推定プログラム312などが記憶される。   FIG. 8 is an illustrative view showing one example of a memory map 300 of the memory 18 in the central controller 10 shown in FIG. As shown in FIG. 8, the memory 18 includes a program storage area 302 and a data storage area 304. The program storage area 302 stores a movement trajectory selection program 310, a human relationship estimation program 312 and the like as programs for operating the central controller 10.

移動軌跡選別プログラム310は、連続的に記録される位置データ、つまり移動軌跡を選別するためのプログラムである。人間関係推定プログラム312は、検出された位置が特定領域に含まれていない人間の人間関係を、移動軌跡テーブルに記録された移動軌跡に基づいて推定するためのプログラムである。   The movement trajectory selection program 310 is a program for selecting position data continuously recorded, that is, a movement trajectory. The human relationship estimation program 312 is a program for estimating a human relationship of a human whose detected position is not included in the specific area based on the movement trajectory recorded in the movement trajectory table.

なお、図示は省略するが、中央制御装置10を動作させるためのプログラムには、LRF12によって得た位置を位置データに変換するためのプログラムなども含まれる。   Although illustration is omitted, the program for operating the central controller 10 includes a program for converting the position obtained by the LRF 12 into position data.

データ記憶領域304には、位置バッファ330および類似度バッファ332が設けられる。また、データ記憶領域304には、移動軌跡テーブルデータ334、関係人間テーブルデータ336、地図データ338および特定領域座標データ340が記憶される。   In the data storage area 304, a position buffer 330 and a similarity buffer 332 are provided. The data storage area 304 stores movement locus table data 334, related person table data 336, map data 338, and specific area coordinate data 340.

位置バッファ330には、各人間の位置データが一時的に記憶される。類似度バッファ332には、DPマッチングなどを利用して算出された移動軌跡データの類似度が一時的に記憶される。   The position buffer 330 temporarily stores the position data of each person. The similarity buffer 332 temporarily stores the similarity of movement trajectory data calculated using DP matching or the like.

移動軌跡テーブルデータ334は、図6に示すように構成されたテーブルデータである。関係人間テーブルデータ336は、図7に示すように構成されたテーブルデータである。地図データ338は、検出領域Eを示す地図のデータである。また、特定領域座標データ340は、図5(A),(B)に示す特定領域SAを示す座標から構成されているデータである。   The movement trajectory table data 334 is table data configured as shown in FIG. The related person table data 336 is table data configured as shown in FIG. The map data 338 is map data indicating the detection area E. The specific area coordinate data 340 is data composed of coordinates indicating the specific area SA shown in FIGS. 5 (A) and 5 (B).

なお、図示は省略するが、データ記憶領域304には、様々な計算の結果を一時的に格納するバッファなどが設けられると共に、中央制御装置10の動作に必要な他のカウンタやフラグなども設けられる。   Although not shown, the data storage area 304 is provided with a buffer for temporarily storing the results of various calculations and other counters and flags necessary for the operation of the central controller 10. It is done.

以下、中央制御装置10のCPU16によって実行されるプログラムについて説明する。図9のフロー図は移動軌跡選別プログラム310による処理を示し、図10のフロー図は人間関係推定プログラム312による処理を示す。   Hereinafter, a program executed by the CPU 16 of the central controller 10 will be described. The flowchart in FIG. 9 shows processing by the movement trajectory selection program 310, and the flowchart in FIG. 10 shows processing by the human relationship estimation program 312.

図9は移動軌跡選別処理のフロー図である。中央制御装置10の電源がオンにされると、中央制御装置10のCPU16は、ステップS1で終了操作か否かを判断する。たとえば、中央制御装置10の電源をオフにする操作がされたか否かを判断する。ステップS1で“NO”であれば、つまり中央制御装置10の電源をオフにする操作がされなければ、ステップS3で検出領域EにおけるN人の位置データを取得する。たとえば、図5(B)に示すように、検出領域Eに5人の人間が存在していれば、変数Eが「5」となり、人間A−人間Eの位置データが位置バッファ330から取得される。続いて、ステップS5では、変数iを初期化する。変数iは人間IDを指定するための変数である。そのため、ステップS5の処理では、最初の人間ID「001」を指定するために、変数iには「1」が設定される。   FIG. 9 is a flowchart of the movement trajectory selection process. When the central controller 10 is turned on, the CPU 16 of the central controller 10 determines whether or not the end operation is performed in step S1. For example, it is determined whether or not an operation for turning off the power of the central control device 10 has been performed. If “NO” in the step S1, that is, if the operation for turning off the power of the central control apparatus 10 is not performed, the position data of N persons in the detection region E is acquired in a step S3. For example, as shown in FIG. 5B, if there are five people in the detection area E, the variable E is “5”, and the position data of the person A-human E is acquired from the position buffer 330. The Subsequently, in step S5, the variable i is initialized. The variable i is a variable for designating a human ID. Therefore, in the process of step S5, “1” is set to the variable i in order to designate the first human ID “001”.

続いて、ステップS7では変数iが変数Nよりも大きいか否かを判断する。つまり、全ての人間IDのそれぞれと対応する各移動軌跡に対して、ステップS9−S13の処理が行われたか否かが判断される。ステップS7で“NO”であれば、つまり全ての人間IDと対応する移動軌跡に対してステップS9−S13の処理が行われていなければ、ステップS9で人間IDの人間の位置は特定領域SAに含まれているか否かを判断する。たとえば、変数iが「1」であれば、人間ID「001(人間A)」の位置が、特定領域SAに含まれているか否かが判断される。また、具体的な処理としては、CPU16は、位置バッファ330に格納されている人間Aの位置データが、特定領域座標データ340によって示される座標範囲内に含まれているか否かを判断する。なお、ステップS9の処理を実行するCPU16は判断手段として機能する。 Subsequently, in step S7, it is determined whether or not the variable i is larger than the variable N. That is, it is determined whether or not the processing of steps S9 to S13 has been performed for each movement locus corresponding to each of all human IDs. If “NO” in the step S7, that is, if the processing of the steps S9 to S13 is not performed on the movement trajectory corresponding to all the human IDs, the human position of the human ID i is determined in the specific area SA in the step S9. It is judged whether it is included in. For example, if the variable i is “1”, it is determined whether or not the position of the human ID “001 (human A)” is included in the specific area SA. As a specific process, the CPU 16 determines whether or not the position data of the person A stored in the position buffer 330 is included in the coordinate range indicated by the specific area coordinate data 340. In addition, CPU16 which performs the process of step S9 functions as a determination means.

ステップS9で“YES”であれば、たとえば変数iが「3」であれば、図5(B)に示すように、人間C(人間ID「003」)の位置が特定領域SAに含まれているため、ステップS13に進む。また、ステップS9で“NO”であれば、たとえば変数iが「1」であれば、図5(B)に示すように人間Aの位置が特定領域SAに含まれていないため、ステップS11で人間IDの人間の位置を移動軌跡テーブルに追加する。つまり、図6に示すように、人間Aの位置データが移動軌跡テーブルに記録される。 If “YES” in the step S9, for example, if the variable i is “3”, the position of the person C (human ID “003”) is included in the specific area SA as shown in FIG. Therefore, the process proceeds to step S13. If “NO” in the step S9, for example, if the variable i is “1”, the position of the person A is not included in the specific area SA as shown in FIG. The position of the person with human ID i is added to the movement trajectory table. That is, as shown in FIG. 6, the position data of the person A is recorded in the movement trajectory table.

続いて、ステップS13では、変数iがインクリメントされる。たとえば、変数iが「1」であれば、ステップS13の処理が実行されると変数iは「2」にされる。そして、CPU16は、変数iをインクリメントすることで、次の人間IDを指定することができる。なお、ステップS13の処理が終了すると、ステップS7に戻る。   Subsequently, in step S13, the variable i is incremented. For example, if the variable i is “1”, the variable i is set to “2” when the process of step S13 is executed. Then, the CPU 16 can designate the next human ID by incrementing the variable i. When the process of step S13 is completed, the process returns to step S7.

そして、ステップS7で“YES”であれば、つまり複数の人間の位置のそれぞれに対して、特定領域SAに含まれるかが判断されると、ステップS15で人間関係推定処理が実行される。なお、人間関係推定処理については、図10に示すフロー図を用いて詳細に説明するため、ここでの詳細な説明は省略する。また、ステップS15の処理を実行するCPU16は推定手段として機能する。   If “YES” in the step S7, that is, if it is determined whether each of a plurality of human positions is included in the specific area SA, a human relationship estimation process is executed in a step S15. The human relationship estimation processing will be described in detail with reference to the flowchart shown in FIG. 10, and thus detailed description thereof is omitted here. Moreover, CPU16 which performs the process of step S15 functions as an estimation means.

また、ステップS15の処理が終了すると、ステップS1に戻る。そして、ステップS1で“YES”であれば、たとえば中央制御装置10の電源がオフにされると、移動軌跡選別処理が終了する。   When the process of step S15 ends, the process returns to step S1. If “YES” in the step S1, for example, when the central control device 10 is turned off, the movement trajectory selection process is ended.

図10は人間関係推定処理のフロー図である。図9でステップS15の処理が実行されると、CPU16はステップS31で、移動軌跡テーブルの行数を変数Lに設定する。たとえば、移動軌跡テーブルが3行であれば、変数Lには「3」が設定される。続いて、ステップS33では、変数kに「1」を設定する。変数kは移動軌跡テーブルの行を指定するための変数である。そして、移動軌跡テーブルの1行目から処理を開始するために、ステップS33では変数kに「1」が設定される。続いて、ステップS35では、変数mに「k+1」を設定する。たとえば、変数kが「1」であれば、変数mには「2」が設定される。つまり、変数mは、変数kによって指定される行に対して、次の行を指定するための変数である。   FIG. 10 is a flowchart of human relationship estimation processing. When the process of step S15 is executed in FIG. 9, the CPU 16 sets the number of rows in the movement locus table to a variable L in step S31. For example, if the movement trajectory table has three rows, “3” is set in the variable L. Subsequently, in step S33, “1” is set to the variable k. The variable k is a variable for designating a line of the movement trajectory table. Then, in order to start the process from the first line of the movement trajectory table, “1” is set to the variable k in step S33. Subsequently, in step S35, “k + 1” is set to the variable m. For example, if the variable k is “1”, “2” is set to the variable m. That is, the variable m is a variable for designating the next line with respect to the line designated by the variable k.

続いて、ステップS37では、移動軌跡テーブルにけるk行目とm行目との移動軌跡データの類似度を算出する。たとえば、変数kが「1」であり、変数mが「2」であれば、図6に示す移動軌跡テーブルでは、1行目と2行目とに示される人間Aと人間Bとの移動軌跡データの類似度が、DPマッチングを利用して算出される。なお、算出された類似度は類似度バッファ332に格納される。続いて、ステップS39では、算出された類似度が閾値よりも大きいか否かが判断される。たとえば、人間Aと人間Bとの移動軌跡データの類似度が閾値よりも大きいかが判断される。ステップS39で“NO”であれば、つまり類似度が閾値以下であればステップS43に進む。一方、ステップS39で“YES”であれば、類似度が閾値より大きければ、ステップS41でk行目とm行目との移動軌跡データに対応する人間IDを関係人間テーブルに記録する。たとえば、変数kが「1」であり、変数mが「2」であれば、図7に示す関係人間テーブルのように、人間ID「001」および人間ID「002」が記録される。   Subsequently, in step S37, the similarity of the movement track data between the k-th row and the m-th row in the movement track table is calculated. For example, if the variable k is “1” and the variable m is “2”, the movement trajectory between the human A and the human B shown in the first and second rows in the movement trajectory table shown in FIG. Data similarity is calculated using DP matching. The calculated similarity is stored in the similarity buffer 332. Subsequently, in step S39, it is determined whether or not the calculated similarity is greater than a threshold value. For example, it is determined whether the similarity of the movement trajectory data between the person A and the person B is greater than a threshold value. If “NO” in the step S39, that is, if the similarity is equal to or less than the threshold value, the process proceeds to a step S43. On the other hand, if “YES” in the step S39, if the similarity is larger than the threshold value, the human ID corresponding to the movement trajectory data of the k-th row and the m-th row is recorded in the related human table in a step S41. For example, if the variable k is “1” and the variable m is “2”, the human ID “001” and the human ID “002” are recorded as in the related person table shown in FIG.

続いて、ステップS43では、変数mをインクリメントする。たとえば、ステップS43の処理が実行される前の変数kが「1」であり、変数mが「2」であれば、1行目の移動軌跡データと、3行目以降の移動軌跡データとの類似度を算出するために、変数mがインクリメントされる。   Subsequently, in step S43, the variable m is incremented. For example, if the variable k before the process of step S43 is “1” and the variable m is “2”, the movement trajectory data on the first line and the movement trajectory data on the third and subsequent lines In order to calculate the similarity, the variable m is incremented.

続いて、ステップS45では、変数mが変数Lよりも大きいかを判断する。つまり、k行目の移動軌跡データと「k+1」行目以降の移動軌跡データとの類似度が全て算出されたか否かを判断する。ステップS45で“NO”であれば、つまりk行目の移動軌跡データと「k+1」行目以降の移動軌跡データとの類似度が算出されていなければ、ステップS37に戻る。   Subsequently, in step S45, it is determined whether the variable m is larger than the variable L. That is, it is determined whether all the similarities between the movement trajectory data on the kth row and the movement trajectory data on the “k + 1” th and subsequent rows have been calculated. If “NO” in the step S45, that is, if the similarity between the movement trajectory data in the k-th row and the movement trajectory data in the “k + 1” -th and subsequent rows has not been calculated, the process returns to the step S37.

また、ステップS45で“YES”であれば、つまりk行目の移動軌跡データと「k+1」行目以降の移動軌跡データとの類似度が算出されると、ステップS47で変数kをインクリメントする。たとえば、変数kが「1」であれば、2行目の移動軌跡データと3行目以降の移動軌跡データとの類似度を算出するために変数kがインクリメントされる。   If “YES” in the step S45, that is, if the similarity between the movement locus data in the k-th row and the movement locus data in the “k + 1” -th and subsequent rows is calculated, the variable k is incremented in a step S47. For example, if the variable k is “1”, the variable k is incremented to calculate the similarity between the movement trajectory data in the second row and the movement trajectory data in the third and subsequent rows.

続いて、ステップS49では、変数kが変数Lと一致したか否かを判断する。たとえば、全ての行の組み合わせで類似度の算出が完了すると、変数kと変数Lとの値が一致する。そのため、ステップS49では、全ての行の組み合わせで類似度の算出が完了したか否かが判断されている。ステップS49で“NO”であれば、つまり全ての行の組み合わせで類似度の算出が完了していなければ、ステップS35に戻る。一方、ステップS49で“YES”であれば、全ての行の組み合わせで類似度の算出が完了すれば、人間関係推定処理が終了し、移動軌跡選別処理に戻る。   Subsequently, in step S49, it is determined whether or not the variable k matches the variable L. For example, when the similarity calculation is completed for all the row combinations, the values of the variable k and the variable L match. Therefore, in step S49, it is determined whether or not similarity calculation has been completed for all combinations of rows. If “NO” in the step S49, that is, if the calculation of the similarity is not completed for all combinations of rows, the process returns to the step S35. On the other hand, if “YES” in the step S49, if the calculation of the similarity is completed for all the row combinations, the human relationship estimation process is ended, and the process returns to the movement trajectory selection process.

なお、類似度を算出するときに、移動軌跡データを構成する位置データが1つしかないことがある。この場合、人間関係は2人の距離に基づいて推定される。具体的には、人間関係推定処理のステップS37では、類似度として2人の距離値が算出される。また、ステップS39では、算出された距離値が閾値よりも小さければ“YES”と判断される。つまり、2人の距離に基づいて人間関係が推定される場合、2人の距離が閾値よりも短ければ、人間関係が有ると判断される。   When calculating the similarity, there may be only one position data constituting the movement trajectory data. In this case, the human relationship is estimated based on the distance between the two people. Specifically, in step S37 of the human relationship estimation process, a distance value between two people is calculated as the similarity. In step S39, if the calculated distance value is smaller than the threshold value, “YES” is determined. That is, when the human relation is estimated based on the distance between the two persons, if the distance between the two persons is shorter than the threshold, it is determined that there is a human relation.

以上の説明から分かるように、関係推定システム100は、複数のLRF12を備える中央制御装置10を有する。LRF12は、たとえば、ショッピングモールの通路を通る人々の位置を検出する。この通路には、特に人通りが多い場所や、人が密集する場所が特定領域SAとして設定される。そして、複数の人間の位置のそれぞれがその特定領域SAに含まれているかが判断され、中央制御装置10は、特定領域SAに含まれていない人間の移動軌跡データに基づいて、人間関係の有無を推定する。   As can be seen from the above description, the relationship estimation system 100 includes the central control device 10 including a plurality of LRFs 12. The LRF 12 detects, for example, the positions of people passing through a shopping mall aisle. In this passage, a place where there is a particularly heavy traffic and a place where people gather is set as the specific area SA. Then, it is determined whether each of a plurality of human positions is included in the specific area SA, and the central controller 10 determines whether or not there is a human relationship based on the movement trajectory data of the human that is not included in the specific area SA. Is estimated.

したがって、関係推定システム100は、無関係な人々が頻繁に行き交ったり、集まったりする場所を除いて、人間関係を推定することができる。そのため、人々の人間関係を精度よく推定することができるようになる。   Therefore, the relationship estimation system 100 can estimate human relationships except for places where irrelevant people frequently come and go. Therefore, it becomes possible to accurately estimate the human relationships of people.

なお、本実施例の人間関係推定処理では、所定時刻毎に人間関係が推定されている。そのため、時間が経過すると推定された人間関係が変化することが有る。たとえば、システムが起動した直後は、蓄積された位置データが少ないため、実際には人間関係が無くても、人間関係が有ると推定されることが有る。しかし、システムの稼働時間が長くなると蓄積された位置データが増えるため、人間関係が正しく推定されるようになる。   In the human relationship estimation process according to the present embodiment, the human relationship is estimated at every predetermined time. As a result, the estimated human relationship may change over time. For example, immediately after the system is started up, the accumulated position data is small, so it may be estimated that there is a human relationship even though there is actually no human relationship. However, since the accumulated position data increases as the operating time of the system increases, human relations are correctly estimated.

また、他の実施例では、上記のように人間関係が変化するのを防ぐために、関係推定システム100が起動してから一定時間は、人間関係が推定されないようにされてもよい。この場合、移動軌跡判別処理のステップS15が実行される前に、システムが起動してから一定時間が経過したかを判断するステップが追加される。   In another embodiment, in order to prevent the human relationship from changing as described above, the human relationship may not be estimated for a certain period of time after the relationship estimation system 100 is activated. In this case, before step S15 of the movement trajectory determination process is executed, a step of determining whether a certain time has elapsed since the system was started is added.

また、その他の実施例では、人間の性別や年齢に基づいて、推定された人間関係の「属性」を判定する。人間関係の「属性」とは、「家族」、「友達」および「カップル」などである。具体的に説明すると、人間の性別や、年齢が事前に登録されたRFIDタグを人間に所持させ、RFIDタグの電波強度を利用して、RFIDタグを所持する人間と、検出された人間とを対応付ける。そして、2人の男女に人間関係が推定されていれば、人間関係の属性を「カップル」と判断する。また、3人以上で同じ年代の集団に人間関係が推定されていれば、人間関係の属性を「友達」と判断する。さらに、3人以上で年齢の差が大きければ、人間関係の属性を「家族」と判断する。   In another embodiment, the “attribute” of the estimated human relationship is determined based on the gender and age of the human. The “attribute” of the human relationship includes “family”, “friend”, “couple”, and the like. More specifically, a person who has an RFID tag in which the gender and age of the person are registered in advance is used, and the person who owns the RFID tag and the person who has been detected using the radio wave intensity of the RFID tag. Associate. If the relationship between two men and women is estimated, the attribute of the relationship is determined as “couple”. Also, if the human relationship is estimated for a group of three or more people of the same age, the attribute of the human relationship is determined as “friend”. Furthermore, if the age difference is large among three or more people, the attribute of the human relationship is determined as “family”.

また、さらにその他の実施例では、検出領域E内に情報提供サービスを実施する自律移動型のロボットが配置されてもよい。そして、ロボットは、人間関係の属性が判定された人間に対して、提供する情報の内容を変化させる。たとえば、「カップル」の属性を持つ2人には、カップル向けのお店や、イベント情報が提供される。また、「友達」の属性を持つ3人以上の集団には、集団を構成する人間を収容可能な、飲食店などの情報が提供される。そして、「家族」の属性を持つ3人以上の集団には、その集団に属する最年少の人間(子ども)向けのイベント情報や、家族用のお店の情報などが提供される。   In still another embodiment, an autonomous mobile robot that performs an information providing service may be arranged in the detection area E. Then, the robot changes the content of the information to be provided to the person whose human relation attribute is determined. For example, a shop for couples and event information are provided to two persons having the attribute of “couple”. Further, a group of three or more people having the attribute of “friends” is provided with information such as restaurants that can accommodate the people who make up the group. The group of three or more persons having the “family” attribute is provided with event information for the youngest person (child) belonging to the group, information on a family store, and the like.

また、他の実施例では、人間関係を推定する手法として、DPマッチングとは異なる手法が利用されてもよい。たとえば、検出領域Eにおいて、特定領域SAとは別に推定領域をさらに設ける。そして、特許文献1のように、その推定領域内の行動履歴に基づいて、人間関係が推定されてもよい。   In another embodiment, a technique different from DP matching may be used as a technique for estimating the human relationship. For example, in the detection area E, an estimation area is further provided separately from the specific area SA. And like patent document 1, based on the action history in the presumed field, human relations may be presumed.

また、本実施例では、特定領域SAは、システムの管理者によって手動で設定されたが、他の実施例では自動的に設定されてもよい。たとえば、検出した人々の位置を蓄積し、上記「特開2010−231470号公報」に開示されている局所行動や大局行動の発生頻度を求め、その局所行動および大局行動の発生頻度が高い領域が、自動的に特定領域SAとして設定されてもよい。さらに、その他の実施例では、季節、イベントおよび時間帯などによって特定領域SAが変化してもよい。   In this embodiment, the specific area SA is manually set by the system administrator, but may be automatically set in other embodiments. For example, the positions of detected people are accumulated, the occurrence frequency of local behavior and global behavior disclosed in the above-mentioned “Japanese Patent Application Laid-Open No. 2010-231470” is obtained, and there is a region where the occurrence frequency of the local behavior and global behavior is high. Alternatively, the specific area SA may be automatically set. Furthermore, in another embodiment, the specific area SA may change depending on the season, event, and time zone.

また、移動軌跡選別プログラム310および人間関係推定プログラム312は、データ配信用のサーバのHDDに記憶され、ネットワークを介して本実施例と同等の構成のシステムにおける中央制御装置などに配信されてもよい。また、CD, DVD, BD (Blu-ray Disc)などの光学ディスク、USBメモリおよびメモリカードなどの記憶媒体にこれらのプログラムを記憶させた状態で、その記憶媒体が販売または配布されてもよい。そして、上記したサーバや記憶媒体などを通じてダウンロードされた、移動軌跡選別プログラム310および人間関係推定プログラム312が、本実施例と同等の構成のシステムにおける中央制御装置にインストールされた場合、本実施例と同等の効果が得られる。   Further, the movement trajectory selection program 310 and the human relationship estimation program 312 may be stored in the HDD of the data distribution server and distributed to a central control device or the like in a system having the same configuration as the present embodiment via the network. . Further, the storage medium may be sold or distributed in a state where these programs are stored in a storage medium such as an optical disk such as a CD, a DVD, or a BD (Blu-ray Disc), a USB memory, and a memory card. When the movement trajectory selection program 310 and the human relationship estimation program 312 downloaded through the above-described server or storage medium are installed in the central controller in the system having the same configuration as that of this embodiment, The same effect can be obtained.

そして、本明細書中で挙げた、人数、所定時間、距離、誤差、半径、角度および周波数などの具体的な数値は、いずれも単なる一例であり、製品の仕様などの必要に応じて適宜変更可能である。   The specific numerical values such as the number of people, predetermined time, distance, error, radius, angle, and frequency given in this specification are merely examples, and are appropriately changed according to the needs of the product specifications and the like. Is possible.

10 …中央制御装置
12a−12f …LRF
16 …CPU
18 …メモリ
10 ... Central controller 12a-12f ... LRF
16 ... CPU
18 ... Memory

Claims (4)

空間内に存在する複数の人間のそれぞれの位置を検出する検出手段を有する、関係推定装置であって、
前記複数の人間の位置のそれぞれが特定領域に含まれているかを判断する判断手段、および
前記特定領域に含まれていない少なくとも2人以上の人間のそれぞれの位置に基づいて、人間関係を推定する推定手段を備える、関係推定装置。
A relationship estimation device having detection means for detecting the positions of a plurality of humans existing in space,
A determination means for determining whether each of the plurality of human positions is included in a specific area, and estimating a human relationship based on each position of at least two persons not included in the specific area A relationship estimation device comprising estimation means.
空間内に存在する複数の人間のそれぞれの位置を検出する検出手段を有する、関係推定システムであって、
前記複数の人間の位置のそれぞれが特定領域に含まれているかを判断する判断手段、および
前記特定領域に含まれていない少なくとも2人以上の人間のそれぞれの位置に基づいて、人間関係を推定する推定手段を備える、関係推定システム。
A relationship estimation system having detection means for detecting positions of a plurality of humans existing in a space,
A determination means for determining whether each of the plurality of human positions is included in a specific area, and estimating a human relationship based on each position of at least two persons not included in the specific area A relationship estimation system comprising an estimation means.
空間内に存在する複数の人間のそれぞれの位置を検出する検出手段を有する、関係推定装置のプロセッサを、
前記複数の人間の位置のそれぞれが特定領域に含まれているかを判断する判断手段、および
前記特定領域に含まれていない少なくとも2人以上の人間のそれぞれの位置に基づいて、人間関係を推定する推定手段として機能させる、関係推定プログラム。
A processor of a relationship estimation device having detection means for detecting the position of each of a plurality of persons existing in space;
A determination means for determining whether each of the plurality of human positions is included in a specific area, and estimating a human relationship based on each position of at least two persons not included in the specific area A relationship estimation program that functions as an estimation means.
空間内に存在する複数の人間のそれぞれの位置を検出する検出手段を有する、関係推定装置の関係推定方法であって、
前記複数の人間の位置のそれぞれが特定領域に含まれているかを判断し、そして
前記特定領域に含まれていない少なくとも2人以上の人間のそれぞれの位置に基づいて、人間関係を推定する、関係推定方法。
A relationship estimation method for a relationship estimation device, comprising detection means for detecting the position of each of a plurality of humans existing in space,
Determining whether each of the plurality of human positions is included in a specific area, and estimating a human relation based on each position of at least two persons not included in the specific area Estimation method.
JP2010280018A 2010-12-16 2010-12-16 Relation estimation device, relation estimation system, relation estimation program and relation estimation method Pending JP2012128700A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010280018A JP2012128700A (en) 2010-12-16 2010-12-16 Relation estimation device, relation estimation system, relation estimation program and relation estimation method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010280018A JP2012128700A (en) 2010-12-16 2010-12-16 Relation estimation device, relation estimation system, relation estimation program and relation estimation method

Publications (1)

Publication Number Publication Date
JP2012128700A true JP2012128700A (en) 2012-07-05

Family

ID=46645628

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010280018A Pending JP2012128700A (en) 2010-12-16 2010-12-16 Relation estimation device, relation estimation system, relation estimation program and relation estimation method

Country Status (1)

Country Link
JP (1) JP2012128700A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016149076A (en) * 2015-02-13 2016-08-18 日本電信電話株式会社 Relationship determine apparatus, relationship determine method and relationship determine program
JP2016170817A (en) * 2016-06-23 2016-09-23 日本電信電話株式会社 Relationship determination device, learning device, relationship determination method, learning method and program
JPWO2020261861A1 (en) * 2019-06-28 2020-12-30

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005131748A (en) * 2003-10-31 2005-05-26 Advanced Telecommunication Research Institute International Relationship detecting system
JP2005327156A (en) * 2004-05-17 2005-11-24 Advanced Telecommunication Research Institute International Relationship detection system
JP2008299820A (en) * 2007-06-04 2008-12-11 Fuji Xerox Co Ltd Position information processor
JP2009122834A (en) * 2007-11-13 2009-06-04 Fuji Xerox Co Ltd Inter-organization communication comparison device, access status display device, and program
JP2009301173A (en) * 2008-06-11 2009-12-24 Fuji Xerox Co Ltd Spatial division estimation system and spatial division estimation program
JP2010165097A (en) * 2009-01-14 2010-07-29 Ntt Docomo Inc Personal relationship estimation device, and personal relationship estimation method

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005131748A (en) * 2003-10-31 2005-05-26 Advanced Telecommunication Research Institute International Relationship detecting system
JP2005327156A (en) * 2004-05-17 2005-11-24 Advanced Telecommunication Research Institute International Relationship detection system
JP2008299820A (en) * 2007-06-04 2008-12-11 Fuji Xerox Co Ltd Position information processor
JP2009122834A (en) * 2007-11-13 2009-06-04 Fuji Xerox Co Ltd Inter-organization communication comparison device, access status display device, and program
JP2009301173A (en) * 2008-06-11 2009-12-24 Fuji Xerox Co Ltd Spatial division estimation system and spatial division estimation program
JP2010165097A (en) * 2009-01-14 2010-07-29 Ntt Docomo Inc Personal relationship estimation device, and personal relationship estimation method

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
CSNG200900020003; 神田 崇行 TAKAYUKI KANDA: 'RFIDタグを用いた科学館来館者の移動軌跡の分析 Analysis of People Trajectories with RFID in a Sci' 情報処理学会論文誌 論文誌ジャーナル Vol.49 No.5 [CD-ROM] IPSJ Journal 第49巻, 20090204, p1727-1742, 社団法人情報処理学会 Information Processing Socie *
JPN6014025994; 神田 崇行 TAKAYUKI KANDA: 'RFIDタグを用いた科学館来館者の移動軌跡の分析 Analysis of People Trajectories with RFID in a Sci' 情報処理学会論文誌 論文誌ジャーナル Vol.49 No.5 [CD-ROM] IPSJ Journal 第49巻, 20090204, p1727-1742, 社団法人情報処理学会 Information Processing Socie *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016149076A (en) * 2015-02-13 2016-08-18 日本電信電話株式会社 Relationship determine apparatus, relationship determine method and relationship determine program
JP2016170817A (en) * 2016-06-23 2016-09-23 日本電信電話株式会社 Relationship determination device, learning device, relationship determination method, learning method and program
JPWO2020261861A1 (en) * 2019-06-28 2020-12-30
WO2020261861A1 (en) * 2019-06-28 2020-12-30 パナソニックIpマネジメント株式会社 Interaction analysis system, interaction analysis method, and program
JP7365648B2 (en) 2019-06-28 2023-10-20 パナソニックIpマネジメント株式会社 AC analysis system, AC analysis method, and program

Similar Documents

Publication Publication Date Title
EP3729226B1 (en) Semantic obstacle recognition for path planning
US20220074762A1 (en) Exploration Of A Robot Deployment Area By An Autonomous Mobile Robot
US9235216B2 (en) Running information generating apparatus of autonomous running apparatus, running information generating method, running information generating program, and autonomous running apparatus
JP6070689B2 (en) Flow line information generation system, flow line information generation method, and flow line information generation program
EP2777304B1 (en) A method and apparatus for determining location information of a position in a multi-storey building
US8385943B1 (en) Method and apparatus for determining location information of a position in a multi-storey building
JP5803054B2 (en) Autonomous mobile device
US20150046018A1 (en) Autonomous moving body, obstacle sensing method, and obstacle avoiding method
US20140309835A1 (en) Path finding device, self-propelled working apparatus, and non-transitory computer readable medium
US20160061607A1 (en) System for determining the location of entrances and areas of interest
US20210370511A1 (en) Cleaning robot and task performing method therefor
US11300972B2 (en) Path planning device, path planning method, and program
Coltin et al. Multi-observation sensor resetting localization with ambiguous landmarks
JP2017174272A (en) Information processing device and program
JP2017122724A (en) System and method for estimating location of wireless device
GB2531075A (en) Smart trolley wheel
JP7117519B2 (en) Navigation method, navigation system, server, mobile object, and navigation program
JP7117520B2 (en) Navigation method, navigation system, moving object, and navigation program
JP2013174568A (en) Moving body tracking device, moving body tracking method, and program
US20210080274A1 (en) Navigation method, navigation system, moving body, and navigation program
JP2012128700A (en) Relation estimation device, relation estimation system, relation estimation program and relation estimation method
TW202228587A (en) Moving robot system
JP2019139602A (en) Risk evaluation system and risk evaluation method
JP5418938B2 (en) Group behavior estimation apparatus and service providing system
US20150247918A1 (en) Method and apparatus for tracking objects with location and motion correlation

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131101

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140530

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140624

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140728

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141216

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150212

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20150714