JP2018204922A - Human detection device and method - Google Patents
Human detection device and method Download PDFInfo
- Publication number
- JP2018204922A JP2018204922A JP2017114168A JP2017114168A JP2018204922A JP 2018204922 A JP2018204922 A JP 2018204922A JP 2017114168 A JP2017114168 A JP 2017114168A JP 2017114168 A JP2017114168 A JP 2017114168A JP 2018204922 A JP2018204922 A JP 2018204922A
- Authority
- JP
- Japan
- Prior art keywords
- person
- human
- section
- thermal image
- detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 150
- 238000000034 method Methods 0.000 title abstract description 6
- 238000004891 communication Methods 0.000 claims abstract description 31
- 238000012790 confirmation Methods 0.000 claims description 29
- 230000004044 response Effects 0.000 claims description 17
- 230000006870 function Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 6
- 238000004378 air conditioning Methods 0.000 description 4
- 244000205754 Colocasia esculenta Species 0.000 description 2
- 235000006481 Colocasia esculenta Nutrition 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000001931 thermography Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J5/48—Thermography; Techniques using wholly visual means
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J5/0022—Radiation pyrometry, e.g. infrared or optical thermometry for sensing the radiation of moving bodies
- G01J5/0025—Living bodies
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/30—Control or safety arrangements for purposes related to the operation of the system, e.g. for safety or monitoring
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01V—GEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
- G01V8/00—Prospecting or detecting by optical means
- G01V8/10—Detecting, e.g. by using light barriers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F2120/00—Control inputs relating to users or occupants
- F24F2120/10—Occupancy
- F24F2120/12—Position of occupants
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Combustion & Propulsion (AREA)
- Mechanical Engineering (AREA)
- General Engineering & Computer Science (AREA)
- Chemical & Material Sciences (AREA)
- General Life Sciences & Earth Sciences (AREA)
- Geophysics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Air Conditioning Control Device (AREA)
- Radiation Pyrometers (AREA)
- Geophysics And Detection Of Objects (AREA)
- Telephonic Communication Services (AREA)
Abstract
Description
本発明は、区画から検出した熱画像に基づいて区画に存在する人の人位置を検知する人検知技術に関する。 The present invention relates to a person detection technique for detecting the position of a person existing in a section based on a thermal image detected from the section.
従来、空調制御システムとして、人が存在する区画を特定して快適な空調環境に制御し、人のいない区画については、空調や照明を停止させる技術が提案されている(例えば、特許文献1−2など参照)。このようなシステムでは、区画に存在する人を検知する技術として、壁や天井に取り付けた複数の赤外線センサで区画の熱画像(サーモグラフィ)を検出し、得られた区画床面の温度分布から人の表面温度を示す人領域を抽出することにより、人を検知している。 Conventionally, as an air conditioning control system, a technology has been proposed in which a section where a person is present is specified and controlled to a comfortable air conditioning environment, and air conditioning and lighting are stopped for a section without a person (for example, Patent Document 1). 2 etc.). In such a system, as a technology for detecting people in the compartment, a thermal image (thermography) of the compartment is detected by a plurality of infrared sensors attached to the wall or ceiling, and the temperature distribution on the obtained compartment floor is used to detect the person. A person is detected by extracting a human region indicating the surface temperature of the human.
熱画像を検出する赤外線センサの1つとして、サーモパイルアレイセンサがある。サーモパイルアレイセンサを天井に設置して熱画像を検出し、区画床面の温度分布を計測すると、発熱体である人間は床面よりも高い温度で検出される。この際、解像度の高いサーモパイルアレイセンサを用いることで、約10cm単位で人の位置情報の取得も可能となる。一定のフレームレートで熱画像を検出して区画床面の温度分布を計測し続けることにより、人の移動を追跡することができ、区画内における人の位置情報をリアルタイムに検出することが可能となる。 One of infrared sensors that detect thermal images is a thermopile array sensor. When a thermopile array sensor is installed on the ceiling to detect a thermal image and measure the temperature distribution on the section floor, a human being as a heating element is detected at a higher temperature than the floor. At this time, by using a thermopile array sensor with a high resolution, it is possible to acquire human position information in units of about 10 cm. By detecting thermal images at a constant frame rate and continuously measuring the temperature distribution of the compartment floor, it is possible to track the movement of people and to detect the location information of people in the compartment in real time. Become.
しかしながら、前述したような従来技術にかかる人検知技術は、区画に設けられている空調設備や照明設備などの設備の制御に用いることを目的としている。このため、得られる人検知結果は、区画に設定したX−Y座標系における座標値からなる人位置だけである。したがって、それぞれの位置座標に存在する人が誰なのかを特定することはできないという問題点があった。 However, the human detection technique according to the related art as described above is intended to be used for control of equipment such as air conditioning equipment and lighting equipment provided in a section. For this reason, the human detection result obtained is only the human position made up of the coordinate values in the XY coordinate system set for the section. Therefore, there is a problem that it is impossible to specify who is present at each position coordinate.
本発明はこのような課題を解決するためのものであり、区画に存在する人と人位置とを容易に特定できる人検知技術を提供することを目的としている。 The present invention is intended to solve such a problem, and an object thereof is to provide a human detection technique capable of easily specifying a person and a person position existing in a section.
このような目的を達成するために、本発明にかかる人検知装置は、区画に設置された熱画像センサで検出した熱画像から、前記区画に存在する人の人位置を検知する人検知装置であって、前記熱画像センサで検出した熱画像を周期的に取得する熱画像取得部と、取得した前記熱画像を時系列で画像処理して、前記区画の床面温度より高い高温部分を追跡することにより、前記区画に存在する人の人位置を検知する人追跡部と、前記区画に存在する人ごとに、前記人追跡部で検知された前記人の前記人位置と前記人を識別する人識別情報との組が登録された人検知情報を記憶する記憶部と、通信回線を介して接続された携帯端末からの検知要求に応じて、前記区画内に設けられている人特定エリアから検知した人の人位置と、前記検知要求に含まれている人識別情報との組を、前記人検知情報に登録する人特定部とを備えている。 In order to achieve such an object, a human detection device according to the present invention is a human detection device that detects a human position of a person existing in a section from a thermal image detected by a thermal image sensor installed in the section. A thermal image acquisition unit for periodically acquiring thermal images detected by the thermal image sensor, and time-sequentially processing the acquired thermal images to track a high-temperature portion higher than the floor surface temperature of the section And a person tracking unit that detects a person position of a person existing in the section, and for each person existing in the section, the person position of the person detected by the person tracking unit and the person are identified. In response to a detection request from a portable terminal connected via a communication line and a storage unit that stores human detection information in which a set of human identification information is registered, from a person identification area provided in the section The detected person's position and the detection request A set of the person identification information is, and a person identification unit to be registered in the person detection information.
また、本発明にかかる上記人検知装置の一構成例は、前記熱画像取得部が、前記検知要求に応じて、前記熱画像センサから新たな熱画像を取得し、前記人追跡部は、前記新たな熱画像から前記人特定エリアに存在する新たな人の人位置を検知し、前記人特定部は、前記新たな人の人位置と前記検知要求に含まれている人識別情報との組を、前記人検知情報に登録するようにしたものである。 Further, in one configuration example of the human detection device according to the present invention, the thermal image acquisition unit acquires a new thermal image from the thermal image sensor in response to the detection request, and the human tracking unit A person position of a new person existing in the person identification area is detected from a new thermal image, and the person identification unit includes a set of the person position of the new person and the person identification information included in the detection request. Is registered in the human detection information.
また、本発明にかかる上記人検知装置の一構成例は、通信回線を介して接続された利用者端末からの確認要求に応じて、指定された人識別情報と対応する人位置を前記区画の人検知情報から検索し、得られた人位置を示す確認データを前記利用者端末へ配信する配信処理部をさらに備えている。 In addition, according to a configuration example of the human detection device according to the present invention, in response to a confirmation request from a user terminal connected via a communication line, the person position corresponding to the specified person identification information is set in the section. It further includes a distribution processing unit that searches from the human detection information and distributes confirmation data indicating the obtained human position to the user terminal.
また、本発明にかかる上記人検知装置の一構成例は、前記配信処理部が、前記指定された人識別情報と対応する人位置が前記区画の人検知情報に登録されていない場合、人位置が不明である旨の確認データを前記利用者端末へ配信するようにしたものである。 Further, in the configuration example of the human detection device according to the present invention, when the distribution processing unit does not register the human position corresponding to the designated human identification information in the human detection information of the section, the human position Confirmation data indicating that is unknown is distributed to the user terminal.
また、本発明にかかる人検知方法は、熱画像取得部が、区画に設置された熱画像センサで検出した熱画像から、前記区画に存在する人の人位置を検知する人検知装置で用いられる人検知方法であって、熱画像取得部が、前記熱画像センサで検出した熱画像を周期的に取得する熱画像取得ステップと、人追跡部が、取得した前記熱画像を時系列で画像処理して、前記区画の床面温度より高い高温部分を追跡することにより、前記区画に存在する人の人位置を検知する人追跡ステップと、記憶部が、前記区画に存在する人ごとに、前記人追跡部で検知された前記人の前記人位置と前記人を識別する人識別情報との組が登録された人検知情報を記憶する記憶ステップと、人特定部が、通信回線を介して接続された携帯端末からの検知要求に応じて、前記区画内に設けられている人特定エリアから検知した人の人位置と、前記検知要求に含まれている人識別情報との組を、前記人検知情報に登録する人特定ステップとを備えている。 The human detection method according to the present invention is used in a human detection device in which a thermal image acquisition unit detects a human position of a person existing in a section from a thermal image detected by a thermal image sensor installed in the section. In the human detection method, the thermal image acquisition unit periodically acquires the thermal image detected by the thermal image sensor, and the human tracking unit performs image processing on the acquired thermal image in time series. Then, a person tracking step of detecting a person position of a person existing in the section by tracking a high temperature portion higher than the floor surface temperature of the section, and a storage unit for each person existing in the section, A storage step for storing human detection information in which a set of the human position of the person detected by the human tracking unit and human identification information for identifying the person is registered, and a human identification unit connected via a communication line In response to detection requests from mobile devices A person identifying step of registering a set of the person position detected from the person identification area provided in the section and the person identification information included in the detection request in the person detection information. Yes.
本発明によれば、利用者が区画に設けられている人特定エリアで携帯端末を操作するだけで、利用者の人位置と利用者の人識別情報とが人検知装置で対応付けられることになる。したがって、人検知装置で区画から検知した人位置に存在する人が誰なのかを容易に特定することが可能となる。 According to the present invention, the user's human position and the user identification information of the user are associated with each other by the human detection device only by operating the mobile terminal in the person specifying area provided in the section. Become. Therefore, it is possible to easily identify who is in the person position detected from the section by the person detection device.
次に、本発明の実施の形態について図面を参照して説明する。
[第1の実施の形態]
まず、図1を参照して、本発明の第1の実施の形態にかかる人検知システム1について説明する。図1は、人検知システムの構成を示すブロック図である。
この人検知システム1は、オフィスなどのように人が複数の区画を利用するような施設に設けられて、各区画で得られた熱画像に基づいた人検知結果を、利用者へ提供するシステムである。本実施の形態では、人検知結果から区画に存在する、特定の人の人位置を利用者に配する場合について説明する。
Next, embodiments of the present invention will be described with reference to the drawings.
[First Embodiment]
First, a
The
人検知システム1は、複数の熱画像センサTと人検知装置10とを備えている。
熱画像センサTは、サーモパイルセンサなどの一般的な熱画像センサからなり、区画Dの天井Sや壁(図示せず)に配置されて、区画Dの床面の熱画像を検出するセンサ端末である。この際、これら熱画像センサTは、例えば区画Dの天井に、それぞれの撮像エリアが交差するような間隔でマトリクス状に配置されている。
なお、このようにして熱画像センサTが設置されている区画Dが複数あれば、これら複数の区画Dを人検知システム1の検知対象とすることができる。
The
The thermal image sensor T includes a general thermal image sensor such as a thermopile sensor, and is a sensor terminal that is disposed on a ceiling S or a wall (not shown) of the section D and detects a thermal image of the floor surface of the section D. is there. At this time, these thermal image sensors T are arranged in a matrix at intervals such that the respective imaging areas intersect, for example, on the ceiling of the section D.
If there are a plurality of sections D in which the thermal image sensors T are installed in this way, the plurality of sections D can be set as detection targets of the
人検知装置10は、全体としてサーバ装置などの情報処理装置からなり、通信回線L1を介して各熱画像センサTから取得した熱画像から、区画Dに存在する人の人位置を検知する装置である。
利用者端末20は、PC、タブレット、スマートホンなどの情報処理端末からなり、例えばブラウザでの利用者操作に応じて、通信回線L2を介して人検知装置10にアクセスすることにより、任意の区画Dに存在する任意の人の人位置を取得して画面表示する機能を有している。
The
The
携帯端末22は、タブレットやスマートホンなどの携帯端末からなり、利用者の検知要求操作に応じて、予め設定されている利用者の人識別情報を含む検知要求を無線送信する機能を有している。
無線基地局21は、通信回線L2を介して人検知装置10と接続されて、携帯端末22から無線送信された検知要求を受信して人検知装置10へ転送する機能を有している。
The
The
[人検知装置]
人検知装置10は、主な機能部として、センサI/F部11、通信I/F部12、記憶部13、熱画像取得部14、人追跡部15、人特定部16、および配信処理部17が設けられている。これら機能部のうち、熱画像取得部14、人追跡部15、人特定部16、および配信処理部17は、中央処理装置(CPU)とプログラムとが協働することにより実現されている。
[Human detection device]
The
センサI/F部11は、通信回線L1を介して区画Dに配置された各熱画像センサTとデータ通信を行う機能を有している。
通信I/F部12は、通信回線L2を介して利用者端末20とデータ通信を行う機能を有している。
The sensor I /
The communication I /
記憶部13は、ハードディスクや半導体メモリなどの記憶装置からなり、人検知装置10での人検知処理に用いる各種の処理情報やプログラムを記憶する機能を有している。
主な処理情報として、各熱画像センサTから取得した熱画像のほか、区画Dに存在する人の人検知結果を示す人検知情報がある。
The
As main processing information, in addition to the thermal image acquired from each thermal image sensor T, there is human detection information indicating a human detection result of a person existing in the section D.
図2は、区画の人検知例である。この検知例では、区画Dに、人として「P11」、「P12」、「P13」、「P14」が存在している。また、区画Dには、例えば出入口付近の位置に、人ひとりが入れるほどの面積を有する、人特定エリアNが設けられている。 FIG. 2 is an example of person detection in a section. In this detection example, “P11”, “P12”, “P13”, and “P14” exist as persons in the section D. In the section D, for example, a person specifying area N having an area enough for one person to enter can be provided at a position near the entrance / exit.
図3は、人検知情報の構成例である。人検知情報には、人を識別する人IDごとに、人識別情報、X座標、およびY座標が登録されている。X,Y座標は、区画Dに予め設定した原点Oを基準とするX−Y座標系における座標値である。
例えば、人「P11」には、人識別情報として名前「アズビル太郎」が登録されており、この人の人位置として「X11」,「Y11」が登録されている。これにより、人「アズビル太郎」が人位置「X11」,「Y11」に存在していることが分かる。
FIG. 3 is a configuration example of human detection information. In the person detection information, person identification information, X coordinates, and Y coordinates are registered for each person ID for identifying a person. The X and Y coordinates are coordinate values in an XY coordinate system based on the origin O set in advance in the section D.
For example, for the person “P11”, the name “Azbil Taro” is registered as the person identification information, and “X11” and “Y11” are registered as the person positions of this person. Thereby, it can be seen that the person “Azbil Taro” is present at the person positions “X11” and “Y11”.
熱画像取得部14は、センサI/F部11および通信回線L1を介して熱画像センサTで検出された熱画像を周期的に取得して記憶部13に保存する機能を有している。
人追跡部15は、記憶部13に保存されている熱画像を時系列で画像処理して、熱画像に含まれている床面の床面温度よりも高い高温部分を人として追跡することにより区画Dに存在する人の人位置を検知し、検知した人位置に基づいて、記憶部13に保存されている人検知情報の人位置を更新する機能を有している。ここでの追跡手法については、例えば特許文献2などの公知の手法を用いればよい。
The thermal
The
人特定部16は、通信回線L2を介して接続された携帯端末22からの検知要求に応じて、区画D内に設けられている人特定エリアNから検知した人の人位置と、検知要求に含まれている人識別情報との組を、記憶部13の人検知情報に登録する機能を有している。
配信処理部17は、通信回線L2および通信I/F部12を介して利用者端末20に各種データを配信する機能とを有している。
In response to a detection request from the
The
[第1の実施の形態の動作]
次に、図4を参照して、本実施の形態にかかる人検知装置10の動作について説明する。図4は、人検知動作および人検知開始動作を示すシーケンス図である。ここでは、状況データが居室者の在席状況からなる場合を例として説明する。
[Operation of First Embodiment]
Next, the operation of the
[人検知動作]
まず、人検知動作について説明する。
熱画像センサTは、熱画像の送信タイミングが到来した場合(ステップ100)、区画Dの熱画像を検出し(ステップ101)、検出した熱画像を人検知装置10へ送信する(ステップ102)。
この際、熱画像センサTは、人検知装置10からの取得要求に応じて、検出した熱画像を人検知装置10へ返送するようにしてもよい。
[Person detection]
First, the human detection operation will be described.
When the thermal image transmission timing arrives (step 100), the thermal image sensor T detects the thermal image of the section D (step 101) and transmits the detected thermal image to the human detection device 10 (step 102).
At this time, the thermal image sensor T may return the detected thermal image to the
熱画像取得部14は、熱画像センサTから自律的に送信される熱画像を受信することにより区画Dの熱画像を取得し、記憶部13に保存する(ステップ103)。
人追跡部15は、記憶部13に保存されている時系列の熱画像を画像処理し、床面の床面温度よりも高い温度部分を人として追跡することにより、区画Dにおける人の位置を検知する人追跡処理を実行する(ステップ104)。
この後、人追跡部15は、得られた人位置に基づいて、記憶部13に保存されている人検知情報の人位置を更新し(ステップ105)、一連の状況データ生成動作を終了する。
The thermal
The
Thereafter, the
[人検知開始動作]
次に、人検知開始動作について説明する。
利用者は、例えば区画Dに入った際、人特定エリアNに移動し、所持する携帯端末22で検知要求操作を行う(ステップ110)。これにより、携帯端末22から検知要求が無線送信され、これが無線基地局21で受信された後、通信回線L2を介して人検知装置10へ転送される(ステップ111)。
[Human detection start operation]
Next, the human detection start operation will be described.
For example, when the user enters the section D, the user moves to the person identification area N and performs a detection request operation on the
人検知装置10の熱画像取得部14は、通信I/F部12を介して携帯端末22からの検知要求を受信した場合、新たな熱画像の取得を要求する取得要求をセンサI/F部11および通信回線L1を介して熱画像センサTへ送信する(ステップ112)。
熱画像センサTは、人検知装置10から取得要求を受信した場合、区画Dの新たな熱画像を検出し(ステップ113)、検出した新たな熱画像を人検知装置10へ返送する(ステップ114)。
When receiving a detection request from the
When receiving the acquisition request from the
熱画像取得部14は、熱画像センサTから返送された新たな熱画像を受信し、記憶部13に保存する(ステップ115)。
人追跡部15は、記憶部13に保存されている新たな熱画像を画像処理し、人追跡処理と同様にして、区画Dの人特定エリアNに存在する利用者(新たな人)の人位置を検知する(ステップ116)。
The thermal
The
この後、人特定部16は、人追跡部15で検知された利用者の人位置と、携帯端末22からの検知要求に含まれている人識別情報との組を、記憶部13の人検知情報に追加し(ステップ117)、人検知を開始した旨を示す人検知開始を、通信回線L2を介して携帯端末22へ返送する(ステップ118)。
携帯端末22は、人検知装置10から返送された人検知開始を受信して画面表示し(ステップ119)、一連の状況データ配信動作を終了する。
Thereafter, the
The
図5は、追加後の区画の人検知例である。図6は、追加後の人検知情報の構成例である。図5の状況において、携帯端末22からの検知要求を受信した場合、人検知装置10は、人特定エリアN内に存在する利用者「P15」の人位置を検知するとともに、検知要求に含まれる利用者の人識別情報を取得し、これら利用者の人位置と人識別情報との組を記憶部13の人検知情報に登録する。これにより、図6に示すように、利用者「P15」の人識別情報「アズビル三郎」と人位置「X15」,「Y15」が、人検知情報に追加登録され、これ以降、区画Dにおける利用者の追跡が開始される。
FIG. 5 shows an example of human detection in the section after the addition. FIG. 6 is a configuration example of the human detection information after the addition. In the situation of FIG. 5, when receiving a detection request from the
[第1の実施の形態の効果]
このように、本実施の形態は、人追跡部15が、取得した熱画像を時系列で画像処理して高温部分を追跡することにより人位置を検知し、記憶部13が、区画Dに存在する人ごとに、人追跡部15で検知された人の人位置と人を識別する人識別情報との組が登録された人検知情報を記憶し、人特定部16が、通信回線L2を介して接続された携帯端末22からの検知要求に応じて、区画D内に設けられている人特定エリアNから検知した人の人位置と、検知要求に含まれている人識別情報との組を、人検知情報に登録するようにしたものである。
[Effect of the first embodiment]
As described above, in the present embodiment, the
より具体的には、熱画像取得部14が、検知要求に応じて、熱画像センサTから新たな熱画像を取得し、人追跡部15が、新たな熱画像から人特定エリアNに存在する新たな人の人位置を検知し、人特定部16が、新たな人の人位置と検知要求に含まれている人識別情報との組を、人検知情報に登録するようにしたものである。
More specifically, the thermal
これにより、利用者が人特定エリアNで携帯端末22を操作するだけで、利用者の人位置と利用者の人識別情報とが人検知装置10で対応付けられることになる。したがって、人検知装置10で区画Dから検知した人位置に存在する人が誰なのかを容易に特定することが可能となる。
As a result, the
[第2の実施の形態]
次に、本発明の第2の実施の形態にかかる人検知装置10について説明する。
本実施の形態では、利用者端末20からの確認要求に応じて、指定された人識別情報の人位置を利用者端末20へ配信する場合について説明する。
[Second Embodiment]
Next, a
In the present embodiment, a case will be described in which the person position of the specified person identification information is distributed to the
配信処理部17は、通信回線L2および通信I/F部12を介して受信した利用者端末20からの確認要求に応じて、指定した人識別情報と対応する人位置を記憶部13の人検知情報から検索する機能と、得られた人位置を示す確認データを要求元の利用者端末20へ配信する機能とを有している。利用者端末20に対して配信する確認データについては、HTMLなどの記述言語を用いて作成したWeb画面で配信してもよく、メールやメッセージで配信してもよい。
In response to the confirmation request from the
[第2の実施の形態の動作]
次に、図7を参照して、本実施の形態にかかる人検知装置10の動作について説明する。図7は、確認データ配信動作を示すシーケンス図である。
ここでは、確認データ配信動作について説明する。なお、人検知動作および人検知開始動作については、前述した図4と同様であり、ここでの詳細な説明は省略する。
[Operation of Second Embodiment]
Next, the operation of the
Here, the confirmation data distribution operation will be described. Note that the human detection operation and the human detection start operation are the same as those in FIG. 4 described above, and a detailed description thereof is omitted here.
[確認データ配信動作]
利用者端末20は、例えばブラウザにより、区画Dに存在する任意の人の人位置を確認するための確認要求操作が行われた場合(ステップ200)、利用者端末20から通信回線L2を介して人検知装置10へ確認要求が送信される(ステップ201)。
人検知装置10の配信処理部17は、通信I/F部12を介して利用者端末20から確認要求を受信した場合、確認要求で指定された区画Dに関する人検知情報を記憶部13から取得する(テップ202)。
[Confirmation data distribution operation]
For example, when a confirmation request operation for confirming the position of an arbitrary person existing in the section D is performed by the browser (step 200), the
When the
この後、配信処理部17は、確認要求で指定された人識別情報と対応する人位置を人検知情報から検索し(ステップ203)、得られた人位置を示す確認データを要求元の利用者端末20へ配信する(ステップ204)。
なお、配信処理部17は、指定された人識別情報と対応する人位置が区画Dの人検知情報に登録されていない場合、人位置が不明である旨の確認データを利用者端末20へ配信することになる。
Thereafter, the
The
利用者端末20は、人検知装置10から配信された確認データを受信した場合、受信した確認データをブラウザにより画面表示し(ステップ205)、一連の確認データ配信動作を終了する。
When receiving the confirmation data distributed from the
図8は、確認データの画面表示例である。ここでは、区画Dに存在する人の位置が、図形シンボルで表示されており、指定した人識別情報と対応する人の図形シンボルには、人識別情報が表示されている。これにより、指定した人識別情報と対応する人が、区画Dの度の位置に存在するかを極めて容易に確認することができる。 FIG. 8 is a screen display example of confirmation data. Here, the position of the person existing in the section D is displayed as a graphic symbol, and the person identification information is displayed in the graphic symbol of the person corresponding to the designated person identification information. Thereby, it can be very easily confirmed whether or not the person corresponding to the designated person identification information exists at the position corresponding to the section D.
[第3の実施の形態の効果]
このように、本実施の形態は、配信処理部17が、利用者端末20からの確認要求に応じて、指定された人識別情報と対応する人位置を区画の人検知情報から検索し、得られた人位置を示す確認データを利用者端末20へ配信するようにしたものである。
[Effect of the third embodiment]
As described above, according to the present embodiment, the
これにより、利用者端末20から検知状況や利用状況に関する状況要求を送信することなく、任意の検知対象に関する在席/離席や利用可否が、利用者端末20に自動的に配信されることになる。したがって、検知状況や利用状況の確認に関する利用者の操作負担を大幅に軽減できる。
As a result, the presence / absence or availability of an arbitrary detection target is automatically distributed to the
また、共用設備を予約システムでの予約管理している場合には、人検知装置10が予約システムと連携し、共用設備の利用開始の検出に応じて予約システムに共用設備の利用を自動予約し、共用設備の利用終了の検出に応じて予約システムに共用設備の予約を自動解除するようにしてもよい。これにより、予約システムに対する利用者の予約操作負担を大幅に削減できる。
In addition, when the common facility is reserved and managed by the reservation system, the
[実施の形態の拡張]
以上、実施形態を参照して本発明を説明したが、本発明は上記実施形態に限定されるものではない。本発明の構成や詳細には、本発明のスコープ内で当業者が理解しうる様々な変更をすることができる。また、各実施形態については、矛盾しない範囲で任意に組み合わせて実施することができる。
[Extended embodiment]
The present invention has been described above with reference to the embodiments, but the present invention is not limited to the above embodiments. Various changes that can be understood by those skilled in the art can be made to the configuration and details of the present invention within the scope of the present invention. In addition, each embodiment can be implemented in any combination within a consistent range.
1…人検知システム、10…人検知装置、11…センサI/F部、12…通信I/F部、13…記憶部、14…熱画像取得部、15…人追跡部、16…人特定部、17…配信処理部、20…利用者端末、21…無線基地局、22…携帯端末、T…熱画像センサ、D…区画、L1,L2…通信回線。
DESCRIPTION OF
Claims (5)
前記熱画像センサで検出した熱画像を周期的に取得する熱画像取得部と、
取得した前記熱画像を時系列で画像処理して、前記区画の床面温度より高い高温部分を追跡することにより、前記区画に存在する人の人位置を検知する人追跡部と、
前記区画に存在する人ごとに、前記人追跡部で検知された前記人の前記人位置と前記人を識別する人識別情報との組が登録された人検知情報を記憶する記憶部と、
通信回線を介して接続された携帯端末からの検知要求に応じて、前記区画内に設けられている人特定エリアから検知した人の人位置と、前記検知要求に含まれている人識別情報との組を、前記人検知情報に登録する人特定部と
を備えることを特徴とする人検知装置。 From a thermal image detected by a thermal image sensor installed in a section, a human detection device that detects the position of a person existing in the section,
A thermal image acquisition unit that periodically acquires thermal images detected by the thermal image sensor;
A human tracking unit that detects a human position of a person existing in the section by performing time-series image processing on the acquired thermal image and tracking a high-temperature portion higher than the floor surface temperature of the section;
For each person present in the section, a storage unit that stores human detection information in which a set of the human position detected by the human tracking unit and human identification information that identifies the person is registered;
In response to a detection request from a mobile terminal connected via a communication line, a person position of a person detected from a person identification area provided in the section, and person identification information included in the detection request; And a person identifying unit that registers the set of the above in the person detection information.
前記熱画像取得部は、前記検知要求に応じて、前記熱画像センサから新たな熱画像を取得し、
前記人追跡部は、前記新たな熱画像から前記人特定エリアに存在する新たな人の人位置を検知し、
前記人特定部は、前記新たな人の人位置と前記検知要求に含まれている人識別情報との組を、前記人検知情報に登録する
ことを特徴とする人検知装置。 In the human detection device according to claim 1,
The thermal image acquisition unit acquires a new thermal image from the thermal image sensor in response to the detection request,
The person tracking unit detects a person position of a new person existing in the person identification area from the new thermal image,
The person detection unit registers a set of the person position of the new person and the person identification information included in the detection request in the person detection information.
通信回線を介して接続された利用者端末からの確認要求に応じて、指定された人識別情報と対応する人位置を前記区画の人検知情報から検索し、得られた人位置を示す確認データを前記利用者端末へ配信する配信処理部をさらに備えることを特徴とする人検知装置。 In the human detection device according to claim 1 or 2,
In response to a confirmation request from a user terminal connected via a communication line, the person position corresponding to the specified person identification information is searched from the person detection information in the section, and confirmation data indicating the obtained person position A human detection apparatus further comprising a distribution processing unit that distributes a message to the user terminal.
前記配信処理部は、前記指定された人識別情報と対応する人位置が前記区画の人検知情報に登録されていない場合、人位置が不明である旨の確認データを前記利用者端末へ配信することを特徴とする人検知装置。 In the human detection device according to claim 3,
The distribution processing unit distributes confirmation data to the user terminal that the person position is unknown when the person position corresponding to the designated person identification information is not registered in the person detection information of the section. A human detection device characterized by that.
熱画像取得部が、前記熱画像センサで検出した熱画像を周期的に取得する熱画像取得ステップと、
人追跡部が、取得した前記熱画像を時系列で画像処理して、前記区画の床面温度より高い高温部分を追跡することにより、前記区画に存在する人の人位置を検知する人追跡ステップと、
記憶部が、前記区画に存在する人ごとに、前記人追跡部で検知された前記人の前記人位置と前記人を識別する人識別情報との組が登録された人検知情報を記憶する記憶ステップと、
人特定部が、通信回線を介して接続された携帯端末からの検知要求に応じて、前記区画内に設けられている人特定エリアから検知した人の人位置と、前記検知要求に含まれている人識別情報との組を、前記人検知情報に登録する人特定ステップと
を備えることを特徴とする人検知方法。 From a thermal image detected by a thermal image sensor installed in a section, a human detection method used in a human detection device that detects the position of a person existing in the section,
A thermal image acquisition step in which a thermal image acquisition unit periodically acquires thermal images detected by the thermal image sensor;
A human tracking step in which the human tracking unit detects the human position of the person existing in the section by performing time-series image processing on the acquired thermal image and tracking a high temperature portion higher than the floor surface temperature of the section. When,
A memory for storing, for each person existing in the section, a person detection information in which a set of the person position detected by the person tracking part and a person identification information for identifying the person is registered. Steps,
In response to a detection request from a mobile terminal connected via a communication line, the person specifying unit includes a person position of a person detected from a person specifying area provided in the section, and the detection request includes A person identifying step of registering a pair with the person identification information in the person detection information.
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017114168A JP6836961B2 (en) | 2017-06-09 | 2017-06-09 | Human detectors and methods |
KR1020180057219A KR102038121B1 (en) | 2017-06-09 | 2018-05-18 | Human detecting apparatus and method |
CN201810563419.6A CN109029732B (en) | 2017-06-09 | 2018-06-04 | Human detection device and method |
SG10201804861TA SG10201804861TA (en) | 2017-06-09 | 2018-06-07 | Person detection apparatus and method of detecting a person |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017114168A JP6836961B2 (en) | 2017-06-09 | 2017-06-09 | Human detectors and methods |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018204922A true JP2018204922A (en) | 2018-12-27 |
JP6836961B2 JP6836961B2 (en) | 2021-03-03 |
Family
ID=64611838
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017114168A Active JP6836961B2 (en) | 2017-06-09 | 2017-06-09 | Human detectors and methods |
Country Status (4)
Country | Link |
---|---|
JP (1) | JP6836961B2 (en) |
KR (1) | KR102038121B1 (en) |
CN (1) | CN109029732B (en) |
SG (1) | SG10201804861TA (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20200122849A (en) * | 2019-04-19 | 2020-10-28 | 엘지전자 주식회사 | Electronic device with human detection function and method for adjusting human detection function |
JP6851553B1 (en) * | 2020-03-17 | 2021-03-31 | 三菱電機株式会社 | Control device, control method, and control program |
WO2022130513A1 (en) | 2020-12-15 | 2022-06-23 | 三菱電機株式会社 | Identification device, equipment system, and identification method |
WO2023032507A1 (en) * | 2021-08-31 | 2023-03-09 | パナソニックIpマネジメント株式会社 | Position estimation system and position estimation method |
WO2023032770A1 (en) * | 2021-08-31 | 2023-03-09 | パナソニックIpマネジメント株式会社 | Human detection system and human detection method |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102217679B1 (en) * | 2020-05-11 | 2021-02-18 | 이상화 | Thermo detection monitoring system and method |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63266387A (en) * | 1987-04-24 | 1988-11-02 | Shimadzu Corp | Seat display device |
JP2016050833A (en) * | 2014-08-29 | 2016-04-11 | 旭化成エレクトロニクス株式会社 | Infrared sensor device |
JP2016070756A (en) * | 2014-09-29 | 2016-05-09 | アズビル株式会社 | Control system |
JP2016080619A (en) * | 2014-10-21 | 2016-05-16 | アズビル株式会社 | Person detection system and method |
JP2016126373A (en) * | 2014-12-26 | 2016-07-11 | 京セラドキュメントソリューションズ株式会社 | Seat management system |
JP2017073315A (en) * | 2015-10-08 | 2017-04-13 | 東急建設株式会社 | Seat occupation/vacancy detector and control method therefor |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7209161B2 (en) * | 2002-07-15 | 2007-04-24 | The Boeing Company | Method and apparatus for aligning a pair of digital cameras forming a three dimensional image to compensate for a physical misalignment of cameras |
JP5260848B2 (en) * | 2006-08-22 | 2013-08-14 | Necシステムテクノロジー株式会社 | Information terminal device, automatic execution method, and program |
JP2009004977A (en) * | 2007-06-20 | 2009-01-08 | Chugoku Electric Power Co Inc:The | Apparatus and method for selecting supervisory camera |
JP5423623B2 (en) | 2010-09-07 | 2014-02-19 | 株式会社デンソーウェーブ | Air conditioning control device and human detection group management method for air conditioning control device |
JP6198605B2 (en) * | 2010-11-15 | 2017-09-20 | スケーラブル ディスプレイ テクノロジーズ インコーポレイテッド | System and method for calibrating a display system using manual and semi-automatic techniques |
CN102572094B (en) * | 2011-09-20 | 2015-11-25 | 广州飒特红外股份有限公司 | Mobile phone is utilized to control the system and method for thermal infrared imager |
CN103076095B (en) * | 2012-12-11 | 2015-09-09 | 广州飒特红外股份有限公司 | A kind of with the motor-driven carrier nighttime driving backup system of panel computer wireless operated thermal infrared imager |
JP2016510467A (en) * | 2013-01-17 | 2016-04-07 | サイオニクス、エルエルシー | Biological imaging apparatus and related method |
CN103471722B (en) * | 2013-10-08 | 2017-02-08 | 杭州亿晟电力科技有限公司 | Intelligent mobile on-line temperature measuring system |
JP5834249B2 (en) * | 2013-11-20 | 2015-12-16 | パナソニックIpマネジメント株式会社 | Person movement analysis apparatus, person movement analysis system, and person movement analysis method |
US20170061210A1 (en) * | 2015-08-26 | 2017-03-02 | Intel Corporation | Infrared lamp control for use with iris recognition authentication |
CN105245845A (en) * | 2015-10-10 | 2016-01-13 | 上海慧体网络科技有限公司 | Method for controlling camera to follow and shoot automatically based on gathering trend in match field |
CN205693900U (en) * | 2016-06-27 | 2016-11-16 | 黎牧星 | A kind of tunnel mine Wireless location communication system |
KR101709701B1 (en) * | 2016-08-02 | 2017-02-24 | 주식회사 베스트디지탈 | Integrated security service system and method based on tracking object |
-
2017
- 2017-06-09 JP JP2017114168A patent/JP6836961B2/en active Active
-
2018
- 2018-05-18 KR KR1020180057219A patent/KR102038121B1/en active IP Right Grant
- 2018-06-04 CN CN201810563419.6A patent/CN109029732B/en active Active
- 2018-06-07 SG SG10201804861TA patent/SG10201804861TA/en unknown
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63266387A (en) * | 1987-04-24 | 1988-11-02 | Shimadzu Corp | Seat display device |
JP2016050833A (en) * | 2014-08-29 | 2016-04-11 | 旭化成エレクトロニクス株式会社 | Infrared sensor device |
JP2016070756A (en) * | 2014-09-29 | 2016-05-09 | アズビル株式会社 | Control system |
JP2016080619A (en) * | 2014-10-21 | 2016-05-16 | アズビル株式会社 | Person detection system and method |
JP2016126373A (en) * | 2014-12-26 | 2016-07-11 | 京セラドキュメントソリューションズ株式会社 | Seat management system |
JP2017073315A (en) * | 2015-10-08 | 2017-04-13 | 東急建設株式会社 | Seat occupation/vacancy detector and control method therefor |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20200122849A (en) * | 2019-04-19 | 2020-10-28 | 엘지전자 주식회사 | Electronic device with human detection function and method for adjusting human detection function |
KR102282406B1 (en) | 2019-04-19 | 2021-07-26 | 엘지전자 주식회사 | Electronic device with human detection function and method for adjusting human detection function |
JP6851553B1 (en) * | 2020-03-17 | 2021-03-31 | 三菱電機株式会社 | Control device, control method, and control program |
WO2022130513A1 (en) | 2020-12-15 | 2022-06-23 | 三菱電機株式会社 | Identification device, equipment system, and identification method |
EP4265974A4 (en) * | 2020-12-15 | 2024-01-17 | Mitsubishi Electric Corporation | Identification device, equipment system, and identification method |
WO2023032507A1 (en) * | 2021-08-31 | 2023-03-09 | パナソニックIpマネジメント株式会社 | Position estimation system and position estimation method |
WO2023032770A1 (en) * | 2021-08-31 | 2023-03-09 | パナソニックIpマネジメント株式会社 | Human detection system and human detection method |
Also Published As
Publication number | Publication date |
---|---|
KR20180134754A (en) | 2018-12-19 |
SG10201804861TA (en) | 2019-01-30 |
CN109029732B (en) | 2021-05-28 |
JP6836961B2 (en) | 2021-03-03 |
KR102038121B1 (en) | 2019-10-29 |
CN109029732A (en) | 2018-12-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6836961B2 (en) | Human detectors and methods | |
JP5994397B2 (en) | Information processing apparatus, information processing method, and program | |
US20140180960A1 (en) | Method For Issuing a Ticket to a Customer to a Queue, a Mobile Device and a Queue Ticket Terminal | |
WO2017086601A1 (en) | Location-based content sharing method and location-based content sharing server | |
WO2018159736A1 (en) | Information processing device, terminal device, information processing method, information output method, customer service assistance method, and recording medium | |
JP7243413B2 (en) | Monitoring system, notification device and notification method | |
US20170352077A1 (en) | Information collecting system, server, and control program | |
CN109040665A (en) | People's detection device and method | |
JP7446315B2 (en) | Controller, system and method for providing location-based services to an area | |
US20170257748A1 (en) | Information processing apparatus, program product, and method | |
US20150379217A1 (en) | Medical information display system, server, and portable terminal | |
CN106796692A (en) | Technical support is provided a user with via wearable computing devices | |
US20200082430A1 (en) | Terminal device, display method, and recording medium | |
JP7109141B2 (en) | SHOPPING SUPPORT SYSTEM AND SHOPPING SUPPORT METHOD | |
JP2009205504A (en) | Guide system, server system, guide method and program | |
JP2023027548A (en) | Device, method, and program for processing information | |
JP2018084900A (en) | Facility operation supporting system, portable terminal device, and program | |
JP6573796B2 (en) | Service operation system and service user identification method | |
JP6077930B2 (en) | Information management apparatus, information management system, communication terminal, and information management method | |
KR20090071962A (en) | System for missing child search based location recognition and method thereof | |
US20200372274A1 (en) | Information processing apparatus, control method, and program | |
JP6315826B2 (en) | Guidance device | |
US20160189189A1 (en) | Customer information processing device and customer information processing method | |
JP5493581B2 (en) | Information processing system, information processing apparatus, information management apparatus, and program | |
JP2019159587A (en) | Online service system, online service providing method, content management device and computer program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200311 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210202 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210208 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6836961 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |