KR20150040140A - 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법 및 장치 - Google Patents

자기장을 이용하여 사용자 단말의 위치를 측정하는 방법 및 장치 Download PDF

Info

Publication number
KR20150040140A
KR20150040140A KR20130118758A KR20130118758A KR20150040140A KR 20150040140 A KR20150040140 A KR 20150040140A KR 20130118758 A KR20130118758 A KR 20130118758A KR 20130118758 A KR20130118758 A KR 20130118758A KR 20150040140 A KR20150040140 A KR 20150040140A
Authority
KR
South Korea
Prior art keywords
user terminal
magnetic field
measuring
sensor
measurement value
Prior art date
Application number
KR20130118758A
Other languages
English (en)
Other versions
KR101527212B1 (ko
Inventor
박찬종
Original Assignee
아이데카 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 아이데카 주식회사 filed Critical 아이데카 주식회사
Priority to KR1020130118758A priority Critical patent/KR101527212B1/ko
Priority to US14/153,988 priority patent/US20150097554A1/en
Publication of KR20150040140A publication Critical patent/KR20150040140A/ko
Application granted granted Critical
Publication of KR101527212B1 publication Critical patent/KR101527212B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B7/00—Measuring arrangements characterised by the use of electric or magnetic techniques
    • G01B7/004—Measuring arrangements characterised by the use of electric or magnetic techniques for measuring coordinates of points
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/04—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by terrestrial means
    • G01C21/08—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by terrestrial means involving use of the magnetic field of the earth
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B7/00—Measuring arrangements characterised by the use of electric or magnetic techniques
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01V—GEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
    • G01V3/00—Electric or magnetic prospecting or detecting; Measuring magnetic field characteristics of the earth, e.g. declination, deviation
    • G01V3/40—Electric or magnetic prospecting or detecting; Measuring magnetic field characteristics of the earth, e.g. declination, deviation specially adapted for measuring magnetic field characteristics of the earth
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01V—GEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
    • G01V3/00—Electric or magnetic prospecting or detecting; Measuring magnetic field characteristics of the earth, e.g. declination, deviation
    • G01V3/08—Electric or magnetic prospecting or detecting; Measuring magnetic field characteristics of the earth, e.g. declination, deviation operating with magnetic or electric fields produced or modified by objects or geological structures or by detecting devices
    • G01V3/081—Electric or magnetic prospecting or detecting; Measuring magnetic field characteristics of the earth, e.g. declination, deviation operating with magnetic or electric fields produced or modified by objects or geological structures or by detecting devices the magnetic field is produced by the objects or geological structures

Landscapes

  • Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Environmental & Geological Engineering (AREA)
  • General Life Sciences & Earth Sciences (AREA)
  • Geology (AREA)
  • Automation & Control Theory (AREA)
  • Geophysics (AREA)
  • Navigation (AREA)

Abstract

자기장을 이용하여 사용자 단말의 위치를 측정하는 방법은 자기장 지도 정보를 수신하는 단계; 상기 사용자 단말에 포함되는 자기장 센서로부터 제1 측정값을 획득하는 단계; 상기 사용자 단말에 포함되고, 상기 자기장 센서와 구별되는 상기 다른 센서로부터 제2 측정값을 획득하는 단계; 및 상기 자기장 지도 정보, 상기 제1 측정값 및 상기 제2 측정값에 기초하여 상기 사용자 단말의 위치를 측정하는 단계를 포함한다.

Description

자기장을 이용하여 사용자 단말의 위치를 측정하는 방법 및 장치{METHOD AND APPARATUS FOR MEASURING LOCATION OF USER TERMINAL USING MAGNETIC FIELD}
본 발명은 자기장을 이용하여 사용자 단말의 위치를 측정하는 시스템 및 그 방법에 관한 것으로, 보다 구체적으로 사용자 단말에 포함되는 자기장 센서 및 자기장 지도 정보를 이용하여 사용자 단말의 위치를 측정하는 기술에 관한 것이다.
사용자 단말의 위치를 측정하는 기술은 실내 및 실외 환경에서 사용자 단말의 위치를 측정하는 기술로써, 가속도 센서, 관성 센서, 자이로 센서, 압력 센서, 초음파 센서, 온습도 센서, 적외선 센서, 초광대역 신호(Ultra-Wideband; UWB), 무선 랜(Wireless Fidelity; Wi-Fi) 측정 센서 또는 엘이디(Light Emitting Diode; LED) 측정 센서를 이용하여 실내 및 실외 환경에서 사용자 단말의 위치를 측정한다.
그러나, 가속도 센서, 관성 센서, 자이로 센서, 압력 센서, 초음파 센서, 온습도 센서, 적외선 센서, 초광대역 신호, 무선 랜 측정 센서 또는 엘이디 측정 센서를 이용하는 기술은 사용자 단말의 수직 위치를 측정함에 있어 정확도가 떨어지는 단점이 있다.
이에, 사용자 단말의 위치를 정확히 측정하는 방법 및 장치가 요구된다.
본 발명의 실시예들은 사용자 단말에 포함되는 자기장 센서 및 자기장 지도 정보를 이용하여 사용자 단말의 위치를 측정하는 방법, 장치 및 시스템을 제공한다.
또한, 본 발명의 실시예들은 자기장 센서 및 자기장 지도 정보를 이용하여 사용자 단말의 위치를 측정하는 과정에서, 자기장 센서와 구별되는 다른 센서를 이용하는 방법, 장치 및 시스템을 제공한다.
또한, 본 발명의 실시예들은 자기장 센서와 구별되는 다른 센서로부터 획득한 보행자추측항법(Pedestrian Dead-Reckoning; PDR) 정보를 이용하여 사용자 단말의 위치를 보정하는 방법, 장치 및 시스템을 제공한다.
또한, 본 발명의 실시예들은 측정된 사용자 단말의 위치에 기초하여 사용자 단말의 위치와 관련된 특정 서비스를 제공하는 방법, 장치 및 시스템을 제공한다.
본 발명의 일실시예에 따른 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법은 자기장 지도 정보를 수신하는 단계; 상기 사용자 단말에 포함되는 자기장 센서로부터 제1 측정값을 획득하는 단계; 상기 사용자 단말에 포함되고, 상기 자기장 센서와 구별되는 다른 센서로부터 제2 측정값을 획득하는 단계; 및 상기 자기장 지도 정보, 상기 제1 측정값 및 상기 제2 측정값에 기초하여 상기 사용자 단말의 위치를 측정하는 단계를 포함한다.
상기 자기장 센서와 구별되는 상기 다른 센서는 가속도 센서, 관성 센서, 자이로 센서, 압력 센서, 초음파 센서, 온습도 센서, 적외선 센서, 초광대역 신호(Ultra-Wideband; UWB), 무선 랜(Wireless Fidelity; Wi-Fi) 측정 센서 또는 엘이디(Light Emitting Diode; LED) 측정 센서 중 적어도 어느 하나를 포함할 수 있다.
상기 자기장 지도 정보는 상기 사용자 단말 또는 미리 설치된 자기장 측정 로봇 중 적어도 어느 하나로부터 미리 설정된 좌표 정보에 대응하는 자기장의 수평 성분 및 수직 성분을 수집하여 설정될 수 있다.
상기 사용자 단말의 위치를 측정하는 단계는 상기 제1 측정값에 포함되는 자기장의 수평값 및 수직값 각각을 상기 자기장 지도 정보에 포함되는 상기 수평 성분 및 상기 수직 성분 각각에 매칭시켜 상기 사용자 단말의 수평 위치 및 수직 위치를 측정하는 단계; 및 상기 제2 측정값을 이용하여 상기 수평 위치 및 상기 수직 위치를 보정하는 단계를 포함할 수 있다.
상기 수평 위치 및 상기 수직 위치를 보정하는 단계는 상기 제2 측정값에 기초하여 상기 사용자 단말의 사용자의 보폭, 상기 사용자 단말의 이동 방향, 상기 사용자 단말의 이동 거리 또는 상기 사용자 단말의 이동 속도 중 적어도 어느 하나를 획득하는 단계; 및 상기 사용자의 보폭, 상기 사용자 단말의 이동 방향, 상기 사용자 단말의 이동 거리 또는 상기 사용자 단말의 이동 속도 중 적어도 어느 하나를 이용하여 상기 수평 위치 및 상기 수직 위치를 보정하는 단계를 포함할 수 있다.
상기 사용자 단말의 위치를 측정하는 단계는 상기 사용자 단말로부터 상기 사용자 단말의 초기 위치를 입력 받는 단계; 상기 입력 받은 초기 위치로부터 상기 사용자 단말의 후보 위치를 설정하는 단계; 및 상기 사용자 단말의 후보 위치로부터 상기 자기장 지도 정보, 상기 제1 측정값 및 상기 제2 측정값을 이용하여 상기 사용자 단말의 위치를 선택하는 단계를 더 포함할 수 있다.
상기 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법은 상기 사용자 단말의 위치에 기초하여 상기 사용자 단말의 위치와 관련된 특정 서비스를 제공하는 단계를 더 포함할 수 있다.
본 발명의 일실시예에 따른 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 자기장 지도 정보를 수신하는 수신부; 상기 사용자 단말에 포함되는 자기장 센서로부터 제1 측정값을 획득하는 제1 측정값 획득부; 상기 사용자 단말에 포함되고, 상기 자기장 센서와 구별되는 다른 센서로부터 제2 측정값을 획득하는 제2 측정값 획득부; 및 상기 자기장 지도 정보, 상기 제1 측정값 및 상기 제2 측정값에 기초하여 상기 사용자 단말의 위치를 측정하는 위치 측정부를 포함한다.
상기 위치 측정부는 상기 제1 측정값에 포함되는 자기장의 수평값 및 수직값 각각을 상기 자기장 지도 정보에 포함되는 상기 수평 성분 및 상기 수직 성분 각각에 매칭시켜 상기 사용자 단말의 수평 위치 및 수직 위치를 측정하고, 상기 제2 측정값을 이용하여 상기 수평 위치 및 상기 수직 위치를 보정할 수 있다.
본 발명의 실시예들은 사용자 단말에 포함되는 자기장 센서 및 자기장 지도 정보를 이용하여 사용자 단말의 위치를 측정하는 방법, 장치 및 시스템을 제공할 수 있다.
또한, 본 발명의 실시예들은 자기장 센서 및 자기장 지도 정보를 이용하여 사용자 단말의 위치를 측정하는 과정에서, 자기장 센서와 구별되는 다른 센서를 이용하는 방법, 장치 및 시스템을 제공할 수 있다.
또한, 본 발명의 실시예들은 자기장 센서와 구별되는 다른 센서로부터 획득한 보행자추측항법(Pedestrian Dead-Reckoning; PDR) 정보를 이용하여 사용자 단말의 위치를 보정하는 방법, 장치 및 시스템을 제공할 수 있다.
또한, 본 발명의 실시예들은 측정된 사용자 단말의 위치에 기초하여 사용자 단말의 위치와 관련된 특정 서비스를 제공하는 방법, 장치 및 시스템을 제공할 수 있다.
도 1은 본 발명의 일실시예에 따른 자기장 지도를 나타낸 도면이다.
도 2는 본 발명의 일실시예에 따른 높이에 따른 자기장 지도를 나타낸 도면이다.
도 3은 본 발명의 일실시예에 따른 사용자 단말의 위치를 측정하는 과정을 나타낸 도면이다.
도 4는 본 발명의 일실시예에 따른 사용자 단말의 위치와 관련된 특정 서비스를 나타낸 도면이다.
도 5는 본 발명의 일실시예에 따른 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법을 나타낸 플로우 차트이다.
도 6은 도 5에 도시된 사용자 단말의 위치를 측정하는 과정(540)을 구체적으로 나타낸 제1 플로우 차트이다.
도 7은 도 5에 도시된 사용자 단말의 위치를 측정하는 과정(540)을 구체적으로 나타낸 제2 플로우 차트이다.
도 8은 본 발명의 일실시예에 따른 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치를 나타낸 블록도이다.
이하, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 그러나 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. 또한, 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
도 1은 본 발명의 일실시예에 따른 자기장 지도를 나타낸 도면이다.
도 1을 참조하면, 본 발명의 일실시예에 따른 자기장 지도는 사용자 단말 또는 미리 설치된 자기장 측정 로봇 중 적어도 어느 하나로부터 미리 설정된 좌표 정보에 대응하는 자기장의 수평 성분 및 수직 성분을 수집하여 구축된다. 이 때, 자기장 지도는 대상 건축물 내부 또는 외부의 구조 정보를 포함하는 지도 정보에 기초하여 구축될 수 있다. 예를 들어, 자기장 지도는 대상 건축물 내부의 구조 정보에 기초하여 미리 설정된 좌표 정보에 대응하는 자기장의 수평 성분 및 수직 성분을 수집하여 구축될 수 있다. 더 구체적인 예를 들면, 자기장 지도는 대상 건축물 내부의 벽 및 통로에 관한 구조 정보를 참고하여, 특정 기준점을 기준으로 미리 설정된 좌표 정보 각각에 대응하는 자기장의 수평 성분 및 수직 성분을 수집하여 구축될 수 있다.
이하, 자기장 지도는 동일한 높이에서의 자기장의 수평 성분만을 고려하여 나타내지만, 자기장의 수직 성분을 더 포함하도록 나타낼 수 있다.
자기장 지도는 복수의 좌표들을 복수의 셀들로 표시하고, 복수의 셀들 각각에 자기장에 대한 정보를 표시할 수 있다. 예를 들어, (0, 1)의 좌표 정보를 나타내는 셀 110은 대상 건축물 내부의 벽을 나타내고, (0, 10)의 좌표 정보를 나타내는 셀 180은 자기장이 측정되는 통로 셀을 나타낼 수 있다. 더 구체적인 예를 들면, 건축물 내부의 벽은 셀 110과 같이 음영 표시될 수 있고, 자기장이 측정되는 통로 셀들은 자기장의 세기에 따라 음영의 짙기가 다르게 표시될 수 있다. 또한, 자기장의 세기에 따른 셀들에는 자기장의 방향을 나타내는 화살표가 표시될 수 있다. 이 때, 셀 120은 0.4 가우스(Gauss) 이상의 자기장 세기를 나타내고, 셀 130은 0.33~0.44 가우스의 자기장 세기를 나타내며, 셀 140은 0.27~0.33 가우스의 자기장 세기를 나타내고, 셀 150은 0.2~0.27 가우스의 자기장 세기를 나타내며, 셀 160은 0.2 가우스 이하의 자기장 세기를 나타내고, 셀 170은 자기장의 세기가 자기장 센서로부터 검출되지 않는 미세한 자기장 세기를 나타낼 수 있다.
상술한 바와 같이 자기장 지도는 미리 설정된 좌표 정보 및 미리 설정된 좌표 정보에 대응하는 자기장에 대한 정보를 셀로 나타냈지만, 등고선 또는 수치로 나타낼 수도 있다.
도 2는 본 발명의 일실시예에 따른 높이에 따른 자기장 지도를 나타낸 도면이다.
도 2를 참조하면, 본 발명의 일실시예에 따른 자기장 지도는 미리 설정된 높이들에서 각각 생성될 수 있다. 여기서, 미리 설정된 높이들은 수평적으로 동일한 좌표에서 자기장의 수평 성분 및 수직 성분이 변화하는 특정 높이들로 설정될 수 있다. 예를 들어, 수평적으로 동일한 좌표에서 자기장의 수평 성분 및 수직 성분이 변화하는 특정 높이가 지면을 기준으로 높이 2m, 4m 및 6m라면, 자기장 지도는 0~2m에서의 높이에 대한 제1 자기장 지도(210), 2~4m에서의 높이에 대한 제2 자기장 지도(220) 및 4~6m에서의 제3 자기장 지도(230)로 생성될 수 있다. 이 때, 각각의 자기장 지도는 설정된 높이 각각에서 미리 설정된 좌표 정보에 대응하는 자기장의 수평 성분 및 수직 성분을 나타낼 수 있다. 더 구체적인 예를 들면, 제1 자기장 지도(210)는 대상 건축물 내부의 1층에 대응하는 자기장 지도일 수 있고, 제2 자기장 지도(220)는 대상 건축물 내부의 2층에 대응하는 자기장 지도일 수 있으며, 제3 자기장 지도(230)는 대상 건축물 내부의 3층에 대응하는 자기장 지도일 수 있다.
도 3은 본 발명의 일실시예에 따른 사용자 단말의 위치를 측정하는 과정을 나타낸 도면이다.
도 3을 참조하면, 대상 건축물 내부에 대한 지도 상에 구조 정보인 벽(310) 및 사용자 단말(320)이 표시된다.
본 발명의 일실시예에 따른 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 우선 대상 건축물 내부에 대한 미리 구축된 자기장 지도 정보를 수신하고, 사용자 단말(320)에 포함되는 자기장 센서로부터 제1 측정값을 획득하며, 자기장 센서와 구별되는 다른 센서로부터 제2 측정값을 획득함으로써, 수신된 자기장 지도 정보, 제1 측정값 및 제2 측정값을 기초로 사용자 단말(320)의 위치를 측정할 수 있다. 이 때, 자기장 지도 정보는 미리 설정된 좌표 정보에 대응하는 자기장의 수평 성분 및 수직 성분을 포함하고 있고, 제1 측정값은 사용자 단말(320)에서 획득한 자기장의 수평값 및 수직값을 포함하고 있으므로, 사용자 단말의 수평 위치 및 수직 위치는 자기장 지도 정보에 포함되는 수평 성분 및 수직 성분 각각에 수평값 및 수직값 각각이 매칭되어 측정될 수 있다. 예를 들어, 자기장 지도 정보가 벽(310) 오른쪽의 위치인 (4, 4)의 좌표 정보에 대응하는 자기장 (0.2, 0.33, 0.54)에 대한 정보를 포함하고 있고, 사용자 단말(320)에서 측정된 자기장이 (0.2, 0.33, 0.54) 라면, 사용자 단말(320)이 벽(310) 오른쪽의 위치인 (4, 4)의 좌표에 위치함을 알 수 있다. 이 때, 자기장은 x 성분 및 y 성분을 포함하는 수평 성분 및 z 성분을 포함하는 수직 성분으로 표시될 수 있다.
또한, 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 제1 측정값과 자기장 지도 정보를 비교하여 사용자 단말(320)의 위치를 정확히 측정함에 있어서, 제2 측정값을 이용할 수 있다. 예를 들어, 벽(310) 위쪽의 위치인 (2, 8)의 좌표 정보에 대응하는 자기장이 (0.2, 033, 0.53) 이라면, 벽(310) 오른쪽의 위치인 (4, 4)의 좌표 정보에 대응하는 자기장인 (0.2, 0.33, 0.54)와 큰 차이가 없기 때문에, 사용자 단말(320)이 벽(310) 오른쪽에 위치하는지, 벽(310) 위쪽에 위치하는지 정확히 측정되기 힘들 수 있다. 이에, 사용자 단말(320)에 포함되고, 자기장 센서와 구별되는 다른 센서를 이용하여 측정되는 사용자 단말(320)의 수평 위치 및 수직 위치가 보정될 수 있다. 이 때, 자기장 센서와 구별되는 다른 센서로는 가속도 센서, 관성 센서, 자이로 센서, 압력 센서, 초음파 센서, 온습도 센서, 적외선 센서, 초광대역 신호, 무선 랜 측정 센서 또는 엘이디 측정 센서 중 적어도 어느 하나가 이용될 수 있다. 예를 들어, 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 자기장 센서와 구별되는 다른 센서로부터 획득한 제2 측정값에 기초하여, 사용자 단말(320)의 사용자의 보폭, 이동 방향, 이동 거리 또는 이동 속도 중 적어도 어느 하나를 획득하고, 획득된 사용자의 보폭, 이동 방향, 이동 거리 또는 이동 속도 중 적어도 어느 하나를 이용하여 측정된 사용자 단말(320)의 수평 위치 및 수직 위치를 보정할 수 있다. 이 때, 사용자의 보폭, 이동 방향, 이동 거리 또는 이동 속도는 보행자추측항법(Pedestrian Dead-Reckoning; PDR) 정보에 포함될 수 있다.
본 발명의 또 다른 실시예에 따른 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 사용자 단말(320)로부터 사용자 단말(320)의 초기 위치를 입력 받고, 입력 받은 초기 위치로부터 사용자 단말의 후보 위치를 설정하며, 설정된 후보 위치로부터 자기장 지도 정보, 제1 측정값 및 제2 측정값을 이용하여 사용자 단말(320)의 위치를 선택할 수 있다. 예를 들어, 사용자 단말(320)로부터 초기 위치를 벽(310) 오른쪽으로 입력 받았다면, 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 벽(310) 오른쪽의 초기 위치로부터 사용자 단말(320)의 사용자의 보폭, 이동 방향, 이동 거리 또는 이동 속도 중 적어도 어느 하나에 기초하여 사용자 단말(320)의 후보 위치를 설정할 수 있고, 자기장 지도 정보, 제1 측정값 및 제2 측정값을 이용하여 사용자 단말(320)의 위치를 선택함으로써, 사용자 단말(320)이 벽(310) 위쪽에 위치함을 알 수 있다.
도 4는 본 발명의 일실시예에 따른 사용자 단말의 위치와 관련된 특정 서비스를 나타낸 도면이다.
도 4를 참조하면, 본 발명의 일실시예에 따른 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 현재 사용자 단말의 위치(410) 및 사용자 단말의 위치에 기초하여 사용자 단말의 위치와 관련된 특정 서비스(420)를 제공할 수 있다. 예를 들어, 사용자 단말이 도 3에 도시된 바와 같이 벽 오른쪽에 위치하고, 벽 오른쪽에 이슬람 보물인 '쿠란 필사본'이 전시되어 있다면, 사용자 단말로 현재 사용자 단말의 위치(410) 및 '쿠란 필사본에 대한 상세 정보 표시 서비스(420)가 제공될 수 있다.
또한, 특정 서비스는 사용자 단말의 위치가 변경됨에 응답하여, 적응적으로 제공될 수 있다. 예를 들어, 사용자 단말이 벽 오른쪽으로부터 벽 위쪽으로 이동하고, 벽 위쪽에는 '총안 장식물'이 전시되어 있다면, 사용자 단말로 변경된 사용자 단말의 위치 및 '총안 장식물'에 대한 상세 정보 표시 서비스가 특정 서비스로 제공될 수 있다.
도 5는 본 발명의 일실시예에 따른 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법을 나타낸 플로우 차트이다.
도 5를 참조하면, 본 발명의 일실시예에 따른 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 자기장 지도 정보를 수신한다(510). 이 때, 자기장 지도 정보는 사용자 단말 또는 미리 설치된 자기장 측정 로봇 중 적어도 어느 하나로부터 미리 설정된 좌표 정보에 대응하는 자기장의 수평 성분 및 수직 성분을 수집하여 설정될 수 있다.
또한, 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 사용자 단말에 포함되는 자기장 센서로부터 제1 측정값을 획득한다(520).
또한, 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 사용자 단말에 포함되고, 자기장 센서와 구별되는 다른 센서로부터 제2 측정값을 획득한다(530). 이 때, 자기장 센서와 구별되는 다른 센서는 가속도 센서, 관성 센서, 자이로 센서, 압력 센서, 초음파 센서, 온습도 센서, 적외선 센서, 초광대역 신호(Ultra-Wideband; UWB), 무선 랜(Wireless Fidelity; Wi-Fi) 측정 센서 또는 엘이디(Light Emitting Diode; LED) 측정 센서 중 적어도 어느 하나를 포함할 수 있다.
또한, 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 자기장 지도 정보, 제1 측정값 및 제2 측정값에 기초하여 사용자 단말의 위치를 측정한다(540). 이에 대한 제1 실시예는 도 6을 참조하여 기재하기로 하고, 제2 실시예는 도 7을 참조하여 기재하기로 한다.
또한, 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 사용자 단말의 위치에 기초하여 사용자 단말의 위치와 관련된 특정 서비스를 제공할 수 있다(550).
도 6은 도 5에 도시된 사용자 단말의 위치를 측정하는 과정(540)을 구체적으로 나타낸 제1 플로우 차트이다.
도 6을 참조하면, 사용자 단말의 위치를 측정하는 과정(540)은 아래의 제1 실시예에 따라 수행될 수 있다.
본 발명의 제1 실시예에 따른 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 제1 측정값에 포함되는 자기장의 수평값 및 수직값 각각을 자기장 지도 정보에 포함되는 수평 성분 및 수직 성분 각각에 매칭시켜 사용자 단말의 수평 위치 및 수직 위치를 측정할 수 있다(610).
또한, 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 제2 측정값을 이용하여 수평 위치 및 수직 위치를 보정할 수 있다(620). 이 때, 제2 측정값을 이용하여 수평 위치 및 수직 위치를 보정하는 과정은 제2 측정값에 기초하여 사용자 단말의 사용자의 보폭, 사용자 단말의 이동 방향, 사용자 단말의 이동 거리 또는 사용자 단말의 이동 속도 중 적어도 어느 하나를 획득하는 과정 및 사용자의 보폭, 사용자 단말의 이동 방향, 사용자 단말의 이동 거리 또는 사용자 단말의 이동 속도 중 적어도 어느 하나를 이용하여 수평 위치 및 수직 위치를 보정하는 과정을 포함할 수 있다.
또한, 사용자 단말의 위치를 측정하는 과정(540)은 제2 실시예에 따라 수행될 수 있다. 이에 대한 상세한 설명은 도 7을 참조하여 기재하기로 한다.
도 7은 도 5에 도시된 사용자 단말의 위치를 측정하는 과정(540)을 구체적으로 나타낸 제2 플로우 차트이다.
도 7을 참조하면, 사용자 단말의 위치를 측정하는 과정(540)은 아래의 제2 실시예에 따라 수행될 수 있다.
본 발명의 제2 실시예에 따른 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 사용자 단말로부터 사용자 단말의 초기 위치를 입력 받을 수 있다(710).
또한, 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 입력 받은 초기 위치로부터 사용자 단말의 후보 위치를 설정할 수 있다(720).
또한, 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 사용자 단말의 후보 위치로부터 자기장 지도 정보, 제1 측정값 및 제2 측정값을 이용하여 사용자 단말의 위치를 선택할 수 있다(730).
도 8은 본 발명의 일실시예에 따른 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치를 나타낸 블록도이다.
도 8을 참조하면, 본 발명의 일실시예에 따른 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치는 수신부(810), 제1 측정값 획득부(820), 제2 측정값 획득부(830) 및 위치 측정부(840)를 포함한다.
수신부(810)는 자기장 지도 정보를 수신한다.
제1 측정값 획득부(820)는 사용자 단말에 포함되는 자기장 센서로부터 제1 측정값을 획득한다.
제2 측정값 획득부(830)는 사용자 단말에 포함되고, 자기장 센서와 구별되는 다른 센서로부터 제2 측정값을 획득한다.
위치 측정부(840)는 자기장 지도 정보, 제1 측정값 및 제2 측정값에 기초하여 사용자 단말의 위치를 측정한다.
이 때, 위치 측정부(840)는 제1 측정값에 포함되는 자기장의 수평값 및 수직값 각각을 자기장 지도 정보에 포함되는 수평 성분 및 수직 성분 각각에 매칭시켜 사용자 단말의 수평 위치 및 수직 위치를 측정하고, 제2 측정값을 이용하여 수평 위치 및 수직 위치를 보정할 수 있다.
또한, 위치 측정부(840)는 사용자 단말로부터 사용자 단말의 초기 위치를 입력 받고, 입력 받은 초기 위치로부터 사용자 단말의 후보 위치를 설정하며, 사용자 단말의 후보 위치로부터 자기장 지도 정보, 제1 측정값 및 제2 측정값을 이용하여 사용자 단말의 위치를 선택할 수 있다.
이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

Claims (10)

  1. 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법에 있어서,
    자기장 지도 정보를 수신하는 단계;
    상기 사용자 단말에 포함되는 자기장 센서로부터 제1 측정값을 획득하는 단계;
    상기 사용자 단말에 포함되고, 상기 자기장 센서와 구별되는 다른 센서로부터 제2 측정값을 획득하는 단계; 및
    상기 자기장 지도 정보, 상기 제1 측정값 및 상기 제2 측정값에 기초하여 상기 사용자 단말의 위치를 측정하는 단계
    를 포함하는 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법.
  2. 제1항에 있어서,
    상기 자기장 센서와 구별되는 상기 다른 센서는
    가속도 센서, 관성 센서, 자이로 센서, 압력 센서, 초음파 센서, 온습도 센서, 적외선 센서, 초광대역 신호(Ultra-Wideband; UWB), 무선 랜(Wireless Fidelity; Wi-Fi) 측정 센서 또는 엘이디(Light Emitting Diode; LED) 측정 센서 중 적어도 어느 하나를 포함하는 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법.
  3. 제1항에 있어서,
    상기 자기장 지도 정보는
    상기 사용자 단말 또는 미리 설치된 자기장 측정 로봇 중 적어도 어느 하나로부터 미리 설정된 좌표 정보에 대응하는 자기장의 수평 성분 및 수직 성분을 수집하여 설정되는 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법.
  4. 제3항에 있어서,
    상기 사용자 단말의 위치를 측정하는 단계는
    상기 제1 측정값에 포함되는 자기장의 수평값 및 수직값 각각을 상기 자기장 지도 정보에 포함되는 상기 수평 성분 및 상기 수직 성분 각각에 매칭시켜 상기 사용자 단말의 수평 위치 및 수직 위치를 측정하는 단계; 및
    상기 제2 측정값을 이용하여 상기 수평 위치 및 상기 수직 위치를 보정하는 단계
    를 포함하는 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법.
  5. 제4항에 있어서,
    상기 수평 위치 및 상기 수직 위치를 보정하는 단계는
    상기 제2 측정값에 기초하여 상기 사용자 단말의 사용자의 보폭, 상기 사용자 단말의 이동 방향, 상기 사용자 단말의 이동 거리 또는 상기 사용자 단말의 이동 속도 중 적어도 어느 하나를 획득하는 단계; 및
    상기 사용자의 보폭, 상기 사용자 단말의 이동 방향, 상기 사용자 단말의 이동 거리 또는 상기 사용자 단말의 이동 속도 중 적어도 어느 하나를 이용하여 상기 수평 위치 및 상기 수직 위치를 보정하는 단계
    를 포함하는 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법.
  6. 제1항에 있어서,
    상기 사용자 단말의 위치를 측정하는 단계는
    상기 사용자 단말로부터 상기 사용자 단말의 초기 위치를 입력 받는 단계;
    상기 입력 받은 초기 위치로부터 상기 사용자 단말의 후보 위치를 설정하는 단계; 및
    상기 사용자 단말의 후보 위치로부터 상기 자기장 지도 정보, 상기 제1 측정값 및 상기 제2 측정값을 이용하여 상기 사용자 단말의 위치를 선택하는 단계
    를 더 포함하는 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법.
  7. 제1항에 있어서,
    상기 사용자 단말의 위치에 기초하여 상기 사용자 단말의 위치와 관련된 특정 서비스를 제공하는 단계
    를 더 포함하는 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법.
  8. 제1항 내지 제7항 중 어느 한 항의 방법을 수행하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체.
  9. 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치에 있어서,
    자기장 지도 정보를 수신하는 수신부;
    상기 사용자 단말에 포함되는 자기장 센서로부터 제1 측정값을 획득하는 제1 측정값 획득부;
    상기 사용자 단말에 포함되고, 상기 자기장 센서와 구별되는 다른 센서로부터 제2 측정값을 획득하는 제2 측정값 획득부; 및
    상기 자기장 지도 정보, 상기 제1 측정값 및 상기 제2 측정값에 기초하여 상기 사용자 단말의 위치를 측정하는 위치 측정부
    를 포함하는 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치.
  10. 제9항에 있어서,
    상기 위치 측정부는
    상기 제1 측정값에 포함되는 자기장의 수평값 및 수직값 각각을 상기 자기장 지도 정보에 포함되는 상기 수평 성분 및 상기 수직 성분 각각에 매칭시켜 상기 사용자 단말의 수평 위치 및 수직 위치를 측정하고, 상기 제2 측정값을 이용하여 상기 수평 위치 및 상기 수직 위치를 보정하는 자기장을 이용하여 사용자 단말의 위치를 측정하는 장치.
KR1020130118758A 2013-10-04 2013-10-04 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법 및 장치 KR101527212B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020130118758A KR101527212B1 (ko) 2013-10-04 2013-10-04 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법 및 장치
US14/153,988 US20150097554A1 (en) 2013-10-04 2014-01-13 Method and Apparatus for Measuring Location of User Terminal Using Magnetic Field

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130118758A KR101527212B1 (ko) 2013-10-04 2013-10-04 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20150040140A true KR20150040140A (ko) 2015-04-14
KR101527212B1 KR101527212B1 (ko) 2015-06-09

Family

ID=52776440

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130118758A KR101527212B1 (ko) 2013-10-04 2013-10-04 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법 및 장치

Country Status (2)

Country Link
US (1) US20150097554A1 (ko)
KR (1) KR101527212B1 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017026758A1 (ko) * 2015-08-12 2017-02-16 엘지전자 주식회사 무선 통신 시스템에서 단말 위치를 측정하기 위한 방법 및 이를 수행하는 장치
KR102080532B1 (ko) * 2019-09-17 2020-02-24 영남대학교 산학협력단 층계 식별 장치 및 방법
KR102109374B1 (ko) * 2018-12-27 2020-05-13 영남대학교 산학협력단 위치 추정 장치 및 방법
KR102242064B1 (ko) * 2019-11-08 2021-04-19 세종대학교산학협력단 실내 측위를 위한 기법
KR20210125737A (ko) * 2020-04-09 2021-10-19 고려대학교 산학협력단 자기장 기반 위치측정방법 및 위치측정장치

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102219884B1 (ko) * 2014-07-02 2021-02-24 삼성전자주식회사 자기장을 이용한 고유 식별자를 수신받는 사용자 단말 장치, 방법 및 위치 추적 시스템
US20160084659A1 (en) * 2014-09-24 2016-03-24 Xue Yang Magnetic field mapping and indoor location sensing

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2324612B (en) * 1997-04-01 2002-01-09 Redcliffe Magtronics Ltd An apparatus for determining characteristics of a sample
US7489240B2 (en) * 2005-05-03 2009-02-10 Qualcomm, Inc. System and method for 3-D position determination using RFID
KR101810985B1 (ko) * 2011-09-02 2017-12-21 삼성전자주식회사 자기장을 이용한 단말의 위치 측정 방법 및 장치
KR101960280B1 (ko) * 2012-07-23 2019-03-20 삼성전자주식회사 자기장 지도를 수정하는 방법, 자기장 지도를 수정하는 사용자 단말 및 서버
KR101923939B1 (ko) * 2012-07-23 2018-11-30 삼성전자주식회사 건물의 도면 정보에 기초하여 자기장 지도를 생성하는 방법 및 장치
KR101957750B1 (ko) * 2012-11-26 2019-03-14 삼성전자주식회사 3차원 자기장 지도에 기초하여 생성된 입자 필터를 이용하여 위치를 추정하는 이동 단말 및 그 장치를 이용한 방법
KR102044354B1 (ko) * 2012-12-20 2019-11-13 삼성전자주식회사 데이터베이스 구축을 위한 자기장 맵을 생성하는 방법 및 장치

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017026758A1 (ko) * 2015-08-12 2017-02-16 엘지전자 주식회사 무선 통신 시스템에서 단말 위치를 측정하기 위한 방법 및 이를 수행하는 장치
KR102109374B1 (ko) * 2018-12-27 2020-05-13 영남대학교 산학협력단 위치 추정 장치 및 방법
WO2020138657A1 (ko) * 2018-12-27 2020-07-02 영남대학교 산학협력단 위치 추정 장치 및 방법
KR102080532B1 (ko) * 2019-09-17 2020-02-24 영남대학교 산학협력단 층계 식별 장치 및 방법
WO2021054502A1 (ko) * 2019-09-17 2021-03-25 영남대학교 산학협력단 층계 식별 장치 및 방법
KR102242064B1 (ko) * 2019-11-08 2021-04-19 세종대학교산학협력단 실내 측위를 위한 기법
US11466989B2 (en) 2019-11-08 2022-10-11 Industry Academy Cooperation Foundation Of Sejong University Techniques for indoor positioning
KR20210125737A (ko) * 2020-04-09 2021-10-19 고려대학교 산학협력단 자기장 기반 위치측정방법 및 위치측정장치

Also Published As

Publication number Publication date
US20150097554A1 (en) 2015-04-09
KR101527212B1 (ko) 2015-06-09

Similar Documents

Publication Publication Date Title
KR101527212B1 (ko) 자기장을 이용하여 사용자 단말의 위치를 측정하는 방법 및 장치
US11747477B2 (en) Data collecting method and system
KR101808095B1 (ko) 사용자 단말의 위치 측정 방법 및 장치
KR101831028B1 (ko) 실내 환경에서 이동 로봇의 리로케이션 방법 및 장치
US9485628B2 (en) User-location-in-building estimating apparatus and method thereof
EP2662700B1 (en) Method and apparatus for obtaining location of user
US8330654B2 (en) Method and apparatus for positioning mobile device
US10234306B2 (en) Method and apparatus for synchronizing a transmitter and receiver in a magnetic tracking system
CN102981140B (zh) 用于利用磁场测量终端的位置的方法和设备
EP4060288A2 (en) Apparatus and method for providing vehicular positioning
CN105359002B (zh) 用于标记众包数据的系统和方法
US10001544B2 (en) Method and electronic device identifying indoor location
KR101527211B1 (ko) 자기장 맵을 구축하는 방법 및 시스템
KR101923939B1 (ko) 건물의 도면 정보에 기초하여 자기장 지도를 생성하는 방법 및 장치
US11333736B2 (en) Position measurement device and method, and recording medium
US9310208B2 (en) Mobile device for estimating location using particle filter generated based on three-dimensional (3D) magnetic field map and method using said mobile device
US20180292216A1 (en) Method, device and system for determining an indoor position
CN108680160B (zh) 室内定位、导航方法、装置、存储介质和计算机设备
KR101523147B1 (ko) 실내 측위 장치 및 방법
US20160171017A1 (en) Mobile positioning apparatus and positioning method thereof
KR20180045510A (ko) 지자기 신호 처리 방법 및 장치
KR101417624B1 (ko) 물리적 지도와 스마트기기 센서를 이용한 실내 위치 측정 시스템 및 방법
JP6833275B2 (ja) 磁場マップ更新方法及び磁場マップ更新装置
CN109769206A (zh) 一种室内定位融合方法、装置、存储介质及终端设备
KR101642186B1 (ko) 위치 추적 방법, 위치 추적 시스템 및 이를 수행하기 위한 기록매체

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180516

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190527

Year of fee payment: 5