KR20110026229A - 핑거 프린트 방식의 위치 추적 시스템 및 그 방법 - Google Patents

핑거 프린트 방식의 위치 추적 시스템 및 그 방법 Download PDF

Info

Publication number
KR20110026229A
KR20110026229A KR1020090084035A KR20090084035A KR20110026229A KR 20110026229 A KR20110026229 A KR 20110026229A KR 1020090084035 A KR1020090084035 A KR 1020090084035A KR 20090084035 A KR20090084035 A KR 20090084035A KR 20110026229 A KR20110026229 A KR 20110026229A
Authority
KR
South Korea
Prior art keywords
fingerprint
location
map
user
error
Prior art date
Application number
KR1020090084035A
Other languages
English (en)
Other versions
KR101089995B1 (ko
Inventor
차호정
김윤근
전요한
Original Assignee
연세대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 연세대학교 산학협력단 filed Critical 연세대학교 산학협력단
Priority to KR1020090084035A priority Critical patent/KR101089995B1/ko
Publication of KR20110026229A publication Critical patent/KR20110026229A/ko
Application granted granted Critical
Publication of KR101089995B1 publication Critical patent/KR101089995B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/02Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using radio waves
    • G01S5/0252Radio frequency fingerprinting
    • G01S5/02521Radio frequency fingerprinting using a radio-map
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S11/00Systems for determining distance or velocity not using reflection or reradiation
    • G01S11/02Systems for determining distance or velocity not using reflection or reradiation using radio waves
    • G01S11/06Systems for determining distance or velocity not using reflection or reradiation using radio waves using intensity measurements
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/02Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using radio waves
    • G01S5/0257Hybrid positioning
    • G01S5/0258Hybrid positioning by combining or switching between measurements derived from different systems
    • G01S5/02585Hybrid positioning by combining or switching between measurements derived from different systems at least one of the measurements being a non-radio measurement
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W64/00Locating users or terminals or network equipment for network management purposes, e.g. mobility management
    • H04W64/003Locating users or terminals or network equipment for network management purposes, e.g. mobility management locating network equipment

Abstract

본 발명은 핑거 프린트 방식의 위치 추적 시스템 및 그 방법에 관한 것으로, 더욱 상세하게는 불특정의 사용자가 소지한 휴대기기로부터 건물 내의 라디오 핑거프린트 정보를 자동으로 수집하고 상기 수집된 핑거프린트 정보를 실시간 또는 주기적으로 업데이트하여 글로벌 라디오 핑거프린트 맵을 구축할 수 있는 핑거 프린트 방식의 위치 추적 시스템 및 그 방법에 관한 것이다.
핑거프린트, 관성측정장치, 가속도센서, 지자계센서, 최대위치오차

Description

핑거 프린트 방식의 위치 추적 시스템 및 그 방법 {Localization System using Fingerprint}
본 발명은 핑거 프린트 방식의 위치 추적 시스템 및 그 방법에 관한 것으로, 더욱 상세하게는 불특정의 사용자가 소지한 휴대기기로부터 건물 내의 라디오 핑거프린트 정보를 자동으로 수집하고 상기 수집된 핑거프린트 정보를 실시간 또는 주기적으로 업데이트하여 글로벌 라디오 핑거프린트 맵을 구축할 수 있는 핑거 프린트 방식의 위치 추적 시스템 및 그 방법에 관한 것이다.
위치 기반 서비스를 제공하기 위해서는 기본적으로 사용자의 위치를 알아야 하고, 사용자의 위치를 추적하는 방법으로 일반적으로 사용되는 기술이 GPS를 이용한 위치 추적 기술이다.
그러나 상기와 같이 GPS를 이용한 위치 추적 기술은 실외에서는 쉽게 위치를 추적할 수 있지만, 실내에서는 GPS 신호가 차단되기 때문에 실내의 위치 추적에는 적용될 수 없으므로 실내에서 위치를 추적하기 위한 다른 방법들이 연구되고 있다.
이 중, 핑거프린트 방식은 확률론적 모델링에 의한 측위기법으로 노이즈 및 주변 환경 정보를 위치 추적을 위한 정보로 활용하는 방식으로, 추가 장비 없이 기존에 설치되어 있는 무선 AP(Access Point)를 활용하는 특성 때문에 특히 많은 관심을 받고 있다.
상기 핑거프린트 방식은 기본적으로 오프라인 트레이닝 단계와 온라인 측위 단계로 나누어 진행된다.
상기 오프라인 트레이닝 단계에서는 관리자가 실내의 모든 위치마다 주변 AP로부터의 신호세기(RSS)값을 측정하여 핑거프린트 맵을 구성한다.
그리고 상기 온라인 측위 단계에서는 사용자의 현재 위치에서 측정된 RSS 값과 가장 비슷한 값을 가진 위치를 핑거프린트 맵에서 추출하여 사용자의 위치를 추적한다.
상기와 같은 핑거프린트 방식은 다른 추가 장비가 필요없이 실내에서 5m 이내의 오차로 위치를 추적할 수 있지만, 오프라인 트레이닝 단계에서 모든 위치에서의 RSS값을 미리 측정해야 한다는 단점이 있으며, 상기 오프라인 트레이닝 단계의 부담을 줄이는 연구가 진행되고 있지만, 그 성과는 아직 미미한 수준이다.
이와 관련, 많은 사용자가 협력적으로 RSS를 측정하는 시스템이 제한된 바 있으나, 사용자가 등록되지 않은 새로운 위치에 있을 때 직접 RSS값을 등록해야 하는 단점이 있을 뿐만 아니라, 건물 구조의 정보 또한 가지고 있어야 하는 제약이 따른다.
따라서, 핑거프린트 방식의 기술이 보편화되기 위해서는 오프라인 트레이닝 이 건물에 대한 사전 정보없이 가능해야할 뿐만 아니라, 따로 관리자가 없이도 자동으로 핑거프린트를 수집할 수 있어야 할 필요가 있다.
상기와 같은 문제를 해결하기 위해 안출된 것으로 본 발명의 목적은 위치측정과 RSS 측정이 가능한 불특정 사용자가 소지한 휴대기기로부터 핑거프린트 정보를 수집하여 핑거프린트 서버에서 실시간 또는 주기적으로 업데이트되는 핑거프린트 맵을 구축할 수 있는 불특정 사용자 기반의 핑거프린트 방식을 이용한 위치 추적 시스템 및 그 방법을 제공하는 데 있다.
도 1은 본 발명의 바람직한 실시예에 따른 시스템 구성도이다.
도 1을 참조하면, 본 발명에 따른 핑거프린트 방식의 위치 추적 시스템은 사용자의 위치를 추적하고, 주변 AP로부터의 신호세기를 측정하여 핑거프린트를 수집함과 동시에 최대 위치 오차를 산출하여 핑거프린트 정보를 생성하는 적어도 하나의 불특정 사용자의 휴대 기기(10)와 상기 휴대 기기로부터 수신된 핑거프린트 정보를 실시간 또는 주기적으로 업데이트하여 통합된 글로벌 핑거프린트 맵을 구축하는 핑거프린트 서버(20)를 포함하여 구성될 수 있다.
여기서, 상기 휴대 기기(10)는 사용자의 위치를 추적하기 위한 관성측정장치(120)와 주변 AP로부터 신호 세기(RSS)를 측정하기 위한 무선통신 모듈(110), 상기 관성측정장치로부터 측정된 위치에 대한 최대위치오차를 산출하는 오차측정모듈(130) 및 메모리(140)를 포함하는 측위수단을 탑재할 수 있다.
그리고 상기 휴대기기는 상기 측위수단이 임베디드된 휴대단말 또는 전용기기로 구성될 수 있다. 상기 휴대 단말은 휴대폰, PDA, 와이브로 단말 등 무선통신이 가능한 모든 휴대형 전자기기를 포함할 수 있다.
상기 관성측정장치(120)는 사용자의 보행을 감지하기 위한 가속도 센서(121)와 사용자의 진행방향을 감지하기 위한 지자계 센서(122)를 포함할 수 있다.
그리고 상기 무선통신 모듈(110)은 WiFi, 지그비(Zigbee) 등 통상의 무선 통신은 무엇이나 가능하고, 주변 AP로부터 신호세기(RSS)를 측정하는 역할을 담당한다.
또한, 상기 오차측정모듈(130)은 상기 가속도 센서 및 지자계 센서로부터 측정된 위치에 대한 최대위치오차를 하기와 같은 수학식에 의해 산출하는 것을 특징으로 한다.
Figure 112009054960502-PAT00001
여기서, e(k)는 k번째 스탭에서 평가된 최대 위치 오차이고, θi는 i번째 스텝에서의 진행방향, di는 i번째 스텝에서 누적된 총 이동거리이다.
그리고 상기 핑거프린트 정보는 상기 측위수단으로부터 획득된 위치정보, 상기 위치의 최대 위치오차, RSS 값을 포함하되, 상기 위치정보는 건물 내부를 일정 크기의 그리드로 쪼개어 상기 측정된 위치가 매핑되는 해당 그리드의 위치 좌표를 포함하는 것을 특징으로 한다.
또한, 상기 핑거프린트 서버(20)는 상기 휴대기기(10)로부터 수신된 핑거프린트 정보를 반영하여 핑거프린트 맵을 업데이트 하되, 상기 핑거프린트 맵과 업데이트할 핑거프린트가 겹칠 경우 최대 위치 오차를 비교하여 오차가 작은 핑거프린트를 선택하고, 오차가 큰 핑거프린트를 삭제하는 제 1필터링을 통해 업데이트된 핑거프린트 맵을 생성하는 핑거프린트 맵 생성모듈(210)과 상기 휴대기기로부터 수신된 핑거프린트 정보와 상기 업데이트되어 생성된 핑거프린트 맵을 저장 관리하는 데이터베이스(220)를 포함하는 것을 특징으로 한다.
상기 핑거프린트 맵 성성모듈(210)은 상기 수신된 핑거프린트 정보와 기 저장된 핑거프린트 맵 정보 중 RSS값이 유사한 핑거프린트를 추출하여 비교하여 최대 위치 오차가 작은 핑거프린트를 선택하는 제 2필터링에 의해 업데이트된 핑거프린트 맵을 생성하되, 상기 RSS 값이 비슷한 두 핑거프린트의 최대 위치 오차의 합이 두 핑거프린트 간 거리보다 작을 경우 상기 필터링에서 제외하는 것을 특징으로 한다.
또한, 상기 핑거프린트 서버는 상기 구축된 핑거프린트 맵에 따라 사용자의 위치 추적 서비스를 제공하는 위치 추적 모듈(230)을 포함하되, 상기 사용자로부터 측정된 RSS 값이 설정된 기준 범위 내에서 유사한 핑거프린트가 저장된 경우에만 위치 추적 서비스를 제공하는 것을 특징으로 한다.
한편, 본 발명에 따른 핑거프린트 방식의 위치 추적 방법은 (a) 적어도 하나의 불특정 사용자의 휴대 기기로부터 실시간으로 사용자의 위치를 추적하고, 주변 AP로부터의 신호세기(RSS)를 측정하여 핑거프린트를 수집함과 동시에 최대 위치 오 차를 산출하여 핑거프린트 정보를 생성하는 단계와 (b) 상기 휴대 기기로부터 수신된 핑거프린트 정보를 실시간 또는 주기적으로 업데이트하여 통합 핑거프린트 맵을 구축하는 단계를 포함하는 것을 특징으로 한다.
상기 (a) 단계는 상기 휴대기기의 가속도 센서가 사용자의 보행을 감지하고, 지자계 센서가 사용자의 진행방향을 감지하여 사용자의 위치를 측정하는 단계와 상기 측정된 위치에 대한 최대위치오차를 하기와 같은 수학식에 의해 산출하는 단계를 포함하는 것을 특징으로 한다.
<수학식>
Figure 112009054960502-PAT00002
여기서, e(k)는 k번째 스탭에서 평가된 최대 위치 오차이고, θi는 i번째 스텝에서의 진행방향, di는 i번째 스텝에서 누적된 총 이동거리이다.
여기서, 상기 핑거프린트 정보는 측정된 위치정보, 상기 위치의 최대 위치오차, RSS 값을 포함하되, 상기 위치정보는 건물 내부를 일정 크기의 그리드로 쪼개어 상기 측정된 위치가 매핑되는 해당 그리드의 위치 좌표를 포함하는 것을 특징으로 한다.
또한, 상기 (b) 단계는 상기 휴대기기로부터 수신된 핑거프린트 정보를 반영하여 핑거프린트 맵을 업데이트 하되, 상기 핑거프린트 맵과 업데이트할 핑거프린트가 겹칠 경우 최대 위치 오차를 비교하여 오차가 작은 핑거프린트를 선택하고, 오차가 큰 핑거프린트를 삭제하는 제 1 필터링을 통해 업데이트된 핑거프린트 맵을 생성하는 것을 특징으로 한다.
그리고 상기 (b) 단계는 상기 수신된 핑거프린트 정보와 기 저장된 핑거프린트 맵 정보 중 RSS값이 유사한 핑거프린트를 추출하여 비교하여 최대 위치 오차가 작은 핑거프린트를 선택하는 제 2 필터링에 의해 업데이트된 핑거프린트 맵을 생성하되, 상기 RSS 값이 비슷한 두 핑거프린트의 최대 위치 오차의 합이 두 핑거프린트 간 거리보다 작을 경우 상기 필터링에서 제외하는 것을 특징으로 한다.
또한, 상기 구축된 핑거프린트 맵에 따라 사용자의 위치 추적 서비스를 제공하되, 상기 사용자로부터 측정된 RSS 값이 설정된 기준 범위 내에서 유사한 핑거프린트가 저장된 경우에만 위치 추적 서비스를 제공하는 단계를 더 포함하는 것을 특징으로 한다.
본 발명에 따른 관성측정장치를 이용한 협력적이고 자동적인 핑거프린트 수집을 통한 측위기술에 의하면, 관리자 없이 불특정의 일반 사용자들이 일상생활 속에서 자동으로 오프라인 트레이닝 단계를 수행할 수 있으므로 종래의 오프라인 트레이닝 단계의 부담을 감소시켜 손쉽게 핑거프린트 맵을 구축할 수 있다. 이는 핑거프린트 맵의 구축이 필요한 실내 공간의 면적을 고려할 때 획기적인 효과라 할 수 있다.
또한, 생성된 글로벌 라디오 핑거프린트 맵을 이용하여 5m 이내의 오차로 위 치를 추적할 수 있을 뿐만 아니라, 관성측정장치가 시간이 지남에 따라 오차가 축적될 때, 업데이트를 통해 글로벌 핑거프린트 맵의 위치오차를 보정할 수 있다.
이하, 본 발명의 구체적인 실시예에 대하여 도면을 참조하여 상세하게 설명하기로 한다.
도 2는 본 발명의 바람직한 실시예에 따른 협력적이고 자동적인 핑거프린트 수집하여 핑거프린트 맵을 생성하기 위한 순서도이고, 도 3은 도 2의 순서도에 따른 단계 별 시스템 작동의 예시도이다.
본 발명에 따른 핑거프린트 방식의 위치 추적 시스템은 사용자의 위치를 추적하기 위한 관성측정장치(120), 핑거프린트 데이터를 수집하기 위한 무선 통신 모듈(110), 상기 관성측정장치로부터 측정된 위치에 대한 최대위치오차를 산출하는 오차측정모듈(130)를 포함하는 측위수단이 탑재된 휴대기기(10)와 상기 휴대기기로부터 핑거프린트 정보를 제공받아 글로벌 라디오 핑거프린트 맵을 통합하기 위한 핑거프린트 서버(20)를 포함하여 구성된다.
-제 1단계 : 핑거프린트 수집 단계(S110)
핑거프린트를 수집하는 제 1단계에서 사용자의 위치를 추적하는 방법은 관성측정장치를 이용하여 수행된다. 본 발명에서는 상기 관성측정장치를 이용한 모든 측위 기술이 적용가능하며, 하기에 설명하는 것은 본 발명을 검증하기 위해 사용된 하나의 예시이다.
본 발명을 검증하기 위해, 가속도 센서와 지자계 센서가 포함된 관성측정장치를 발에 부착하여 사람의 걸음, 보폭, 진행 방향을 탐지하여 측위를 하도록 했다.
사용자의 걸음 탐지는 가이트 사이클(gait cycle)을 이용한다. 도 4는 걸음 탐지를 위한 가속도 센서 신호 패턴을 나타낸 그래프이다.
도 4와 같이 매 걸음마다 가속도 센서로부터 읽어들인 값은 일정 주기로 패턴을 보이는데 이를 탐지하여 걸음 수를 카운트할 수 있다. 보폭의 경우, 이전 연구들에서 사람의 보폭은 스텝 주파수(step frequency)와 스텝 베리언스(step variance)에 리니어함이 밝혀졌기 때문에 이를 이용하여 구할 수 있다.
진행방향은 지자계 센서로부터 측정된 값 중 간섭이 없는 값을 사용하여 결정한다. 상기 지자계 센서의 간섭발생여부는 지자계 센서에 대한 간섭이 없는 실외에서의 측정범위를 기준으로 구별하게 된다.
추가적으로, 사람이 보행시 일반적으로 급격한 방향 변화를 하지 않는다는 점에서 갑작스런 변화가 있을 경우 또한 간섭으로 판단한다.
상기와 같은 걸음 탐지, 보폭 계산, 진행 방향 계산을 거쳐 실내에서 사용자의 위치를 추적한 결과 도 5와 같이 이동거리 166.6m에, 측정된 이동거리 163.4m, 평균오차 2.5m를 나타낸다.
실내에서 크게 발견되는 드리프트 에러는 지자계 센서의 왜곡에 따른 진행방향 오차로 인해 가장 많이 나타난다. 필터를 사용한 노이즈 제거와 달리 지자계 센서의 왜곡은 필터링으로 해결되는 방법이 아니다. 따라서 이러한 왜곡을 포함한 오 차를 허용하되, 오차측정모듈이 위치 오차의 최대 범위를 계산하여 핑거프린트 수집을 할 때 함께 저장하도록 한다.
관성측정장치로 측정된 위치의 최대 오차는 도 6을 참조하여, 하기의 <수학식 1>로 부터 구할 수 있다.
Figure 112009054960502-PAT00003
여기서, e(k)는 k번째 스탭에서 평가된 최대 위치 오차이고, θi는 i번째 스텝에서의 진행방향, di는 i번째 스텝에서 누적된 총 이동거리이다.
도 7은 상기 <수학식 1>을 통해 산출된 최대 위치 오차가 실제로 잘 동작하는 지를 검증한 실험 결과이다.
도 7을 참조하면, 93.9%의 확률로 최대 위치 오차 내에 실제 위치가 존재하였으므로 본 발명에서 사용된 계산법이 충분히 잘 동작하고 신뢰성있다는 것을 알 수 있다.
휴대기기는 상기와 같이 관성측정장치로부터 사용자의 위치를 추적하고, 오차 측정모듈에 의해 위치 최대 오차를 산출함과 동시에, 무선통신 모듈에 의해 RSS값을 측정하게 된다. 이렇게 측정된 위치정보, 최대위치오차, RSS값을 도 3a와 같이 하나의 핑거프린트 정보로 저장하게 된다.
상기 핑거프린트 정보를 저장할 때 건물 내부를 일정 크기의 그리드로 쪼개 어 저장하게 되는데, 각 그리드 마다 위치좌표, 평가된 최대 위치오차, 측정된 RSS 값을 함께 저장한다.
휴대기기는 상기와 같은 방법으로 일상 생활을 하며 수집된 핑거프린트 정보를 저장하고 있다가 인터넷이 가능한 상황에서 수집된 핑거프리트 정보를 핑거프린트 서버로 업로드하게 된다.
- 제 2 단계 : 글로벌 핑거프린트 맵 성성단계(S120)
본 발명의 제 2 단계에서는 핑거프린트 서버가 상기 불특정 사용자의 휴대기기로부터 수집된 핑거프린트 정보를 통합(업데이트)하여 글로벌 핑거프린트 맵을 생성하게 된다. 핑거프린트 통합은 기본적으로 글로벌 라디오 핑거프린트 맵에 업로드된 사용자의 핑거프린트를 복사하는 방식으로 진행된다.
사용자들이 수집한 핑거프린트 중 위치가 중복되지 않는 경우는 그대로 업데이트가 가능하지만, 위치가 중복되는 경우(그리드가 겹칠경우)는 제 각각 위치 오차를 포함하고 있기 때문에 적절한 필터링 기법이 필요하다.
도 9는 본 발명의 바람직한 실시예에 따른 필터링 과정을 개략적으로 도시한 순서도이다.
도 9를 참조하면, 본 발명에서는 먼저 도 8a와 같이 데이터베이스에 저장된 글로벌 라디오 핑거프린트 맵과 업데이트 할 핑거프린트가 겹칠 경우(위치가 중복되는 경우) 최대 위치 오차를 비교하여 최대위치 오차가 작은 핑거프린트를 선택하는 제 1필터링을 수행한다.
또한, 도 8b와 같이 같은 위치에서 측정된 핑거프린트임에도 불구하고 위치 오차로 인하여 서로 다른 그리드에 저장된 경우가 발생할 수 있다.
따라서, 핑거프린트 통합 시, 업로드된 모든 핑거프린트에 대해서 글로벌 핑거 프린트 맵에서 RSS 값이 비슷한 핑거프린트를 찾아낸 후, 위치 오자가 작은 쪽을 유지하고 큰 쪽은 삭제하는 제 2 필터링을 수행한다.
이 때, RSS값이 비슷한 두 핑거프린트의 최대 위치 오차의 합(Esum)이 두 핑거프린트 간 거리(Dbetween)보다 작을 경우 실제로는 다른 위치인데 RSS 값이 건물 구조 등에 의해 비슷하게 측정되는 경우로 판단하여 필터링에서 제외하게 된다.
-제 3 단계 : 위치 추적 서비스 단계
본 발명의 제 3 단계에서는 사용자가 관심이 있는 건물의 글로벌 핑거프린트 맵을 핑거프린트 서버로부터 다운받아서 핑거프린트 방식의 위치추적 기법으로 위치를 추적하거나 휴대기기의 관성측정장치로 추적된 위치 오차를 보정할 수 있다.
종래의 핑거프린트 방식과 달리, 본 발명에서는 관리자가 건물 내 모든 위치의 핑거프린트를 수집하는 것이 아니라, 일반 사용자들이 일상 생활 중에 수집된 핑거프린트를 통합하여 글로벌 핑거프린트 맵을 생성하기 때문에 건물 내 모든 위치의 핑거프린트를 수집하는 것을 보장하지 않는다.
따라서, 기존 핑거프린트 방식처럼 현재 측정된 RSS값과 가장 비슷한 핑거프린트를 찾아 위치를 추적하게 되면, 사용자가 핑거프린트가 수집되지 않은 위치에 있을 경우 전혀 엉뚱한 위치로 추적할 가능성이 있다.
상기와 같은 경우의 발생을 막기 위해, 본 발명에서는 현재 측정된 RSS 값과 미리 설정된 기준 범위 내에서 비슷한 RSS 값을 가진 핑거프린트를 발견했을 경우에만 위치를 추적하도록 할 수 있다.
도 10은 본 발명에 따라 생성된 글로벌 핑거프린트 맵을 이용하여 위치를 추적한 실험 결과를 보여준다.
총 36개의 경로로 핑거프린트를 수집하여 글로벌 핑거프린트 맵을 생성하였다.
기존 방식에 따라 관리자가 수동으로 모든 위치에서 RSS 값을 측정하여 만든 핑거프린트로 위치 추적을 한 결과, 92.6%의 경우가 5m 오차 내에 있었고, 97.5%의 경우가 7m 오차 내에 있었으며, 평균오차는 3.9m 였다.
한편, 본 발명에 따라 생성된 글로벌 핑거프린트 맵을 이용하여 위치 추적을 한 결과, 85.1%가 7m 오차 내였고, 96.7%가 9m 오차 내였으며, 평균오차는 4.4m 였다.
기존 방식에 비해 정확도가 조금 떨어졌지만, 핑거프린트 수집 단계가 자동화되었다는 점과, 측위가 필요한 엄청난 면적의 실내 공간에 대해 거주자나 건물 이용자 등의 불특정 사용자로부터 핑거프린트 정보를 획득할 수 있다는 점을 고려할 때 기존의 방식에 비해 획기적인 장점이라 할 수 있다.
한편, 도 10b는 본 발명에 따라 생성된 글로벌 핑거프린트 맵을 이용하여 관성측정장치의 오차를 보정한 결과에 대한 비교 실험 결과이다. 27분 동안 총 1.4km 를 보행하며 실험을 진행한 결과, 관성측정장치만으로 추적을 한 경우 평균 9.8m의 오차를 보인 반면, 글로벌 핑거프린트 맵으로 위치를 보정한 경우 평균 4.6m이 오차로 훨씬 정확하게 위치를 추적할 수 있음을 알 수 있다.
이상에서 설명한 본 발명의 상세한 설명에서는 본 발명의 바람직한 실시 예를 참조하여 설명하였지만, 본 발명의 보호범위는 상기 실시 예에 한정되는 것이 아니며, 해당 기술분야의 통상의 지식을 갖는 자라면 본 발명의 사상 및 기술영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
도 1은 본 발명의 바람직한 실시예에 따른 시스템 구성도이다.
도 2는 본 발명의 바람직한 실시예에 따른 협력적이고 자동적인 핑거프린트 수집하여 핑거프린트 맵을 생성하기 위한 순서도이고, 도 3은 도 2의 순서도에 따른 단계 별 시스템 작동의 예시도이다.
도 4는 걸음 탐지를 위한 가속도 센서 신호 패턴을 나타낸 그래프이다.
도 5는 걸음 탐지, 보폭 계산, 진행 방향 계산을 거쳐 실내에서 사용자의 위치를 추적한 결과를 나타낸다.
도 6은 측정 위치에 대한 최대위치오차 산출을 위한 예시도이다.
도 7은 본 발명에 따라 산출된 최대 위치 오차가 실제로 잘 동작하는 지를 검증한 실험 결과이다.
도 8a는 본 발명에 따라 제 1필터링이 적용될 그리드가 겹치는 경우에 대한 예시도이고, 도 8b는 본 발명에 따라 제 2 필터링이 적용될 같은 위치에서의 핑거프린트가 위치 오차에 의해 다른 곳에 저장된 경우에 대한 예시도이다.
도 9는 본 발명의 바람직한 실시예에 따른 필터링 과정을 개략적으로 도시한 순서도이다.
도 10은 본 발명에 따라 생성된 글로벌 핑거프린트 맵을 이용하여 위치를 추적한 실험 결과를 보여준다.

Claims (13)

  1. 핑거프린트 방식의 위치 추적 시스템에 있어서,
    사용자의 위치를 추적하고, 주변 AP로부터의 신호세기를 측정하여 핑거프린트를 수집함과 동시에 최대 위치 오차를 산출하여 핑거프린트 정보를 생성하는 측위수단을 포함하는 적어도 하나의 불특정 사용자의 휴대 기기와;
    상기 휴대 기기로부터 수신된 핑거프린트 정보를 업데이트하여 통합 핑거프린트 맵을 구축하는 핑거프린트 서버를 포함하는 것을 특징으로 하는 핑거프린트 방식의 위치 추적 시스템.
  2. 제 1항에 있어서,
    상기 휴대 기기는
    상기 측위수단이 임베디드된 휴대단말 또는 전용기기인 것을 특징으로 하는 핑거프린트 방식의 위치 추적 시스템.
  3. 제 1항에 있어서,
    상기 측위수단은
    주변 AP로부터 신호세기(RSS)를 측정하는 무선통신 모듈과;
    사용자의 보행을 감지하기 위한 가속도 센서와 사용자의 진행방향을 감지하기 위한 지자계 센서를 포함하는 관성측정장치 및;
    상기 가속도 센서 및 지자계 센서로부터 측정된 위치에 대한 최대위치오차를 하기와 같은 수학식에 의해 산출하는 오차측정모듈을 포함하는 것을 특징으로 하는 핑거프린트 방식의 위치 추적 시스템.
    <수학식>
    Figure 112009054960502-PAT00004
    여기서, e(k)는 k번째 스탭에서 평가된 최대 위치 오차이고, θi는 i번째 스텝에서의 진행방향, di는 i번째 스텝에서 누적된 총 이동거리이다.
  4. 제 1항에 있어서,
    상기 핑거프린트 정보는
    측정된 위치정보, 상기 위치의 최대 위치오차, RSS 값을 포함하되,
    상기 위치정보는 건물 내부를 일정 크기의 그리드로 쪼개어 상기 측정된 위치가 매핑되는 해당 그리드의 위치 좌표를 포함하는 것을 특징으로 하는 핑거프린트 방식의 위치 추적 시스템.
  5. 제 1항에 있어서,
    상기 핑거프린트 서버는
    상기 휴대기기로부터 수신된 핑거프린트 정보를 반영하여 핑거프린트 맵을 업데이트 하되, 상기 핑거프린트 맵과 업데이트할 핑거프린트가 겹칠 경우 최대 위치 오차를 비교하여 오차가 작은 핑거프린트를 선택하고, 오차가 큰 핑거프린트를 삭제하는 제 1 필터링을 통해 업데이트된 핑거프린트 맵을 생성하는 핑거프린트 맵 생성모듈과;
    상기 휴대기기로부터 수신된 핑거프린트 정보와 상기 업데이트되어 생성된 핑거프린트 맵을 저장 관리하는 데이터베이스를 포함하는 것을 특징으로 하는 핑거프린트 방식의 위치 추적 시스템.
  6. 제 5항에 있어서,
    상기 핑거프린트 맵 성성모듈은
    상기 수신된 핑거프린트 정보와 기 저장된 핑거프린트 맵 정보 중 RSS값이 유사한 핑거프린트를 추출하여 비교하여 최대 위치 오차가 작은 핑거프린트를 선택하는 제 2필터링에 의해 업데이트된 핑거프린트 맵을 생성하되,
    상기 RSS 값이 비슷한 두 핑거프린트의 최대 위치 오차의 합이 두 핑거프린트 간 거리보다 작을 경우 상기 필터링에서 제외하는 것을 특징으로 하는 핑거프린 트 방식의 위치 추적 시스템.
  7. 제 1항에 있어서,
    상기 핑거프린트 서버는
    상기 구축된 핑거프린트 맵에 따라 사용자의 위치 추적 서비스를 제공하는 위치 추적 모듈을 포함하되,
    상기 사용자로부터 측정된 RSS 값이 설정된 기준 범위 내에서 유사한 핑거프린트가 저장된 경우에만 위치 추적 서비스를 제공하는 것을 특징으로 하는 핑거프린트 방식의 위치 추적 시스템.
  8. 핑거프린트 방식의 위치 추적 방법에 있어서,
    (a) 적어도 하나의 불특정 사용자의 휴대 기기로부터 실시간으로 사용자의 위치를 추적하고, 주변 AP로부터의 신호세기(RSS)를 측정하여 핑거프린트를 수집함과 동시에 최대 위치 오차를 산출하여 핑거프린트 정보를 생성하는 단계와;
    (b) 상기 휴대 기기로부터 수신된 핑거프린트 정보를 업데이트하여 통합 핑거프린트 맵을 구축하는 단계를 포함하는 것을 특징으로 하는 핑거프린트 방식의 위치 추적 방법.
  9. 제 8항에 있어서,
    상기 (a) 단계는
    상기 휴대기기의 가속도 센서가 사용자의 보행을 감지하고, 지자계 센서가 사용자의 진행방향을 감지하여 사용자의 위치를 측정하는 단계와;
    상기 측정된 위치에 대한 최대위치오차를 하기와 같은 수학식에 의해 산출하는 단계를 포함하는 것을 특징으로 하는 핑거프린트 방식의 위치 추적 방법.
    <수학식>
    Figure 112009054960502-PAT00005
    여기서, e(k)는 k번째 스탭에서 평가된 최대 위치 오차이고, θi는 i번째 스텝에서의 진행방향, di는 i번째 스텝에서 누적된 총 이동거리이다.
  10. 제 9항에 있어서,
    상기 핑거프린트 정보는
    측정된 위치정보, 상기 위치의 최대 위치오차, RSS 값을 포함하되,
    상기 위치정보는 건물 내부를 일정 크기의 그리드로 쪼개어 상기 측정된 위치가 매핑되는 해당 그리드의 위치 좌표를 포함하는 것을 특징으로 하는 핑거프린 트 방식의 위치 추적 방법.
  11. 제 8항에 있어서,
    상기 (b) 단계는
    상기 휴대기기로부터 수신된 핑거프린트 정보를 반영하여 핑거프린트 맵을 업데이트 하되, 상기 핑거프린트 맵과 업데이트할 핑거프린트가 겹칠 경우 최대 위치 오차를 비교하여 오차가 작은 핑거프린트를 선택하고, 오차가 큰 핑거프린트를 삭제하는 제 1 필터링을 통해 업데이트된 핑거프린트 맵을 생성하는 것을 특징으로 하는 핑거프린트 방식의 위치 추적 방법.
  12. 제 8항에 있어서,
    상기 (b) 단계는
    상기 수신된 핑거프린트 정보와 기 저장된 핑거프린트 맵 정보 중 RSS값이 유사한 핑거프린트를 추출하여 비교하여 최대 위치 오차가 작은 핑거프린트를 선택하는 제 2 필터링에 의해 업데이트된 핑거프린트 맵을 생성하되,
    상기 RSS 값이 비슷한 두 핑거프린트의 최대 위치 오차의 합이 두 핑거프린트 간 거리보다 작을 경우 상기 필터링에서 제외하는 것을 특징으로 하는 핑거프린트 방식의 위치 추적 방법.
  13. 제 8항에 있어서,
    상기 구축된 핑거프린트 맵에 따라 사용자의 위치 추적 서비스를 제공하되,
    상기 사용자로부터 측정된 RSS 값이 설정된 기준 범위 내에서 유사한 핑거프린트가 저장된 경우에만 위치 추적 서비스를 제공하는 단계를 더 포함하는 것을 특징으로 하는 핑거프린트 방식의 위치 추적 방법.
KR1020090084035A 2009-09-07 2009-09-07 핑거 프린트 방식의 위치 추적 시스템 및 그 방법 KR101089995B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090084035A KR101089995B1 (ko) 2009-09-07 2009-09-07 핑거 프린트 방식의 위치 추적 시스템 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090084035A KR101089995B1 (ko) 2009-09-07 2009-09-07 핑거 프린트 방식의 위치 추적 시스템 및 그 방법

Publications (2)

Publication Number Publication Date
KR20110026229A true KR20110026229A (ko) 2011-03-15
KR101089995B1 KR101089995B1 (ko) 2011-12-05

Family

ID=43933357

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090084035A KR101089995B1 (ko) 2009-09-07 2009-09-07 핑거 프린트 방식의 위치 추적 시스템 및 그 방법

Country Status (1)

Country Link
KR (1) KR101089995B1 (ko)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101105848B1 (ko) * 2011-04-14 2012-01-13 한국과학기술원 센서를 포함하는 이동 단말기, 이를 포함하는 무선 네트워크 시스템 및 무선 네트워크 시스템의 스캐닝 방법
KR101233841B1 (ko) * 2011-10-31 2013-02-15 삼성에스디에스 주식회사 핑거프린트 맵 구축 방법 및 장치
CN103068035A (zh) * 2011-10-21 2013-04-24 中国移动通信集团公司 一种无线网络定位方法、装置及系统
KR20130043542A (ko) * 2011-10-20 2013-04-30 한국전자통신연구원 위치인식용 이종 인프라 위치 데이터베이스 생성 방법
KR101286169B1 (ko) * 2011-10-31 2013-07-15 삼성에스디에스 주식회사 무선 통신 단말의 위치 측정 장치, 위치 측정 방법 및 핑거프린트 정보 수집 방법, 핑거프린트 서버 및 그의 위치 제공 방법
KR101296013B1 (ko) * 2011-12-23 2013-08-12 주식회사 한국무역정보통신 큐알 코드 및 무선 신호를 이용한 위치 추정 시스템을 위한 서버와 단말 및 이를 이용한 방법
WO2013128059A1 (en) * 2012-02-27 2013-09-06 Nokia Corporation Positioning method and apparatus and computer program product
KR101308555B1 (ko) * 2011-05-03 2013-09-13 (주)네오정보시스템 실내보행 위치산출방법
WO2013180362A1 (ko) * 2012-06-01 2013-12-05 한국과학기술원 와이파이 신호 맵 구축 장치 및 방법
WO2014042457A1 (ko) * 2012-09-13 2014-03-20 엘지전자 주식회사 무선 통신 시스템에서 단말의 위치를 계산하기 위한 방법 및 그를 위한 장치
KR101415191B1 (ko) * 2012-10-22 2014-07-04 충남대학교산학협력단 보행자 경로안내 장치
KR20140099875A (ko) * 2011-11-02 2014-08-13 샤이 론넨 위치지문맵의 생성 및 이용
CN104168649A (zh) * 2013-05-16 2014-11-26 马维尔国际贸易有限公司 用于定位无线设备的方法和系统
KR101468811B1 (ko) * 2013-06-11 2014-12-09 광운대학교 산학협력단 무선 랜을 이용한 실내 측위 시스템의 위치 보정 방법
KR20140147926A (ko) * 2013-06-19 2014-12-31 삼성전자주식회사 건물 내 위치 기반 서비스 구현 방법, 저장 매체, 서버 및 전자 장치
KR101523147B1 (ko) * 2013-12-27 2015-05-26 코디스페이스 주식회사 실내 측위 장치 및 방법
CN105004340A (zh) * 2015-07-14 2015-10-28 沈向东 结合惯性导航技术和指纹定位技术的定位误差修正方法
KR20170078120A (ko) * 2015-12-29 2017-07-07 에스케이플래닛 주식회사 Rf 핑거프린트 기반의 위치 등록 방법 및 이를 위한 장치, 이를 수행하는 컴퓨터 프로그램을 기록한 기록 매체
CN107957572A (zh) * 2016-10-18 2018-04-24 环达电脑(上海)有限公司 指纹匹配模式的数据自动收集装置及方法
WO2019103358A1 (ko) * 2017-11-24 2019-05-31 한국과학기술원 주변기기 정보 수집 방법 및 시스템
KR102497581B1 (ko) * 2022-07-13 2023-02-08 주식회사 티제이랩스 인공신경망을 이용한 무선 측위 방법 및 장치
WO2023022305A1 (ko) * 2021-08-17 2023-02-23 연세대학교 산학협력단 보행자 실내 위치 측위 장치 및 방법

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101749332B1 (ko) * 2013-11-08 2017-07-03 한국전자통신연구원 전파지문지도 기반 단말의 위치 인식 방법
KR102158029B1 (ko) * 2014-01-03 2020-09-21 한국전자통신연구원 전파 지도를 이용한 실내위치 인식 방법 및 장치
KR101972908B1 (ko) * 2016-09-13 2019-04-26 한국과학기술연구원 실내 위치 측정 방법, 서버, 및 시스템

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2118810B1 (en) 2007-02-05 2012-08-15 Andrew Corporation System and method for optimizing location estimate of mobile unit

Cited By (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101105848B1 (ko) * 2011-04-14 2012-01-13 한국과학기술원 센서를 포함하는 이동 단말기, 이를 포함하는 무선 네트워크 시스템 및 무선 네트워크 시스템의 스캐닝 방법
KR101308555B1 (ko) * 2011-05-03 2013-09-13 (주)네오정보시스템 실내보행 위치산출방법
KR20130043542A (ko) * 2011-10-20 2013-04-30 한국전자통신연구원 위치인식용 이종 인프라 위치 데이터베이스 생성 방법
KR101878487B1 (ko) * 2011-10-20 2018-07-16 한국전자통신연구원 위치인식용 이종 인프라 위치 데이터베이스 생성 방법
CN103068035A (zh) * 2011-10-21 2013-04-24 中国移动通信集团公司 一种无线网络定位方法、装置及系统
CN103068035B (zh) * 2011-10-21 2016-03-02 中国移动通信集团公司 一种无线网络定位方法、装置及系统
KR101233841B1 (ko) * 2011-10-31 2013-02-15 삼성에스디에스 주식회사 핑거프린트 맵 구축 방법 및 장치
KR101286169B1 (ko) * 2011-10-31 2013-07-15 삼성에스디에스 주식회사 무선 통신 단말의 위치 측정 장치, 위치 측정 방법 및 핑거프린트 정보 수집 방법, 핑거프린트 서버 및 그의 위치 제공 방법
KR20200041333A (ko) * 2011-11-02 2020-04-21 샤이 론넨 위치지문맵의 생성 및 이용
KR20140099875A (ko) * 2011-11-02 2014-08-13 샤이 론넨 위치지문맵의 생성 및 이용
KR101296013B1 (ko) * 2011-12-23 2013-08-12 주식회사 한국무역정보통신 큐알 코드 및 무선 신호를 이용한 위치 추정 시스템을 위한 서버와 단말 및 이를 이용한 방법
WO2013128059A1 (en) * 2012-02-27 2013-09-06 Nokia Corporation Positioning method and apparatus and computer program product
WO2013180362A1 (ko) * 2012-06-01 2013-12-05 한국과학기술원 와이파이 신호 맵 구축 장치 및 방법
US9445387B2 (en) 2012-06-01 2016-09-13 Korea Advanced Institute Of Science And Technology Method and apparatus for building Wi-Fi radio map
US9432813B2 (en) 2012-09-13 2016-08-30 Lg Electronics Inc. Method and apparatus for calculating location of terminal in wireless communication system
WO2014042457A1 (ko) * 2012-09-13 2014-03-20 엘지전자 주식회사 무선 통신 시스템에서 단말의 위치를 계산하기 위한 방법 및 그를 위한 장치
KR101415191B1 (ko) * 2012-10-22 2014-07-04 충남대학교산학협력단 보행자 경로안내 장치
USRE48160E1 (en) 2013-05-16 2020-08-11 Marvell Asia Pte, Ltd. Method and system for positioning wireless device
CN104168649A (zh) * 2013-05-16 2014-11-26 马维尔国际贸易有限公司 用于定位无线设备的方法和系统
CN104168649B (zh) * 2013-05-16 2020-01-17 马维尔国际贸易有限公司 用于定位无线设备的方法和系统
KR101468811B1 (ko) * 2013-06-11 2014-12-09 광운대학교 산학협력단 무선 랜을 이용한 실내 측위 시스템의 위치 보정 방법
KR20140147926A (ko) * 2013-06-19 2014-12-31 삼성전자주식회사 건물 내 위치 기반 서비스 구현 방법, 저장 매체, 서버 및 전자 장치
KR101523147B1 (ko) * 2013-12-27 2015-05-26 코디스페이스 주식회사 실내 측위 장치 및 방법
CN105004340A (zh) * 2015-07-14 2015-10-28 沈向东 结合惯性导航技术和指纹定位技术的定位误差修正方法
KR20170078120A (ko) * 2015-12-29 2017-07-07 에스케이플래닛 주식회사 Rf 핑거프린트 기반의 위치 등록 방법 및 이를 위한 장치, 이를 수행하는 컴퓨터 프로그램을 기록한 기록 매체
CN107957572A (zh) * 2016-10-18 2018-04-24 环达电脑(上海)有限公司 指纹匹配模式的数据自动收集装置及方法
WO2019103358A1 (ko) * 2017-11-24 2019-05-31 한국과학기술원 주변기기 정보 수집 방법 및 시스템
WO2023022305A1 (ko) * 2021-08-17 2023-02-23 연세대학교 산학협력단 보행자 실내 위치 측위 장치 및 방법
KR20230025992A (ko) * 2021-08-17 2023-02-24 연세대학교 산학협력단 보행자 실내 위치 측위 장치 및 방법
KR102497581B1 (ko) * 2022-07-13 2023-02-08 주식회사 티제이랩스 인공신경망을 이용한 무선 측위 방법 및 장치

Also Published As

Publication number Publication date
KR101089995B1 (ko) 2011-12-05

Similar Documents

Publication Publication Date Title
KR101089995B1 (ko) 핑거 프린트 방식의 위치 추적 시스템 및 그 방법
CN107111641B (zh) 用于更新定位数据的数据库的定位估计
KR101751731B1 (ko) 위치 추적 시스템 및 방법
KR101728123B1 (ko) 지구 자기장을 이용한 동시 로컬리제이션 및 매핑
US9113310B2 (en) Systems and methods for simultaneously and automatically creating databases of wifi signal information
ES2366875T3 (es) Dispositivo y procedimiento para actualizar datos cartográficos.
Luo et al. MPiLoc: Self-calibrating multi-floor indoor localization exploiting participatory sensing
Chang et al. Crowdsourcing-based radio map update automation for Wi-Fi positioning systems
CN105190345A (zh) 用于使用三维位置信息改进定位服务的系统和方法
Mathisen et al. A comparative analysis of Indoor WiFi Positioning at a large building complex
Ye et al. B-Loc: Scalable floor localization using barometer on smartphone
WO2014137953A1 (en) Crowd sourced pathway maps
KR20140012573A (ko) 실내 지도 구축 장치 및 방법
EP2881708A1 (en) System and method for indoor localization using mobile inertial sensors and virtual floor maps
CN103649770A (zh) 移动设备的位置估计
CN105635956A (zh) 一种基于室内虚拟地标的定位方法及装置
GB2520751A (en) Location finding apparatus and associated methods
Pipelidis et al. A novel approach for dynamic vertical indoor mapping through crowd-sourced smartphone sensor data
Santos et al. Crowdsourcing-based fingerprinting for indoor location in multi-storey buildings
Vy et al. Pedestrian indoor localization and tracking using hybrid Wi-Fi/PDR for iPhones
KR101621839B1 (ko) 이동 패턴 데이터베이스를 이용한 측위 방법 및 시스템
CN110366109A (zh) 一种用于室内目标的定位方法及系统
Meneses et al. Using GSM CellID positioning for place discovering
Abadleh et al. Construction of indoor floor plan and localization
Cho et al. WARP-P: Wireless Signal Acquisition with Reference Point by using Simplified PDR–System Concept and Performance Assessment

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20141119

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160105

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20161123

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20181211

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20191115

Year of fee payment: 9