KR101487173B1 - 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법 - Google Patents

차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법 Download PDF

Info

Publication number
KR101487173B1
KR101487173B1 KR20110009217A KR20110009217A KR101487173B1 KR 101487173 B1 KR101487173 B1 KR 101487173B1 KR 20110009217 A KR20110009217 A KR 20110009217A KR 20110009217 A KR20110009217 A KR 20110009217A KR 101487173 B1 KR101487173 B1 KR 101487173B1
Authority
KR
South Korea
Prior art keywords
black box
menu
setting
vehicle
short
Prior art date
Application number
KR20110009217A
Other languages
English (en)
Other versions
KR20110088467A (ko
Inventor
김흥원
우승완
이원근
이해일
Original Assignee
팅크웨어(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 팅크웨어(주) filed Critical 팅크웨어(주)
Priority to KR20110009217A priority Critical patent/KR101487173B1/ko
Publication of KR20110088467A publication Critical patent/KR20110088467A/ko
Application granted granted Critical
Publication of KR101487173B1 publication Critical patent/KR101487173B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • G07C5/085Registering performance data using electronic data carriers
    • G07C5/0866Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D41/00Fittings for identifying vehicles in case of collision; Fittings for marking or recording collision areas
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01DMEASURING NOT SPECIALLY ADAPTED FOR A SPECIFIC VARIABLE; ARRANGEMENTS FOR MEASURING TWO OR MORE VARIABLES NOT COVERED IN A SINGLE OTHER SUBCLASS; TARIFF METERING APPARATUS; MEASURING OR TESTING NOT OTHERWISE PROVIDED FOR
    • G01D9/00Recording measured values
    • G01D9/005Solid-state data loggers
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/008Registering or indicating the working of vehicles communicating information to a remotely located station
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0816Indicating performance data, e.g. occurrence of a malfunction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/802Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving processing of the sound signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2400/00Special features of vehicle units
    • B60Y2400/30Sensors
    • B60Y2400/304Acceleration sensors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2400/00Special features of vehicle units
    • B60Y2400/92Driver displays

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Automation & Control Theory (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Navigation (AREA)

Abstract

본 발명에 따른 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법은, 예를 들어, 차량용 내비게이션과 유선 통신 또는 무선 통신을 통해 연결 사용되는 차량용 블랙박스 등에 적용되는 것으로, 카메라 영상을 스토리지 내에 녹화하되, 카메라 영상의 휘도 레벨과, 입력 오디오의 신호 레벨, 그리고 입력 오디오의 주파수 패턴 중 어느 하나 이상에 의해 특수 상황의 이벤트를 획득하면, 상기 카메라 영상의 녹화 화질과 해상도, 그리고 프레임 수 중 어느 하나 이상을 증가시켜 녹화함으로써, 상기 스토리지의 한정된 저장 용량을 보다 효율적으로 사용할 수 있게 되며, 또한, 터널 통과 직후, 또는 혼잡한 도로 구간 진입, 또는 스키드 마크 발생 등의 특수 상황에서 발생하는 차량 사고의 원인을 보다 정확하게 판별할 수 있게 되므로, 차량용 블랙박스의 감시 및 저장 성능을 향상시킬 수 있게 된다.

Description

차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법 {Apparatus and method for controlling video record in car black box}
본 발명은 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법에 관한 것으로서, 보다 구체적으로는 차량용 내비게이션과 유선 통신 또는 무선 통신을 통해 연결 사용되는 차량용 블랙박스 등에 적용되는 영상 녹화 제어 장치 및 방법에 관한 것이다.
인터넷 망이 개방되고 위치 데이터와 관련된 법률이 정비됨에 따라, 위치 기반 서비스(Location Based Service; LBS) 관련 산업이 활성화되고 있다. 위치 기반 서비스의 한 분야로서, 디바이스가 장착된 차량 등의 현재위치를 측위하거나 목적지까지의 이동 경로를 안내해주는 차량용 내비게이션 관련산업 또한 급격히 활성화되고 있는 상황이다.
한편, 차량의 정차 또는 운행 중 발생한 사고의 책임소재에 따른 과실비율을 판단하기 위하여 객관적인 자료가 필요한 경우가 증가하고 있다. 이에 따라, 객관적인 자료를 제공할 수 있는 차량용 블랙박스가 사용되고 있다. 그런데 종래의 차량용 블랙박스는, 차량의 상태에 대한 단순하고 평명적인 데이터만을 제공할 수 있을 뿐이어서, 사용자의 요구에 효과적으로 부응하지 못하고 있는 실정이다.
본 발명은 예를 들어, 차량용 내비게이션과 유선 통신 또는 무선 통신을 통해 연결 사용되는 차량용 블랙박스에서, 카메라 영상을 스토리지 내에 녹화하되, 카메라 영상의 휘도 레벨과, 입력 오디오의 신호 레벨, 그리고 입력 오디오의 주파수 패턴 중 어느 하나 이상에 의해 특수 상황의 이벤트(Event)를 획득하면, 상기 카메라 영상의 녹화 화질과 해상도, 그리고 프레임 수 중 어느 하나 이상을 증가시켜 녹화할 수 있도록 하기 위한 차량용 블랙박스의 영상 녹화 제어 장치 및 방법을 제공하기 위한 것이다.
본 발명의 제1 양상에 따른 차량용 블랙박스에서의 영상 녹화 제어 장치는 카메라 영상을 녹화 저장하기 위한 저장부; 및 상기 카메라 영상의 휘도 레벨이, 고 레벨에서 저 레벨로 변화한 상태에서 소정 시간이 경과한 후, 이전의 고 레벨로 다시 변화하면, 차량의 터널 통과로 판별하여, 상기 카메라 영상의 녹화 화질과 해상도, 그리고 프레임 수 중 어느 하나 이상을 증가시키기 위한 제어부를 포함하여 구성된다.
본 발명의 제2 양상에 따른 차량용 블랙박스에서의 영상 녹화 제어 방법은, 카메라 영상을 녹화하면서, 상기 카메라 영상의 휘도 레벨이, 고 레벨에서 저 레벨로 변화한 상태에서 소정 시간이 경과한 후, 이전의 고 레벨로 다시 변화하면, 차량의 터널 통과로 판별하는 1단계; 및 상기 판별 결과에 따라, 상기 카메라 영상의 녹화 화질과 해상도, 그리고 프레임 수 중 어느 하나 이상을 증가시키는 2단계를 포함하여 이루어진다.
본 발명에 따른 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법은, 예를 들어, 차량용 내비게이션과 유선 통신 또는 무선 통신을 통해 연결 사용되는 차량용 블랙박스 등에 적용되는 것으로, 카메라 영상을 스토리지 내에 녹화하되, 카메라 영상의 휘도 레벨과, 입력 오디오의 신호 레벨, 그리고 입력 오디오 주파수 패턴 중 어느 하나 이상에 의해 특수 상황의 이벤트를 획득하면, 상기 카메라 영상의 녹화 화질과 해상도, 그리고 프레임 수 중 어느 하나 이상을 증가시켜 녹화함으로써, 상기 스토리지의 한정된 저장 용량을 보다 효율적으로 사용할 수 있게 되며, 또한, 터널 통과 직후, 또는 혼잡한 도로 구간 진입, 또는 스키드 마크 발생 등의 특수 상황에서 발생하는 차량 사고의 원인을 보다 정확하게 판별할 수 있게 되므로, 차량용 블랙박스의 감시 및 저장 성능을 향상시킬 수 있게 된다.
도 1은 본 발명의 일 실시예에 따른 내비게이션 시스템의 도면이다.
도 2는 본 발명의 다른 실시예에 따른 내비게이션 시스템의 도면이다.
도 3은 도 1에 도시한 차량용 내비게이션의 블록 구성도이다.
도 4는 도 1에 도시한 차량용 블랙박스의 블록 구성도이다.
도 5는 도 1에 도시한 내비게이션 시스템을 포함하는 통신망의 구성도이다.
도 6 내지 도 10은 본 발명의 사용자 선택 메뉴에 대한 실시예의 도면이다.
도 11은 본 발명에 따른 차량용 블랙박스의 일부 구성에 대한 실시예의 도면이다.
도 12 내지 도 14는 본 발명에 따라 이벤트가 획득되는 실시예의 도면이다.
도 15는 본 발명에 따라 카메라 영상의 화질, 해상도, 프레임 수가 가변 조절되는 실시예의 도면이다.
도 16은 본 발명에 따라 카메라 영상, 마이크 음성, 위치 및 지도 데이터가 녹화되는 실시예의 도면이다.
도 17은 본 발명에 따라 경고 메시지가 표시되는 실시예의 도면이다.
본 발명의 상술한 목적, 특징들 및 장점은 첨부된 도면과 관련된 다음의 상세한 설명을 통해 보다 분명해질 것이다. 다만, 본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예들을 가질 수 있는 바, 이하에서는 특정 실시예들을 도면에 예시하고 이를 상세히 설명하고자 한다. 명세서 전체에 걸쳐서 동일한 참조번호들은 원칙적으로 동일한 구성요소들을 나타낸다.
또한, 본 발명과 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 본 명세서의 설명 과정에서 이용되는 숫자(예를 들어, 제1, 제2 등)는 하나의 구성요소를 다른 구성요소와 구분하기 위한 식별기호에 불과하다
이하, 본 발명과 관련된 이동 단말기에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
도 1은 본 발명의 일 실시예에 따른 내비게이션 시스템의 도면이다.
이에 도시한 바와 같이, 본 발명의 일 실시예에 따른 내비게이션 시스템(10)은, 차량용 내비게이션(100)과 차량용 블랙박스(200)를 포함할 수 있다.
내비게이션 시스템(10)은 차량의 운행, 유지 등과 관련된 각종 데이터를 차량의 운전자 및 동승자에게 알려주는 시스템을 의미할 수 있다. 내비게이션 시스템(10)은 좁은 의미로는 차량용 내비게이션(100) 그 자체일 수 있으며, 넓은 의미로는 차량용 내비게이션(100)과 유무선으로 연동되어 작동하는 각종 전자 디바이스를 포함하는 개념으로 볼 수 있다.
즉, 차량용 내비게이션(100)의 기능을 보완, 증대할 수 있는 각종 전자 디바이스를 연결함으로써 통합된 내비게이션 시스템(10)을 구성할 수 있음을 의미한다. 차량용 내비게이션(100)과 연동됨으로써 내비게이션 시스템(10)을 구성할 수 있는 전자 디바이스는 이동 통신망에 접속할 수 있는 다른 이동 단말기, 리모컨 등일 수 있다.
또한, 차량용 내비게이션(100)에 연결되어 내비게이션 시스템(10)을 구성할 수 있는 전자 디바이스로는 차량용 블랙박스(200)가 있을 수 있다. 차량용 블랙박스(200)는 차량용 내비게이션(100)과 일체 혹은 별도로 마련될 수 있다. 즉, 도 1에서는 차량용 내비게이션(100)과 별도로 마련된 차량용 블랙박스(200)가 통신케이블(300)을 통하여 연결된 것으로 도시하였으나, 차량용 블랙박스(200)가 차량용 내비게이션(100)과 일체화되는 경우도 가능함을 의미한다.
차량용 내비게이션(100)은 내비게이션 하우징(191)의 전면에 마련된 디스플레이부(145)와, 내비게이션 조작키(193)와, 내비게이션 마이크(195)를 포함할 수 있다.
내비게이션 하우징(191)은 차량용 내비게이션(100)의 외관을 형성한다. 차량용 내비게이션(100)은, 계절적인 요인 등에 의한 고온 또는 저온에 노출되거나, 직/간접적인 외부 충격을 받는 등 다양한 조건의 환경에 노출될 수 있다. 내비게이션 하우징(191)은 외부 환경의 변화로부터 차량용 내비게이션(100) 내부의 각종 전자부품을 보호하는 한편, 차량용 내비게이션(100)의 외관을 미려하게 할 목적을 가질 수 있다. 이와 같은 목적을 달성하기 위하여, 내비게이션 하우징(191)은 ABS, PC 또는 강도가 강화된 엔지니어링 플라스틱 등의 소재를 사출성형하는 방법으로 가공될 수 있다.
디스플레이부(145)는 각종 데이터를 시각적으로 표시하는 부분이다. 디스플레이부(145)에 표시하는 각종 데이터는, 경로 데이터 등이 결합된 맵(Map) 데이터이거나, DMB 방송을 포함한 각종 방송 화면이거나, 메모리에 저장되어 있던 영상일 수 있다. 디스플레이부(145)는 물리적 또는 논리적으로 수개로 분할될 수 있다.
물리적으로 분할된 디스플레이부(145)는 2개 이상의 디스플레이부(145)가 인접하여 마련된 경우를 의미한다. 논리적으로 분할된 디스플레이부(145)는, 물리적으로 1개의 디스플레이부(145)에 복수개의 독립된 화면을 표시하는 경우를 의미한다. 예를 들어, DMB 방송을 수신하여 표시하고 있는 도중에 디스플레이부(145)의 일부 영역에 경로 데이터를 표시하거나, 디스플레이부(145)의 일부 영역과 다른 영역에 각각 DMB 방송과 맵 화면을 표시하는 경우일 수 있다.
각종 기능이 차량용 내비게이션(100)에 컨버젼스(convergence)되는 경향에 따라 디스플레이부(145)를 논리적으로 분할하여 다양한 데이터를 표시하는 경우가 점차 증가하고 있다. 나아가, 다양한 각종 데이터를 표시하기 위하여, 디스플레이부(145)는 점차 대화면화 되고 있다.
디스플레이부(145)의 전면(全面) 또는 일부는 사용자의 터치입력을 수신할 수 있는 터치스크린일 수 있다. 예를 들어, 디스플레이부(145)에 표시된 기능선택 버튼을 터치함으로써 그 기능을 활성화할 수 있다. 즉, 디스플레이부(145)가 영상의 출력부(도 3의 140)인 동시에 입력부(도 3의 120)일 수 있음을 의미한다.
내비게이션 조작키(193)는 차량용 내비게이션(100)의 각종 기능을 실행하거나 사용자가 직접 필요한 데이터를 입력하도록 하기 위하며 마련될 수 있다. 빈번하게 사용하는 특정 기능을 내비게이션 조작키(193)에 맵핑(mapping)하여 사용편의성을 향상할 수 있다.
내비게이션 마이크(195)는 음성과 음향을 포함하는 소리(sound)를 수신하기 위하여 마련될 수 있다. 예를 들어, 내비게이션 마이크(195)로 수신한 음성 신호에 기초하여 차량용 내비게이션(100)의 특정 기능의 실행이 가능할 수 있다. 또한, 내비게이션 마이크(195)로 수신한 음향 신호에 기초하여 사고의 발생 등 차량의 현 상태를 감지할 수 있다.
차량용 블랙박스(200)는 차량용 내비게이션(100)과 신호를 교환하여 차량의 사고 처리 과정 등에 필요한 데이터를 저장할 수 있다. 예를 들어, 차량의 운행 중에 사고가 발생한 경우에, 차량용 블랙박스(200)에서 획득하여 저장한 영상 데이터를 분석하여 사고의 경위 및 과실의 정도를 판단하는데 사용할 수 있다. 또한, 차량용 내비게이션(100)과 연결되어 있는 차량용 블랙박스(200)는, 차량용 내비게이션(100)에 저장되어 있는 각종 데이터를 활용할 수 있다. 예를 들어, 차량용 블랙박스(200)에서 획득한 영상을 차량용 내비게이션(100)에 저장된 맵(map) 데이터에 매칭시켜 차량용 블랙박스(200)의 효용성을 증대시킬 수 있음을 의미한다.
차량용 블랙박스(200)는 주행 중 및 정차 중에 차량의 데이터를 획득할 수 있다. 즉, 차량의 주행 중의 영상을 촬영할 수 있음은 물론, 차량이 정차하여 있는 경우에도 영상을 촬영할 수 있다. 차량용 블랙박스(200)를 통하여 획득된 영상의 화질은, 일정하거나 변화될 수 있다. 예를 들어, 사고의 발생을 전후하여서는 영상의 화질을 높게 하고, 통상적인 경우에는 영상의 화질을 낮게 함으로써 요구되는 저장공간을 최소화하면서도 핵심적인 영상을 저장할 수 있다.
차량용 블랙박스(200)는 블랙박스 카메라(222)와, 블랙박스 마이크(224)와, 부착부(281)를 포함할 수 있다.
블랙박스 카메라(222)는 차량의 외부 또는 실내를 촬영할 수 있다. 또한, 블랙박스 카메라(222)는 단수개 또는 복수개 마련될 수 있다. 블랙박스 카메라(222)가 복수개인 경우에는, 1개는 차량용 블랙박스(200)와 일체화 되고 나머지는 차량의 각 부분에 부착된 상태에서 촬영한 영상을 차량용 블랙박스(200)로 송신할 수 있다. 블랙박스 카메라(222)가 단수개인 경우에, 블랙박스 카메라(222)는 차량의 전방을 촬영하도록 설치될 수 있다. 블랙박스 카메라(222)에서 촬영된 영상은, 차량용 블랙박스(200) 또는 차량용 내비게이션(100)에 저장될 수 있다.
블랙박스 마이크(224)는 차량 내외부에서 발생하는 사운드(sound)를 획득할 수 있다. 블랙박스 마이크(224)는, 전술한 내비게이션 마이크(195)와 유사한 기능을 수행할 수 있다.
부착부(281)는 차량용 블랙박스(200)를 차량에 고정되도록 할 수 있다. 부착부(281)는, 차량용 블랙박스(200)를 차량의 전면유리에 부착할 수 있는 흡착판이거나, 차량의 룸밀러 등에 결합할 수 있는 고정장치일 수 있다.
도 2는 본 발명의 다른 실시예에 따른 내비게이션 시스템의 도면으로서, 본 발명의 일 실시예와 다른 부분만을 설명하도록 한다.
본 발명의 다른 실시예에 따른 내비게이션 시스템(10)은, 차량용 내비게이션(100)과 차량용 블랙박스(200)가 무선으로 연결될 수 있다. 즉, 차량용 내비게이션(100)과 차량용 블랙박스(200)가 별도의 디바이스이며, 그 사이에 물리적인 연결장치가 없을 수 있음을 의미한다. 차량용 내비게이션(100)과 차량용 블랙박스(200)는, 블루투스(Bluetooth), RFID(Radio Frequency Idntification), 적외선 통신(IrDA, Infraed Data Association), UWB(Ultra WidBand), ZigBee 등을 통하여 통신할 수 있다.
도 3은 도 1에 도시한 차량용 내비게이션의 블록 구성도이다.
이에 도시한 바와 같이, 본 발명의 일 실시예에 따른 차량용 내비게이션(100)은 제 1통신부(100)와, 입력부(120)와, 제 1센싱부(130)와, 출력부(140)와, 제1 저장부(150)와, 전원부(160)와, 제1 제어부(170)를 포함할 수 있다.
제 1통신부(100)는 차량용 내비게이션(100)이 다른 디바이스와 통신하기 위하여 마련될 수 있다. 제 1통신부(100)는, 위치 데이터 모듈(111)과, 무선 인터넷 모듈(113)과, 방송 송d위치 데이터 모듈(111)은 GNSS(Global Navigation Satellite System)를 통하여 위치 데이터를 획득하는 장치이다. GNSS는 인공위성(도 5의 20)으로부터 수신한 전파신호를 이용하여 수신 단말기의 위치를 산출할 수 있는 항법 시스템을 의미한다. GNSS의 구체적인 예로는, 그 운영 주체에 따라서 GPS(Global Positioning System), Galileo, GLONASS(Global Orbiting Navigational Satellite System), COMPASS, IRNSS(Indian Regional Navigational Satellite System), QZSS(Quasi-Zenith Satellite System) 등 일 수 있다. 본 발명의 일 실시예에 따른 차량용 내비게이션(100)의 위치 데이터 모듈(111)은, 차량용 내비게이션(100)이 사용되는 지역에서 서비스하는 GNSS 신호를 수신하여 위치 데이터를 획득할 수 있다.
무선 인터넷 모듈(113)은 무선 인터넷에 접속하여 데이터를 획득하거나 송신하는 장치이다. 무선 인터넷 모듈(113)을 통하여 접속할 수 있는 무선 인터넷은, WLAN(Wireless LAN), Wibro(Wireless broadband), Wimax(World interoperability for microwave acess), HSDPA(High Speed Downlink Packet Acess) 등 일 수 있다.
방송 송수신 모듈(115)은 각종 방송 시스템을 통하여 방송 신호를 송수신하는 장치이다. 방송 송수신 모듈(115)을 통하여 송수신할 수 있는 방송 시스템은, DMBT(Digital Multimedia Broadcasting Terrestrial), DMBS(Digital Multimedia Broadcasting Satellite), MediaFLO(Media Foeward Link Only), DVBH(Digital Video Broadcast Handheld), ISDBT(Integrated Services Digital Broadcast Tereestrial) 등일 수 있다. 방송 송수신 모듈(115)을 통하여 송수신되는 방송 신호에는 교통데이터, 생활데이터 등을 포함할 수 있다.
근거리 통신 모듈(117)은 근거리 통신을 위한 장치이다. 근거리 통신 모듈(117)은, 전술한 바와 같이, 블루투스(Bluetooth), RFID(Radio Frequency Idntification), 적외선 통신(IrDA, Infraed Data Association), UWB(Ultra WidBand), ZigBee 등을 통하여 통신할 수 있다.
제1 유선 통신 모듈(119)은 차량용 내비게이션(100)을 다른 디바이스와 유선으로 연결할 수 있는 인터페이스 장치이다. 제1 유선 통신 모듈(119)은, USB Port를 통하여 통신할 수 있는 USB 모듈일 수 있다. 본 발명의 일 실시예 및 다른 실시예에 따른 차량용 내비게이션(100)은, 필요에 따라서 근거리 통신 모듈(117) 또는 제1 유선 통신 모듈(119)을 통하여 다른 디바이스와 통신할 수 있다. 나아가, 복수의 디바이스와 통신하는 경우에, 어느 하나는 근거리 통신 모듈(117)로 통신하고, 다른 하나는 제1 유선 통신 모듈(119)을 통하여 통신하는 경우도 가능하다.
입력부(120)는 차량용 내비게이션(100)의 외부로부터의 물리적 입력을 특정한 전기 신호로 변환하는 장치이다. 입력부(120)는 사용자 입력 모듈(121)과, 제1 마이크 모듈(123)을 포함할 수 있다.
사용자 입력 모듈(121)은 사용자가 푸쉬동작 등을 통하여 입력할 수 있는 키입력 장치이다. 사용자 입력 모듈(121)은 차량용 내비게이션(100)의 하우징(도 1의 191) 외부에 내비게이션 조작키(도 1의 193)로 구현될 수 있다.
제1 마이크 모듈(123)은 사용자의 음성 및 차량의 내외부에서 발생한 음향을 수신하는 장치이다. 제1 마이크 모듈(123)은 차량용 내비게이션(100)의 하우징(도 1의 191) 외부에 내비게이션 마이크(195)로 구현될 수 있다.
제1 센싱부(130)는 차량용 내비게이션(100)의 현재 상태를 감지할 수 있는 장치이다. 제1 센싱부(130)는 제1 모션 센싱 모듈(131)과, 광 센싱 모듈(133)을 포함할 수 있다.
제1 모션 센싱 모듈(131)은 차량용 내비게이션(100)의 3차원 공간 상에서의 운동을 감지할 수 있다. 제1 모션 센싱 모듈(131)은, 3축 지자기 센서 및 3축 가속도 센서를 포함할 수 있다. 제1 모션 센싱 모듈(131)을 통하여 획득한 운동 데이터를 위치 데이터 모듈(111)을 통하여 획득한 위치 데이터와 결합하여, 차량용 내비게이션(100)을 부착한 차량의 보다 정확한 궤적을 산출할 수 있다.
광 센싱 모듈(133)은 차량용 내비게이션(100)의 주변 조도(illuminance)를 측정하는 장치이다. 광 센싱 모듈(133)을 통하여 획득한 조도데이터를 이용하여, 디스플레이부(145)의 밝기를 주변 밝기에 대응되도록 변화시킬 수 있다.
출력부(140)는 차량용 내비게이션(100)이 데이터를 출력하는 장치이다. 출력부(140)는 디스플레이 모듈(141)과, 오디오 출력 모듈(143)을 포함할 수 있다.
디스플레이 모듈(141)은 차량용 내비게이션(100)이 시각적으로 인식될 수 있는 데이터를 출력하는 장치이다. 디스플레이 모듈(141)은, 차량용 내비게이션(100)의 하우징(도 1의 191) 전면(前面)에 마련된 디스플레이부(도 1의 145)로 구현될 수 있다. 한편, 디스플레이 모듈(141)이 터치스크린인 경우라면, 데이터의 출력부(140)인 동시에 입력부(120)의 역할을 동시에 할 수 있음은 전술한 바와 같다.
오디오 출력 모듈(143)은 차량용 내비게이션(100)이 청각적으로 인식될 수 있는 데이터를 출력하는 장치이다. 오디오 출력 모듈(143)은, 차량용 내비게이션(100)이 운전자를 포함하는 사용자에게 알려야 할 데이터를 소리를 표현하는 스피커로 구현될 수 있다.
제1 저장부(150)는 차량용 내비게이션(100)의 동작에 필요한 데이터 및 동작에 의하여 생성된 데이터를 저장하는 장치이다. 제1 저장부(150)는 차량용 내비게이션(100)의 내부에 내장된 메모리이거나, 탈착 가능한 메모리일 수 있다. 차량용 내비게이션(100)의 동작에 필요한 데이터는, OS, 경로 탐색 어플리케이션, 맵(map) 등을 포함할 수 있다. 또한 차량용 내비게이션(100)의 동작에 의하여 생성된 데이터는, 탐색된 경로 데이터, 수신한 영상 등일 수 있다.
전원부(160)는 차량용 내비게이션(100)의 동작 또는 차량용 내비게이션(100)과 연결된 다른 디바이스의 동작을 위하여 필요한 전원을 공급하는 장치이다. 전원부(160)는, 차량용 내비게이션(100)에 내장된 배터리 또는 차량 등의 외부전원에서 전원을 공급받는 장치일 수 있다. 또한, 전원부(160)는, 전원을 공급받는 형태에 따라서 제1 유선 통신 모듈(119)로 구현되거나, 무선으로 공급받는 장치로 구현될 수도 있다.
제1 제어부(170)는 차량용 내비게이션(100)의 각종 동작을 제어하는 제어신호를 출력하는 장치이다. 나아가, 제1 제어부(170)는 차량용 내비게이션(100)에 연결된 다른 디바이스를 제어하는 제어신호를 출력할 수도 있다.
도 4는 도 1에 도시한 차량용 블랙박스의 블록 구성도이다.
이에 도시한 바와 같이, 본 발명의 일 실시예에 따른 차량용 블랙박스(200)는 제2 통신부(210)와, AV 입력부(220)와, 사용자 입력부(230)와, 제2 센싱부(240)와, 제2 저장부(250)를 포함할 수 있다.
제2 통신부(210)는 차량용 내비게이션(도 3의 100)의 제1 통신부(110) 또는 다른 디바이스와 통신할 수 있는 장치이다. 제2 통신부(210)는 제2 근거리 통신 모듈(211)과, 제2 유선 통신 모듈(213)을 포함할 수 있다. 제2 근거리 통신 모듈(211)은 제1 근거리 통신 모듈(도 3의 117)과 통신할 수 있으며, 제2 유선 통신 모듈(213)은 제1 유선 통신 모듈(119)과 통신할 수 있다.
AV 입력부(220)는 사운드 및 영상을 획득할 수 있는 장치이다. AV 입력부(220)는 카메라 모듈(221)과 제2 마이크 모듈(223)을 포함할 수 있다.
카메라 모듈(221)은 차량용 블랙박스(200)가 장착된 차량의 내, 외부의 영상을 획득할 수 있다. 카메라 모듈(221)이 블랙박스 카메라(도 1의 222)로 구현될 수 있음은, 전술한 바와 같다.
제2 마이크 모듈(223)은 차량의 내외부에서 발생하는 사운드를 획득할 수 있다. 제2 마이크 모듈(223)을 통하여 획득한 사운드는, 차량용 블랙박스(200)의 동작의 제어에 사용할 수 있다. 예를 들어, 제2 마이크 모듈(223)을 통하여 평소보다 강한 사운드를 수신한 경우에는, 카메라 모듈(221)이 보다 해상도 높은 화상을 획득하도록 할 수 있다. 제2 마이크 모듈(223)은 블랙박스 마이크(224)로 구현될 수 있다.
사용자 입력부(230)는 사용자가 차량용 블랙박스(200)의 동작을 직접 조작할 수 있도록 마련된 장치이다. 사용자 입력부(230)는 차량용 블랙박스(200)의 외부에 마련된 푸쉬버튼(미도시)으로 구현될 수 있다. 다만, 차량용 내비게이션(도 3의 100)의 제1 제어부(도 3의 170)의 제어신호에 의하여 차량용 블랙박스(200)가 제어되는 경우라면, 사용자 입력부(230)는 차량용 블랙박스(200)에서 제외될 수도 있다.
제2 센싱부(240)는 차량용 블랙박스(200)의 현재 상태를 감지할 수 있는 장치이다. 제2 센싱부(240)는 제2 모션 센싱 모듈(241)을 포함할 수 있으며, 설치된 위치를 제외한다면 제1 모션 센싱 모듈(도 3의 131)과 유사한 동작을 수행한다. 제2 센싱부(240)가 차량용 블랙박스(200)에 마련된 경우라면, 차량용 내비게이션(100)으로부터 3차원 공간의 운동과 관련된 데이터를 수신하지 않을 수 있다.
제2 저장부(250)는 차량용 블랙박스(200)의 동작에 필요한 데이터 및 동작에 의하여 생성된 데이터를 저장하는 장치이다. 제2 저장부(250)에 저장되는 데이터는, 카메라 모듈(221)을 통하여 획득한 영상일 수 있다. 제2 저장부(250)는 차량용 블랙박스(200)에 내장되거나, 차량용 블랙박스(200)에 착탈 가능한 메모리일 수 있다.
제2 제어부(270)는 차량용 블랙박스(200)의 각종 동작을 제어하는 제어신호를 출력하는 장치이다. 제2 제어부(270)는 차량용 내비게이션(도 3의 100)의 제1 제어부(도 3의 170)의 제어신호에 영향 받을 수 있다. 즉, 제2 제어부(270)는 제1 제어부(도 3의 170)에 종속적일 수 있음을 의미한다.
도 5는 도 1에 도시한 내비게이션 시스템을 포함하는 통신망의 구성도이다.
이에 도시한 바와 같이, 본 발명의 일 실시예에 따른 내비게이션 시스템(10)은 다양한 통신망 및 다른 전자 디바이스(61 내지 64)와 접속할 수 있다.
내비게이션 시스템(10)은, 인공위성(20)으로부터 수신한 전파신호를 사용하여 현재의 위치를 산출할 수 있다. 각각의 인공위성(20)은 주파수 대역이 상이한 L밴드 주파수를 송신할 수 있다. 내비게이션 시스템(10)은, 각각의 인공위성(20)에서 송신된 L밴드 주파수가 내비게이션 시스템(10)에 도달하는데 까지 소요된 시간에 기초하여 현재 위치를 산출할 수 있다.
내비게이션 시스템(10)은, 제1 통신부(도 3의 110)을 통하여 제어국(40, ACR), 기지국(50, RAS) 등을 통하여 네트워크(30)에 무선으로 접속할 수 있다. 네트워크(30)에 내비게이션 시스템(10)이 접속하면, 네트워크(30)에 접속한 전자 디바이스(61, 62)와도 간접적으로 접속하여 데이터를 교환할 수 있다.
내비게이션 시스템(10)은, 통신 기능을 가진 다른 디바이스(63)를 통하여 간접적으로 네트워크(30)에 접속할 수도 있다. 예를 들어, 네트워크(30)에 접속할 수 있는 장치가 내비게이션 시스템(10)에 마련되지 않은 경우에, 제1 근거리 통신 모듈(도 3의 117) 등을 통하여 통신 기능을 가진 다른 디바이스(63)와 통신할 수 있음을 의미한다.
이하, 본 발명에 따른 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법에 대해 상세히 설명하면 다음과 같다.
우선, 상기 차량용 내비게이션(100)의 제1 제어부(170)와, 상기 차량용 블랙박스(200)의 제2 제어부(270)는, 근거리 통신 모듈 또는 유선 통신 모듈을 통해 인터페이스 동작을 수행하게 된다.
또한, 상기 차량용 내비게이션의 제1 제어부(170)에서는, 상기 디스플레이 모듈(141)을 동작 제어하여, 차량용 내비게이션(100)과 차량용 블랙박스(200)에서 지원 가능한 사용자 선택 메뉴들을, 도 6에 도시한 바와 같이, 리스트(LIST) 형태로 표시하게 된다.
한편, 상기 리스트에는, 사진 앨범, 비디오, 노래방, 블랙박스 라이브 뷰, 블랙박스 비디오 플레이어, 블랙박스 환경설정 등과 같은 다양한 사용자 선택 메뉴들을 표시하게 되는 데, 예를 들어, 상기 블랙박스 환경설정의 메뉴 항목이 선택되면, 블랙박스 컨트롤 어플리케이션 프로그램(Black Box Control APP)을 실행시킴과 아울러, 기본설정, 이벤트 설정, 가속도 센서 감도 설정, 자가진단, 영상 설정, 파일 백업 안내, 설정값 초기화, 저장장치 포맷 등과 같은 서브 메뉴 항목들을 표시하게 된다.
그리고, 예를 들어, 도 6의 기본설정의 서브 메뉴 항목이 선택되면, 도 7에 도시한 바와 같이, 블랙박스의 녹화 화질을 보통 화질, 중급 화질, 고급 화질 중 어느 하나를 선택하기 위한 메뉴 항목들을 표시함과 아울러, 영상파일 자동 삭제와, 가변 프레임, 소리 녹음 등의 사용 여부를 선택할 수 있는 메뉴 항목들을 표시하게 된다.
한편, 예를 들어, 도 6의 영상 설정의 서브 메뉴 항목이 선택되면, 도 8에 도시한 바와 같이, 명암, 밝기, 선명도, 색농도, 색상 등을 조절할 수 있는 메뉴 항목들이 표시되는 데, 이때, 상기 차량용 블랙박스의 카메라 모듈(221)에 의해 촬영되는 영상이, 상기 메뉴 화면의 일부분에 표시되어, 사용자가, 상기 영상을 보면서, 명암, 밝기 등을 적절히 조절하게 된다.
또한, 예를 들어, 도 6의 가속도 센서 감도 설정의 서브 메뉴 항목이 선택되면, 도 9에 도시한 바와 같이, 가속도 센서의 감도를 민감, 보통, 둔감, 그리고 사용자 설정 등으로 조절할 수 있는 메뉴 항목들이 표시되는 데, 이때, 상기 사용자 설정의 메뉴 항목이 선택되면, 가속도 센서의 감도를 사용자가 임의로 업/다운시킬 수 있도록 하기 위한 조절 버튼(+/-)과, 바(Bar) 형태의 인디케이터(Indicator)가 표시됨과 아울러, 가속도 센서 인디케이터에 대한 보기 또는 숨기기 메뉴 항목이 표시된다.
그리고, 예를 들어, 도 6의 이벤트 설정의 서브 메뉴 항목이 선택되면, 도 10에 도시한 바와 같이, 이벤트 사용자 설정과 이벤트 상세 설명의 메뉴 항목들이 표시되는 데, 상기 이벤트 사용자 설정에 해당하는 메뉴 항목에는, 충격, 과속, 급감속, 급가속, 외부 소음 등의 메뉴 항목들이 표시되며, 과속 속도 설정, 급가속 민감도 설정, 외부 소음 민감도 설정 등을 사용자가 임의로 조절할 수 있도록 하기 위한 조절 버튼(+/-) 등이 표시된다.
한편, 상기 이벤트 설정 메뉴 화면에서, 이벤트 상세 설명의 메뉴 항목을 선택하게 되면, 도 10에 도시한 바와 같이, 충격, 과속, 급감속, 급가속, 외부 소음 등에 의한 이벤트가 발생하였을 때, 차량용 블랙박스의 제2 저장부(250)에 영상이 녹화된다는 것을 안내하는 메시지가 표시된다.
그리고, 상기와 같은 일련의 과정을 통해, 사용자가 이벤트 설정 동작을 정상적으로 수행하게 되면, 상기 차량용 내비게이션의 제1 제어부(170)에서는, 상기 차량용 블랙박스의 제2 제어부(270)로, 상기 설정 값들을 전송하거나, 또는 서로 공유하게 된다.
한편, 상기 차량용 블랙박스의 제2 제어부(270)에서는, 상기와 같이 설정된 이벤트 설정 값들을 참조하여, 상기 카메라 모듈(221)에 의해 촬영되는 영상의 화질, 해상도, 프레임 수 등을 가변 조절하여, 상기 저장부(250)에 녹화하게 된다.
예를 들어, 터널(Tunnel) 통과 직후, 또는 혼잡한 도로 구간 진입, 또는 스키드 마크(Skid Mark) 발생 등과 같은 특수 상황에서 이벤트(Event)가 발생하면, 상기 저장부(250)에 녹화되는 영상의 화질, 해상도, 그리고 프레임 수 중, 적어도 어느 하나 이상을 증가시켜 녹화하고, 상기 이벤트가 해제되면, 이전에 설정된 영상의 화질, 해상도, 그리고 프레임 수 등으로 재조정하여 녹화하게 된다.
또한, 상기 차량용 블랙박스의 제2 제어부(270)에서는, 상기와 같이 특수 상황에서 이벤트가 발생하면, 차량용 내비게이션의 제1 마이크 모듈(123)과 차량용 블랙박스의 제2 마이크 모듈(223) 중 적어도 어느 하나 이상을 통해 수신되는 마이크 음성을, 상기 영상과 함께 녹화하게 된다.
그리고, 상기 차량용 블랙박스의 제2 제어부(270)에서는, 상기와 같이 특수 상황에서 이벤트가 발생하면, 차량용 내비게이션의 위치 데이터 모듈(111)과 제1 저장부(150)를 통해 출력되는 위치 및 지도 데이터를, 상기 영상과 함께 녹화하게 되는 데, 상기 이벤트는, 상기 차량용 내비게이션의 제1 제어부(170)에서 검출된 후, 상기 제2 제어부(270)로 전송될 수 있다.
도 11은, 본 발명에 따른 차량용 블랙박스에서의 영상 녹화 제어 장치에 대한 실시예의 구성을 도시한 것으로, 예를 들어, 상기 차량용 블랙박스의 제어부(270)에는, 비디오 엔코더(271), 오디오 엔코더(272), 데이터 엔코더(273), 이벤트 검출기(274), 컨트롤러(275), 그리고 먹스(276) 등이 포함 구성될 수 있다.
한편, 상기 비디오 엔코더(271)에서는, 상기 컨트롤러(275)의 동작 제어에 따라, 상기 카메라 모듈(221)에 의해 촬영되는 영상의 화질(Quality), 해상도(Resolution), 그리고 프레임 수(FPS: Frame Per Second) 중 어느 하나 이상을 가변 조절함과 아울러, 상기 제2 저장부(250)에 적합한 포맷의 비디오 데이터로 엔코딩하게 되는 데, 상기 비디오 엔코더(271)는, 상기 카메라 모듈(221) 내에 포함 구성될 수도 있다.
그리고, 상기 오디오 엔코더(272)에서는, 상기 컨트롤러(275)의 동작 제어에 따라, 상기 제2 마이크 모듈(223)에 의해 출력되는 마이크 음성을, 상기 제2 저장부(250)에 적합한 포맷의 오디오 데이터로 엔코딩하게 되는 데, 상기 오디오 엔코더(272)는, 상기 제2 마이크 모듈(223) 내에 포함 구성될 수도 있으며, 또한, 상기 오디오 엔코더(272)에는, 차량용 내비게이션의 제1 마이크 모듈(123)에 의해 출력되는 마이크 음성을, 상기 제2 저장부(250)에 적합한 포맷의 오디오 데이터로 엔코딩할 수도 있다.
또한, 상기 데이터 엔코더(273)에서는, 상기 컨트롤러(275)의 동작 제어에 따라, 상기 차량용 내비게이션의 위치 데이터 모듈(111)과 제1 저장부(150)에서 출력되는 위치 및 지도 데이터를, 상기 제2 저장부(250)에 적합한 포맷의 데이터로 엔코딩하게 되는 데, 상기 데이터 엔코더(273)는, 예를 들어, 상기 차량용 내비게이션의 위치 데이터 모듈(111) 내에 포함 구성될 수도 있다.
그리고, 상기 이벤트 검출기(274)에서는, 예를 들어, 카메라 영상, 마이크 입력 오디오, 위치 및 지도 데이터, 그리고, 센서 데이터 중 적어도 어느 하나 이상을 분석하여, 터널 통과 직후, 또는 혼잡한 도로 구간 진입, 또는 스키드 마크 발생 등과 같은 특수 상황임을 알리는 이벤트(Event)를 검출하게 되는 데, 상기 이벤트 검출기(274)는, 차량용 내비게이션(100) 내에 포함 구성될 수 있으며, 이 경우, 상기 컨트롤러(275)는, 상기 차량용 내비게이션의 제1 제어부(170)와 인터페이스를 수행하여, 상기 이벤트를 획득할 수도 있다.
한편, 상기 이벤트 검출기(274)는, 도 4를 참조로 전술한 바와 같이, 상기 제2 모션 센싱 모듈(241)에 포함 구성된 3축 지자기 센서와 3축 가속도 센서에 의해 검출되는 가속도 값(Va)이, 사전에서 설정된 기준 값(Ref_Va)을 초과하는 경우, 급가속 또는 급감속으로 판단하여, 차량 충돌 상황을 알리는 이벤트를 발생시키게 되는 데, 상기 기준 값(Ref_Va)은, 예를 들어, 도 10을 참조로 전술한 바와 같이, 사용자에 의해 조절된 임의의 값으로 설정되거나, 차량용 블랙박스 제조시, 실험 결과에 의해 설정된 디폴트(Default) 값으로 설정될 수 있다.
또한, 상기 이벤트 검출기(274)에서는, 예를 들어, 카메라 영상의 휘도 레벨(Y Level)을 분석하여, 차량의 터널 통과 직후에 해당하는 특수 상황의 이벤트를 검출하게 되는 데, 예를 들어, 도 12에 도시한 바와 같이, 차량이 터널에 진입하게 되면, 카메라 영상의 휘도 레벨이, 사전에 설정된 기준 휘도 레벨(Y_Ref)보다 급격히 낮게 검출된다.
그리고, 소정 시간(예: 3초) 이상 경과한 후, 차량이 터널을 통과하게 되면, 카메라 영상의 휘도 레벨이, 사전에 설정된 기준 휘도 레벨 보다 급격히 높아지게 되므로, 상기 이벤트 검출기(274)에서는, 상기와 같이 급격히 변화되는 카메라 영상의 휘도 레벨을 분석하여, 차량이 터널을 통과한 직후에 해당하는 특수 상황의 이벤트를 검출하게 된다.
또한, 상기 이벤트 검출기(274)에서는, 마이크를 통해 입력되는 오디오의 신호 레벨(Audio Level)을 분석하여, 차량이 혼잡한 도로 구간에 진입한 특수 상황의 이벤트를 검출하게 되는 데, 예를 들어, 도 13에 도시한 바와 같이, 차량이 한적한 도로 구간을 주행하게 되면, 마이크를 통해 입력되는 오디오의 신호 레벨이 사전에 설정된 기준 오디오 레벨(A_Ref)을 초과하지 않거나, 또는 초과하더라도, 소정 시간(예: T_Ref=3초) 이상 계속 유지되지 않는다.
반면, 차량이 교차로 등과 같이 소음이 많이 발생하는 혼잡한 도로 구간에 진입하게 되면, 도 13에 도시한 바와 같이, 마이크를 통해 입력되는 오디오의 신호 레벨이, 사전에 설정된 기준 오디오 레벨을 초과함과 아울러, 소정 시간(T_Ref) 이상 계속 초과한 상태를 유지하게 되므로, 상기 이벤트 검출기(174)에서는, 상기와 같이 마이크를 통해 입력되는 오디오의 신호 레벨을 분석하여, 차량이 혼잡한 도로 구간에 진입한 특수 상황의 이벤트를 검출하게 된다.
그리고, 상기 이벤트 검출기(274)에서는, 마이크를 통해 입력되는 오디오의 주파수 패턴(Frequency Pattern)을 분석하여, 차량의 급정차로 인해 스키드 마크(Skid Mark)가 발생한 특수 상황의 이벤트를 검출하게 되는 데, 예를 들어, 도 14에 도시한 바와 같이, 차량의 급정차로 인해 스키드 마크가 발생하는 상황이 되면, 마이크를 통해 입력되는 오디오의 신호 레벨이 사전에 설정된 기준 오디오 레벨(A_Ref)을 급격히 초과함과 아울러, 급정차에 따른 특정 주파수 패턴의 오디오 신호가 검출된다.
예를 들어, 상기 특정 주파수 패턴은, 차량의 급브레이크 성능 실험 등을 통해, 사전에 미리 저장되는 실험 결과 값으로서, 플래시(Flash) 메모리 또는 이이피롬(EEPROM) 등과 같은 비휘발성 메모리(미도시)에 저장될 수 있다.
그리고, 상기 이벤트 검출기(274)에서는, 예를 들어, 도 14에 도시한 바와 같이, 급정차시 발생하는 굉음에 해당하는 고주파 성분의 특정 주파수 패턴(예: Skid Mark Audio Frequency Pattern)이 미리 저장된 상태에서, 상기 특정 주파수 페턴과 일치하는 오디오 신호의 주파수 패턴이 검출되면, 차량의 급정차로 인해 스키드 마크가 발생한 특수 상황의 이벤트를 검출하게 된다.
한편, 상기 컨트롤러(275)에서는, 상기와 같이 다양한 검출 과정을 통해, 터널 통과 직후, 또는 혼잡한 도로 구간 진입, 또는 스키드 마크 발생 등과 같은 특수 상황의 이벤트가 검출되면, 상기 비디오 엔코더(271)를 동작 제어하게 되는 데, 예를 들어, 도 15에 도시한 바와 같이, 상기 비디오 엔코더(271)에서는, 카메라 영상의 화질(Quality)을 일반(Normal) 화질에서 고(High) 화질로 증가시키거나, 카메라 영상의 해상도(Resolution)를 일반 해상도(예: m x n)에서, 고해상도(예: (m+y) x (n+z)로 증가시키거나, 초 당 프레임 수(FPS)를 사전에 설정된 프레임 수(예: n)에서 더 높은 프레임 수(예: n+m)로 증가시키게 된다.
또한, 상기 컨트롤러(275)에서는, 상기와 같이 터널 통과 직후, 또는 혼잡한 도로 구간 진입, 또는 스키드 마크 발생 등과 같은 특수 상황의 이벤트가 검출되면, 상기 오디오 엔코더(272)를 동작 제어하여, 상기 제2 마이크 모듈(223), 또는 차량용 내비게이션의 제1 마이크 모듈(123)을 통해 수신되는 마이크 음성 신호를, 상기 저장부(250)에 기록하기 적합한 포맷의 오디오 데이터로 엔코딩하게 된다.
그리고, 상기 컨트롤러(275)에서는, 상기 데이터 엔코더(273)를 동작 제어하여, 상기 차량용 내비게이션의 위치 데이터 모듈(111)과 제1 저장부(150)에서 출력되는 위치 및 지도 데이터를, 상기 저장부(250)에 기록하기 적합한 포맷의 데이터로 엔코딩하게 된다.
한편, 상기 비디오 엔코더(271)와 오디오 엔코더(272), 그리고 데이터 엔코더(273)는, 상기 컨트롤러(275)에 의해 동시에 동작 제어되어, 엔코딩 동작을 각각 수행하거나, 또는 상기 컨트롤러(275)에 의해 일부만이 동작 제어될 수도 있는 데, 예를 들어, 상기 먹스(276)에서는, 상기 비디오 엔코더(271)와 오디오 엔코더(272), 그리고 데이터 엔코더(273)에서 엔코딩되어 출력되는 데이터를, 패킷(Packet) 단위로 먹싱하여, 비디오, 오디오, 데이터 패킷들이 다중화된 데이터 스트림(Data Stream)을, 상기 제2 저장부(250)로 출력하게 된다.
예를 들어, 도 16에 도시한 바와 같이, 이벤트가 발생되지 않은 경우, 상기 먹스(276)에서는, 일반 화질의 카메라 영상의 비디오 데이터를 패킷 단위로 출력하여, 상기 제2 저장부(250)에 녹화하게 된다.
반면, 상기 이벤트가 발생한 경우, 예를 들어, 상기 먹스(276)에서는, 고화질의 카메라 영상의 비디오 데이터와, 마이크 음성의 오디오 데이터, 그리고 위치 및 지도 데이터의 데이터를 패킷 단위로 먹싱하여, 상기 제2 저장부(250)에 녹화하게 된다.
그리고, 이후 상기 이벤트가 해제되는 경우, 상기 먹스(276)에서는, 일반 화질의 카메라 영상의 비디오 데이터를 패킷 단위로 출력하여, 상기 제2 저장부(250)에 녹화함으로써, 상기 제2 저장부(250)의 한정된 저장 용량을 보다 효율적으로 사용할 수 있게 된다.
또한, 터널 통과 직후, 또는 혼잡한 도로 구간 진입, 또는 스키드 마크 발생 등과 같은 특수 상황에서 촬영되는 카메라 영상과, 마이크 음성, 그리고 위치 및 지도 데이터들을 보다 다양하고 효율적으로 녹화 및 저장하여, 차량용 블랙박스의 감시 및 저장 성능을 향상시킬 수 있게 된다.
한편, 상기 컨트롤러(275)에서는, 예를 들어, 상기와 같은 특수 상황의 이벤트가 발생하게 되면, 상기 차량용 내비게이션의 제1 제어부(170)와의 인터페이스를 통해, 도 17에 도시한 바와 같이, 사고 발생 주의 등을 알리는 경고 메시지가, 상기 디스플레이 모듈(141)에 표시되도록 하거나, 또는 상기 오디오 출력 모듈(143)을 통해 경고음이 출력되도록 하여, 차량의 안전 운전을 자연스럽게 유도하게 된다.
본 발명은 기재된 실시예들에 한정되는 것이 아니고, 본 발명의 사상 및 범위를 벗어나지 않고 다양하게 수정 및 변형할 수 있음은 이 기술의 분야에서 통상의 지식을 가진 자에게 자명하다. 따라서, 그러한 수정예 또는 변형예들은 본 발명의 특허청구범위에 속한다 하여야 할 것이다.
10 : 내비게이션 시스템 20 : 인공위성
30 : 네트워크 40 : 제어국
50 : 기지국 100 : 차량용 내비게이션
110 : 제1 통신부 120 : 입력부
130 : 제1 센싱부 140 : 출력부
150 : 제1 저장부 160 : 전원부
170 : 제1 제어부 200 : 차량용 블랙박스
210 : 제2 통신부 220 : AV 입력부
230 : 사용자 입력부 240 : 제2 센싱부
250 : 제2 저장부 270 : 제2 제어부
271 : 비디오 엔코더 272 : 오디오 엔코더
273 : 데이터 엔코더 274 : 이벤트 검출기
275 : 컨트롤러 276 : 먹스

Claims (12)

  1. 전자 장치의 제어 방법에 있어서,
    차량용 블랙 박스의 환경 설정을 위한 환경 설정 메뉴를 표시하는 단계;
    상기 환경 설정 메뉴가 선택되면, 상기 블랙 박스의 녹화 화질을 설정하기 위한 서브 메뉴, 상기 블랙 박스에 포함된 가속된 센서의 감도를 설정하기 위한 서브 메뉴, 상기 블랙 박스의 음성 녹음 여부를 설정하기 위한 서브 메뉴를 표시하는 단계;
    상기 표시된 복수의 서브 메뉴 중 일 서브 메뉴가 선택되면, 선택된 서브 메뉴에 대응되는 환경 설정 화면을 표시하는 단계;
    상기 표시된 환경 설정 화면에서 상기 블랙 박스의 환경 설정을 위한 값들을 선택받는 단계; 및
    상기 전자 장치의 근거리 무선 통신 모듈은 상기 블랙 박스의 근거리 무선 통신 모듈과 근거리 무선 통신을 수행하여, 상기 선택받은 블랙 박스의 환경 설정을 위한 값들에 대응되는 데이터를 상기 블랙박스에 전송하는 단계;를 포함하고,
    비디오 플레이어 메뉴, 및 라이브 뷰 메뉴 중 적어도 하나를 표시하는 단계;
    상기 비디오 플레이어 메뉴가 선택되면, 상기 블랙 박스의 저장 장치에 기 저장된 촬영 영상을 상기 근거리 무선 통신을 이용하여 상기 블랙 박스로부터 수신하여 재생하는 단계; 및
    상기 라이브 뷰 메뉴가 선택되면, 상기 블랙 박스의 실시간 촬영 영상을 상기 근거리 무선 통신을 이용하여 상기 블랙 박스로부터 수신하여 재생하는 단계;를 더 포함하는 것을 특징으로 하는 제어 방법.
  2. 제1항에 있어서,
    상기 환경 설정 화면을 표시하는 단계는,
    상기 블랙 박스의 녹화 화질을 설정하기 위한 서브 메뉴가 선택되면, 복수의 화질 중 선택 가능한 UI(User Interface) 영역을 포함하는 환경 설정 화면을 표시하고,
    상기 블랙 박스의 음성 녹음 여부를 설정하기 위한 서브 메뉴가 선택되면, 음성 녹음 사용, 음성 녹음 미사용 중 선택 가능한 UI 영역을 포함하는 환경 설정 화면을 표시하며,
    상기 블랙 박스에 포함된 가속된 센서의 감도를 설정하기 위한 서브 메뉴가 선택되면, 가속도 센서의 감도를 업/다운 시킬 수 있는 UI 영역을 포함하는 환경 설정 화면을 표시하는 것을 특징으로 하는 제어 방법.
  3. 제1항에 있어서,
    상기 환경 설정 메뉴를 표시하는 단계는,
    상기 블랙 박스의 저장 장치 포맷을 위한 포맷 메뉴를 더 표시하는 것을 특징으로 하는 제어 방법.
  4. 제2항에 있어서,
    상기 가속도 센서의 감도를 업/다운 시킬 수 있는 UI 영역은,
    상기 가속도 센서의 감도를 나타내는 바(Bar) 형태의 인디케이터와 함께 표시되는 것을 특징으로 하는 제어 방법.
  5. 전자 장치에 있어서,
    근거리 무선 통신을 위한 근거리 무선 통신 모듈;
    상기 전자 장치에 대한 사용자 입력을 수신하는 입력부;
    차량용 블랙 박스의 환경 설정을 위한 환경 설정 메뉴를 표시하고, 상기 입력부를 통하여 환경 설정 메뉴가 선택되면, 상기 블랙 박스의 녹화 화질을 설정하기 위한 서브 메뉴, 상기 블랙 박스에 포함된 가속된 센서의 감도를 설정하기 위한 서브 메뉴, 상기 블랙 박스의 음성 녹음 여부를 설정하기 위한 서브 메뉴를 표시하고, 상기 입력부를 통하여 상기 표시된 복수의 서브 메뉴 중 일 서브 메뉴가 선택되면, 선택된 서브 메뉴에 대응되는 환경 설정 화면을 표시하는 디스플레이부; 및
    상기 근거리 무선 통신 모듈을 제어하여 상기 블랙 박스의 근거리 무선 통신 모듈과 근거리 무선 통신을 수행하도록 제어하고, 상기 표시된 환경 설정 화면에서 상기 블랙 박스의 환경 설정을 위한 값들이 상기 입력부를 통하여 선택되면, 상기 선택받은 블랙 박스의 환경 설정을 위한 값들에 대응되는 데이터를 상기 근거리 무선 통신을 이용하여 상기 블랙박스에 전송하는 제어부;를 포함하고,
    상기 디스플레이부는,
    비디오 플레이어 메뉴, 및 라이브 뷰 메뉴 중 적어도 하나를 표시하고,
    상기 비디오 플레이어 메뉴가 선택되면, 상기 블랙 박스의 저장 장치에 기 저장된 촬영 영상을 상기 근거리 무선 통신을 이용하여 상기 블랙 박스로부터 수신하여 재생하며,
    상기 라이브 뷰 메뉴가 선택되면, 상기 블랙 박스의 실시간 촬영 영상을 상기 근거리 무선 통신을 이용하여 상기 블랙 박스로부터 수신하여 재생하는 것을 특징으로 하는 전자 장치.
  6. 제5항에 있어서,
    상기 환경 설정 화면은,
    상기 블랙 박스의 녹화 화질을 설정하기 위한 서브 메뉴가 선택되면, 복수의 화질 중 선택 가능한 UI(User Interface) 영역을 포함하는 환경 설정 화면을 표시하고,
    상기 블랙 박스의 음성 녹음 여부를 설정하기 위한 서브 메뉴가 선택되면, 음성 녹음 사용, 음성 녹음 미사용 중 선택 가능한 UI 영역을 포함하는 환경 설정 화면을 표시하며,
    상기 블랙 박스에 포함된 가속된 센서의 감도를 설정하기 위한 서브 메뉴가 선택되면, 가속도 센서의 감도를 업/다운 시킬 수 있는 UI 영역을 포함하는 환경 설정 화면을 표시하는 것을 특징으로 하는 전자 장치.
  7. 제5항에 있어서,
    상기 디스플레이부는,
    상기 블랙 박스의 저장 장치 포맷을 위한 포맷 메뉴를 상기 환경 설정 메뉴와 함께 표시하는 것을 특징으로 하는 전자 장치.
  8. 제6항에 있어서,
    상기 가속도 센서의 감도를 업/다운 시킬 수 있는 UI 영역은,
    상기 가속도 센서의 감도를 나타내는 바(Bar) 형태의 인디케이터와 함께 표시되는 것을 특징으로 하는 전자 장치.
  9. 블랙 박스의 제어 방법에 있어서,
    상기 블랙 박스와 근거리 무선 통신 방식으로 연결된 전자 장치에서 상기 블랙 박스의 환경 설정을 수행하기 위한 값들이 선택되면, 선택된 값들에 대응되는 데이터를 상기 블랙 박스의 근거리 무선 통신 모듈을 이용하여 상기 전자 장치로부터 수신하는 단계; 및
    상기 수신된 데이터를 이용하여 상기 블랙 박스의 환경 설정을 수행하는 단계;를 포함하고,
    상기 환경 설정은,
    상기 블랙 박스의 녹화 화질 설정, 상기 블랙 박스에 포함된 가속도 센서의 감도 설정, 상기 블랙 박스의 음성 녹음 여부 설정 중 적어도 하나를 포함하며,
    상기 전자 장치에서 비디오 플레이어 메뉴가 선택되면, 상기 블랙 박스의 저장 장치에 기 저장된 촬영 영상을 상기 근거리 무선 통신을 이용하여 상기 전자 장치에 전송하는 단계; 및
    상기 전자 장치에서 라이브 뷰 메뉴가 선택되면, 상기 블랙 박스의 실시간 촬영 영상을 상기 근거리 무선 통신을 이용하여 상기 전자 장치에 전송하는 단계;를 더 포함하는 것을 특징으로 하는 제어 방법.
  10. 제9항에 있어서,
    상기 선택된 값은,
    상기 블랙 박스의 녹화 화질의 경우, 복수의 화질 중 하나이고,
    상기 블랙 박스의 음성 녹음 여부의 경우, 음성 녹음 사용, 음성 녹음 미사용 중 하나이며,
    상기 블랙 박스에 포함된 가속도 센서의 감도의 경우, 복수 개의 레벨로 분류된 감도 중 하나인 것을 특징으로 하는 제어 방법.
  11. 블랙 박스에 있어서,
    상기 블랙 박스와 근거리 무선 통신 방식으로 연결된 전자 장치에서 상기 블랙 박스의 환경 설정을 수행하기 위한 값들이 선택되면, 선택된 값들에 대응되는 데이터를 상기 전자 장치로부터 수신하는 근거리 무선 통신 모듈; 및
    상기 수신된 데이터를 이용하여 상기 블랙 박스의 환경 설정을 수행하는 제어부;를 포함하고,
    상기 환경 설정은,
    상기 블랙 박스의 녹화 화질 설정, 상기 블랙 박스에 포함된 가속도 센서의 감도 설정, 상기 블랙 박스의 음성 녹음 여부 설정 중 적어도 하나를 포함하며,
    상기 근거리 통신 모듈은,
    상기 전자 장치에서 비디오 플레이어 메뉴가 선택되면, 상기 블랙 박스의 저장부에 기 저장된 촬영 영상을 상기 근거리 무선 통신을 이용하여 상기 전자 장치에 전송하고,
    상기 전자 장치에서 라이브 뷰 메뉴가 선택되면, 상기 블랙 박스의 실시간 촬영 영상을 상기 근거리 무선 통신을 이용하여 상기 전자 장치에 전송하는 것을 특징으로 하는 블랙 박스.
  12. 제11항에 있어서,
    상기 선택된 값은,
    상기 블랙 박스의 녹화 화질의 경우, 복수의 화질 중 하나이고,
    상기 블랙 박스의 음성 녹음 여부의 경우, 음성 녹음 사용, 음성 녹음 미사용 중 하나이며,
    상기 블랙 박스에 포함된 가속도 센서의 감도의 경우, 복수 개의 레벨로 분류된 감도 중 하나인 것을 특징으로 하는 블랙 박스.

KR20110009217A 2011-01-31 2011-01-31 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법 KR101487173B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR20110009217A KR101487173B1 (ko) 2011-01-31 2011-01-31 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20110009217A KR101487173B1 (ko) 2011-01-31 2011-01-31 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020100006983A Division KR101059066B1 (ko) 2010-01-26 2010-01-26 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법

Related Child Applications (2)

Application Number Title Priority Date Filing Date
KR1020140017982A Division KR20140028097A (ko) 2014-02-17 2014-02-17 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법
KR1020140128194A Division KR101616997B1 (ko) 2014-09-25 2014-09-25 전자 장치, 블랙 박스, 및 그들의 제어 방법

Publications (2)

Publication Number Publication Date
KR20110088467A KR20110088467A (ko) 2011-08-03
KR101487173B1 true KR101487173B1 (ko) 2015-01-30

Family

ID=44927000

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20110009217A KR101487173B1 (ko) 2011-01-31 2011-01-31 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101487173B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11202030B2 (en) 2018-12-03 2021-12-14 Bendix Commercial Vehicle Systems Llc System and method for providing complete event data from cross-referenced data memories

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101482620B1 (ko) * 2014-06-04 2015-01-14 김재완 영상 프레임을 이용한 보안 방법, 이를 실행하는 장치 및 이를 저장한 기록 매체

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100768942B1 (ko) * 2007-04-09 2007-10-19 삼정정보통신(주) 영상 처리 장치
KR20090063064A (ko) * 2008-06-05 2009-06-17 박노춘 차량 운행정보 기록장치 및 운용방법 및 프로그램을 기록한기록매체
KR20090096661A (ko) * 2009-05-14 2009-09-14 임용순 차량용 블랙박스 시스템
KR100936014B1 (ko) * 2008-04-02 2010-01-11 (주)에이직뱅크 카메라 일체형 차량용 영상기록 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100768942B1 (ko) * 2007-04-09 2007-10-19 삼정정보통신(주) 영상 처리 장치
KR100936014B1 (ko) * 2008-04-02 2010-01-11 (주)에이직뱅크 카메라 일체형 차량용 영상기록 장치
KR20090063064A (ko) * 2008-06-05 2009-06-17 박노춘 차량 운행정보 기록장치 및 운용방법 및 프로그램을 기록한기록매체
KR20090096661A (ko) * 2009-05-14 2009-09-14 임용순 차량용 블랙박스 시스템

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11202030B2 (en) 2018-12-03 2021-12-14 Bendix Commercial Vehicle Systems Llc System and method for providing complete event data from cross-referenced data memories

Also Published As

Publication number Publication date
KR20110088467A (ko) 2011-08-03

Similar Documents

Publication Publication Date Title
US8935045B2 (en) Apparatus and method for controlling video recording in black box for vehicle
EP2515079B1 (en) Navigation system and method for controlling vehicle navigation
KR101019915B1 (ko) 서버, 내비게이션 시스템, 차량용 내비게이션 및 차량용 내비게이션의 영상 제공 방법
KR20090105257A (ko) 카메라 일체형 차량용 영상기록 장치
KR101021438B1 (ko) 차량용 블랙박스 조정 장치 및 방법
US9702708B2 (en) Vehicle navigation system, method for controlling vehicle navigation system, and vehicle black box
KR101655751B1 (ko) 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법
KR101487173B1 (ko) 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법
KR101059066B1 (ko) 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법
KR20120078877A (ko) 전자 기기 및 전자 기기의 차선 이탈 경보 방법
KR20110088603A (ko) 내비게이션 시스템, 이에 연결된 서버, 및 차량용 내비게이션의 제어방법
KR101616997B1 (ko) 전자 장치, 블랙 박스, 및 그들의 제어 방법
KR101015371B1 (ko) 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법
KR100986592B1 (ko) 카메라 영상과 지도의 출력 장치 및 방법
KR20140028097A (ko) 차량용 블랙박스에서의 영상 녹화 제어 장치 및 방법
KR101055155B1 (ko) 내비게이션 시스템, 차량용 내비게이션 및 차량용 내비게이션의 경로 안내 방법
KR101912853B1 (ko) 전자 기기 및 전자 기기의 차선 안내 방법
KR101036119B1 (ko) 내비게이션 시스템, 및 차량용 내비게이션 시스템의 제어방법
KR102091017B1 (ko) 전자 기기 및 상기 전자 기기의 영상 촬영 방법
KR101003697B1 (ko) 모의 주행 영상의 재생 제어 장치 및 방법
KR20120079199A (ko) 전자 기기, 주행 기록 제공 시스템 및 그 방법
KR20070025769A (ko) 운전 중 디지털 멀티미디어 방송 시청을 제한하는 방법
KR20120071857A (ko) 전자 기기 및 상기 전자 기기의 영상 촬영 방법
KR102077553B1 (ko) 차량용 영상 처리 장치 및 데이터 처리 방법
KR20170086453A (ko) 전자기기 및 전자기기의 동작 방법

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
A302 Request for accelerated examination
AMND Amendment
A107 Divisional application of patent
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
A107 Divisional application of patent
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180119

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190121

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20200121

Year of fee payment: 6