KR20190093791A - 이벤트에 의한 데이터 레이블링 시스템 및 그 방법 - Google Patents

이벤트에 의한 데이터 레이블링 시스템 및 그 방법 Download PDF

Info

Publication number
KR20190093791A
KR20190093791A KR1020180005963A KR20180005963A KR20190093791A KR 20190093791 A KR20190093791 A KR 20190093791A KR 1020180005963 A KR1020180005963 A KR 1020180005963A KR 20180005963 A KR20180005963 A KR 20180005963A KR 20190093791 A KR20190093791 A KR 20190093791A
Authority
KR
South Korea
Prior art keywords
data
event
vehicle
labeling
labeled
Prior art date
Application number
KR1020180005963A
Other languages
English (en)
Other versions
KR102053713B1 (ko
Inventor
양진영
박재형
Original Assignee
(주)오펠솔루션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)오펠솔루션 filed Critical (주)오펠솔루션
Priority to KR1020180005963A priority Critical patent/KR102053713B1/ko
Publication of KR20190093791A publication Critical patent/KR20190093791A/ko
Application granted granted Critical
Publication of KR102053713B1 publication Critical patent/KR102053713B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0816—Indicating performance data, e.g. occurrence of a malfunction
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/18—Propelling the vehicle
    • B60W30/18009—Propelling the vehicle related to particular drive situations
    • B60W30/18163—Lane change; Overtaking manoeuvres
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841—Registering performance data
    • G07C5/085—Registering performance data using electronic data carriers
    • G07C5/0866—Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo or light sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/42—Image sensing, e.g. optical camera
    • B60W2550/10—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00—Input parameters relating to objects
    • B60W2554/40—Dynamic objects, e.g. animals, windblown objects

Abstract

본 발명은 이벤트에 따른 차량 상태 데이터 및 영상 데이터를 연관시켜 레이블링하는 데이터 레이블링 시스템 및 그 방법에 관한 것으로, 차량의 작동에 따른 차량 상태 데이터 및 상기 차량의 주변 환경에 대한 영상 데이터를 수집하는 데이터 수집부 및 지정된 이벤트에 기반하여 상기 차량 상태 데이터 및 상기 영상 데이터를 연관시켜 레이블링하며, 상기 이벤트에 의해 레이블링된 데이터 세트를 생성하는 레이블링부를 포함한다.

Description

이벤트에 의한 데이터 레이블링 시스템 및 그 방법{DATA LABELING SYSTEM BY EVENTS AND THE METHOD THEREOF}
본 발명은 이벤트에 의한 데이터 레이블링 시스템 및 그 방법에 관한 것으로, 보다 상세하게는 이벤트에 따른 차량 상태 데이터 및 영상 데이터를 연관시켜 레이블링하는 기술에 관한 것이다.
일반적으로 무인 자동차 즉, 자율 주행형 차량(self­driving vehicle)은 운전자(또는 차량 탑승자)의 조작 없이도 자동차 스스로 주행 환경을 인식하여 목표 지점까지 운행할 수 있는 기능을 구비한 차량을 의미한다.
높은 수준의 자율 주행 차량에서는 차량 탑승자의 운전 조작 및 전방 주시 의무로부터 자유로워지며, 자율 주행 중 차량 탑승자는 영화 감상, 독서, 인터넷 및 회의 등의 이동 수단이 아닌 하나의 생활 플랫폼의 연장으로 자유로운 활동이 가능해진다.
나아가, 이러한 자율 주행 차량을 학습시키기 위해서는 차량의 주행에 관련된 다양한 데이터가 필요하다. 차량의 좌회전에 대한 데이터를 예로 들면, 차량이 좌회전을 하는 경우의 도로 환경 및 상황과 좌회전 시, 차량의 방향 지시등, 기어포지션, 핸들 스티어링 및 속도 정보 등의 데이터가 요구된다.
다만, 기존의 종래 기술은 차량의 주행에 관련된 데이터를 수집하기 위해서, 차량에 부착된 카메라 또는 블랙박스로부터 수집되는 영상 데이터와 차량의 OBD 단자로부터 수집되는 OBD 데이터를 외부의 서버 또는 단말 기기로 전송하고, 방대한 양의 데이터 중 차량의 좌회전, 우회전 또는 회전 등 다양한 상황에서의 특정 이벤트에 대한 데이터를 분류하여 사용하였다. 이에 따라서, 종래 기술은 방대한 양의 데이터 송수신에 대한 한계가 존재하였으며, 필요한 특정 이벤트에 대한 데이터를 선별 및 분류하는 과정에서 많은 시간과 인력이 소모된다는 문제점이 존재하였다.
본 발명의 목적은 이벤트에 따른 영상 데이터 및 OBD 데이터를 연관시켜 레이블링함으로써, 특정 이벤트에 관련된 데이터 세트를 활용할 수 있는 기술을 제공하고자 한다.
또한, 본 발명의 목적은 차량의 차대번호(Vehicle Identification Number; VIN)에 따라 레이블링된 데이터 세트를 관리함으로써, 차량 종류 및 연식에 따른 레이블링된 데이터 세트를 활용할 수 있는 기술을 제공하고자 한다.
본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템은 차량의 작동에 따른 차량 상태 데이터 및 상기 차량의 주변 환경에 대한 영상 데이터를 수집하는 데이터 수집부 및 지정된 이벤트에 기반하여 상기 차량 상태 데이터 및 상기 영상 데이터를 연관시켜 레이블링하며, 상기 이벤트에 의해 레이블링된 데이터 세트를 생성하는 레이블링부를 포함한다.
상기 데이터 수집부는 상기 차량 내 카메라로부터 상기 영상 데이터를 수집하고, 상기 차량 내 OBD(On Board Diagnostics) 단자로부터 차량의 방향 지시등, 기어포지션, 속도 정보, 핸들 스티어링 및 가속/브레이크 페달 중 적어도 어느 하나 이상의 상기 차량 상태 데이터를 수집할 수 있다.
상기 레이블링부는 시간의 순서대로 수집되는 상기 차량 상태 데이터 및 상기 영상 데이터에서, 상기 지정된 이벤트에 의해 트리거링(triggering)되는 상기 차량 상태 데이터 및 상기 영상 데이터를 연관시켜 레이블링할 수 있다.
상기 레이블링부는 상기 이벤트가 발생되는 시작 시점부터 상기 이벤트가 종료되는 종료 시점까지의 상기 차량 상태 데이터 및 상기 영상 데이터를 연관시켜 상기 이벤트에 따라 레이블링하며, 시간의 순서로 레이블링된 상기 데이터 세트를 생성할 수 있다.
상기 이벤트는 차량의 출발, 좌회전, 우회전, 정지, 충격, 장애물 감지, 회전 및 차선변경 중 적어도 어느 하나일 수 있다.
또한, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템은 상기 이벤트에 대한 선택 입력을 수신하고, 상기 레이블링된 데이터 세트를 전송하는 제어부를 더 포함할 수 있다.
상기 제어부는 사용자 또는 외부 서버로부터 상기 이벤트에 대한 선택 입력을 수신하고, 상기 레이블링된 데이터 세트를 상기 사용자가 소지하는 모바일 디바이스 또는 상기 외부 서버로 전송하도록 제어할 수 있다.
상기 제어부는 상기 레이블링된 데이터 세트를 상기 이벤트에 따라 분류하여 저장할 수 있다.
본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템의 동작 방법에 있어서, 차량의 작동에 따른 차량 상태 데이터 및 상기 차량의 주변 환경에 대한 영상 데이터를 수집하는 단계 및 지정된 이벤트에 기반하여 상기 차량 상태 데이터 및 상기 영상 데이터를 연관시켜 레이블링하며, 상기 이벤트에 의해 레이블링된 데이터 세트를 생성하는 단계를 포함한다.
또한, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 방법은 상기 레이블링된 데이터 세트를 전송하는 단계를 더 포함할 수 있다.
상기 데이터를 수집하는 단계는 상기 차량 내 카메라로부터 상기 영상 데이터를 수집하고, 상기 차량 내 OBD(On Board Diagnostics) 단자로부터 차량의 방향 지시등, 기어포지션, 속도 정보, 핸들 스티어링 및 가속/브레이크 페달 중 적어도 어느 하나 이상의 상기 차량 상태 데이터를 수집할 수 있다.
상기 레이블링된 데이터 세트를 생성하는 단계는 시간의 순서대로 수집되는 상기 차량 상태 데이터 및 상기 영상 데이터에서, 상기 지정된 이벤트에 의해 트리거링(triggering)되는 상기 차량 상태 데이터 및 상기 영상 데이터를 연관시켜 레이블링할 수 있다.
상기 레이블링된 데이터 세트를 생성하는 단계는 상기 이벤트가 발생되는 시작 시점부터 상기 이벤트가 종료되는 종료 시점까지의 상기 차량 상태 데이터 및 상기 영상 데이터를 연관시켜 상기 이벤트에 따라 레이블링하며, 시간의 순서로 레이블링된 상기 데이터 세트를 생성할 수 있다.
본 발명의 실시예에 따르면, 이벤트에 따른 영상 데이터 및 OBD 데이터를 연관시켜 레이블링함으로써, 특정 이벤트에 관련된 데이터 세트를 활용할 수 있다.
또한, 본 발명의 실시예에 따르면, 차량의 차대번호(Vehicle Identification Number; VIN)에 따라 레이블링된 데이터 세트를 관리함으로써, 차량 종류 및 연식에 따른 레이블링된 데이터 세트를 활용할 수 있다.
도 1은 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템의 세부 구성에 대한 블록도를 도시한 것이다.
도 2는 본 발명의 실시예에 따른 레이블링의 예를 도시한 것이다.
도 3은 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템과 모바일 디바이스 및 외부 서버 간의 구성을 설명하기 위해 도시한 것이다.
도 4는 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템 및 외부 서버 간 동작 흐름도를 도시한 것이다.
도 5는 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 방법의 흐름도를 도시한 것이다.
이하, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 그러나 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. 또한, 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
또한, 본 명세서에서 사용되는 용어(terminology)들은 본 발명의 바람직한 실시예를 적절히 표현하기 위해 사용된 용어들로서, 이는 시청자, 운용자의 의도 또는 본 발명이 속하는 분야의 관례 등에 따라 달라질 수 있다. 따라서, 본 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
본 발명은 이벤트에 따라 영상 데이터 및 차량 상태 데이터를 연관시켜 레이블링(labeling)하며, 레이블링된 데이터 세트를 전송하는 데이터 레이블링 시스템 및 그 방법에 관한 기술로 차량의 출발, 좌회전, 우회전, 정지(또는 멈춤), 충격, 장애물 감지, 회전 및 차선변경 중 적어도 어느 하나 이상의 이벤트에 대한 데이터를 레이블링하는 기술을 제안한다.
이 때, 레이블링된 데이터 세트는 외부 서버, 사용자의 모바일 디바이스 또는 차량 내 단말 기기에 전송될 수 있으며, 차량에 관련된 다양한 서비스에 적용 및 활용될 수 있다. 다만, 레이블링된 데이터 세트의 활용 분야 및 서비스 분야는 한정되지 않는다.
이하에서는 도 1 내지 도 6을 참조하여 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템 및 그 방법에 대해 상세히 설명한다.
도 1은 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템의 세부 구성에 대한 블록도를 도시한 것이다.
도 1을 참조하면, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템은 이벤트에 따른 차량 상태 데이터 및 영상 데이터를 연관시켜 레이블링한다.
이를 위해, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(100)은 데이터 수집부(110) 및 레이블링부(120)를 포함한다. 또한, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(100)은 제어부(130), 통신부(140) 및 데이터베이스부(150)를 더 포함할 수 있다.
데이터 수집부(110)는 차량의 작동에 따른 차량 상태 데이터 및 차량의 주변 환경에 대한 영상 데이터를 수집한다.
예를 들면, 데이터 수집부(110)는 차량 내 카메라, 블랙박스(Black­Box) 및 영상 센서 중 적어도 어느 하나 이상으로부터 차량의 전방, 후방, 측방에서의 주변 환경에 대해 촬영된 영상 데이터를 수집할 수 있다. 또한, 데이터 수집부(110)는 복수의 핀 배열 형태와 통신 방식을 포함하는 커넥터(Connector)를 이용하여 차량 내 OBD 단자에 연결될 수 있으며, 차량의 시동 온(On) 상태부터 주행, 정지 등의 주행 환경에 따라 OBD 단자에서 발생하는 차량 상태 데이터를 수집할 수 있다. 실시예에 따라서는, 데이터 수집부(110)는 ADAS(Advanced Driver Assistance Systems, 첨단 운전자보조시스템) 또는 레이더(radar)를 이용하여 주변 환경에서의 장애물에 대한 데이터를 수집할 수 있으며, 마이크를 이용하여 주변 환경에서의 소음에 대한 데이터를 수집할 수도 있다. 또한, 데이터 수집부(110)는 GPS 모듈을 이용한 차량의 위치 정보, 속도 정보 및 거리 정보 중 적어도 어느 하나 이상의 차량 위치 데이터를 수집할 수 있다.
이 때, 수집되는 차량 상태 데이터는 차량의 방향 지시등, 기어포지션, 속도 정보, 핸들 스티어링 및 가속/브레이크 페달, 차량 내 안전벨트 착용 여부, 창문 조작 및 램프 조작 중 적어도 어느 하나 이상일 수 있다. 나아가, 차량 상태 데이터는 차량에 부여되어 식별할 수 있는 차대번호(Vehicle Identification Number; VIN)를 포함할 수 있다.
실시예에 따라서, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(100)은 OBD 단자에 연결되는 OBD 단말기(On Board Diagnostics terminal) 또는 OBD 스캐너(On Board Diagnostics scanner)를 포함할 수도 있다. 나아가, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(100)은 차량 내부에 탑재되어 차량 내의 동작 정보뿐만 아니라, 센서 정보 및 주행 정보를 포함하는 데이터를 수집할 수도 있다.
다만, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(100)은 데이터 수집부(110)를 통해 수집된 차량 상태 데이터 및 차대번호를 외부 서버 또는 모바일 디바이스로 전송할 수 있으며, 이후, 모바일 디바이스 또는 외부 서버로부터 차량 상태 데이터 및 차대번호에 대한 식별 정보(Policy ID)에 기반하여 인증 과정에 대한 인증 결과를 수신할 수 있다. 즉, 인증 과정은 현재 차량 및 현재 차량 운전자 중 적어도 어느 하나 이상에 대한 인증을 판단하는 과정일 수 있다.
레이블링부(120)는 지정된 이벤트에 기반하여 차량 상태 데이터 및 영상 데이터를 연관시켜 레이블링하며, 이벤트에 의해 레이블링된 데이터 세트를 생성한다.
본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(100)은 시스템 내부에 자체적으로 기 설정된 이벤트, 또는 통신부(140)를 통해 외부 서버 또는 사용자(차량 소유자 또는 현재 차량 운전자)가 소지하는 모바일 디바이스로부터 선택 입력된 이벤트를 이용하여 차량 상태 데이터 및 영상 데이터를 레이블링할 수 있다. 예를 들면, 외부 서버 또는 사용자는 차량의 주행 시, 수집 또는 획득하고자 하는 특정 이벤트를 선택 입력할 수 있으며, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(100)은 레이블링부(120)를 통해 특정 이벤트에 대한 차량 상태 데이터 및 영상 데이터를 연관시켜 레이블링할 수 있다. 이 때, 상기 이벤트는 차량의 출발, 좌회전, 우회전, 정지, 충격, 장애물 감지, 회전 및 차선변경 중 적어도 어느 하나 이상일 수 있으며, 차대번호(VIN), 시각, 날씨, 현재 차량 운전자 및 인증 과정 중 적어도 어느 하나 이상일 수 있다.
보다 상세하게는, 레이블링부(120)는 데이터 수집부(110)에서 시간의 순서대로 수집된 차량 상태 데이터 및 영상 데이터 중 이벤트에 의해 트리거링(triggering)되는 차량 상태 데이터 및 영상 데이터를 연관시켜 레이블링할 수 있다. 이 때, 레이블링부(120)는 이벤트가 발생되는 시작 시점부터 이벤트가 종료되는 종료 시점까지의 차량 상태 데이터 및 영상 데이터를 연관시켜 이벤트에 따라 레이블링하며, 시간의 순서대로 레이블링된 데이터 세트를 생성할 수 있다.
제어부(130)는 이벤트에 대한 선택 입력을 수신하고, 레이블링된 데이터 세트를 전송할 수 있다.
제어부(130)는 통신부(140)를 통해 사용자 또는 외부 서버로부터 이벤트에 대한 선택 입력을 수신하고, 레이블링된 데이터 세트를 사용자가 소지하는 모바일 디바이스 또는 외부 서버로 전송하도록 제어할 수 있다.
제어부(130)는 레이블링된 데이터 세트를 이벤트 별로 분류하여 저장할 수 있다. 예를 들면, 제어부(130)는 차량의 출발, 좌회전, 우회전, 정지, 충격, 장애물 감지, 회전 및 차선변경 중 적어도 어느 하나 또는 차대번호(VIN), 시각, 날씨, 현재 차량 운전자 및 인증 과정 중 적어도 어느 하나의 이벤트에 따른 항목별로 레이블링된 데이터 세트를 취합할 수 있으며, 항목별로 레이블링된 데이터 세트를 데이터베이스부(150)에 저장하여 유지할 수 있다.
실시예에 따라서, 제어부(130)는 시스템 상에 기 설정된 기준, 외부 서버 또는 모바일 디바이스에 의해 설정된 기준에 따른 데이터의 중요도에 기초하여 차량 상태 데이터, 영상 데이터 또는 레이블링된 데이터 세트의 삭제 또는 보존을 제어할 수 있다. 예를 들면, 제어부(130)는 외부 서버 또는 모바일 디바이스로 전송된 데이터 세트를 우선적으로 삭제할 수 있다. 또한, 제어부(130)는 이벤트에 의해 레이블링된 데이터 세트를 일주일 이상 저장하는 것을 기본으로 하며, 레이블링되지 않은 차량 상태 데이터 및 영상 데이터를 24간 이후 삭제하도록 제어할 수 있다.
도 1은 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(100)의 일 예일 뿐이고, 이벤트에 의한 데이터 레이블링 시스템(100)은 도시된 구성요소보다 많거나 적은 구성요소를 포함할 수 있으며, 2개 이상의 구성요소들을 결합시키거나, 또는 상이한 구성요소를 포함한 구성 또는 배치를 포함할 수 있다.
제어부(130)는 프로세서, 중앙처리장치, 어플리케이션 프로세서 또는 커뮤니케이션 프로세서를 포함할 수 있다. 예를 들면, 제어부(130)는 데이터 수집부(110), 레이블링부(120), 통신부(140) 및 데이터베이스부(150)의 동작을 제어할 수 있다.
실시예에 따라서, 제어부(130)는 운영 체제 또는 응용 프로그램을 구동하여 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있으며, 각종 데이터 처리 및 연산을 수행할 수 있다. 예를 들어, 제어부(130)는 SoC(System on Chip)로 구성될 수 있으며, 다른 구성요소들(예, 비휘발성 메모리) 중 적어도 하나로부터 수신된 명령 또는 데이터를 휘발성 메모리에 로드하여 처리하고, 결과 데이터를 비휘발성 메모리에 저장할 수 있다.
통신부(140)는 무선 통신을 이용하여 모바일 디바이스와 외부 서버로 데이터를 송수신할 수 있다.
실시예에 따라서, 통신부(140)는 셀룰러 전화 네트워크, 무선 LAN(local area network) 및/또는 MAN(metropolitan area network) 등의 무선 네트워크, 인트라넷 및/또는 월드 와이드 웹(WWW)이라고도 불리는 인터넷과 같은 네트워크 및 기타 장치와 무선 통신에 의해 통신할 수 있다.
여기서, 상기 무선 통신은 GSM(Global System for Mobile Communications), EDGE(Enhanced Data GSM Environment), W­CDMA(wideband code division multiple access), CDMA(code division multiple access), TDMA(time division multiple access), (IEEE 802.11a, IEEE 802.11b, IEEE 802.11g 및/또는 IEEE 802.11n 등의) Wi­Fi(Wireless Fidelity), VoIP(voice over Internet Protocol), Wi­MAX, LTE(Long Term Evolution), 지그비(Zigbee), Z­wave, BLE(Bluetooth Low Energy), 로라(LoRa), 비콘(Beacon), IMAP(Internet Message Access Protocol) 및/또는 POP(Post Office Protocol) 등의 이메일용 프로토콜, XMPP(eXtensible Messaging and Presence Protocol), SIMPLE(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions), IMPS(Instant Messaging and Presence Service), 또는 SMS(Short Message Service), 등의 인스턴트 메시징, 또는 본원의 출원일 당시에 개발되지 않은 통신 프로토콜을 포함할 수 있다. 다만, 상술한 무선 통신에는 이들로 한정되지 않는 복수의 통신 표준, 프로토콜 및 기술들이 사용될 수 있다.
데이터베이스부(150)는 차량 상태 데이터 및 영상 데이터를 저장하여 유지할 수 있다. 예를 들면, 데이터베이스부(150)는 차량의 차대번호를 매칭시켜 저장할 수 있으며, 해당 차량을 운전하는 복수의 운전자에 대한 운전자 정보 및 운전자 정보에 대응하는 모바일 디바이스의 정보를 매칭시켜 저장할 수도 있다.
이 때, 사용자의 모바일 디바이스는 PC(personal computer), 노트북 컴퓨터(laptop computer), 스마트폰(smart phone), 태블릿(tablet), 웨어러블 컴퓨터(wearable computer) 등의 사용자가 소지하고 있는 단말 장치로, 웹/모바일 사이트 또는 전용 어플리케이션의 제어 하에 서비스 화면 구성, 데이터 입력, 데이터 송수신, 데이터 저장, 인증 등 서비스 전반의 동작을 수행할 수 있다. 또한, 모바일 디바이스는 모바일 디바이스 내에 다운로드되어 설치된 어플리케이션(Application)을 일컫을 수 있다.
도 2는 본 발명의 실시예에 따른 레이블링의 예를 도시한 것이다.
도 2에서는 이벤트를 좌회전으로 특정하여 설명하도록 한다. 도 2를 참조하면, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템은 차량의 주행 상태에 따른 복수의 영상 데이터(210)를 수집하며, OBD 단자로부터 OBD 데이터(220, 또는 차량 상태 데이터)를 수집한다.
이 때, 영상 데이터(210)는 차량 내 카메라, 블랙박스(Black­Box) 및 영상 센서 중 적어도 어느 하나 이상으로부터 차량의 전방, 후방, 측방에서의 주변 환경에 대해 촬영된 데이터이며, OBD 데이터(220)는 차량의 방향 지시등, 기어포지션, 속도 정보, 핸들 스티어링 및 가속/브레이크 페달, 차량 내 안전벨트 착용 여부, 창문 조작 및 램프 조작 중 적어도 어느 하나 이상의 차량 상태 데이터일 수 있다.
일 예로, 일반적으로 차량이 도로를 주행하는 경우, 핸들은 유지 상태이고, 속도는 일정 속도 상태를 나타낼 수 있다. 다른 예로, 차량이 좌회전을 시도하는 경우, 차량은 좌회전 차선에서 정지된 상태이고, 좌측의 방향 지시등이 작동될 수 있으며, 이후, 차량은 핸들을 좌측 방향으로 회전시키며, 속도가 점차 증가될 수 있다.
이에 따라서, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템은 도 2에 도시된 영상 데이터(210) 및 OBD 데이터(220)를 기반으로 좌회전의 이벤트에 해당하는 데이터를 추출할 수 있으며, 좌회전의 이벤트에 해당하는 영상 데이터(210) 및 OBD 데이터(220)를 연관시켜 레이블링할 수 있다. 이 때, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템은 좌회전의 이벤트가 발생되는 시작 시점부터 이벤트가 종료되는 종료 시점까지의 데이터를 선택하여 레이블링된 데이터 세트(230)를 생성한다.
다만, 차량의 주행에 따른 영상 데이터(210) 및 OBD 데이터(220)는 도 2에 도시된 바에 한정되지 않음은 당연하며, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템은 ADAS(Advanced Driver Assistance Systems, 첨단 운전자보조시스템), 레이더(radar), 마이크 또는 GPS 모듈을 이용하여 차량의 주행 상태에 따른 다양한 데이터를 보다 더 수집하여 이벤트에 대한 세부적인 레이블링된 데이터 세트를 생성할 수도 있으므로, 이에 한정하지 않는다.
도 3은 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템과 모바일 디바이스 및 외부 서버 간의 구성을 설명하기 위해 도시한 것이다.
도 3을 참조하면, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(310)은 차량 내 OBD 단자로부터 수집된 차량 상태 데이터 및 차대번호를 외부 서버(330)로 전송하고, 외부 서버(330)는 식별 정보(Policy ID)에 기반하여 차량에 대한 인증 및 현재 차량 운전자에 대한 인증을 선행할 수 있다.
이후, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(310)은 시스템 내부에 자체적으로 기 설정된 이벤트, 사용자(또는 현재 차량 운전자)가 소지하는 모바일 디바이스(320) 또는 외부 서버(330)로부터 선택 입력된 이벤트를 이용하여 차량 상태 데이터 및 영상 데이터를 연관시켜 레이블링하며, 레이블링된 데이터 세트를 생성한다.
이 때, 상기 이벤트는 차량의 출발, 좌회전, 우회전, 정지, 충격, 장애물 감지, 회전 및 차선변경 중 적어도 어느 하나 이상일 수 있으며, 차대번호(VIN), 시각, 날씨, 현재 차량 운전자 및 인증 과정 중 적어도 어느 하나 이상일 수 있다. 또한, 영상 데이터는 차량 내 카메라, 블랙박스(Black­Box) 및 영상 센서 중 적어도 어느 하나 이상으로부터 차량의 전방, 후방, 측방에서의 주변 환경에 대해 촬영된 데이터일 수 있으며, 차량 상태 데이터는 차량 내 OBD 단자로부터 수집되는 차량의 방향 지시등, 기어포지션, 속도 정보, 핸들 스티어링 및 가속/브레이크 페달, 차량 내 안전벨트 착용 여부, 창문 조작 및 램프 조작 중 적어도 어느 하나 이상의 데이터일 수 있다.
도 3에 도시된 바와 같이, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(310)은 CAN 트랜시버(transceiver)를 이용하여 차량 내 OBD 데이터를 수집하며, 카메라, 블랙박스(Black­Box) 및 영상 센서 중 적어도 어느 것을 이용하여 영상 데이터를 수집할 수 있다. 또한, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(310)은 데이터 수집부를 통해 OBD 데이터 및 영상 데이터를 수집하고, 레이블링부를 통해 이벤트에 의해 레이블링된 데이터 세트를 생성하며, 통신부를 포함할 수 있다. MCU는 본 발명의 실시예에 따른 제어부일 수 있다.
이 때, 통신부는 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(310)과 모바일 디바이스를 링크하는 용도로 사용될 수 있으며, 현재 차량 운전자를 파악하는 용도로 사용될 수 있다. 실시예에 따라서, 통신부는 블루투스 또는 NFC(Near Field Communication, 근거리 무선통신) 등 양방향 데이터 전송이 가능한 WPAN(Wireless Personal Area Network) 기술일 수 있으며, LoRa 모듈(LoRa module), 저가의 저전력 광역 통신 기술의 사물인터넷 연결(LPWA(Low Power Wide Area) IoT connectivity) 기술로, 이와 유사한 SigFox, LTE­M, NB­IoT 등의 다른 기술로 대체될 수도 있다.
실시예에 따라서, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(310)은 차량의 위치 정보를 획득하기 위한 GPS 모듈(GPS module) 및 사용자에게 현재 동작에 대한 출력 정보를 제공하기 위한 LED를 더 포함할 수 있다.
본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템(310)은 이벤트에 따라 레이블링된 데이터 세트를 모바일 디바이스(320) 또는 외부 서버(330)로 전송할 수 있다. 실시예에 따라서, 이벤트에 의한 데이터 레이블링 시스템(310)은 데이터 전송 이후, 레이블링된 데이터 세트를 삭제할 수 있다.
이 때, 모바일 디바이스(320)는 사용자에 의해 앱 스토어(321)에서 다운로드한 어플리케이션(Application)을 실행하며, 모바일 디바이스(320)는 어플리케이션을 통해 이벤트에 의한 데이터 레이블링 시스템(310) 및 외부 서버(330)와 데이터를 송수신하고, 외부 서버(330)와 인증 과정을 수행할 수 있다. 이 때, 어플리케이션은 사용자가 자신의 차량(10)에 대해 가입 또는 등록한 어플리케이션일 수 있다.
실시예에 따라서, 사용자의 모바일 디바이스(320)는 PC(personal computer), 노트북 컴퓨터(laptop computer), 스마트폰(smart phone), 태블릿(tablet), 웨어러블 컴퓨터(wearable computer) 등의 사용자가 소지하고 있는 단말 장치로, 웹/모바일 사이트 또는 전용 어플리케이션의 제어 하에 서비스 화면 구성, 데이터 입력, 데이터 송수신, 데이터 저장, 인증 등 서비스 전반의 동작을 수행할 수 있다.
도 3을 참조하면, 이벤트에 의한 데이터 레이블링 시스템(310), 모바일 디바이스(320) 및 외부 서버(330)는 Ethernet/3G, 4G, 5G의 무선 데이터 통신과, 블루투스 및 LoRa 망을 통해 데이터를 송수신할 수 있으나, 통신 방식 및 모듈은 이에 한정되지 않는다.
도 4는 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템 및 외부 서버 간 동작 흐름도를 도시한 것이다.
실시예에 따라서, 복수의 데이터 레이블링 시스템(410) 또는 복수의 외부 서버(420)일 수 있으나, 이하에서는 보다 명확한 설명을 기재하기 위해 단수의 데이터 레이블링 시스템(410) 및 단수의 외부 서버(420)로 설명한다.
예를 들면, 데이터 레이블링 시스템(410)은 차량 마다 존재할 수 있다.
도 4를 참조하면, 단계 401에서 데이터 레이블링 시스템(410)은 외부 서버(420) 또는 사용자가 소지하는 모바일 디바이스로부터 이벤트에 대한 선택 입력을 수신한다. 이 때, 모바일 디바이스는 차량 소유자 또는 현재 차량 운전자가 소지하는 단말 장치로, 어플리케이션이 설치된 기기일 수 있다.
예를 들면, 사용자는 모바일 디바이스에 설치된 어플리케이션을 활성화하여 블루투스(Bluetooth)를 통한 데이터 레이블링 시스템(410)에 특정 이벤트를 선택할 수 있으며, 외부 서버는 특정 이벤트에 대한 커맨드(command)를 생성하여 데이터 레이블링 시스템(410)으로 전송할 수 있다.
다만, 단계 401에서 본 발명의 실시예에 따른 데이터 레이블링 시스템(410)은 시스템 내부에 자체적으로 기 설정된 이벤트를 선택할 수도 있다.
실시예에 따라서, 단계 401에 앞서, 데이터 레이블링 시스템(410)은 수집된 차량 상태 데이터 및 차대번호를 외부 서버(420) 또는 모바일 디바이스로 전송할 수 있으며, 이후, 모바일 디바이스 또는 외부 서버(420)로부터 차량 상태 데이터 및 차대번호에 대한 식별 정보(Policy ID)에 기반의 인증 과정에 따른 결과로부터 모바일 디바이스 또는 외부 서버(420)와 페어링(pairing)하는 단계를 선행할 수 있다. 이 때, 인증 과정은 현재 차량 및 현재 차량 운전자 중 적어도 어느 하나 이상에 대한 인증을 판단하는 과정일 수 있다.
이후, 단계 402에서 데이터 레이블링 시스템(410)은 차량의 작동에 따른 차량 상태 데이터 및 차량의 주변 환경에 대한 영상 데이터를 수집한다.
예를 들면, 데이터 레이블링 시스템(410)은 차량 내 카메라, 블랙박스(Black­Box) 및 영상 센서 중 적어도 어느 하나 이상으로부터 차량의 전방, 후방, 측방에서의 주변 환경에 대해 촬영된 영상 데이터를 수집할 수 있으며, 복수의 핀 배열 형태와 통신 방식을 포함하는 커넥터(Connector)를 이용하여 차량 내 OBD 단자로부터 차량의 시동 온(On) 상태부터 주행, 정지 등의 주행 환경에 의해 발생하는 차량 상태 데이터를 수집할 수 있다. 실시예에 따라서, 데이터 레이블링 시스템(410)은 ADAS(Advanced Driver Assistance Systems, 첨단 운전자보조시스템) 또는 레이더(radar)를 이용하여 주변 환경에서의 장애물에 대한 데이터를 수집할 수 있으며, 마이크를 이용하여 주변 환경에서의 소음에 대한 데이터를 수집할 수도 있다. 또한, 데이터 레이블링 시스템(410)은 GPS 모듈을 이용한 차량의 위치 정보, 속도 정보 및 거리 정보 중 적어도 어느 하나 이상의 차량 위치 데이터를 수집할 수 있다.
이 때, 수집되는 차량 상태 데이터는 차량의 방향 지시등, 기어포지션, 속도 정보, 핸들 스티어링 및 가속/브레이크 페달, 차량 내 안전벨트 착용 여부, 창문 조작 및 램프 조작 중 적어도 어느 하나 이상일 수 있다. 나아가, 차량 상태 데이터는 차량에 부여되어 식별할 수 있는 차대번호(Vehicle Identification Number; VIN)를 포함할 수 있다.
이후, 단계 403에서 데이터 레이블링 시스템(410)은 이벤트에 따라 데이터를 레이블링한다. 예를 들어, 이벤트를 좌회전으로 특정한 경우, 데이터 레이블링 시스템(410)은 좌회전의 이벤트에 해당하는 영상 데이터 및 차량 상태 데이터를 연관시켜 레이블링하며, 좌회전의 이벤트가 발생되는 시작 시점부터 이벤트가 종료되는 종료 시점까지의 데이터를 선택하여 레이블링된 데이터 세트를 생성한다.
이후, 데이터 레이블링 시스템(410)은 외부 서버(420) 또는 모바일 디바이스로 레이블링된 데이터 세트를 전송(단계 404)하며, 외부 서버(420)로부터 레이블링된 데이터 세트에 따른 리워드를 수신한다.
보다 상세하게는, 외부 서버(420)는 수신된 레이블링된 데이터 세트에 따른 리워드를 데이터 레이블링 시스템(410)에 제공할 수 있다. 예를 들면, 특정 차종에서 생성된 레이블링된 데이터 세트, 특정 날씨 또는 특정 지역의 열악한 환경에서 생성된 레이블링된 데이터 세트, 및 특정 시각에서 생성된 레이블링된 데이터 세트를 수신하는 경우, 외부 서버(420)는 상기 레이블링된 데이터 세트를 전송한 데이터 레이블링 시스템(410)에 높은 리워드를 제공할 수 있다. 반면, 일반적인 환경에서 생성된 레이블링된 데이터 세트를 수신하는 경우, 외부 서버(420)는 보다 낮은 리워드를 제공할 수 있다.
이 때, 리워드는 현금(cash)일 수 있으며, 온라인 상에서 사용하는 온라인 머니 또는 포인트일 수도 있으나, 이에 한정되지 않으며, 보상의 개념에 관련되어 제공되는 것이면 무관하다. 또한 실시예에 따라서는, 리워드는 데이터 레이블링 시스템(410)과 연동된 모바일 디바이스에 제공될 수도 있다.
여기서, 특정 차종, 특정 날씨, 특정 지역의 열악한 환경, 특정 시각 또는 일반적인 환경은 본 발명이 적용되는 다양한 실시예에 따라서 사용자, 관리자 또는 외부 서버에 의해 설정 및 적용 가능하므로, 한정하지 않는다.
이후, 단계 406에서 데이터 레이블링 시스템(410)은 시스템 상에 기 설정된 기준, 외부 서버(420) 또는 모바일 디바이스에 의해 설정된 기준에 따른 데이터의 중요도에 기초하여 차량 상태 데이터, 영상 데이터 또는 레이블링된 데이터 세트의 삭제 또는 보전을 제어할 수 있다. 예를 들면, 데이터 레이블링 시스템(410)은 외부 서버(420) 또는 모바일 디바이스로 전송된 레이블링된 데이터 세트를 우선적으로 삭제할 수 있다. 또한, 데이터 레이블링 시스템(410)은 이벤트에 의해 레이블링된 데이터 세트를 일주일 이상 저장하는 것을 기본으로 하며, 레이블링되지 않은 차량 상태 데이터 및 영상 데이터를 24간 이후 삭제하도록 제어할 수 있다. 다만, 영상 데이터, 차량 상태 데이터 및 레이블링된 데이터 세트를 삭제 또는 저장하는 기준은 이에 한정되는 것은 아니며, 본 발명에 적용되는 실시예에 따라 변동 가능하다.
도 5는 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 방법의 흐름도를 도시한 것이다.
도 5의 방법은 도 1에 도시된 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 시스템에 의해 수행된다.
도 5를 참조하면, 단계 510에서 차량의 작동에 따른 차량 상태 데이터 및 차량의 주변 환경에 대한 영상 데이터를 수집한다.
단계 510은 차량 내 카메라로부터 영상 데이터를 수집하고, 차량 내 OBD(On Board Diagnostics) 단자로부터 차량의 방향 지시등, 기어포지션, 속도 정보, 핸들 스티어링 및 가속/브레이크 페달 중 적어도 어느 하나 이상의 차량 상태 데이터를 수집하는 단계일 수 있다.
예를 들면, 단계 510에서 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 방법은 차량 내 카메라, 블랙박스(Black­Box) 및 영상 센서 중 적어도 어느 하나 이상으로부터 차량의 전방, 후방, 측방에서의 주변 환경에 대해 촬영된 영상 데이터를 수집할 수 있다. 또한, 단계 510에서 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 방법은 복수의 핀 배열 형태와 통신 방식을 포함하는 커넥터(Connector)를 이용하여 차량 내 OBD 단자에 연결될 수 있으며, 차량의 시동 온(On) 상태부터 주행, 정지 등의 주행 환경에 따라 OBD 단자에서 발생하는 차량 상태 데이터를 수집할 수 있다.
실시예에 따라서는, 단계 510에서 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 방법은 ADAS(Advanced Driver Assistance Systems, 첨단 운전자보조시스템) 또는 레이더(radar)를 이용하여 주변 환경에서의 장애물에 대한 데이터를 수집할 수 있으며, 마이크를 이용하여 주변 환경에서의 소음에 대한 데이터를 수집할 수도 있다. 또한, 단계 510에서 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 방법은 GPS 모듈을 이용한 차량의 위치 정보, 속도 정보 및 거리 정보 중 적어도 어느 하나 이상의 차량 위치 데이터를 수집할 수 있다.
이 때, 수집되는 차량 상태 데이터는 차량의 방향 지시등, 기어포지션, 속도 정보, 핸들 스티어링 및 가속/브레이크 페달, 차량 내 안전벨트 착용 여부, 창문 조작 및 램프 조작 중 적어도 어느 하나 이상일 수 있다. 나아가, 차량 상태 데이터는 차량에 부여되어 식별할 수 있는 차대번호(Vehicle Identification Number; VIN)를 포함할 수 있다.
단계 520에서 지정된 이벤트에 기반하여 차량 상태 데이터 및 영상 데이터를 연관시켜 레이블링하며, 이벤트에 의해 레이블링된 데이터 세트를 생성한다.
단계 520은 시간의 순서대로 수집되는 차량 상태 데이터 및 영상 데이터에서, 지정된 이벤트에 의해 트리거링(triggering)되는 차량 상태 데이터 및 영상 데이터를 연관시켜 레이블링하며, 이벤트가 발생되는 시작 시점부터 이벤트가 종료되는 종료 시점까지의 차량 상태 데이터 및 영상 데이터를 연관시켜 이벤트에 따라 레이블링된 데이터 세트를 생성하는 단계일 수 있다.
예를 들면, 단계 520에서 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 방법은 외부 서버 또는 사용자의 모바일 디바이스로부터 수신되는 이벤트 또는 데이터 레이블링 시스템에 기 설정된 이벤트에 의해 트리거링되는 차량 상태 데이터 및 영상 데이터를 연관시켜 레이블링하며, 레이블링된 데이터 세트를 생성할 수 있다. 이 때, 상기 이벤트는 차량의 출발, 좌회전, 우회전, 정지, 충격, 장애물 감지, 회전 및 차선변경 중 적어도 어느 하나 이상일 수 있으며, 차대번호(VIN), 시각, 날씨, 현재 차량 운전자 및 인증 과정 중 적어도 어느 하나 이상일 수 있다.
또한, 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 방법은 단계 530에서 레이블링된 데이터 세트를 전송할 수 있다.
단계 530은 통신부를 통해 레이블링된 데이터 세트를 사용자가 소지하는 모바일 디바이스 또는 외부 서버로 전송하도록 제어하는 단계일 수 있다.
실시예에 따라서, 단계 530은 레이블링된 데이터 세트를 이벤트 별로 분류하여 저장하는 단계일 수도 있다. 예를 들면, 단계 530에서 본 발명의 실시예에 따른 이벤트에 의한 데이터 레이블링 방법은 차량의 출발, 좌회전, 우회전, 정지, 충격, 장애물 감지, 회전 및 차선변경 중 적어도 어느 하나 또는 차대번호(VIN), 시각, 날씨, 현재 차량 운전자 및 인증 과정 중 적어도 어느 하나의 이벤트에 따른 항목별로 레이블링된 데이터 세트를 취합할 수 있으며, 항목별로 레이블링된 데이터 세트를 데이터베이스부에 저장하여 유지할 수 있다.
이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 어플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.
10: 차량
100, 300, 310: 이벤트에 의한 데이터 레이블링 시스템
230: 레이블링된 데이터 세트
320: 모바일 디바이스
321: 앱 스토어
330: 외부 서버

Claims (14)

  1. 차량의 작동에 따른 차량 상태 데이터 및 상기 차량의 주변 환경에 대한 영상 데이터를 수집하는 데이터 수집부; 및
    지정된 이벤트에 기반하여 상기 차량 상태 데이터 및 상기 영상 데이터를 연관시켜 레이블링하며, 상기 이벤트에 의해 레이블링된 데이터 세트를 생성하는 레이블링부
    를 포함하는 이벤트에 의한 데이터 레이블링 시스템.
  2. 제1항에 있어서,
    상기 데이터 수집부는
    상기 차량 내 카메라로부터 상기 영상 데이터를 수집하고, 상기 차량 내 OBD(On Board Diagnostics) 단자로부터 차량의 방향 지시등, 기어포지션, 속도 정보, 핸들 스티어링 및 가속/브레이크 페달 중 적어도 어느 하나 이상의 상기 차량 상태 데이터를 수집하는 이벤트에 의한 데이터 레이블링 시스템.
  3. 제1항에 있어서,
    상기 레이블링부는
    시간의 순서대로 수집되는 상기 차량 상태 데이터 및 상기 영상 데이터에서, 상기 지정된 이벤트에 의해 트리거링(triggering)되는 상기 차량 상태 데이터 및 상기 영상 데이터를 연관시켜 레이블링하는 것을 특징으로 하는 이벤트에 의한 데이터 레이블링 시스템.
  4. 제3항에 있어서,
    상기 레이블링부는
    상기 이벤트가 발생되는 시작 시점부터 상기 이벤트가 종료되는 종료 시점까지의 상기 차량 상태 데이터 및 상기 영상 데이터를 연관시켜 상기 이벤트에 따라 레이블링하며, 시간의 순서로 레이블링된 상기 데이터 세트를 생성하는 이벤트에 의한 데이터 레이블링 시스템.
  5. 제4항에 있어서,
    상기 이벤트는
    차량의 출발, 좌회전, 우회전, 정지, 충격, 장애물 감지, 회전 및 차선변경 중 적어도 어느 하나인 이벤트에 의한 데이터 레이블링 시스템.
  6. 제1항에 있어서,
    상기 이벤트에 대한 선택 입력을 수신하고, 상기 레이블링된 데이터 세트를 전송하는 제어부
    를 더 포함하는 이벤트에 의한 데이터 레이블링 시스템.
  7. 제6항에 있어서,
    상기 제어부는
    사용자 또는 외부 서버로부터 상기 이벤트에 대한 선택 입력을 수신하고, 상기 레이블링된 데이터 세트를 상기 사용자가 소지하는 모바일 디바이스 또는 상기 외부 서버로 전송하도록 제어하는 이벤트에 의한 데이터 레이블링 시스템.
  8. 제6항에 있어서,
    상기 제어부는
    상기 레이블링된 데이터 세트를 상기 이벤트에 따라 분류하여 저장하는 이벤트에 의한 데이터 레이블링 시스템.
  9. 이벤트에 의한 데이터 레이블링 시스템의 동작 방법에 있어서,
    차량의 작동에 따른 차량 상태 데이터 및 상기 차량의 주변 환경에 대한 영상 데이터를 수집하는 단계; 및
    지정된 이벤트에 기반하여 상기 차량 상태 데이터 및 상기 영상 데이터를 연관시켜 레이블링하며, 상기 이벤트에 의해 레이블링된 데이터 세트를 생성하는 단계
    를 포함하는 이벤트에 의한 데이터 레이블링 방법.
  10. 제9항에 있어서,
    상기 레이블링된 데이터 세트를 전송하는 단계
    를 더 포함하는 이벤트에 의한 데이터 레이블링 방법.
  11. 제9항에 있어서,
    상기 데이터를 수집하는 단계는
    상기 차량 내 카메라로부터 상기 영상 데이터를 수집하고, 상기 차량 내 OBD(On Board Diagnostics) 단자로부터 차량의 방향 지시등, 기어포지션, 속도 정보, 핸들 스티어링 및 가속/브레이크 페달 중 적어도 어느 하나 이상의 상기 차량 상태 데이터를 수집하는 이벤트에 의한 데이터 레이블링 방법.
  12. 제9항에 있어서,
    상기 레이블링된 데이터 세트를 생성하는 단계는
    시간의 순서대로 수집되는 상기 차량 상태 데이터 및 상기 영상 데이터에서, 상기 지정된 이벤트에 의해 트리거링(triggering)되는 상기 차량 상태 데이터 및 상기 영상 데이터를 연관시켜 레이블링하는 것을 특징으로 하는 이벤트에 의한 데이터 레이블링 방법.
  13. 제12항에 있어서,
    상기 레이블링된 데이터 세트를 생성하는 단계는
    상기 이벤트가 발생되는 시작 시점부터 상기 이벤트가 종료되는 종료 시점까지의 상기 차량 상태 데이터 및 상기 영상 데이터를 연관시켜 상기 이벤트에 따라 레이블링하며, 시간의 순서로 레이블링된 상기 데이터 세트를 생성하는 이벤트에 의한 데이터 레이블링 방법.
  14. 제9항 내지 제13항 중 어느 한 항의 방법을 수행하기 위하여 컴퓨터로 판독 가능한 기록 매체에 저장된 컴퓨터 프로그램.
KR1020180005963A 2018-01-17 2018-01-17 이벤트에 의한 데이터 레이블링 시스템 및 그 방법 KR102053713B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180005963A KR102053713B1 (ko) 2018-01-17 2018-01-17 이벤트에 의한 데이터 레이블링 시스템 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180005963A KR102053713B1 (ko) 2018-01-17 2018-01-17 이벤트에 의한 데이터 레이블링 시스템 및 그 방법

Publications (2)

Publication Number Publication Date
KR20190093791A true KR20190093791A (ko) 2019-08-12
KR102053713B1 KR102053713B1 (ko) 2019-12-09

Family

ID=67624751

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180005963A KR102053713B1 (ko) 2018-01-17 2018-01-17 이벤트에 의한 데이터 레이블링 시스템 및 그 방법

Country Status (1)

Country Link
KR (1) KR102053713B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021101302A1 (ko) * 2019-11-22 2021-05-27 현대자동차주식회사 자율주행차량의 이벤트 데이터 기록을 위한 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005297817A (ja) * 2004-04-13 2005-10-27 Fujitsu Ten Ltd 運転支援装置
KR20160048351A (ko) * 2014-10-24 2016-05-04 팅크웨어(주) 내비게이션 장치, 블랙 박스 및 그들의 제어 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005297817A (ja) * 2004-04-13 2005-10-27 Fujitsu Ten Ltd 運転支援装置
KR20160048351A (ko) * 2014-10-24 2016-05-04 팅크웨어(주) 내비게이션 장치, 블랙 박스 및 그들의 제어 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021101302A1 (ko) * 2019-11-22 2021-05-27 현대자동차주식회사 자율주행차량의 이벤트 데이터 기록을 위한 시스템
CN114730508A (zh) * 2019-11-22 2022-07-08 现代自动车株式会社 用于记录自主车辆的事件数据的系统

Also Published As

Publication number Publication date
KR102053713B1 (ko) 2019-12-09

Similar Documents

Publication Publication Date Title
US10186155B2 (en) Method and system for providing interactive parking management via artificial intelligence analytic (AIA) services using cloud network
US10909628B1 (en) Accident fault determination implementing unmanned aerial vehicles (UAVS)
US20200394851A1 (en) Electronic device for transmitting relay message to external vehicle and method thereof
US9840254B2 (en) Method and system for adaptive detection and application of horn for an autonomous vehicle
EP3700198B1 (en) Imaging device, image processing apparatus, and image processing method
US20170357866A1 (en) Method and System for Providing Behavior of Vehicle Operator Using Virtuous Cycle
CN104853972B (zh) 利用板载车辆平台中的图像处理支持扩增车辆的adas特征
KR101957032B1 (ko) 차량 상태 정보를 이용하는 사용기반보험용 단말 장치, 시스템 및 그 방법
US10262537B1 (en) Autonomous optimization of parallel parking space utilization
US10647250B1 (en) Directed acoustic alert notification from autonomous vehicles
US20200223454A1 (en) Enhanced social media experience for autonomous vehicle users
US10715976B2 (en) Method and system for event detection based on vehicular mobile sensors and MEC system
US11120693B2 (en) Providing inter-vehicle data communications for vehicular drafting operations
US10856120B2 (en) Providing inter-vehicle data communications for multimedia content
CN104378584A (zh) 利用车辆系统集成的远程无线图像捕捉的方法和设备
CN111247391A (zh) 信息处理装置、信息处理方法、程序和移动体
CN112069546A (zh) 用于潜在增强的车辆安全性的系统和方法
US20200389761A1 (en) Systems and methods for network node communication using dynamically configurable interaction modes
US11221627B2 (en) Directed interaction of customers with autonomous vehicles
US20200177835A1 (en) System and Method for Providing Complete Event Data from Cross-Referenced Data Memories
US11874118B2 (en) Crowdsourcing map maintenance
US20200233422A1 (en) Active off-vehicle notification to autonomous-driving vehicle
KR102053713B1 (ko) 이벤트에 의한 데이터 레이블링 시스템 및 그 방법
US10275844B2 (en) Handheld photo enforcement systems and methods
US20200250441A1 (en) Systems and methods for image processing using mobile devices

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
N231 Notification of change of applicant
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant