KR20200026368A - 운전자 폭력 감지 시스템 및 운전자 폭력 감지 방법 - Google Patents

운전자 폭력 감지 시스템 및 운전자 폭력 감지 방법 Download PDF

Info

Publication number
KR20200026368A
KR20200026368A KR1020180102479A KR20180102479A KR20200026368A KR 20200026368 A KR20200026368 A KR 20200026368A KR 1020180102479 A KR1020180102479 A KR 1020180102479A KR 20180102479 A KR20180102479 A KR 20180102479A KR 20200026368 A KR20200026368 A KR 20200026368A
Authority
KR
South Korea
Prior art keywords
driver
violence
objects
data
detection system
Prior art date
Application number
KR1020180102479A
Other languages
English (en)
Other versions
KR102179995B1 (ko
Inventor
최경주
박정환
구동관
오상헌
Original Assignee
충북대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 충북대학교 산학협력단 filed Critical 충북대학교 산학협력단
Priority to KR1020180102479A priority Critical patent/KR102179995B1/ko
Publication of KR20200026368A publication Critical patent/KR20200026368A/ko
Application granted granted Critical
Publication of KR102179995B1 publication Critical patent/KR102179995B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/26—Government or public services
    • G06Q50/265—Personal security, identity or safety
    • G06Q50/30—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/40—Business processes related to the transportation industry
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • H04N5/217—

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • Marketing (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Primary Health Care (AREA)
  • Computer Security & Cryptography (AREA)
  • Educational Administration (AREA)
  • Development Economics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Operations Research (AREA)
  • Traffic Control Systems (AREA)

Abstract

본 발명은 객체들을 촬영하여 객체 데이터를 생성하는 촬영 장치 및 상기 객체 데이터에서 객체들을 검출하고, 상기 검출한 객체들을 이용하여 운전자 폭력 상황 여부를 결정하는 결정 서버를 포함한다.

Description

운전자 폭력 감지 시스템 및 운전자 폭력 감지 방법{SYSTEM AND METHOD FOR DETECTION DRIVER VIOLENCE}
본 발명은 운전자 폭력 감지 시스템 및 운전자 폭력 감지 방법에 관한 것으로, 보다 상세하게는 객체들의 겹침도 및 객체들의 표정을 이용하여 폭력 상황 여부를 결정하는 운전자 폭력 감지 시스템 및 운전자 폭력 감지 방법에 관한 것이다.
차량의 내부공간은 통상적으로 운전석 및 탑승 석으로 이루어진 개방된 하나의 단일공간으로 형성된다.
차량을 운전하는 운전자의 안전은 매우 중요하다. 그러나 차량의 내부는 운전석과 탑승석이 개방되어 있으므로, 탑승석에 탑승하는 탑승자로부터 운전을 방해 받을 수도 있다.
특히, 의도적으로 운전자를 폭행하거나 흉기 등으로 운전자를 위협하여도 운전자는 무방비 상태로 일방적인 공격을 받을 수 밖에 없고, 실질적으로 이러한 폭력 행위로 인하여 운전자가 부상 또는 사망한 경우도 발생하고 있다.
또한, 탑승자의 이러한 폭력 행위로 인하여 운전자는 운전에 집중하지 못하게 되고, 그로 인하여 2차적으로 교통사고로 이어질 가능성이 높다.
그러나, 기존에는 폭력 행위가 가해지는 폭력 상황을 정확하게 인지할 수 없고, 정확하게 인지하기 위해서는 연산량이 증가하는 문제가 있었다.
대한민국 공개특허공보 제10-2017-0117901호(2017.10.24.공개)
본 발명은 상기한 문제점을 해결하기 위해 발명된 것으로, 그 목적은 운전자 폭력 상황 여부를 정확히 결정할 수 있는 운전자 폭력 감지 시스템 및 운전자 폭력 감지 방법을 제공하는 것을 목적으로 한다.
또한, 본 발명의 다른 목적은 연산 부담이 적은 운전자 폭력 감지 시스템 및 운전자 폭력 감지 방법을 제공하는 것을 다른 목적으로 한다.
또한, 본 발명의 또 다른 목적은 운전자 폭력 상황을 기 설정된 연락처로 출력할 수 있는 운전자 폭력 감지 시스템 및 운전자 폭력 감지 방법을 제공하는 것을 또 다른 목적으로 한다.
상기한 바와 같은 과제를 해결하기 위하여 본 발명은, 객체들을 촬영하여 객체 데이터를 생성하는 촬영 장치 및 상기 객체 데이터에서 객체들을 검출하고, 상기 검출한 객체들을 이용하여 운전자 폭력 상황 여부를 결정하는 결정 서버를 포함한다.
또한, 상기 결정 서버는, 상기 객체 데이터에서 객체들을 검출하는 객체 검출 장치, 상기 검출한 객체들의 겹침도를 결정하여 객체 겹침 데이터를 생성하는 겹침 데이터 생성 모듈, 상기 객체들의 표정을 인식하고, 상기 인식한 객체들의 표정을 이용하여 표정 데이터를 생성하는 표정 데이터 생성 모듈 및 상기 객체 겹침 데이터 및 상기 표정 데이터를 이용하여 폭력 상황 여부를 결정하는 폭력 상황 결정 모듈을 포함할 수 있다.
또한, 상기 객체 데이터에서 YOLO 객체 검출 알고리즘을 이용하여 상기 객체들을 검출할 수 있다.
또한, 객체들 간의 유클리드 거리를 측정하는 알고리즘을 이용하여 상기 겹침 데이터를 생성할 수 있다.
본 발명의 다른 측면에 의하면, 운전자 폭력 감지 시스템이 객체들을 촬영하여 객체 데이터를 생성하는 단계, 운전자 폭력 감지 시스템이 상기 객체 데이터에서 객체들을 검출하는 단계, 운전자 폭력 감지 시스템이 상기 검출한 객체들의 겹침도를 결정하여 객체 겹침 데이터를 생성하는 단계, 운전자 폭력 감지 시스템이 상기 객체들의 표정을 인식하고, 상기 인식한 객체들의 표정을 이용하여 표정 데이터를 생성하는 단계 및 운전자 폭력 감지 시스템이 상기 객체 겹침 데이터 및 상기 표정 데이터를 이용하여 폭력 상황 여부를 결정하는 단계를 포함한다.
본 발명에 의하면, 운전자 폭력 상황 여부를 정확히 결정할 수 있는 효과가 있다.
또한, 연산 부담이 적은 운전자 폭력 감지 시스템 및 운전자 폭력 감지 방법을 제공하는 효과가 있다.
또한, 운전자 폭력 상황을 기 설정된 연락처로 출력할 수 있는 효과가 있다.
도 1은 본 발명의 일실시예에 따른 운전자 폭력 감지 시스템을 나타내는 도면이다.
도 2는 촬영 장치의 구성을 나타내는 도면이다.
도 3은 결정 서버의 구성을 나타내는 도면이다.
도 4는 본 발명의 일실시예에 따른 운전자 폭력 감지 방법을 개략적으로 나타내는 플로우 차트이다.
본 명세서에 개시되어 있는 본 발명의 개념에 따른 실시 예들에 대해서 특정한 구조적 또는 기능적 설명들은 단지 본 발명의 개념에 따른 실시 예들을 설명하기 위한 목적으로 예시된 것으로서, 본 발명의 개념에 따른 실시 예들은 다양한 형태들로 실시될 수 있으며 본 명세서에 설명된 실시 예들에 한정되지 않는다.
본 발명의 개념에 따른 실시 예들은 다양한 변경들을 가할 수 있고 여러 가지 형태들을 가질 수 있으므로 실시 예들을 도면에 예시하고 본 명세서에 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시 예들을 특정한 개시 형태들에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물, 또는 대체물을 포함한다.
제1 또는 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만, 예컨대 본 발명의 개념에 따른 권리 범위로부터 이탈되지 않은 채, 제1구성요소는 제2구성요소로 명명될 수 있고, 유사하게 제2구성요소는 제1구성요소로도 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.
본 명세서에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설명된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미가 있다.
일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하의 설명에서 동일한 식별 기호는 동일한 구성을 의미하며, 불필요한 중복적인 설명 및 공지 기술에 대한 설명은 생략하기로 한다.
본 발명의 실시 예에서 '통신', '통신망' 및 '네트워크'는 동일한 의미로 사용될 수 있다. 상기 세 용어들은, 파일을 사용자 단말, 다른 사용자들의 단말 및 다운로드 서버 사이에서 송수신할 수 있는 유무선의 근거리 및 광역 데이터 송수신망을 의미한다.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시 예를 설명함으로써, 본 발명을 상세히 설명한다.
도 1은 본 발명의 일실시예에 따른 운전자 폭력 감지 시스템을 나타내는 도면이고, 도 2는 촬영 장치의 구성을 나타내는 도면이며, 도 3은 결정 서버의 구성을 나타내는 도면이다.
도 1을 참조하면, 본 발명의 일실시예에 따른 운전자 폭력 감지 시스템은 촬영 장치(100) 및 결정 서버(200)를 포함한다.
도 1 및 도 2를 참조하면, 촬영 장치(100)는 제1 제어모듈(110), 제1 통신모듈(120), 영상 획득 모듈(130), 객체 데이터 생성 모듈(140) 및 제1 데이터베이스(150)를 포함한다.
촬영 장치(100)를 구성하는 제1 제어모듈(110), 제1 통신모듈(120), 영상 획득 모듈(130), 객체 데이터 생성 모듈(140) 및 제1 데이터베이스(150)는 상호 연결되어 있으며, 상호 데이터를 전송하는 것이 가능하다.
제1 제어모듈(110)은 촬영 장치(100)에 대한 정보나 촬영 장치(100)의 동작을 관리한다.
제1 제어모듈(110)은 영상 획득 모듈(130)의 동작을 관리한다.
제1 제어모듈(110)은 객체 데이터 생성 모듈(140)의 동작을 관리한다.
제1 제어모듈(110)은 영상 획득 모듈(130)의 영상 획득 조건을 설정할 수 있다.
제1 제어모듈(110)은 프로그램들이 저장된 메모리(미도시) 및 상기 메모리(미도시)에 저장된 상기 프로그램을 실행시키기 위한 프로세서(미도시)를 포함할 수 있다.
이때, 상기 메모리(미도시)에는 촬영 장치(100)를 동작시키기 위한 동작프로그램(예컨대, OS)이 저장될 수 있다.
제1 통신모듈(120)은 네트워크를 통하여 결정 서버(200)와 연결된다.
제1 통신모듈(120)은 영상 획득 모듈(130)이 획득한 영상을 결정 서버(200)로 전송한다.
제1 통신모듈(120)은 객체 데이터 생성 모듈(140)이 생성한 객체 데이터를 결정 서버(200)로 전송한다.
제1 통신모듈(120)은 결정 서버(200)가 전송한 영상 재송신 신호를 수신한다.
제1 통신모듈(120)은 결정 서버(200)로 상기 영상 재송신 신호에 대응하는 영상을 전송한다.
영상 획득 모듈(130)은 객체들을 촬영한다.
영상 획득 모듈(130)은 운전자를 객체로 촬영할 수 있다.
영상 획득 모듈(130)은 탑승자를 객체로 촬영할 수 있다.
이때, 상기 탑승자는 운전석 우측에 존재하는 탑승석에 탑승한 사람을 말한다.
영상 획득 모듈(130)은 운전자 및 탑승자를 촬영할 수 있다.
영상 획득 모듈(130)은 운전자 및 탑승자가 모두 촬영 화면에 들어온 경우에만 영상을 획득할 수 있다.
영상 획득 모듈(130)은 운전석을 기준으로 영상을 촬영할 수 있다.
객체 데이터 생성 모듈(140)은 영상 획득 모듈(130)이 촬영한 영상을 이용하여 객체 데이터를 생성한다.
객체 데이터 생성 모듈(140)은 상기 영상에 운전자 및 탑승자가 모두 촬영된 경우에만 객체 데이터를 생성할 수 있다.
객체 데이터 생성 모듈(140)은 운전석을 기준으로 객체 데이터를 생성할 수 있다.
객체 데이터 생성 모듈(140)은 상기 영상에 운전자만 촬영된 경우에도 객체 데이터를 생성할 수 있다.
객체 데이터 생성 모듈(140)은 상기 영상에 탑승자만 촬영된 경우에도 객체 데이터를 생성할 수 있다.
제1 데이터베이스(150)는 영상 획득 모듈(130)의 영상 획득 조건을 저장한다.
제1 데이터베이스(150)는 영상 획득 모듈(130)이 획득한 영상을 저장한다.
제1 데이터베이스(150)는 객체 데이터 생성 모듈(140)이 생성한 객체 데이터를 저장한다.
제1 데이터베이스(150)는 결정 서버(200)로 전송한 영상을 저장한다.
제1 데이터베이스(150)는 결정 서버(200)로 전송한 객체 데이터를 저장한다.
도 1 및 도 3을 참조하면, 결정 서버(200)는 제2 제어 모듈(210), 제2 통신 모듈(220), 객체 검출 모듈(230), 겹침 데이터 생성 모듈(240), 표정 데이터 생성 모듈(250), 폭력 상황 결정 모듈(260), 출력 모듈(270) 및 제2 데이터베이스(280)를 포함한다.
결정 서버(200)를 구성하는 제2 제어 모듈(210), 제2 통신 모듈(220), 객체 검출 모듈(230), 겹침 데이터 생성 모듈(240), 표정 데이터 생성 모듈(250), 폭력 상황 결정 모듈(260), 출력 모듈(270) 및 제2 데이터베이스(280)는 상호 연결되어 있으며, 상호 데이터를 전송하는 것이 가능하다.
제2 제어 모듈(210)은 결정 서버(200)에 대한 정보나 결정 서버(200)의 동작을 관리한다.
제2 제어 모듈(210)은 객체 검출 모듈(230)의 동작을 관리한다.
제2 제어 모듈(210)은 겹침 데이터 생성 모듈(240)의 동작을 관리한다.
제2 제어 모듈(210)은 표정 데이터 생성 모듈(250)의 동작을 관리한다.
제2 제어 모듈(210)은 폭력 상황 결정 모듈(260)의 동작을 관리한다.
제2 제어 모듈(210)은 출력 모듈(270)의 동작을 관리한다.
제2 제어 모듈(210)은 프로그램들이 저장된 메모리(미도시) 및 상기 메모리(미도시)에 저장된 상기 프로그램을 실행시키기 위한 프로세서(미도시)를 포함할 수 있다.
이때, 상기 메모리(미도시)에는 결정 서버(200)를 동작시키기 위한 동작프로그램(예컨대, OS)이 저장될 수 있다.
제2 통신 모듈(220)은 네트워크를 통하여 촬영 장치(100)와 연결된다.
제2 통신 모듈(220)은 촬영 장치(100)가 전송한 영상을 수신한다.
제2 통신 모듈(220)은 촬영 장치(100)가 전송한 객체 데이터를 수신한다.
제2 통신 모듈(220)은 폭력 상황 여부 결정 결과를 기 설정된 연락처로 전송할 수 이다.
이때, 상기 기 설정된 연락처는 경찰서, 보험사, 가족, 친구 또는 지인의 연락처 중 하나인 것이 바람직하나 이에 한정되는 것은 아니다.
객체 검출 모듈(230)은 촬영 장치(100)가 전송한 영상에서 운전자 객체를 검출한다.
객체 검출 모듈(230)은 촬영 장치(100)가 전송한 객체 데이터에서 운전자 객체를 검출한다.
객체 검출 모듈(230)은 촬영 장치(100)가 전송한 영상에서 외부 객체를 검출한다.
객체 검출 모듈(230)은 촬영 장치(100)가 전송한 객체 데이터에서 외부 객체를 검출한다.
객체 검출 모듈(230)은 YOLO 객체 검출 알고리즘을 이용하여 상기 객체들을 검출할 수 있다.
겹침 데이터 생성 모듈(240)은 객체 검출 모듈(230)이 검출한 객체들의 겹침도를 결정하여 객체 겹침 데이터를 생성한다.
겹침 데이터 생성 모듈(240)은 겹침도를 결정하기 위하여 상기 운전자 객체와 상기 외부 객체 좌표간의 유클리드 거리(Euclidean distance)를 측정하는 알고리즘을 이용할 수 있다.
겹침 데이터 생성 모듈(240)은 하기 [수학식 1]을 이용하여 겹침도를 결정할 수 있다.
Figure pat00001
겹침 데이터 생성 모듈(240)은 상기 운전자 객체와 상기 외부 객체 사이에 겹침도가 있다고 결정한 경우 객체 겹침 데이터를 생성한다.
겹침 데이터 생성 모듈(240)은 상기 운전자 객체와 상기 외부 객체 사이에 겹침도가 없다고 결정한 경우 객체 겹침 데이터를 생성하지 않을 수 있다.
표정 데이터 생성 모듈(250)은 상기 객체들의 표정을 인식하고, 상기 인식한 객체들의 표정을 이용하여 표정 데이터를 생성한다.
표정 데이터 생성 모듈(250)은 이진 하틀리 변환(Discrete Hartley Transform) 또는 퓨리에 변환(Fourier-related transform)을 이용하여 촬영 장치(100)가 전송한 영상을 전처리할 수 있다.
표정 데이터 생성 모듈(250)은 상기 전처리한 영상에 입술 검출 알고리즘을 적용하여 입술 영역을 추출하고, 상기 추출한 입술 영역을 기 저장된 입술 이미지 템플릿과 비교하여 상기 객체들의 표정을 인식할 수 있다.
이때, 상기 입술 검출 알고리즘은 운전자 얼굴에서 붉은 색 계열이 가장 강한 부분이 입술이라는 특징을 이용하여 이진연산(Threshold)을 이용하여 운전자의 입술 부분을 강조하는 방법이다.
또한, 기 저장된 입술 이미지 템플릿은 중립(Neutral), 행복(Happiness), 슬픔(Grief), 놀람(Surprized), 화남(Anger)을 포함한다.
표정 데이터 생성 모듈(250)은 상기 인식한 객체들의 표정으로 표정 데이터를 생성할 수 있다.
폭력 상황 결정 모듈(260)은 상기 객체 겹침 데이터 및 상기 표정 데이터를 이용하여 폭력 상황 여부를 결정한다.
폭력 상황 결정 모듈(260)은 상기 객체 겹침 데이터 및 상기 표정 데이터 각각에 가중치를 부여하여 폭력 상황 여부를 결정할 수 있다.
폭력 상황 결정 모듈(260)은 상기 객체 겹침 데이터에 가중치를 부여하여 폭력 상황 여부를 결정할 수 있다.
폭력 상황 결정 모듈(260)은 상기 표정 데이터에 가중치를 부여하여 폭력 상황 여부를 결정할 수 있다.
출력 모듈(270)은 폭력 상황 결정 모듈(260)이 결정한 폭력 상황 여부를 출력한다.
출력 모듈(270)은 제2 통신 모듈(220)을 통하여 폭력 상황 여부 결정 결과를 기 설정된 연락처로 전송할 수 있다.
이때, 상기 기 설정된 연락처는 경찰서, 보험사, 가족, 친구 또는 지인의 연락처 중 하나인 것이 바람직하나 이에 한정되는 것은 아니다.
제2 데이터베이스(280)는 촬영 장치(100)가 전송한 영상을 저장한다.
제2 데이터베이스(280)는 촬영 장치(100)가 전송한 객체 데이터를 저장한다.
제2 데이터베이스(280)는 기 설정된 연락처를 저장한다.
제2 데이터베이스(280)는 겹침 데이터 생성 모듈(240)이 생성한 객체 겹침 데이터를 저장한다.
제2 데이터베이스(280)는 표정 데이터 생성 모듈(250)이 생성한 표정 데이터를 저장한다.
제2 데이터베이스(280)는 입술 이미지 템플릿을 저장한다.
제2 데이터베이스(280)는 폭력 상황 결정 모듈(260)이 결정한 폭력 상황 여부를 저장한다.
제2 데이터베이스(280)는 출력 모듈(270)이 출력한 폭력 상황 여부 결정 결과 저장한다.
여기서 사용된 '서버'라는 용어는 논리적인 구성 단위를 나타내는 것으로서, 반드시 물리적으로 구분되는 구성 요소가 아니라는 점은 본 발명이 속하는 기술분야의 당업자에게 자명한 사항이다.
여기서 사용된 '모듈'이라는 용어는 논리적인 구성 단위를 나타내는 것으로서, 반드시 물리적으로 구분되는 구성 요소가 아니라는 점은 본 발명이 속하는 기술분야의 당업자에게 자명한 사항이다.
도 4는 본 발명의 일실시예에 따른 운전자 폭력 감지 방법을 개략적으로 나타내는 플로우 차트이다.
도 4를 참조하면, 본 발명의 일실시예에 따른 운전자 폭력 감지 방법은 운전자 폭력 감지 시스템이 객체들을 촬영하여 객체 데이터를 생성한다(S100).
이때, 운전자 폭력 감지 시스템은 운전석을 기준으로 객체 데이터를 생성할 수 있다.
운전자 폭력 감지 시스템이 상기 객체 데이터에서 객체들을 검출한다(S110).
이때, 운전자 폭력 감지 시스템은 YOLO 객체 검출 알고리즘을 이용하여 상기 객체들을 검출할 수 있다.
운전자 폭력 감지 시스템이 상기 검출한 객체들의 겹침도를 결정하여 객체 겹침 데이터를 생성한다(S120).
이때, 운전자 폭력 감지 시스템은 객체들 간의 유클리드 거리를 측정하는 알고리즘을 이용하여 상기 겹침 데이터를 생성할 수 있다.
운전자 폭력 감지 시스템이 상기 객체들의 표정을 인식하고, 상기 인식한 객체들의 표정을 이용하여 표정 데이터를 생성한다(S130).
이때, 운전자 폭력 감지 시스템은 전처리한 영상에 입술 검출 알고리즘을 적용하여 입술 영역을 추출하고, 상기 추출한 입술 영역을 기 저장된 입술 이미지 템플릿과 비교하여 상기 객체들의 표정을 인식하고, 상기 인식한 표정으로 표정 데이터를 생성할 수 있다.
운전자 폭력 감지 시스템이 상기 객체 겹침 데이터 및 상기 표정 데이터를 이용하여 폭력 상황 여부를 결정한다(S140).
이때, 운전자 폭력 감지 시스템은 상기 객체 겹침 데이터에 가중치를 부여하여 폭력 상황 여부를 결정할 수 있다.
운전자 폭력 감지 시스템이 폭력 상황 여부 결정 결과를 출력한다(S150).
이때, 운전자 폭력 감지 시스템은 폭력 상황 여부 결정 결과를 경찰서, 보험사, 가족, 친구 또는 지인의 연락처 중 적어도 어느 하나로 전송할 수 있다.
이상에서, 본 발명의 실시예를 구성하는 모든 구성 요소들이 하나로 결합되거나 결합되어 동작하는 것으로 설명되었다고 해서, 본 발명이 반드시 이러한 실시예에 한정되는 것은 아니다. 즉, 본 발명의 목적 범위 안에서라면, 그 모든 구성 요소들이 적어도 하나로 선택적으로 결합하여 동작할 수도 있다.
또한, 그 모든 구성 요소들이 각각 하나의 독립적인 하드웨어로 구현될 수 있지만, 각 구성 요소들의 그 일부 또는 전부가 선택적으로 조합되어 하나 또는 복수 개의 하드웨어에서 조합된 일부 또는 전부의 기능을 수행하는 프로그램 모듈을 갖는 컴퓨터 프로그램으로서 구현될 수도 있다. 그 컴퓨터 프로그램을 구성하는 코드들 및 코드 세그먼트들은 본 발명의 기술 분야의 당업자에 의해 용이하게 추론될 수 있을 것이다.
이러한 컴퓨터 프로그램은 컴퓨터가 읽을 수 있는 저장매체(Computer Readable Media)에 저장되어 컴퓨터에 의하여 읽혀지고 실행됨으로써, 본 발명의 실시예를 구현할 수 있다. 컴퓨터 프로그램의 저장매체로서는 자기 기록매체, 광 기록매체, 등이 포함될 수 있다.
또한, 이상에서 기재된 "포함하다", "구성하다" 또는 "가지다" 등의 용어는, 특별히 반대되는 기재가 없는 한, 해당 구성 요소가 내재될 수 있음을 의미하는 것이므로, 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것으로 해석되어야 한다.
기술적이거나 과학적인 용어를 포함한 모든 용어들은, 다르게 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 사전에 정의된 용어와 같이 일반적으로 사용되는 용어들은 관련 기술의 문맥 상의 의미와 일치하는 것으로 해석되어야 하며, 본 발명에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다.
따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
100...촬영 장치 200...결정 서버

Claims (5)

  1. 객체들을 촬영하여 객체 데이터를 생성하는 촬영 장치; 및
    상기 객체 데이터에서 객체들을 검출하고, 상기 검출한 객체들을 이용하여 운전자 폭력 상황 여부를 결정하는 결정 서버
    를 포함하는 운전자 폭력 감지 시스템.
  2. 제1항에 있어서,
    상기 결정 서버는,
    상기 객체 데이터에서 객체들을 검출하는 객체 검출 장치;
    상기 검출한 객체들의 겹침도를 결정하여 객체 겹침 데이터를 생성하는 겹침 데이터 생성 모듈;
    상기 객체들의 표정을 인식하고, 상기 인식한 객체들의 표정을 이용하여 표정 데이터를 생성하는 표정 데이터 생성 모듈; 및
    상기 객체 겹침 데이터 및 상기 표정 데이터를 이용하여 폭력 상황 여부를 결정하는 폭력 상황 결정 모듈
    을 포함하는 운전자 폭력 감지 시스템.
  3. 제2항에 있어서,
    상기 객체 데이터에서 YOLO 객체 검출 알고리즘을 이용하여 상기 객체들을 검출하는 운전자 폭력 감지 시스템.
  4. 제2항에 있어서,
    객체들 간의 유클리드 거리를 측정하는 알고리즘을 이용하여 상기 겹침 데이터를 생성하는 운전자 폭력 감지 시스템.
  5. 운전자 폭력 감지 시스템이 객체들을 촬영하여 객체 데이터를 생성하는 단계;
    운전자 폭력 감지 시스템이 상기 객체 데이터에서 객체들을 검출하는 단계;
    운전자 폭력 감지 시스템이 상기 검출한 객체들의 겹침도를 결정하여 객체 겹침 데이터를 생성하는 단계;
    운전자 폭력 감지 시스템이 상기 객체들의 표정을 인식하고, 상기 인식한 객체들의 표정을 이용하여 표정 데이터를 생성하는 단계; 및
    운전자 폭력 감지 시스템이 상기 객체 겹침 데이터 및 상기 표정 데이터를 이용하여 폭력 상황 여부를 결정하는 단계
    를 포함하는 운전자 폭력 감지 방법.
KR1020180102479A 2018-08-30 2018-08-30 운전자 폭력 감지 방법 KR102179995B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180102479A KR102179995B1 (ko) 2018-08-30 2018-08-30 운전자 폭력 감지 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180102479A KR102179995B1 (ko) 2018-08-30 2018-08-30 운전자 폭력 감지 방법

Publications (2)

Publication Number Publication Date
KR20200026368A true KR20200026368A (ko) 2020-03-11
KR102179995B1 KR102179995B1 (ko) 2020-11-18

Family

ID=69809677

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180102479A KR102179995B1 (ko) 2018-08-30 2018-08-30 운전자 폭력 감지 방법

Country Status (1)

Country Link
KR (1) KR102179995B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230042926A (ko) * 2021-09-23 2023-03-30 주식회사 소이넷 폭력감지장치 및 방법, 이를 포함하는 스마트 폭력감시시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080101418A (ko) * 2007-05-18 2008-11-21 전진규 대중교통 ｃｃｔｖ 시스템
JP2013131153A (ja) * 2011-12-22 2013-07-04 Welsoc Co Ltd 自律型防犯警戒システム及び自律型防犯警戒方法
KR101572366B1 (ko) * 2014-03-26 2015-11-27 인하대학교 산학협력단 지능형 영상 감시 시스템을 위한 납치 상황 인식 방법
KR20170117901A (ko) 2010-05-20 2017-10-24 한국전자통신연구원 단말을 이용한 사고 및 위험 예방 시스템 및 방법
JP2017223680A (ja) * 2016-12-30 2017-12-21 東軟集団股▲分▼有限公司 目標検出情報を生成する方法、装置、および、機器

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080101418A (ko) * 2007-05-18 2008-11-21 전진규 대중교통 ｃｃｔｖ 시스템
KR20170117901A (ko) 2010-05-20 2017-10-24 한국전자통신연구원 단말을 이용한 사고 및 위험 예방 시스템 및 방법
JP2013131153A (ja) * 2011-12-22 2013-07-04 Welsoc Co Ltd 自律型防犯警戒システム及び自律型防犯警戒方法
KR101572366B1 (ko) * 2014-03-26 2015-11-27 인하대학교 산학협력단 지능형 영상 감시 시스템을 위한 납치 상황 인식 방법
JP2017223680A (ja) * 2016-12-30 2017-12-21 東軟集団股▲分▼有限公司 目標検出情報を生成する方法、装置、および、機器

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230042926A (ko) * 2021-09-23 2023-03-30 주식회사 소이넷 폭력감지장치 및 방법, 이를 포함하는 스마트 폭력감시시스템

Also Published As

Publication number Publication date
KR102179995B1 (ko) 2020-11-18

Similar Documents

Publication Publication Date Title
US10650259B2 (en) Human face recognition method and recognition system based on lip movement information and voice information
CN110268440B (zh) 图像解析装置、图像解析方法、以及存储介质
US10706502B2 (en) Monitoring system
KR101241625B1 (ko) 얼굴 인식 환경 통지 방법, 장치, 및 이 방법을 실행하기 위한 컴퓨터 판독 가능한 기록 매체
JP2017091520A (ja) ユーザ認証のための登録データベースの適応的更新方法及び装置
EP2079039A2 (en) Face collation apparatus
US20160171300A1 (en) Authentication apparatus and method
JP2011215662A (ja) 生体認証装置
CN109902475B (zh) 验证码图像生成方法、装置和电子设备
KR20170082024A (ko) 얼굴 인식 장치 및 방법
US11908157B2 (en) Image processing device, image processing method, and recording medium in which program is stored
CN110532746B (zh) 人脸校验方法、装置、服务器及可读存储介质
CN107025425B (zh) 认证方法和设备以及用于训练识别器的方法和设备
KR20200054367A (ko) 객체 검출 장치 및 그 방법
CN112889062A (zh) 人脸识别数据处理方法、装置、移动设备和计算机可读存储介质
JP5698418B2 (ja) 虹彩認識による識別
KR102215522B1 (ko) 사용자 인증 시스템 및 방법
KR20200026368A (ko) 운전자 폭력 감지 시스템 및 운전자 폭력 감지 방법
US11551477B2 (en) Device, system, and method for performance monitoring and feedback for facial recognition systems
CN114817933A (zh) 评估业务预测模型鲁棒性的方法、装置及计算设备
JP6542819B2 (ja) 画像監視システム
KR102014394B1 (ko) 위조 지문에 대한 보안성이 향상된 휴대용 보안인증기의 인증방법
JP2006099687A (ja) 利用者認証装置
KR20200056186A (ko) 얼굴 인식 장치 및 방법
US11599827B2 (en) Method and apparatus for improving the robustness of a machine learning system

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant