KR102094883B1 - 음향기반 자동차 비정상 징후 감지시스템 및 그 처리방법 - Google Patents
음향기반 자동차 비정상 징후 감지시스템 및 그 처리방법 Download PDFInfo
- Publication number
- KR102094883B1 KR102094883B1 KR1020190048910A KR20190048910A KR102094883B1 KR 102094883 B1 KR102094883 B1 KR 102094883B1 KR 1020190048910 A KR1020190048910 A KR 1020190048910A KR 20190048910 A KR20190048910 A KR 20190048910A KR 102094883 B1 KR102094883 B1 KR 102094883B1
- Authority
- KR
- South Korea
- Prior art keywords
- vehicle
- acoustic
- information
- error
- abnormality
- Prior art date
Links
- 230000002159 abnormal effect Effects 0.000 title claims abstract description 70
- 238000001514 detection method Methods 0.000 title claims abstract description 37
- 238000003672 processing method Methods 0.000 title abstract description 6
- 230000005856 abnormality Effects 0.000 claims abstract description 28
- 238000013507 mapping Methods 0.000 claims abstract description 13
- 208000024891 symptom Diseases 0.000 claims description 40
- 238000000034 method Methods 0.000 claims description 17
- 238000012545 processing Methods 0.000 claims description 17
- 230000005236 sound signal Effects 0.000 claims description 7
- 238000000605 extraction Methods 0.000 claims description 5
- 230000002950 deficient Effects 0.000 claims 2
- 238000012423 maintenance Methods 0.000 description 8
- 238000007781 pre-processing Methods 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000003449 preventive effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000007689 inspection Methods 0.000 description 2
- 230000007257 malfunction Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 230000008439 repair process Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/40—Business processes related to the transportation industry
-
- G06Q50/30—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/02—Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
- B60W50/0205—Diagnosing or detecting failures; Failure detection models
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
- B60Y2306/00—Other features of vehicle sub-units
- B60Y2306/15—Failure diagnostics
-
- G06K2209/15—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
- G06V20/625—License plates
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
- G10H2210/031—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Theoretical Computer Science (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Tourism & Hospitality (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Operations Research (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Testing And Monitoring For Control Systems (AREA)
Abstract
본 발명은 (a) 차량의 기계 또는 전자 장치들에서 발생하는 음향 신호와 해당 차량의 차량번호 및 차종을 포함하는 차량 정보를 수집하는 단계; (b) 수집된 음향 신호를 디지털화하여 음향 정보 데이터를 생성하는 단계; (c) 상기 음향 정보 데이터를 미리 데이터베이스화되어 있는 차종별 오류DB와 매핑하거나, 음향 정보의 패턴을 분석하여 차량의 이상 징후를 검출하는 단계; 및 (d) 음향 정보에서 이상 징후가 발견된 경우 이상 징후 레포트를 생성하여 상기 차종별 오류DB에 저장하고 서비스 제공사 또는 운전자에게 비정상 상황 발생을 알리는 단계;를 포함하는 음향기반 자동차 비정상 징후 감지시스템의 처리방법을 개시한다.
Description
본 발명은 음향기반 자동차 비정상 징후 감지시스템 및 그 처리방법에 관한 것으로서, 더욱 상세하게는 자동차의 전자적, 기계적인 고장이나 정비요인을 자동으로 검출 및 분석하여 자동차의 정상적인 운행에 필요한 정보와 서비스를 실시간으로 통합적으로 제공할 수 있는 음향기반 자동차 비정상 징후 감지시스템 및 그 처리방법에 관한 것이다.
일반적으로, 자동차는 많은 센서들을 장착하고 있어서 운전자로 하여금 센서 이상신호를 알 수 있도록 자동차내의 컴퓨터가 이를 수집, 표시해주고 있다. 또한, 더 정밀한 점검을 하려면 차량에 설치되어 있는 OBD 단자 등을 통해 자동차의 ECU와 통신하여 실시간 체크와 누적된 경고내용, 고장코드(DTC) 등을 응답 받아 이를 정비 등에 활용할 수 있다. 그러나, 이러한 경우는 실제로 자동차가 가지고 있는 센서들에 무엇인가가 검지 된 경우이거나 자동차가 정비소에 입고되어 OBD 스캐너 등으로 전문적인 점검을 실시하는 경우에 해당한다.
그 외의 많은 경우(운행 중이거나 센서에 검지 되는 않는 전자적, 기계적인 오류, 예로써 엔진이 예열되기 전에 발생하는 엔진부조)에는 운전자가 운전하면서 감성적으로 느끼는 경우가 있을 수도 있고, 운전자조차 느끼지 못하는 오류도 있을 수 있다. 근래에 출시되는 자동차들은 NVH(Noise, vibration, and harshness) 대응이 강화되어 승객석으로 유입되는 소음, 진동을 효과적으로 차폐하고 있어서 자동차의 엔진이나 암 등의 부품 들에서 발생하는 이상소음, 진동을 운전자가 인식 못할 수도 있다.
자동차 안전사고의 예방을 위해서는, 운행중인 자동차의 이상징후를 정밀하게는 아니더라도 이상이 있다는 사실만이라도 정확히 검지하는 것이 필요하며, 오류가 해당 차량에 대해서만 발생하는지 동일한 제작연도의 동일한 모델에서 자주 발생하는지에 대한 축적된 데이터를 통한 매칭 분석이 요구된다. 해당 차종에 빈번히 발생하는 오류로 판단되면 이를 동일한 차종의 다른 차량들에 예방정비에 활용하거나, 동일 또는 관련 차종을 보유한 고객들에게 오류 발생 사례를 안내를 해줄 수 있어야 한다.
본 발명은 상기와 같은 문제점을 고려하여 창안된 것으로서, 자동차의 기계 장치들에서 발생하는 음향을 이용하여 자동차의 비정상 징후를 파악하고 운전자에게 필요한 솔루션과 서비스 매칭을 제시할 수 있는 음향기반 자동차 비정상 징후 감지시스템 및 그 처리방법을 제공하는 데 그 목적이 있다.
본 발명의 다른 목적은 운전자가 서비스 시설들을 이용하면서 자동차의 비정상 징후에 대한 정보를 제공받아서 연계된 조치 서비스를 받을 수 있도록 하는 음향기반 자동차 비정상 징후 감지시스템 및 그 처리방법을 제공하는 데 있다.
상기와 같은 목적을 달성하기 위해 본 발명은, (a) 차량의 기계 또는 전자 장치들에서 발생하는 음향 신호와 해당 차량의 차량번호 및 차종을 포함하는 차량 정보를 수집하는 단계; (b) 수집된 음향 신호를 디지털화하여 음향 정보 데이터를 생성하는 단계; (c) 상기 음향 정보 데이터를 미리 데이터베이스화되어 있는 차종별 오류DB와 매핑하거나, 음향 정보의 패턴을 분석하여 차량의 이상 징후를 검출하는 단계; 및 (d) 음향 정보에서 이상 징후가 발견된 경우 이상 징후 레포트를 생성하여 상기 차종별 오류DB에 저장하고 서비스 제공사 또는 운전자에게 비정상 상황 발생을 알리는 단계;를 포함하는 음향기반 자동차 비정상 징후 감지시스템의 처리방법을 제공한다.
상기 단계 (a)는, 차량의 내부 또는 외부에 설치된 마이크로폰 또는 운전자가 소지한 스마트폰을 통하여 상기 음향 신호를 수집할 수 있다.
상기 단계 (b)는, 수집된 음향 신호를 푸리에 변환 및 노이즈 제거 처리하여 차량의 기계 장치들에서 발생하는 주파수 성분으로 이루어진 음향 정보 데이터를 생성하는 것이 바람직하다.
상기 단계 (c)는, 음향 정보의 패턴을 분석하여 주기적인 패턴 내에 이상 패턴의 이벤트가 발생했을 때 차량의 이상 징후 상태로 판단할 수 있다.
상기 단계 (a)는, 게이트 설비에 설치된 카메라를 통하여 인식된 차량번호로부터 부가정보 제공 사업자나 공공정보API로부터 해당 차량의 차종 정보를 획득할 수 있다.
부가적으로, 차량의 차종정보별로 보고된 이상 징후 사례를 분석하여 이상 징후의 발생을 예측하고 사례 정보와 해결에 필요한 정보를 상기 게이트 설비에 설치된 정보출력장치를 통해 안내할 수 있다.
본 발명의 다른 측면에 따르면, 차량의 기계 또는 전자 장치들에서 발생하는 음향 신호를 수집하는 음향신호 획득부; 상기 차량의 차량번호를 획득하여 차종 정보를 조회하는 차종정보 조회부; 수집된 음향 신호를 디지털화하여 음향 정보 데이터를 생성하는 음향정보 전처리부; 차종별 오류 사례 정보를 저장하는 차종별 오류DB; 상기 음향 정보 데이터를 상기 차종별 오류DB와 매핑하는 차종정보 매핑부; 음향 정보의 패턴을 분석하여 차량의 이상 징후를 검출하는 음향정보 이벤트 추출부; 및 음향 정보에서 이상 징후가 발견된 경우 이상 징후 레포트를 생성하여 상기 차종별 오류DB를 업데이트하고 운전자에게 비정상 상황 발생을 알리는 이상징후 레포트 처리부;를 포함하는 음향기반 자동차 비정상 징후 감지시스템이 제공된다.
본 발명에 따른 음향기반 자동차 비정상 징후 감지시스템 및 그 처리방법은 다음과 같은 효과를 가진다.
첫째, 자동차에서 발생하는 음향 정보를 수집, 분석하여 자동차의 비정상 징후를 실시간으로 파악함으로써 안전사고를 미연에 방지하고 운전자에게 필요한 솔루션과 서비스 매칭을 제시할 수 있다.
둘째, 자동차 관련 게이트 시설들을 통과하면서 자연스럽게 자동차의 기계적인, 전자적인 이상 징후를 사전에 발견하여 필요한 조치 또는 서비스 연계를 제공받을 수 있다.
셋째, 오류 발견 데이터들을 차종정보별로 축적함으로써 유사한 부품들에 의한 유사한 고장, 정비 요인을 사전에 알아 낼 수 있고, 세부 정비 정보를 제공받아 자동차에 대한 상세한 고장, 정비 이력을 축적할 수 있다.
넷째, 자동차의 정상적인 운행에 필요한 정보와 서비스를 실시간으로 통합적으로 제공할 수 있는 커넥티드카 서비스 플랫폼을 구현하는 핵심기술과 서비스를 제공할 수 있다.
본 명세서에 첨부되는 다음의 도면들은 본 발명의 바람직한 실시예를 예시하는 것이며, 후술되는 발명의 상세한 설명과 함께 본 발명의 기술사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석되어서는 아니된다.
도 1은 본 발명의 바람직한 실시예에 따른 음향기반 비정상 징후 감지시스템의 운용방식을 개략적으로 나타낸 개념도이다.
도 2는 본 발명의 바람직한 실시예에 따른 음향기반 비정상 징후 감지시스템에 의해 수행되는 서비스 방법을 도시한 흐름도이다.
도 3은 본 발명의 바람직한 실시예에 따른 음향기반 비정상 징후 감지시스템의 기능적 구성을 상세히 도시한 블록도이다.
도 4는 본 발명의 바람직한 실시예에 따른 음향기반 비정상 징후 감지시스템에 의해 처리되는 음향 정보 및 차종 정보를 예시한 테이블이다.
도 1은 본 발명의 바람직한 실시예에 따른 음향기반 비정상 징후 감지시스템의 운용방식을 개략적으로 나타낸 개념도이다.
도 2는 본 발명의 바람직한 실시예에 따른 음향기반 비정상 징후 감지시스템에 의해 수행되는 서비스 방법을 도시한 흐름도이다.
도 3은 본 발명의 바람직한 실시예에 따른 음향기반 비정상 징후 감지시스템의 기능적 구성을 상세히 도시한 블록도이다.
도 4는 본 발명의 바람직한 실시예에 따른 음향기반 비정상 징후 감지시스템에 의해 처리되는 음향 정보 및 차종 정보를 예시한 테이블이다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다. 이에 앞서, 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서, 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.
도 1은 본 발명의 바람직한 실시예에 따른 음향기반 비정상 징후 감지시스템의 운용 방식을 개략적으로 나타낸 개념도이다.
도 1을 참조하면, 자동차(100)가 주차장, 세차장, 정비소 등의 서비스 제공사(101)에 구축된 게이트 설비에 진입할 때 차단기나 과속방지턱(112)을 저속으로 통과하게 되는데, 이때 자동차가 지나는 지면의 하부나 자동차의 측방에 설치된 마이크로폰 형태의 음향센서(111)를 통하여 자동차의 기계, 전자 장치들에서 발생하는 음향 정보가 수집된다. 수집된 음향 정보는 유,무선 인터넷과 같은 네트워크를 통해 음향기반 비정상 징후 감지시스템(102)에 자동 전송된다(114).
자동차가 서비스 제공사(101)의 소정 게이트 설비를 통과하면서 딥 러닝 방식 등을 사용하는 소정 차량번호 인식 시스템의 카메라(113)에 의해 차량번호가 촬영되어 차량번호가 자동 인식되고, 인식된 차량번호 정보는 수집된 음향 정보와 함께 음향기반 비정상 징후 감지시스템(102)에 자동 전송된다(115).
차량번호 정보와 음향 정보를 수신한 음향기반 비정상 징후 감지시스템(102)의 관리서버(116)는 해당 정보들을 차종정보제공사(103)의 서버(118)와 통신하여 차종상세정보를 조회한다. 또한, 음향기반 비정상 징후 감지시스템(102)의 내부 처리엔진(117)에서는 음향 데이터를 분석, 처리한다. 이때 수집된 정보들은 내부의 소정 데이터베이스(119)에 저장된다.
음향기반 비정상 징후 감지시스템(102)은 상기와 같이 분석, 취합 및 융합된 정보들을 바탕으로 이상 징후의 발생을 인식하고, 해당 서비스 제공사(101)에 자동차가 입/출차되는 시점이나, 다른 서비스 제공사(104)에 입차하는 시점에 분석된 레포팅 정보를 운전자에게 소정의 정보표시기(125)나 기타 스마트폰 앱, 이메일 등의 연결 가능한 채널을 통해 제공한다.
도 2는 본 발명의 바람직한 실시예에 따른 음향기반 비정상 징후 감지시스템에 의해 수행되는 서비스 방법을 도시한 흐름도이다.
도 2에 나타난 바와 같이, 본 발명의 바람직한 실시예에 따르면 자동차를 운행하는 고객(100)과, 차량번호를 인식하는 서비스 제공사(101)와, 음향기반 비정상 징후 감지시스템(102)과, 차종정보 제공사(103)와, 자동차의 상태를 고객에게 레포팅 해줄 수 있는 서비스제공사(104) 간의 상호작용을 통해 서비스가 수행된다.
자동차가 게이트 설비를 통과하는 과정에서(단계 S201), 게이트를 운영하는 서비스제공사(101)가 별도로 존재하는 경우에는 해당 서비스제공사(101)가 차량번호 및 음향정보를 수집하고(단계 S203)하고 이를 음향기반 비정상 징후 감지시스템(102)에 전송한다(단계 S204). 서비스제공사가 별도로 없거나 해당 시설관리를 음향기반 비정상 징후 감지시스템(102)에서 직접하는 경우에는 직접 정보를 수신하여(단계 S202), 차량번호와 음향 정보를 수집한다(단계 S205).
음향기반 비정상 징후 감지시스템(102)은 수집된 차량번호, 음향 정보를 로그성 데이터베이스에 1차 저장하는 등의 수신 처리(단계 S207)를 하고 차종정보조회를 차종정보제공사(103)에 요청하는 통신을 수행한다(단계 S208 및 단계 S209).
차종정보제공사(103)에서는 자체 데이터베이스나 외부 API와 연동하여 관련 정보를 생성하고(단계 S212) 그 결과를 음향기반 비정상 징후 감지시스템(102)에 돌려준다(단계 S213).
음향기반 비정상 징후 감지시스템(102)은 차종정보 조회 요청 후에 음향 정보 신호에 대해 푸리에 변환(Fourier transform)과 노이즈 제거 작업의 전처리를 수행하고(단계 S210), 여기서 컴퓨터 학습을 통한 패턴 분석으로 주기적이거나 비주기적이면서 특이한 정보를 분석한다(단계 S211). 또한, 음향기반 비정상 징후 감지시스템(102)은 분석된 정보와 조회된 차종정보 및 자체 보유하고 있는 차종별 오류내역(자체DB, 공공API 또는 SNS 등의 사용자정보 등)과 매핑하여(단계 S214), 해당 오류의 발생이 현재 차량에 한정된 문제인지, 차종별 특성에 따른 문제인지를 평가, 분석한다(단계 S215). 분석된 레포팅 정보는 입차하는 시점의 고객에게 바로 표시하거나(단계 S217), 지정된 고객 또는 운전자에게 알려준다.
해당 자동차가 또 다른 서비스제공사(104)에 입차하게 될 때(단계 S218), 해당 서비스제공사(104)는 자체 시설에 구축된 인식 시스템을 이용해 차량번호를 인식하여 획득하고(단계 S219 및 단계 S220), 해당 차량에 대한 차종 정보를 음향기반 비정상 징후 감지시스템(102)에 전송한다(단계 S221).
음향기반 비정상 징후 감지시스템(102)에서는 해당 차량번호를 조회하여(단계 S222) 해당하는 기존 검색, 분석, 축적된 내용들을 바탕으로 이상 징후 레포팅 정보를 생성하고(단계 S223), 이를 서비스 제공사(104)에 전송하여 응답을 준다(단계 S224).서비스 제공사(104)는 이상 징후 레포팅 결과에 따라 자사나 협업에 의해 서비스가 가능한 정보들과 융합하여(단계 S225) 자동차를 운행하거나 소유한 고객에게 정보를 표시, 제안해 주고(단계 S226), 기타 고객과의 다른 채널로도 관련 내용을 전달한다(단계 S228).
도 3은 본 발명의 바람직한 실시예에 따른 음향기반 비정상 징후 감지시스템(102)의 기능적 구성을 상세히 도시한 블록도이다.
도 3을 참조하면, 본 발명의 바람직한 실시예에 따른 음향기반 비정상 징후 감지시스템(102)은 음향신호 획득부(102a), 차종정보 조회부(102b), 음향정보 전처리부(102c), 차종정보 매핑부(102d), 음향정보 이벤트 추출부(102e) 및 이상징후 레포트 처리부(102f) 및 차종별 오류DB(102d)를 포함한다.
음향신호 획득부(102a)는 차량의 기계, 전자 장치들에서 발생하는 음향 신호를 수집한다.
자동차의 이상징후 파악을 위한 음향 신호의 수집은 자동차의 승객석이나 엔진룸, 하부나 자동차의 외부에 설치된 소정의 마이크로폰 등의 음향센서에 의해 수행된다. 자동차 내에는 바퀴 부분이나 구동계 등의 기계적으로 다양한 기구들이 결합되어 있으므로 다양한 내력, 외력이 작용하는 부분에 배치하는 것이 효과적이다. 자동차 외부에는 빈번이 자주 이용하는 장소이면서 자동차에 서비스를 제공하기 용이한 곳(주차장, 주유소, 세차장, 정비소, 자동차를 타고 이용하는 카페 등)들의 입구의 하단, 옆면 등에 설치하는 것이 바람직하다. 이러한 곳에 마이크로폰 등의 음향 센서는 가청주파수(20~20,000Hz)를 넘어서는 주파수까지 검지하는 것이 기계적인 이상징후 포착에 유리하다. 음향 센서는 차량이 일정한 속도로 움직이거나 정지 상태일 때의 기계적인 음향을 수집한다. 이렇게 수집된 음향 신호를 직접 연결 또는 통신으로 연결된 분석컴퓨터를 통해 분석을 해서 특이한 주파수의 패턴을 찾아낸다.
자동차 차량번호의 인식은 서비스 제공사의 게이트 설비에 설치된 카메라를 통해 수행된다. 차량번호를 시스템 내부나 외부 서비스 업체를 통하여 해당 차량의 세부 차종정보를 매칭하여 데이터베이스화 한다면, 출입한 특정 차량에만 해당하는 이상 징후들을 차종별로 묶어서 판별할 수 있어서 차종 특성에 따른 이상징후 인지, 특정 자동차에 대한 것인지 판별하여 타겟팅화 된 데이터로서 사용이 가능해진다.
차종정보 조회부(102b)는 자동차의 차량번호를 획득하여 차종 정보를 조회한다. 게이트 설비에 설치된 카메라를 통하여 인식된 차량번호로부터 부가정보 제공 사업자나 공공정보API로부터 해당 차량의 차종 정보를 획득한다. 즉, 해당 자동차의 세부적인 차종정보는, 예컨대 '12가1234' 라는 차량번호를 읽은 후에 '차대번호(VIN)=KN12345678A123456; 브랜드=현대; 모델=그랜져IG; 트림=3.0; 가솔린; 세부트림=익스클루시브 스페셜; 미션=오토; 구동=전륜; 모델=2017년식; 제작=2019년02월; 형식명=HG4EBK-G; 승차정원=5; 원동기형식=G6DG; 배기량=2999; 차체길이=4920; 차체너비=1860; 에어백=어드밴스; 옵션=어라운드뷰; 타이어=19인치; 썬루프=Y' 와 같이 세분화된 분류정보를 획득한다.
음향정보 전처리부(102c)는 수집된 음향 신호를 디지털화하여 음향 정보 데이터를 생성한다. 구체적으로, 음향정보 전처리부(102c)는 도 4에 나타난 바와 같이수집된 음향 신호를 푸리에 변환 및 노이즈 제거 처리하여 차량의 기계 장치들에서 발생하는 주파수 성분으로 이루어진 음향 정보 데이터를 생성한다.
차종정보 매핑부(102d)는 음향 정보 데이터를 차종별 각종 오류 사례 정보를 저장하고 있는 차종별 오류DB(102g)와 매핑하여 차량의 이상 징후를 검출할 수 있도록 한다.
음향정보 이벤트 추출부(102e)는 음향정보 전처리부(102c)에 의해 생성된 음향 정보 데이터에 대하여 음향 정보의 패턴을 분석하여 차량의 이상 징후를 검출한다. 이와 관련하여, 도 4에는 음향 정보의 패턴 분석 과정이 개략적으로 도시되어 있다.
이상징후 레포트 처리부(102f)는 음향 정보에서 이상 징후가 발견된 경우 이상 징후 레포트를 생성하여 차종별 오류DB(102g)를 업데이트하고 운전자에게 비정상 상황 발생을 자동차 회사 등의 고객이나 운전자에게 알린다.
수집된 음향 정보에서 기계적인 이상 징후가 고장으로 판단이 되면 이를 자동차들에 대해 서비스를 제공하는 다양한 업체의 시스템에 연동하여 해당 자동차가 다른 곳의 서비스를 받으려 입,출구로 들어서는 순간 해당 차량의 이상 징후 내용을 자동차 서비스를 제공하는 시스템으로 보내 운전자에게 보여주는 것이 바람직하다. 이때, 이러한 시스템간의 실시간 연동에 의한 제공 뿐만이 아니라 운전자나 소유자 등이 이용하는 스마트폰 앱이나 전송이 허용된 전화번호, 이메일 등을 통하여 해당 메시지를 직접 전달하는 것도 가능하여야 한다. 해당 고객이나 운전자에게 메시지를 전달시에 관련 서비스를 받을 수 있는 곳의 정보(가격, 고객평가, 위치, 상호 등)도 제공할 수 있도록 하여 운전자 또는 운전자에게 위임을 받은 지능형시스템(예, 자율주행시스템 등)이 필요시 쉽게 이용할 수 있도록 하여야 한다.
음향기반 비정상 징후 감지시스템(102)에는 SNS 오류보고 처리부(102h)가 구비되어 차종별 오류DB(102g)의 데이터베이스 신뢰도를 높이고 신속한 데이터 업데이트가 이루어질 수 있다. SNS 오류보고 처리부(102h)는 인터넷 뉴스나 트위터 등과 같은 SNS를 통하여 특정 차종에 대한 오류가 보고되었을 때 그 오류 내역을 분석하고 해당 차종에 결함이 있는 것으로 판단된 경우에 차종별 오류DB(102g)를 반영하여 오류 데이터를 업데이트한다.
본 발명의 또 다른 측면에 따르면, 차량의 기계 또는 전자 장치들에서 발생하는 음향 신호와 해당 차량의 차량번호 및 차종을 포함하는 차량 정보를 수집하는 절차와, 수집된 음향 신호를 디지털화하여 음향 정보 데이터를 생성하는 절차와, 상기 음향 정보 데이터를 미리 데이터베이스화되어 있는 차종별 오류DB와 매핑하거나, 음향 정보의 패턴을 분석하여 차량의 이상 징후를 검출하는 절차와, 음향 정보에서 이상 징후가 발견된 경우 이상 징후 레포트를 생성하여 상기 차종별 오류DB에 저장하고 서비스 제공사 또는 운전자에게 비정상 상황 발생을 알리는 절차를 컴퓨터상에서 실행할 수 있는 프로그램을 기록한 기록매체(예컨대, 자기기록매체, CD롬, 플래쉬 메모리등)가 제공된다.
상술한 바와 같이 본 발명에 따르면 자동차가 서비스 제공사의 게이트 설비에 입차를 했을 때, 차량번호와 자동차에서 발생하는 음향 신호를 수집하게 되며 이후 음향정보의 전처리와 차종정보의 조회를 통해 차량의 상세정보를 확보하게 된다. 또한, 정련된 음향 정보를 기존에 해당 차량에 대해 수집된 정보들과 비교해서 이상 징후를 찾아내거나, 차종별 오류DB를 검색하여 오류 또는 예방 정비할 내용을 찾아내거나, 음향 정보를 컴퓨터 학습에 의한 패턴을 분석하여서 이상 패턴이나 이상 주파수를 검출하여 이상 징후를 찾아낸다. 이상 징후와 예방정비할 내용이 확보되면 이를 차종 정보들과 융합하여 해당차종별 오류내역 및 해당 차량의 오류내용에 대한 레포트를 생성한다.
레포트를 생성한 후에는 현재 입차하고 있는 해당 서비스 제공사에 설치된 게이트 설비의 정보표시장치에 레포트 내용을 보내거나, 자동차 회사 등에 해당하는 고객 또는 운전자와의 채널을 통해 보내거나, 아니면 다른 서비스제공사에 입차하는 경우에 해당 서비스제공사에서 조회요청을 하는 경우 해당 레포트 내용을 전송하여 서비스가 연계될 수 있도록 한다.
상기와 같이 자동차의 음향정보를 통해 이상 징후를 포착하는 것이 가능하며 이를 차종정보별로 데이터베이스화하고 컴퓨터 학습 엔진을 통해 분석함으로써 차종별 오류에 의한 예방정비도 가능하게 되며, 이러한 과정이 자동차를 이용하는 곳에서 운전자에게 즉시적으로 전달, 서비스 연계가 됨으로써 서비스 제공사들에게 더 많은 사업 기회와 양질의 고객 서비스를 지원할 수 있다.
이상에서 본 발명은 비록 한정된 실시 예와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술사상의 균등범위 내에서 다양한 수정 및 변형이 가능함은 물론이다.
102: 음향기반 비정상 징후 감지시스템 102a: 음향신호 획득부
102b: 차종정보 조회부 102c: 음향정보 전처리부
102d: 차종정보 매핑부 102e: 음향정보 이벤트 추출부
102f: 이상정보 레포트 처리부 102g: 차종별 오류DB
102h: SNS 오류보고 처리부
102b: 차종정보 조회부 102c: 음향정보 전처리부
102d: 차종정보 매핑부 102e: 음향정보 이벤트 추출부
102f: 이상정보 레포트 처리부 102g: 차종별 오류DB
102h: SNS 오류보고 처리부
Claims (7)
- (a) 차량의 기계 또는 전자 장치들에서 발생하는 음향 신호와 해당 차량의 차량번호 및 차종을 포함하는 차량 정보를 수집하는 단계;
(b) 수집된 음향 신호를 디지털화하여 음향 정보 데이터를 생성하는 단계;
(c) 상기 음향 정보 데이터를 미리 데이터베이스화되어 있는 차종별 오류DB와 매핑하여 차량의 이상 징후를 검출하는 단계; 및
(d) 음향 정보에서 이상 징후가 발견된 경우 이상 징후 레포트를 생성하여 상기 차종별 오류DB에 저장하고 서비스 제공사 또는 운전자에게 비정상 상황 발생을 알리는 단계;를 포함하고,
상기 단계 (a)는,
게이트 설비에 설치된 카메라를 통하여 인식된 차량번호로부터 부가정보 제공 사업자나 공공정보API로부터 해당 차량의 차종 정보를 획득하고,
상기 단계 (c)는,
인터넷 뉴스나 SNS를 통하여 특정 차종에 대한 오류가 보고되었을 때 그 오류 내역을 분석하고 해당 차종에 결함이 있는 것으로 판단된 경우에 상기 차종별 오류DB에 반영하여 오류 데이터를 업데이트하고,
상기 음향 정보 데이터를 상기 차종별 오류DB와 매핑하여 해당 오류의 발생이 현재 차량에 한정된 문제인지, 차종별 특성에 따른 문제인지를 평가, 분석하여 차량의 이상 징후를 검출하는 것을 특징으로 하는 음향기반 자동차 비정상 징후 감지시스템의 처리방법. - 제1항에 있어서, 상기 단계 (a)는,
차량의 내부 또는 외부에 설치된 마이크로폰 또는 운전자가 소지한 스마트폰을 통하여 상기 음향 신호를 수집하는 것을 특징으로 하는 음향기반 자동차 비정상 징후 감지시스템의 처리방법. - 제1항에 있어서, 상기 단계 (b)는,
수집된 음향 신호를 푸리에 변환 및 노이즈 제거 처리하여 차량의 기계 장치들에서 발생하는 주파수 성분으로 이루어진 음향 정보 데이터를 생성하는 것을 특징으로 하는 음향기반 자동차 비정상 징후 감지시스템의 처리방법. - 삭제
- 삭제
- 제1항에 있어서,
차량의 차종정보별로 보고된 이상 징후 사례를 분석하여 이상 징후의 발생을 예측하고 사례 정보와 해결에 필요한 정보를 상기 게이트 설비에 설치된 정보출력장치를 통해 안내하는 것을 특징으로 하는 음향기반 자동차 비정상 징후 감지시스템의 처리방법. - 차량의 기계 장치들에서 발생하는 음향 신호를 수집하는 음향신호 획득부;
상기 차량의 차량번호를 획득하여 차종 정보를 조회하는 차종정보 조회부;
수집된 음향 신호를 디지털화하여 음향 정보 데이터를 생성하는 음향정보 전처리부;
차종별 오류 사례 정보를 저장하는 차종별 오류DB;
상기 음향 정보 데이터를 상기 차종별 오류DB와 매핑하여 차량의 이상 징후를 검출하는 차종정보 매핑부;
상기 음향 정보 데이터에서 음향 정보의 패턴을 분석하여 차량의 이상 징후를 검출하는 음향정보 이벤트 추출부;
상기 음향 정보에서 이상 징후가 발견된 경우 이상 징후 레포트를 생성하여 상기 차종별 오류DB를 업데이트하고 운전자에게 비정상 상황 발생을 알리는 이상징후 레포트 처리부; 및
인터넷 뉴스나 SNS를 통하여 특정 차종에 대한 오류가 보고되었을 때 그 오류 내역을 분석하고 해당 차종에 결함이 있는 것으로 판단된 경우에 상기 차종별 오류DB에 반영하여 오류 데이터를 업데이트하는 SNS 오류보고 처리부;를 포함하고,
상기 차종정보 매핑부는,
상기 음향 정보 데이터를 상기 차종별 오류DB와 매핑하여 해당 오류의 발생이 현재 차량에 한정된 문제인지, 차종별 특성에 따른 문제인지를 평가, 분석하여 차량의 이상 징후를 검출하는 것을 특징으로 하는 음향기반 자동차 비정상 징후 감지시스템.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190048910A KR102094883B1 (ko) | 2019-04-26 | 2019-04-26 | 음향기반 자동차 비정상 징후 감지시스템 및 그 처리방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190048910A KR102094883B1 (ko) | 2019-04-26 | 2019-04-26 | 음향기반 자동차 비정상 징후 감지시스템 및 그 처리방법 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR102094883B1 true KR102094883B1 (ko) | 2020-03-30 |
Family
ID=70003214
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020190048910A KR102094883B1 (ko) | 2019-04-26 | 2019-04-26 | 음향기반 자동차 비정상 징후 감지시스템 및 그 처리방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102094883B1 (ko) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102305809B1 (ko) * | 2020-12-23 | 2021-09-30 | 주식회사 오씨모바일 | 중고자동차의 지능형 성능점검 서비스 시스템과 그 방법 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012513600A (ja) * | 2008-12-23 | 2012-06-14 | トヨタ モーター セールス，ユー．エス．エー．，インコーポレイティド | Ｇｐｓゲートシステム |
| KR20180029543A (ko) * | 2016-09-13 | 2018-03-21 | 오토시맨틱스 주식회사 | 딥러닝을 통한 자동차 상태 진단 방법 |
| KR101826647B1 (ko) * | 2016-10-19 | 2018-03-22 | 김성국 | 머신 러닝 기술을 통한 개인 맞춤형 자동차 중개 시스템 |
| KR101915126B1 (ko) * | 2017-08-31 | 2018-12-28 | 장미희 | Crm 서비스를 이용한 차량정비 고객관리 시스템 |
-
2019
- 2019-04-26 KR KR1020190048910A patent/KR102094883B1/ko active IP Right Grant
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012513600A (ja) * | 2008-12-23 | 2012-06-14 | トヨタ モーター セールス，ユー．エス．エー．，インコーポレイティド | Ｇｐｓゲートシステム |
| KR20180029543A (ko) * | 2016-09-13 | 2018-03-21 | 오토시맨틱스 주식회사 | 딥러닝을 통한 자동차 상태 진단 방법 |
| KR101826647B1 (ko) * | 2016-10-19 | 2018-03-22 | 김성국 | 머신 러닝 기술을 통한 개인 맞춤형 자동차 중개 시스템 |
| KR101915126B1 (ko) * | 2017-08-31 | 2018-12-28 | 장미희 | Crm 서비스를 이용한 차량정비 고객관리 시스템 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102305809B1 (ko) * | 2020-12-23 | 2021-09-30 | 주식회사 오씨모바일 | 중고자동차의 지능형 성능점검 서비스 시스템과 그 방법 |
| WO2022139409A1 (ko) * | 2020-12-23 | 2022-06-30 | 주식회사 오씨모바일 | 중고자동차의 지능형 성능점검 서비스 시스템과 그 방법 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102305809B1 (ko) | 중고자동차의 지능형 성능점검 서비스 시스템과 그 방법 | |
| KR101683242B1 (ko) | 차량 상태 진단 및 운전자 정보 제공 시스템 | |
| US9721399B2 (en) | Vehicle diagnosing apparatus, vehicle diagnosing system, and diagnosing method | |
| EP1836693B1 (en) | Rfid vehicle management system and method | |
| US8825271B2 (en) | Smart phone app-based VIN decoding and symptomatic diagnostic system and method | |
| CN102069781B (zh) | 允许远程信息处理的聚合的车辆诊断和预报 | |
| US20220114560A1 (en) | Predictive maintenance | |
| CN107490488A (zh) | 经由噪声和振动水平进行的车辆健康状况检查 | |
| EP3734570A1 (en) | Vehicle detection method, apparatus, device and readable storage medium | |
| US20190213684A1 (en) | Integrated vehicular monitoring and communication system | |
| US10002394B1 (en) | Roadside reporter system | |
| JP2002123881A (ja) | 車載故障警報通報システム | |
| KR20020064175A (ko) | 차량의 원격 고장 진단용 서버, 차량의 원격 고장 진단방법, 원격 고장 진단용 프로그램 및 차재(車載) 원격고장 진단 장치 | |
| WO2023149634A1 (ko) | 음향 데이터 분석 기반 중고차 ａｉ 성능점검 시스템과 그 처리방법 | |
| CN113703429B (zh) | 一种用于执行车辆的诊断的方法和装置 | |
| US20230249697A1 (en) | Systems and methods of determining effectiveness of vehicle safety features | |
| KR102094883B1 (ko) | 음향기반 자동차 비정상 징후 감지시스템 및 그 처리방법 | |
| CN111311044A (zh) | 一种车辆定损方法及其系统 | |
| CN108254199B (zh) | 车辆健康预测方法、装置及设备 | |
| KR20080053082A (ko) | 텔레매틱스 서비스 제공 장치 및 그 방법 | |
| KR102493559B1 (ko) | 스마트 차량정비 시스템 | |
| WO2012082700A1 (en) | Automated automobile management system | |
| US20230054982A1 (en) | Asset inspection assistant | |
| CN113516798A (zh) | 一种调表车判断方法和装置 | |
| CN113192348A (zh) | 车辆异常告警方法、装置及计算机设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |