KR20120119537A - 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법 - Google Patents

차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법 Download PDF

Info

Publication number
KR20120119537A
KR20120119537A KR1020110037521A KR20110037521A KR20120119537A KR 20120119537 A KR20120119537 A KR 20120119537A KR 1020110037521 A KR1020110037521 A KR 1020110037521A KR 20110037521 A KR20110037521 A KR 20110037521A KR 20120119537 A KR20120119537 A KR 20120119537A
Authority
KR
South Korea
Prior art keywords
vehicle
seat
image
camera
display device
Prior art date
Application number
KR1020110037521A
Other languages
English (en)
Other versions
KR101241861B1 (ko
Inventor
유윤식
김창영
전영준
송봉기
김태준
Original Assignee
동의대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 동의대학교 산학협력단 filed Critical 동의대학교 산학협력단
Priority to KR1020110037521A priority Critical patent/KR101241861B1/ko
Publication of KR20120119537A publication Critical patent/KR20120119537A/ko
Application granted granted Critical
Publication of KR101241861B1 publication Critical patent/KR101241861B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B5/00Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied
    • G08B5/22Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission

Abstract

본 발명은 차량 뒷좌석 부분을 정밀 촬영하여 탑승자 움직임 및 음향 레벨에 따라 뒷좌석의 영상을 최우선 순위로 디스플레이하여 운전의 안전성 및 편리성을 높인 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법에 관한 것으로, 차량내에 설치되어 차량 뒷좌석 부분을 촬영하는 차량 뒷좌석 카메라;운전자가 전방 주시 상태에서 표시되는 영상을 확인할 수 있는 위치에 설치되는 운전석 디스플레이 장치;차량의 후방에서 다른 차량의 접근을 감지하는 차량 후방 센서;상기 차량 뒷좌석 카메라의 영상 또는 상기 차량 후방 센서의 감지 결과를 기준으로 경고 문구를 변경하여 표시하는 차량 후방 디스플레이 장치;상기 차량 뒷좌석 카메라의 영상 및 차량 후방 센서의 센싱 결과를 기준으로 운전석 디스플레이 장치에 표시되는 영상의 선택 및 차량 후방 디스플레이 장치에 표시되는 경고 문구의 변경을 제어하는 뒷좌석 상황 관리 제어부;를 포함한다.

Description

차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법{System and Method for intelligent monitoring using proximity sensor and in vehicle camera}
본 발명은 차량의 지능형 감시 시스템에 관한 것으로, 구체적으로 차량 뒷좌석 부분을 정밀 촬영하여 탑승자 움직임 및 음향 레벨에 따라 뒷좌석의 영상을 최우선 순위로 디스플레이하여 운전의 안전성 및 편리성을 높인 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법에 관한 것이다.
최근 차량이 고급화되고 CCD 동영상 카메라 등의 가격이 저렴해짐에 따라서, 차량에 예를 들면, 전방, 후방, 좌측방 및 우측방의 영상을 촬영할 수 있도록 다수의 카메라를 장착하고 있다.
이와 같은 종래 기술은 자동차가 주행 중이거나 주차 시 차량주변의 지역을 모니터에 평면도로 보여주어, 차량 속도에 따라 카메라 각에 변화를 줌으로써 주변의 장애물이나 접촉위험에 대해 대처할 수 있다.
또한, 차량 사고 현장을 촬영하여 기록하는 사고 기록장치들은 대부분 차량 외부를 촬영하는 장치이고, 일부 차량 내부를 촬영하는 장치가 제안된 바가 있으나, 이들은 단지 차량의 내부 일측에 카메라를 설치하여 내부 상황을 촬영한 것으로 차량 내부 상황을 정밀하게 판단하는 것이 어렵다.
특히, 카메라의 설치 위치가 룸미러에 한정되어 있는데, 이는 하나의 카메라로 차량 내부 모두를 촬영하기 위한 것으로 운전자가 뒷좌석의 상황을 정확하게 판단하기에는 어려움이 있다.
이와 같은 종래 기술의 차량내 감시는 운전자 위주 또는 사고 발생 등에 주안점을 두고 있으며, 특히 지능형 차량이 나오면서 운전자의 졸음상태를 확인하여 경보등으로 알려주는 졸음방지 시스템과 사고시 등을 대비한 차량내 블랙박스 장치가 있으며, 차량외부의 경우 여러대의 카메라나 어라운드뷰 카메라를 통해 영상을 촬영하여 운전자나 웹 등에 서비스를 제공하고 있다.
이러한 차량 사고 방지를 위한 시스템들의 발전에도 불구하고 차량의 안전 운전에 대한 요구는 계속되고 있다.
차량 운전중에 사고 위험이 큰 경우는 졸음 운전, 운전중 통화보다는 운전중에 뒷좌석의 돌발 상황에 따라 운전자의 시야가 전방을 주시하지 않고 후방을 주시하면서 주행을 하는 경우이다.
예를 들어, 차량에 어린이나 유아가 타고 있는 경우 운전에 주의를 하게 되며, 특히 어린이나 유아가 뒷좌석에 있는 경우 운전자나 조수석에서 상황 파악이 힘들고 확인을 위하여 향상 뒤를 돌아보거가 물어봐야 하고, 유아의 경우는 특히 운전중에 상태를 파악하기가 매우 어렵다.
이와 같이 뒷좌석에서 놀고 있는 어린이나 유아용시트에 있는 애기의 현재 상태를 파악하기가 어렵고 경우에 따라서 운전중 뒷좌석의 상태 파악을 위해 뒤를 돌아보는 경우가 자주 발생하게 되어 안전운전에 방해를 주고 또한 사고의 원인을 제공하는 경우가 많이 발생하고 있다.
그러나 종래 기술에서는 차량주변 감시 장치를 위한 블랙박스나 운전자 졸음방지, HUD와 같은 운전자 위주의 제품이나 기술들은 많이 제안되고 있으나, 뒷좌석에서의 돌발 상황에 대처하기 위한 기술의 개발이 많이 이루어지지 않고 있다.
일반적으로 레져활동이 많아지고 가족들이 차량에서 보내는 시간이 점점 더 증가하고 있으나, 운전자 중심으로 안전과 편의장치가 개발되고 있어 승객 특히 뒷좌석의 어린이나 유아를 위한 편의장치나 안전장치들은 아직 미흡한 실정이다.
본 발명은 이와 같은 종래 기술의 차량 감시 시스템의 문제를 해결하기 위한 것으로, 차량 뒷좌석 부분을 정밀 촬영하여 탑승자 움직임 및 음향 레벨에 따라 뒷좌석의 영상을 최우선 순위로 디스플레이하여 운전의 안전성 및 편리성을 높인 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법을 제공하는데 그 목적이 있다.
본 발명은 차량 뒷좌석 부분을 정밀 촬영하여 상황 변화에 따라 뒷좌석의 영상을 선택적으로 표시하고, 뒷좌석의 탑승 상황 및 근접 센서의 센싱 결과에 따라 차량 후방으로 표시되는 경고 문구의 내용을 변경하는 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법을 제공하는데 그 목적이 있다.
본 발명은 운전자에게 뒷좌석 어린이나 유아의 상태를 뒷좌석에 카메라를 설치하여 대쉬보드의 네비게이션이나 모니터로 쉽게 파악하여 신속한 조치를 취할 수 있도록 한 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법을 제공하는데 그 목적이 있다.
본 발명은 뒷좌석에서 돌발 상황 발생시에 디스플레이 장치에 현재 표시되고 있는 내용을 차단하고 대신에 정밀 촬영된 뒷좌석의 영상을 표시하여 운전자가 뒤를 돌아보지 않고도 현재의 상태를 쉽게 파악할 수 있도록 한 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법을 제공하는데 그 목적이 있다.
본 발명은 뒷좌석에서 돌발 상황 발생시에 디스플레이 장치에 현재 표시되고 있는 내용을 차단하고 대신에 정밀 촬영된 뒷좌석의 영상을 표시하고 원인이 해소(확인)되거나 정해진 시간이 경과하면 원래의 영상으로 자동으로 전환하여 표시하여 운전자의 편리성을 높인 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법을 제공하는데 그 목적이 있다.
본 발명의 목적들은 이상에서 언급한 목적들로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
이와 같은 목적을 달성하기 위한 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템은 차량내에 설치되어 차량 뒷좌석 부분을 촬영하는 차량 뒷좌석 카메라;운전자가 전방 주시 상태에서 표시되는 영상을 확인할 수 있는 위치에 설치되는 운전석 디스플레이 장치;차량의 후방에서 다른 차량의 접근을 감지하는 차량 후방 센서;상기 차량 뒷좌석 카메라의 영상 또는 상기 차량 후방 센서의 감지 결과를 기준으로 경고 문구를 변경하여 표시하는 차량 후방 디스플레이 장치;상기 차량 뒷좌석 카메라의 영상 및 차량 후방 센서의 센싱 결과를 기준으로 운전석 디스플레이 장치에 표시되는 영상의 선택 및 차량 후방 디스플레이 장치에 표시되는 경고 문구의 변경을 제어하는 뒷좌석 상황 관리 제어부;를 포함하는 것을 특징으로 한다.
여기서, 상기 차량 뒷좌석 카메라는 운전석의 헤드레스트 또는 실내등 위치에 설치되고, 상기 운전석 디스플레이 장치는 차량의 센터페시아 또는 대쉬보드 부분 또는 룸미러 자체 또는 차량 앞유리 자체에 설치되는 것을 특징으로 한다.
그리고 상기 운전석 디스플레이 장치에는 상기 차량 뒷좌석 카메라의 영상에서 사람 인식 프로그램에 의해 사람이 인식되는 경우에만 뒷좌석의 영상을 표시하는 것을 특징으로 한다.
그리고 상기 뒷좌석 상황 관리 제어부는, 상기 차량 뒷좌석 카메라에 의해 촬영된 영상을 처리하여 운전석 디스플레이 장치에 표시될 수 있도록 하고, 영상에서 사람을 인식하고 사람의 움직임 크기를 검출하는 영상 처리부와,차량 뒷좌석의 음향 크기를 판단하는 음향 판단부와,상기 영상 처리부 및 음향 판단부의 판단 결과를 기준으로 운전석 디스플레이 장치에 표되는 영상의 선택 및 차량 후방 디스플레이 장치에 표시되는 경고 문구의 변경을 결정하는 상황 판단부와,상기 차량 후방 디스플레이 장치에 표시되는 경고 문구를 저장하고 상황 판단부의 판단 결과에 따라 차량 후방 디스플레이 장치에 표시되는 경고 문구를 변경하는 경고 문구 관리부를 포함하는 것을 특징으로 한다.
다른 목적을 달성하기 위한 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 방법은 차량에 시동이 걸리면 차량 뒷좌석 카메라를 구동하는 단계;영상 처리부에서 사람 인식 프로그램에 의해 뒷좌석에 있는 사람이 인식되면 운전석 디스플레이 장치에 뒷좌석 영상을 표시하고, 동시에 차량 후방 디스플레이 장치에 제 1 경고 문구를 표시하는 단계;상기 단계들을 처리하는 중에 차량 후방 센서가 후방에서 접근하는 차량을 감지하면 차량 후방 디스플레이 장치에 제 2 경고 문구로 변경하여 표시하는 단계;를 포함하는 것을 특징으로 한다.
또 다른 목적을 달성하기 위한 차량 실내 카메라와 근접센서를 이용한 지능형 감시 방법은 차량에 시동이 걸리면 차량 뒷좌석 카메라를 구동하는 단계;영상 처리부에서 사람 인식 프로그램에 의해 뒷좌석에 있는 사람이 인식되면 차량 후방 디스플레이 장치에 제 1 경고 문구를 표시하는 단계;뒷좌석 영상에서 움직임 세기 및 음향 세기를 검출하여 기준값과 비교하고 검출된 움직임 세기 또는 음향 세기가 기준값보다 크면 디스플레이되고 있는 원래의 영상 표시를 중단하고 운전석 디스플레이 장치에 뒷좌석 영상을 표시하는 단계;뒷좌석 영상을 표시한 상태에서 기준 시간이 경과하면, 운전석 디스플레이 장치에 원래의 영상을 표시하는 단계;상기 단계들을 처리하는 중에 차량 후방 센서가 후방에서 접근하는 차량을 감지하면 차량 후방 디스플레이 장치에 제 2 경고 문구로 변경하여 표시하는 단계;를 포함하는 것을 특징으로 한다.
여기서, 상기 제 1 경고 문구는 뒷좌석 탑승자의 안전을 위한 조심 운전 경고 문구이고, 제 2 경고 문구는 차량 추돌 경고 문구인 것을 특징으로 한다.
이와 같은 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법은 다음과 같은 효과를 갖는다.
첫째, 상황에 따라 뒷좌석의 영상을 최우선 순위로 디스플레이하여 운전의 안전성 및 편리성을 높일 수 있다.
둘째, 운전자가 뒷좌석의 상황 파악을 위해 뒤를 돌아보는 위험성을 제거하여 안전운전 방해 요소를 제거하고 사고를 예방하는 효과가 있다.
셋째, 뒷좌석의 탑승 상황 및 근접 센서의 센싱 결과에 따라 차량 후방으로 표시되는 경고 문구의 내용을 자동으로 변경하여 운전자의 편리성을 높인다.
이는 차량 후방에 스티커를 붙이는 등의 번거로운 문제를 해결하는 효과도 있다.
넷째, 뒷좌석에서 돌발 상황 발생시에 디스플레이 장치에 현재 표시되고 있는 내용을 차단하고 대신에 정밀 촬영된 뒷좌석의 영상을 표시하고 원인이 해소(확인)되거나 정해진 시간이 경과하면 원래의 영상으로 자동으로 전환하여 표시하여 운전자의 편리성을 높일 수 있다.
다섯째, 기본으로 장착되어 있는 주차용 근접센서의 데이터를 사용할 수 있으므로 시스템 구축 비용을 절감할 수 있다.
여섯째, 차량용 블랙박스 장치에 지능형 감시 시스템을 추가하는 경우 유아가 있는 계층을 새로운 구매층으로 형성하고 차량 판매에 도움을 줄 수 있다.
도 1은 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템의 차량 장착 구성도
도 2는 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템의 구성 블록도
도 3a와 도 3b는 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 방법을 나타낸 플로우 차트
도 4는 본 발명에 따른 차량 후방 디스플레이 장치의 경고 문구 표시의 일예를 나타낸 구성도
이하, 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법의 바람직한 실시예에 관하여 상세히 설명하면 다음과 같다.
본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법의 특징 및 이점들은 이하에서의 각 실시예에 대한 상세한 설명을 통해 명백해질 것이다.
도 1은 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템의 차량 장착 구성도이고, 도 2는 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템의 구성 블록도이다.
본 발명은 차량 뒷좌석 부분을 정밀 촬영하여 상황 변화에 따라 뒷좌석의 영상을 선택적으로 표시하고, 뒷좌석의 탑승 상황 및 근접 센서의 센싱 결과에 따라 차량 후방으로 표시되는 경고 문구의 내용을 변경하는 것이다.
본 발명에 따른 지능형 감시 시스템은 도 1 및 도 2에서와 같이, 차량 뒷좌석 카메라(100), 차량 후방 디스플레이 장치(200), 운전석 디스플레이 장치(300), 차량 후방 센서(400), 후방센서 인터페이스(500), 뒷좌석 상황 관리 제어부(600)를 포함하고 구성된다.
차량 뒷좌석 카메라(100)는 운전석 뒷부분(헤드레스트) 또는 실내등이 위치하는 영역 등에 설치되어 차량 뒷좌석 부분을 정밀 촬영할수 있도록 한 것으로, 운전자의 선택에 의해 구동되어 차량 뒷좌석 부분의 영상을 촬영하는 것이다.
차량 뒷좌석 카메라(100)는 하나만 설치될 수도 있고, 보다 정밀한 촬영을 위하여 복수개가 설치될 수도 있다.
그리고 차량 후방 디스플레이 장치(200)는 차량 뒷좌석 카메라(100)에 의한 영상을 기준으로 판단한 경우 또는 차량 후방 센서(400)에 의해 다른 차량의 접근이 감지되는 경우를 기준으로 표시되는 경고 문구를 변경하여 후방으로 디스플레이하는 장치이다.
그리고 운전석 디스플레이 장치(300)는 운전자가 전방 주시 상태에서 표시되는 영상을 확인할 수 있는 위치에 설치되는 것으로, 차량의 센터페시아 및 대쉬보드 부분, 룸미러 자체, 차량 앞유리 자체에 설치될 수 있다.
차량 뒷좌석 카메라(100)에 의한 영상을 기준으로 판단하여 차량 뒷좌석의 상황이 운전자의 주시 및 판단이 필요한 경우에 차량 뒷좌석의 영상을 표시하는 장치이다.
그리고 차량 후방 센서(400), 후방센서 인터페이스(500)는 다른 차량의 접근이 감지되는 경우 이를 감지하여 뒷좌석 상황 관리 제어부(600)로 전송하는 것이다. 차량 후방 센서(400)는 별도로 설치되는 것이 아니고 차량의 후방 주차시에 사용하기 위해 기존에 설치된 센서를 사용하는 것도 가능하다.
뒷좌석 상황 관리 제어부(600)는 차량 뒷좌석 카메라(100)의 영상 및 차량 후방 센서(400)의 센싱 결과를 기준으로 운전석 디스플레이 장치(300)에 표시되는 영상의 선택 및 차량 후방 디스플레이 장치(200)에 표시되는 경고 문구의 변경을 제어한다.
그리고 뒷좌석 상황 관리 제어부(600)는, 차량 뒷좌석 카메라(100)에 의해 촬영된 영상을 처리하여 운전석 디스플레이 장치(300)에 표시될 수 있도록 하고, 영상에서 사람을 인식하고 사람의 움직임 크기를 검출하는 영상 처리부(601)와, 차량 뒷좌석의 음향 크기를 판단하는 음향 판단부(602)와, 영상 처리부(601) 및 음향 판단부(602)의 판단 결과를 기준으로 운전석 디스플레이 장치(300)에 표되는 영상의 선택 및 차량 후방 디스플레이 장치(200)에 표시되는 경고 문구의 변경을 결정하는 상황 판단부(603)와, 차량 후방 디스플레이 장치(200)에 표시되는 경고 문구를 저장하고 상황 판단부(603)의 판단 결과에 따라 차량 후방 디스플레이 장치(200)에 표시되는 경고 문구를 변경하는 경고 문구 관리부(604)를 포함한다.
이와 같은 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템은 차량 운행시에 뒷좌석에서 유아(사람)가 촬상되면, 뒷좌석의 상황에 따라 운전자가 전방 주시 상태에서 뒷좌석의 상황을 파악할 있도록 뒷좌석 영상을 표시하고 차량 후방 디스플레이 장치에 조심 운전 경고 문구 표시하고, 근접 센서를 이용하여 다른 차량의 접근시에 디스플레이 장치에 추돌 경고 문구를 표시하는 것이다.
이와 같은 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템의 동작을 구체적으로 설명하면 다음과 같다.
도 3a와 도 3b는 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 방법을 나타낸 플로우 차트이고, 도 4는 본 발명에 따른 차량 후방 디스플레이 장치의 경고 문구 표시의 일예를 나타낸 구성도이다.
본 발명의 제1 실시예에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 방법은 도 3a에서와 같이, 차량에 시동이 걸리면 차량 뒷좌석 카메라(100)가 동작을 하고(S301), 영상 처리부(601)에서 사람 인식 프로그램에 의해 뒷좌석에 있는 사람을 인식하면(S302), 운전석 디스플레이 장치(300)에 뒷좌석 영상을 표시하고(S303), 동시에 차량 후방 디스플레이 장치(200)에 "아이가 타고 있어요"와 같은 경고 문구를 표시한다.(S304)
이와 같은 상태에서 주차를 위해 기 설치된 차량 후방 센서(400)로부터 받은 신호 값을 처리하여 뒷 차량이 일정거리 이상으로 가까이 다가오면(S305) 차량 후방 디스플레이 장치(200)에“추돌 주의 하세요“로 디스플레이 내용을 변경하여 표시한다.(S306)
즉, 도 4에서와같이, "아이가 타고 있어요"와 같은 경고 문구를 표시한 상태에서 차량 후방에서 접근하는 다른 차량이 일정거리를 벗어나면 ”아이가 타고 있어요”로 상호 전환이 이루어진다.
만약, 아이가 타고 있는 않은 경우나 초보 운전자의 경우에는 “초보운전”을 차량 후방에 디스플레이 할 수도 있다.
그리고 본 발명의 제1 실시예에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 방법은 도 3b에서와 같이, 차량 뒷좌석 부분을 정밀 촬영하여 탑승자 움직임 및 음향 레벨에 따라 뒷좌석의 영상을 최우선 순위로 디스플레이하고, 기준 시간이 경과하면 원래의 영상을 표시하는 것이다.
먼저, 차량에 시동이 걸리면 차량 뒷좌석 카메라(100)가 동작을 하고(S311), 영상 처리부(601)에서 사람 인식 프로그램에 의해 뒷좌석에 있는 사람을 인식하면(S312), 차량 후방 디스플레이 장치(200)에 "아이가 타고 있어요"와 같은 경고 문구를 표시한다.(S313)
그리고 뒷좌석 영상에서 움직임 세기 및 음향 세기를 검출하여(S314), 기준값과 비교한다.(S315)
검출된 움직임 세기 또는 음향 세기가 기준값보다 크면 디스플레이되고 있는 원래의 영상 표시를 중단하고 운전석 디스플레이 장치(300)에 뒷좌석 영상을 표시하고(S316), 아니면 차량 후방 디스플레이 장치(200)에 "아이가 타고 있어요"와 같은 경고 문구를 표시한 상태에서 차량 후방 센서(400)의 검출 결과를 확인한다.
이어, 운전석 디스플레이 장치(300)에 뒷좌석 영상을 표시한 상태에서 기준 시간이 경과하면(S317), 운전자가 전방 주시 상태에서 뒷좌석의 상황을 모두 파악한 것으로 판단하여 운전석 디스플레이 장치(300)에 원래의 영상을 표시한다.(S318)
그리고 상기 단계들을 수행하는 중에 차량 후방 센서(400)로부터 받은 신호 값을 처리하여 뒷 차량이 일정거리 이상으로 가까이 다가오면(S319) 차량 후방 디스플레이 장치(200)에“추돌 주의 하세요“로 디스플레이 내용을 변경하여 표시한다.(S320)
이와 같은 본 발명은 차량 뒷좌석 부분을 정밀 촬영하여 탑승자 움직임 및 음향 레벨에 따라 뒷좌석의 영상을 최우선 순위로 디스플레이하고 뒷좌석의 탑승 상황 및 근접 센서의 센싱 결과에 따라 차량 후방으로 표시되는 경고 문구의 내용을 변경하여 안전 운전에 도움을 줄 수 있도록 한 것이다.
차량이 고급화되면서 수요자의 요구를 많이 반영하고 있으므로 자동차 업체에서 이러한 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법을 추가할 경우 어린 자녀가 있는 가정에 매우 긍정적인 반향을 일으켜 차량 판매 및 홍보에 좋은 효과가 있을 것이다.
이와 같은 본 발명에 따른 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법은 향후 차량 네트워크나 MOST 네트워크와의 연계 할 수 있으며, 블랙박스 장치에 이러한 기능을 추가하여 안전성 및 편리성을 높이는 것도 가능하다.
이상에서의 설명에서와 같이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 본 발명이 구현되어 있음을 이해할 수 있을 것이다.
그러므로 명시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 하고, 본 발명의 범위는 전술한 설명이 아니라 특허청구 범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
100. 차량 뒷좌석 카메라 200. 차량 후방 디스플레이 장치
300. 운전석 디스플레이 장치 400. 차량 후방 센서
500. 후방 센서 인터페이스 600. 뒷좌석 상황 관리 제어부

Claims (7)

  1. 차량내에 설치되어 차량 뒷좌석 부분을 촬영하는 차량 뒷좌석 카메라;
    운전자가 전방 주시 상태에서 표시되는 영상을 확인할 수 있는 위치에 설치되는 운전석 디스플레이 장치;
    차량의 후방에서 다른 차량의 접근을 감지하는 차량 후방 센서;
    상기 차량 뒷좌석 카메라의 영상 또는 상기 차량 후방 센서의 감지 결과를 기준으로 경고 문구를 변경하여 표시하는 차량 후방 디스플레이 장치;
    상기 차량 뒷좌석 카메라의 영상 및 차량 후방 센서의 센싱 결과를 기준으로 운전석 디스플레이 장치에 표시되는 영상의 선택 및 차량 후방 디스플레이 장치에 표시되는 경고 문구의 변경을 제어하는 뒷좌석 상황 관리 제어부;를 포함하고 구성되는 것을 특징으로 하는 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템.
  2. 제 1 항에 있어서, 상기 차량 뒷좌석 카메라는 운전석의 헤드레스트 또는 실내등 위치에 설치되고,
    상기 운전석 디스플레이 장치는 차량의 센터페시아 또는 대쉬보드 부분 또는 룸미러 자체 또는 차량 앞유리 자체에 설치되는 것을 특징으로 하는 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템.
  3. 제 1 항에 있어서, 상기 운전석 디스플레이 장치에는
    상기 차량 뒷좌석 카메라의 영상에서 사람 인식 프로그램에 의해 사람이 인식되는 경우에만 뒷좌석의 영상을 표시하는 것을 특징으로 하는 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템.
  4. 제 1 항에 있어서, 상기 뒷좌석 상황 관리 제어부는,
    상기 차량 뒷좌석 카메라에 의해 촬영된 영상을 처리하여 운전석 디스플레이 장치에 표시될 수 있도록 하고, 영상에서 사람을 인식하고 사람의 움직임 크기를 검출하는 영상 처리부와,
    차량 뒷좌석의 음향 크기를 판단하는 음향 판단부와,
    상기 영상 처리부 및 음향 판단부의 판단 결과를 기준으로 운전석 디스플레이 장치에 표되는 영상의 선택 및 차량 후방 디스플레이 장치에 표시되는 경고 문구의 변경을 결정하는 상황 판단부와,
    상기 차량 후방 디스플레이 장치에 표시되는 경고 문구를 저장하고 상황 판단부의 판단 결과에 따라 차량 후방 디스플레이 장치에 표시되는 경고 문구를 변경하는 경고 문구 관리부를 포함하는 것을 특징으로 하는 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템.
  5. 차량에 시동이 걸리면 차량 뒷좌석 카메라를 구동하는 단계;
    영상 처리부에서 사람 인식 프로그램에 의해 뒷좌석에 있는 사람이 인식되면 운전석 디스플레이 장치에 뒷좌석 영상을 표시하고, 동시에 차량 후방 디스플레이 장치에 제 1 경고 문구를 표시하는 단계;
    상기 단계들을 처리하는 중에 차량 후방 센서가 후방에서 접근하는 차량을 감지하면 차량 후방 디스플레이 장치에 제 2 경고 문구로 변경하여 표시하는 단계;를 포함하는 것을 특징으로 하는 차량 실내 카메라와 근접센서를 이용한 지능형 감시 방법.
  6. 차량에 시동이 걸리면 차량 뒷좌석 카메라를 구동하는 단계;
    영상 처리부에서 사람 인식 프로그램에 의해 뒷좌석에 있는 사람이 인식되면 차량 후방 디스플레이 장치에 제 1 경고 문구를 표시하는 단계;
    뒷좌석 영상에서 움직임 세기 및 음향 세기를 검출하여 기준값과 비교하고 검출된 움직임 세기 또는 음향 세기가 기준값보다 크면 디스플레이되고 있는 원래의 영상 표시를 중단하고 운전석 디스플레이 장치에 뒷좌석 영상을 표시하는 단계;
    뒷좌석 영상을 표시한 상태에서 기준 시간이 경과하면, 운전석 디스플레이 장치에 원래의 영상을 표시하는 단계;
    상기 단계들을 처리하는 중에 차량 후방 센서가 후방에서 접근하는 차량을 감지하면 차량 후방 디스플레이 장치에 제 2 경고 문구로 변경하여 표시하는 단계;를 포함하는 것을 특징으로 하는 차량 실내 카메라와 근접센서를 이용한 지능형 감시 방법.
  7. 제 5 항 또는 제 6 항에 있어서, 상기 제 1 경고 문구는 뒷좌석 탑승자의 안전을 위한 조심 운전 경고 문구이고, 제 2 경고 문구는 차량 추돌 경고 문구인 것을 특징으로 하는 차량 실내 카메라와 근접센서를 이용한 지능형 감시 방법.



KR1020110037521A 2011-04-21 2011-04-21 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법 KR101241861B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110037521A KR101241861B1 (ko) 2011-04-21 2011-04-21 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110037521A KR101241861B1 (ko) 2011-04-21 2011-04-21 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20120119537A true KR20120119537A (ko) 2012-10-31
KR101241861B1 KR101241861B1 (ko) 2013-03-11

Family

ID=47286763

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110037521A KR101241861B1 (ko) 2011-04-21 2011-04-21 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR101241861B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017034282A1 (en) * 2015-08-26 2017-03-02 Lg Electronics Inc. Driver assistance apparatus and method for controlling the same
US11072347B2 (en) 2017-12-15 2021-07-27 Lg Electronics Inc. Vehicle control device provided in vehicle and method for controlling vehicle
CN113345146A (zh) * 2021-05-28 2021-09-03 宁波智想科技有限公司 一种智能闸机及其使用方法
KR102457629B1 (ko) * 2022-01-26 2022-10-21 이상배 차량 실내 뒷좌석 상태 확인 장치

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101667731B1 (ko) * 2015-01-19 2016-10-19 엘지전자 주식회사 차량 내 영상표시장치 및 그것의 제어 방법
US11292342B1 (en) 2020-12-14 2022-04-05 Ford Global Technologies, Llc Systems and methods for alerting a driver to check back seat occupancy in a vehicle
US20230339366A1 (en) * 2022-04-20 2023-10-26 Aptiv Technologies Limited In-Vehicle Occupant Monitoring and Calming System

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR200172344Y1 (ko) * 1999-03-25 2000-03-15 박노춘 차량용 블랙박스 시스템
KR20020075129A (ko) * 2001-03-23 2002-10-04 신희섭 자동차의 주행상태 표시장치
KR200348454Y1 (ko) * 2003-11-17 2004-05-03 홍명기 초음파센서를 이용한 그래프방식의 거리감지기
KR100630577B1 (ko) * 2005-03-08 2006-10-02 (주)무선스포트 구급차 중앙집중식 콘트롤러 장치

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017034282A1 (en) * 2015-08-26 2017-03-02 Lg Electronics Inc. Driver assistance apparatus and method for controlling the same
US10296083B2 (en) 2015-08-26 2019-05-21 Lg Electronics Inc. Driver assistance apparatus and method for controlling the same
US11072347B2 (en) 2017-12-15 2021-07-27 Lg Electronics Inc. Vehicle control device provided in vehicle and method for controlling vehicle
CN113345146A (zh) * 2021-05-28 2021-09-03 宁波智想科技有限公司 一种智能闸机及其使用方法
CN113345146B (zh) * 2021-05-28 2023-05-23 宁波智想科技有限公司 一种智能闸机及其使用方法
KR102457629B1 (ko) * 2022-01-26 2022-10-21 이상배 차량 실내 뒷좌석 상태 확인 장치
WO2023146070A1 (ko) * 2022-01-26 2023-08-03 이상배 차량 실내 뒷좌석 상태 확인 장치

Also Published As

Publication number Publication date
KR101241861B1 (ko) 2013-03-11

Similar Documents

Publication Publication Date Title
KR101241861B1 (ko) 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법
JP4517393B2 (ja) 運転支援装置
JP5082834B2 (ja) 脇見検出装置および方法、並びに、プログラム
EP3849865A1 (en) Inward/outward vehicle monitoring for remote reporting and in-cab warning enhancements
JP7047763B2 (ja) 運転支援装置および方法、移動体、並びにプログラム
WO2014188648A1 (ja) ドライバ確認装置
JP6462629B2 (ja) 運転支援装置及び運転支援プログラム
US20130113614A1 (en) Systems and methods for vehicle door clearance zone projection
JP2007141223A (ja) 情報処理装置および方法、記録媒体、並びに、プログラム
JP6922919B2 (ja) 運転支援装置および方法、移動体、並びにプログラム
JP2010217956A (ja) 情報処理装置及び方法、プログラム、並びに情報処理システム
US20200062246A1 (en) Emergency braking device for vehicle
KR101938314B1 (ko) 운전 습관에 따른 후측방 경보 장치 및 방법
US11238739B2 (en) Method and apparatus to prevent VRU accidents
KR101960915B1 (ko) 차량 도어 충돌 방지 시스템 및 방법
CN112238859A (zh) 驾驶支援装置
JP2010039919A (ja) 注意喚起装置
JP2017151606A (ja) 脇見見落とし注意システム及びコンピュータプログラム
JP2008143381A (ja) 車両用警告システム、車両用警告システムの警告方法
TW201628887A (zh) 車輛開門防撞控制系統及控制方法
KR20200072897A (ko) 차량 침입 관리 장치, 그를 포함한 시스템 및 그 방법
KR101636241B1 (ko) 졸음 운전 방지 시스템
JP2013180634A (ja) 車載用電子機器とそれを搭載した自動車
JP2008282235A (ja) 運転支援装置、運転支援装置を搭載した自動車、および運転支援方法
JP2009042824A (ja) 飲酒運転防止装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160223

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170303

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee