KR102083682B1 - 적외선 카메라를 이용한 차량 제어 방법 및 이를 위한 장치 - Google Patents

적외선 카메라를 이용한 차량 제어 방법 및 이를 위한 장치 Download PDF

Info

Publication number
KR102083682B1
KR102083682B1 KR1020130083954A KR20130083954A KR102083682B1 KR 102083682 B1 KR102083682 B1 KR 102083682B1 KR 1020130083954 A KR1020130083954 A KR 1020130083954A KR 20130083954 A KR20130083954 A KR 20130083954A KR 102083682 B1 KR102083682 B1 KR 102083682B1
Authority
KR
South Korea
Prior art keywords
pattern
infrared
image
recognizing
depth
Prior art date
Application number
KR1020130083954A
Other languages
English (en)
Other versions
KR20150009700A (ko
Inventor
송기혁
Original Assignee
현대모비스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대모비스 주식회사 filed Critical 현대모비스 주식회사
Priority to KR1020130083954A priority Critical patent/KR102083682B1/ko
Publication of KR20150009700A publication Critical patent/KR20150009700A/ko
Application granted granted Critical
Publication of KR102083682B1 publication Critical patent/KR102083682B1/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B60K28/066—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver actuating a signalling device
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/20—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only
    • H04N23/23—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only from thermal infrared radiation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818—Inactivity or incapacity of driver
    • B60W2040/0827—Inactivity or incapacity of driver due to sleepiness
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143—Alarm means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00—Input parameters relating to infrastructure
    • B60W2552/50—Barriers

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Toxicology (AREA)
  • Human Computer Interaction (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 적외선 카메라를 이용한 차량 제어 방법 및 이를 위한 장치에 대한 것으로, 적외선 패턴 조명을 이용하여 차량 제어 방법 및 이를 위한 장치에 대한 것이다.
본 발명의 일 실시예에 따른 차량 제어 장치는 제1 패턴의 적외선 신호를 송출하는 제1 적외선 패턴 조명, 제2 패턴의 적외선 신호를 송출하는 제2 적외선 패턴 조명, 영상 인식을 위한 적외선 신호를 송수신하는 적외선 카메라, 상기 패턴들 중 적어도 하나의 패턴에 동기화되어 상기 카메라 및 상기 조명들을 이용하여 영상을 획득하는 영상 획득부, 상기 획득한 영상에 포함된 오브젝트 및 오브젝트의 깊이를 인식하는 영상 인식부를 포함하여 구성된다.

Description

적외선 카메라를 이용한 차량 제어 방법 및 이를 위한 장치{Vehicle Controlling Method Using IR Camera and Apparatus therefor}
본 발명은 적외선 카메라를 이용한 차량 제어 방법 및 이를 위한 장치에 대한 것으로, 적외선 패턴 조명을 이용하여 차량 제어 방법 및 이를 위한 장치에 대한 것이다.
운전자 상태 모니터링 시스템(Driver Status Monitoring)은 적외선 조명과 적외선 카메라를 이용하여, 눈을 감고 있는 시간이 일정 시간을 초과하는 경우나 이로 인해서 전/후/측면 방향의 물체와 충돌의 위험이 검출되는 경우 경보를 발생하여 교통사고를 예방하고자 하는 것이다.
모션 트래킹(Motion Tracking) 시스템은 3차원 현실 공간에서의 물체를 인식할 필요가 있을 때 사용하는 것으로, 일정한 패턴이 물체 표면에 맺혀서 변형이 되고, 그 변형량을 알고리즘을 통해서 계산 깊이 맵(depth map)을 실시간으로 작성하고, 이와 같이 작성된 깊이 맵을 이용하여 물체의 모션을 추적하는 것이다.
그러나, 이와 같은 시스템들은 2D 화면의 물체 윤곽이나 패턴 정보에 기반하여 영상을 분리 인식하는 것으로, 2D 화면은 물체까지의 정확한 거리 정보를 구할 수 없어 정교한 동작 인식의 한계가 있는 문제점이 있다.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 적외선 패턴 조명 및 적외선 카메라를 이용하여 3D 타입의 운전자의 제스처를 인식하여 차량 내부의 오디오나 변속기 등의 설정을 변경함과 동시에 운전자의 상태를 파악하여 경보를 출력하는 차량 제어 장치 및 방법을 제공하고자 하는 것이다.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 차량 제어 장치는 제1 패턴의 적외선 신호를 송출하는 제1 적외선 패턴 조명, 제2 패턴의 적외선 신호를 송출하는 제2 적외선 패턴 조명, 영상 인식을 위한 적외선 신호를 송수신하는 적외선 카메라, 상기 패턴들 중 적어도 하나의 패턴에 동기화되어 상기 카메라 및 상기 조명들을 이용하여 영상을 획득하는 영상 획득부, 상기 획득한 영상에 포함된 오브젝트 및 오브젝트의 깊이를 인식하는 영상 인식부를 포함하여 구성된다.
본 발명의 다양한 실시예에 따르면, 적외선 패턴 조명 및 적외선 카메라를 활용하여 하드웨어의 추가 없이 오브젝트의 3D 깊이를 파악할 수가 있다.
또한, 적외선 패턴 조명 및 적외선 카메라를 활용하여 오브젝트의 인식뿐 아니라 오브젝트의 3D 깊이를 동시에 파악할 수가 있다. 이로 인해 차량의 상태, 운전자 등의 상태에 따라 경보 신호를 제공함과 동시에 운전자의 제스처 명령을 인식하여 차량의 상태 파라미터를 변경할 수 있는 휴먼 인터페이스를 제공해 줄 수 있는 효과가 있다.
도 1은 본 발명의 바람직한 일 실시예에 따른 적외선 카메라의 상세 구성을 도시한 도면이다.
도 2a 및 도 2b는 본 발명의 바람직한 일 실시예에 따른 적외선 카메라 및 적외선 패턴 프로젝션 조명을 이용하여 획득한 영상을 도시한 도면이다.
도 3은 본 발명의 바람직한 일 실시예에 따른 적외선 패턴 프로젝션 조명을 이용한 영상 합성 과정을 도시한 도면이다.
도 4a 내지 도 4c는 본 발명의 바람직한 일 실시예에 따른 적외선 패턴 프로젝션 조명의 패턴 형태를 도시한 그래프이다.
도 5는 본 발명의 바람직한 실시예에 따른 적외선 카메라 및 좌, 우측 패턴 조명을 이용한 차량 제어를 수행하기 위한 시스템을 도시한 블록도이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 한편, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성소자, 단계, 동작 및/또는 소자는 하나 이상의 다른 구성소자, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다.
도 1은 본 발명의 바람직한 일 실시예에 따른 적외선 카메라의 상세 구성을 도시한 도면이다.
도 2a 및 도 2b는 본 발명의 바람직한 일 실시예에 따른 적외선 카메라 및 적외선 패턴 프로젝션 조명을 이용하여 획득한 영상을 도시한 도면이다.
도 1을 참조하면, 적외선을 이용하여 주변 영상을 획득하는 적외선 카메라(10), 상기 획득한 주변 영상에 좌측 패턴, 우측 패턴 층을 투사하는 적외선 패턴 프로젝션 조명(20a, 20b)을 포함하여 구성된다.
제1 적외선 패턴 조명(20a)은 제1 패턴의 적외선 신호를 송출한다.
제2 적외선 패턴 조명(20b)은 제2 패턴의 적외선 신호를 송출한다.
영상 획득부(300)는 상기 패턴들 중 적어도 하나의 패턴에 동기화되어 상기 카메라(10) 및 상기 조명들(20a, 20b)을 이용하여 영상을 획득한다.
영상 인식부(400)는 상기 획득한 영상에 포함된 오브젝트 및 오브젝트의 깊이를 인식한다.
도 2a는 상기 적외선 카메라(10)를 이용하여 획득한 영상의 예를 도시한 것이고, 도 2b는 획득한 영상에 좌측/우측 패턴 층을 투사하여 획득한 영상의 예를 도시한 것이다.
도 3은 본 발명의 바람직한 일 실시예에 따른 적외선 패턴 프로젝션 조명을 이용한 영상 합성 과정을 도시한 도면이다.
도 3을 참조하면, 적외선 카메라(10) 좌, 우측의 조명의 패턴을 서로 달리하여 투사하고, 좌우 모두 점등 시 패턴이 중첩되어 패턴이 사라진다. 이러한 패턴 점등과 모두 점등을 순차적으로 반복하며, 패턴 점등 시에는 패턴의 변형을 알고리즘 계산, 운전자의 3차원 깊이를 인식하고, 모두 점등 시에는 기존과 동일하게 운전자 상태를 인식한다.
이와 같이 적외선 카메라의 좌, 우측의 패턴 조명을 이용하여 종래의 하드웨어로 3D 깊이를 측정할 수 있는 것이다.
도 4a 내지 도 4c는 본 발명의 바람직한 일 실시예에 따른 적외선 패턴 프로젝션 조명의 패턴 형태를 도시한 그래프이다.
도 4a를 참조하면, 좌측 패턴 점등은 연속적인 웨이브 형태로 투사된다. 도 4b를 참조하면, 우측 패턴 점등은 펄스 폭 변조 형태로 투사된다. 적외선 카메라를 이용한 영상 취득은 우측 패턴 조명의 패턴 온/오프와 동기화되어 실시하도록 한다.
이와 같이 상기 투사된 패턴 및 적외선 카메라를 이용한 영상으로부터 깊이를 인식하며, 운전자의 얼굴을 동시에 인식하는 것이 가능하다.
도 5는 본 발명의 바람직한 실시예에 따른 적외선 카메라 및 좌, 우측 패턴 조명을 이용한 차량 제어를 수행하기 위한 시스템을 도시한 블록도이다.
도 5를 참조하면, 본 발명의 바람직한 실시예에 따른 차량 제어 장치는 제1 패턴의 적외선 신호를 송출하는 제1 적외선 패턴 조명(20a), 제2 패턴의 적외선 신호를 송출하는 제2 적외선 패턴 조명(20b), 영상 인식을 위한 적외선 신호를 송수신하는 적외선 카메라(10), 상기 패턴들 중 적어도 하나의 패턴에 동기화되어 상기 카메라 및 상기 조명들을 이용하여 영상을 획득하는 영상 획득부(300), 상기 획득한 영상에 포함된 오브젝트 및 오브젝트의 깊이를 인식하는 영상 인식부(400)를 포함하여 구성된다.
제1 적외선 패턴 조명(20a)은 연속적인 웨이브 패턴의 제1 패턴으로 송출한다.
제2 적외선 패턴 조명(20b)은 펄스 폭 형태로 온/오프되는 제2 패턴으로 송출한다.
상기 영상 획득부(300)는 상기 제1 패턴 및 상기 제2 패턴이 모두 점등되었을 때 상기 오브젝트를 인식한다. 따라서, 오브젝트에 해당되는 운전자의 상태를 인식하며, 이 상태에 따라 경보 신호 출력부(미도시)는 경보 신호를 출력한다. 상기 경보 신호는 예를 들어 운전자가 졸고 있다고 판단될 때, 졸음에서 깰 수 있도록 또는 차량 전방의 위험을 알릴 수 있도록 경보 신호를 출력한다.
바람직하게, 상기 제1 패턴, 상기 제2 패턴, 상기 모두 점등은 순차적으로 반복된다.
상기 제1 패턴 및 상기 제2 패턴이 서로 다를 때 상기 오브젝트의 깊이를 인식한다. 따라서, 오브젝트에 해당되는 운전자가 취하는 제스처를 3D 차원으로 인식 가능하고, 제어기(100)는 이 제스처가 명령하는 예를 들어, 라디오를 켜거나, 기 설정된 번호로 전화를 걸거나, 비상 등을 켜는 등의 특정 기능을 수행하는 것이 가능해진다.
이상에서 설명한 본 발명의 실시 예는 장치 및 방법을 통해서만 구현이 되는 것은 아니며, 본 발명의 실시예의 구성에 대응하는 기능을 실현하는 프로그램 또는 그 프로그램이 기록된 기록 매체를 통해 구현될 수도 있으며, 이러한 구현은 앞서 설명한 실시예의 기재로부터 본 발명이 속하는 기술분야의 전문가라면 쉽게 구현할 수 있는 것이다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시 예 및 첨부된 도면에 의해 한정되는 것이 아니라, 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수 있다.
100 : 제어기
200a : 좌측 적외선 패턴 조명
200b : 우측 적외선 패턴 조명
300 : 영상 획득부
400 : 영상 인식부

Claims (12)

  1. 제1 패턴의 적외선 신호를 송출하는 제1 적외선 패턴 조명;
    제2 패턴의 적외선 신호를 송출하는 제2 적외선 패턴 조명;
    영상 인식을 위한 적외선 신호를 송수신하는 적외선 카메라;
    상기 패턴들 중 적어도 하나의 패턴에 동기화되어 상기 카메라 및 상기 조명들을 이용하여 영상을 획득하는 영상 획득부; 및
    상기 획득한 영상에 포함된 오브젝트 및 오브젝트의 깊이를 인식하는 영상 인식부;를 포함하고,
    상기 제1 패턴은 연속적인 웨이브 형태로 송출되며,
    상기 제1 적외선 패턴 조명 및 제2 적외선 패턴 조명은,
    좌측 및 우측에 각각 마련되되, 좌측 및 우측에서 각각 상기 제1 패턴 및 상기 제2 패턴을 투사하고,
    상기 영상 획득부는,
    좌측 및 우측 모두 점등 시, 두 패턴이 중첩되어 사라짐으로써, 상기 오브젝트를 인식하는 것을 특징으로 하는 적외선 카메라를 이용한 차량 제어 장치.
  2. 삭제
  3. 제 1 항에 있어서, 상기 제2 패턴은 펄스 폭 형태로 온/오프되어 송출되는 것을 특징으로 하는 적외선 카메라를 이용한 차량 제어 장치.
  4. 제 1 항에 있어서, 상기 제1 패턴 및 상기 제2 패턴이 모두 점등되었을 때 상기 오브젝트를 인식하는 것을 특징으로 하는 적외선 카메라를 이용한 차량 제어 장치.
  5. 제 4 항에 있어서, 상기 제1 패턴, 상기 제2 패턴, 상기 모두 점등은 순차적으로 반복되는 것을 특징으로 하는 적외선 카메라를 이용한 차량 제어 장치.
  6. 제 1 항에 있어서, 상기 제1 패턴 및 상기 제2 패턴이 서로 다를 때 상기 오브젝트의 깊이를 인식하는 것을 특징으로 하는 적외선 카메라를 이용한 차량 제어 장치.
  7. 제 1 항에 있어서,
    상기 인식한 오브젝트의 상태에 따라 경보 신호를 생성하는 경보 신호 생성부;
    상기 인식한 오브젝트의 깊이에 따라 차량의 제어 파라미터를 변경하는 제어부를 더 포함하고,
    상기 영상 획득부는,
    상기 제1 패턴 및 상기 제2 패턴이 모두 점등되었을 때 상기 오브젝트를 인식함으로써, 운전자가 졸고 있다고 판단될 때, 오브젝트에 해당되는 운전자의 상태를 인식하여, 경보 신호 출력부가 졸음에서 깰 수 있도록 하는 경보 신호를 출력하도록 하는 것을 특징으로 하는 적외선 카메라를 이용한 차량 제어 장치.
  8. 제1 패턴의 적외선 조명 신호 및 제2 패턴의 적외선 조명 신호, 영상 인식을 위한 적외선 신호를 생성하는 단계;
    상기 패턴들 중 적어도 하나의 패턴에 동기화되어 영상을 획득하는 단계;
    상기 획득한 영상에 포함된 오브젝트 및 오브젝트의 깊이를 인식하는 단계;
    상기 인식한 오브젝트 및 오브젝트의 깊이에 근거하여 차량의 제어 파라미터를 변경하거나 경보 신호를 출력하는 단계를 포함하며,
    상기 제1 패턴은 연속적인 웨이브 형태로 생성되어 송출되며,
    상기 제1 패턴 및 상기 제2 패턴은,
    좌측 및 우측에서 각각 투사되도록 하는 경우, 좌측 및 우측 모두 점등하면, 두 패턴이 중첩되어 사라짐으로써, 상기 오브젝트를 인식하는 것을 특징으로 하는 적외선 카메라를 이용한 차량 제어 방법.
  9. 삭제
  10. 제 8 항에 있어서, 상기 제2 패턴은 펄스 폭 형태로 생성되어 송출되는 것을 특징으로 하는 적외선 카메라를 이용한 차량 제어 방법.
  11. 제 8 항에 있어서, 상기 획득한 영상에 포함된 오브젝트 및 오브젝트의 깊이를 인식하는 단계는,
    상기 제1 패턴 및 상기 제2 패턴이 모두 점등되었을 때 상기 오브젝트를 인식함으로써, 운전자가 졸고 있다고 판단될 때, 오브젝트에 해당되는 운전자의 상태를 인식하여, 상기 경보 신호를 출력하는 단계에서 졸음에서 깰 수 있도록 하는 경보 신호를 출력하도록 하는 것을 특징으로 하는 적외선 카메라를 이용한 차량 제어 방법.
  12. 제 8 항에 있어서, 상기 제1 패턴 및 상기 제2 패턴이 서로 다를 때 상기 오브젝트의 깊이를 인식하는 것을 특징으로 하는 적외선 카메라를 이용한 차량 제어 방법.
KR1020130083954A 2013-07-17 2013-07-17 적외선 카메라를 이용한 차량 제어 방법 및 이를 위한 장치 KR102083682B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130083954A KR102083682B1 (ko) 2013-07-17 2013-07-17 적외선 카메라를 이용한 차량 제어 방법 및 이를 위한 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130083954A KR102083682B1 (ko) 2013-07-17 2013-07-17 적외선 카메라를 이용한 차량 제어 방법 및 이를 위한 장치

Publications (2)

Publication Number Publication Date
KR20150009700A KR20150009700A (ko) 2015-01-27
KR102083682B1 true KR102083682B1 (ko) 2020-03-02

Family

ID=52481758

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130083954A KR102083682B1 (ko) 2013-07-17 2013-07-17 적외선 카메라를 이용한 차량 제어 방법 및 이를 위한 장치

Country Status (1)

Country Link
KR (1) KR102083682B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023066782A1 (de) * 2021-10-20 2023-04-27 Valeo Schalter Und Sensoren Gmbh Umgebungs-kameravorrichtung, kamerasystem und fahrzeug

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004110804A (ja) 2002-08-28 2004-04-08 Fuji Xerox Co Ltd ３次元画像撮影装置及び方法
KR100593606B1 (ko) 2004-02-25 2006-06-28 이문기 패턴영상 투사에 의한 물체인식 장치 및 이에 적용되는영상처리 방법

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3465336B2 (ja) * 1994-02-04 2003-11-10 三菱電機株式会社 顔画像撮影装置
KR20120048190A (ko) * 2010-11-05 2012-05-15 전자부품연구원 동작인식을 이용한 차량 기능 제어 시스템
KR20130027671A (ko) * 2011-09-08 2013-03-18 한국전자통신연구원 깊이 정보 획득장치 및 이를 포함하는 3차원 정보 획득 시스템

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004110804A (ja) 2002-08-28 2004-04-08 Fuji Xerox Co Ltd ３次元画像撮影装置及び方法
KR100593606B1 (ko) 2004-02-25 2006-06-28 이문기 패턴영상 투사에 의한 물체인식 장치 및 이에 적용되는영상처리 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023066782A1 (de) * 2021-10-20 2023-04-27 Valeo Schalter Und Sensoren Gmbh Umgebungs-kameravorrichtung, kamerasystem und fahrzeug

Also Published As

Publication number Publication date
KR20150009700A (ko) 2015-01-27

Similar Documents

Publication Publication Date Title
US10469827B2 (en) Image processing device and image processing method
JP4420002B2 (ja) 視線先推定装置
US20180335633A1 (en) Viewing direction detector and viewing direction detection system
WO2012121107A1 (ja) 車戴カメラ及び車載カメラシステム
JP2011119917A (ja) 車両用表示装置
JP2009149152A (ja) 情報表示装置
JP2008276328A (ja) 顔画像撮像装置
US10949683B2 (en) Recognition support system for vehicle
JP2008243031A (ja) 漫然運転判定装置
JP6704607B2 (ja) 撮像システム、画像処理システム、移動体制御システム、移動体装置、投光装置、物体検出方法、物体検出プログラム
TWI522257B (zh) 車用安全系統及其運作方法
US11600081B2 (en) Lane recognition for automotive vehicles
JP6687886B2 (ja) 画像処理システム、移動体制御システム、移動体装置、物体検出方法、物体検出プログラム
WO2021060539A1 (ja) 測距装置、測距方法、プログラム、電子機器、学習モデル生成方法、製造方法、およびデプスマップ生成方法
JP6031468B2 (ja) 照射装置
CN107010077A (zh) 用于将信息传输给机动车的驾驶员的方法和适应性的驾驶员协助系统
JPWO2019193715A1 (ja) 運転支援装置
JP2009301123A (ja) 車両の運転支援装置
KR101623469B1 (ko) 레이저 광원을 이용한 야간 장애물 검출 장치 및 방법
JP2015170240A (ja) 車外環境認識装置
KR102083682B1 (ko) 적외선 카메라를 이용한 차량 제어 방법 및 이를 위한 장치
EP2696586A1 (en) Safety feature for projection subsystem using laser technology
US11807264B2 (en) Driving assistance apparatus, driving assistance method, and medium
TW201441079A (zh) 車輛輔助系統及車輛輔助方法
WO2021124918A1 (ja) 信号処理装置、信号処理方法、および、測距装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant