KR102142660B1 - 영상데이터의 리플렉션 이미지 제거 장치 및 방법 - Google Patents

영상데이터의 리플렉션 이미지 제거 장치 및 방법 Download PDF

Info

Publication number
KR102142660B1
KR102142660B1 KR1020140127102A KR20140127102A KR102142660B1 KR 102142660 B1 KR102142660 B1 KR 102142660B1 KR 1020140127102 A KR1020140127102 A KR 1020140127102A KR 20140127102 A KR20140127102 A KR 20140127102A KR 102142660 B1 KR102142660 B1 KR 102142660B1
Authority
KR
South Korea
Prior art keywords
image data
image
variation
viewpoint
reflection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020140127102A
Other languages
English (en)
Other versions
KR20160035462A (ko
Inventor
원지은
양욱일
정교영
손종인
유훈재
손광훈
Original Assignee
현대자동차주식회사
기아자동차주식회사
연세대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사, 기아자동차주식회사, 연세대학교 산학협력단 filed Critical 현대자동차주식회사
Priority to KR1020140127102A priority Critical patent/KR102142660B1/ko
Publication of KR20160035462A publication Critical patent/KR20160035462A/ko
Application granted granted Critical
Publication of KR102142660B1 publication Critical patent/KR102142660B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4023—Scaling of whole images or parts thereof, e.g. expanding or contracting based on decimating pixels or lines of pixels; based on inserting pixels or lines of pixels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/20—Processor architectures; Processor configuration, e.g. pipelining
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 차량 외부에 대한 영상데이터를 획득하는 복수개의 카메라, 영상데이터의 시점 변환에 기반하여 영상데이터의 변이 추정을 수행하고, 변이 추정을 통해 영상데이터에서 지면, 오브젝트 및 오브젝트에 대한 리플렉션 이미지를 확인하여 리플렉션 이미지를 제거하는 제어모듈을 포함할 수 있고, 다른 실시 예로도 적용이 가능하다.

Description

영상데이터의 리플렉션 이미지 제거 장치 및 방법{Apparatus and Method for Deleting Reflection Image of Image Data}
본 발명의 다양한 실시 예는 차량 외부에 대한 영상데이터에 존재하는 리플렉션 이미지를 제거하여 차량 주변의 장애물 검출에 대한 정확도를 향상시킬 수 있는 영상데이터의 리플렉션 이미지 제거 장치 및 방법에 관한 것이다.
최근, 차량에는 운전자에게 편의를 제공하고 운전자 및 동승자의 안전을 위한 다양한 전자 시스템들이 구비되고 있다. 특히, 차량의 후방에 다양한 센서를 구비하여 운전자가 확인이 어려운 차량 후방의 환경정보로부터 장애물을 검출하여 장애물과의 충돌 사고를 미연에 방지하여 주행의 안전성을 향상시키는 기술이 개발되고 있다.
상기와 같이 차량 후방의 장애물을 감지하는 시스템 중 일반적으로 잘 알려진 시스템은 차량 후방 영상 시스템이다. 이 후방 영상 시스템은 차량의 후방에 카메라를 구비하여 후방의 영상데이터를 획득하고, 획득된 영상으로부터 장애물을 감지하여 운전자에게 알려줄 수 있다. 그러나, 일반적인 차량 후방의 장애물 감지 시스템에서는 영상데이터에서 리플렉션 이미지를 제거하고자 할 때, 영상데이터의 성분을 모델링하여 완전 반사 성분을 완화시켜 원래 영상데이터를 복원하는 기술을 사용한다. 따라서, 영상데이터 전체적으로 왜곡이 발생되고, 리플렉션 이미지를 장애물로 인지함으로써 운전자에게 정확한 장애물 정보를 제공하기 어려운 문제점이 있다.
이러한 종래의 문제점을 해결하기 위한 본 발명의 다양한 실시 예들은 영상데이터의 시점 변화 및 변이 추정을 통해 영상데이터 내에서 지면, 오브젝트 및 리플렉션 이미지를 확인하여 상기 리플렉션 이미지를 제거할 수 있는 영상데이터의 리플렉션 이미지 제거 장치 및 방법에 관한 것이다.
본 발명의 일 실시 예에 따른 영상데이터의 리플렉션 이미지 제거 장치는 차량 외부에 대한 영상데이터를 획득하는 복수개의 카메라, 상기 영상데이터의 시점 변환에 기반하여 상기 영상데이터의 변이 추정을 수행하고, 상기 변이 추정을 통해 상기 영상데이터에서 지면, 오브젝트 및 리플렉션 이미지를 확인하여 상기 리플렉션 이미지를 제거하는 제어모듈을 포함할 수 있다.
또한, 상기 제어모듈은 상기 리플렉션 이미지가 제거된 영상데이터의 시점을 복원할 수 있다.
또한, 상기 제어모듈은 상기 오브젝트를 장애물로 인지하고, 상기 장애물에 대한 알림을 생성할 수 있다.
또한, 상기 제어모듈은 상기 시점 변환을 위한 가상 시점을 생성하고, 동일한 영역에 대한 스테레오 영상데이터의 시점을 상기 가상 시점으로 변환할 수 있다.
또한, 상기 제어모듈은 상기 지면에서 수직인 위치로 상기 가상 시점을 생성할 수 있다.
아울러, 본 발명의 일 실시 예에 따른 영상데이터의 리플렉션 이미지 제거 방법은 차량 외부에 대한 적어도 두 개의 영상데이터를 획득하는 단계, 가상 시점을 생성하여 상기 영상데이터의 시점을 상기 가상 시점으로 변환하는 단계, 상기 영상데이터의 변이 추정을 수행하는 단계, 상기 변이 추정을 통해 상기 영상데이터에서 지면, 오브젝트 및 리플렉션 이미지를 확인하는 단계, 상기 확인된 리플렉션 이미지를 제거하는 단계를 포함할 수 있다.
또한, 상기 리플렉션 이미지를 제거한 이후에 상기 영상데이터의 시점을 복원하는 단계를 더 포함할 수 있다.
또한, 상기 영상데이터의 시점을 복원한 이후에 상기 오브젝트를 장애물로 인지하여 상기 장애물에 대한 알림을 생성하고 출력하는 단계를 더 포함할 수 있다.
또한, 상기 적어도 두 개의 영상데이터를 획득하는 단계는 동일한 영역에 대한 스테레오 영상데이터를 획득하는 단계일 수 있다.
상술한 바와 같이 본 발명의 다양한 실시 예들에 따른 영상데이터의 리플렉션 이미지 제거 장치 및 방법은 영상데이터의 시점 변화 및 변이 추정을 통해 영상데이터 내에서 지면, 오브젝트 및 리플렉션 이미지를 확인하여 상기 리플렉션 이미지를 제거함으로써 영상데이터의 왜곡을 최소화하여 운전자에게 정확한 장애물 정보를 제공할 수 있다.
도 1은 본 발명의 실시 예에 따른 리플렉션 이미지 제거 장치의 주요 구성을 나타내는 블록도이다.
도 2는 본 발명의 실시 예에 따른 리플렉션 이미지 제거 방법을 설명하기 위한 순서도이다.
도 3은 본 발명의 실시 예에 따른 가상 시점 설정을 설명하기 위한 순서도이다.
도 4는 본 발명의 실시 예에 따른 영상데이터에서 리플렉션 이미지 제거 방법을 설명하기 위한 화면예시도이다.
이하, 본 발명의 다양한 실시 예가 첨부된 도면과 연관되어 기재된다. 본 발명의 다양한 실시 예는 다양한 변경을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들이 도면에 예시되고 관련된 상세한 설명이 기재되어 있다. 그러나, 이는 본 발명의 다양한 실시 예를 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 다양한 실시 예의 사상 및 기술 범위에 포함되는 모든 변경 및/또는 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용되었다.
도 1은 본 발명의 실시 예에 따른 리플렉션 이미지 제거 장치의 주요 구성을 나타내는 블록도이다.
도 1을 참조하면, 본 발명에 따른 리플렉션 이미지 제거 장치(100)는 카메라(110), 입력모듈(120), 출력모듈(130), 메모리(140) 및 제어모듈(150)을 포함할 수 있다.
카메라(110)는 차량에 구비되어 차량 외부의 영상데이터를 획득하여 제어모듈(150)로 제공할 수 있다. 카메라(110)는 적어도 두 개를 포함할 수 있으며, 동일한 높이에 구비되어 동일한 영역에 대하여 좌영상(Left Image Data)와 우영상(Right Image Data)을 포함하는 스테레오 영상데이터를 획득할 수 있다.
입력모듈(120)은 외부로부터의 입력에 따른 제어신호를 생성한다. 이를 위해, 입력모듈(120)은 키패드, 터치패드, 터치스크린 등의 입력장치로 형성될 수 있으며, 입력모듈(120)이 터치스크린으로 형성된 경우, 출력모듈(130)의 기능도 같이 수행할 수 있다.
출력모듈(130)은 카메라(110)에서 획득된 영상데이터를 출력하여 운전자에게 제공할 수 있다. 출력모듈(130)은 LCD, 터치스크린 등의 출력장치로 형성될 수 있으며, 제어모듈(150)의 제어에 의해 차량 주변의 장애물 존재에 대한 알림을 출력하기 위한 스피커(SPK)를 포함할 수 있다.
메모리(140)는 리플렉션 이미지 제거 장치(100)를 동작시키기 위한 프로그램 등을 저장할 수 있다. 특히, 메모리(140)는 카메라(110)에서 획득된 영상데이터에서 리플렉션 이미지를 확인하여 제거하기 위한 프로그램을 저장할 수 있다.
제어모듈(150)은 카메라(110)에서 획득된 차량 외부의 영상데이터의 시점을 변환하고, 영상데이터의 변이추정을 통해 영상데이터에서 지면, 오브젝트 및 리플렉션 이미지를 확인할 수 있다. 이때, 리플렉션 이미지는 빛에 의해 생성되는 이미지일 수 있다. 예컨대, 리플렉션 이미지는 빛이 오브젝트에 반사되어 생성되는 이미지와, 빛으로 인해 발생된 반사광에 의해 오브젝트가 아님에도 불구하고 오브젝트처럼 감지되는 이미지를 포함하는 용어로 사용될 수 있다. 제어모듈(150)은 확인된 리플렉션 이미지를 영상데이터에서 제거하여 영상데이터에 존재하는 오브젝트를 장애물로 인지할 수 있다. 이를 위해, 제어모듈(150)은 시점관리부(151), 변이추정관리부(152), 리플렉션 이미지관리부(153)를 포함할 수 있다.
시점관리부(151)는 카메라(110)에서 획득된 스테레오 영상데이터의 획득 시점을 확인할 수 있다. 시점관리부(151)는 스테레오 영상데이터의 시점을 변환할 수 있다. 시점관리부(151)는 영상데이터의 시점 변환을 위한 가상 시점을 생성하고, 획득된 영상데이터의 시점을 생성된 가상 시점으로 변환할 수 있다. 가상 시점은 지면에 수직인 위치일 수 있다. 시점관리부(151)는 스테레오 영상데이터의 획득 시점을 기준으로 지면에 수직이 될 수 있는 임계 각도를 산출하여 가상 시점을 생성할 수 있다. 시점관리부(151)는 스테레오 영상데이터의 시점을 가상 시점으로 변환할 수 있다.
변이추정관리부(152)는 시점이 변환된 스테레오 영상데이터의 변이를 추정할 수 있다. 변이추정관리부(152)는 좌영상과 우영상 사이에 서로 대응되는 영역을 검색하고, 검색된 영역에서 좌영상과 우영상 사이의 좌표값의 차이로 변이값을 획득할 수 있다.
리플렉션 이미지관리부(153)는 획득된 변이값을 이용하여 스테레오 영상데이터에서의 지면, 오브젝트 및 리플렉션 이미지를 확인할 수 있다. 리플렉션 이미지관리부(153)는 변이값을 이용하여 변이 히스토그램을 생성하고, 변이 히스토그램을 분석하여 지면 영역의 변이값을 설정할 수 있다. 리플렉션 이미지관리부(153)는 지면 영역이 영상데이터에서 가장 넓은 영역을 차지한다는 가정을 활용하여 변이 히스토그램이 최대 값을 갖는 영역을 지면의 변이값으로 설정할 수 있다. 리플렉션 이미지관리부(153)는 지면의 변이값을 기준으로 지면 영역의 변이값보다 작은 변이값을 갖는 영역을 리플렉션 이미지 영역으로 판단하고, 지면 영역의 변이값보다 큰 변이값을 갖는 영역을 오브젝트 영역으로 판단할 수 있다. 리플렉션 이미지관리부(153)는 판단된 리플렉션 이미지 영역을 변이 추정된 영상데이터에서 제거할 수 있다. 리플렉션 이미지관리부(153)는 리플렉션 이미지 영역이 제거된 변이 추정 영상데이터의 시점을 복원하여 원래 영상데이터에서 리플렉션 이미지가 제거된 오브젝트 영역을 검출할 수 있다. 이로 인해, 본 발명은 리플렉션 이미지가 제거된 영상데이터를 기준으로 영상데이터 내에서의 오브젝트 예컨대, 장애물을 검출할 수 있으므로, 리플렉션 이미지를 장애물로 인지하지 않아 장애물 검출의 정확도를 향상시킬 수 있다.
도 2는 본 발명의 실시 예에 따른 리플렉션 이미지 제거 방법을 설명하기 위한 순서도이다.
도 1 및 도 2를 참조하면, 11단계에서 제어모듈(150)은 카메라(110)에서 획득된 영상데이터를 확인할 수 있다. 이때, 카메라(110)에서 획득된 영상데이터는 차량의 외부를 촬영한 영상데이터일 수 있다. 영상데이터는 적어도 두 개의 카메라에서 동일한 영역에 대하여 획득한 좌영상(Left image data)과 우영상(Right image data)을 포함하는 스테레오 영상데이터일 수 있다.
13단계에서 제어모듈(150)은 적어도 두 개의 카메라에서 획득된 영상데이터의 시점을 변환할 수 있다. 제어모듈(150)은 영상데이터의 시점 변환을 위한 가상 시점을 생성하고, 획득된 영상데이터의 시점을 생성된 가상 시점으로 변환할 수 있다. 가상 시점은 지면에 수직인 위치일 수 있다. 이때, 지면은 영상데이터의 분석을 통해 확인할 수 있다. 또한, 차량에 구비된 카메라(110)에서 획득되는 영상데이터의 시점을 확인하고, 확인된 시점을 기준으로 지면에 수직이 될 수 있는 임계 각도를 산출하여 가상 시점을 생성할 수 있다.
15단계에서 제어모듈(150)은 영상데이터의 시점이 가상 시점으로 변환된 스테레오 영상데이터의 변이를 추정할 수 있다. 제어모듈(150)은 좌영상과 우영상 사이에 서로 대응되는 영역을 검색하고, 상기 검색된 영역에서 좌영상과 우영상 사이의 좌표값의 차이로 변이값을 획득할 수 있다.
17단계에서 제어모듈(150)은 획득된 변이값을 이용하여 영상데이터에서의 지면, 오브젝트 및 리플렉션 이미지를 확인할 수 있다. 제어모듈(150)은 변이값을 이용하여 변이 히스토그램을 생성하고, 변이 히스토그램을 분석하여 지면 영역의 변이값을 설정할 수 있다. 제어모듈(150)은 지면 영역이 영상데이터에서 가장 넓은 영역을 차지한다는 가정을 활용하여 변이 히스토그램이 최대 값을 갖는 영역을 지면의 변이값으로 설정할 수 있다. 제어모듈(150)은 지면의 변이값을 기준으로 지면 영역의 변이값보다 작은 변이값을 갖는 영역을 리플렉션 이미지 영역으로 판단하고, 지면 영역의 변이값보다 큰 변이값을 갖는 영역을 오브젝트 영역으로 판단할 수 있다.
19단계에서 제어모듈(150)은 판단된 리플렉션 이미지 영역을 변이 추정된 영상데이터에서 제거할 수 있다.
21단계에서 제어모듈(150)은 리플렉션 이미지 영역이 제거된 변이 추정 영상데이터의 시점을 복원하여 원래 영상데이터에서 리플렉션 이미지가 제거된 오브젝트 영역을 검출할 수 있다. 이로 인해, 본 발명은 리플렉션 이미지가 제거된 영상데이터를 기준으로 영상데이터 내에서의 오브젝트 예컨대, 장애물을 검출할 수 있으므로, 리플렉션 이미지를 장애물로 인지하지 않아 장애물 검출의 정확도를 향상시킬 수 있다.
도 3은 본 발명의 실시 예에 따른 가상 시점 설정을 설명하기 위한 화면예시도이다.
도 1 및 도 3을 참조하면, 제어모듈(150)은 차량(V)의 전방(F)과 후방(R)에 카메라(110)를 구비할 수 있다. 본 발명의 실시 예에서는 차량(V)의 후방(R)에 구비된 카메라(110)에서 획득된 스테레오 영상데이터를 예로 설명하고 있으나, 반드시 이에 한정되는 것은 아니며, 차량(V)의 전방(F)을 포함하는 외부에 구비된 카메라(110)에서 획득된 스테레오 영상데이터에 적용할 수 있다. 제어모듈(150)은 카메라(110)와 지면(Ground) 사이의 각도를 확인하여 영상데이터를 획득하는 실제 시점(RV; Real View)을 확인할 수 있다. 제어모듈(150)은 실제 시점(RV)을 기준으로 가상 시점(VV; Virtual View)을 생성할 수 있다. 예컨대, 제어모듈(150)은 실제 시점(RV)에 대응되는 카메라(110)와 지면(Ground) 사이의 각도를 확인하고, 상기 실제 시점(RV)에 대한 각도를 지면(Ground)에 수직을 이루는 각도로 변환하기 위한 임계 각도를 산출할 수 있다.
제어모듈(150)은 산출된 임계 각도를 이용하여 카메라(110)에서 획득된 스테레오 영상데이터의 시점을 가상 시점으로 변환할 수 있다. 가상 시점으로 변환된 스테레오 영상데이터에서의 변이는 물체의 높이에 비례할 수 있다. 예컨대, 제어모듈(150)은 지면(Ground)를 기준으로 양의 값(1)을 갖는 영역을 오브젝트 영역으로 인지하고, 음의 값(-1)을 갖는 영역을 리플렉션 이미지 영역으로 인지할 수 있다.
도 4는 본 발명의 실시 예에 따른 영상데이터에서 리플렉션 이미지 제거 방법을 설명하기 위한 화면예시도이다.
도 1, 도 3 및 도 4를 참조하면, 도 4(a)는 두 개의 카메라(110)에서 획득된 차량 후방에 대한 좌영상(L)과 우영상(R)을 나타내는 스테레오 영상데이터일 수 있다. 제어모듈(150)은 도 3과 같은 방법으로 스테레오 영상데이터의 시점을 변환하기 위한 가상 시점을 생성하여 스테레오 영상데이터의 시점을 가상 시점으로 변환할 수 있다. 이때, 가상 시점으로 변환된 영상데이터는 도 4(b)와 같이 나타낼 수 있다.
제어모듈(150)은 도 4(b)와 같이 시점이 가상 시점으로 변환된 스테레오 영상데이터의 변이를 추정할 수 있다. 제어모듈(150)은 좌영상(L)과 우영상(R)으로부터 변이정보를 추출할 수 있다. 변이정보를 추출한 이후에 제어모듈(150)은 좌영상(L)과 우영상(R) 사이에 서로 대응되는 영역을 검색할 수 있다. 제어모듈(150)은 검색된 영역에서 좌영상(L)과 우영상(R) 사이의 좌표값의 차이로 변이값을 획득하여 스테레오 영상데이터의 변이를 추정할 수 있고, 이는 도 4(c)와 같이 나타낼 수 있다.
제어모듈(150)은 도 4(d)와 같이 변이 추정된 영상데이터의 변이 히스토그램을 분석할 수 있다. 제어모듈(150)은 도 4(d)에서 지면변이영역(Ground)를 정의할 수 있고, 지면변이영역(Ground)를 기준으로 지면영역의 변이보다 작은 변이를 갖는 영역을 리플렉션 이미지 영역으로 판단하고, 지면영역의 변이보다 큰 변이를 갖는 영역을 오브젝트 영역으로 판단할 수 있다.
제어모듈(150)은 도 4(d)에서와 같이 지면변이영역을 기준으로 판단된 리플렉션 이미지 영역을 삭제하여 도 4(e)와 같이 오브젝트에 대한 영상데이터를 생성할 수 있다.
제어모듈(150)은 도 4(f)와 같이 영상데이터의 시점을 원래 시점 예컨대, 영상데이터 획득 시점으로 복원하고, 도 4(f)에서 삭제된 리플렉션 이미지 영역(RA)을 검출할 수 있다. 제어모듈(150)은 도 4(f)에서 확인된 리플렉션 이미지 영역(RA)을 도 4(g)와 같이 삭제할 수 있다.
그리고 본 명세서와 도면에 발명된 본 발명의 실시 예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 범위는 여기에 발명된 실시 예들 이외에도 본 발명의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100: 리플렉션 이미지 제거 장치 110: 카메라
120: 입력모듈 130: 출력모듈
140: 메모리 150: 제어모듈
151: 시점관리부 152: 변이추정관리부
153: 리플렉션 이미지관리부

Claims (9)

  1. 차량 외부에 대한 영상데이터를 획득하는 복수개의 카메라;
    상기 영상데이터의 시점 변환에 기반하여 상기 영상데이터의 변이 추정을 수행하여 변이 추정값을 획득하고, 상기 변이 추정값을 통해 상기 영상데이터에서 지면 영역, 오브젝트 영역 및 리플렉션 이미지 영역을 확인하여 상기 리플렉션 영역이미지를 제거하는 제어모듈;을 포함하고,
    상기 제어모듈은,
    상기 변이 추정값을 이용하여 변이 히스토그램을 생성하고, 상기 변이 히스토그램이 최대값을 갖는 영역을 지면의 변이 추정값으로 설정한 후, 상기 지면의 변이 추정값보다 작은 변이 추정값을 갖는 영역을 상기 리플렉션 이미지 영역으로 판단하고, 상기 지면의 변이 추정값보다 큰 변이 추정값을 갖는 영역을 상기 오브젝트 영역으로 판단하는 것을 특징으로 하는 리플렉션 이미지 제거 장치.
  2. 제1항에 있어서,
    상기 제어모듈은
    상기 리플렉션 이미지가 제거된 영상데이터의 시점을 복원하는 리플렉션 이미지 제거 장치.
  3. 제2항에 있어서,
    상기 제어모듈은
    상기 오브젝트를 장애물로 인지하고, 상기 장애물에 대한 알림을 생성하는 리플렉션 이미지 제거 장치.
  4. 제1항에 있어서,
    상기 제어모듈은
    상기 시점 변환을 위한 가상 시점을 생성하고, 동일한 영역에 대한 스테레오 영상데이터의 시점을 상기 가상 시점으로 변환하는 리플렉션 이미지 제거 장치.
  5. 제4항에 있어서,
    상기 제어모듈은
    상기 지면에서 수직인 위치로 상기 가상 시점을 생성하는 리플렉션 이미지 제거 장치.
  6. 차량 외부에 대한 적어도 두 개의 영상데이터를 획득하는 단계;
    가상 시점을 생성하여 상기 영상데이터의 시점을 상기 가상 시점으로 변환하는 단계;
    상기 영상데이터의 변이 추정을 수행하여 변이 추정값을 획득하는 단계;
    상기 변이 추정값을 통해 상기 영상데이터에서 지면 영역, 오브젝트 영역 및 리플렉션 이미지 영역을 확인하는 단계; 및
    상기 확인된 리플렉션 이미지 영역을 제거하는 단계;를 포함하고,
    상기 확인하는 단계는,
    상기 변이 추정값을 이용하여 변이 히스토그램을 생성하고, 상기 변이 히스토그램이 최대값을 갖는 영역을 지면의 변이 추정값으로 설정한 후, 상기 지면의 변이 추정값을 기준으로 지면 영역의 변이 추정값보다 작은 변이 추정값을 갖는 영역을 상기 리플렉션 이미지 영역으로 판단하고, 상기 지면의 변이 추정값보다 큰 변이 추정값을 갖는 영역을 상기 오브젝트 영역으로 판단하는 것을 특징으로 하는 는 리플렉션 이미지 제거 방법.
  7. 제6항에 있어서,
    상기 리플렉션 이미지를 제거한 이후에 상기 영상데이터의 시점을 복원하는 단계;
    를 더 포함하는 리플렉션 이미지 제거 방법.
  8. 제7항에 있어서,
    상기 영상데이터의 시점을 복원한 이후에 상기 오브젝트를 장애물로 인지하여 상기 장애물에 대한 알림을 생성하고 출력하는 단계;
    를 더 포함하는 리플렉션 이미지 제거 방법.
  9. 제6항에 있어서,
    상기 적어도 두 개의 영상데이터를 획득하는 단계는
    동일한 영역에 대한 스테레오 영상데이터를 획득하는 단계인 리플렉션 이미지 제거 방법.
KR1020140127102A 2014-09-23 2014-09-23 영상데이터의 리플렉션 이미지 제거 장치 및 방법 Active KR102142660B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140127102A KR102142660B1 (ko) 2014-09-23 2014-09-23 영상데이터의 리플렉션 이미지 제거 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140127102A KR102142660B1 (ko) 2014-09-23 2014-09-23 영상데이터의 리플렉션 이미지 제거 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20160035462A KR20160035462A (ko) 2016-03-31
KR102142660B1 true KR102142660B1 (ko) 2020-08-07

Family

ID=55652165

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140127102A Active KR102142660B1 (ko) 2014-09-23 2014-09-23 영상데이터의 리플렉션 이미지 제거 장치 및 방법

Country Status (1)

Country Link
KR (1) KR102142660B1 (ko)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002352225A (ja) * 2001-05-23 2002-12-06 Toshiba Corp 障害物検出装置及びその方法
JP2003232867A (ja) 2002-02-12 2003-08-22 Toshiba Corp 物体検出方法及び装置
JP2009265783A (ja) * 2008-04-23 2009-11-12 Sanyo Electric Co Ltd 運転支援システム及び車両

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07114699A (ja) * 1993-10-19 1995-05-02 Matsushita Electric Ind Co Ltd 物体検出方法及びその装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002352225A (ja) * 2001-05-23 2002-12-06 Toshiba Corp 障害物検出装置及びその方法
JP2003232867A (ja) 2002-02-12 2003-08-22 Toshiba Corp 物体検出方法及び装置
JP2009265783A (ja) * 2008-04-23 2009-11-12 Sanyo Electric Co Ltd 運転支援システム及び車両

Also Published As

Publication number Publication date
KR20160035462A (ko) 2016-03-31

Similar Documents

Publication Publication Date Title
JP6670071B2 (ja) 車両用画像認識システム、及び対応法
JP5689907B2 (ja) 車両において通行物体位置検出を向上する方法
US20210073557A1 (en) Systems and methods for augmenting upright object detection
CN105716567B (zh) 通过单眼图像获取设备侦测物体与机动车辆距离的方法
JP4943034B2 (ja) ステレオ画像処理装置
EP2928178B1 (en) On-board control device
TWI504858B (zh) A vehicle specification measuring and processing device, a vehicle specification measuring method, and a recording medium
JP6188592B2 (ja) 物体検出装置、物体検出方法、および物体検出プログラム
KR102082254B1 (ko) 차량 인식 시스템
US10789727B2 (en) Information processing apparatus and non-transitory recording medium storing thereon a computer program
KR20170064652A (ko) 에고모션 추정 시스템 및 방법
JP6361313B2 (ja) 車両検出方法及び装置
KR20230095751A (ko) 딥러닝을 이용한 카메라 센서 고장 예측 장치 및 그 방법
KR20180071552A (ko) 카메라 기반 도로 곡률 추정을 위한 차선 검출 방법 및 시스템
JP2021051347A (ja) 距離画像生成装置及び距離画像生成方法
KR102142660B1 (ko) 영상데이터의 리플렉션 이미지 제거 장치 및 방법
KR102188164B1 (ko) 3차원 데이터를 이용한 도로 인식 방법
US10783350B2 (en) Method and device for controlling a driver assistance system by using a stereo camera system including a first and a second camera
KR101194152B1 (ko) 보행자 충돌 회피 방법 및 그 시스템
US10668858B2 (en) Around view monitoring system and operating method thereof
JP4151631B2 (ja) 物体検出装置
US20130141575A1 (en) Driving assistance system and method
KR20230060300A (ko) 3차원 객체 검출 장치 및 방법
KR101527886B1 (ko) 스테레오 영상을 이용한 도로 물웅덩이 검출 장치 및 그 방법
US12190598B2 (en) Method and device for recognizing an object for a vehicle including a mono camera, and camera system

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20140923

PG1501 Laying open of application
A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20181029

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20140923

Comment text: Patent Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20191213

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20200615

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20200803

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20200804

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
PR1001 Payment of annual fee

Payment date: 20230801

Start annual number: 4

End annual number: 4