KR20210062345A - Callibration device for callibrating of camera and radar - Google Patents

Callibration device for callibrating of camera and radar Download PDF

Info

Publication number
KR20210062345A
KR20210062345A KR1020190150468A KR20190150468A KR20210062345A KR 20210062345 A KR20210062345 A KR 20210062345A KR 1020190150468 A KR1020190150468 A KR 1020190150468A KR 20190150468 A KR20190150468 A KR 20190150468A KR 20210062345 A KR20210062345 A KR 20210062345A
Authority
KR
South Korea
Prior art keywords
target member
sensor
calibration
radar
camera
Prior art date
Application number
KR1020190150468A
Other languages
Korean (ko)
Other versions
KR102552138B1 (en
Inventor
김웅태
윤진형
김정호
Original Assignee
이인텔리전스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이인텔리전스 주식회사 filed Critical 이인텔리전스 주식회사
Priority to KR1020190150468A priority Critical patent/KR102552138B1/en
Publication of KR20210062345A publication Critical patent/KR20210062345A/en
Application granted granted Critical
Publication of KR102552138B1 publication Critical patent/KR102552138B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/40—Means for monitoring or calibrating
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H04N5/2257—

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Radar Systems Or Details Thereof (AREA)

Abstract

The present embodiments relate to a calibration device for calibration in the sensor fusion situation of a camera and a radar device. In one aspect, the present embodiments provide a calibration device that includes a first target member for calibration of a first sensor and a second target member for calibration of a second sensor, wherein the second target member is provided in the first target member.

Description

카메라 및 레이더 센서퓨젼을 위한 캘리브레이션 장치 및 그 방법{CALLIBRATION DEVICE FOR CALLIBRATING OF CAMERA AND RADAR}Camera and radar sensor fusion calibration device and its method {CALLIBRATION DEVICE FOR CALLIBRATING OF CAMERA AND RADAR}

본 실시예들은 카메라 및 레이더 장치의 센서 퓨전 상황에서의 캘리브레이션을 위한 캘리브레이션 장치에 관한 것이다.The present embodiments relate to a calibration device for calibration in a sensor fusion situation of a camera and a radar device.

차량의 안전운전 및 충돌방지 구현을 위해 카메라와 레이더가 장착되고 있는데 통상적으로 카메라는 형태를 인식 가능하고, 레이더는 정밀한 거리, 이동속도의 검출이 가능하다.Cameras and radars are installed for safe driving and collision avoidance of vehicles. In general, cameras can recognize the shape, and radars can detect precise distances and movement speeds.

따라서 차량에 레이더와 카메라를 동시에 장착하여 융합신호처리를 수행함으로써 차량, 보행자와 같은 도로객체의 형태를 인지하고, 더불어 도로객체까지의 거리와 이동속도를 정밀하게 추출 가능하여 차량이 도로상의 객체를 검지하게 되면 이에 따른 거리를 측정하여 차량의 제동 및 충돌회피 제어가 가능하다.Therefore, the vehicle is equipped with a radar and a camera at the same time to perform fusion signal processing, thereby recognizing the shape of road objects such as vehicles and pedestrians, and also precisely extracting the distance and moving speed to the road object so that the vehicle can detect objects on the road. When detected, it is possible to control the braking and collision avoidance of the vehicle by measuring the corresponding distance.

일반적으로 카메라가 차량이 구성되는 위치와 레이더가 차량에 구성되느 ㄴ위치는 상호 구분되어 있다. 또한, 카메라와 레이더는 차량의 운행 중에 정밀한 타켓 감지와 영상 처리를 수행하기 위해서 정밀한 위치 보정이 요구된다. 특히, 센서 퓨전 상황에서 카메라 또는 레이더의 정확한 캘리브레이션이 수행되지 못하면 융합된 데이터에 대한 신뢰성이 하락하게 되고 이는 자율 주행 등 차세대 차량 제어에 문제점으로 작용할 수 있다. In general, a location where a camera is configured on a vehicle and a location where a radar is configured on a vehicle are separated from each other. In addition, cameras and radars require precise position correction in order to perform precise target detection and image processing during vehicle operation. In particular, if accurate calibration of a camera or radar is not performed in a sensor fusion situation, the reliability of the fused data is deteriorated, which can act as a problem for next-generation vehicle control such as autonomous driving.

이러한 문제점을 해결하기 위해서, 종래에는 카메라와 레이더를 각각 다른 방식을 사용하여 캘리브레이션 수행하였다. 예를 들어, 카메라는 카메라 캘리브레이션을 위한 별도의 장치를 이용하여 캘리브레이션을 수행하고, 레이더는 레이더를 위한 별도의 장치를 이용하여 캘리브레이션을 수행하였다. In order to solve this problem, in the related art, a camera and a radar have been calibrated using different methods. For example, the camera calibrated using a separate device for camera calibration, and the radar calibrated using a separate device for radar.

그러나, 센서 퓨전 상황에서 보다 정확하게 서로 다른 센서를 캘리브레이션하기 위해서, 하나의 장치로 통합 캘리브레이션을 수행할 필요성이 있다. 또한, 공정에서 뿐만 아니라 차량 정비소에서도 빠르고 정확하게 캘리브레이션을 수행할 필요가 있다. However, in order to more accurately calibrate different sensors in a sensor fusion situation, there is a need to perform integrated calibration with one device. In addition, there is a need to quickly and accurately perform calibration not only in the process but also in the vehicle workshop.

본 실시예들은 카메라와 레이더 센서퓨전을 위한 캘리브레이션 장치를 제공할 수 있다.The present embodiments may provide a calibration device for camera and radar sensor fusion.

일 측면에서, 본 실시예들은 제1 센서의 캘리브레이션을 위한 제1 타켓 부재 및 제2 센서의 캘리브레이션을 위한 제2 타켓 부재를 포함하되, 제2 타켓 부재가 상기 제1 타켓 부재 내에 구비되는 캘리브레이션 장치를 제공한다. 또한, 본 실시예들의 제1 센서는 카메라 센서이고, 제2 센서는 레이더 센서이다. In one aspect, the present embodiments include a first target member for calibration of the first sensor and a second target member for calibration of the second sensor, wherein the second target member is provided in the first target member. Provides. In addition, the first sensor of the present embodiments is a camera sensor, and the second sensor is a radar sensor.

또한, 본 실시예들의 제1 타켓 부재는 일면에 격자 패턴이 구비되고, 격자 패턴을 구성하는 선은 눈금표시가 구비되는 캘리브레이션 장치를 제공한다. In addition, the first target member of the present embodiments provides a calibration apparatus in which a grid pattern is provided on one surface, and a line constituting the grid pattern is provided with a grid mark.

또한, 본 실시예들의 제2 타켓 부재는, 사각뿔 형상으로 구성되고, 사각뿔의 밑 면과 제1 타켓 부재의 일면은 동일 평면상에 구비되는 것을 특징으로 하는 캘리브레이션 장치를 제공한다. In addition, the second target member of the present embodiments is configured in the shape of a square pyramid, and the bottom surface of the square pyramid and one surface of the first target member are provided on the same plane.

또한, 본 실시예들의 제2 타켓 부재는 레이더 전파신호를 반사하는 재질로 구성되고, 제1 타켓 부재는, 레이더 전파신호를 흡수하는 재질로 구성되는 것을 특징으로 하는 캘리브레이션 장치를 제공한다. 여기서, 제2 타켓 부재의 재질은 금속 재질이고, 제1 타켓 부재의 재질은 플라스틱 재질이다. In addition, the second target member according to the present exemplary embodiment is made of a material that reflects a radar wave signal, and the first target member is made of a material that absorbs a radar wave signal. Here, the material of the second target member is a metal material, and the material of the first target member is a plastic material.

또한, 본 실시예들의 제1 타켓 부재 및 제2 타켓 부재는 각각 사각형으로 구성되고, 제2 타켓 부재의 중심점에서 제1 타켓 부재의 각 코너점까지의 거리는 동일하도록 구비되는 것을 특징으로 하는 캘리브레이션 장치를 제공한다. In addition, the first target member and the second target member of the present embodiments are each configured in a square, and the distance from the center point of the second target member to each corner point of the first target member is provided to be the same, characterized in that the calibration apparatus Provides.

본 실시예들에 의하면, 빠르고 정확하게 카메라와 레이더를 동시에 캘리브레이션을 수행할 수 있다. According to the present embodiments, it is possible to quickly and accurately calibrate the camera and the radar at the same time.

도 1은 일 실시예에 따른 차량 내 센서를 설명하기 위한 도면이다.
도 2는 일 실시예에 따른 캘리브레이션 장치를 도시한 도면이다.
도 3은 일 실시예에 따른 캘리브레이션 장치에 구성되는 제2 타켓 부재를 도시한 도면이다.
도 4는 일 실시예에 따른 캘리브레이션 장치를 측면에서 도시한 도면이다.
도 5는 일 실시예에 따른 캘리브레이션 장치를 이용하여 캘리브레이션을 수행하는 동작을 설명하기 위한 도면이다. 1 is a diagram for describing an in-vehicle sensor according to an exemplary embodiment.
2 is a diagram illustrating a calibration apparatus according to an embodiment.
3 is a diagram illustrating a second target member configured in a calibration apparatus according to an exemplary embodiment.
4 is a side view of a calibration apparatus according to an exemplary embodiment.
5 is a diagram for describing an operation of performing calibration using a calibration device according to an exemplary embodiment.

이하, 본 개시의 일부 실시예들을 예시적인 도면을 참조하여 상세하게 설명한다. 각 도면의 구성 요소들에 참조부호를 부가함에 있어서, 동일한 구성 요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가질 수 있다. 또한, 본 실시예들을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 기술 사상의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략할 수 있다. 본 명세서 상에서 언급된 "포함한다", "갖는다", "이루어진다" 등이 사용되는 경우 "~만"이 사용되지 않는 이상 다른 부분이 추가될 수 있다. 구성 요소를 단수로 표현한 경우에 특별한 명시적인 기재 사항이 없는 한 복수를 포함하는 경우를 포함할 수 있다.Hereinafter, some embodiments of the present disclosure will be described in detail with reference to exemplary drawings. In adding reference numerals to elements of each drawing, the same elements may have the same numerals as possible even if they are indicated on different drawings. In addition, in describing the embodiments, when it is determined that a detailed description of a related known configuration or function may obscure the gist of the present technical idea, a detailed description thereof may be omitted. When "include", "have", "consists of" and the like mentioned in the present specification are used, other parts may be added unless "only" is used. In the case of expressing the constituent elements in the singular, the case including the plural may be included unless there is a specific explicit description.

또한, 본 개시의 구성 요소를 설명하는 데 있어서, 제1, 제2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질, 차례, 순서 또는 개수 등이 한정되지 않는다. In addition, in describing the constituent elements of the present disclosure, terms such as first, second, A, B, (a) and (b) may be used. These terms are only for distinguishing the component from other components, and the nature, order, order, or number of the component is not limited by the term.

구성 요소들의 위치 관계에 대한 설명에 있어서, 둘 이상의 구성 요소가 "연결", "결합" 또는 "접속" 등이 된다고 기재된 경우, 둘 이상의 구성 요소가 직접적으로 "연결", "결합" 또는 "접속" 될 수 있지만, 둘 이상의 구성 요소와 다른 구성 요소가 더 "개재"되어 "연결", "결합" 또는 "접속"될 수도 있다고 이해되어야 할 것이다. 여기서, 다른 구성 요소는 서로 "연결", "결합" 또는 "접속" 되는 둘 이상의 구성 요소 중 하나 이상에 포함될 수도 있다. In the description of the positional relationship of components, when two or more components are described as being "connected", "coupled" or "connected", the two or more components are directly "connected", "coupled" or "connected" "It may be, but it should be understood that two or more components and other components may be further "interposed" to be "connected", "coupled" or "connected". Here, the other constituent elements may be included in one or more of two or more constituent elements “connected”, “coupled” or “connected” to each other.

구성 요소들이나, 동작 방법이나 제작 방법 등과 관련한 시간적 흐름 관계에 대한 설명에 있어서, 예를 들어, "~후에", "~에 이어서", "~다음에", "~전에" 등으로 시간적 선후 관계 또는 흐름적 선후 관계가 설명되는 경우, "바로" 또는 "직접"이 사용되지 않는 이상 연속적이지 않은 경우도 포함할 수 있다.In the description of the temporal flow relationship related to the components, the operation method or the manufacturing method, for example, the temporal precedence relationship such as "after", "after", "after", "before", etc. Alternatively, a case where a flow forward and backward relationship is described may also include a case that is not continuous unless “directly” or “directly” is used.

한편, 구성 요소에 대한 수치 또는 그 대응 정보(예: 레벨 등)가 언급된 경우, 별도의 명시적 기재가 없더라도, 수치 또는 그 대응 정보는 각종 요인(예: 공정상의 요인, 내부 또는 외부 충격, 노이즈 등)에 의해 발생할 수 있는 오차 범위를 포함하는 것으로 해석될 수 있다.On the other hand, when a numerical value for a component or its corresponding information (e.g., level, etc.) is mentioned, the numerical value or its corresponding information is related to various factors (e.g., process factors, internal or external impacts, etc.) It can be interpreted as including an error range that can be caused by noise, etc.).

차량 기술이 발전함에 따라 자율주행과 다수의 운전 지원 시스템이 차량에 구성된다. 이러한 차량 기술의 발전을 지원하고, 다양한 운전 지원 시스템을 제공하기 위해서 차량 내에 다양한 종류의 센서가 다수 구비된다. As vehicle technology advances, autonomous driving and multiple driving support systems are built into vehicles. In order to support the development of such vehicle technology and provide a variety of driving support systems, a number of sensors of various types are provided in the vehicle.

예를 들어, 차량은 카메라 센서, 레이더 센서, 라이다 센서, 초음파 센서 등 다양한 종류의 센서를 구비하여 차량 외부 환경 정보를 취득한다. 또한, 차속센서, 조향각 센서, 토크 센서, 요 레이트 센서 등 차량 내부 정보를 취득하기 위한 센서도 다수 포함한다. For example, a vehicle is equipped with various types of sensors such as a camera sensor, a radar sensor, a lidar sensor, and an ultrasonic sensor to obtain information about the environment outside the vehicle. It also includes a number of sensors for acquiring vehicle interior information, such as a vehicle speed sensor, a steering angle sensor, a torque sensor, and a yaw rate sensor.

운전 지원 시스템과 이를 활용한 자율주행 시스템은 전술한 다수의 센서로부터 취득되는 신호를 기초로 미리 설정된 알고리즘에 따라 차량의 동작을 제어한다. 따라서, 다양한 종류의 센서로부터 수신되는 센싱정보를 융합하기 위한 센서 퓨전 기술과 센싱 정보에 대한 신뢰성 확보 기술이 중요하다. The driving support system and the autonomous driving system using the same control the operation of the vehicle according to a preset algorithm based on signals acquired from the above-described multiple sensors. Therefore, a sensor fusion technology for fusing sensing information received from various types of sensors and a technology for securing reliability of sensing information are important.

특히, 본 실시예에서는 센싱 정보의 신뢰성을 확보하기 위한 캘리브레이션 장치에 대해서 서술한다. 캘리브레이션이란, 차량 제조 공정에서 다양한 센서가 차량에 장착되나, 공정상의 오차로 인해서 발생하는 센서 회전, 뒤틀림, 각도 이상들을 확인하고 바로 잡는 과정을 의미한다. In particular, in this embodiment, a calibration device for securing the reliability of sensing information will be described. Calibration refers to the process of checking and correcting sensor rotation, distortion, and angle abnormalities that occur due to process errors, although various sensors are installed on the vehicle during the vehicle manufacturing process.

따라서, 캘리브레이션 과정은 차량 출고를 위한 필수적 절차이다. 또한, 최근에는 차량에 다수의 센서가 구성되고, 차량의 주행 환경에 따라 신뢰성 높은 센싱정보가 요구됨에 따라 차량 주행 중에도 캘리브레이션을 수행하기도 한다. 물론, 차량이 출고된 이후에 정비소 등에서도 캘리브레이션 과정을 수행할 필요가 있다. Therefore, the calibration process is an essential procedure for leaving the vehicle. In addition, in recent years, a plurality of sensors are configured in a vehicle, and since highly reliable sensing information is required according to the driving environment of the vehicle, calibration is also performed while the vehicle is driving. Of course, after the vehicle is shipped, it is necessary to perform a calibration process in a workshop or the like.

이하에서 개시할 본 실시예는 차량의 출고 전 캘리브레이션 뿐만 아니라 정비소 등에서도 사용할 수 있는 간단하고 정확한 캘리브레이션 장치를 제공하고자 한다. This embodiment, which will be disclosed below, is intended to provide a simple and accurate calibration device that can be used not only for calibration before leaving the vehicle but also in a repair shop.

본 명세서에서 개시하는 센서의 명칭 및 센서 개수와 캘리브레이션 장치에 대한 명칭은 예시적으로 기재한 것으로 그 용어에 한정되는 것은 아니다. The names of the sensors disclosed in the present specification, the number of sensors, and the names of the calibration devices are provided as examples and are not limited to the terms.

도 1은 일 실시예에 따른 차량 내 센서를 설명하기 위한 도면이다. 1 is a diagram for describing an in-vehicle sensor according to an exemplary embodiment.

도 1을 참조하면, 차량은 주행 방향 전방을 촬상하기 위한 카메라 센서(110) 및 레이더 센서(120)를 구비한다. 기존의 경우 통상적으로 차량의 출고 과정에서 특정위치만큼 떨어진 곳에 존재하는 특정표식(마커, marker)에 대한 영상을 카메라센서(110)가 취득하여 왜곡보정과 장착공차에 따른 보정을 수행한다. Referring to FIG. 1, a vehicle includes a camera sensor 110 and a radar sensor 120 for capturing an image in a driving direction ahead. In the conventional case, the camera sensor 110 acquires an image of a specific mark (marker) existing at a distance by a specific location during the vehicle shipment process, and performs distortion correction and correction according to the mounting tolerance.

이와 독립적으로 특정 위치만큼 떨어진 곳에 존재하는 코너리플렉터(Corner Reflector)를 이용하여 차량에 장착된 레이더 센서(120)의 지향점을 측정하여, 장착공차에 따른 오차를 개별적으로 측정한 후 이 값을 ECU(Electronics Control Unit)에 입력하여 보정하는 방법을 사용하였다.Independently of this, by measuring the orientation point of the radar sensor 120 installed in the vehicle using a corner reflector located at a distance by a specific position, the error according to the mounting tolerance is individually measured, and then this value is measured in the ECU ( Electronics Control Unit) and calibrated.

이는 카메라 센서(110)와 레이더 센서(120)의 구성이 차량 내에서 이격되어 구성됨에 따라 캘리브레이션도 별도의 과정에서 수행하여 정확성을 높이는 것이다. 예를 들어, 카메라 센서(110)를 캘리브레이션하기 위한 마커는 지면에 설치되고, 차량의 카메라 센서(110) 개수에 따라 마커의 개수가 결정되었다. This is to increase accuracy by performing calibration in a separate process as the configuration of the camera sensor 110 and the radar sensor 120 are separated from each other in the vehicle. For example, a marker for calibrating the camera sensor 110 is installed on the ground, and the number of markers is determined according to the number of camera sensors 110 of the vehicle.

레이더 센서(120)를 캘리브레이션하기 위한 코너 리플렉터는 지면이 아닌 벽면에 설치되었다. 또한, 캘리브레이션 과정도 카메라 센서(110)와 레이더 센서(120)가 각각 독립적인 공간에서 시계열적으로 수행되었다. A corner reflector for calibrating the radar sensor 120 was installed on the wall, not on the ground. In addition, the calibration process was also performed in time series in a space where the camera sensor 110 and the radar sensor 120 were each independent.

이러한 캘리브레이션 과정을 통해서 각각의 센서에 대한 신뢰성을 확보하고, 이를 바탕으로 센싱정보를 퓨전하는 경우에도 동일 오브젝트를 동일 좌표계에서 확인할 수 있다. Through this calibration process, reliability of each sensor is secured, and even when sensing information is fused based on this, the same object can be confirmed in the same coordinate system.

그러나, 전술한 바와 같이 종래 캘리브레이션 공정은 개별적으로 수행됨에 따라 비용 및 시간적인 소모가 다수 발생하였다. 또한, 소형 정비소 등에서는 수행하기 어려운 점이 있었으며, 소비자가 직접 수행하기에는 불가능한 측면이 존재한다. However, as described above, as the conventional calibration process is performed individually, a large number of cost and time consumption have occurred. In addition, there is a point that is difficult to perform in a small repair shop, and there is an aspect that is impossible for a consumer to perform it directly.

이러한 문제점을 해결하기 위해서, 본 개시에서는 하나의 간단한 장치로 구성되는 캘리브레이션 장치(200)를 제안한다. In order to solve this problem, the present disclosure proposes a calibration device 200 composed of one simple device.

도 2는 일 실시예에 따른 캘리브레이션 장치를 도시한 도면이다. 2 is a diagram illustrating a calibration apparatus according to an embodiment.

도 2를 참조하면, 캘리브레이션 장치(200)는 제1 센서의 캘리브레이션을 위한 제1 타켓 부재(210) 및 제2 센서의 캘리브레이션을 위한 제2 타켓 부재(220)를 포함할 수 있다. 여기서, 제1 센서는 카메라 센서(110)일 수 있고, 제2 센서는 레이더 센서(120)일 수 있다. Referring to FIG. 2, the calibration apparatus 200 may include a first target member 210 for calibrating a first sensor and a second target member 220 for calibrating a second sensor. Here, the first sensor may be the camera sensor 110 and the second sensor may be the radar sensor 120.

일 예로, 제2 타켓 부재(220)는 제1 타켓 부재(210) 내에 구비될 수 있다. 예를 들어, 제2 타켓 부재(220)는 제1 타켓 부재(210)와 연결되어 구비되며, 제1 타켓 부재(210)와 함께 구비된다. For example, the second target member 220 may be provided in the first target member 210. For example, the second target member 220 is provided in connection with the first target member 210, and is provided together with the first target member 210.

한편, 제1 타켓 부재(210)는 카메라 센서(110)의 캘리브레이션을 위한 부재이고, 제2 타켓 부재(220)는 레이더 센서(120)의 캘리브레이션을 위한 부재이다. 이와 같이, 제2 타켓 부재(220)가 제1 타켓 부재(210) 내에 구비됨으로써, 캘리브레이션 장치(200)의 크기를 감소시킬 수 있고 동시에 레이더 센서(120)와 카메라 센서(110)의 캘리브레이션 동작을 수행할 수 있다. Meanwhile, the first target member 210 is a member for calibrating the camera sensor 110, and the second target member 220 is a member for calibrating the radar sensor 120. In this way, since the second target member 220 is provided in the first target member 210, the size of the calibration device 200 can be reduced, and at the same time, the calibration operation of the radar sensor 120 and the camera sensor 110 can be performed. You can do it.

한편, 제1 타켓 부재(210)는 일면에 격자 패턴이 구비될 수 있다. 예를 들어, 제1 타켓 부재(210)는 판 형상으로 배치되고, 일면에는 검정색과 흰색의 마커가 격자 패턴을 형성한다. 제1 타켓 부재(210)의 다른 일면은 격자 패턴이 도시되지 않는다. 또는, 제1 타켓 부재(210)의 다른 일면에는 타면에 형성된 격자 패턴과 다른 모양의 패턴이 형성될 수도 있다. 또는 제1 타켓 부재(210)의 다른 일면에는 타면에 형성된 격자 패턴과 동일한 패턴이되, 격자의 크기가 상호 다르게 구성될 수도 있다. Meanwhile, the first target member 210 may have a grid pattern on one surface. For example, the first target member 210 is arranged in a plate shape, and black and white markers form a grid pattern on one surface. A grid pattern is not shown on the other surface of the first target member 210. Alternatively, a pattern having a shape different from that of a grid pattern formed on the other surface may be formed on the other surface of the first target member 210. Alternatively, the other surface of the first target member 210 may have the same pattern as the grid pattern formed on the other surface, but the size of the grid may be different from each other.

이를 통해서, 카메라 센서(110)의 특성에 따라 제1 타켓 부재(210)의 면을 선택적으로 적용할 수 있다. Through this, the surface of the first target member 210 may be selectively applied according to the characteristics of the camera sensor 110.

또한, 제1 타켓 부재(210)와 제2 타켓 부재(220)는 탈착이 가능하도록 연결될 수 있다. 즉, 제1 타켓 부재(210)의 가운데 부분은 제2 타켓 부재(220)를 연결할 수 있도록 홀이 형성된다. 즉, 제2 타켓 부재(220) 타켓 부재를 제거하는 경우에 제2 타켓 부재(220) 자리는 홀이 형성된다. In addition, the first target member 210 and the second target member 220 may be connected to be detachable. That is, a hole is formed in the center of the first target member 210 to connect the second target member 220. That is, when the target member of the second target member 220 is removed, a hole is formed in the position of the second target member 220.

필요에 따라, 제1 타켓 부재(210)의 격자 패턴을 구성하는 선은 눈금표시가 구비될 수 있다. 눈금표시는 자에 표기되는 것과 같은 눈금선으로 표기될 수 있으며, 눈금의 개수에 제한은 없다. If necessary, a grid mark may be provided for a line constituting the grid pattern of the first target member 210. The scale mark can be marked with the same scale line as indicated on a ruler, and there is no limit to the number of scales.

도 3은 일 실시예에 따른 캘리브레이션 장치에 구성되는 제2 타켓 부재를 도시한 도면이다. 3 is a diagram illustrating a second target member configured in a calibration apparatus according to an exemplary embodiment.

도 3을 참조하면, 제2 타켓 부재(220)는 사각뿔 형상으로 구성된다. 즉, 제2 타켓 부재(220)는 코너 리플렉터 역할을 수행하기 위해서, 사각뿔 형상으로 구비될 수 있다. 다만, 이는 예시적인 것으로, 원뿔 또는 평면 형상일 수도 있고, 육면체 형상일 수도 있다. Referring to FIG. 3, the second target member 220 has a square pyramid shape. That is, the second target member 220 may be provided in the shape of a square pyramid in order to function as a corner reflector. However, this is exemplary, and may be a conical or planar shape, or a hexahedral shape.

한편, 제2 타켓 부재(220)의 사각뿔 밑 면과 제1 타켓 부재(210)의 일면은 동일 평면상에 구비될 수 있다. 즉, 제2 타켓 부재(220)와 제1 타켓 부재(210)는 연결함에 있어서, 일면에 단차가 구성되지 않도록 연결될 수 있다. 즉, 도 2에 도시된 바와 같이, 210 및 220 부재는 동일 평면 상에 구비될 수 있다. Meanwhile, the bottom surface of the quadrangular pyramid of the second target member 220 and one surface of the first target member 210 may be provided on the same plane. That is, when the second target member 220 and the first target member 210 are connected, they may be connected so that a step is not formed on one surface. That is, as shown in FIG. 2, the 210 and 220 members may be provided on the same plane.

재질 측면에서 제1 타켓 부재(210)와 제2 타켓 부재(220)는 서로 다른 재질로 구성될 수 있다. In terms of material, the first target member 210 and the second target member 220 may be formed of different materials.

예를 들어, 제2 타켓 부재(220)는, 레이더 전파신호를 반사하는 재질로 구성된다. 즉, 레이더 센서(120)로부터 조사되는 레이더 전파를 반사시켜서 레이더 센서(120)의 캘리브레이션 동작을 수행하도록 재질이 반사율이 높도록 구성될 수 있다. 바람직하게는 제2 타켓 부재(220)는 금속 재질로 구비된다. For example, the second target member 220 is made of a material that reflects a radar radio signal. That is, the material may be configured to have a high reflectance so as to perform a calibration operation of the radar sensor 120 by reflecting a radar wave irradiated from the radar sensor 120. Preferably, the second target member 220 is made of a metal material.

또한, 제1 타켓 부재(210)는 레이더 전파신호를 흡수하는 재질로 구성된다. 이를 통해서, 제1 타켓 부재(210)는 레이더 센서(120)로부터 조사되는 레이더 전파 신호를 반사하지 않고, 제2 타켓 부재(220)만이 반사시키도록 구비될 수 있다. 즉, 제1 타켓 부재(210)는 제2 타켓 부재(220)를 통한 레이더 센서(120)의 캘리브레이션 동작을 방해하지 않도록 구성된다. 바람직하게는 제1 타켓 부재(210)는 플라스틱 재질로 구비된다. 또는, 제1 타켓 부재(210)는 제2 타켓 부재(220)와 동일한 금속 재질로 구비되되, 전파를 흡수하는 도료가 칠해질 수 있다. .In addition, the first target member 210 is made of a material that absorbs radar radio signals. Through this, the first target member 210 may not reflect the radar radio signal irradiated from the radar sensor 120, but may be provided to reflect only the second target member 220. That is, the first target member 210 is configured not to interfere with the calibration operation of the radar sensor 120 through the second target member 220. Preferably, the first target member 210 is made of a plastic material. Alternatively, the first target member 210 may be made of the same metal material as the second target member 220, but may be painted with a paint that absorbs radio waves. .

다시 도 2를 참조하면, 제1 타켓 부재(210) 및 상기 제2 타켓 부재(220)는 각각 사각형으로 구성된다. 형태는 정사각형일 수도 있고, 직사각형일 수도 있다. 또는, 하나의 부재는 정사각형이고 다른 부재는 직사각형일 수도 있다. 이 외에도 다양한 형태로 구성될 수도 있다. Referring back to FIG. 2, each of the first target member 210 and the second target member 220 has a rectangular shape. The shape may be square or rectangular. Alternatively, one member may be square and the other member may be rectangular. In addition to this, it may be configured in various forms.

한편, 사각형으로 구성되는 경우, 제2 타켓 부재(220)의 중심점에서 제1 타켓 부재(210)의 각 코너점까지의 거리는 동일하게 형성될 수 있다. 즉, 제2 타켓 부재(220)는 제1 타켓 부재(210)의 정중앙에 위치하도록 구비될 수 있다. Meanwhile, in the case of having a rectangular shape, the distance from the center point of the second target member 220 to each corner point of the first target member 210 may be formed equally. That is, the second target member 220 may be provided to be located in the center of the first target member 210.

또는, 제2 타켓 부재(220)는 제1 타켓 부재(210)의 정중앙에서 일정 거리 아래쪽 또는 위쪽으로 이격되어 위치하도록 구비될 수 있다. 이는 레이더 센서(120)와 카메라 센서(110)의 위치 차이에 따라 다양하게 구성되어 캘리브레이션 효율을 높이기 위함이다. Alternatively, the second target member 220 may be provided to be spaced apart from the center of the first target member 210 by a predetermined distance downward or upward. This is to increase calibration efficiency by being configured in various ways according to the position difference between the radar sensor 120 and the camera sensor 110.

예를 들어, 도 5와 같이, 카메라 센서(110)와 레이더 센서(120)의 이격 거리가 수직으로 크게 벌어지는 경우, 제2 타켓 부재(120)는 제1 타켓 부재(110)의 중앙이 아닌 하단 가운데 부분에 위치할 수도 있다. 또는, 그 반대의 경우에도 적용될 수 있다. For example, as shown in FIG. 5, when the separation distance between the camera sensor 110 and the radar sensor 120 is vertically widened, the second target member 120 is at the lower end of the first target member 110 rather than the center. It can also be located in the middle. Or, vice versa.

도 4는 일 실시예에 따른 캘리브레이션 장치를 측면에서 도시한 도면이다. 4 is a side view of a calibration apparatus according to an exemplary embodiment.

도 4를 참조하면, 제2 타켓 부재(220)는 사각뿔 형태로 구비되어 제1 타켓 부재(210)의 일면에서는 동일 평면 상에 구비되나, 반대쪽 일면에서는 제2 타켓 부재(220)가 제1 타켓 부재(210)보다 더 튀어 나오도록 구성될 수 있다. Referring to FIG. 4, the second target member 220 is provided in the form of a square pyramid and is provided on the same plane on one side of the first target member 210, but the second target member 220 is on the opposite side. It may be configured to protrude more than the member 210.

도 5는 일 실시예에 따른 캘리브레이션 장치를 이용하여 캘리브레이션을 수행하는 동작을 설명하기 위한 도면이다. 5 is a diagram for describing an operation of performing calibration using a calibration device according to an exemplary embodiment.

도 5를 참조하면, 일체형으로 구비된 캘리브레이션 장치(200)는 차량의 카메라 센서(110)의 촬상 각도에 제1 타켓 부재(210)가 형성되어 카메라 센서(110)는 이를 이용하여 캘리브레이션을 수행한다. Referring to FIG. 5, in the calibration apparatus 200 provided as an integral part, a first target member 210 is formed at an imaging angle of the camera sensor 110 of the vehicle, and the camera sensor 110 performs calibration using this. .

예를 들어, 제1 타켓 부재(210)의 격자패턴은 카메라 센서(210)의 왜곡 보정, 회전 및 이동을 검출하기 위해서 사용되며, 보정 목적 및 효율성에 따라 격자 패턴이나 부가 표시를 변경할 수 있다. For example, the grid pattern of the first target member 210 is used to correct distortion, rotation, and movement of the camera sensor 210, and the grid pattern or additional display may be changed according to the purpose and efficiency of the correction.

제1 타켓 부재(210)에서 격자의 개수는 중앙을 기준으로 좌/우 대칭되며 제1 타켓 부재(210)의 정 중앙에는 도 2에 도시된 바와 제2 타켓 부재(220)가 구비된다. The number of gratings in the first target member 210 is symmetric left/right with respect to the center, and a second target member 220 as shown in FIG. 2 is provided at the center of the first target member 210.

한편, 일체형으로 구비된 캘리브레이션 장치(200)는 차량의 레이더 센서(120)의 조사 각도에 제2 타켓 부재(220)가 형성되어 레이더 센서(120)는 이를 이용하여 캘리브레이션을 수행한다. Meanwhile, in the integrated calibration apparatus 200, a second target member 220 is formed at the irradiation angle of the radar sensor 120 of the vehicle, and the radar sensor 120 performs calibration using this.

예를 들어, 제2 타켓 부재(220)의 격자패턴은 레이더 센서(220)의 조사 각도를 검출하기 위해서 사용되며, 반사 신호의 세기를 기준으로 캘리브레이션을 수행한다. For example, the grating pattern of the second target member 220 is used to detect the irradiation angle of the radar sensor 220, and calibration is performed based on the intensity of the reflected signal.

제2 타켓 부재(220)는 레이더 센서(120)의 위치에 따라 제1 타켓 부재(210) 내에서의 위치가 결정될 수 있다. The position of the second target member 220 in the first target member 210 may be determined according to the position of the radar sensor 120.

이상의 설명은 본 개시의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 기술 사상의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 또한, 본 실시예들은 본 개시의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이므로 이러한 실시예에 의하여 본 기술 사상의 범위가 한정되는 것은 아니다. 본 개시의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 개시의 권리 범위에 포함되는 것으로 해석되어야 할 것이다. The above description is merely illustrative of the technical idea of the present disclosure, and those of ordinary skill in the technical field to which the present disclosure pertains will be able to make various modifications and variations without departing from the essential characteristics of the technical idea. In addition, the present embodiments are not intended to limit the technical idea of the present disclosure, but to describe the present disclosure, and thus the scope of the present technical idea is not limited by these embodiments. The scope of protection of the present disclosure should be construed by the following claims, and all technical ideas within the scope equivalent thereto should be construed as being included in the scope of the present disclosure.

Claims (7)

제1 센서의 캘리브레이션을 위한 제1 타켓 부재;
제2 센서의 캘리브레이션을 위한 제2 타켓 부재를 포함하되,
상기 제2 타켓 부재가 상기 제1 타켓 부재 내에 구비되는 캘리브레이션 장치.A first target member for calibration of the first sensor;
Including a second target member for calibration of the second sensor,
The calibration apparatus in which the second target member is provided in the first target member. 제 1 항에 있어서,
상기 제1 센서는 카메라 센서이고, 상기 제2 센서는 레이더 센서인 것을 특징으로 하는 캘리브레이션 장치.The method of claim 1,
Wherein the first sensor is a camera sensor, and the second sensor is a radar sensor. 제 1 항에 있어서,
상기 제1 타켓 부재는,
일면에 격자 패턴이 구비되고, 상기 격자 패턴을 구성하는 선은 눈금표시가 구비되는 캘리브레이션 장치. The method of claim 1,
The first target member,
A calibration device having a grid pattern on one side, and a grid mark on a line constituting the grid pattern. 제 1 항에 있어서,
상기 제2 타켓 부재는,
상기 사각뿔 형상으로 구성되고, 상기 사각뿔의 밑 면과 상기 제1 타켓 부재의 일면은 동일 평면상에 구비되는 것을 특징으로 하는 캘리브레이션 장치.The method of claim 1,
The second target member,
The calibration device, characterized in that it is configured in the shape of the square pyramid, wherein the bottom surface of the square pyramid and one surface of the first target member are provided on the same plane. 제 1 항에 있어서,
상기 제2 타켓 부재는,
레이더 전파신호를 반사하는 재질로 구성되고,
상기 제1 타켓 부재는,
상기 레이더 전파신호를 흡수하는 재질로 구성되는 것을 특징으로 하는 캘리브레이션 장치.The method of claim 1,
The second target member,
It is made of a material that reflects radar radio signals,
The first target member,
A calibration device comprising a material that absorbs the radar radio signal. 제 5 항에 있어서,
상기 제2 타켓 부재의 재질은 금속 재질이고,
상기 제1 타켓 부재의 재질은 플라스틱 재질인 것을 특징으로 하는 캘리브레이션 장치. The method of claim 5,
The material of the second target member is a metal material,
The calibration apparatus, characterized in that the material of the first target member is made of plastic. 제 1 항에 있어서,
상기 제1 타켓 부재 및 상기 제2 타켓 부재는 각각 사각형으로 구성되고,
상기 제2 타켓 부재의 중심점에서 상기 제1 타켓 부재의 각 코너점까지의 거리는 동일하도록 구비되는 것을 특징으로 하는 캘리브레이션 장치. The method of claim 1,
The first target member and the second target member are each configured in a square shape,
A calibration apparatus, characterized in that the distance from the center point of the second target member to each corner point of the first target member is provided to be the same.
KR1020190150468A 2019-11-21 2019-11-21 Callibration device for callibrating of camera and radar KR102552138B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190150468A KR102552138B1 (en) 2019-11-21 2019-11-21 Callibration device for callibrating of camera and radar

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190150468A KR102552138B1 (en) 2019-11-21 2019-11-21 Callibration device for callibrating of camera and radar

Publications (2)

Publication Number Publication Date
KR20210062345A true KR20210062345A (en) 2021-05-31
KR102552138B1 KR102552138B1 (en) 2023-07-07

Family

ID=76150254

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190150468A KR102552138B1 (en) 2019-11-21 2019-11-21 Callibration device for callibrating of camera and radar

Country Status (1)

Country Link
KR (1) KR102552138B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2610250A (en) * 2021-08-27 2023-03-01 Motional Ad Llc Universal calibration targets and calibration spaces

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150092920A (en) * 2014-02-06 2015-08-17 주식회사 만도 Calibration and calibration system of camera and radar
KR20180072312A (en) * 2016-12-21 2018-06-29 전자부품연구원 Checker for Simultaneous Correction of Camera and Radar

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150092920A (en) * 2014-02-06 2015-08-17 주식회사 만도 Calibration and calibration system of camera and radar
KR20180072312A (en) * 2016-12-21 2018-06-29 전자부품연구원 Checker for Simultaneous Correction of Camera and Radar

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2610250A (en) * 2021-08-27 2023-03-01 Motional Ad Llc Universal calibration targets and calibration spaces

Also Published As

Publication number Publication date
KR102552138B1 (en) 2023-07-07

Similar Documents

Publication Publication Date Title
CN109215083B (en) Method and device for calibrating external parameters of vehicle-mounted sensor
US11754672B2 (en) RADAR cross section compensation for calibration of vehicle RADAR
US11313946B2 (en) Method and apparatus for identification of calibration targets during vehicle radar system service procedures
US10852422B2 (en) Method for calibrating a sensor of a motor vehicle for measuring angles, computing device, driver assistance system and motor vehicle
US10935643B2 (en) Sensor calibration method and sensor calibration apparatus
US9726754B2 (en) Method and device for calibrating a 3D TOF camera system
US11486988B2 (en) Method for calibrating the alignment of a moving object sensor
EP3712556A1 (en) Sensor verification
US9696413B2 (en) Method for aligning a laser scanner with respect to a roadway
AU2018373751B2 (en) Method and device for ascertaining an installation angle between a roadway on which a vehicle travels and a detection direction of a measurement or radar sensor
US20230028484A1 (en) Automatic extrinsic calibration using sensed data as a target
CN113710988A (en) Method for detecting the functional capability of an environmental sensor, control unit and vehicle
CN109425852A (en) The scaling method of automobile and trailer-mounted radar, device
CN111243029A (en) Calibration method and device of vision sensor
CN112284416B (en) Automatic driving positioning information calibration device, method and storage medium
CN109238221B (en) Method and device for detecting surrounding environment of vehicle
CN112710339A (en) Method and apparatus for calibrating vehicle sensors
CN114839611A (en) Self-calibration method and device of millimeter wave radar
KR102552138B1 (en) Callibration device for callibrating of camera and radar
CN114442073A (en) Laser radar calibration method and device, vehicle and storage medium
KR101931955B1 (en) Calibration and calibration system of camera and radar
CN110568412A (en) method for calibrating a sensor assembly
CN113109791B (en) Vehicle-mounted laser radar calibration result evaluation system and method
CN114910874A (en) Vehicle-mounted laser radar installation and calibration method
JP7217817B2 (en) Object recognition device and object recognition method

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant