KR20200063899A - Calibration panel for multi-camera calibration - Google Patents

Calibration panel for multi-camera calibration Download PDF

Info

Publication number
KR20200063899A
KR20200063899A KR1020180150168A KR20180150168A KR20200063899A KR 20200063899 A KR20200063899 A KR 20200063899A KR 1020180150168 A KR1020180150168 A KR 1020180150168A KR 20180150168 A KR20180150168 A KR 20180150168A KR 20200063899 A KR20200063899 A KR 20200063899A
Authority
KR
South Korea
Prior art keywords
calibration
panel
panels
vehicle
camera
Prior art date
Application number
KR1020180150168A
Other languages
Korean (ko)
Other versions
KR102173334B1 (en
Inventor
김종효
나경진
최장욱
하수영
정명환
Original Assignee
아진산업(주)
오토아이티(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 아진산업(주), 오토아이티(주) filed Critical 아진산업(주)
Priority to KR1020180150168A priority Critical patent/KR102173334B1/en
Publication of KR20200063899A publication Critical patent/KR20200063899A/en
Application granted granted Critical
Publication of KR102173334B1 publication Critical patent/KR102173334B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

The present invention relates to a calibration plate for vehicle multi-camera calibration. The calibration plate comprises: a plurality of figure panels made of a rigid material and disposed to be spaced a predetermined distance apart from each other; and a panel connection line which connects the plurality of figure panels and can adjust the lengths according to a distances between the panels, wherein each of the figure panels has a shape of one of a rhombus, a square, and an equilateral triangle.

Description

차량 다중 카메라 교정을 위한 교정판{Calibration panel for multi-camera calibration}Calibration panel for multi-camera calibration

본 발명은 차량 다중 카메라 교정을 위한 교정판에 관한 것으로, 특히 형상서로 변형이 없으며 오염에 강인한 특성을 가지며, 또한 다양한 차종 모두에 적용 가능한 상이한 차량 다중 카메라 교정을 위한 교정판에 관한 것이다. The present invention relates to a calibration plate for vehicle multi-camera calibration, and particularly to a calibration plate for calibrating different vehicle multi-cameras that is not deformed in shape and has strong characteristics against contamination, and is applicable to all various vehicle models.

최근 자동차 산업의 발달로 인하여 1가구 1자동차 시대라고 할 정도로 자동차의 보급은 상용화되었고, 차량의 안전도 향상과 운전자의 편의를 도모하기 위해 다양한 첨단 전자 기술이 자동차에 적용되고 있다.Due to the recent development of the automobile industry, the spread of automobiles has been commercialized to the extent of 1 household, 1 automobile, and various advanced electronic technologies have been applied to automobiles in order to improve vehicle safety and promote driver convenience.

이러한 첨단 전자 기술 중 자동차의 주변 환경을 촬영하여 표시함으로써, 운전자가 자동차의 주변 환경을 육안으로 편리하게 확인할 수 있는 차량 어라운드 뷰 영상 제공 장치(Around View Monitoring, AVM)가 있다. Among these advanced electronic technologies, there is a vehicle around view image providing device (AVM) that allows a driver to conveniently check the surrounding environment of a vehicle by visually photographing and displaying the surrounding environment of the vehicle.

차량 주변영상 표시 시스템은 자동차의 전방, 후방, 좌측 및 우측에 각각 설치된 카메라를 통해 주변 환경을 촬영하고, 촬영된 영상을 기초로 중복 영역을 자연스럽게 보이도록 보정 처리하여 차량 어라운드 뷰 영상을 생성한 후, 이를 자동차에 구비된 디스플레이 장치에 제공하도록 한다. The vehicle surrounding image display system captures the surrounding environment through cameras installed on the front, rear, left, and right sides of the car, and generates a vehicle around view image by correcting the overlapped area to look natural based on the captured image. , To provide it to a display device provided in a vehicle.

이에 따라 운전자는 표시된 주변 환경을 통해 자동차의 주변 상황을 정확하게 인식할 수 있고, 사이드 미러나 백 미러를 보지 않고도 편리하게 주차를 할 수 있다.Accordingly, the driver can accurately recognize the surroundings of the vehicle through the displayed surrounding environment, and can conveniently park without looking at the side mirror or rearview mirror.

한편 차량 주변 영상 시스템에서 서로 다른 카메라에서 촬영된 영상을 하나의 화면에 자연스럽게 표시하거나, 특히 3D 영상으로 구현하기 위해서는 전방, 후방, 좌측 및 우측에 각각 설치된 카메라의 위치 및 자세, 즉 카메라 교정 값을 알아야 한다.On the other hand, in a video system around a vehicle, the position and posture of the cameras installed on the front, rear, left, and right sides, that is, the camera calibration values, are displayed in a natural way to display images taken from different cameras on one screen, or in particular to implement 3D images. You should know.

종래에는 도 1에서와 같이 다수의 교정판이 프린팅된 부직포와 같은 천을 차량 전방 또는 후방에 배치한 후, 이를 차량 전방, 후방, 좌측 및 우측에 각각 설치된 카메라를 통해 동시 촬영하고, 카메라 촬영 결과를 기반으로 카메라 교정 값을 추정하도록 하였다. Conventionally, as shown in Figure 1, after placing a cloth such as a non-woven fabric printed with a plurality of orthodontic plates on the front or rear of a vehicle, it is simultaneously photographed through cameras installed on the front, rear, left and right sides of the vehicle, and based on the camera shooting results. To estimate the camera calibration values.

다만, 다수의 교정판이 부직포와 같은 천에 프린팅되는 경우, 바람이 불면 교정판의 흔들림으로 고정이 어려워 교정의 정밀도가 떨어지고 작업의 시간과 난이도가 증가하는 문제가 발생하게 된다. 또한 작업자의 발자국 및 실외 환경에 의한 오염에 취약하여 장기간 사용 할 수 없는 문제도 있다.However, when a plurality of orthodontic plates are printed on a cloth such as a non-woven fabric, when the wind blows, it is difficult to fix it due to the shaking of the orthodontic plate, resulting in a decrease in the accuracy of the calibration and an increase in the time and difficulty of the operation. In addition, there is a problem that it cannot be used for a long time because it is vulnerable to contamination by the worker's footprint and the outdoor environment.

그리고 다중 카메라 교정을 위한 교정판은 도 2에서와 같이 반드시 카메라 시야각 중복 지점에 배치되어야 교정판에 다수의 카메라에 중복 촬영될 수 있다. 그 결과, 차량 크기에 따라 카메라 시야각 중복 지점이 변화되면, 이에 따라 교정판 사이의 간격 또한 조정되어야 한다. In addition, the calibration plate for multi-camera calibration must be disposed at the overlapping point of the camera viewing angle as shown in FIG. 2 so that the calibration plate can be repeatedly photographed on multiple cameras. As a result, if the overlapping point of view angle of the camera changes according to the vehicle size, the gap between the calibration plates must also be adjusted accordingly.

그러나 다수의 교정판을 부직포와 같은 천에 프린팅하게 되면, 다수 교정판의 간격이 고정되어 다양한 차량 크기 모두를 커버할 수가 없게 된다. 이에 차종에 따라 차량 크기가 달라질 때마다 교정판을 별도 제작해야 하는 문제가 발생하게 된다. However, when a plurality of orthodontic plates are printed on the same fabric as a non-woven fabric, the gap between the orthogonal orthodontic plates is fixed so that it is impossible to cover all of various vehicle sizes. Accordingly, there is a problem in that a calibration plate must be separately manufactured whenever the vehicle size varies depending on the vehicle model.

이에 상기와 같은 문제점을 해결하기 위한 것으로서, 바람과 같은 외부 환경에 의한 형상 변화가 발생하지 않으며 작업자의 발자국 및 실외 환경에 의한 오염에도 강인한 특성을 가질 수 있도록 하는 차량 다중 카메라 교정을 위한 교정판을 제공하고자 한다. Accordingly, as a solution to the above-mentioned problems, a shape change caused by an external environment such as wind does not occur, and a calibration plate for vehicle multi-camera calibration that has strong characteristics against contamination by a worker's footprint and outdoor environment Want to provide.

또한 차종에 따른 차량 크기 변화에 상관없이 재사용될 수 있도록 하는 차량 다중 카메라 교정을 위한 교정판을 제공하고자 한다. In addition, it is intended to provide a calibration plate for vehicle multi-camera calibration that can be reused regardless of the vehicle size change according to the vehicle model.

본 발명의 목적은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 본 발명이 속하는 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The objects of the present invention are not limited to the above-mentioned objects, and other objects not mentioned will be clearly understood by those skilled in the art from the following description.

상기 과제를 해결하기 위한 수단으로서, 본 발명의 일 실시 형태에 따르면 강성 재질로 구현되며, 소정 거리 이격되어 배치되는 다수의 도형 판넬; 및 상기 도형 판넬 다수개를 일직선 연결하며, 판넬간 거리에 따라 길이 조정이 가능한 판넬 연결 줄을 포함하며, 상기 도형 판넬 각각은 마름모, 정사각형, 정삼각형 중 어느 하나의 형상을 가지는 것을 특징으로 하는 차량 다중 카메라 교정을 위한 교정판을 제공할 수 있다. As a means for solving the above problems, according to an embodiment of the present invention is implemented with a rigid material, a plurality of figure panels are arranged spaced a predetermined distance; And a panel connecting line which connects a plurality of the figure panels in a straight line and is adjustable in length according to the distance between the panels, and each of the figure panels has a shape of one of a rhombus, a square, and an equilateral triangle. A calibration plate for camera calibration can be provided.

상기 도형 판넬 각각은 상기 도형 판넬의 각 변에 대응되며, 힌지를 매개로 자바라식으로 절첩될 수 있는 다수의 프레임으로 구현되는 것을 특징으로 한다. Each of the figure panels corresponds to each side of the figure panel, and is characterized by being implemented with a plurality of frames that can be folded in a bellows manner via a hinge.

상기 강성 재질은 나무, 플라스틱, 아크릴, 금속제 중 어느 하나인 것을 특징으로 한다.The rigid material is characterized by any one of wood, plastic, acrylic, and metal.

본 발명은 카메라 교정을 위한 이미지를 강성 재질의 도형 판넬을 통해 구현함으로써, 바람과 같은 외부 환경에 의한 형상 변화가 발생하지 않으며 작업자의 발자국 및 실외 환경에 의한 오염에도 강인한 특성을 가질 수 있도록 한다. According to the present invention, the image for camera calibration is implemented through a rigid panel panel, so that shape changes are not caused by an external environment such as wind, and it is possible to have strong characteristics against contamination by a worker's footprint and an outdoor environment.

또한 도형 판넬을 판넬 연결 줄을 통해 일직선 연결하며, 판넬 연결 줄의판넬간 길이를 통해 판넬간 거리를 임의 조정할 수 있도록 함으로써, 차종에 따른 차량 크기 변화에 상관없이 언제 어디서나 재사용될 수 있도록 한다. In addition, the figure panel is connected in a straight line through the panel connecting line, and the distance between the panels can be arbitrarily adjusted through the panel-to-panel length, so that it can be reused anytime, anywhere regardless of the vehicle size change depending on the vehicle model.

도 1은 종래의 기술에 따른 교정판을 도시한 도면이다.
도 2는 카메라 교정을 위한 교정판 배치 위치를 설명하기 위한 도면이다.
도 3은 본 발명의 일 실시예에 따른 차량 다중 카메라 교정을 위한 교정판을 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시예에 따른 도형 판넬의 상세 구성을 설명하기 위한 도면이다.
도 5는 본 발명의 다른 실시예에 따른 도형 판넬의 상세 구성을 설명하기 위한 도면이다.
도 6 및 도 7은 본 발명의 일 실시예에 따른 교정판의 길이 조정 방법을 설명하기 위한 도면이다.
도 8은 본 발명의 일 실시예에 따른 차량 다중 카메라 교정을 위한 교정판을 기반으로 한 차량 다중 카메라 교정 장치의 일례를 도시한 도면이다.
1 is a view showing a calibration plate according to the prior art.
2 is a view for explaining the position of the calibration plate for camera calibration.
3 is a view for explaining a calibration plate for vehicle multi-camera calibration according to an embodiment of the present invention.
4 is a view for explaining the detailed configuration of the figure panel according to an embodiment of the present invention.
5 is a view for explaining the detailed configuration of the figure panel according to another embodiment of the present invention.
6 and 7 are views for explaining a method of adjusting the length of the calibration plate according to an embodiment of the present invention.
8 is a view showing an example of a vehicle multi-camera calibration device based on a calibration plate for vehicle multi-camera calibration according to an embodiment of the present invention.

본 발명의 목적 및 효과, 그리고 그것들을 달성하기 위한 기술적 구성들은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 본 발명을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.The objectives and effects of the present invention, and technical configurations for achieving them, will be clarified with reference to embodiments described below in detail together with the accompanying drawings. In describing the present invention, when it is determined that a detailed description of known functions or configurations may unnecessarily obscure the subject matter of the present invention, the detailed description will be omitted.

그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다.In addition, terms to be described later are terms defined in consideration of functions in the present invention, which may vary according to a user's or operator's intention or practice.

그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있다. 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.However, the present invention is not limited to the embodiments disclosed below, but may be implemented in various different forms. Only the present embodiments are provided to make the disclosure of the present invention complete, and to fully inform the person of ordinary skill in the art to which the present invention pertains, the scope of the present invention being defined by the scope of the claims. It just works. Therefore, the definition should be made based on the contents throughout this specification.

도 3은 본 발명의 일 실시예에 따른 차량 다중 카메라 교정을 위한 교정판을 설명하기 위한 도면이다. 3 is a view for explaining a calibration plate for vehicle multi-camera calibration according to an embodiment of the present invention.

도 3을 참고하면, 본 발명의 교정판(10)은 강성 재질로 구현되며, 소정 거리 이격되어 배치되는 다수의 도형 판넬(11)과, 상기 도형 판넬(11) 다수개를 일직선 연결하며, 판넬간 거리에 따라 길이 조정이 가능한 판넬 연결 줄(12)을 포함할 수 있다. Referring to Figure 3, the calibration plate 10 of the present invention is made of a rigid material, a plurality of figure panels 11 and spaced apart a predetermined distance, and the plurality of figure panels 11 are connected in a straight line, the panel It may include a panel connecting string (12) that can be adjusted in length according to the distance.

이때의 도형 판넬(11) 각각은 마름모, 정사각형, 정삼각형과 같은 다각형 형상을 가지나, 경우에 따라서는 원형 형상을 가질 수도 있도록 한다. Each of the figure panels 11 at this time has a polygonal shape such as a rhombus, a square, and an equilateral triangle, but may have a circular shape in some cases.

그리고 나무, 플라스틱, 아크릴, 금속제와 같은 강성 재질로 구현되어, 바람과 같은 외부 환경에 의한 형상 변화가 발생하지 않으며, 작업자의 발자국 및 실외 환경에 의한 오염에도 강인한 특성을 가질 수 있도록 한다. In addition, it is made of a rigid material such as wood, plastic, acrylic, and metal, so that shape changes are not caused by an external environment such as wind, and it has strong characteristics against contamination by the worker's footprint and the outdoor environment.

도 4는 본 발명의 일 실시예에 따른 도형 판넬의 상세 구성을 설명하기 위한 도면으로, 이는 도형 판넬이 마름모 또는 정사각형 형상으로 구현되는 경우에 관한 것이다. 4 is a view for explaining a detailed configuration of a figure panel according to an embodiment of the present invention, which relates to a case where the figure panel is implemented in a rhombus or square shape.

도 4를 참고하면, 본 발명의 도형 판넬은 마름모(또는 정사각형)의 각 변에 대응되는 4개의 프레임(F1~F4)과, 4개의 프레임 겸침 부분 각각에 형성된 4개의 힌지(H1~H4)를 구비하여, 4개의 프레임(F1~F4)이 4개의 힌지(H1~H4)를 매개로 자바라식으로 절첩될 수 있는 구조를 가지도록 한다.Referring to FIG. 4, the shape panel of the present invention includes four frames (F1 to F4) corresponding to each side of a rhombus (or square), and four hinges (H1 to H4) formed in each of the four frame abutments. It is provided, so that the four frames (F1 ~ F4) has a structure that can be folded in a Javanese way through the four hinges (H1 ~ H4).

즉, 본 발명의 도형 판넬은 4개의 힌지(H1~H4)를 매개로 하여 4개의 프레임(F1~F4)이 모두 펼칠 경우에는 도형 판넬이 도 4의 (a)와 같이 마름모 형상을 가지되, 4개의 힌지(H1~H4)를 매개로 하여 4개의 프레임(F1~F4) 모두를 접을 경우에는 도형 판넬이 도 4의 (b)와 같이 일자 형상을 가질 수 있게 된다. That is, the figure panel of the present invention, when the four frames (F1 ~ F4) all spread through the four hinges (H1 ~ H4) as a medium, the figure panel has a rhombus shape as shown in Figure 4 (a), When all four frames F1 to F4 are folded through the four hinges H1 to H4, the figure panel can have a straight shape as shown in FIG. 4(b).

더하여, 4개의 힌지(H1~H4) 중에서 일부(즉, 도형 판넬의 양측 가장자리에 위치하는 힌지(H2, H3)에 힌지판넬 연결 줄(12)이 끼워지는 체결구(CH)를 추가 형성하고, 이를 통해 판넬 연결 줄(12)이 도형 판넬에 결합 및 고정될 수도 있도록 한다. In addition, a part of the four hinges (H1 to H4) (that is, the hinges (H2, H3) located on both sides of the figure panel, the hinge panel connecting line 12 is inserted into the fastener (CH) is additionally formed, This allows the panel connecting line 12 to be coupled and fixed to the figure panel.

도 5는 본 발명의 다른 실시예에 따른 도형 판넬의 상세 구성을 설명하기 위한 도면으로, 이는 도형 판넬이 정삼각형 형상으로 구현되는 경우에 관한 것이다. 5 is a view for explaining a detailed configuration of a figure panel according to another embodiment of the present invention, which relates to a case where the figure panel is implemented in an equilateral triangle shape.

도 5를 참고하면, 본 발명에서는 정삼각형의 두 변은 하나의 프레임(F1, F2)을 통해 구현하되, 나머지 한변은 두개의 프레임(F2, F3)을 통해 구현하도록 한다. 그리고 4개의 프레임 겸침 부분 각각에 4개의 힌지(H1~H4)를 형성하도록 한다. Referring to FIG. 5, in the present invention, two sides of an equilateral triangle are implemented through one frame F1 and F2, while the other side is implemented through two frames F2 and F3. In addition, four hinges H1 to H4 are formed in each of the four frame portions.

즉, 정삼각형으로 구현되는 도형 판넬 또한 짝수의 프레임과 힌지를 구비하도록 함으로써, 짝수개의 프레임이 4 짝수개의 힌지(H1~H4)를 매개로 자바라식으로 절첩될 수 있도록 한다. That is, the figure panel implemented in an equilateral triangle also has an even number of frames and hinges, so that the even number of frames can be folded in a Javanese manner through 4 even numbers of hinges H1 to H4.

도 4 및 도 5에서와 같이, 본 발명의 도형 판넬은 일자형으로 접힐 수 있어, 교정판의 보관, 이동시 부피가 최소화될 수 있도록 한다. 4 and 5, the figure panel of the present invention can be folded in a straight shape, so that the volume can be minimized during storage and movement of the calibration plate.

더하여, 도 4 및 도 5의 구조 이외에 교정판의 부피 최소화를 위한 접힘 방식이 있다면, 그 또한 다양하게 적용할 수 있음은 물론 당연할 수 있을 것이다. In addition, if there is a folding method for minimizing the volume of the orthodontic plate in addition to the structures of FIGS. 4 and 5, it will be obvious that it can also be applied in various ways.

도 6 및 도 7은 본 발명의 일 실시예에 따른 교정판의 길이 조정 방법을 설명하기 위한 도면으로, 도 6은 길이 변화 결과를, 도 7은 판넬 연결 줄에 삽입되는 줄 길이 조정 장치의 구현 예를 도시한 도면이다. 6 and 7 are views for explaining a method of adjusting the length of the calibration plate according to an embodiment of the present invention, FIG. 6 shows the result of the length change, and FIG. 7 shows the implementation of the device for adjusting the length of the line inserted into the panel connecting line. It is a figure showing an example.

도 6에 도시된 바와 같이, 본 발명은 다수개의 도형 판넬(11)을 판넬 연결 줄(12)을 통해 일직선 연결하되, 차량 크기를 고려하여 판넬 연결 줄(12)의 길이를 다양하게 조정할 수 있도록 한다. 즉, 판넬 연결 줄(12)의 길이를 통해 도형 판넬(11) 사이의 거리를 임의 조정할 수 있도록 한다. As shown in FIG. 6, the present invention connects the plurality of figure panels 11 in a straight line through the panel connection line 12, but the length of the panel connection line 12 can be variously adjusted in consideration of the vehicle size. do. That is, it is possible to arbitrarily adjust the distance between the figure panels 11 through the length of the panel connecting string 12.

이를 위해, 판넬 연결 줄(12)에는 도 7과 같은 줄 길이 조정 장치(12a)가 삽입될 수 있다. To this end, a panel length adjusting device 12a as shown in FIG. 7 may be inserted into the panel connecting row 12.

도 7을 참고하면, 본 발명의 줄 길이 조정 장치(12a)는 장치 본체(210), 장치 본체(210)에 의해 위치 고정되는 중심축(220), 중심축(220)을 매개로 하여 회전되는 감김 원통(230), 판넬 연결 줄(12)의 양쪽 부분이 동시에 돌아가는 것을 방지하기 위해 판넬 연결 줄(12)의 일측을 장치 본체(210)에 위치 고정시켜주는 고정대(240) 등을 포함하여 구현될 수 있다. 이에 사용자는 감김 원통(230)을 회전시킴으로써, 판넬 연결 줄(12)의 길이를 줄여주거나, 차량 크기에 따라 판넬 연결 줄(12)의 길이를 늘려줄 수 있게 된다. Referring to FIG. 7, the string length adjusting device 12a of the present invention is rotated through the device body 210, the central axis 220 fixed by the device body 210, and the central axis 220 To include the winding cylinder 230, both sides of the panel connecting line 12 are simultaneously rotated, including one side of the panel connecting line 12 to the device main body 210, a fixture 240, etc. Can be. Accordingly, the user can reduce the length of the panel connecting line 12 by rotating the wound cylinder 230, or increase the length of the panel connecting line 12 according to the vehicle size.

더하여, 다수개의 도형 판넬(11)은 판넬 연결 줄(12)에 의해 일직선 연결되는 것이 바람직한데, 이는 다수개의 도형 판넬(11)이 수평 관계를 유지할 때에 판넬 연결 줄(12)이 다수개의 도형 판넬(11)을 일직선 연결함을 기본 가정할 수 있기 때문이다. In addition, it is preferable that the plurality of figure panels 11 are connected in a straight line by the panel connecting string 12, which means that when the plurality of figure panels 11 maintain a horizontal relationship, the panel connecting string 12 is a plurality of figure panels. This is because the basic assumption is made that (11) is connected in a straight line.

그 결과, 사용자는 판넬 연결 줄(12)이 꺽임 현상 없이 다수개의 도형 판넬(11)을 일직선 연결함을 시각적으로 확인한 후, 카메라 촬영을 진행함으로써, 수평 관계를 가지는 다수의 도형 판넬(11)을 기반으로 한 카메라 교정 동작을 안정적으로 수행할 수 있게 된다. As a result, the user visually confirms that the panel connection line 12 connects the plurality of figure panels 11 in a straight line without bending, and then proceeds to shoot the camera, thereby allowing the plurality of figure panels 11 to have a horizontal relationship. Based on this, it is possible to stably perform the camera calibration operation.

도 8은 본 발명의 일 실시예에 따른 차량 다중 카메라 교정을 위한 교정판을 기반으로 한 차량 다중 카메라 교정 장치의 일례를 도시한 도면이다. 8 is a view showing an example of a vehicle multi-camera calibration device based on a calibration plate for vehicle multi-camera calibration according to an embodiment of the present invention.

도 8을 참고하면, 본 발명의 차량 다중 카메라 교정 장치는 n(n은 2 이상의 자연수)개의 카메라(211~214), 제1 교정부(221), 및 제2 교정부(22) 등을 포함할 수 있다. 다만, 이하에서는 설명의 편이를 위해, 4개의 카메라를 이용하는 경우에 한해 설명하기로 한다.Referring to FIG. 8, the vehicle multi-camera calibration device of the present invention includes n (n is a natural number of 2 or more) cameras 211 to 214, a first calibration unit 221, a second calibration unit 22, and the like. can do. However, hereinafter, for convenience of description, only four cameras are used.

차량이 다수의 카메라를 통해 차량 주변 영상을 촬영하여, 차량 어라운드 뷰 영상과 같은 부가 영상을 생성 및 제공하기 위해서는 차량에 설치된 4개 카메라(211~214)의 자세 및 위치에 대한 교정 값을 알아야 한다. In order to generate and provide additional images, such as a vehicle around view image, by photographing a vehicle surrounding image through a plurality of cameras, it is necessary to know correction values for posture and position of four cameras 211 to 214 installed in the vehicle. .

이에 본 발명은 차량 전방과 후방에 앞서 설명된 교정판을 설치하고, 교정판에 구비된 도형 판넬의 거리를 조정하여, 4개 카메라(211~214)의 카메라 시야각 중복 지점 각각에 도형 판넬 각각이 배치함으로써, 4개 카메라(211~214) 각각을 통해 촬영된 영상에는 2개의 교정판이 동시 포함되도록 한다. Accordingly, the present invention is to install the calibration plate described above on the front and rear of the vehicle, and by adjusting the distance of the figure panel provided on the calibration plate, each of the figure panels at each of the camera viewing angle overlap points of the four cameras 211 to 214 By arranging, two correction plates are simultaneously included in an image photographed through each of the four cameras 211 to 214.

그러면 제1 교정부(221)는 4개의 영상 각각에 포함되는 2개의 도형 판넬 에서 i(i는 2 이상의 자연수)개의 특징점을 추출한 후, 특정점간 거리 오차를 최소화시키는 틸트 각도, 롤 각도, Z 좌표를 획득하여, 카메라 각각의 교정 값으로 저장하도록 한다. Then, the first calibration unit 221 extracts i (i is a natural number greater than or equal to 2) feature points from two figure panels included in each of the four images, and then tilt angle, roll angle, and Z coordinate to minimize the distance error between specific points. Acquire and store it as the calibration value of each camera.

그리고 제2 교정부(222)는 4개의 카메라 중 인접 배치된 2 개의 카메라를 기준 카메라와 교정 카메라로 순차 선택하면서, 기준 카메라와 교정 카메라를 통해 획득된 2 개의 영상에 동시 포함되는 1개의 도형 판넬을 식별 및 분석하여 i(i는 2개 이상의 자연수)개의 대응점쌍을 추출한 후, i개의 대응점쌍간 위치 오차를 최소화시키는 팬 각도, X좌표, Y 좌표를 저장하도록 한다. In addition, the second calibration unit 222 sequentially selects two adjacent cameras among the four cameras as the reference camera and the calibration camera, and simultaneously includes one figure panel included in the two images obtained through the reference camera and the calibration camera. After identifying and analyzing i, i (i is a natural number of 2 or more) to extract pairs of corresponding points, and to store the pan angle, X-coordinate, and Y-coordinates that minimize the position error between the i-pairs.

이와 같이, 본 발명은 차량 전방과 후방에 앞서 설명된 교정판을 기반으로 4개의 카메라 각각의 외부 파라메터(틸트 각도, 롤 각도, 팬 각도, X좌표, Y 좌표, Z 좌표)를 획득 및 저장할 수 있게 된다. As described above, the present invention can acquire and store the external parameters (tilt angle, roll angle, pan angle, X coordinate, Y coordinate, Z coordinate) of each of the four cameras based on the calibration plate described above in front of and behind the vehicle. There will be.

그러면, AVM 영상 제공 장치는 차량 다중 카메라 교정 장치에 의해 획득된교정부 카메라 각각의 교정값을 기반으로 이들 영상을 합성하여 차량 주행 상황 또는 사용자 선택에 따라 정해지는 소정의 가상 시점을 가지는 가상 카메라에 대한 가상 시점 영상을 생성하여 화면 표시할 수 있게 된다. Then, the AVM image providing apparatus synthesizes these images based on the calibration values of each calibration camera obtained by the vehicle multi-camera calibration apparatus, and then provides the virtual camera having a predetermined virtual viewpoint determined according to the vehicle driving situation or user selection. It is possible to generate and display a virtual viewpoint image for the screen.

이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.The above description is merely illustrative of the technical idea of the present invention, and those skilled in the art to which the present invention pertains may make various modifications and variations without departing from the essential characteristics of the present invention. Therefore, the embodiments disclosed in the present invention are not intended to limit the technical spirit of the present invention, but to explain, and the scope of the technical spirit of the present invention is not limited by these embodiments. The scope of protection of the present invention should be interpreted by the claims below, and all technical spirits within the equivalent range should be interpreted as being included in the scope of the present invention.

Claims (3)

강성 재질로 구현되며, 소정 거리 이격되어 배치되는 다수의 도형 판넬; 및
상기 도형 판넬 다수개를 일직선 연결하며, 판넬간 거리에 따라 길이 조정이 가능한 판넬 연결 줄을 포함하며,
상기 도형 판넬 각각은
마름모, 정사각형, 정삼각형 중 어느 하나의 형상을 가지는 것을 특징으로 하는 차량 다중 카메라 교정을 위한 교정판.
A plurality of figure panels that are made of a rigid material and are spaced apart a predetermined distance; And
A plurality of the panel of the figure is connected in a straight line, and includes a panel connecting line that can be adjusted in length according to the distance between the panels,
Each of the figure panels
A calibration plate for vehicle multi-camera calibration, characterized by having a shape of any one of a rhombus, a square, and an equilateral triangle.
제1항에 있어서, 상기 도형 판넬 각각은
상기 도형 판넬의 각 변에 대응되며, 힌지를 매개로 자바라식으로 절첩될 수 있는 다수의 프레임으로 구현되는 것을 특징으로 하는 차량 다중 카메라 교정을 위한 교정판.
The method of claim 1, wherein each of the figure panel
A calibration plate for vehicle multi-camera calibration, characterized in that it corresponds to each side of the figure panel and is implemented with a plurality of frames that can be folded in a bellows manner via a hinge.
제1항에 있어서, 상기 강성 재질은
나무, 플라스틱, 아크릴, 금속제 중 어느 하나인 것을 특징으로 하는 차량 다중 카메라 교정을 위한 교정판.
The method of claim 1, wherein the rigid material
A calibration plate for multi-camera vehicle calibration, characterized in that it is made of wood, plastic, acrylic, or metal.
KR1020180150168A 2018-11-28 2018-11-28 Calibration panel for multi-camera calibration KR102173334B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180150168A KR102173334B1 (en) 2018-11-28 2018-11-28 Calibration panel for multi-camera calibration

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180150168A KR102173334B1 (en) 2018-11-28 2018-11-28 Calibration panel for multi-camera calibration

Publications (2)

Publication Number Publication Date
KR20200063899A true KR20200063899A (en) 2020-06-05
KR102173334B1 KR102173334B1 (en) 2020-11-03

Family

ID=71089162

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180150168A KR102173334B1 (en) 2018-11-28 2018-11-28 Calibration panel for multi-camera calibration

Country Status (1)

Country Link
KR (1) KR102173334B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113496527A (en) * 2021-06-23 2021-10-12 中汽创智科技有限公司 Vehicle environment image calibration method, device, system and storage medium

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008187564A (en) * 2007-01-31 2008-08-14 Sanyo Electric Co Ltd Camera calibration apparatus and method, and vehicle
JP2010103730A (en) * 2008-10-23 2010-05-06 Clarion Co Ltd Calibration device and calibration method of car-mounted camera
WO2015115669A1 (en) * 2014-01-28 2015-08-06 Ricoh Company, Limited Calibration method and measurement tool
KR20150144090A (en) * 2014-06-16 2015-12-24 현대모비스 주식회사 Operating method of around view monitoring system
JP2018170666A (en) * 2017-03-30 2018-11-01 三菱電機株式会社 Camera system and camera calibration method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008187564A (en) * 2007-01-31 2008-08-14 Sanyo Electric Co Ltd Camera calibration apparatus and method, and vehicle
JP2010103730A (en) * 2008-10-23 2010-05-06 Clarion Co Ltd Calibration device and calibration method of car-mounted camera
WO2015115669A1 (en) * 2014-01-28 2015-08-06 Ricoh Company, Limited Calibration method and measurement tool
KR20150144090A (en) * 2014-06-16 2015-12-24 현대모비스 주식회사 Operating method of around view monitoring system
JP2018170666A (en) * 2017-03-30 2018-11-01 三菱電機株式会社 Camera system and camera calibration method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113496527A (en) * 2021-06-23 2021-10-12 中汽创智科技有限公司 Vehicle environment image calibration method, device, system and storage medium
CN113496527B (en) * 2021-06-23 2024-04-26 中汽创智科技有限公司 Vehicle surrounding image calibration method, device and system and storage medium

Also Published As

Publication number Publication date
KR102173334B1 (en) 2020-11-03

Similar Documents

Publication Publication Date Title
JP4810953B2 (en) Blind spot image display device for vehicles
EP3163535B1 (en) Wide-area image acquisition method and device
US8368687B2 (en) Image generating apparatus and image generating method
US7554573B2 (en) Drive assisting system
US8259173B2 (en) Image generating apparatus and image generating method
TWI253006B (en) Image processing system, projector, information storage medium, and image processing method
CN105321160B (en) The multi-camera calibration that 3 D stereo panorama is parked
JP4606322B2 (en) Vehicle driving support device
JP5178454B2 (en) Vehicle perimeter monitoring apparatus and vehicle perimeter monitoring method
CN113923420B (en) Region adjustment method and device, camera and storage medium
JP2011182236A (en) Camera calibration apparatus
KR102315748B1 (en) car around view system
DE102019213199A1 (en) VIRTUAL SPATIAL REGISTERED VIDEO OVERLAY DISPLAY
DE102012203491A1 (en) Electronic rearview mirror system for viewing rear region behind motor car by vehicle driver, has computer evaluating image of rear region to determine portion of mirror image picture, and electronic display displaying evaluated image
EP3326145A1 (en) Panel Transform
TW201605247A (en) Image processing system and method
KR20200063899A (en) Calibration panel for multi-camera calibration
US10606149B2 (en) Information processing device, information processing method, and program
US20170026572A1 (en) Rear cross traffic - quick looks
JP2009267602A (en) Vehicle periphery monitoring apparatus, and setting correcting method of camera installing position and posture information which is applicable thereto
CN112339771B (en) Parking process display method and device and vehicle
JP6897442B2 (en) Vehicle equipment, calibration result determination system, calibration result determination method, and program
DE102013220013A1 (en) Method for displaying captured image on display device, used in vehicle for displaying image around vehicle, involves projecting image formed on non-planar imaging surface of virtual camera to virtual image display device
CN111045286A (en) Projection method and system based on double-folding screen field and double-folding screen field
KR102399655B1 (en) Method for adjusting vewing angle of camera and displaying distance in image

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant