KR101982650B1 - Apparatus and system for measuring distance - Google Patents
Apparatus and system for measuring distance Download PDFInfo
- Publication number
- KR101982650B1 KR101982650B1 KR1020110125998A KR20110125998A KR101982650B1 KR 101982650 B1 KR101982650 B1 KR 101982650B1 KR 1020110125998 A KR1020110125998 A KR 1020110125998A KR 20110125998 A KR20110125998 A KR 20110125998A KR 101982650 B1 KR101982650 B1 KR 101982650B1
- Authority
- KR
- South Korea
- Prior art keywords
- distance
- image
- digital level
- mask
- value
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C3/00—Measuring distances in line of sight; Optical rangefinders
- G01C3/02—Details
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/46—Indirect determination of position data
- G01S17/48—Active triangulation systems, i.e. using the transmission and reflection of electromagnetic waves other than radio waves
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/05—Geographic models
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Electromagnetism (AREA)
- General Physics & Mathematics (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Software Systems (AREA)
- Geometry (AREA)
- Multimedia (AREA)
- Computer Graphics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Measurement Of Optical Distance (AREA)
Abstract
본 발명은 거리 측정 장치 및 시스템에 관한 것이다.
즉, 본 발명의 거리 측정 장치는 복수개의 픽셀들을 갖는 이미지의 각 픽셀들의 밝기값을 검출하는 휘도 검출부와; 상기 휘도 검출부에서 검출된 상기 이미지의 특정 픽셀의 밝기값과 그 특정 픽셀의 주변 픽셀들의 밝기값에 마스크(Mask)의 가중치 계수를 곱하여 마스크 곱셈값들을 추출하고, 상기 추출된 마스크 곱셉값들을 합산한 값을 상기 특정 픽셀의 디지털 레벨로 정의하고, 상기 특정 픽셀의 디지털 레벨에 대한 거리를 검출하는 거리 검출부를 포함한다.The present invention relates to a distance measuring apparatus and a system.
That is, the distance measuring apparatus of the present invention includes: a luminance detector for detecting a brightness value of each pixel of an image having a plurality of pixels; The mask multiplication values are extracted by multiplying the brightness values of the specific pixels of the image detected by the brightness detection unit and the brightness values of the surrounding pixels of the specific pixel by a weight coefficient of the mask to calculate mask multiplication values And a distance detection unit that defines a value as a digital level of the specific pixel and detects a distance to the digital level of the specific pixel.
Description
본 발명은 거리 측정 장치 및 시스템에 관한 것이다.
The present invention relates to a distance measuring apparatus and a system.
정보통신 기술의 발전은 문자, 음성 및 영상을 고속 처리하는 디지털 단말기에 2차원 영상과 음성을 지원하는 멀티미디어 서비스를 가능하게 하였으며, 현재 입체적으로 실감나는 멀티미디어 서비스를 제공하는 3차원 입체 정보통신 서비스에 대한 연구가 시행되고 있다.The development of information and communication technology enables multimedia services supporting two-dimensional image and voice to digital terminals that process text, voice and image at high speed. Currently, three-dimensional stereoscopic information communication service providing realistic multimedia service Research is underway.
일반적으로 3차원 영상을 표현하는 입체 화상은 두 눈을 통한 스테레오 시각의 원리에 의하여 이루어지게 된다. 입체감의 중요한 요인은 사람의 두 눈이 약 65mm 정도 떨어져 있기 때문에 나타나게 되는 두 눈의 시차(parallax), 즉 양안시차(parallax)라 할 수 있다. 따라서 좌우의 눈이 각각 서로 다른 2 차원 화상을 보게 되고, 이 두화상이 망막을 통해 뇌로 전달되면 뇌는 이를 서로 융합하여 본래의 3차원 영상의 깊이감과 실제감을 재생하게 되는데 이를 통상적으로 스테레오그라피(stereography)라 한다.Generally, the stereoscopic image expressing the three-dimensional image is made by the principle of the stereoscopic vision through the two eyes. An important factor of the stereoscopic effect is the parallax of the two eyes, which is the parallax of binocular vision, because the eyes of a person are about 65mm apart. Therefore, when the two eyes of the right and left eyes see different two-dimensional images, and the two images are transmitted to the brain through the retina, the brain fuses them to reproduce the depth and the real feeling of the original three- stereography).
한편 최근에는 전방에 있는 물체의 거리를 감지할 수 있는 스테레오 시각시스템에 대한 연구가 진행되고 있다. Recently, a stereo vision system capable of detecting the distance of an object in front is being studied.
종래의 거리 측정 방법은 픽셀 정보가 없는 홀 노이즈(Hole Noise) 및 수직으로 발생하는 선 노이즈인 스트릭 노이즈(Streak Noise)가 있어, 각 픽셀이 가지는 디지털 레벨을 거리 정보로 매칭하면 거리 오류 발생 빈도가 높아지는 문제점이 있었다.
Conventional distance measurement methods include a hole noise without pixel information and a streak noise that is a line noise generated vertically. When the digital level of each pixel is matched with the distance information, the frequency of occurrence of the distance error There was a problem that it increased.
본 발명은 해상도를 증가시켜 거리의 정확도를 높일 수 있고, 스트릭 노이즈(Streak Noise)를 감소시킬 수 있는 것이다.
The present invention can increase the accuracy of the distance by increasing the resolution and reduce the streak noise.
본 발명은, According to the present invention,
복수개의 픽셀들을 갖는 이미지의 각 픽셀들의 밝기값을 검출하는 휘도 검출부와; A brightness detector for detecting a brightness value of each pixel of the image having a plurality of pixels;
상기 휘도 검출부에서 검출된 상기 이미지의 특정 픽셀의 밝기값과 그 특정 픽셀의 주변 픽셀들의 밝기값에 마스크(Mask)의 가중치 계수를 곱하여 마스크 곱셈값들을 추출하고, 상기 추출된 마스크 곱셉값들을 합산한 값을 상기 특정 픽셀의 디지털 레벨로 정의하고, 상기 특정 픽셀의 디지털 레벨에 대한 거리를 검출하는 거리 검출부를 포함하는 거리 측정 장치가 제공된다.The mask multiplication values are extracted by multiplying the brightness values of the specific pixels of the image detected by the brightness detection unit and the brightness values of the surrounding pixels of the specific pixel by a weight coefficient of the mask to calculate mask multiplication values And a distance detection unit that defines a value as a digital level of the specific pixel and detects a distance to the digital level of the specific pixel.
그리고, 본 발명의 일실시예는 상기 가중치 계수가 M X N 크기로 배열된 마스크가 저장되어 있는 저장부를 더 포함하고, 상기 거리 검출부는, 상기 저장부에 저장되어 있는 마스크의 가중치 계수를 독출하여 상기 마스크 곱셈값을 추출할 수 있다.According to another aspect of the present invention, there is provided a storage apparatus including a storage unit storing a mask in which the weight coefficient is arranged in an MXN size, and the distance detector reads a weight coefficient of a mask stored in the storage unit, The multiplication value can be extracted.
또, 상기 가중치 계수는, 가로 방향의 스트릭 노이즈의 영향을 줄이기 위해, M > N일 수 있다.The weight coefficient may be M > N to reduce the influence of the streak noise in the horizontal direction.
게다가, 상기 가중치 계수의 합은 1일 수 있다.In addition, the sum of the weighting factors may be one.
또, 상기 디지털 레벨에 대한 거리가 룩업 테이블(Look-up table, LUT) 형태로 저장되어 있는 저장부가 더 포함하고, 상기 거리 검출부는, 상기 저장부에 저장되어 있는 룩업 테이블의 디지털 레벨에 대한 거리를 독출하여 출력할 수 있다.The storage unit may further include a storage unit in which a distance to the digital level is stored in a look-up table (LUT), and the distance detecting unit may calculate a distance to a digital level of the look- Can be read out and output.
또한, 상기 디지털 레벨은, 정수의 디지털 레벨 및 각 정수 사이에 0.5 단위의 디지털 레벨을 포함할 수 있다.The digital level may also include a digital level of integer and a digital level of 0.5 units between each integer.
더불어, 상기 디지털 레벨은, 512레벨일 수 있다.In addition, the digital level may be 512 levels.
게다가, 상기 각 정수 사이에 0.5 단위의 디지털 레벨에 대한 거리값은, 가장 가까운 정수 2개의 중간값을 거리값으로 설정될 수 있다.
In addition, the distance value for the digital level of 0.5 units between each of the above constants can be set to the distance value of the two closest constants.
본 발명은, According to the present invention,
피사체의 이미지를 촬상하고, 상기 촬상된 이미지를 출력하는 카메라부와, A camera unit for capturing an image of a subject and outputting the captured image;
복수개의 픽셀들을 갖는 이미지의 각 픽셀들의 밝기값을 검출하는 휘도 검출부와; 상기 휘도 검출부에서 검출된 상기 이미지의 특정 픽셀의 밝기값과 그 특정 픽셀의 주변 픽셀들의 밝기값에 마스크(Mask)의 가중치 계수를 곱하여 마스크 곱셈값들을 추출하고, 상기 추출된 마스크 곱셉값들을 합산한 값을 상기 특정 픽셀의 디지털 레벨로 정의하고, 상기 특정 픽셀의 디지털 레벨에 대한 거리를 검출하는 거리 검출부를 포함하는 거리 측정 장치를 포함하는 거리 측정 시스템이 제공된다.
A brightness detector for detecting a brightness value of each pixel of the image having a plurality of pixels; The mask multiplication values are extracted by multiplying the brightness values of the specific pixels of the image detected by the brightness detection unit and the brightness values of the surrounding pixels of the specific pixel by a weight coefficient of the mask to calculate mask multiplication values There is provided a distance measuring system including a distance detecting unit that defines a value as a digital level of the specific pixel and detects a distance to a digital level of the specific pixel.
그리고, 본 발명의 일실시예는 상기 가중치 계수가 M X N 크기로 배열된 마스크가 저장되어 있는 저장부를 더 포함하고, 상기 거리 검출부는, 상기 저장부에 저장되어 있는 마스크의 가중치 계수를 독출하여 상기 마스크 곱셈값을 추출할 수 있다.According to another aspect of the present invention, there is provided a storage apparatus including a storage unit storing a mask in which the weight coefficient is arranged in an MXN size, and the distance detector reads a weight coefficient of a mask stored in the storage unit, The multiplication value can be extracted.
또, 상기 디지털 레벨에 대한 거리가 룩업 테이블(Look-up table, LUT) 형태로 저장되어 있는 저장부가 더 포함하고, 상기 거리 검출부는, 상기 저장부에 저장되어 있는 룩업 테이블의 디지털 레벨에 대한 거리를 독출하여 출력할 수 있다.The storage unit may further include a storage unit in which a distance to the digital level is stored in a look-up table (LUT), and the distance detecting unit may calculate a distance to a digital level of the look- Can be read out and output.
또한, 상기 카메라부는, 좌안 이미지를 촬상하는 제 1 카메라와; 우안 이미지를 촬상하는 제 2 카메라부로 이루어질 수 있다.The camera unit may further include: a first camera for capturing an image of a left eye; And a second camera section for picking up a right-eye image.
더불어, 상기 제 1과 제 2 카메라부에서 촬상된 좌안 이미지와 우안 이미지를 정합시켜 처리하고, 상기 휘도 검출부로 상기 정합된 이미지를 출력하는 이미지 처리부를 더 포함할 수 있다.The image processing unit may further include an image processing unit for matching and processing the left eye image and the right eye image captured by the first and second camera units, and outputting the matched image to the brightness detecting unit.
게다가, 상기 거리 측정 장치와 신호를 교신하는 호스트 장치를 포함할 수 있다.In addition, it may include a host device for communicating signals with the distance measuring device.
또, 상기 호스트 장치는, 상기 이미지의 좌표에 대한 거리 정보를 요청하는 신호를 상기 거리 측정 장치로 송신하고, 상기 거리 측정 장치는 상기 이미지의 좌표에 대한 거리를 측정하여, 그 거리 데이터에 해당하는 신호를 상기 호스트 장치로 전송할 수 있다.Further, the host apparatus transmits a signal requesting the distance information for the coordinates of the image to the distance measuring apparatus, and the distance measuring apparatus measures a distance to the coordinates of the image, Signal to the host device.
그리고, 상기 제 1과 제 2 카메라부 및 상기 이미지 처리부는, 스테레오 카메라 장치에 포함되고, 상기 거리 측정 장치는, 호스트 장치에 포함할 수 있다.
The first and second camera units and the image processing unit are included in a stereo camera apparatus, and the distance measuring apparatus can be included in the host apparatus.
본 발명은 정수 및 각 정수 사이에 0.5 단위의 디지털 레벨로 거리값을 검출함으로써, 거리를 표현할 수 있는 해상도를 2배로 증가시켜 거리의 정확도를 높일 수 있는 효과가 있다.The present invention has the effect of increasing the accuracy of the distance by doubling the resolution that can represent the distance by detecting the distance value at a digital level of 0.5 units between the integer and each integer.
또한, 본 발명은 주변 픽셀의 정보를 이용하여 거리를 측정함으로써, 변화에 둔감하고, 스트릭 노이즈에 둔감하며, 더 정확한 거리값을 추출할 수 있는 효과가 있다.
Further, the present invention has the effect of being insensitive to change, insensitive to streak noise, and extracting a more accurate distance value by measuring the distance using information of peripheral pixels.
도 1은 본 발명의 일 실시예의 거리 측정 장치의 구성 블록도
도 2는 본 발명의 일 실시예의 거리 측정 장치에서 마스크 곱셈값을 추출하는 것을 설명하기 위한 도면
도 3은 도 2에서 추출된 마스크 곱셈값을 도시한 도면
도 4는 도 3의 마스크 곱셈값으로 거리를 추출하는 것을 설명하기 위한 도면
도 5a와 도 5b는 본 발명의 일 실시예의 거리 측정 장치의 거리 측정 결과를 설명하기 위한 도면
도 6은 본 발명의 제 1 실시예의 거리 측정 시스템의 구성 블록도
도 7은 본 발명의 제 2 실시예의 거리 측정 시스템의 구성 블록도
도 8은 본 발명의 제 3 실시예의 거리 측정 시스템의 구성 블록도
도 9는 본 발명의 제 4 실시예의 거리 측정 시스템의 구성 블록도1 is a block diagram of a configuration of a distance measuring apparatus according to an embodiment of the present invention;
2 is a diagram for explaining extraction of a mask multiplication value in a distance measuring apparatus according to an embodiment of the present invention;
FIG. 3 is a diagram showing the mask multiplication values extracted in FIG.
FIG. 4 is a diagram for explaining the extraction of the distance by the mask multiplication value of FIG. 3;
5A and 5B are diagrams for explaining distance measurement results of a distance measuring apparatus according to an embodiment of the present invention;
6 is a block diagram of the configuration of the distance measuring system of the first embodiment of the present invention
7 is a block diagram of a configuration of a distance measurement system according to a second embodiment of the present invention
8 is a block diagram of a configuration of a distance measuring system according to the third embodiment of the present invention
9 is a block diagram of a configuration of a distance measuring system according to a fourth embodiment of the present invention
이하, 첨부된 도면을 참조하여 본 발명의 실시예를 설명하면 다음과 같다.Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings.
이 과정에서 도면에 도시된 구성요소의 크기나 형상 등은 설명의 명료성과 편의상 과장되게 도시될 수 있다. 또한, 본 발명의 구성 및 작용은 고려하여 특별히 정의된 용어들은 사용자, 운용자의 의도 또는 관례에 따라 달라질 수 있다. 이러한 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 한다.
The sizes and shapes of the components shown in the drawings may be exaggerated for clarity and convenience. In addition, terms specifically defined in consideration of the structure and operation of the present invention may vary depending on the intention or custom of the user, the operator. Definitions of these terms should be based on the content of this specification.
도 1은 본 발명의 일 실시예의 거리 측정 장치의 구성 블록도이다.1 is a block diagram showing the configuration of a distance measuring apparatus according to an embodiment of the present invention.
본 발명의 일 실시예의 거리 측정 장치는 복수개의 픽셀들을 갖는 이미지의 각 픽셀들의 밝기값을 검출하는 휘도 검출부(110)와; 상기 휘도 검출부(110)에서 검출된 상기 이미지의 특정 픽셀의 밝기값과 그 특정 픽셀의 주변 픽셀들의 밝기값에 마스크(Mask)의 가중치 계수를 곱하여 마스크 곱셈값들을 추출하고, 상기 추출된 마스크 곱셉값들을 합산한 값을 상기 특정 픽셀의 디지털 레벨로 정의하고, 상기 특정 픽셀의 디지털 레벨에 대한 거리를 검출하는 거리 검출부(120)를 포함한다.The distance measuring apparatus of an embodiment of the present invention includes a
여기서, 상기 가중치 계수는 거리를 측정하고자 하는 상기 이미지의 특정 픽셀의 밝기값과 그 특정 픽셀의 주변 픽셀들의 밝기값에 곱해져서, 가로 방향의 스트릭(Streak) 노이즈의 영향을 줄이기 위한 것이다.Here, the weight coefficient is multiplied by a brightness value of a specific pixel of the image to be measured and a brightness value of surrounding pixels of the specific pixel to reduce the influence of the streak noise in the horizontal direction.
그리고, 상기 가중치 계수가 M X N 크기로 배열된 마스크는 도 1의 저장부(130)에 저장될 수 있고, 상기 거리 검출부(120)는 상기 저장부(130)에 저장되어 있는 마스크의 가중치 계수를 독출하여 상기 마스크 곱셈값을 추출한다.The mask in which the weight coefficient is arranged in the MXN size can be stored in the
또, 상기 디지털 레벨에 대한 거리가 룩업 테이블(Look-up table, LUT) 형태로 상기 저장부(130)에 저장될 수 있고, 상기 거리 검출부(120)는 상기 저장부(130)에 저장되어 있는 룩업 테이블의 디지털 레벨에 대한 거리를 독출하여 출력할 수 있다.The distance to the digital level may be stored in the
또한, 상기 가중치 계수는 가로 방향의 스트릭 노이즈의 영향을 줄이기 위해, M > N이고, 측정 좌표 기준 세로 방향의 열에 가중치를 많이 부여할 수 있으며, 이때, 모든 계수의 합은 1이다.Also, in order to reduce the influence of the streak noise in the horizontal direction, the weight coefficient may be weighted with M> N and a column in the longitudinal direction based on the measurement coordinate, and the sum of all coefficients is 1 at this time.
그리고, 측정하고자 하는 중심 좌표에 가중치를 많이 두고, 해당하는 열의 다른 가중치는 중심 좌표의 50%로 하고, 나머지 가중치는 중심 좌표 가중치와 그 열의 가중치들의 합을 1에서 빼고 나머지 가중치들의 갯수로 나눈 가중치를 설정한다.The other weight of the corresponding column is set to 50% of the center coordinate, and the remaining weights are obtained by subtracting the weight of the center coordinate and the weight of the column from 1 and dividing the weight by the number of the remaining weights .
즉, 중심 좌표 가중치가 'a'이면, 중심 좌표를 포함하는 열의 가중치는 'a/4'이고, 이외 가중치는 '(1-(M+1)*a/4)/(M*(N-1))이다.That is, if the center coordinate weight is' a ', the weight of the column including the center coordinate is' a / 4' and the other weight is' (1- (M + 1) * a / 4) / 1).
하기의 표 1에는 M X N의 일례로, 5 X 3의 마스크에 수록된 가중치 계수이다.Table 1 below shows an example of M X N, which is a weighting factor included in a 5
한편, 이미지가 표현하는 디지털 레벨 단계는 8-10비트이고, 정수로 환산되나, 본 발명에서는 각 정수 사이에 0.5 단위의 디지털 레벨을 개재하고, 각 정수의 디지털 레벨 및 각 정수 사이에 0.5 단위의 디지털 레벨에 대한 거리값을 하기의 표 2와 같이 룩업 테이블에 수록한다.
On the other hand, the digital level step represented by the image is 8-10 bits and converted into an integer, but in the present invention, a digital level of 0.5 units is interposed between each integer, and a digital level of 0.5 units The distance values for the digital level are stored in the lookup table as shown in Table 2 below.
..
.
..
.
여기서, 각 정수 사이에 0.5 단위의 디지털 레벨에 대한 거리값은 가장 가까운 정수 2개의 중간값을 거리값으로 설정하고, 0.5를 표시하기 위해 1을 비트할당한다.Here, the distance value for the digital level of 0.5 units between each integer is set to the distance value of the two closest integer intermediate values, and to 1 for the 0.5 value.
예컨대, 255와 254 사이에 254.5를 설정하고, 254.5의 거리는 255와 254에 해당하는 거리의 중간값인 0.505이다.For example, 254.5 is set between 255 and 254, and a distance of 254.5 is 0.505, which is the middle value of the distance corresponding to 255 and 254.
따라서, 본 발명은 정수 및 각 정수 사이에 0.5 단위의 디지털 레벨로 거리값을 검출함으로써, 거리를 표현할 수 있는 해상도를 2배로 증가시켜 거리의 정확도를 높일 수 있는 것이다.
Therefore, by detecting the distance value at a digital level of 0.5 units between an integer and each integer, the resolution capable of expressing the distance can be doubled to improve the accuracy of the distance.
도 2는 본 발명의 일 실시예의 거리 측정 장치에서 마스크 곱셈값을 추출하는 것을 설명하기 위한 도면이고, 도 3은 도 2에서 추출된 마스크 곱셈값을 도시한 도면이며, 도 4는 도 3의 마스크 곱셈값으로 거리를 추출하는 것을 설명하기 위한 도면이다.FIG. 2 is a view for explaining extraction of a mask multiplication value in a distance measuring apparatus according to an embodiment of the present invention. FIG. 3 is a diagram showing mask multiplication values extracted in FIG. 2, And extracting the distance by the multiplication value.
본 발명의 일 실시예의 거리 측정 장치는 이미지에서 거리를 측정하고자하는 픽셀(X,Y)의 밝기값과 그 픽셀(X,Y)의 주변 픽셀들의 밝기값 각각에 마스크(Mask)의 가중치 계수를 곱하여 마스크 곱셈값들을 추출한다.The distance measuring apparatus of an embodiment of the present invention calculates a weight coefficient of a mask (Mask) on the brightness values of the pixels (X, Y) to be measured in the image and the brightness values of the surrounding pixels of the pixels And extracts mask multiplication values.
도 2를 참조하면, 거리를 측정하고자하는 픽셀(X,Y)의 밝기값이 '172'일 때, 5 X 3 마스크의 가중치 계수를 곱하여 마스크 곱셈값을 추출하고, 도 3과 같이, 그 마스크 곱셈값의 행렬의 합은 167.06이다.Referring to FIG. 2, when the brightness value of the pixel (X, Y) to be measured is '172', the mask multiplication value is multiplied by the weight coefficient of the 5
그러므로, 도 4에 도시된 바와 같이, 룩업 테이블에서 167.06에 가장 가까운 디지털 레벨값 '0.77m'가 픽셀(X,Y)의 거리가 된다.Therefore, as shown in FIG. 4, the digital level value '0.77m' closest to 167.06 in the look-up table is the distance of the pixel (X, Y).
도 5a와 도 5b는 본 발명의 일 실시예의 거리 측정 장치의 거리 측정 결과를 설명하기 위한 도면이다.5A and 5B are views for explaining distance measurement results of the distance measuring apparatus according to an embodiment of the present invention.
전술된 바와 같이, 본 발명은 가중치 계수가 수록된 마스크와 디지털 레벨에 대한 거리가 수록된 룩업 테이블을 이용하여, 이미지의 픽셀에서 거리를 측정한다.As described above, the present invention measures distances in pixels of an image using a look-up table in which a weight coefficient is included and a distance to a digital level is stored.
즉, 도 5a는 가중치 계수가 수록된 마스크가 적용되지 않은 경우, 이미지의 특정 픽셀(X,Y)의 디지털 레벨을 추출하고, 그에 해당하는 거리를 출력한 결과 0.50m이다.That is, FIG. 5A shows a digital level of a specific pixel (X, Y) of an image and outputs a corresponding distance when the mask containing the weight coefficient is not applied. As a result, the result is 0.50 m.
반면에, 도 5b는 본 발명의 일 실시예의 거리 측정 장치에서 이미지의 특정 픽셀(X,Y) 및 주변 픽셀의 밝기값에 5 X 3 마스크의 가중치 계수를 곱하여 마스크 곱셈값을 추출하고, 그 마스크 곱셈값의 행렬의 합을 구해 디지털 레벨값을 추출한 다음, 그 디지털 레벨값에 대응하는 거리를 룩업 테이블에서 독출한 결과, 0.54m이다.On the other hand, FIG. 5B shows a case where the mask multiplication value is extracted by multiplying the brightness value of a specific pixel (X, Y) and surrounding pixels of the image by a weighting coefficient of a 5
그러므로, 본 발명은 주변 픽셀의 정보를 이용하여 거리를 측정함으로써, 변화에 둔감하고, 스트릭 노이즈에 둔감하며, 더 정확한 거리값을 추출할 수 있는 것이다.Therefore, by measuring the distance using the information of the surrounding pixels, the present invention is insensitive to the change, is insensitive to the streak noise, and can extract a more accurate distance value.
참고로, 본 발명은 디지털 레벨이 512레벨이다.
For reference, the digital level of the present invention is 512 levels.
도 6은 본 발명의 제 1 실시예의 거리 측정 시스템의 구성 블록도이고, 도 7은 본 발명의 제 2 실시예의 거리 측정 시스템의 구성 블록도이고, 도 8은 본 발명의 제 3 실시예의 거리 측정 시스템의 구성 블록도이며, 도 9는 본 발명의 제 4 실시예의 거리 측정 시스템의 구성 블록도이다.FIG. 6 is a block diagram showing the configuration of a distance measuring system according to the first embodiment of the present invention, FIG. 7 is a block diagram showing the configuration of the distance measuring system according to the second embodiment of the present invention, 9 is a configuration block diagram of the distance measurement system of the fourth embodiment of the present invention.
먼저, 본 발명의 제 1 실시예의 거리 측정 시스템은 도 6에 도시된 바와 같이, 피사체의 이미지를 촬상하고, 그 이미지를 거리 측정 장치(100)의 휘도 검출부(120)로 출력하는 카메라부(210)를 포함한다.6, a distance measuring system according to the first embodiment of the present invention includes a
그리고, 도 7과 같이, 상기 카메라부(210)는 제 1과 제 2 카메라부(211,212)로 이루어진다.As shown in FIG. 7, the
여기서, 상기 제 1 카메라부(211)는 좌안 이미지를 촬상하는 카메라이고, 상기 제 2 카메라부(212)는 우안 이미지를 촬상하는 카메라이다.Here, the
그리고, 상기 제 1과 제 2 카메라부(211,212)에서 촬상된 좌안 이미지와 우안 이미지를 정합시켜 처리하는 이미지 처리부(213)를 포함한다.
And an
또, 도 8을 참조하면, 본 발명의 제 3 실시예의 거리 측정 시스템은 상기 거리 측정 장치(100)와 신호를 교신하는 호스트 장치(310)를 포함하게 된다.Referring to FIG. 8, the distance measuring system of the third embodiment of the present invention includes a
즉, 상기 호스트 장치(310)는 이미지의 좌표에 대한 거리 정보를 요청하는 신호(S1)를 상기 거리 측정 장치(100)로 송신하면, 상기 거리 측정 장치(100)는 상기 이미지의 좌표에 대한 거리를 측정하여, 그 거리 데이터에 해당하는 신호(S2)를 상기 호스트 장치(310)로 전송한다.That is, when the
또한, 도 9를 참조하면, 본 발명의 제 4 실시예의 거리 측정 시스템은 도 7의 제 2 실시예의 거리 측정 시스템의 제 1과 제 2 카메라부(211,212) 이미지 처리부(213)를 스테레오 카메라 장치(200)에서 포함하고 있고, 거리 측정 장치(100)는 호스트 장치(300)에서 포함하는 시스템이다.
9, the distance measurement system according to the fourth embodiment of the present invention includes a
이상에서 본 발명에 따른 실시예들이 설명되었으나, 이는 예시적인 것에 불과하고, 당해 분야에서 통상적 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 범위의 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 다음의 특허청구범위에 의해서 정해져야 할 것이다.While the present invention has been described in connection with certain exemplary embodiments, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, is intended to cover various modifications and equivalent arrangements included within the spirit and scope of the appended claims. Accordingly, the true scope of the present invention should be determined by the following claims.
Claims (16)
상기 이미지의 특정 픽셀의 밝기값과 상기 특정 픽셀의 주변 픽셀들의 밝기값에 마스크(Mask)의 가중치 계수를 곱하여 마스크 곱셈값들을 추출하고, 상기 추출된 마스크 곱셉값들을 합산한 값을 상기 특정 픽셀의 디지털 레벨로 정의하고, 상기 특정 픽셀의 디지털 레벨에 대한 거리를 검출하는 거리 검출부; 및
검출된 상기 디지털 레벨에 대한 거리가 룩업 테이블(Look-up table, LUT) 형태로 저장되어 있는 저장부를 포함하는 거리 측정 장치.
A luminance detector for detecting a brightness value of each of the pixels of the image having the plurality of pixels;
The mask multiplication values are multiplied by a brightness value of a specific pixel of the image and a brightness value of peripheral pixels of the specific pixel to calculate a sum of the mask multiplication values, A distance detection unit that defines a digital level and detects a distance to a digital level of the specific pixel; And
And a storage unit in which a distance to the detected digital level is stored in the form of a look-up table (LUT).
상기 가중치 계수가 M X N 크기로 배열된 마스크가 저장되어 있는 저장부를 더 포함하고,
상기 거리 검출부는 상기 저장부에 저장되어 있는 마스크의 가중치 계수를 이용하여 상기 마스크 곱셈값을 추출하는 거리 측정 장치.
The method according to claim 1,
And a storage unit for storing a mask in which the weight coefficient is arranged in an MXN size,
Wherein the distance detection unit extracts the mask multiplication value using a weight coefficient of the mask stored in the storage unit.
상기 가중치 계수는 가로 방향의 스트릭 노이즈의 영향을 줄이기 위해, M > N인 거리 측정 장치.
The method of claim 2,
Wherein the weighting coefficient is M > N to reduce the influence of the streak noise in the horizontal direction.
상기 가중치 계수의 합은 1인 거리 측정 장치.
The method of claim 2,
And the sum of the weight coefficients is one.
상기 거리 검출부는 상기 룩업 테이블에서 상기 디지털 레벨에 대응되는 거리를 출력하는 거리 측정 장치.
The method according to claim 1,
Wherein the distance detector outputs a distance corresponding to the digital level in the look-up table.
상기 디지털 레벨은 정수의 디지털 레벨 및 각 정수 사이에 0.5 단위의 디지털 레벨을 포함하는 거리 측정 장치.
The method according to claim 1,
Wherein the digital level comprises a digital level of integers and a digital level of 0.5 units between each integer.
상기 디지털 레벨은 512레벨인 거리 측정 장치.
The method of claim 6,
Wherein the digital level is 512 levels.
상기 각 정수 사이에 0.5 단위의 디지털 레벨에 대한 거리값은 가장 가까운 정수 2개의 중간값을 거리값으로 설정되어 있는 거리 측정 장치.
The method of claim 6,
Wherein a distance value for a digital level of 0.5 units between the respective integers is set to a distance value of two intermediate values of the closest integer.
복수개의 픽셀들을 갖는 이미지의 각 픽셀들의 밝기값을 검출하는 휘도 검출부;
검출된 상기 이미지의 특정 픽셀의 밝기값과 상기 특정 픽셀의 주변 픽셀들의 밝기값에 마스크(Mask)의 가중치 계수를 곱하여 마스크 곱셈값들을 추출하고, 상기 추출된 마스크 곱셉값들을 합산한 값을 상기 특정 픽셀의 디지털 레벨로 정의하고, 상기 특정 픽셀의 디지털 레벨에 대한 거리를 검출하는 거리 검출부; 및
검출된 상기 디지털 레벨에 대한 거리가 룩업 테이블(Look-up table, LUT) 형태로 저장되어 있는 저장부를 포함하는
거리 측정 장치를 포함하는 거리 측정 시스템.
A camera unit for capturing a subject and outputting an image of the captured subject;
A luminance detector for detecting a brightness value of each pixel of an image having a plurality of pixels;
And extracting mask multiplication values by multiplying a brightness value of a specific pixel of the detected image and a brightness value of peripheral pixels of the specific pixel by a weight coefficient of a mask to calculate a sum of the extracted mask multiplication values, A distance detection unit that defines a digital level of the pixel and detects a distance to the digital level of the specific pixel; And
And a storage unit in which a distance to the detected digital level is stored in the form of a look-up table (LUT)
A distance measuring system comprising a distance measuring device.
상기 가중치 계수가 M X N 크기로 배열된 마스크가 저장되어 있는 저장부를 더 포함하고,
상기 거리 검출부는 상기 저장부에 저장되어 있는 마스크의 가중치 계수를 이용하여 상기 마스크 곱셈값을 추출하는 거리 측정 시스템.
The method of claim 9,
And a storage unit for storing a mask in which the weight coefficient is arranged in an MXN size,
Wherein the distance detection unit extracts the mask multiplication value using a weight coefficient of a mask stored in the storage unit.
상기 거리 검출부는 상기 룩업 테이블에서 상기 디지털 레벨에 대응되는 거리를 출력하는 거리 측정 시스템.
The method of claim 9,
And the distance detector outputs a distance corresponding to the digital level in the lookup table.
상기 카메라부는 좌안 이미지를 촬상하는 제 1 카메라; 및
우안 이미지를 촬상하는 제 2 카메라부로 이루어진 거리 측정 시스템.
The method as claimed in one of claims 9 to 10,
The camera unit includes: a first camera for capturing an image of a left eye; And
And a second camera section for capturing a right-eye image.
상기 제 1과 제 2 카메라부에서 촬상된 좌안 이미지와 우안 이미지를 정합시켜 처리하고, 상기 휘도 검출부로 상기 정합된 이미지를 출력하는 이미지 처리부를 더 포함하는 거리 측정 시스템.
The method of claim 12,
Further comprising an image processing unit for matching and processing the left eye image and the right eye image captured by the first and second camera units, and outputting the matched image to the brightness detecting unit.
상기 거리 측정 장치와 신호를 교신하는 호스트 장치를 포함하는 거리 측정 시스템.
14. The method of claim 13,
And a host device for communicating a signal with the distance measuring device.
상기 호스트 장치는
상기 이미지의 좌표에 대한 거리 정보를 요청하는 신호를 상기 거리 측정 장치로 송신하고,
상기 거리 측정 장치는 상기 이미지의 좌표에 대한 거리를 측정하여, 그 거리 데이터에 해당하는 신호를 상기 호스트 장치로 전송하는 거리 측정 시스템.
15. The method of claim 14,
The host device
Transmitting a signal requesting distance information on the coordinates of the image to the distance measuring device,
Wherein the distance measuring device measures a distance to coordinates of the image and transmits a signal corresponding to the distance data to the host device.
상기 제 1과 제 2 카메라부 및 상기 이미지 처리부는 스테레오 카메라 장치에 포함되고,
상기 거리 측정 장치는 호스트 장치에 포함되는 거리 측정 시스템.14. The method of claim 13,
Wherein the first and second camera units and the image processing unit are included in a stereo camera device,
Wherein the distance measuring device is included in the host device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110125998A KR101982650B1 (en) | 2011-11-29 | 2011-11-29 | Apparatus and system for measuring distance |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110125998A KR101982650B1 (en) | 2011-11-29 | 2011-11-29 | Apparatus and system for measuring distance |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20130059813A KR20130059813A (en) | 2013-06-07 |
KR101982650B1 true KR101982650B1 (en) | 2019-05-28 |
Family
ID=48858568
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020110125998A KR101982650B1 (en) | 2011-11-29 | 2011-11-29 | Apparatus and system for measuring distance |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101982650B1 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101865126B1 (en) * | 2016-08-04 | 2018-06-08 | 광주과학기술원 | Image sensing apparatus, image sensing method, distance measuring apparatus, and distance measuring method |
KR102144048B1 (en) * | 2018-07-11 | 2020-08-12 | 경북대학교 산학협력단 | Method and device for extracting motion position by applying weights during beam scanning analysis |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005537497A (en) | 2002-08-29 | 2005-12-08 | アイティス・ホールディングス・ピーエルシー | Apparatus and method for providing traffic information |
JP2006177937A (en) * | 2004-11-26 | 2006-07-06 | Denso It Laboratory Inc | Distance measuring device and distance measurement method |
JP2009229125A (en) | 2008-03-19 | 2009-10-08 | Sharp Corp | Distance measuring device and distance measuring method |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101327789B1 (en) * | 2007-08-24 | 2013-11-11 | 삼성전자주식회사 | Method and apparatus for reducing various noises of image simultaneously |
KR101331052B1 (en) * | 2009-12-21 | 2013-11-22 | 한국전자통신연구원 | Device for improving stereo matching results, method for improving stereo matching results using the device and system for receving stereo matching results |
-
2011
- 2011-11-29 KR KR1020110125998A patent/KR101982650B1/en active IP Right Grant
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005537497A (en) | 2002-08-29 | 2005-12-08 | アイティス・ホールディングス・ピーエルシー | Apparatus and method for providing traffic information |
JP2006177937A (en) * | 2004-11-26 | 2006-07-06 | Denso It Laboratory Inc | Distance measuring device and distance measurement method |
JP2009229125A (en) | 2008-03-19 | 2009-10-08 | Sharp Corp | Distance measuring device and distance measuring method |
Also Published As
Publication number | Publication date |
---|---|
KR20130059813A (en) | 2013-06-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8890934B2 (en) | Stereoscopic image aligning apparatus, stereoscopic image aligning method, and program of the same | |
Jones et al. | Controlling perceived depth in stereoscopic images | |
KR101249988B1 (en) | Apparatus and method for displaying image according to the position of user | |
US9070042B2 (en) | Image processing apparatus, image processing method, and program thereof | |
CN102474644A (en) | Three-dimensional image display system, disparity conversion device, disparity conversion method, and program | |
US10620316B2 (en) | Systems and methods for generating a structured light depth map with a non-uniform codeword pattern | |
CN102308590A (en) | Three-dimensional image output device and three-dimensional image output method | |
TW201100760A (en) | Distance measuring apparatus having dual stereo cameras | |
CN101247530A (en) | Three-dimensional image display apparatus and method for enhancing stereoscopic effect of image | |
EP2498502A2 (en) | Analysis of stereoscopic images | |
CN102547356A (en) | Image processing device, image processing method, and program | |
US9214052B2 (en) | Analysis of stereoscopic images | |
CN102822621A (en) | Calibration data selection device, method of selection, selection program, and three dimensional position measuring device | |
US20130069934A1 (en) | System and Method of Rendering Stereoscopic Images | |
CN101936731A (en) | Apparatus acquiring 3d distance information and image | |
EP2590418A1 (en) | Dynamic depth image adjusting device and method thereof | |
CN106068646A (en) | Degree of depth drawing generating method, device and non-transience computer-readable medium | |
KR101083824B1 (en) | stereo camera system and parallax detection method using thereof | |
CN103208110A (en) | Video image converting method and device | |
CN103369331A (en) | Image hole filling method, image hole filling device, video image processing method and video image processing device | |
KR101982650B1 (en) | Apparatus and system for measuring distance | |
KR20180000696A (en) | A method and apparatus for creating a pair of stereoscopic images using least one lightfield camera | |
TWI491244B (en) | Method and apparatus for adjusting 3d depth of an object, and method and apparatus for detecting 3d depth of an object | |
KR101960577B1 (en) | Method for transmitting and receiving stereo information about a viewed space | |
CN107155102A (en) | 3D automatic focusing display method and system thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |