KR101387594B1 - Safety system using transparent display - Google Patents

Safety system using transparent display Download PDF

Info

Publication number
KR101387594B1
KR101387594B1 KR1020120111742A KR20120111742A KR101387594B1 KR 101387594 B1 KR101387594 B1 KR 101387594B1 KR 1020120111742 A KR1020120111742 A KR 1020120111742A KR 20120111742 A KR20120111742 A KR 20120111742A KR 101387594 B1 KR101387594 B1 KR 101387594B1
Authority
KR
South Korea
Prior art keywords
image
camera
transparent display
transparency
thermal imaging
Prior art date
Application number
KR1020120111742A
Other languages
Korean (ko)
Other versions
KR20140046623A (en
Inventor
김현규
Original Assignee
(주)토핀스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)토핀스 filed Critical (주)토핀스
Priority to KR1020120111742A priority Critical patent/KR101387594B1/en
Publication of KR20140046623A publication Critical patent/KR20140046623A/en
Application granted granted Critical
Publication of KR101387594B1 publication Critical patent/KR101387594B1/en

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/207—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using multi-purpose displays, e.g. camera image and navigation or video on same display
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/302—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with GPS information or vehicle data, e.g. vehicle speed, gyro, steering angle data

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

본 발명은 이종의 카메라로 촬영된 영상을 적절한 투명도로 결합하여 투명 디스플레이에 출력하여 시야 확보가 어려운 장소에서 안전한 운행을 할 수 있도록 하는 투명 디스플레이를 이용한 안전 시스템에 관한 것으로, 열화상 카메라 및 CCD 카메라로 구성되는 카메라 촬영부; 상기 카메라 촬영부에서 촬영된 영상에 투명도를 조절하여 출력하는 영상 제어부 및 상기 영상 제어부에서 출력되는 영상을 표시하는 투명 디스플레이;를 포함하여 구성되되, 상기 영상 제어부는 상기 열화상 카메라와 상기 CCD 카메라의 촬영 영상에 각각 투명도를 조절하는 영상 처리부; 상기 영상 처리부에서 투명도가 조절된 영상을 결합하는 영상 결합부 및 상기 결합된 영상을 출력하는 출력부를 포함하는 것을 특징으로 한다.The present invention relates to a safety system using a transparent display that combines images taken by different cameras with appropriate transparency and outputs to a transparent display for safe driving in a place where it is difficult to secure a field of view, a thermal imaging camera and a CCD camera. Camera photographing unit consisting of; And a transparent display configured to display an image output from the image control unit by controlling transparency and outputting the image captured by the camera photographing unit. The image control unit may include the thermal imaging camera and the CCD camera. An image processor for adjusting transparency of the captured image; The image processor may include an image combiner configured to combine the image whose transparency is adjusted, and an output unit configured to output the combined image.

Description

투명 디스플레이를 이용한 안전 시스템{SAFETY SYSTEM USING TRANSPARENT DISPLAY}Safety system using transparent display {SAFETY SYSTEM USING TRANSPARENT DISPLAY}

본 발명은 투명 디스플레이를 이용한 안전 시스템에 관한 것으로, 더욱 상세하게는 이종의 카메라로 촬영된 영상을 적절한 투명도로 결합하고 이를 투명 디스플레이에 출력하여 시야 확보가 어려운 장소에서 안전한 운행을 할 수 있도록 하는 투명 디스플레이를 이용한 안전 시스템에 관한 것이다.
The present invention relates to a safety system using a transparent display, and more particularly, to combine images taken by different cameras with appropriate transparency and to output them on a transparent display to enable safe driving in a place where it is difficult to secure a field of view. The present invention relates to a safety system using a display.

적외선 카메라는 피사체의 실물을 보여주는 것이 아닌 피사체의 표면으로부터 복사(방사)되는 전자파의 일종인 적외선 파장 형태의 에너지(열)를 검출, 피사체 표면 복사열의 강도를 측정하여 강도의 양에 따라 흑백 또는 슈도컬러(Psedo-color)로 표현해 주는 카메라이다. Infrared cameras detect energy (heat) in the form of infrared wavelengths, which are a type of electromagnetic radiation radiated from the surface of the subject, rather than showing the real object of the subject, and measure the intensity of radiant heat on the surface of the subject, depending on the amount of intensity. It is a camera that expresses in Psedo-color.

적외선 카메라는 크게 적외선 저조도 카메라(Infrared Low Light Camera)와 적외선 열화상 카메라(Infrared Thermal Camera)로 구분된다.Infrared cameras are classified into infrared low light cameras and infrared thermal cameras.

적외선 저조도 카메라는 근적외선 카메라로도 호칭되며, 근적외선을 방사하고 피사체로부터 반사되는 적외선을 수신하여 촬영한다. Infrared low light cameras are also referred to as near infrared cameras, which emit near-infrared rays and capture infrared rays reflected from a subject.

적외선 열화상 카메라(이하 '열화상 카메라'라 한다)는 피사체에서 자체 방사되는 적외선을 검출하여 촬영한다.An infrared thermal camera (hereinafter referred to as a thermal camera) detects and photographs infrared rays emitted from a subject.

특히, 열화상 카메라는 야간감시 목적의 군사목적으로 개발되어 왔지만 요즘에는 PCB 기판, 방열판 등 전기전자제품의 발열량을 측정해 불량품을 적출 장치, 변압기의 발열을 검사 장치 등에 사용되거나 보안 및 감시 애플리케이션에 활용되고 있다. In particular, thermal imaging cameras have been developed for military purposes for nighttime surveillance, but nowadays, heat generation of electrical and electronic products, such as PCB boards and heat sinks, is used to extract defective products, and to generate heat from transformers for inspection devices, or for security and surveillance applications. It is utilized.

또한, 열화상 카메라는 사람의 신체 온도변화, 즉 발열에 의한 고열 측정, 신체의 체온변화, 일반건물 및 사물에 대한 화재감지, 고전압 설비의 국부적인 발열 진단장비로도 활용되고 있다.
In addition, the thermal imaging camera is also used as a change in body temperature of a person, that is, high temperature measurement by heat, body temperature change of the body, fire detection for general buildings and objects, local heat diagnosis equipment of high voltage equipment.

열화상 카메라를 활용한 일 예로서, 공개특허공보 제10-2012-0069914호에 나이트 비전 시스템 및 그 제어방법이 게시되어 있으며, 이를 첨부된 도면의 도 1에 나타내었다. 위에 게시된 기술을 개략적으로 살펴보면, 차량에서의 전방 시야 확보가 어려운 주행환경에서 주변 이미지를 열 감지 영상으로 확보하여, 이를 운전자에게 제공해 주는 나이트 비전 시스템 및 그 제어방법으로 그 구성은 열상감지 카메라 촬영부와; 센서부와; 열상감지 카메라 촬영부에서 획득한 촬영 영상과 센서부에 제공하는 차량의 이동 경로 정보 및 속도 정보를 기반으로 영상의 표시를 제어하는 영상처리부; 및 영상을 화면에 표시해주는 표시장치를 포함한다.As an example of utilizing a thermal imaging camera, a night vision system and a control method thereof are disclosed in Korean Patent Laid-Open Publication No. 10-2012-0069914, which is shown in FIG. 1 of the accompanying drawings. If you look at the technology posted above, it is a night vision system and a control method that obtains a surrounding image as a heat-sensing image in a driving environment where it is difficult to secure a forward vision in a vehicle, and provides it to the driver. Wealth; A sensor unit; An image processor configured to control the display of an image based on the captured image acquired by the thermal imaging camera photographing unit and moving path information and speed information of the vehicle provided to the sensor unit; And a display device for displaying an image on the screen.

위에 제시된 기술은 열화상 카메라를 이용하여 시야 확보가 어려운 주행환경에서 사고를 미연에 방지하기 위한 것에 관한 것이나, 고정된 일반적인 표시장치(디스플레이)를 이용하여 열화상 이미지를 출력하기 때문에 운전 중 시야의 위치가 전방의 유리창을 주시하면서 표시장치를 번갈아 주시해야 하므로 시야 이동에 따른 사고 발생의 원인이 된다.
The above technique is for preventing accidents in a driving environment where it is difficult to secure a field of view using a thermal imaging camera, but since the thermal image is output using a fixed general display (display), Since the position must look at the display device alternately while looking at the front window, it causes the accident caused by the movement of view.

본 발명은 위의 문제점을 해결하고자 안출된 것으로, 본 발명에서 해결하고자하는 과제는 이종의 카메라로 촬영된 영상을 각각 적절한 투명도로 조절하여 결합하거나 각각의 영상을 별개로 투명 디스플레이에 출력하여 전방 주시를 유도하면서 시야 확보가 어려운 장소에서 안전한 운행을 할 수 있도록 하는 투명 디스플레이를 이용한 안전 시스템을 제공하는 데에 있다.
The present invention has been made to solve the above problems, the problem to be solved in the present invention is to combine the images taken with different cameras to adjust the appropriate transparency, respectively, or to output each image separately on a transparent display to look forward The present invention provides a safety system using a transparent display that enables safe driving in places where visibility is difficult to secure while inducing.

본 발명은 열화상 카메라(110) 및 CCD 카메라(120)로 구성되는 카메라 촬영부(100); 카메라 촬영부(100)에서 촬영된 영상에 투명도를 조절하여 출력하는 영상 제어부(200) 및 영상 제어부(200)에서 출력되는 영상을 표시하는 투명 디스플레이(300);를 포함하여 구성되되, 영상 제어부(200)는 열화상 카메라(110)와 CCD 카메라(120)의 촬영 영상에 각각 투명도를 조절하는 영상 처리부(210); 영상 처리부(210)에서 투명도가 조절된 영상을 결합하는 영상 결합부(220) 및 결합된 영상을 출력하는 출력부(230)를 포함하는 것을 특징으로 하는 투명 디스플레이를 이용한 안전 시스템을 제공함으로써, 기술적 과제를 해결하고자 한다.
The present invention comprises a camera photographing unit 100 composed of a thermal imaging camera 110 and a CCD camera 120; And an image controller 200 for adjusting the transparency of the image photographed by the camera photographing unit 100 and outputting the image, and a transparent display 300 for displaying the image output from the image controller 200. 200 is an image processing unit 210 for adjusting the transparency to the captured image of the thermal imaging camera 110 and CCD camera 120, respectively; By providing a safety system using a transparent display, the image processing unit 210 includes an image combining unit 220 for combining an image of which transparency is adjusted and an output unit 230 for outputting the combined image. I want to solve the problem.

본 발명에 따른 투명 디스플레이를 이용한 안전 시스템은 시야 확보가 어려운 장소에서 열화상 카메라로 촬영된 영상과 가시광 카메라로 촬영된 영상이 결합하거나 또는 별개로 사용자의 전방 투명 디스플레이에 표시됨으로, 정방을 주시하면서 운행할 수 있게 되어 안전 운행을 도모할 수 있다.The safety system using the transparent display according to the present invention is combined with or separately from the image taken by the thermal imaging camera and the visible light camera in a place where it is difficult to secure the field of view, while being displayed separately on the front transparent display of the user, while watching the square It is possible to operate the vehicle so that safe driving can be achieved.

뿐만 아니라, 사용자의 육안으로 관측할 수 없는 장애물을 투명 디스플레이에 표시할 수 있으므로, 본 발명의 시스템을 선박에 장착할 경우 야간 및 안개 속에서도 운행이 가능하다.
In addition, since obstacles that cannot be observed with the naked eye of the user can be displayed on the transparent display, when the system of the present invention is mounted on a ship, it is possible to operate at night and in the fog.

도 1은 종래 나이트 비전 시스템의 구성도,
도 2는 본 발명에 따른 투명 디스플레이를 이용한 안전 시스템의 구성도,
도 3은 본 발명에 따른 투명 디스플레이를 이용한 안전 시스템에서 열화상 카메라로 촬영한 영상(a)과 촬영된 영상에 투명도를 처리한 영상(b)의 도면 대용 사진,
도 4는 본 발명에 따른 투명 디스플레이를 이용한 안전 시스템에서 열화상 카메라로 촬영한 영상에서 배경이 삭제되기 전의 도면 대용 사진,
도 5는 본 발명에 따른 투명 디스플레이를 이용한 안전 시스템에서 열화상 카메라로 촬영한 영상에서 배경이 삭제되기 후의 도면 대용 사진,
도 6은 본 발명에 따른 투명 디스플레이를 이용한 안전 시스템에서 열화상 카메라로 촬영한 영상에 투명도를 처리한 영상의 도면 대용 사진이다.1 is a block diagram of a conventional night vision system,
2 is a block diagram of a safety system using a transparent display according to the present invention,
Figure 3 is a picture substitute of the image (a) taken with a thermal imaging camera in the safety system using a transparent display according to the present invention and the image (b) processing the transparency to the taken image,
Figure 4 is a picture substitute before the background is deleted from the image taken by the thermal imaging camera in a safety system using a transparent display according to the present invention,
Figure 5 is a picture substitute picture after the background is deleted from the image taken by the thermal imaging camera in the safety system using a transparent display according to the present invention,
FIG. 6 is a drawing substitute photograph of an image processed by transparency in an image captured by a thermal imaging camera in a safety system using a transparent display according to the present invention.

본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 안 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다.
The terms and words used in the present specification and claims should not be construed as limited to ordinary or dictionary terms and the inventor may properly define the concept of the term in order to best describe its invention It should be construed as meaning and concept consistent with the technical idea of the present invention.

따라서 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 실시예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.
Therefore, the embodiments described in the present specification and the configurations shown in the drawings are merely the most preferred embodiments of the present invention and are not intended to represent all of the technical ideas of the present invention. Therefore, various equivalents And variations are possible.

본 발명은 투명 디스플레이를 이용한 안전 시스템에 관한 것으로, 그 구성은 크게, 카메라 촬영부(100), 영상 제어부(200), 투명 디스플레이(300), 조도센서(410), 내비게이션(420)을 포함하며, 카메라 촬영부(100)에서 촬영된 영상이 투명 디스플레이(300)에 출력되어 전방 주시를 유도하면서 시야 확보가 어려운 장소에서 안전한 운행을 할 수 있도록 하는 안전 시스템이다.
The present invention relates to a safety system using a transparent display, and its configuration largely includes a camera photographing unit (100), an image controller (200), a transparent display (300), an illuminance sensor (410), and a navigation (420). In addition, the image captured by the camera photographing unit 100 is output to the transparent display 300 is a safety system to guide the front gaze while safe driving in a place where it is difficult to secure a view.

카메라 촬영부(100)는 열화상 카메라(110)와 CCD 카메라(120)를 포함한다.The camera photographing unit 100 includes a thermal imaging camera 110 and a CCD camera 120.

열화상 카메라(110)는 물체에서 발산하는 적외선을 감지하여 촬영 영상을 출력하는 장치이다. 여기서 적외선은 에너지 전달형태의 일종으로 가시광선(Visible wave)보다 파장이 길고 마이크로 광선(Micro wave) 보다 짧은 3~14㎛파장 대역의 전자파를 의미한다. 이러한 적외선은 실화상과 유사한 형태의 특성을 가지고 빛의 속도로 공간을 이동하여 반사, 굴절, 흡수 및 방사 등의 현상이 나타난다. 또한 열화상 카메라(110)는 촬영 이미지를 통하여 적외선 분포에 따라 피사체의 온도를 측정할 수 있다.The thermal imaging camera 110 detects infrared rays emitted from an object and outputs a captured image. Infrared is a form of energy transfer, which means an electromagnetic wave having a wavelength of 3 to 14 μm which is longer than visible light and shorter than micro waves. These infrared rays have characteristics similar to those of a real image, and move in space at the speed of light, resulting in phenomena such as reflection, refraction, absorption, and radiation. In addition, the thermal camera 110 may measure the temperature of the subject according to the infrared distribution through the captured image.

CCD 카메라(120, charge-coupled device camera)는 가시광 카메라라고도 불리우며, 육안으로 보여지는 영상과 동일한 영상을 촬영한다.
A charge-coupled device camera (CCD) 120 is also called a visible light camera, and captures the same image as the image seen by the naked eye.

본 발명에서는 주간에는 이종의 카메라 즉, 열화상 카메라(110)와 CCD 카메라(120)에서 촬영되는 영상을 이용하고, 야간에는 열화상 카메라로 촬영하는 영상을 이용하여 적절한 투명도로 조절하여 육안으로 볼 수 없는 피사체(물체)를 촬영하고 이를 후술하는 투명 디스플레이(300)에 출력하여 안전 운행을 도모한다.
In the present invention, the image of the heterogeneous cameras, that is, the thermal imaging camera 110 and the CCD camera 120 is used during the day, and the image taken by the thermal imaging camera at night is adjusted to an appropriate transparency to the naked eye. It photographs a subject (object) which cannot be counted and outputs it to the transparent display 300 which will be described later to promote safe driving.

영상 제어부(200)는 카메라 촬영부(100)에서 촬영된 영상에 투명도 등의 영상을 처리하여 출력하는 모듈로서, 영상 처리부(210), 영상 결합부(220), 출력부(230), 수신부(240) 및 데이터베이스(250, 이하 'DB'라 함)를 포함한다.
The image controller 200 is a module that processes and outputs an image such as transparency to an image captured by the camera photographing unit 100, and includes an image processor 210, an image combiner 220, an output unit 230, and a receiver ( 240) and a database 250 (hereinafter referred to as 'DB').

영상 처리부(210)는 열화상 카메라(110)와 CCD 카메라(120)에서 촬영된 영상에 각각 투명도를 조절하는 모듈로서, 투명 디스플레이(300)에 영상을 출력하기 위한 전처리 과정을 수행한다.The image processor 210 is a module for adjusting transparency of images captured by the thermal imaging camera 110 and the CCD camera 120, respectively, and performs a preprocessing process for outputting an image to the transparent display 300.

이때, 열화상 카메라(110)로 촬영된 영상 중에서 배경이 되는 화면은 운전(운행)에 불필요한 부분으로 삭제되도록 영상(도 5 참조)이 될 수 있다.In this case, the screen which becomes the background among the images photographed by the thermal imaging camera 110 may be an image (see FIG. 5) so as to be deleted as an unnecessary part for driving (operation).

배경이 되는 화면으로는 구름을 포함하는 하늘, 해수면 및 멀리 보이는 산 등이 될 수 있다.
The background screen can be a sky including clouds, sea level and mountains in the distance.

영상 결합부(220)는 열화상 카메라(110)와 CCD 카메라(120)로 각각 촬영된 영상에 투명도를 조절하고, 투명도가 조절된 각각의 영상을 하나의 영상으로 결합하는 모듈이다.The image combiner 220 is a module that adjusts transparency to images captured by the thermal imaging camera 110 and the CCD camera 120, and combines each image of which transparency is controlled into one image.

이때, 영상 결합부(220)에서 열화상 카메라(110)와 CCD 카메라(120)로 각각 촬영된 영상은 동일한 장소에서 촬영하더라도 약간의 편차가 발생될 수 있다. 즉, 열화상 카메라(110)와 CCD 카메라(120)가 동일 위치에서 동일 방향을 촬영하더라도 촬영범위 또는 촬영위치에 의해서 오차가 발생된다. 이에 오차를 줄여서 투명 디스플레이(300)에 겹으로 보이지 않도록 하는 영상 보정이 요구된다.In this case, even if the image captured by the thermal imaging camera 110 and the CCD camera 120, respectively, in the image combination unit 220 is taken in the same place, a slight deviation may occur. That is, even if the thermal imaging camera 110 and the CCD camera 120 photograph the same direction at the same position, an error occurs due to the photographing range or the photographing position. Accordingly, the image correction is required to reduce the error so that the transparent display 300 does not appear in layers.

영상 보정은 열화상 카메라(110) 또는 CCD 카메라(120)로 촬영된 영상 중 어느 한쪽의 영상을 상·하·좌·우로 이동하거나 촬영된 영상을 분석하여 피사체 중에서 하나를 선택하여 이를 기준 피사체로 설정하고, 기준 피사체를 서로 중첩하는 것으로 영상 보정이 이루어질 수 있다.
Image correction is performed by moving one of the images taken by the thermal imaging camera 110 or the CCD camera 120 up, down, left, or right, or by analyzing the taken images and selecting one of the subjects as a reference subject. The image correction may be performed by setting and overlapping the reference subjects with each other.

출력부(230)는 영상 결합부(220)에서 결합된 영상을 출력하는 모듈로서, 투명 디스플레이(300)에 적합한 신호로 출력한다.
The output unit 230 is a module for outputting an image combined by the image combiner 220 and outputs a signal suitable for the transparent display 300.

수신부(240)는 외부 기기에서 데이터를 수신하는 모듈로서, 외부 기기는 조도 센서(410), 내비게이션(430) 및 GPS(450) 등을 포함할 수 있다.
The receiver 240 is a module for receiving data from an external device, and the external device may include an illumination sensor 410, a navigation 430, a GPS 450, and the like.

DB(250)는 영상 제어부(200)에 관련된 정보가 저장되거나 갱신된 정보가 저장 관리된다.
The DB 250 stores and manages information related to the image controller 200 or updated information.

투명 디스플레이(300)는 화면이 투과도를 가지고 있어, 화면의 뒤 배경을 볼 수 있는 특징이 있다. 이러한 투명 디스플레이(300)에는 무기 형광체 내애 가속된 전자가 통과하면서 형광체를 여기시켜 빛을 내는 투명 TFEL, 유기 발광층 양쪽에서 전자와 정공의 주입하여 이들이 유기 발광층 내에서 결합되면서 빛을 발산하는 원리로 동작되는 투명 OLED 및 액정입자를 유리형광판 소자에 입자를 충돌시켜 빛을 발산하는 원리로 동작되는 투명 LCD 등이 있다. 특히 투명 LCD는 BLU(Back Light Unit)를 배제하여 구성될 수 있다.The transparent display 300 has a feature that the screen has a transparency, so that the background of the screen can be seen. The transparent display 300 is a transparent TFEL that excites the phosphors by passing the accelerated electrons in the inorganic phosphors and emits light by injecting electrons and holes from both sides of the organic light emitting layer and acting as a principle that emits light as they are combined in the organic light emitting layer. The transparent OLED and the liquid crystal particles are a transparent LCD, which operates on the principle of emitting light by colliding the particles on the glass fluorescent plate device. In particular, the transparent LCD may be configured by excluding a BLU (Back Light Unit).

영상 처리부(210)에서 투명도가 조절된 영상은 투명 디스플레이(300)에 출력되어 주위가 밝은 장소에서는 투명 디스플레이(300)를 통해 전방을 주시하면서 운행할 수 있으며, 주위가 어두운 경우 또는 전방을 식별할 수 없는 경우에는 카메라 촬영부(100)에서 촬영된 영상이 투명 디스플레이(300)에 출력되어 전방을 관찰할 수 있다. 이에 따라 전방 식별이 곤란한 경우에도 전방의 피사체를 확인할 수 있어 안전 운행의 환경을 제공할 수 있다.
The image of which transparency is adjusted by the image processor 210 may be output to the transparent display 300 so that the user can travel while watching the front through the transparent display 300 in a bright place. If not, the image captured by the camera photographing unit 100 may be output to the transparent display 300 to observe the front. Accordingly, even when it is difficult to identify the front, the subject in front of the vehicle can be confirmed, thereby providing a safe driving environment.

한편, 수신부(240)를 통하여 외부 기기의 데이터 값을 투명 디스플레이(300)에 출력되도록 구성하여 더욱 안전한 운행 환경을 제공할 수 있다. 이러한 투명 디스플레이는 운전석 전면에 세워 놓거나 플렉시블(Flexible) 디스플레이를 사용하는 경우에는 운전석 앞 유리창에 부착하여 별도의 설치공간이 필요치 않을 수도 있다. 이는 수신부(240)에 연결되는 별도의 외부 기기에서 각각의 데이터를 수신하여 이를 영상처리하고 출력하는 것으로 이루어질 수 있다.On the other hand, by configuring the data value of the external device to be output to the transparent display 300 through the receiver 240 can provide a safer driving environment. Such a transparent display may be mounted on the front of the driver's seat or, when using a flexible display, may be attached to the front window of the driver's seat so that a separate installation space may not be required. This may be achieved by receiving each data from a separate external device connected to the receiver 240, and processing and outputting the data.

외부 기기는 조도 센서(410), 내비게이션(430) 및 GPS(450) 등 다양하게 구성될 수 있다.The external device may be configured in various ways, such as an illumination sensor 410, a navigation 430, and a GPS 450.

여기서, 투명 디스플레이(300)에 출력되는 영상은 주변 밝기에 따라 투명도를 조절해야 보다 선명하게 디스플레이된다.Here, the image output on the transparent display 300 is displayed more clearly only if the transparency is adjusted according to the ambient brightness.

조도 센서(410)는 촬영에 따른 주변 밝기를 센싱하여 투명도를 조절하기 위한 구성으로, 촬영 현장의 조도를 센싱하여 센싱된 조도값을 수신부(240)로 전송한다. 영상 제어부(200)는 조도센서(410)로부터 센싱된 조도값을 수신부(240)에서 수신하며, 센싱된 조도값에 따라 열화상 카메라(110)에서 촬영된 영상 및 CCD 카메라(120)에서 촬영된 영상의 투명도를 조절한다.The illuminance sensor 410 is configured to adjust the transparency by sensing the ambient brightness according to the photographing, and transmits the sensed illuminance value to the receiver 240 by sensing the illuminance of the photographing site. The image controller 200 receives the illuminance value sensed by the illuminance sensor 410 at the receiver 240, and the image photographed by the thermal imaging camera 110 and the CCD camera 120 according to the sensed illuminance value. Adjust the transparency of the image.

이때, 조도값에 따라 조절되는 투명도에 대한 데이터는 DB(250)에 저장되어 관리될 수 있으며, 사용자가 임의로 조절가능하게 구성될 수 있다.
In this case, data on transparency adjusted according to the illumination value may be stored and managed in the DB 250, and may be configured to be arbitrarily adjustable by the user.

수신부(240)에 연결되는 별도의 외부 기기로 내비게이션(420)이 포함될 수 있다.The navigation device 420 may be included as a separate external device connected to the receiver 240.

내비게이션(240)은 지도 안내를 통해 길 찾기를 도와주는 장치 혹은 프로그램을 의미하는 것으로, 위성위치추적시스템(GPS) 수신기를 통해 현재 위치 및 속도 등을 출력한다. The navigation 240 refers to a device or a program that helps to find a way through a map guide, and outputs a current position and speed through a GPS receiver.

수신부(240)는 내비게이션(420)으로부터 전송되는 영상 데이터를 수신하며, 영상 처리부(210)는 수신부(240)에서 수신된 영상 데이터에 투명도를 조절하여 출력하도록 구성된다. 또한, 내비게이션(420)으로부터 전송되는 영상은 투명 디스플레이(300)의 일부분에 출력되도록 구성하여 내비게이션(240)에서 출력되는 영상이 전방시야를 가리지 않도록 구성될 수 있다.
The receiver 240 receives image data transmitted from the navigation 420, and the image processor 210 is configured to adjust and output transparency to the image data received by the receiver 240. In addition, the image transmitted from the navigation 420 may be configured to be output to a portion of the transparent display 300 so that the image output from the navigation 240 does not cover the front view.

본 발명이 선박에 장착될 경우에 내비게이션(240)은 전자해도 시스템(ECDIS)으로 대체될 수 있다.When the present invention is mounted on a ship, the navigation 240 can be replaced by an electronic chart system (ECDIS).

전자해도 시스템(Electronic Chart Display and Information System )은 항해장비들로부터의 위치신호를 시스템전자해도(SENC)의 정보와 함께 디스플레이하여 항해계획, 항해감시 작업을 돕고, 필요한 경우 항해 관련한 추가정보들을 보여줄 수 있는 시스템이다. The Electronic Chart Display and Information System displays position signals from navigational equipment, along with information from the SENC, to assist with sailing planning and navigational monitoring, and to show additional navigational information if necessary. System.

항해장비로는 선박자동 식별장치(430, AIS(Automatic Identification System)), GPS(450) 및 레이더(440) 등을 포함한다.Navigational equipment includes a ship automatic identification device (430, Automatic Identification System (AIS)), GPS 450 and radar 440, and the like.

AIS(430)는 선박의 위치, 침로, 속력 등 항해 정보를 실시간으로 제공하여 해상에서 선박의 충돌을 방지하기 위한 장치로서, 국제 해사 기구(IMO)가 추진하는 의무 사항이다. AIS(430)가 추가로 설치되면 주위의 선박을 인식할 수 없는 경우에도 타선의 존재와 진행 상황 판단이 가능하고, 시계가 좋지 않은 경우에도 선명ㆍ침로ㆍ속력 식별이 가능하여 선박 충돌 방지, 광역 관제, 조난 선박의 수색 및 구조 활동 등 안전 관리를 더욱 효과적으로 수행할 수 있다.
The AIS 430 is a device for preventing the collision of the ship at sea by providing navigation information such as the position, course, and speed of the ship in real time, which is mandated by the International Maritime Organization (IMO). If the AIS 430 is additionally installed, it is possible to judge the existence and progress of other ships even when the surrounding ships cannot be recognized, and even if the clock is not good, it is possible to identify the ship's collision and prevent the ship collision. Safety management, such as control, search and rescue of distressed ships, can be carried out more effectively.

도 3은 본 발명에 따른 투명 디스플레이를 이용한 안전 시스템에서 열화상 카메라로 촬영한 영상(a)과 촬영된 영상에 투명도를 처리한 영상(b)의 도면 대용 사진이다.Figure 3 is a picture substitute picture of the image (a) taken by the thermal imaging camera and the image (b) processed the transparency in the captured image in the safety system using a transparent display according to the present invention.

첨부된 도면 대용 사진에 따르면, 열화상 카메라로 촬영된 영상은 영상 처리부에서 적절한 투명도로 변환되어 투명 디스플레이에 출력되더라도 뒷 배경이 보여지며, 이에 열화상 카메라 및 투명 디스플레이의 장점을 조합하여 안전한 운전 시스템을 제공할 수 있다.
According to the attached picture substitute image, the image taken by the thermal imaging camera is shown in the background even if it is converted to an appropriate transparency in the image processing unit and output on the transparent display, a safe driving system by combining the advantages of the thermal imaging camera and transparent display Can be provided.

도 4 내지 도 6은 본 발명을 설명하기 위한 도면 대용 사진을 나타낸 것으로, 도 4는 본 발명에 따른 투명 디스플레이를 이용한 안전 시스템에서 열화상 카메라로 촬영한 영상에서 배경이 삭제되기 전의 도면 대용 사진이며, 도 5는 본 발명에 따른 투명 디스플레이를 이용한 안전 시스템에서 열화상 카메라로 촬영한 영상에서 배경이 삭제되기 후의 도면 대용 사진이고, 도 6은 본 발명에 따른 투명 디스플레이를 이용한 안전 시스템에서 열화상 카메라로 촬영한 영상에 투명도를 처리한 영상의 도면 대용 사진이다.
4 to 6 is a drawing substitute picture for explaining the present invention, Figure 4 is a drawing substitute picture before the background is deleted from the image taken by the thermal imaging camera in the safety system using a transparent display according to the present invention 5 is a diagram substitute picture after the background is deleted from the image taken by the thermal imaging camera in a safety system using a transparent display according to the present invention, Figure 6 is a thermal imaging camera in a safety system using a transparent display according to the present invention It is a picture substitute drawing of the image which processed transparency to the image photographed by.

첨부된 도면의 도 4에 나타난 바와 같이, 열화상 카메라로 촬영된 영상에서 배경을 삭제하지 않은 경우, CCD 카메라와 영상 결합시 CCD 카메라에서 촬영된 영상은 열화상 카메라에서 촬영된 영상에 의해 보이지 않게 된다.As shown in FIG. 4 of the accompanying drawings, when the background is not deleted from the image captured by the thermal imaging camera, the image captured by the CCD camera when the image is combined with the CCD camera is not visible by the image captured by the thermal imaging camera. do.

도 5를 참조하면 열화상 카메라로 촬영된 영상에서 배경을 삭제하여 출력하는 것으로, CCD 카메라에서 촬영된 영상과 결합시 배경이 표시될 수 있어 안전한 운행을 제공할 수 있다. 그러나 더욱 바람직하게는 도 6이 도시된 바와 같이, 열화상 카메라로 촬영된 영상에 적절한 투명도를 조절하여 표시하는 것으로 CCD 카메라에서 촬영된 영상을 결합하였을 경우 피사체를 더욱 용이하게 확인할 수 있다.
Referring to FIG. 5, a background is deleted from an image photographed by a thermal imaging camera and outputted, and when combined with an image photographed by a CCD camera, the background may be displayed to provide safe driving. However, more preferably, as shown in Figure 6, by adjusting the appropriate transparency to the image taken by the thermal imaging camera to display the subject can be more easily confirmed when combined with the image taken by the CCD camera.

본 발명에 따른 투명 디스플레이를 이용한 안전 시스템은 시야 확보가 어려운 장소에서 열화상 카메라로 촬영된 영상과 가시광 카메라로 촬영된 영상이 사용자의 전방 투명 디스플레이에 표시됨으로, 정방을 주시하면서 운행할 수 있게 되어 안전 운행을 도모할 수 있다. 또한, 사용자의 육안으로 관측할 수 없는 장애물을 투명 디스플레이에 표시할 수 있으므로, 본 발명의 시스템을 선박에 장착할 경우 야간 및 안개 속에서도 운행이 가능하다.
The safety system using the transparent display according to the present invention, since the image taken by the thermal imaging camera and the visible light camera is displayed on the front transparent display of the user in a place where it is difficult to secure the field of view, it is possible to operate while watching the square. Safe driving can be achieved. In addition, since the obstacle that cannot be observed with the naked eye of the user can be displayed on the transparent display, when the system of the present invention is mounted on a ship, it is possible to operate even at night and in the fog.

한편, 상기에서 도 2 내지 도 3을 이용하여 서술한 것은, 본 발명의 주요 사항만을 서술한 것으로, 그 기술적 범위 내에서 다양한 설계가 가능한 만큼, 본 발명이 도 2 내지 도 3의 구성에 한정되는 것이 아님은 자명하다.
In addition, what was described using FIG. 2 thru | or FIG. 3 above only described the main matter of this invention, and this invention is limited to the structure of FIG. 2 thru | or FIG. 3 as many designs are possible within the technical scope. It is not clear.

100: 카메라 촬영부 110: 열화상 카메라
120: CCD 카메라 200: 영상 제어부
210: 영상 처리부 220: 영상 결합부
230: 출력부 240: 수신부
250: DB 300: 투명 디스플레이
410: 조도 센서 420: 내비게이션
430: AIS 440: 레이더
450: GPS 460: 통신단말기100: camera photographing unit 110: thermal imaging camera
120: CCD camera 200: image control unit
210: image processor 220: image combiner
230: output unit 240: receiving unit
250: DB 300: transparent display
410: Ambient light sensor 420: Navigation
430: AIS 440: Radar
450: GPS 460: communication terminal

Claims (5)

열화상 카메라(110) 및 CCD 카메라(120)로 구성되는 카메라 촬영부(100);
상기 카메라 촬영부(100)에서 촬영된 영상에 투명도를 조절하여 출력하는 영상 제어부(200);
상기 영상 제어부(200)에서 출력되는 영상을 표시하는 투명 디스플레이(300) 및
주변 밝기를 센싱하는 조도센서(410)를 포함하여 구성되되,
상기 영상 제어부(200)는
상기 열화상 카메라(110)와 상기 CCD 카메라(120)의 촬영 영상에 각각 투명도를 조절하며, 상기 열화상 카메라(110)로 촬영된 영상에서 배경 화면을 삭제하는 영상 처리부(210);
상기 영상 처리부(210)에서 투명도가 조절된 영상을 결합하되, 상기 열화상 카메라(110) 또는 CCD 카메라(120)로 촬영된 영상 중 어느 한쪽의 영상을 상·하·좌·우로 이동하거나 촬영된 영상을 분석하여 피사체 중에서 하나를 선택하여 이를 기준 피사체로 설정하고 상기 기준 피사체를 서로 중첩하는 것으로 영상 보정을 수행하여 결합하는 영상 결합부(220) 및
상기 결합된 영상을 출력하는 출력부(230)를 포함하여 구성되어,
상기 조도센서(410)에서 센싱된 조도값에 따라 상기 열화상 카메라(110)와 CCD 카메라(120)에서 촬영되는 영상을 이용하거나 상기 열화상 카메라로 촬영하는 영상만을 이용하여 상기 열화상 카메라(110)에서 촬영된 영상 및 CCD 카메라(120)에서 촬영된 영상의 투명도를 조절하는 것을 특징으로 하는 투명 디스플레이를 이용한 안전 시스템.
A camera photographing unit 100 composed of a thermal imaging camera 110 and a CCD camera 120;
An image controller 200 for outputting the image captured by the camera photographing unit 100 by adjusting transparency;
A transparent display 300 displaying an image output from the image controller 200;
It is configured to include an ambient light sensor 410 for sensing the ambient brightness,
The image controller 200
An image processor 210 for controlling transparency of the captured images of the thermal camera 110 and the CCD camera 120, and deleting a background screen from the image captured by the thermal camera 110;
The image processor 210 combines an image of which transparency is controlled, and moves one of the images taken by the thermal camera 110 or the CCD camera 120 up, down, left, right, or taken. An image combiner 220 which selects one of the subjects by analyzing the image, sets it as a reference subject, and performs image correction by combining the reference subjects with each other and combines the images;
It is configured to include an output unit 230 for outputting the combined image,
According to the illuminance value sensed by the illuminance sensor 410, the thermal imaging camera 110 using an image photographed by the thermal imaging camera 110 and the CCD camera 120 or using only an image photographed by the thermal imaging camera. Safety system using a transparent display, characterized in that for controlling the transparency of the image taken by the image and the image taken by the CCD camera (120).
삭제delete 청구항 1에 있어서,
상기 영상 제어부(200)에 수신부(240)와 별도의 내비게이션(420)을 더 포함하고,
상기 영상 제어부(200)는 상기 내비게이션(420)으로부터 전송되는 영상 데이터를 상기 수신부(240)에서 수신하며,
상기 영상 처리부(210)는 상기 전송된 영상 데이터의 투명도를 조절하는 것을 특징으로 하는 투명 디스플레이를 이용한 안전 시스템.
The method according to claim 1,
The image controller 200 further includes a navigation unit 420 separate from the receiver 240,
The image controller 200 receives image data transmitted from the navigation unit 420 in the receiver 240,
The image processing unit 210 is a safety system using a transparent display, characterized in that for adjusting the transparency of the transmitted image data.
청구항 3에 있어서,
상기 내비게이션(420)으로부터 전송되는 영상은 상기 투명 디스플레이(300)의 일부분에 출력되는 것으로 특징으로 하는 투명 디스플레이를 이용한 안전 시스템.
The method of claim 3,
Safety system using a transparent display, characterized in that the image transmitted from the navigation (420) is output to a portion of the transparent display (300).
청구항 3에 있어서,
상기 내비게이션(420)은 전자해도 시스템(ECDIS)인 것을 특징으로 하는 투명 디스플레이를 이용한 안전 시스템.The method of claim 3,
The navigation system (420) is a safety system using a transparent display, characterized in that the electronic chart system (ECDIS).
KR1020120111742A 2012-10-09 2012-10-09 Safety system using transparent display KR101387594B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120111742A KR101387594B1 (en) 2012-10-09 2012-10-09 Safety system using transparent display

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120111742A KR101387594B1 (en) 2012-10-09 2012-10-09 Safety system using transparent display

Publications (2)

Publication Number Publication Date
KR20140046623A KR20140046623A (en) 2014-04-21
KR101387594B1 true KR101387594B1 (en) 2014-04-24

Family

ID=50653502

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120111742A KR101387594B1 (en) 2012-10-09 2012-10-09 Safety system using transparent display

Country Status (1)

Country Link
KR (1) KR101387594B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016140394A1 (en) * 2015-03-04 2016-09-09 엘지전자 주식회사 Device for preventing vehicle accident and method for operating same

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102011488B1 (en) 2016-09-07 2019-08-16 한국전자통신연구원 Endoscope for monitoring the thermal distribution
US10268907B2 (en) * 2017-01-11 2019-04-23 GM Global Technology Operations LLC Methods and systems for providing notifications on camera displays for vehicles
WO2019151603A1 (en) * 2018-02-02 2019-08-08 주식회사 위즈덤라이트코리아 Transparent display device and multi-transparent display device using same
KR102231373B1 (en) * 2020-09-23 2021-03-25 김광남 Display device for driving the vehicle safely

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050066681A (en) * 2003-12-27 2005-06-30 (주) 캐스트정보 Video signal processing method for obtaining picture-in-picture signal allowing main picture not to be shaded by auxiliary picture processed to be translucent and apparatus for the same
KR20070033628A (en) * 2005-09-22 2007-03-27 씨나비정보기술 주식회사 Maritime geographic information construction and service method
KR20080071760A (en) * 2007-01-31 2008-08-05 최윤정 Display device for car and display method using the same
KR20110114114A (en) * 2010-04-13 2011-10-19 최현환 Real 3d navigation implementing method
KR20110138410A (en) * 2009-04-14 2011-12-27 배 시스템즈 인포메이션 앤드 일렉트로닉 시스템즈 인티크레이션, 인크. Vehicle-mountable imaging systems and methods

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050066681A (en) * 2003-12-27 2005-06-30 (주) 캐스트정보 Video signal processing method for obtaining picture-in-picture signal allowing main picture not to be shaded by auxiliary picture processed to be translucent and apparatus for the same
KR20070033628A (en) * 2005-09-22 2007-03-27 씨나비정보기술 주식회사 Maritime geographic information construction and service method
KR20080071760A (en) * 2007-01-31 2008-08-05 최윤정 Display device for car and display method using the same
KR20110138410A (en) * 2009-04-14 2011-12-27 배 시스템즈 인포메이션 앤드 일렉트로닉 시스템즈 인티크레이션, 인크. Vehicle-mountable imaging systems and methods
KR20110114114A (en) * 2010-04-13 2011-10-19 최현환 Real 3d navigation implementing method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016140394A1 (en) * 2015-03-04 2016-09-09 엘지전자 주식회사 Device for preventing vehicle accident and method for operating same
US10429504B2 (en) 2015-03-04 2019-10-01 Lg Electronics Inc. Device for preventing vehicle accident and method for operating same

Also Published As

Publication number Publication date
KR20140046623A (en) 2014-04-21

Similar Documents

Publication Publication Date Title
US10395113B2 (en) Polarization-based detection and mapping method and system
KR101387594B1 (en) Safety system using transparent display
EP3268798B1 (en) Dual-mode illuminator for imaging under different lighting conditions
ES2554549T3 (en) Search procedure for a thermal target
EP2542913B1 (en) Image gated camera for detecting objects in a marine environment
EP2870031B1 (en) Gated stereo imaging system and method
US20070247517A1 (en) Method and apparatus for producing a fused image
KR101349025B1 (en) Lane image composite device and method for smart night view
US20130250070A1 (en) Image synthesis device
JP5640423B2 (en) Infrared imaging device and infrared image display method
CN103802727A (en) Low-visibility guiding system
US10031229B1 (en) Object designator system and method
WO2018165027A1 (en) Polarization-based detection and mapping method and system
EP4056950A1 (en) Thermal imaging for navigation systems and methods
US20220214222A1 (en) Radiometric thermal imaging improvements for navigation systems and methods
JP2010070117A (en) Image irradiation system and image irradiation method
JP2006318677A (en) Irradiation equipment and night vision equipment
KR102146837B1 (en) Image sysntehsis device and driving assitance system including the same
US8547456B1 (en) System and method for monitoring inactive pixels in a scene imaging system
KR101935853B1 (en) Night Vision System using LiDAR(light detection and ranging) and RADAR(Radio Detecting And Ranging)
CN107076614A (en) Drafting and cognitive method and system based on polarization
US10455199B1 (en) Image management system for reducing effects of laser beams
CN203841004U (en) Airport infrared bird detecting and repelling device
US10032311B1 (en) Synthetic image enhancing system, device, and method
ITUD20120187A1 (en) EQUIPMENT AND DETECTION PROCEDURE TO DETECT BARRIERS TO NAVIGATION BY WATER

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170413

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180814

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190507

Year of fee payment: 6