KR20220131473A - Method and apparatus for self-cleaning camera lens using both electrowetting and ultrasonic methods - Google Patents

Method and apparatus for self-cleaning camera lens using both electrowetting and ultrasonic methods Download PDF

Info

Publication number
KR20220131473A
KR20220131473A KR1020210036225A KR20210036225A KR20220131473A KR 20220131473 A KR20220131473 A KR 20220131473A KR 1020210036225 A KR1020210036225 A KR 1020210036225A KR 20210036225 A KR20210036225 A KR 20210036225A KR 20220131473 A KR20220131473 A KR 20220131473A
Authority
KR
South Korea
Prior art keywords
lens
camera
cleaning
electrowetting
ultrasonic
Prior art date
Application number
KR1020210036225A
Other languages
Korean (ko)
Inventor
정성윤
정현빈
최원혁
Original Assignee
현대모비스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대모비스 주식회사 filed Critical 현대모비스 주식회사
Priority to KR1020210036225A priority Critical patent/KR20220131473A/en
Publication of KR20220131473A publication Critical patent/KR20220131473A/en

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0006Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means to keep optical surfaces clean, e.g. by preventing or removing dirt, stains, contamination, condensation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B08CLEANING
    • B08BCLEANING IN GENERAL; PREVENTION OF FOULING IN GENERAL
    • B08B7/00Cleaning by methods not provided for in a single other subclass or a single group in this subclass
    • B08B7/02Cleaning by methods not provided for in a single other subclass or a single group in this subclass by distortion, beating, or vibration of the surface to be cleaned
    • B08B7/026Using sound waves
    • B08B7/028Using ultrasounds
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B08CLEANING
    • B08BCLEANING IN GENERAL; PREVENTION OF FOULING IN GENERAL
    • B08B7/00Cleaning by methods not provided for in a single other subclass or a single group in this subclass
    • B08B7/04Cleaning by methods not provided for in a single other subclass or a single group in this subclass by a combination of operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/002Diagnosis, testing or measuring for television systems or their details for television cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/81Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • H04N5/217

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Cleaning By Liquid Or Steam (AREA)
  • Accessories Of Cameras (AREA)

Abstract

Provided is a method for self-cleaning a camera lens using electrowetting and ultrasonic methods. The method includes: a step of receiving an image filmed by a camera installed in a vehicle; a step of receiving a temperature-humidity sensing value from a temperature-humidity sensor installed in the vehicle; a step of determining whether the camera lens is cleaned based on the image and the temperature-humidity sensing value; and a step of controlling the camera lens to be cleaned by applying electrowetting and ultrasonic method at the same time based on a determination result.

Description

전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법 및 장치{METHOD AND APPARATUS FOR SELF-CLEANING CAMERA LENS USING BOTH ELECTROWETTING AND ULTRASONIC METHODS}Method and apparatus for self-cleaning of a camera lens using electrowetting and ultrasonic methods

본 발명은 전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법 및 장치에 관한 것이다.The present invention relates to a method and apparatus for self-cleaning a lens of a camera using electrowetting and ultrasonic methods.

최근 자율주행차량의 기술이 발달함에 따라, 차량에 장착되는 카메라는 자율주행용 입력 센서로 중요하게 이용되고 있다.With the recent development of autonomous vehicle technology, a camera mounted on the vehicle is being used as an important input sensor for autonomous driving.

차량의 최외곽에 부착된 카메라는 외부 환경에 그대로 노출된다. 따라서, 비가 오는 경우, 물에 젖는 경우 등 카메라의 표면에 물이 부착되게 된다. 뿐만 아니라, 진흙이 튀거나 벌레가 고착되는 경우 제거가 용이하지 않아 장시간 동안 영상인식률을 저하시키는 요인으로 작용한다.The camera attached to the outermost part of the vehicle is exposed to the external environment as it is. Accordingly, when it rains or when it gets wet, water is attached to the surface of the camera. In addition, if mud splashes or insects are stuck, it is not easy to remove them, so it acts as a factor that lowers the image recognition rate for a long time.

한편, 종래에는 빗물 등이 카메라 등의 렌즈 표면에 부착되는 경우 이를 제거할 수 있는 방법이 적용되지 않아 카메라의 성능이 저하될 수밖에 없었다. 특히, 카메라의 영상을 기반으로 차량의 특정 기능을 제어하는 경우, 이물질 등으로 인한 영상 품질이 저하되며 이는 차량 사고의 원인이 될 수도 있다.On the other hand, in the prior art, when rainwater or the like is attached to a lens surface of a camera, etc., a method for removing it is not applied, and thus the performance of the camera is inevitably deteriorated. In particular, when a specific function of the vehicle is controlled based on the image of the camera, the image quality is deteriorated due to foreign substances, which may cause a vehicle accident.

이러한 문제를 해결하기 위해 종래 기술의 경우 전기습윤 방식으로 카메라 렌즈에 묻은 물을 제거하거나, 초음파 방식을 이용하여 이물질을 세척하는 각각의 방법이 존재하였다. 하지만 각각의 세척 방식으로도 빠르고 효율적으로 이물질을 제거하기 어려워 이에 대한 기술 보완이 필요한 실정이다.In order to solve this problem, in the case of the prior art, each method of removing water attached to a camera lens by an electrowetting method or cleaning foreign substances using an ultrasonic method existed. However, even with each cleaning method, it is difficult to quickly and efficiently remove foreign substances, so technical supplementation is required.

공개특허공보 제10-2016-0012228호 (2016.02.01)Laid-Open Patent Publication No. 10-2016-0012228 (2016.02.01)

본 발명이 해결하고자 하는 과제는 자율주행용 차량 또는 일반 차량에 부착된 최외곽 카메라 렌즈의 이물질을 소정의 조건에 따라 전기습윤 방식 및 초음파 방식을 동시 적용하여 효율적으로 제거할 수 있는, 전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법 및 장치를 제공한다.The problem to be solved by the present invention is to efficiently remove foreign substances from the outermost camera lens attached to an autonomous driving vehicle or a general vehicle by simultaneously applying an electrowetting method and an ultrasonic method according to a predetermined condition. Provided are a method and apparatus for self-cleaning a lens of a camera using an ultrasonic method.

다만, 본 발명이 해결하고자 하는 과제는 상기된 바와 같은 과제로 한정되지 않으며, 또 다른 과제들이 존재할 수 있다.However, the problems to be solved by the present invention are not limited to the problems described above, and other problems may exist.

상술한 과제를 해결하기 위한 본 발명의 일면에 따른 전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법은 차량에 설치된 카메라에 의해 촬영된 영상을 수신하는 단계; 상기 차량에 설치된 온습도 센서로부터 온습도 센싱값을 수신하는 단계; 상기 영상 및 온습도 센싱값에 기초하여 상기 카메라의 렌즈 세척 여부를 판단하는 단계; 및 상기 판단 결과에 기초하여 전기습윤 및 초음파 방식을 동시에 적용하여 카메라의 렌즈를 세척하도록 제어하는 단계를 포함한다.According to an aspect of the present invention for solving the above problems, there is provided a lens self-cleaning method of a camera using an electrowetting and ultrasonic method comprising: receiving an image photographed by a camera installed in a vehicle; receiving a temperature/humidity sensing value from a temperature/humidity sensor installed in the vehicle; determining whether to clean the lens of the camera based on the image and the temperature and humidity sensing value; and controlling to wash the lens of the camera by simultaneously applying the electrowetting and ultrasonic methods based on the determination result.

본 발명의 일부 실시예에서, 상기 영상 및 온습도 센싱값에 기초하여 상기 카메라의 렌즈 세척 여부를 판단하는 단계는, 상기 촬영된 영상에 대한 영상인식 기법에 기초하여 오염도를 산출하는 단계; 상기 오염도가 기 설정된 오염도를 초과하는지 여부를 판단하는 단계; 및 상기 기 설정된 오염도를 초과하는 것으로 판단된 경우, 상기 카메라의 렌즈 세척이 필요한 것으로 판단하는 단계를 포함할 수 있다.In some embodiments of the present invention, determining whether to clean the lens of the camera based on the image and the temperature and humidity sensing value comprises: calculating a contamination level based on an image recognition technique for the photographed image; determining whether the pollution level exceeds a preset level of pollution; and determining that cleaning of the lens of the camera is necessary when it is determined that the preset level of contamination is exceeded.

본 발명의 일부 실시예에서, 상기 영상 및 온습도 센싱값에 기초하여 상기 카메라의 렌즈 세척 여부를 판단하는 단계는, 상기 온습도 센싱값이 기 설정된 온습도값을 초과하는지 여부를 판단하는 단계; 및 상기 기 설정된 온습도값을 초과하는 것으로 판단된 경우 상기 카메라의 렌즈 세척이 필요한 것으로 판단하는 단계를 포함할 수 있다.In some embodiments of the present invention, the determining whether to clean the lens of the camera based on the image and the temperature and humidity sensing value includes: determining whether the temperature and humidity sensing value exceeds a preset temperature and humidity value; and determining that cleaning of the lens of the camera is necessary when it is determined that the preset temperature and humidity value is exceeded.

본 발명의 일부 실시예에서, 상기 영상 및 온습도 센싱값에 기초하여 상기 카메라의 렌즈 세척 여부를 판단하는 단계는, 초음파 센서로부터 발생되어 반사되는 초음파 신호의 감쇄값을 측정하는 단계; 및 상시 초음파 신호의 감쇄값이 기 설정된 감쇄값 이하인 경우, 상기 카메라의 렌즈 세척이 필요한 것으로 판단하는 단계를 포함할 수 있다.In some embodiments of the present invention, determining whether to clean the lens of the camera based on the image and the temperature and humidity sensing value may include: measuring an attenuation value of an ultrasonic signal generated and reflected from an ultrasonic sensor; and determining that cleaning of the lens of the camera is necessary when the attenuation value of the regular ultrasound signal is equal to or less than a preset attenuation value.

본 발명의 일부 실시예에서, 상기 영상 및 온습도 센싱값에 기초하여 상기 카메라의 렌즈 세척 여부를 판단하는 단계는, 초음파 센서로부터 발생되어 반사되는 초음파 신호로부터의 거리값을 측정하는 단계; 및 상기 측정된 거리값이 기 설정된 거리값 이하인 경우, 상기 카메라의 렌즈 세척이 필요한 것으로 판단하는 단계를 포함할 수 있다.In some embodiments of the present invention, determining whether to clean the lens of the camera based on the image and the temperature and humidity sensing value includes: measuring a distance value from an ultrasonic signal generated and reflected from an ultrasonic sensor; and determining that cleaning of the lens of the camera is necessary when the measured distance value is less than or equal to a preset distance value.

본 발명의 일부 실시예에서, 상기 판단 결과에 기초하여 전기습윤 및 초음파 방식을 동시에 적용하여 카메라의 렌즈를 세척하도록 제어하는 단계는, 상기 전기습윤 방식에 적용되는 구동 주파수와 상기 초음파 방식에 적용되는 발진 주파수가 동일 위상을 갖도록 제어하는 단계를 포함할 수 있다.In some embodiments of the present invention, the controlling to wash the lens of the camera by simultaneously applying the electrowetting method and the ultrasonic method based on the determination result includes a driving frequency applied to the electrowetting method and a driving frequency applied to the ultrasonic method It may include controlling the oscillation frequency to have the same phase.

본 발명의 일부 실시예에서, 상기 판단 결과에 기초하여 전기습윤 및 초음파 방식을 동시에 적용하여 카메라의 렌즈를 세척하도록 제어하는 단계는, 상기 전기습윤 방식에 적용되는 구동 주파수와 상기 초음파 방식에 적용되는 발진 주파수를 보강 간섭되도록 동기화시키는 단계를 포함할 수 있다.In some embodiments of the present invention, the controlling to wash the lens of the camera by simultaneously applying the electrowetting method and the ultrasonic method based on the determination result includes a driving frequency applied to the electrowetting method and a driving frequency applied to the ultrasonic method synchronizing the oscillation frequency to constructively interfere.

또한, 본 발명의 제2 측면에 따른 전기습윤 및 초음파 방식을 이용한 카메라 렌즈 자가 세척 장치는 차량에 설치된 카메라에 의해 촬영된 영상 및 온습도 센서로부터의 온습도 센싱값을 수신하는 수신부, 상기 수신된 영상 및 온습도 센싱값에 기초하여 카메라의 렌즈 세척 여부를 결정하는 렌즈 세척 결정부 및 상기 카메라의 렌즈 세척 여부 결정에 따라, 전기습윤 및 초음파 방식을 동시에 적용하여 카메라의 렌즈를 세척하도록 제어하는 제어부를 포함한다.In addition, the camera lens self-cleaning apparatus using the electrowetting and ultrasonic method according to the second aspect of the present invention includes a receiver configured to receive an image photographed by a camera installed in a vehicle and a temperature and humidity sensing value from a temperature and humidity sensor, the received image and A lens cleaning determination unit for determining whether to clean the lens of the camera based on the temperature and humidity sensing value, and a control unit for controlling to wash the lens of the camera by simultaneously applying electrowetting and ultrasonic methods according to the determination of whether to clean the lens of the camera .

본 발명의 일부 실시예에서, 상기 렌즈 세척 결정부는 상기 촬영된 영상에 대한 영상인식 기법에 기초하여 오염도를 산출하고, 상기 오염도가 기 설정된 오염도를 초과하는 것으로 판단한 경우, 상기 카메라의 렌즈 세척이 필요한 것으로 결정할 수 있다.In some embodiments of the present invention, the lens cleaning determining unit calculates a contamination level based on an image recognition technique for the photographed image, and when it is determined that the contamination level exceeds a preset contamination level, cleaning the lens of the camera is required it can be decided that

본 발명의 일부 실시예에서, 상기 렌즈 세척 결정부는 상기 온습도 센싱값이 기 설정된 온습도값을 초과하는 것으로 판단한 경우 상기 카메라의 렌즈 세척이 필요한 것으로 결정할 수 있다.In some embodiments of the present invention, the lens cleaning determining unit may determine that the lens cleaning of the camera is necessary when it is determined that the temperature-humidity sensing value exceeds a preset temperature-humidity value.

본 발명의 일부 실시예에서, 상기 렌즈 세척 결정부는 초음파 센서로부터 발생되어 반사되는 초음파 신호의 감쇄값이 기 설정된 감쇄값 이하인 경우, 상기 카메라의 렌즈 세척이 필요한 것으로 결정할 수 있다.In some embodiments of the present invention, the lens cleaning determining unit may determine that the lens cleaning of the camera is necessary when the attenuation value of the ultrasound signal generated and reflected from the ultrasound sensor is equal to or less than a preset attenuation value.

본 발명의 일부 실시예에서, 상기 렌즈 세척 결정부는 초음파 센서로부터 발생되어 반사되는 초음파 신호로부터의 거리값이 기 설정된 거리값 이하인 경우, 상기 카메라의 렌즈 세척이 필요한 것으로 결정할 수 있다.In some embodiments of the present invention, the lens cleaning determining unit may determine that the lens cleaning of the camera is necessary when a distance value from an ultrasonic signal generated and reflected from the ultrasonic sensor is less than or equal to a preset distance value.

본 발명의 일부 실시예에서, 상기 제어부는 상기 전기습윤 방식에 적용되는 구동 주파수와 상기 초음파 방식에 적용되는 발진 주파수가 동일 위상을 갖도록 제어할 수 있다.In some embodiments of the present invention, the controller may control a driving frequency applied to the electrowetting method and an oscillation frequency applied to the ultrasonic method to have the same phase.

본 발명의 일부 실시예에서, 상기 제어부는 상기 전기습윤 방식에 적용되는 구동 주파수와 상기 초음파 방식에 적용되는 발진 주파수를 보강 간섭되도록 동기화시킬 수 있다.In some embodiments of the present invention, the controller may synchronize a driving frequency applied to the electrowetting method and an oscillation frequency applied to the ultrasonic method to constructively interfere.

상술한 과제를 해결하기 위한 본 발명의 다른 면에 따른 컴퓨터 프로그램은, 하드웨어인 컴퓨터와 결합되어 전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법을 실행하며, 컴퓨터 판독가능 기록매체에 저장된다.A computer program according to another aspect of the present invention for solving the above-described problems is combined with a computer that is hardware to execute a lens self-cleaning method of a camera using an electrowetting and ultrasonic method, and is stored in a computer-readable recording medium.

본 발명의 기타 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.Other specific details of the invention are included in the detailed description and drawings.

전술한 본 발명의 일 실시예에 의하면, 차량의 주행 중 카메라의 렌즈가 오염된 경우 전기습윤 방식 및 초음파 방식에 의한 동시 세척을 통해, 오염도를 최대한 신속하게 낮출 수 있어 운전자 또는 무인차량시스템이 카메라의 선명한 영상을 빠르게 확인할 수 있도록 할 수 있다.According to the above-described embodiment of the present invention, when the lens of the camera is contaminated while the vehicle is driving, the degree of contamination can be reduced as quickly as possible through simultaneous washing by the electrowetting method and the ultrasonic method, so that the driver or the unmanned vehicle system can use the camera You can quickly check the clear image of

본 발명의 효과들은 이상에서 언급된 효과로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.Effects of the present invention are not limited to the effects mentioned above, and other effects not mentioned will be clearly understood by those skilled in the art from the following description.

도 1은 본 발명의 일 실시예에 따른 전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법의 순서도이다.
도 2는 초음파 센서를 이용하여 렌즈 세척 여부를 판단하는 일 예시를 설명하기 위한 도면이다.
도 3은 주파수를 기반으로 렌즈 세척 제어를 수행하는 일 예시를 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시예에 따른 카메라 렌즈 자가 세척 장치의 블록도이다.
1 is a flowchart of a lens self-cleaning method of a camera using an electrowetting and ultrasonic method according to an embodiment of the present invention.
2 is a view for explaining an example of determining whether to clean a lens using an ultrasonic sensor.
3 is a diagram for explaining an example of performing lens cleaning control based on frequency.
4 is a block diagram of a camera lens self-cleaning apparatus according to an embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시예들에 제한되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술 분야의 통상의 기술자에게 본 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. Advantages and features of the present invention and methods of achieving them will become apparent with reference to the embodiments described below in detail in conjunction with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but may be implemented in various different forms, and only these embodiments allow the disclosure of the present invention to be complete, and those of ordinary skill in the art to which the present invention pertains. It is provided to fully inform those skilled in the art of the scope of the present invention, and the present invention is only defined by the scope of the claims.

본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다. 명세서 전체에 걸쳐 동일한 도면 부호는 동일한 구성 요소를 지칭하며, "및/또는"은 언급된 구성요소들의 각각 및 하나 이상의 모든 조합을 포함한다. 비록 "제1", "제2" 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있음은 물론이다.The terminology used herein is for the purpose of describing the embodiments and is not intended to limit the present invention. In this specification, the singular also includes the plural, unless specifically stated otherwise in the phrase. As used herein, “comprises” and/or “comprising” does not exclude the presence or addition of one or more other components in addition to the stated components. Like reference numerals refer to like elements throughout, and "and/or" includes each and every combination of one or more of the recited elements. Although "first", "second", etc. are used to describe various elements, these elements are not limited by these terms, of course. These terms are only used to distinguish one component from another. Therefore, it goes without saying that the first component mentioned below may be the second component within the spirit of the present invention.

다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야의 통상의 기술자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또한, 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.Unless otherwise defined, all terms (including technical and scientific terms) used herein will have the meaning commonly understood by those of ordinary skill in the art to which this invention belongs. In addition, terms defined in a commonly used dictionary are not to be interpreted ideally or excessively unless clearly specifically defined.

본 발명은 차량의 최외곽에 부착된 카메라의 렌즈를 전기습윤 방식과 초음파 방식을 동시 적용하여 빠르고 용이하게 이물질을 세척할 수 있는 방법 및 장치(100)를 제공하기 위한 것이다.An object of the present invention is to provide a method and apparatus 100 capable of quickly and easily cleaning foreign substances by simultaneously applying an electrowetting method and an ultrasonic method to a lens of a camera attached to the outermost part of a vehicle.

본 발명의 일 실시예에서의 이물질은 빗물, 안개 등의 액체 등의 액적(droplet)뿐만 아니라 먼지, 서리, 진흙, 벌레 등과 같은 이물질을 포함하는 개념이다. Foreign matter in an embodiment of the present invention is a concept including foreign substances such as dust, frost, mud, insects, etc. as well as droplets (droplets) such as liquids such as rain water and mist.

한편, 본 발명의 일 실시예는 전기습윤(Electrowetting) 기술 및 초음파(Ultrasonic) 방식을 동시에 적용하는 것을 기술적 특징으로 한다. 따라서, 전기습윤 기술만을 적용하여 카메라 렌즈를 세척하는 기술이나 초음파 방식만을 단독 적용하여 이물질을 세척하는 기술과는 차이가 있다.On the other hand, an embodiment of the present invention is characterized in that the electrowetting (Electrowetting) technology and the ultrasonic (Ultrasonic) method is applied at the same time. Therefore, it is different from a technique for washing a camera lens by applying only an electrowetting technique or a technique for washing a foreign substance by applying only an ultrasonic method.

전기습윤 방식은 특정 전압을 전극으로 인가하는 방법을 통하여 이물질을 제거하는 방식이다. 본 발명의 일 실시예에서의 특정 전압을 인가하는 방식은 어느 하나로 한정되지 않으며, 한번에 모든 전극들에 특정 전압을 인가하는 교류 방법 및 전극들에 순차적으로 특정 전압을 인가하는 직류 방법 모두를 포함하여 실시할 수 있다.The electrowetting method is a method of removing foreign substances through a method of applying a specific voltage to an electrode. The method of applying a specific voltage in an embodiment of the present invention is not limited to any one, and includes both an AC method of applying a specific voltage to all electrodes at once and a DC method of sequentially applying a specific voltage to the electrodes. can be carried out.

이러한 전기습윤 방식만을 적용할 경우에는, 일 예로 진흙을 세척하는 시간이 오래 걸리며, 고착화된 벌레의 경우 세척이 불가능하다는 단점이 있다.When only this electrowetting method is applied, for example, it takes a long time to wash the mud, and there are disadvantages in that it is impossible to wash the fixed insects.

또한, 초음파 음압 방식의 경우에는 벌레 제거가 가능하다는 장점이 있으나, 전기습윤 방식에 비하여 세척 속도가 느린 단점이 있다.In addition, the ultrasonic negative pressure method has the advantage of being able to remove insects, but has a disadvantage in that the cleaning speed is slow compared to the electrowetting method.

이러한 문제점을 해소하기 위해 본 발명의 일 실시예는 전기습윤 방식과 초음파 방식을 동시 적용하여 각각의 단점을 모두 해소가능하다.In order to solve this problem, in one embodiment of the present invention, both the electrowetting method and the ultrasonic method are simultaneously applied to solve all of the disadvantages.

이하에서는 도 1 내지 도 3을 참조하여 본 발명의 일 실시예에 따른 카메라 렌즈 자가 세척 방법에 대해 설명하도록 한다.Hereinafter, a camera lens self-cleaning method according to an embodiment of the present invention will be described with reference to FIGS. 1 to 3 .

도 1은 본 발명의 일 실시예에 따른 전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법의 순서도이다.1 is a flowchart of a lens self-cleaning method of a camera using an electrowetting and ultrasonic method according to an embodiment of the present invention.

한편, 도 1에 도시된 각 단계들은 후술하는 카메라 렌즈 자가 세척 장치(100)에 의해 수행되는 것으로 이해될 수 있으나, 반드시 이에 한정되는 것은 아니다.Meanwhile, each of the steps shown in FIG. 1 may be understood to be performed by the camera lens self-cleaning apparatus 100 to be described later, but is not necessarily limited thereto.

먼저, 차량에 설치된 카메라에 의해 촬영된 영상을 수신한다(S110). 여기에서 카메라는 세척하는 카메라의 입력 영상을 보고 판단가능하다.First, an image captured by a camera installed in a vehicle is received ( S110 ). Here, the camera can be determined by looking at the input image of the camera to be cleaned.

다음으로, 차량에 설치된 온습도 센서로부터 온습도 센싱값을 수신한다(S120). 본 발명의 일 실시예는 온습도 센서를 통해 카메라 렌즈 외각에 습기가 발생하였는지 여부를 판단할 수 있다.Next, a temperature and humidity sensing value is received from a temperature and humidity sensor installed in the vehicle (S120). According to an embodiment of the present invention, it may be determined whether moisture is generated on the exterior of the camera lens through the temperature and humidity sensor.

다음으로, 영상 및 온습도 센싱값에 기초하여 카메라의 렌즈 세척 여부를 판단한다(S130). Next, it is determined whether or not to clean the lens of the camera based on the image and the temperature and humidity sensing values (S130).

카메라의 렌즈 세척 여부를 판단하는 방법의 일 실시예로, 촬영된 영상에 대한 영상인식 기법에 기초하여 오염도를 산출하고, 오염도가 기 설정된 오염도를 초과하는지 여부를 판단한 후, 기 설정된 오염도를 초과하는 것으로 판단된 경우, 카메라의 렌즈 세척이 필요한 것으로 판단할 수 있다.As an embodiment of a method for determining whether to clean a lens of a camera, the contamination level is calculated based on an image recognition technique for a photographed image, and after determining whether the contamination level exceeds a preset contamination level, the contamination level exceeds a preset contamination level If it is determined that it is, it may be determined that cleaning the lens of the camera is necessary.

일 예로, 차량의 시동이 온 상태에서 정차 중에 촬영된 정지 영상의 이전 프레임 대비 현재 프레임의 변화율에 기초하여 렌즈의 오염도를 산출할 수 있다. 또는, 정차 중이나 주행 중 특정 시점에서 촬영된 영상의 초점의 정확도에 기초하여 오염도를 산출할 수 있다. 또는, 미리 학습된 소정의 알고리즘(예를 들어 딥러닝 학습 등)에 기초하여 촬영된 영상에 물기, 진흙, 벌레 등의 이물질에 의한 오염도를 직접 산출할 수도 있다. 이러한 오염도가 기 설정된 오염도를 초과하는 경우 카메라의 렌즈 세척이 필요한 것으로 판단할 수 있다. 여기에서 기 설정된 오염도는 렌즈 공정시 개발자에 의해 디폴트로 미리 설정된 상수값일 수 있으며, 운전자나 관리자에 의해 조정 가능한 값일 수 있다. 기 설정된 오염도의 수치를 높일 경우 차량의 주행에 어려움이 있을 정도로 오염된 경우에 한해 렌즈 세척이 필요한 것으로 판단하게 되며, 반대로 기 설정된 오염도의 수치를 낮출 경우 적은 이물질이 묻은 경우라도 세척 제어 과정을 실행시켜 신속하게 이물질을 제거할 수 있다.For example, the degree of contamination of the lens may be calculated based on a change rate of a current frame compared to a previous frame of a still image captured while the vehicle is stopped in a state in which the vehicle is started. Alternatively, the degree of pollution may be calculated based on the accuracy of the focus of the image captured at a specific point in time while stopping or driving. Alternatively, the degree of contamination by foreign substances such as water, mud, and insects may be directly calculated in the captured image based on a predetermined algorithm (eg, deep learning learning) learned in advance. When the contamination level exceeds a preset contamination level, it may be determined that the lens cleaning of the camera is necessary. Here, the preset pollution level may be a constant value preset as a default by a developer during lens processing, or may be a value adjustable by a driver or an administrator. If the preset pollution level is raised, it is determined that the lens needs to be cleaned only when it is contaminated enough to make it difficult to drive the vehicle. This allows you to quickly remove foreign substances.

카메라의 렌즈 세척 여부를 판단하는 방법의 다른 일 실시예로, 온습도 센싱값이 기 설정된 온습도값을 초과하는지 여부를 판단하고, 기 설정된 온습도값을 초과하는 것으로 판단된 경우 카메라의 렌즈 세척이 필요한 것으로 판단할 수 있다.As another embodiment of the method of determining whether to wash the lens of the camera, it is determined whether the temperature and humidity sensing value exceeds a preset temperature and humidity value, and when it is determined that the preset temperature and humidity value is exceeded, it is determined that cleaning the lens of the camera is necessary. can judge

일 예로, 비가 오는 환경이나 습한 환경의 경우 카메라의 렌즈 외곽에 습기가 발생하여 촬영된 영상의 선명도를 저하시킬 수 있다. 이를 방지하기 위해, 본 발명의 일 실시예는 온습도 센싱값을 이용하여 렌즈 세척 여부를 결정할 수 있다. 이때, 본 발명의 일 실시예는 차량의 속도에 따라 기 설정된 온습도 센싱값을 상이하게 적용할 수도 있다. 예를 들어, 소정의 속도 이상인 고속 주행 상태의 경우 주행에 의한 바람의 영향으로 저속 상태보다 상대적으로 온습도 영향이 더 적어지므로 기 설정된 온습도 센싱값을 정차 상태 또는 저속 상태보다 상대적으로 높게 설정하여 영상 확인이 가능함에도 불구하고 잦은 렌즈 세척이 발생하는 것을 방지토록 할 수 있다.For example, in a rainy or humid environment, moisture may be generated outside the lens of the camera to deteriorate the sharpness of the captured image. To prevent this, an embodiment of the present invention may determine whether to clean the lens using a temperature and humidity sensing value. In this case, an embodiment of the present invention may apply a preset temperature/humidity sensing value differently according to the speed of the vehicle. For example, in the case of high-speed driving at a predetermined speed or higher, the influence of temperature and humidity is relatively less than that of low-speed due to the influence of wind caused by driving. Although this is possible, it is possible to prevent frequent lens cleaning from occurring.

도 2는 초음파 센서를 이용하여 렌즈 세척 여부를 판단하는 일 예시를 설명하기 위한 도면이다.2 is a view for explaining an example of determining whether to clean a lens using an ultrasonic sensor.

카메라의 렌즈 세척 여부를 판단하는 방법의 다른 일 실시예로, 초음파 센서로부터 발생되어 반사되는 초음파 신호의 감쇄값을 측정하고, 초음파 신호의 감쇄값이 기 설정된 감쇄값 이하인 경우, 카메라의 렌즈 세척이 필요한 것으로 판단할 수 있다.As another embodiment of the method for determining whether to clean the lens of the camera, an attenuation value of an ultrasound signal generated and reflected from an ultrasound sensor is measured, and when the attenuation value of the ultrasound signal is less than or equal to a preset attenuation value, cleaning the lens of the camera is performed may be deemed necessary.

일 예로, 카메라 주변에는 적어도 하나의 초음파 센서가 구비될 수 있으며, 하나의 초음파 센서에 의해 발생된 초음파 신호의 감쇄값이 기 설정된 감쇄값 이하인 경우, 렌즈 세척이 필요한 것으로 판단할 수 있다. 또는, 하나의 카메라 주변에는 동일한 거리에 설치된 복수 개의 초음파 센서가 구비될 수 있으며, 복수 개의 초음파 센서에 의해 발생된 각각의 초음파 신호의 감쇄값을 측정하고, 각 초음파 신호의 감쇄값 간의 차이값을 산출한 후, 차이값이 기 설정된 값을 초과하는 경우, 카메라 렌즈가 오염된 것으로 판단하여 렌즈 세척이 필요한 것으로 결정할 수 있다.For example, at least one ultrasonic sensor may be provided around the camera, and when an attenuation value of an ultrasound signal generated by one ultrasound sensor is less than or equal to a preset attenuation value, it may be determined that lens cleaning is necessary. Alternatively, a plurality of ultrasonic sensors installed at the same distance may be provided around one camera, and the attenuation value of each ultrasonic signal generated by the plurality of ultrasonic sensors is measured, and the difference value between the attenuation values of each ultrasonic signal is calculated. After the calculation, when the difference value exceeds a preset value, it may be determined that the camera lens is contaminated and it may be determined that the lens needs to be cleaned.

또 다른 실시예로, 초음파 센서로부터 발생되어 반사되는 초음파 신호로부터의 거리값을 측정하고, 측정된 거리값이 기 설정된 거리값 이하인 경우, 카메라의 렌즈 세척이 필요한 것으로 판단할 수 있다. 즉, 카메라 렌즈에 이물질이 존재하는 경우 초음파 신호가 반사되어 돌아오는 거리가 짧게 측정되므로, 이러한 원리를 이용하여 렌즈 세척 여부를 결정할 수 있다.In another embodiment, the distance value from the ultrasonic signal generated and reflected from the ultrasonic sensor is measured, and when the measured distance value is less than or equal to a preset distance value, it may be determined that the lens cleaning of the camera is necessary. That is, when a foreign material is present in the camera lens, the distance at which the ultrasonic signal is reflected and returned is measured to be short, so it is possible to determine whether to clean the lens using this principle.

한편, 본 발명은 전술한 실시예 중 어느 하나를 선택적으로 적용하여 렌즈 세척 여부를 판단하거나, 복수 개를 조합하여 렌즈 세척 여부를 판단할 수 있다.Meanwhile, in the present invention, it is possible to determine whether to wash the lens by selectively applying any one of the above-described embodiments, or to determine whether to wash the lens by combining a plurality of them.

다시 도 1을 참조하면, 렌즈 세척 여부의 판단 결과에 기초하여 전기습윤 및 초음파 방식을 동시에 적용하여 카메라의 렌즈를 세척하도록 제어한다(S140). Referring back to FIG. 1 , based on the determination result of whether to clean the lens, the electrowetting method and the ultrasonic method are simultaneously applied to control the cleaning of the lens of the camera ( S140 ).

도 3은 주파수를 기반으로 렌즈 세척 제어를 수행하는 일 예시를 설명하기 위한 도면이다.3 is a diagram for explaining an example of performing lens cleaning control based on frequency.

일 실시예로, 본 발명은 전기습윤 방식 방식에 적용되는 구동 주파수(A1)와 초음파 방식에 적용되는 발진 주파수(A2)가 동일 위상을 갖도록 제어할 수 있다. 즉, 본 발명의 일 실시예는 동시에 구동되는 전기습윤 방식에 적용되는 구동 주파수(A1)와 초음파 방식에 적용되는 발진 주파수(A2)가 상쇄 간섭이 발생되지 않도록 하기 위하여 동일 위상을 갖도록 주파수 제어를 할 수 있다.In one embodiment, the present invention can control the driving frequency (A 1 ) applied to the electrowetting method and the oscillation frequency (A 2 ) applied to the ultrasonic method to have the same phase. That is, in one embodiment of the present invention, the driving frequency (A 1 ) applied to the electrowetting method that is simultaneously driven and the oscillation frequency (A 2 ) applied to the ultrasonic method have the same phase in order to prevent destructive interference from occurring. can take control

또한, 본 발명의 일 실시예는 전기습윤 방식에 적용되는 구동 주파수와 초음파 방식에 적용되는 발진 주파수를 보강 간섭되도록 동기화하여 렌즈 이물질을 더욱 빠르고 강하게 세척할 수 있도록 할 수 있다.In addition, according to an embodiment of the present invention, the driving frequency applied to the electrowetting method and the oscillation frequency applied to the ultrasonic method are synchronized to constructively interfere, so that lens foreign substances can be cleaned more quickly and strongly.

한편, 상술한 설명에서, 단계 S110 내지 S140은 본 발명의 구현예에 따라서, 추가적인 단계들로 더 분할되거나, 더 적은 단계들로 조합될 수 있다. 또한, 일부 단계는 필요에 따라 생략될 수도 있고, 단계 간의 순서가 변경될 수도 있다. 아울러, 기타 생략된 내용이라 하더라도 도 1 내지 도 3의 내용은 도 4의 카메라 렌즈 자가 세척 장치(100)의 내용에도 적용될 수 있다.Meanwhile, in the above description, steps S110 to S140 may be further divided into additional steps or combined into fewer steps according to an embodiment of the present invention. In addition, some steps may be omitted if necessary, and the order between the steps may be changed. In addition, the contents of FIGS. 1 to 3 may also be applied to the contents of the camera lens self-cleaning apparatus 100 of FIG. 4 even if other contents are omitted.

도 4는 본 발명의 일 실시예에 따른 카메라 렌즈 자가 세척 장치(100)의 블록도이다.4 is a block diagram of a camera lens self-cleaning apparatus 100 according to an embodiment of the present invention.

본 발명의 일 실시예에 따른 카메라 렌즈 자가 세척 장치(100)는 수신부(110), 렌즈 세척 결정부(120) 및 제어부(130)를 포함한다.The camera lens self-cleaning apparatus 100 according to an embodiment of the present invention includes a receiving unit 110 , a lens cleaning determining unit 120 , and a control unit 130 .

수신부(110)는 차량에 설치된 카메라에 의해 촬영된 영상 및 온습도 센서로부터의 온습도 센싱값을 수신한다. 이러한 수신부(110)는 통신모듈로 구성될 수 있으며, 통신모듈에 의한 통신방식은 CAN 통신, 이더넷 방식 등 차량 내 다양한 통신 방식이 적용될 수 있다.The receiver 110 receives an image captured by a camera installed in the vehicle and a temperature/humidity sensing value from a temperature and humidity sensor. The receiver 110 may be configured as a communication module, and various communication methods in the vehicle such as CAN communication and Ethernet may be applied as the communication method by the communication module.

렌즈 세척 결정부(120)는 수신된 영상 및 온습도 센싱값에 기초하여 카메라의 렌즈 세척 여부를 결정하고, 제어부(130)는 카메라의 렌즈 세척 여부 결정에 따라, 전기습윤 및 초음파 방식을 동시에 적용하여 카메라의 렌즈를 세척하도록 제어한다. The lens cleaning determining unit 120 determines whether to wash the lens of the camera based on the received image and the temperature and humidity sensing value, and the control unit 130 simultaneously applies the electrowetting and ultrasonic methods according to the determination of whether to clean the lens of the camera. Controls the camera's lens to be cleaned.

이상에서 전술한 본 발명의 일 실시예는, 하드웨어인 컴퓨터와 결합되어 실행되기 위해 프로그램(또는 어플리케이션)으로 구현되어 매체에 저장될 수 있다.The embodiment of the present invention described above may be implemented as a program (or application) to be executed in combination with a computer, which is hardware, and stored in a medium.

상기 전술한 프로그램은, 상기 컴퓨터가 프로그램을 읽어 들여 프로그램으로 구현된 상기 방법들을 실행시키기 위하여, 상기 컴퓨터의 프로세서(CPU)가 상기 컴퓨터의 장치 인터페이스를 통해 읽힐 수 있는 C, C++, JAVA, Ruby, 기계어 등의 컴퓨터 언어로 코드화된 코드(Code)를 포함할 수 있다. 이러한 코드는 상기 방법들을 실행하는 필요한 기능들을 정의한 함수 등과 관련된 기능적인 코드(Functional Code)를 포함할 수 있고, 상기 기능들을 상기 컴퓨터의 프로세서가 소정의 절차대로 실행시키는데 필요한 실행 절차 관련 제어 코드를 포함할 수 있다. 또한, 이러한 코드는 상기 기능들을 상기 컴퓨터의 프로세서가 실행시키는데 필요한 추가 정보나 미디어가 상기 컴퓨터의 내부 또는 외부 메모리의 어느 위치(주소 번지)에서 참조되어야 하는지에 대한 메모리 참조관련 코드를 더 포함할 수 있다. 또한, 상기 컴퓨터의 프로세서가 상기 기능들을 실행시키기 위하여 원격(Remote)에 있는 어떠한 다른 컴퓨터나 서버 등과 통신이 필요한 경우, 코드는 상기 컴퓨터의 통신 모듈을 이용하여 원격에 있는 어떠한 다른 컴퓨터나 서버 등과 어떻게 통신해야 하는지, 통신 시 어떠한 정보나 미디어를 송수신해야 하는지 등에 대한 통신 관련 코드를 더 포함할 수 있다.The above-mentioned program, in order for the computer to read the program and execute the methods implemented as a program, C, C++, JAVA, Ruby, which the processor (CPU) of the computer can read through the device interface of the computer; It may include code coded in a computer language such as machine language. Such code may include functional code related to a function defining functions necessary for executing the methods, etc. can do. In addition, the code may further include additional information necessary for the processor of the computer to execute the functions or code related to memory reference for which location (address address) in the internal or external memory of the computer should be referenced. have. In addition, when the processor of the computer needs to communicate with any other computer or server located remotely in order to execute the functions, the code uses the communication module of the computer to determine how to communicate with any other computer or server remotely. It may further include a communication-related code for whether to communicate and what information or media to transmit and receive during communication.

상기 저장되는 매체는, 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상기 저장되는 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있지만, 이에 제한되지 않는다. 즉, 상기 프로그램은 상기 컴퓨터가 접속할 수 있는 다양한 서버 상의 다양한 기록매체 또는 사용자의 상기 컴퓨터상의 다양한 기록매체에 저장될 수 있다. 또한, 상기 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장될 수 있다.The storage medium is not a medium that stores data for a short moment, such as a register, a cache, a memory, etc., but a medium that stores data semi-permanently and can be read by a device. Specifically, examples of the storage medium include, but are not limited to, ROM, RAM, CD-ROM, magnetic tape, floppy disk, and optical data storage device. That is, the program may be stored in various recording media on various servers accessible by the computer or in various recording media on the computer of the user. In addition, the medium may be distributed in a computer system connected by a network, and computer-readable codes may be stored in a distributed manner.

전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.The foregoing description of the present invention is for illustration, and those of ordinary skill in the art to which the present invention pertains can understand that it can be easily modified into other specific forms without changing the technical spirit or essential features of the present invention. will be. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not restrictive. For example, each component described as a single type may be implemented in a distributed manner, and likewise components described as distributed may also be implemented in a combined form.

본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.The scope of the present invention is indicated by the following claims rather than the above detailed description, and all changes or modifications derived from the meaning and scope of the claims and their equivalent concepts should be interpreted as being included in the scope of the present invention. do.

100: 카메라 렌즈 자가 세척 장치
110: 수신부
120 : 렌즈 세척 결정부
130 : 제어부
100: camera lens self-cleaning device
110: receiver
120: lens cleaning decision unit
130: control unit

Claims (14)

전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법에 있어서,
차량에 설치된 카메라에 의해 촬영된 영상을 수신하는 단계;
상기 차량에 설치된 온습도 센서로부터 온습도 센싱값을 수신하는 단계;
상기 영상 및 온습도 센싱값에 기초하여 상기 카메라의 렌즈 세척 여부를 판단하는 단계; 및
상기 판단 결과에 기초하여 전기습윤 및 초음파 방식을 동시에 적용하여 카메라의 렌즈를 세척하도록 제어하는 단계를 포함하는,
전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법.
A method for self-cleaning a lens of a camera using electrowetting and ultrasonic methods, the method comprising:
Receiving an image photographed by a camera installed in the vehicle;
receiving a temperature/humidity sensing value from a temperature/humidity sensor installed in the vehicle;
determining whether to clean the lens of the camera based on the image and the temperature and humidity sensing value; and
Comprising the step of controlling to wash the lens of the camera by simultaneously applying the electrowetting method and the ultrasonic method based on the determination result,
A method of self-cleaning the lens of a camera using electrowetting and ultrasonic methods.
제1항에 있어서,
상기 영상 및 온습도 센싱값에 기초하여 상기 카메라의 렌즈 세척 여부를 판단하는 단계는,
상기 촬영된 영상에 대한 영상인식 기법에 기초하여 오염도를 산출하는 단계;
상기 오염도가 기 설정된 오염도를 초과하는지 여부를 판단하는 단계; 및
상기 기 설정된 오염도를 초과하는 것으로 판단된 경우, 상기 카메라의 렌즈 세척이 필요한 것으로 판단하는 단계를 포함하는,
전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법.
The method of claim 1,
The step of determining whether to wash the lens of the camera based on the image and the temperature and humidity sensing value,
calculating a contamination level based on an image recognition technique for the photographed image;
determining whether the pollution level exceeds a preset level of pollution; and
Comprising the step of determining that cleaning of the lens of the camera is necessary when it is determined that the preset level of contamination is exceeded,
A method of self-cleaning the lens of a camera using electrowetting and ultrasonic methods.
제1항에 있어서,
상기 영상 및 온습도 센싱값에 기초하여 상기 카메라의 렌즈 세척 여부를 판단하는 단계는,
상기 온습도 센싱값이 기 설정된 온습도값을 초과하는지 여부를 판단하는 단계; 및
상기 기 설정된 온습도값을 초과하는 것으로 판단된 경우 상기 카메라의 렌즈 세척이 필요한 것으로 판단하는 단계를 포함하는,
전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법.
According to claim 1,
The step of determining whether to wash the lens of the camera based on the image and the temperature and humidity sensing value,
determining whether the temperature/humidity sensing value exceeds a preset temperature/humidity value; and
Comprising the step of determining that the lens cleaning of the camera is necessary when it is determined that the preset temperature and humidity value is exceeded,
A method of self-cleaning the lens of a camera using electrowetting and ultrasonic methods.
제1항에 있어서,
상기 영상 및 온습도 센싱값에 기초하여 상기 카메라의 렌즈 세척 여부를 판단하는 단계는,
초음파 센서로부터 발생되어 반사되는 초음파 신호의 감쇄값을 측정하는 단계; 및
상시 초음파 신호의 감쇄값이 기 설정된 감쇄값 이하인 경우, 상기 카메라의 렌즈 세척이 필요한 것으로 판단하는 단계를 포함하는,
전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법.
According to claim 1,
The step of determining whether to wash the lens of the camera based on the image and the temperature and humidity sensing value,
measuring an attenuation value of an ultrasonic signal generated and reflected from an ultrasonic sensor; and
Comprising the step of determining that the lens cleaning of the camera is necessary when the attenuation value of the regular ultrasound signal is less than or equal to a preset attenuation value,
A method of self-cleaning the lens of a camera using electrowetting and ultrasonic methods.
제1항에 있어서,
상기 영상 및 온습도 센싱값에 기초하여 상기 카메라의 렌즈 세척 여부를 판단하는 단계는,
초음파 센서로부터 발생되어 반사되는 초음파 신호로부터의 거리값을 측정하는 단계; 및
상기 측정된 거리값이 기 설정된 거리값 이하인 경우, 상기 카메라의 렌즈 세척이 필요한 것으로 판단하는 단계를 포함하는,
전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법.
According to claim 1,
The step of determining whether to wash the lens of the camera based on the image and the temperature and humidity sensing value,
measuring a distance value from an ultrasonic signal generated and reflected from an ultrasonic sensor; and
Comprising the step of determining that the lens cleaning of the camera is necessary when the measured distance value is less than or equal to a preset distance value,
A method of self-cleaning the lens of a camera using electrowetting and ultrasonic methods.
제1항에 있어서,
상기 판단 결과에 기초하여 전기습윤 및 초음파 방식을 동시에 적용하여 카메라의 렌즈를 세척하도록 제어하는 단계는,
상기 전기습윤 방식에 적용되는 구동 주파수와 상기 초음파 방식에 적용되는 발진 주파수가 동일 위상을 갖도록 제어하는 단계를 포함하는,
전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법.
According to claim 1,
Controlling to wash the lens of the camera by simultaneously applying the electrowetting and ultrasonic methods based on the determination result,
Controlling the driving frequency applied to the electrowetting method and the oscillation frequency applied to the ultrasonic method to have the same phase,
A method of self-cleaning the lens of a camera using electrowetting and ultrasonic methods.
제6항에 있어서,
상기 판단 결과에 기초하여 전기습윤 및 초음파 방식을 동시에 적용하여 카메라의 렌즈를 세척하도록 제어하는 단계는,
상기 전기습윤 방식에 적용되는 구동 주파수와 상기 초음파 방식에 적용되는 발진 주파수를 보강 간섭되도록 동기화시키는 단계를 포함하는,
전기습윤 및 초음파 방식을 이용하는 카메라의 렌즈 자가 세척 방법.
7. The method of claim 6,
Controlling to wash the lens of the camera by simultaneously applying the electrowetting and ultrasonic methods based on the determination result,
Comprising the step of synchronizing the driving frequency applied to the electrowetting method and the oscillation frequency applied to the ultrasonic method to constructively interfere,
A method of self-cleaning the lens of a camera using electrowetting and ultrasonic methods.
전기습윤 및 초음파 방식을 이용한 카메라 렌즈 자가 세척 장치에 있어서,
차량에 설치된 카메라에 의해 촬영된 영상 및 온습도 센서로부터의 온습도 센싱값을 수신하는 수신부,
상기 수신된 영상 및 온습도 센싱값에 기초하여 카메라의 렌즈 세척 여부를 결정하는 렌즈 세척 결정부 및
상기 카메라의 렌즈 세척 여부 결정에 따라, 전기습윤 및 초음파 방식을 동시에 적용하여 카메라의 렌즈를 세척하도록 제어하는 제어부를 포함하는,
카메라 렌즈 자가 세척 장치.
In the camera lens self-cleaning device using electrowetting and ultrasonic method,
A receiver for receiving an image captured by a camera installed in the vehicle and a temperature and humidity sensing value from the temperature and humidity sensor;
a lens cleaning determining unit for determining whether to clean the lens of the camera based on the received image and the temperature and humidity sensing value; and
In accordance with the determination of whether to clean the lens of the camera, comprising a control unit for controlling to wash the lens of the camera by simultaneously applying the electrowetting and ultrasonic methods,
Camera lens self-cleaning device.
제8항에 있어서,
상기 렌즈 세척 결정부는 상기 촬영된 영상에 대한 영상인식 기법에 기초하여 오염도를 산출하고, 상기 오염도가 기 설정된 오염도를 초과하는 것으로 판단한 경우, 상기 카메라의 렌즈 세척이 필요한 것으로 결정하는 것인,
카메라 렌즈 자가 세척 장치.
9. The method of claim 8,
The lens cleaning determining unit calculates a contamination level based on an image recognition technique for the photographed image, and when it is determined that the contamination level exceeds a preset contamination level, it is determined that cleaning the lens of the camera is necessary,
Camera lens self-cleaning device.
제8항에 있어서,
상기 렌즈 세척 결정부는 상기 온습도 센싱값이 기 설정된 온습도값을 초과하는 것으로 판단한 경우 상기 카메라의 렌즈 세척이 필요한 것으로 결정하는 것인,
카메라 렌즈 자가 세척 장치.
9. The method of claim 8,
When it is determined that the temperature-humidity sensing value exceeds a preset temperature-humidity value, the lens cleaning determining unit determines that cleaning of the lens of the camera is necessary,
Camera lens self-cleaning device.
제8항에 있어서,
상기 렌즈 세척 결정부는 초음파 센서로부터 발생되어 반사되는 초음파 신호의 감쇄값이 기 설정된 감쇄값 이하인 경우, 상기 카메라의 렌즈 세척이 필요한 것으로 결정하는 것인,
카메라 렌즈 자가 세척 장치.
9. The method of claim 8,
When the attenuation value of the ultrasound signal generated and reflected from the ultrasound sensor is less than or equal to a preset attenuation value, the lens cleaning determining unit determines that cleaning of the lens of the camera is necessary,
Camera lens self-cleaning device.
제8항에 있어서,
상기 렌즈 세척 결정부는 초음파 센서로부터 발생되어 반사되는 초음파 신호로부터의 거리값이 기 설정된 거리값 이하인 경우, 상기 카메라의 렌즈 세척이 필요한 것으로 결정하는 것인,
카메라 렌즈 자가 세척 장치.
9. The method of claim 8,
When the distance value from the ultrasonic signal generated and reflected from the ultrasonic sensor is less than a preset distance value, the lens cleaning determining unit determines that the lens cleaning of the camera is necessary,
Camera lens self-cleaning device.
제8항에 있어서,
상기 제어부는 상기 전기습윤 방식에 적용되는 구동 주파수와 상기 초음파 방식에 적용되는 발진 주파수가 동일 위상을 갖도록 제어하는 것인,
카메라 렌즈 자가 세척 장치.
9. The method of claim 8,
The control unit controls the driving frequency applied to the electrowetting method and the oscillation frequency applied to the ultrasonic method to have the same phase,
Camera lens self-cleaning device.
제13항에 있어서,
상기 제어부는 상기 전기습윤 방식에 적용되는 구동 주파수와 상기 초음파 방식에 적용되는 발진 주파수를 보강 간섭되도록 동기화시키는 것인,
카메라 렌즈 자가 세척 장치.
14. The method of claim 13,
The control unit synchronizes a driving frequency applied to the electrowetting method and an oscillation frequency applied to the ultrasonic method to constructively interfere.
Camera lens self-cleaning device.
KR1020210036225A 2021-03-19 2021-03-19 Method and apparatus for self-cleaning camera lens using both electrowetting and ultrasonic methods KR20220131473A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210036225A KR20220131473A (en) 2021-03-19 2021-03-19 Method and apparatus for self-cleaning camera lens using both electrowetting and ultrasonic methods

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210036225A KR20220131473A (en) 2021-03-19 2021-03-19 Method and apparatus for self-cleaning camera lens using both electrowetting and ultrasonic methods

Publications (1)

Publication Number Publication Date
KR20220131473A true KR20220131473A (en) 2022-09-28

Family

ID=83461131

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210036225A KR20220131473A (en) 2021-03-19 2021-03-19 Method and apparatus for self-cleaning camera lens using both electrowetting and ultrasonic methods

Country Status (1)

Country Link
KR (1) KR20220131473A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116475158A (en) * 2023-06-20 2023-07-25 国网浙江省电力有限公司宁波供电公司 Method for controlling washing of transformer oil sample container, washing device and storage medium

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160012228A (en) 2013-05-29 2016-02-02 카-페 시스템 게엠베하 Portion capsule having a liquid distributor

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160012228A (en) 2013-05-29 2016-02-02 카-페 시스템 게엠베하 Portion capsule having a liquid distributor

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116475158A (en) * 2023-06-20 2023-07-25 国网浙江省电力有限公司宁波供电公司 Method for controlling washing of transformer oil sample container, washing device and storage medium
CN116475158B (en) * 2023-06-20 2023-11-03 国网浙江省电力有限公司宁波供电公司 Method for controlling washing of transformer oil sample container, washing device and storage medium

Similar Documents

Publication Publication Date Title
JP7272226B2 (en) Raindrop Recognition Device, Vehicle Control Device, Learning Method and Trained Model
KR100997451B1 (en) Ink drop measuring device and its measuring method
CN112581440B (en) Method and device for maintaining image quality of vehicle-mounted camera and vehicle-mounted camera
KR20220131473A (en) Method and apparatus for self-cleaning camera lens using both electrowetting and ultrasonic methods
CN111845647B (en) Automobile camera cleaning system and method
US9783166B1 (en) Windscreen clearing using surface monitoring
CN114910927A (en) Event-based vehicle attitude estimation using monochromatic imaging
US9947207B2 (en) Method and apparatus for detecting an obstructed view
WO2010055551A1 (en) Treatment liquid ejection inspecting method, treatment liquid ejection inspecting apparatus and computer readable recording medium
US20220410849A1 (en) Carwash device, car-washing method, storage medium stored with car-washing program, and car-washing system
CN115991195A (en) Automatic detection and compensation method, device and system for wheel slip in automatic driving
WO2023124009A1 (en) State determination method and apparatus for cleaning robot
US20220212633A1 (en) Adaptive wiping elements for optical interfaces based on visual feedback
KR102110776B1 (en) A method for detecting an obstacle for detecting an obstacle around a vehicle and an obstacle detecting apparatus
CN115352398A (en) Method for automatically cleaning camera lens of unmanned vehicle
EP3315949B1 (en) Detection system, detection method, and program
CN114882363A (en) Method and device for treating stains of sweeper
JP2002277386A (en) Detector and detection method therefor, and wiper controller using them
CN110539694B (en) Rainfall warning method and device and vehicle
JP7334757B2 (en) Sensor cleaning system, sensor cleaning method, and vehicle
WO2024098462A1 (en) Vehicle windscreen wiper control method and apparatus, and electronic device and vehicle
US20240227867A9 (en) Vehicle control device, storage medium for storing computer program for vehicle control, and method for controlling vehicle
KR102083207B1 (en) System for controlling lane keeping of vehicle using exponential smoothing, and apparatus for generating virtual lane using exponential smoothing
WO2022193154A1 (en) Windshield wiper control method, automobile, and computer-readable storage medium
CN102651804B (en) Image system and interference removing method thereof

Legal Events

Date Code Title Description
A201 Request for examination