KR102428930B1 - Method and system for payment of car wash charge based on car identification - Google Patents

Method and system for payment of car wash charge based on car identification Download PDF

Info

Publication number
KR102428930B1
KR102428930B1 KR1020220032533A KR20220032533A KR102428930B1 KR 102428930 B1 KR102428930 B1 KR 102428930B1 KR 1020220032533 A KR1020220032533 A KR 1020220032533A KR 20220032533 A KR20220032533 A KR 20220032533A KR 102428930 B1 KR102428930 B1 KR 102428930B1
Authority
KR
South Korea
Prior art keywords
vehicle
car wash
image
license plate
match
Prior art date
Application number
KR1020220032533A
Other languages
Korean (ko)
Inventor
양석원
Original Assignee
양석원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 양석원 filed Critical 양석원
Priority to KR1020220032533A priority Critical patent/KR102428930B1/en
Application granted granted Critical
Publication of KR102428930B1 publication Critical patent/KR102428930B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/409—Device specific authentication in transaction processing
    • G06Q20/4093—Monitoring of device authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/14—Payment architectures specially adapted for billing systems
    • G06Q20/145—Payments according to the detected use or quantity
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/405—Establishing or using transaction specific rules
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/625—License plates
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Computer Security & Cryptography (AREA)
  • Signal Processing (AREA)
  • Vehicle Cleaning, Maintenance, Repair, Refitting, And Outriggers (AREA)

Abstract

According to an embodiment of the present invention, a method for payment of a car wash charge based on car identification is provided. The method comprises the steps of: (a) obtaining, by a camera disposed on at least one side of a vehicle access road connected to a car wash box, an image of a vehicle entering the vehicle access road; (b) identifying, by a control unit, a vehicle license plate through the image, and recognizing a vehicle number within the identified vehicle license plate; (c) identifying, by the control unit, a model, a manufacturer, and a vehicle type of the vehicle through the image; and (d) transmitting, by the control unit, a car wash payment request to a user terminal of a vehicle owner, which is inquired through the vehicle number. The present invention can improve the identification accuracy of the vehicle entering a mechanical car wash system.

Description

차량 인식을 통한 세차 요금 결제 방법 및 시스템{METHOD AND SYSTEM FOR PAYMENT OF CAR WASH CHARGE BASED ON CAR IDENTIFICATION}Method and system for paying car wash fees through vehicle recognition

본 발명은 차량 인식을 통한 세차 요금 결제 방법 및 시스템에 관한 것으로, 보다 상세하게는, 세차장에 진입하는 차량을 번호판 및 외관을 통해 인식하고, 인식된 차량의 소유주에게 세차 요금 결제 요청을 전송하여, 간편한 요금 결제를 가능하게 하는 방법 및 시스템에 관한 것이다.The present invention relates to a car wash payment method and system through vehicle recognition, and more particularly, by recognizing a vehicle entering a car wash through a license plate and exterior, and transmitting a car wash payment request to the owner of the recognized vehicle, It relates to a method and system for enabling simple payment of fees.

바쁜 현대인들은 차량에 대해 직접 세차를 하기 보다는 전문 세차 업체에 맡기거나, 기계 세차 시스템을 이용하여 세차를 하는 경우가 대부분이다. Busy modern people tend to entrust their cars to a professional car wash company or use a mechanical car wash system to wash their cars rather than washing their cars directly.

기계 세차 시스템은 일반적으로 차량의 진입을 감지하여 세차 시스템이 가동되고, 브러시가 장착된 세차 모듈이 차량의 전면, 윗면, 옆면을 닦는 구조로 이루어진다. 또한, 폼 세차가 완료된 후에는, 고압수를 분무하는 과정을 수행하고, 드라이 모듈이 차량에 근접하여 고압 공기를 내뿜어 남은 물기를 제거한다. In general, the mechanical car wash system detects the vehicle's entrance and operates the car wash system, and a car wash module equipped with a brush wipes the front, top, and side surfaces of the vehicle. In addition, after the foam washing is completed, a process of spraying high-pressure water is performed, and the dry module closes the vehicle and blows high-pressure air to remove the remaining water.

또한, 기계 세차 시스템의 경우, 차량 한대씩의 세차만 가능하고, 세차 박스 진입로에 배치된 키오스크를 통해 세차 요금을 결제하도록 구현되는 경우가 일반적인데, 세차 요금 결제 시에는 키오스크에 대한 조작, 결제 수단 투입 등의 과정이 필요하다. 이에 따라, 요금 결제에 시간이 많이 걸리게 되고, 세차 박스에 진입하기 전 시간이 많이 걸리게 되는 문제가 있었으며, 대기 차량의 경우 보다 더 많은 대기 시간을 필요로 하게 되는 문제점을 낳았다. In addition, in the case of a mechanical car wash system, it is possible to wash only one vehicle at a time, and it is generally implemented to pay the car wash fee through a kiosk disposed on the car wash box entrance. Input process is required. Accordingly, there is a problem that it takes a lot of time to pay a fee, a lot of time is taken before entering the car wash box, and a longer waiting time is required than in the case of a waiting vehicle.

따라서, 기계 세차 시스템에 있어서 차량 인식을 통한 세차 요금 결제의 간편화 및 신속화를 가능하게 하는 기계 세차 시스템에 대한 개발이 필요하다. Therefore, there is a need to develop a mechanical car wash system that enables the simplification and speedy payment of car wash fees through vehicle recognition in the mechanical car wash system.

본 발명은 종래 기술의 문제점을 해결하기 위한 것이다. SUMMARY OF THE INVENTION The present invention is intended to solve the problems of the prior art.

본 발명의 목적은, 차량 진입로의 양측에 배치된 복수의 카메라를 통해 인식된 차량 관련 정보를 비교하고, 일치하는 경우에만 올바르게 인식한 것으로 확인함으로써 기계 세차 시스템으로 진입하는 차량에 대한 인식 정확도를 향상시킬 수 있도록 하는 것이다. An object of the present invention is to improve the recognition accuracy of a vehicle entering a mechanical car wash system by comparing the vehicle-related information recognized through a plurality of cameras disposed on both sides of the vehicle access road and confirming that the vehicle is correctly recognized only if they match. to be able to do it

본 발명의 목적은, 차종, 차량 브랜드, 차량 형식, 색상 등을 종합적으로 인식하고, 차종과 차량 브랜드의 정보가 일치하는지 여부에 대한 판단을 하여, 차량 인식의 정확성을 확인함으로써, 차량 인식의 정확도를 향상시키도록 하는 것이다. An object of the present invention is to comprehensively recognize a vehicle model, a vehicle brand, a vehicle type, a color, etc., determine whether the information of the vehicle type and the vehicle brand match, and confirm the accuracy of vehicle recognition, thereby confirming the accuracy of vehicle recognition. is to improve

본 발명의 목적은, 차량 번호 인식을 통한 소유주 확인 절차가 완료되었더라도, 차량 번호를 통해 확인되는 차량 특성과 카메라를 통해 확인되는 차량 특성 간의 일치 여부를 확인한 후, 일치하는 경우에만 직접적으로 세차 요금 결제를 요청하도록 하는 것이다. An object of the present invention is to check whether the vehicle characteristics identified through the vehicle number and the vehicle characteristics identified through the camera match, even if the owner verification process through vehicle number recognition has been completed, and then directly pay the car wash fee only if they match to request

본 발명의 목적은, 차량 소유주의 사용자 단말기에 결제 요청이 전송되고, 사용자는 차량 내부에서 사용자 단말기를 통해 간편하게 결제를 하도록 함으로써, 기계 세차 시스템에 진입하기 전 키오스크 등을 통한 세차 요금 결제에 소비되는 시간이 최소화되도록 하는 것이다. An object of the present invention is to transmit a payment request to the user terminal of the vehicle owner and allow the user to conveniently make payment through the user terminal inside the vehicle, so that the car wash fee payment through a kiosk or the like before entering the machine car washing system is consumed. to minimize time.

본 발명의 목적들은 이상에서 언급한 목적들로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 명확하게 이해될 수 있을 것이다.Objects of the present invention are not limited to the objects mentioned above, and other objects not mentioned will be clearly understood from the description below.

상술한 목적을 달성하기 위한 본 발명의 일 실시예에 따르면, (a) 세차 박스에 연결되는 차량 진입로의 적어도 일측에 배치되는 카메라가, 상기 차량 진입로에 진입하는 차량의 이미지를 획득하는 단계; (b) 제어부가, 상기 이미지를 통해 차량 번호판을 인식하고, 인식된 차량 번호판 내에서 차량 번호를 인식하는 단계; (c) 상기 제어부가, 상기 이미지를 통해 차량의 차종, 제조사, 차량 형식을 인식하는 단계; 및 (d) 상기 제어부가, 상기 차량 번호를 통해 조회되는 차량 소유주의 사용자 단말기에 세차 요금 결제 요청을 전송하는 단계를 포함하는, 차량 인식 기반 세차 요금 결제 서비스 제공 방법이 제공된다. According to an embodiment of the present invention for achieving the above object, (a) a camera disposed on at least one side of the vehicle access road connected to the car wash box, acquiring an image of a vehicle entering the vehicle access road; (b) the control unit, recognizing the vehicle license plate through the image, and recognizing the vehicle number in the recognized vehicle license plate; (c) recognizing, by the controller, a vehicle model, a manufacturer, and a vehicle type of the vehicle through the image; and (d) transmitting, by the control unit, a car wash payment request to a user terminal of a vehicle owner inquired through the vehicle number.

상기 방법은, 상기 (a) 단계 이후에, 상기 이미지에서 차량 번호판을 인식하는 단계; 상기 차량 번호판의 꼭지점을 인식하는 단계; 및 인식된 꼭지점 중 상대적으로 상부에 위치하는 꼭지점 2개를 지나는 직선 및 상대적으로 하부에 위치하는 꼭지점 2개를 지나는 직선이, 영상 내 가로 방향 직선과 평행해지도록 꼭지점 위치를 보정하는 단계를 더 포함할 수 있다. The method includes, after step (a), recognizing a license plate from the image; recognizing a vertex of the license plate; and correcting the vertex position so that a straight line passing through two vertices located at a relatively upper position among the recognized vertices and a straight line passing through two vertices located at a relatively lower position become parallel to a horizontal straight line in the image. can do.

상기 (d) 단계는, 인식된 차량 번호를 통해 조회되는 차량의 특성 정보와, 상기 차종, 제조사, 차량 형식이 일치하는 경우에만, 상기 세차 요금 결제 요청을 전송하는 단계를 포함할 수 있다. The step (d) may include transmitting the request for payment of the car wash fee only when the vehicle type, manufacturer, and vehicle type match with the characteristic information of the vehicle inquired through the recognized vehicle number.

상기 (b) 단계는, 상기 차량의 전면 번호판 및 후면 번호판을 인식한 이미지를 분석한 결과, 각각의 이미지를 통해 인식되는 차량 번호가 일치하는 경우에만, 올바른 인식 결과로서 도출할 수 있다. The step (b) can be derived as a correct recognition result only when the vehicle number recognized through each image is the same as a result of analyzing the image that recognizes the front license plate and the rear license plate of the vehicle.

본 발명의 다른 실시예에 따르면, 세차 박스에 연결되는 차량 진입로의 적어도 일측에 배치되며, 상기 차량 진입로에 진입하는 차량의 이미지를 획득하는 일 이상의 카메라; 및 상기 이미지를 통해 차량 번호판을 인식하고, 인식된 차량 번호판 내에서 차량 번호를 인식하고, 상기 이미지를 통해 차량의 차종, 제조사, 차량 형식을 인식하며, 상기 차량 번호를 통해 조회되는 차량 소유주의 사용자 단말기에 세차 요금 결제 요청을 전송하는 제어부를 포함하는, 차량 인식 기반 세차 요금 결제 서비스 제공 시스템이 제공된다.According to another embodiment of the present invention, one or more cameras are disposed on at least one side of the vehicle access road connected to the car wash box, and obtain an image of the vehicle entering the vehicle access road; and the user of the vehicle owner who recognizes the vehicle license plate through the image, recognizes the vehicle number within the recognized vehicle number plate, recognizes the vehicle model, manufacturer, and vehicle type of the vehicle through the image, and is inquired through the vehicle number A vehicle recognition-based car wash payment service providing system is provided, including a control unit for transmitting a car wash payment request to a terminal.

본 발명의 실시예에 따르면, 차량 진입로의 양측에 배치된 복수의 카메라를 통해 인식된 차량 관련 정보를 비교하고, 일치하는 경우에만 올바르게 인식한 것으로 확인함으로써 기계 세차 시스템으로 진입하는 차량에 대한 인식 정확도를 향상시킬 수 있다. According to an embodiment of the present invention, by comparing vehicle-related information recognized through a plurality of cameras disposed on both sides of the vehicle access road, and confirming that the vehicle is correctly recognized only when they match, recognition accuracy for a vehicle entering the mechanical car wash system can improve

본 발명의 실시예에 따르면, 차종, 차량 브랜드, 차량 형식, 색상 등을 종합적으로 인식하고, 차종과 차량 브랜드의 정보가 일치하는지 여부에 대한 판단을 하여, 차량 인식의 정확성을 확인하므로, 차량 인식의 정확도가 더욱 향상될 수 있다. According to an embodiment of the present invention, since the vehicle type, vehicle brand, vehicle type, color, etc. are comprehensively recognized, and the accuracy of vehicle recognition is checked by determining whether information of the vehicle type and vehicle brand coincides with the vehicle recognition. accuracy can be further improved.

본 발명의 실시예에 따르면, 차량 번호 인식을 통한 소유주 확인 절차가 완료되었더라도, 차량 번호를 통해 확인되는 차량 특성과 카메라를 통해 확인되는 차량 특성 간의 일치 여부를 확인한 후, 일치하는 경우에만 직접적으로 세차 요금 결제를 요청하기 때문에, 결제 요청 전송 대상 특정을 정확하게 할 수 있다. According to an embodiment of the present invention, even if the procedure for verifying the owner through vehicle number recognition is completed, after checking whether the vehicle characteristics identified through the vehicle number and the vehicle characteristics identified through the camera match, only if they match, directly wash the car Since the payment is requested, it is possible to accurately specify the payment request transmission target.

본 발명의 실시예에 따르면, 차량 소유주의 사용자 단말기에 결제 요청이 전송되고, 사용자는 차량 내부에서 사용자 단말기를 통해 간편하게 결제를 하면 되기 때문에, 기계 세차 시스템에 진입하기 전 키오스크 등을 통한 세차 요금 결제에 소비되는 시간을 없앨 수 있게 된다.According to an embodiment of the present invention, a payment request is transmitted to the user terminal of the vehicle owner, and the user can simply make a payment through the user terminal inside the vehicle. time can be eliminated.

도 1은 본 발명의 일 실시예에 따른 차량 인식 기반 세차 요금 결제 시스템의 개략적인 구성을 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따른 차량 인식 및 세차 요금 결제를 수행하는 제어부의 세부 구성을 나타내는 블록도이다.
도 3 내지 도 7은 본 발명의 일 실시예에 따라 차량 이미지에 대한 전처리를 수행하는 과정을 설명하는 도면이다.
도 8은 본 발명의 일 실시예에 따른 차량 번호의 인식 결과를 나타내는 도면이다.
도 9는 본 발명의 일 실시예에 따른 차량 정보의 인식 과정을 설명하기 위한 도면이다.1 is a diagram illustrating a schematic configuration of a vehicle recognition-based car wash payment system according to an embodiment of the present invention.
2 is a block diagram illustrating a detailed configuration of a control unit that recognizes a vehicle and performs a car wash payment according to an embodiment of the present invention.
3 to 7 are diagrams for explaining a process of pre-processing a vehicle image according to an embodiment of the present invention.
8 is a view showing a result of recognition of a vehicle number according to an embodiment of the present invention.
9 is a view for explaining a process of recognizing vehicle information according to an embodiment of the present invention.

후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0012] DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0014] DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS [0016] Reference is made to the accompanying drawings, which show by way of illustration specific embodiments in which the present invention may be practiced. These embodiments are described in sufficient detail to enable those skilled in the art to practice the present invention. It should be understood that the various embodiments of the present invention are different but need not be mutually exclusive. For example, certain shapes, structures, and characteristics described herein with respect to one embodiment may be implemented in other embodiments without departing from the spirit and scope of the invention. In addition, it should be understood that the location or arrangement of individual components within each disclosed embodiment may be changed without departing from the spirit and scope of the present invention. Accordingly, the detailed description set forth below is not intended to be taken in a limiting sense, and the scope of the present invention, if properly described, is limited only by the appended claims, along with all scope equivalents to those claimed. Like reference numerals in the drawings refer to the same or similar functions throughout the various aspects.

이하에서는, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 바람직한 실시예들에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다. Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings in order to enable those of ordinary skill in the art to easily practice the present invention.

도 1은 본 발명의 일 실시예에 따른 차량 인식 기반 세차 요금 결제 시스템의 개략적인 구성을 나타내는 도면이다. 1 is a diagram illustrating a schematic configuration of a vehicle recognition-based car wash payment system according to an embodiment of the present invention.

도 1을 참조하면, 일 실시예에 따른 시스템은, 차량 진입로(100)의 적어도 일측에 배치되는 일 이상의 카메라(200), 차량 진입로(100)의 전방에 배치되는 세차 박스(300)를 포함하여 구성된다. Referring to FIG. 1 , the system according to an embodiment includes one or more cameras 200 disposed on at least one side of the vehicle access road 100 , and a car wash box 300 disposed in front of the vehicle access road 100 . is composed

차량 진입로(100)는 세차 박스(300)와 연결되며, 세차 대상 차량이 차량 진입로(100)를 통해 진입하여 세차 박스(300)에 들어서게 된다. 이 때, 차량 진입로(100)의 적어도 일측에 배치되는 일 이상의 카메라(200)는 해당 세차 대상 차량의 이미지를 획득한다.The vehicle access road 100 is connected to the car wash box 300 , and a vehicle to be washed enters through the vehicle access road 100 to enter the car wash box 300 . At this time, one or more cameras 200 disposed on at least one side of the vehicle access road 100 acquires an image of the corresponding car wash target vehicle.

일 이상의 카메라(200)는 바람직하게 차량 진입로(100)의 양측에 각각 배치될 수 있다. 양측에 각각 카메라(200)가 배치되기 때문에, 차종 검출, 차량 부위 검지 및 오염도 분석을 위해 차량의 모든 표면을 촬영할 수 있다. 각 카메라(200)는 모두 PTZ(Pan Tilt Zoom) 카메라로 구현될 수 있다. The one or more cameras 200 may preferably be respectively disposed on both sides of the vehicle access road 100 . Since the cameras 200 are disposed on both sides, it is possible to photograph all surfaces of the vehicle for vehicle model detection, vehicle part detection, and pollution level analysis. Each camera 200 may be implemented as a PTZ (Pan Tilt Zoom) camera.

카메라(200)에 의해 획득된 영상은 카메라(200) 자체적으로 또는 다른 제어부(미도시됨)에 의해 분석될 수 있다. 제어부가 구비되는 경우, 카메라(200)로부터 획득된 영상은 유선 또는 무선 통신을 이용하여 제어부로 전송될 수 있다. An image acquired by the camera 200 may be analyzed by the camera 200 itself or by another controller (not shown). When the controller is provided, the image obtained from the camera 200 may be transmitted to the controller using wired or wireless communication.

이하에서는, 카메라(200)로 획득된 영상에 대한 처리 방법에 대해 설명하기로 한다. Hereinafter, a processing method for an image acquired by the camera 200 will be described.

도 2는 카메라(200) 또는 카메라(200)에 의해 획득된 영상을 수신하는 제어부(400)의 내부 구성을 나타내는 도면이다. FIG. 2 is a diagram illustrating the internal configuration of the camera 200 or the controller 400 that receives an image acquired by the camera 200 .

설명의 편의를 위해, 제어부(400)의 내부 구성을 도 2에 도시하지만 동일한 구성이 카메라(200)의 내부에 포함될 수도 있다. For convenience of explanation, although the internal configuration of the controller 400 is illustrated in FIG. 2 , the same configuration may be included in the camera 200 .

도 2를 참조하면, 제어부(400)는 전처리부(410), 차량 번호 인식부(420), 차량 정보 분석부(430), 요금 결제 서비스 제공부(440)를 포함하여 구성될 수 있다. Referring to FIG. 2 , the control unit 400 may include a pre-processing unit 410 , a vehicle number recognition unit 420 , a vehicle information analysis unit 430 , and a payment service providing unit 440 .

전처리부(410), 차량 번호 인식부(420), 차량 정보 분석부(430), 요금 결제 서비스 제공부(440)는 외부 장치와 통신할 수 있는 프로그램 모듈 또는 하드웨어들일 수 있다. 이러한 프로그램 모듈 또는 하드웨어는 운영 시스템, 응용 프로그램 모듈 및 기타 프로그램 모듈의 형태로 카메라(200), 제어부(400) 또는 이와 통신 가능한 다른 장치에 포함될 수 있으며, 물리적으로는 여러 가지 공지의 기억 장치 상에 저장될 수 있다. 한편, 이러한 프로그램 모듈 또는 하드웨어들은 본 발명에 따라 후술할 특정 업무를 수행하거나 특정 추상 데이터 유형을 실행하는 루틴, 서브루틴, 프로그램, 오브젝트, 컴포넌트, 데이터 구조 등을 포괄하지만, 이에 제한되지는 않는다.The preprocessor 410 , the vehicle number recognition unit 420 , the vehicle information analysis unit 430 , and the payment service provider 440 may be program modules or hardware capable of communicating with an external device. These program modules or hardware may be included in the camera 200, the control unit 400, or other devices capable of communicating therewith in the form of an operating system, an application program module, and other program modules, and physically on various known storage devices. can be saved. Meanwhile, these program modules or hardware include, but are not limited to, routines, subroutines, programs, objects, components, data structures, etc. that perform specific tasks or execute specific abstract data types according to the present invention.

전처리부(410)는 카메라(200)에 의해 획득된 영상에 있어서 객체를 검출하는 기능 및 전처리 기능을 수행한다. 카메라(200)는 차량의 전면부, 후면부, 측면부에 대한 촬영 영상을 획득하게 되는데, 영상에 있어서 차량, 즉, 객체를 감지하는 기능을 수행한다. 일 실시예에 따르면, 카메라(200)는 차량 진입로(100)를 실시간으로 촬영하고 있는데, 차량이 존재하지 않는 경우의 이미지와 차량이 존재하는 경우의 이미지를 비교하고, 그 이미지에 대한 상호 차이를 분석함으로써 효과적으로 객체를 검출해낼 수 있다. The preprocessor 410 performs a function of detecting an object in an image acquired by the camera 200 and a preprocessing function. The camera 200 acquires a photographed image of the front part, the rear part, and the side part of the vehicle, and performs a function of detecting the vehicle, that is, an object in the image. According to an embodiment, the camera 200 is photographing the vehicle access road 100 in real time, and compares the image when the vehicle does not exist and the image when the vehicle exists, and determines the mutual difference between the images. An object can be detected effectively by analysis.

또한, 전처리부(410)는 영상에 대해 전처리 및 기울기 보정을 수행한다. 구체적으로, 영상 내의 밝기, 픽셀 정보 등을 분석하여 정확한 인식 및 검지를 위한 재처리 알고리즘을 수행한다. Also, the preprocessor 410 performs preprocessing and tilt correction on the image. Specifically, a reprocessing algorithm for accurate recognition and detection is performed by analyzing brightness and pixel information in an image.

도 3의 (a)는 영상 노출, 대비, 평균 픽셀값을 조절하는 일례를 나타내고, 도 3의 (b)는 노출, 대비, 침식, 팽창 전처리의 일례를 나타낸다. 또한, 도 4는 영상 흔들림 보정 과정을 적용하기 전과 후의 모습을 나타낸다. Fig. 3 (a) shows an example of adjusting image exposure, contrast, and average pixel values, and Fig. 3 (b) shows an example of exposure, contrast, erosion, and expansion pre-processing. Also, FIG. 4 shows the image before and after applying the image shake correction process.

한편, 전처리부(410)는 딥러닝 알고리즘을 활용하여 저해상도 이미지를 고해상도 이미지로 변환하는 기능을 수행한다. 실외 환경에서 획득되는 이미지의 경우 날씨, 먼지 등으로 인해 영상의 화질이 좋지 않은 경우가 많은데, CNN, GAN 등의 알고리즘을 활용한 슈퍼 레졸루션(Super Resolution)을 수행할 수 있다. 이는 여러 겹으로 쌓은 다층 네트워크를 사용하여 저해상도 입력과 고해상도 출력 간의 비선형적 관계를 정밀하게 분석하여 정확한 변환을 가능하게 하는 합성곱 필터 파라미터를 학습한다. 일 실시예에 따르면, EDSR(Enhanced Deep Residual Networks)을 적용하여 이미지를 고해상도화시킬 수 있으며, 도 5는 이의 일례를 나타낸다. Meanwhile, the preprocessor 410 performs a function of converting a low-resolution image into a high-resolution image by using a deep learning algorithm. In the case of images acquired in an outdoor environment, the image quality is often poor due to weather, dust, etc., but super resolution using algorithms such as CNN and GAN can be performed. It uses multi-layered networks to learn convolutional filter parameters that enable precise transformations by precisely analyzing the non-linear relationship between low-resolution inputs and high-resolution outputs. According to an embodiment, an image may be made high-resolution by applying Enhanced Deep Residual Networks (EDSR), and FIG. 5 shows an example thereof.

또한, 카메라(200)가 설치되는 곳의 지형 등에 따라 차량 번호판이 기울어져 촬영되는 경우가 생길 수 있는데, 이 경우 차량과 차량 번호 인식률이 크게 저하되는 문제점이 발생할 수 있다. 이를 방지하기 위해 전처리부(410)는 기울기 보정을 수행한다. In addition, depending on the topography of the place where the camera 200 is installed, there may be a case where the license plate is photographed with an inclination. To prevent this, the preprocessor 410 performs tilt correction.

구체적으로, 획득된 차량 전면 또는 후면 영상에 있어서, 차량 번호판에 대한 인식을 수행한다. 차량 번호판은 직사각형 형태이고, 그 내부에 숫자 및 글자가 새겨져 있는데, 기 저장되어 있는 차량 번호판에 대한 특징을 참조하여, 영상에 있어서 차량 번호판을 식별해 낼 수 있다. 또한, 딥러닝 알고리즘을 통해 차량 번호판 객체 인식을 수행할 수도 있다.Specifically, in the acquired vehicle front or rear image, recognition of the vehicle license plate is performed. The license plate has a rectangular shape, and numbers and letters are engraved therein. With reference to the previously stored characteristics of the license plate, the license plate can be identified from the image. In addition, vehicle license plate object recognition can be performed through a deep learning algorithm.

차량 번호판에 대한 객체 인식이 완료되면, 차량 번호판의 꼭지점을 도 6과 같이 검출해낸다. When the object recognition for the license plate is completed, the vertex of the license plate is detected as shown in FIG. 6 .

차량 번호판이 직사각형 형태이므로, 꼭지점은 4개가 검출되는데, 도 7에 도시되는 바와 같이, 영상 내에서 상대적으로 상부에 위치하는 꼭지점 2개를 지나는 직선이, 영상 내 가로 방향 직선과 평행해지도록 꼭지점 위치를 보정한다. 동일한 방식으로 영상 내에서 상대적으로 하부에 위치하는 꼭지점 2개를 지나는 직선이, 영상 내 가로 방향 직선과 평행해지도록 꼭지점 위치를 보정한다.Since the license plate has a rectangular shape, four vertices are detected. As shown in FIG. 7 , a straight line passing through two vertices located on a relatively upper portion in the image is parallel to the horizontal straight line in the image. to correct In the same manner, the vertex position is corrected so that a straight line passing through two vertices located relatively lower in the image becomes parallel to the horizontal straight line in the image.

차량 번호판 내에는 숫자 및 글자가 포함되는데, 해당 숫자 및 글자 각각의 가로 방향 길이와 세로 방향 길이의 비율이 기 설정된 범위에 속하도록 상기 꼭지점들의 위치를 보정해낼 수 있다. 예를 들어, 인식이 용이한 숫자의 가로 방향 길이 대 세로 방향 길이의 비율이 3:7의 경우, 꼭지점 보정 시, 차량 번호판 내의 숫자의 가로 방향 길이 대 세로 방향 길이의 비율이 3:7이 되도록 차량 번호판의 꼭지점 위치를 적절히 보정할 수 있다. The vehicle license plate includes numbers and letters, and the positions of the vertices may be corrected so that the ratio of the horizontal length to the vertical length of each of the numbers and letters falls within a preset range. For example, if the ratio of the horizontal length to the vertical length of a number that is easy to recognize is 3:7, when correcting the vertices, the ratio of the horizontal length to the vertical length of the number in the license plate is 3:7 It is possible to properly correct the position of the vertex of the license plate.

이러한 과정을 통해, 영상 내에서 기울기가 보정된 차량 번호판 이미지가 획득될 수 있게 된다. Through this process, it is possible to obtain a vehicle license plate image in which the inclination is corrected in the image.

다음으로, 차량 번호 인식부(420)는 전처리부(410)에 의해 전처리 완료된 영상에 있어서, 차량 번호판을 검지한 뒤, 검지된 번호판 영역을 중심으로 크롭(crop)을 수행한다. 그 후, 크롭된 번호판 내에서 딥러닝 모델을 통해 차량 번호에 대한 인식을 수행한다. 딥러닝 모델을 통한 숫자 및 글자 인식을 통한 차량 번호 인식 방법에 대한 상세한 설명은 생략하도록 한다. 도 8은 딥러닝 모델 기반 차량 번호 인식 결과를 나타내는 도면이다. Next, in the image pre-processed by the pre-processing unit 410, the vehicle number recognition unit 420 detects the vehicle license plate, and then performs cropping based on the detected license plate area. After that, recognition of the vehicle number is performed through a deep learning model within the cropped license plate. A detailed description of a vehicle number recognition method through number and letter recognition through a deep learning model will be omitted. 8 is a diagram illustrating a result of recognition of a vehicle number based on a deep learning model.

차량 정보 분석부(430)는 카메라(200)를 통해 획득된 이미지를 기반으로 차종, 색상, 제조사 등의 정보를 획득하는 기능을 수행한다. The vehicle information analysis unit 430 performs a function of acquiring information such as a vehicle model, color, and manufacturer based on an image obtained through the camera 200 .

구체적으로, 도 9에 도시되는 바와 같이 큰 크기의 객체로부터 작은 크기의 객체를 순차적으로 인식한다. 가장 큰 크기의 객체는 차량 전체 형태이고, 그 다음 크기의 객체는 차량의 엠블럼을 통해 인식되는 제조사이며, 그 다음은 차량 번호판의 색상이다. 가장 작은 크기의 객체는 차량 번호판 내부에 새겨져 있는 번호이다. 이러한 객체들의 인식은 딥러닝 모델을 통한 객체 검지 알고리즘에 의해 수행될 수 있다. Specifically, as shown in FIG. 9 , small-sized objects are sequentially recognized from large-sized objects. The object of the largest size is the overall shape of the vehicle, the object of the next size is the manufacturer recognized through the emblem of the vehicle, and then the color of the license plate. The smallest object is the number engraved inside the license plate. Recognition of these objects may be performed by an object detection algorithm through a deep learning model.

차량 형태 인식을 통해 1차적으로 해당 차종을 인식하게 되는데, 이는 딥러닝 기반 이미지 라벨링을 통해 수행될 수 있고, 또는, 해당 차종에 대한 특징점 정보를 기 저장된 다수 차량의 특징점 정보와 비교함으로써 수행될 수도 있다. The vehicle type is primarily recognized through vehicle shape recognition, which can be performed through deep learning-based image labeling, or by comparing the characteristic point information of the corresponding vehicle type with the characteristic point information of multiple vehicles stored in advance. have.

2차적으로, 차량의 엠블럼을 인식하여, 해당 차량의 제조사를 인식하게 된다. 이 또한, 딥러닝 기반 이미지 라벨링을 통해 수행될 수 있고, 또는, 당해 인식되는 엠블럼의 특징 정보를 기 저장된 다수 브랜드의 엠블럼 특징 정보와 비교함으로써 수행될 수도 있다. Second, by recognizing the emblem of the vehicle, the manufacturer of the vehicle is recognized. This may also be performed through deep learning-based image labeling, or by comparing the characteristic information of the recognized emblem with the previously stored emblem characteristic information of multiple brands.

1차적으로 해당 차종이 인식되었더라도, 오인식의 확률이 있을 수 있는데, 차종 인식 후 엠블럼을 통한 제조사 정보를 확인하여, 인식된 차종이 맞는지를 검증할 수 있다. 이에 따라, 차종 및 제조사 인식의 정확성이 향상될 수 있게 된다. Even if the relevant car model is primarily recognized, there may be a probability of misrecognition. Accordingly, the accuracy of vehicle model and manufacturer recognition can be improved.

차량 번호판 색상 인식을 통해서는, 해당 차량이 일반 내연 기관 차량인지, 전기차인지, 택시인지를 확인할 수 있게 된다.By recognizing the color of the license plate, it is possible to determine whether the vehicle is a general internal combustion engine vehicle, an electric vehicle, or a taxi.

본 발명의 실시예에 따르면, 차량 진입로(100, 도 1 참조)의 양측에 배치된 복수의 카메라(200)를 통해 획득된 영상을 통해 각각 차량 번호 인식 및 차량 정보 분석을 수행하고, 각 정보의 일치 여부를 검증한다. 2개의 카메라(200)를 통해 인식된 정보가 일치한다면 올바르게 인식한 것이므로, 정확도 높은 인식 정보로서 활용할 수 있게 된다. 이러한 과정을 거침으로써 영상 인식의 정확도가 향상될 수 있게 된다. 또한, 복수의 카메라(200)를 통해 획득되는 차량의 전면에 부착된 차량 번호판 및 후면에 부착된 차량 번호판에 대한 인식 결과를 비교하여, 일치하는 경우에만 해당 차량 번호를 올바른 인식 정보로서 이용하기 때문에, 차량 번호에 대한 인식 정확도가 더욱 향상될 수 있게 된다. According to an embodiment of the present invention, vehicle number recognition and vehicle information analysis are performed through images acquired through a plurality of cameras 200 disposed on both sides of the vehicle access road 100 (see FIG. 1 ), respectively, and the Check whether they match. If the information recognized through the two cameras 200 matches, it is correctly recognized, so it can be used as recognition information with high accuracy. Through this process, the accuracy of image recognition can be improved. In addition, by comparing the recognition results for the license plate attached to the front of the vehicle and the license plate attached to the rear of the vehicle obtained through the plurality of cameras 200, only when they match, the corresponding vehicle number is used as correct recognition information. , the recognition accuracy for the vehicle number can be further improved.

요금 결제 서비스 제공부(440)는 차량 번호 인식부(420) 및 차량 정보 분석부(430)를 통해 인식된 차량 정보를 기반으로, 해당 차량에 대한 소유주를 확인하고, 해당 소유주에게 세차 요금 결제를 위한 모듈을 제공한다. The fee payment service providing unit 440 checks the owner of the vehicle based on the vehicle information recognized through the vehicle number recognition unit 420 and the vehicle information analysis unit 430, and provides the vehicle washing fee payment to the corresponding owner. provides a module for

일 실시예에 따르면, 요금 결제 서비스 제공부(440)는 인식된 차량 번호를 기초로 해당 차량의 소유자 정보를 확인한다. 이는 인식된 차량 번호를 외부 서버(예를 들면, 국토교통부 서버 등)로 전송하고, 해당 차량 번호로 조회되는 차량 소유자 정보(이름, 생년월일, 전화번호 등)를 수신함으로써 수행될 수 있다. 차량 소유자 정보를 수신한 후에는, 해당 소유자의 사용자 단말기로 세차 요금에 대한 결제 요청을 전송할 수 있다. 이 때, 결제 모듈을 함께 전송할 수 있으며, 차량 소유자는 해당 결제 모듈을 이용하여 사용자 단말기를 통해 세차 요금에 대한 결제를 수행할 수 있다. According to an embodiment, the payment service providing unit 440 checks the owner information of the corresponding vehicle based on the recognized vehicle number. This may be performed by transmitting the recognized vehicle number to an external server (eg, a server of the Ministry of Land, Infrastructure and Transport, etc.) and receiving vehicle owner information (name, date of birth, phone number, etc.) inquired by the vehicle number. After receiving the vehicle owner information, a payment request for the car wash fee may be transmitted to the user terminal of the corresponding owner. In this case, the payment module may be transmitted together, and the vehicle owner may pay for the car wash fee through the user terminal using the corresponding payment module.

이를 위해, 사용자 단말기에는 상기 기능을 구현하기 위한 애플리케이션이 설치되어 있을 수 있으며, 사용자는 해당 애플리케이션을 통해 개인 정보 활용 동의를 사전에 수행할 수도 있다. To this end, an application for implementing the above function may be installed in the user terminal, and the user may perform personal information use consent in advance through the application.

다른 실시예에 따르면, 요금 결제 서비스 제공부(440)는 인식된 차량 번호를 외부 서버에 전송하여, 해당 차량의 차량 특성을 확인한다. 외부 서버에는 차량 번호와 해당 차량의 차종, 차량 형식, 연식, 최초등록일, 색상 등이 매칭 저장되어 있을 수 있는데, 당해 인식된 차량 번호를 전송하여 조회되는 차량 특성, 예를 들면, 차종, 차량 형식 또는 색상 등이 차량 정보 분석부(430)를 통해 인식된 차량 특성과 일치하는지 여부를 판단한다. According to another embodiment, the payment service providing unit 440 transmits the recognized vehicle number to the external server to check the vehicle characteristics of the corresponding vehicle. The vehicle number and the vehicle model, vehicle type, year, first registration date, color, etc. of the vehicle may be matched and stored in the external server. Alternatively, it is determined whether the color matches the vehicle characteristics recognized through the vehicle information analysis unit 430 .

차량 정보 분석부(430)를 통해 인식되는 차량 특성에는 차종, 차량 형식(내연기관 차량, 전기차, 택시 등), 색상 등이 포함되어 있을 수 있는데, 이들과 일치하는지 여부를 판단할 수 있다. The vehicle characteristics recognized by the vehicle information analysis unit 430 may include a vehicle type, a vehicle type (internal combustion engine vehicle, an electric vehicle, a taxi, etc.), a color, and the like, and it may be determined whether they match.

만약, 모든 정보가 일치한다면, 해당 차량 소유주를 조회하고, 사용자 단말기에 세차 요금에 대한 결제 요청을 전송할 수 있다. If all information matches, the vehicle owner may be inquired and a request for payment for the car wash fee may be transmitted to the user terminal.

또한, 일치하지 않는다면, 다음과 같은 동작을 수행할 수 있다. Also, if they do not match, the following operation can be performed.

먼저, 다음과 같은 수학식을 통해 차량 정보 분석부(430)를 통해 인식된 차량 특성과 차량 번호 전송을 통해 외부 서버로부터 조회된 차량 특성 간 정보의 유사도를 판단할 수 있다. First, it is possible to determine the similarity of information between the vehicle characteristics recognized through the vehicle information analysis unit 430 and the vehicle characteristics retrieved from the external server through vehicle number transmission through the following equation.

[수학식 1][Equation 1]

Figure 112022028223083-pat00001
Figure 112022028223083-pat00001

상기 수학식에서, P는 유사도 점수, A는 차종의 일치 여부에 따른 점수(일치하는 경우 1점, 불일치하는 경우 0점), B는 차량 형식의 일치 여부에 따른 점수(일치하는 경우 1점, 불일치하는 경우 0점), C는 색상의 일치 여부에 따른 점수(일치하는 경우 1점, 불일치하는 경우 0점)이며, α, β, γ는 가중치이다. α, β, γ는 정보의 중요도에 따라 차등적으로 적용된다. 차종의 일치 여부는 차량의 동일성을 판단하는 데에 가장 중요한 요소이므로, α 값은 제일 크게 적용하는 것이 바람직하다. α 값 다음으로는, β 값과 γ 값의 순서로, 즉, β>γ의 관계로 적용하는 것이 바람직하다. In the above formula, P is the similarity score, A is the score according to whether the vehicle type matches or not (1 point if they match, 0 points if they do not match), and B is the score according to whether the vehicle type matches or not (1 point if they match, inconsistency) 0 points), C is a score according to whether the colors match (1 point if they match, 0 points if they don't), and α, β, and γ are weights. α, β, and γ are differentially applied according to the importance of information. Since the matching of vehicle types is the most important factor in determining the identity of vehicles, it is desirable to apply the largest value of α. After the α value, it is preferable to apply in the order of the β value and the γ value, that is, in a relationship of β>γ.

상기 유사도 점수가 기 설정된 값 이상인 경우, 해당 차량 소유주의 사용자 단말기에 세차 요금 결제 요청을 전송한다. When the similarity score is equal to or greater than a preset value, a request for payment of a car wash fee is transmitted to the user terminal of the corresponding vehicle owner.

만약, 차종이 일치하지 않는다면, 오인식이 되었다는 것이므로, 차량 번호를 통해 조회되는 소유주의 사용자 단말기에 본인 차량이 현재 세차 대기 중인지 여부에 대한 확인을 요하는 메시지를 전송할 수 있다. 본인 차량이 현재 세차 대기 중인 차인 것으로 차량 소유주가 확인한 경우에는, 세차 요금에 대한 결제 요청을 전송하고, 그렇지 않은 경우에는, 결제가 이루어지지 않고, 해당 차량의 세차 요금은 종래의 방식대로 세차 관리자에 의해 결제가 이루어지거나, 키오스크를 통해 결제되어야 할 것이다. If the car model does not match, it means that it is misrecognized, and a message requesting confirmation of whether the vehicle is currently waiting for car wash may be transmitted to the user terminal of the owner inquired through the vehicle number. If the vehicle owner confirms that the vehicle is currently waiting to be washed, it sends a request for payment of the car wash fee. Payment must be made by the kiosk or payment must be made through a kiosk.

즉, 상기 유사도 점수가 기 설정된 값 미만인 경우, 차량 번호를 통해 조회되는 소유주의 사용자 단말기에 본인 차량이 현재 세차 대기 중인지 여부에 대한 확인을 요하는 메시지를 전송할 수 있다.That is, when the similarity score is less than a preset value, a message requesting confirmation of whether the vehicle is currently waiting for car wash may be transmitted to the user terminal of the owner inquired through the vehicle number.

본 발명의 실시예에 따르면, 차량 진입로의 양측에 배치된 복수의 카메라를 통해 인식된 차량 관련 정보를 비교하고, 일치하는 경우에만 올바르게 인식한 것으로 확인함으로써 기계 세차 시스템으로 진입하는 차량에 대한 인식 정확도를 향상시킬 수 있다. According to an embodiment of the present invention, by comparing vehicle-related information recognized through a plurality of cameras disposed on both sides of the vehicle access road, and confirming that the vehicle is correctly recognized only when they match, recognition accuracy for a vehicle entering the mechanical car wash system can improve

본 발명의 실시예에 따르면, 차종, 차량 브랜드, 차량 형식, 색상 등을 종합적으로 인식하고, 차종과 차량 브랜드의 정보가 일치하는지 여부에 대한 판단을 하여, 차량 인식의 정확성을 확인하므로, 차량 인식의 정확도가 더욱 향상될 수 있다. According to an embodiment of the present invention, since the vehicle type, vehicle brand, vehicle type, color, etc. are comprehensively recognized, and the accuracy of vehicle recognition is checked by determining whether information of the vehicle type and vehicle brand coincides with the vehicle recognition. accuracy can be further improved.

본 발명의 실시예에 따르면, 차량 번호 인식을 통한 소유주 확인 절차가 완료되었더라도, 차량 번호를 통해 확인되는 차량 특성과 카메라를 통해 확인되는 차량 특성 간의 일치 여부를 확인한 후, 일치하는 경우에만 직접적으로 세차 요금 결제를 요청하기 때문에, 결제 요청 전송 대상 특정을 정확하게 할 수 있다. According to an embodiment of the present invention, even if the procedure for verifying the owner through vehicle number recognition is completed, after checking whether the vehicle characteristics identified through the vehicle number and the vehicle characteristics identified through the camera match, only if they match, directly wash the car Since the payment is requested, it is possible to accurately specify the payment request transmission target.

본 발명의 실시예에 따르면, 차량 소유주의 사용자 단말기에 결제 요청이 전송되고, 사용자는 차량 내부에서 사용자 단말기를 통해 간편하게 결제를 하면 되기 때문에, 기계 세차 시스템에 진입하기 전 키오스크 등을 통한 세차 요금 결제에 소비되는 시간을 없앨 수 있게 된다. According to an embodiment of the present invention, a payment request is transmitted to the user terminal of the vehicle owner, and the user can simply make a payment through the user terminal inside the vehicle. time can be eliminated.

전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.The foregoing description of the present invention is for illustration, and those of ordinary skill in the art to which the present invention pertains can understand that it can be easily modified into other specific forms without changing the technical spirit or essential features of the present invention. will be. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not restrictive. For example, each component described as a single type may be implemented in a distributed manner, and likewise components described as distributed may also be implemented in a combined form.

본 발명의 범위는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.The scope of the present invention is indicated by the following claims, and all changes or modifications derived from the meaning and scope of the claims and their equivalents should be construed as being included in the scope of the present invention.

100: 차량 진입로
200: 카메라
300: 세차박스
400: 제어부
410: 전처리부
420: 차량 번호 인식부
430: 차량 정보 분석부
440: 요금 결제 서비스 제공부100: vehicle ramp
200: camera
300: car wash box
400: control unit
410: preprocessor
420: vehicle number recognition unit
430: vehicle information analysis unit
440: payment service provider

Claims (5)

(a) 세차 박스에 연결되는 차량 진입로의 적어도 일측에 배치되는 카메라가, 상기 차량 진입로에 진입하는 차량의 이미지를 획득하는 단계;
(b) 제어부가, 상기 이미지를 통해 차량 번호판을 인식하고, 인식된 차량 번호판 내에서 차량 번호를 인식하는 단계;
(c) 상기 제어부가, 상기 이미지를 통해 차량의 차종, 제조사, 차량 형식을 인식하는 단계; 및
(d) 상기 제어부가, 상기 차량 번호를 통해 조회되는 차량 소유주의 사용자 단말기에 세차 요금 결제 요청을 전송하는 단계를 포함하고,
상기 (d) 단계는,
다음의 수학식을 통해, 인식된 차량 특성과 상기 차량 번호를 통해 조회되는 차량 특성 간의 유사도를 판단하는 단계;
Figure 112022050841613-pat00011

(상기 수학식에서, P는 유사도 점수, A는 차종의 일치 여부에 따른 점수(일치하는 경우 1점, 불일치하는 경우 0점), B는 차량 형식의 일치 여부에 따른 점수(일치하는 경우 1점, 불일치하는 경우 0점), C는 색상의 일치 여부에 따른 점수(일치하는 경우 1점, 불일치하는 경우 0점)이며, α, β, γ는 가중치)
상기 유사도 점수가 기 설정된 값 이상인 경우에만, 상기 차량 소유주의 사용자 단말기에 세차 요금 결제 요청을 전송하며, 그렇지 않은 경우에는, 차량 번호를 통해 조회되는 소유주의 사용자 단말기에 본인 차량이 현재 세차 대기 중인지 여부에 대한 확인을 요하는 메시지를 전송하는 단계를 포함하는, 차량 인식 기반 세차 요금 결제 서비스 제공 방법. (a) acquiring, by a camera disposed on at least one side of a vehicle access road connected to a car wash box, an image of a vehicle entering the vehicle access road;
(b) the control unit, recognizing the vehicle license plate through the image, and recognizing the vehicle number in the recognized vehicle license plate;
(c) recognizing, by the controller, a vehicle model, a manufacturer, and a vehicle type of the vehicle through the image; and
(d) transmitting, by the control unit, a car wash payment request to a user terminal of a vehicle owner inquired through the vehicle number;
Step (d) is,
determining a similarity between the recognized vehicle characteristic and the vehicle characteristic inquired through the vehicle number through the following equation;
Figure 112022050841613-pat00011

(In the above formula, P is a similarity score, A is a score depending on whether the vehicle type matches or not (1 point if they match, 0 points if they do not match), B is a score based on whether the vehicle type matches (1 point if they match, 0 points for mismatch), C is for color matching (1 point for match, 0 point for mismatch), α, β, and γ are weights)
Only when the similarity score is equal to or greater than a preset value, a request for payment of a car wash fee is transmitted to the user terminal of the vehicle owner. A method of providing a vehicle recognition-based car wash fee payment service, comprising the step of transmitting a message requesting confirmation. 제1항에 있어서,
상기 (a) 단계 이후에,
상기 이미지에서 차량 번호판을 인식하는 단계;
상기 차량 번호판의 꼭지점을 인식하는 단계;
인식된 꼭지점 중 상대적으로 상부에 위치하는 꼭지점 2개를 지나는 직선 및 상대적으로 하부에 위치하는 꼭지점 2개를 지나는 직선이, 영상 내 가로 방향 직선과 평행해지도록 꼭지점 위치를 보정하는 단계를 포함하는, 차량 인식 기반 세차 요금 결제 서비스 제공 방법. According to claim 1,
After step (a),
recognizing the license plate from the image;
recognizing a vertex of the license plate;
Comprising the step of correcting the vertex position so that a straight line passing through two of the recognized vertices relatively upper and a straight line passing two relatively lower vertices are parallel to the horizontal straight line in the image, A method of providing a car wash fee payment service based on vehicle recognition. 삭제delete 제1항에 있어서,
상기 (b) 단계는,
상기 차량의 전면 번호판 및 후면 번호판을 인식한 이미지를 분석한 결과, 각각의 이미지를 통해 인식되는 차량 번호가 일치하는 경우에만, 올바른 인식 결과로서 도출하는, 차량 인식 기반 세차 요금 결제 서비스 제공 방법.According to claim 1,
Step (b) is,
As a result of analyzing the image that recognizes the front license plate and the rear license plate of the vehicle, only when the vehicle number recognized through each image matches, derived as a correct recognition result, vehicle recognition-based car wash fee payment service providing method. 세차 박스에 연결되는 차량 진입로의 적어도 일측에 배치되며, 상기 차량 진입로에 진입하는 차량의 이미지를 획득하는 일 이상의 카메라;
상기 이미지를 통해 차량 번호판을 인식하고, 인식된 차량 번호판 내에서 차량 번호를 인식하고, 상기 이미지를 통해 차량의 차종, 제조사, 차량 형식을 인식하며, 상기 차량 번호를 통해 조회되는 차량 소유주의 사용자 단말기에 세차 요금 결제 요청을 전송하는 제어부를 포함하고,
상기 제어부는,
다음의 수학식을 통해, 인식된 차량 특성과 상기 차량 번호를 통해 조회되는 차량 특성 간의 유사도를 판단하고,
Figure 112022050841613-pat00012

(상기 수학식에서, P는 유사도 점수, A는 차종의 일치 여부에 따른 점수(일치하는 경우 1점, 불일치하는 경우 0점), B는 차량 형식의 일치 여부에 따른 점수(일치하는 경우 1점, 불일치하는 경우 0점), C는 색상의 일치 여부에 따른 점수(일치하는 경우 1점, 불일치하는 경우 0점)이며, α, β, γ는 가중치)
상기 유사도 점수가 기 설정된 값 이상인 경우에만, 상기 차량 소유주의 사용자 단말기에 세차 요금 결제 요청을 전송하며, 그렇지 않은 경우에는, 차량 번호를 통해 조회되는 소유주의 사용자 단말기에 본인 차량이 현재 세차 대기 중인지 여부에 대한 확인을 요하는 메시지를 전송하는, 차량 인식 기반 세차 요금 결제 서비스 제공 시스템.one or more cameras disposed on at least one side of a vehicle access road connected to the car wash box, and acquiring an image of a vehicle entering the vehicle access road;
Recognizes the vehicle license plate through the image, recognizes the vehicle number in the recognized vehicle license plate, recognizes the vehicle model, manufacturer, and vehicle type of the vehicle through the image, and the vehicle owner's user terminal that is inquired through the vehicle number including a control unit that transmits a request for payment of a car wash to
The control unit is
Through the following equation, the degree of similarity between the recognized vehicle characteristics and the vehicle characteristics inquired through the vehicle number is determined,
Figure 112022050841613-pat00012

(In the above formula, P is a similarity score, A is a score depending on whether the vehicle type matches or not (1 point if they match, 0 points if they do not match), B is a score based on whether the vehicle type matches (1 point if they match, 0 points for mismatch), C is for color matching (1 point for match, 0 point for mismatch), α, β, and γ are weights)
Only when the similarity score is equal to or greater than a preset value, a request for payment of a car wash fee is transmitted to the user terminal of the vehicle owner. A system for providing a vehicle recognition-based car wash fee payment service that transmits a message requesting confirmation.
KR1020220032533A 2022-03-16 2022-03-16 Method and system for payment of car wash charge based on car identification KR102428930B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220032533A KR102428930B1 (en) 2022-03-16 2022-03-16 Method and system for payment of car wash charge based on car identification

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220032533A KR102428930B1 (en) 2022-03-16 2022-03-16 Method and system for payment of car wash charge based on car identification

Publications (1)

Publication Number Publication Date
KR102428930B1 true KR102428930B1 (en) 2022-08-02

Family

ID=82845509

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220032533A KR102428930B1 (en) 2022-03-16 2022-03-16 Method and system for payment of car wash charge based on car identification

Country Status (1)

Country Link
KR (1) KR102428930B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102586536B1 (en) * 2023-02-21 2023-10-12 주식회사 블릭 Car wash mobile payment system

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170014428A (en) * 2015-07-30 2017-02-08 디노플러스 (주) Information matching system between the vehicle and the mobile terminal for the toll payment
KR20190058863A (en) * 2017-11-22 2019-05-30 한국도로공사 License plate matching system by using learning algorithm and method thereof
KR102060599B1 (en) * 2019-01-10 2019-12-30 장석록 A Parking Control System
KR102121697B1 (en) * 2019-10-04 2020-06-10 문현구 Method and system for managing car wash

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170014428A (en) * 2015-07-30 2017-02-08 디노플러스 (주) Information matching system between the vehicle and the mobile terminal for the toll payment
KR20190058863A (en) * 2017-11-22 2019-05-30 한국도로공사 License plate matching system by using learning algorithm and method thereof
KR102060599B1 (en) * 2019-01-10 2019-12-30 장석록 A Parking Control System
KR102121697B1 (en) * 2019-10-04 2020-06-10 문현구 Method and system for managing car wash

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102586536B1 (en) * 2023-02-21 2023-10-12 주식회사 블릭 Car wash mobile payment system

Similar Documents

Publication Publication Date Title
KR102073971B1 (en) Vehicle enforcement system and method based on deep learning
US11508057B2 (en) Inspection system and method for vehicle underbody
CN108090747B (en) Self-service vehicle checking method, device, equipment and computer storage medium for vehicle insurance underwriting
CN108323209B (en) Information processing method, system, cloud processing device and computer storage medium
CN111311540A (en) Vehicle damage assessment method and device, computer equipment and storage medium
WO2020038138A1 (en) Sample labeling method and device, and damage category identification method and device
KR102269367B1 (en) Parking settlement system using vehicle feature points based on deep learning
KR102428930B1 (en) Method and system for payment of car wash charge based on car identification
KR101705061B1 (en) Extracting License Plate for Optical Character Recognition of Vehicle License Plate
CN113744535B (en) Dynamic coordinate synchronization method and device for RFID (radio frequency identification) tag and video inspection vehicle
CN116977328B (en) Image quality evaluation method in active vision of vehicle bottom robot
KR20230009598A (en) Vehicle license plate recognition and counterfeit determination method and system in which the method is performed
JP2021128796A (en) Object recognition system and object recognition method
KR20220067918A (en) Apparatus and Method for Face Authentication using Digital ID
EP3742330A1 (en) Automatic damage detection for cars
CN116110127A (en) Multi-linkage gas station cashing behavior recognition system
KR20200126743A (en) System and method for controlling access of vehicle
CN111179452A (en) ETC channel-based bus fee deduction system and method
CN110660000A (en) Data prediction method, device, equipment and computer readable storage medium
US20230342937A1 (en) Vehicle image analysis
CN112070913B (en) Ticket checking processing method based on Internet of things technology
KR102264266B1 (en) Crackdown system in disabled persons's parking area based on artificial intelligence picture reading for cracking down overall object of control
CN108876640A (en) A kind of loss assessment system of image recognition and maintenance program estimation based on artificial intelligence
CN113284349A (en) License plate recognition method and system
CN113327337A (en) Method for ensuring normal payment and departure of vehicle

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant