KR102005956B1 - Image recognition apparatus in the inside of vehicle - Google Patents

Image recognition apparatus in the inside of vehicle Download PDF

Info

Publication number
KR102005956B1
KR102005956B1 KR1020180031498A KR20180031498A KR102005956B1 KR 102005956 B1 KR102005956 B1 KR 102005956B1 KR 1020180031498 A KR1020180031498 A KR 1020180031498A KR 20180031498 A KR20180031498 A KR 20180031498A KR 102005956 B1 KR102005956 B1 KR 102005956B1
Authority
KR
South Korea
Prior art keywords
vehicle
image
module
camera
unit
Prior art date
Application number
KR1020180031498A
Other languages
Korean (ko)
Inventor
김대훈
Original Assignee
김대훈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김대훈 filed Critical 김대훈
Priority to KR1020180031498A priority Critical patent/KR102005956B1/en
Application granted granted Critical
Publication of KR102005956B1 publication Critical patent/KR102005956B1/en

Links

Images

Classifications

    • G06Q50/40—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/30—Transportation; Communications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G06K9/00832—
    • G06K9/4652—
    • G06K9/6201—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/56—Extraction of image or video features relating to colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/58—Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N5/2259—
    • H04N5/23203—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera

Abstract

The present invention relates to an apparatus for recognizing an image inside a vehicle, which comprises: a vehicle photographing unit for photographing the inside of a vehicle; an image analyzing unit for comparing a photographed image photographed by the vehicle photographing unit with a set image preset in the vehicle, and analyzing the same; a state evaluating unit for evaluating a use state of the vehicle in accordance with an analysis result of the image analyzing unit; and a state transmission unit for transmitting the photographed image photographed by the vehicle photographing unit and an evaluation result evaluated by the state evaluating unit, to a manager server.

Description

차량 내부 이미지 인식 장치{IMAGE RECOGNITION APPARATUS IN THE INSIDE OF VEHICLE}[0001] IMAGE RECOGNITION APPARATUS IN THE INSIDE OF VEHICLE [0002]

본 발명은 차량 내부 이미지 인식 장치에 관한 발명으로, 보다 상세하게는 차량 사용후 차량 내부를 촬영한 이미지와, 차량 사용전 차량 내부를 촬영한 이미지를 서로 비교하여 사용후 차량의 사용 상태를 평가할 수 있는 차량 내부 이미지 인식 장치에 관한 것이다.The present invention relates to an in-vehicle image recognition apparatus, and more particularly, to an in-vehicle image recognition apparatus, which can compare an image taken inside a vehicle after use of a vehicle with an image taken inside a vehicle before use of the vehicle, To a vehicle interior image recognition device.

렌터카 서비스는 렌터카 회사 또는 대여점이 이용 가능한 차량의 정보를 고객에게 제공하고, 렌터카를 이용하려는 고객은 렌터카 회사 또는 대여점에서 직접 제공되는 차량에 대하여 대여를 하고 비용을 지불하는 방식으로 이루어진다.The car rental service provides information to the car rental company or the car available to the rental store, and the customer who wants to use the rental car rents and pays the car directly provided at the rental car company or rental store.

종래에는 고객이 차량의 이용을 완료하여 차고지에 차량을 반납하는 경우, 차량 관리자가 사용후 차량의 내부를 직접 확인하여 차량 사용 상태를 평가함으로써 차량 사용 상태에 따라 세차 여부 및 유실물을 존재 여부를 확인해야 하는 번거로움이 있었다.Conventionally, when the customer completes the use of the vehicle and returns the vehicle to the garage, the vehicle manager directly checks the interior of the vehicle after use to evaluate the state of use of the vehicle. Thus, the presence or absence of the car wash There was a hassle to do.

또한, 렌터카 뿐만 아니라, 카쉐어링 사용시 모든 차고지에 담당직원이 없기때문에 차량 상태의 확인이 불가능한 문제가 있었다.In addition, there is a problem that it is impossible to confirm the state of the vehicle because there is no staff in charge at all the garages at the time of using the car sharing as well as the rental car.

본 출원인은 이러한 문제를 해결하기 위해, 사용후 차량의 사용 상태를 이미지 인식에 의해 자동 평가하여 차량 사용 상태에 따라 고객에게 할인혜택 및 패널티를 부과하고, 차량의 세차 등급을 선정하며, 차량 내 유실물을 확인하고, 차량 내부 파손에 대한 모니터링을 통해 고객과 업체의 분쟁을 최소화할 수 있는 차량 내부 이미지 인식 장치를 발명하였다.In order to solve such a problem, the present applicant has proposed a method of automatically evaluating the state of use of a vehicle after use by image recognition, imposing a discount benefit and a penalty on the customer according to the state of use of the vehicle, , And invented an in-vehicle image recognition device that minimizes the dispute between the customer and the company through monitoring of the damage inside the vehicle.

대한민국 등록특허공보 제10-1115944호(2012.02.13.)Korean Registered Patent No. 10-1115944 (Feb. 23, 2012)

본 발명은 차량 사용후 차량 내부를 촬영한 촬영 이미지와, 차량 사용전 차량 내부를 촬영한 설정 이미지를 서로 비교하여 사용후 차량의 사용 상태를 평가할 수 있는 차량 내부 이미지 인식 장치를 제공하는데 그 목적이 있다.An object of the present invention is to provide an in-vehicle image recognition device capable of comparing a captured image captured inside a vehicle after use of a vehicle with a set image captured inside the vehicle before use of the vehicle, have.

또한, 본 발명은 차량의 사용 상태에 따라 차량을 청결하게 사용한 고객에게 할인혜택을 제공할 수 있는 차량 내부 이미지 인식 장치를 제공하는데 그 목적이 있다.It is another object of the present invention to provide a vehicle interior image recognition apparatus capable of providing a discount benefit to a customer who uses the vehicle cleanly according to the state of use of the vehicle.

또한, 본 발명은 차량의 사용 상태에 따라 차량을 청결하게 사용하지 않은 고객에게 패널티를 부과하되, 청결도 등급제와 연계하여 청결 등급에 따라 패널티를 다양하게 부과할 수 있는 차량 내부 이미지 인식 장치를 제공하는데 그 목적이 있다.In addition, the present invention provides an in-vehicle image recognition apparatus that imposes a penalty on a customer who does not use the vehicle cleanly according to the state of use of the vehicle, but can apply various penalties according to the cleanliness degree in connection with the cleanliness rating system It has its purpose.

또한, 본 발명은 차량의 사용 상태에 따라 세차 등급을 선정하여 해당 등급에 따른 최적의 세차가 진행되도록 함으로써 세차 비용을 절감할 수 있는 차량 내부 이미지 인식 장치를 제공하는데 그 목적이 있다.It is another object of the present invention to provide an in-vehicle image recognition apparatus capable of selecting a car class according to the state of use of the vehicle and reducing the car wash cost by allowing optimal car wash according to the class to proceed.

또한, 본 발명은 사용후 차량에 유실물이 존재하는 경우 차량 관리자가 해당 유실물을 확인함으로써 고객에게 해당 유실물을 고지할 수 있는 차량 내부 이미지 인식 장치를 제공하는데 그 목적이 있다.Another object of the present invention is to provide an in-vehicle image recognition apparatus capable of notifying a customer of a lost item by checking the corresponding lost item in the event that the lost vehicle exists in the vehicle after use.

또한, 본 발명은 차량 사용전 설정 이미지, 차량 사용후 촬영 이미지 및 세차 및 내부 점검이 완료된 촬영 이미지를 서로 비교하여 사용후의 차량 상태를 확인할 수 있는 차량 내부 이미지 인식 장치를 제공하는데 그 목적이 있다.It is another object of the present invention to provide an in-vehicle image recognition device which can compare a set image before use of a vehicle, a taken image after using a vehicle, a washed image,

아울러, 본 발명은 차량 내부 파손에 대한 모니터링을 통해 고객과 업체의 분쟁을 최소화할 수 있고, 자율주행차가 상용화되어 공유카 문화가 더 활성화될 경우, 차량 내부 점검을 수시로 진행하여 세차, 분실물, 파손 등에 대한 모니터링에 대한 정보를 적극 활용할 수 있는 차량 내부 이미지 인식 장치를 제공하는데 그 목적이 있다.In addition, the present invention minimizes the dispute between the customer and the company through the monitoring of the damage inside the vehicle, and when the autonomous vehicle is commercialized and the shared car culture is further activated, the internal inspection of the vehicle is carried out from time to time, The present invention is directed to a vehicle interior image recognition apparatus capable of positively utilizing information on monitoring of a vehicle.

상기한 바와 같은 목적을 달성하기 위한 본 발명에 따른 차량 내부 이미지 인식 장치는 차량 내부를 촬영하는 차량 촬영부; 상기 차량 촬영부에서 촬영된 촬영 이미지와 상기 차량에 기설정된 설정 이미지를 서로 비교 분석하는 이미지 분석부; 상기 이미지 분석부의 분석 결과에 따라 상기 차량의 사용 상태를 평가하는 상태 평가부; 및 상기 차량 촬영부에서 촬영된 촬영 이미지와 상기 상태 평가부에서 평가된 평가 결과를 관리자 서버에 전송하는 상태 전송부를 포함하는 것을 특징으로 한다.According to an aspect of the present invention, there is provided an apparatus for recognizing an internal image of a vehicle, including: a vehicle photographing unit for photographing an interior of the vehicle; An image analyzer for comparing and analyzing a captured image photographed by the vehicle photographing unit and a preset image set in the vehicle; A state evaluating unit for evaluating a state of use of the vehicle according to an analysis result of the image analyzing unit; And a status transmission unit for transmitting the shot image photographed by the vehicle photographing unit and the evaluation result evaluated by the state evaluation unit to the manager server.

또한, 상기 차량 촬영부는, 상기 차량의 천장에 설치되는 레일을 포함하는 이동가이드부재; 및 상기 레일 상에 설치되어 해당 레일을 이동하면서 차량 내부를 촬영하는 카메라를 포함하고, 상기 카메라는, 차량에 기설치된 블랙 박스이거나, 차량에 별도로 장착된 카메라이거나, 깊이인식 센서일 수 있다.The vehicle photographing unit may further include: a movement guide member including a rail installed on a ceiling of the vehicle; And a camera installed on the rail and photographing the interior of the vehicle while moving the rail. The camera may be a black box installed in the vehicle, a camera separately installed in the vehicle, or a depth recognition sensor.

또한, 상기 차량 촬영부는, 상기 레일과 상기 카메라 사이에 설치되어 상기 카메라를 틸트 및 회전시켜 해당 카메라의 촬영 각도를 변경하는 틸트부재; 및 상기 카메라 및 틸트부재에 각각 연결되어 해당 카메라 및 틸트부재를 구동시키는 제어부재를 더 포함할 수 있다.The vehicle photographing unit may further include: a tilt member installed between the rail and the camera and tilting and rotating the camera to change the photographing angle of the camera; And a control member connected to the camera and the tilt member to drive the camera and the tilt member, respectively.

또한, 상기 차량 촬영부는, 상기 카메라에 설치되어 차량 내부의 조도 및 명암을 센싱하는 센싱부재를 더 포함하고, 상기 제어부재는 상기 센싱부재에서 센싱된 결과값에 따라 차량 내부에 설치된 조명을 제어할 수 있다.In addition, the vehicle photographing unit may further include a sensing member installed in the camera for sensing the illuminance and the lightness of the interior of the vehicle, and the control member may control illumination installed inside the vehicle according to a sensed result value from the sensing member .

또한, 상기 이미지 분석부는, 상기 설정 이미지를 저장하는 저장모듈; 상기 카메라에서 촬영된 촬영 이미지와 상기 저장모듈에 저장된 설정 이미지를 각각 입력받는 입력모듈; 상기 입력모듈에 입력된 촬영 이미지와 설정 이미지를 서로 비교하여 상기 촬영 이미지와 설정 이미지의 불일치 영역을 검색하는 비교모듈; 상기 비교모듈에서 검색된 불일치 영역에 따라 상기 촬영 이미지와 설정 이미지의 불일치율을 산출하는 산출모듈; 및 상기 산출모듈에서 산출된 불일치율을 출력하는 출력모듈을 포함할 수 있다.The image analysis unit may further include: a storage module for storing the setting image; An input module for receiving a captured image captured by the camera and a set image stored in the storage module, respectively; A comparison module for comparing the shot image and the set image input to the input module with each other to search for a mismatch area between the shot image and the set image; A calculation module for calculating a mismatch ratio between the photographed image and the set image according to the mismatch area searched by the comparison module; And an output module outputting the inconsistency rate calculated in the calculating module.

또한, 상기 비교모듈은, 상기 촬영 이미지와 설정 이미지의 색상을 서로 비교하여 상기 촬영 이미지의 전체 영역 중 색상 또는 깊이 차이가 발생된 영역을 상기 불일치 영역으로 검색할 수 있다.In addition, the comparison module may compare the colors of the photographed image and the set image to each other to search for the region where the color or depth difference has occurred in the entire region of the photographed image, as the mismatch region.

또한, 상기 산출모듈은, 상기 촬영 이미지의 전체 영역에서 상기 불일치 영역이 차지하는 비율로 상기 불일치율을 산출할 수 있다.The calculation module may calculate the mismatch ratio by a ratio occupied by the mismatch area in the entire area of the captured image.

또한, 상기 산출모듈은, 상기 촬영 이미지의 전체 영역에 표시되는 상기 불일치 영역의 개수로 상기 불일치율을 산출할 수 있다.The calculation module may calculate the mismatch rate by the number of mismatch areas displayed in the entire area of the captured image.

또한, 상기 산출모듈은, 상기 촬영 이미지의 전체 영역에 표시되는 상기 불일치 영역을 딥러닝에 의한 이미지 인식 기법을 포함하는 사물 인식 기법을 이용하여 상기 불일치율을 산출할 수 있다.In addition, the calculation module may calculate the discordance rate using an object recognition technique including an image recognition technique by deep-running the disparity area displayed in the entire area of the captured image.

또한, 상기 상태 평가부는, 상기 출력모듈에서 출력된 불일치율에 따라 상기 차량에 대한 고객의 사용 상태를 평가하는 고객 평가모듈; 및 상기 출력모듈에서 출력된 불일치율에 따라 상기 차량에 대한 세차 등급을 선정하는 세차 선정모듈을 포함할 수 있다.The condition evaluation unit may include a customer evaluation module that evaluates a customer's use state with respect to the vehicle according to the mismatch ratio output from the output module; And a car selection module for selecting a car grade for the vehicle according to the mismatch ratio output from the output module.

또한, 상기 고객 평가모듈은, 상기 출력모듈에서 출력된 불일치율이 기설정값 이하인 경우, 상기 고객에게 차량 사용에 대한 할인혜택을 제공하고, 상기 불일치율이 기설정값을 초과하는 경우, 패널티를 부과할 수 있다.The customer evaluation module may provide the customer with a discount for the use of the vehicle when the mismatch rate output from the output module is less than or equal to a predetermined value and if the mismatch rate exceeds the preset value, Can be imposed.

또한, 상기 세차 선정모듈은, 상기 촬영 이미지와 설정 이미지에 대한 불일치율 구간과, 각 구간에 매칭되는 세차 등급을 기선정한 후, 상기 출력모듈에서 출력된 불일치율이 속하는 구간과 매칭되는 세차 등급을 차량 관리자에게 제공할 수 있다.In addition, the car wash selection module selects a car wash grade corresponding to the section in which the discordance rate output from the output module belongs, after selecting the discordance rate section for the shot image and the set image and the car wash grade matched to each section, And can be provided to the vehicle manager.

또한, 상기 상태 평가부는, 상기 차량에서 분실된 유실물의 존재 여부를 확인시키는 유실물 확인모듈; 상기 유실물의 이미지가 다수 저장된 유실물 저장모듈; 및 상기 차량의 파손 여부를 확인시키는 파손 확인모듈을 더 포함하되, 상기 출력모듈은 상기 비교모듈에서 검색된 상기 촬영 이미지와 설정 이미지의 불일치 영역을 출력하고, 상기 유실물 확인모듈은 상기 출력모듈에서 출력된 불일치 영역이 상기 유실물 저장모듈에 저장된 유실물의 이미지와 매칭되는 경우, 상기 차량 관리자에게 상기 유실물의 존재 및 파손 여부를 확인시키며, 상기 파손 확인모듈은 상기 출력모듈에서 출력된 불일치 영역을 사물 인식 기법을 이용하여 차량의 여부를 판단할 수 있다.The state evaluation unit may include: a lost and found item checking module for checking whether a lost or stolen item is present in the vehicle; A lost-material storage module storing a plurality of images of the lost material; And a failure checking module for checking whether the vehicle is damaged. The output module outputs a mismatch area between the photographed image and the set image searched by the comparing module, And the damage confirmation module checks the mismatch area output from the output module by the object recognition technique if the mismatch area is matched with the image of the lost material stored in the lost material storage module, It is possible to determine whether or not the vehicle is used.

아울러, 상기 상태 전송부는, 상기 상태 평가부에서 상기 차량의 사용 상태를 평가하는 못하는 경우, 상기 차량 촬영부에서 촬영된 촬영 이미지만을 관리자 서버에 전송하여 차량 관리자가 직접 평가하도록 할 수 있다.In addition, when the state evaluating unit can not evaluate the state of use of the vehicle, the state transfer unit may transmit only the taken image photographed by the vehicle photographing unit to the manager server so that the vehicle manager can directly evaluate the state.

상기한 바와 같이 본 발명에 따른 차량 내부 이미지 인식 장치에 의하면, 차량 사용후 차량 내부를 촬영한 촬영 이미지와, 차량 사용전 차량 내부를 촬영한 설정 이미지, 예를 들면 세차 직후인 차량이 가장 청결한 시점에 차량 내부를 촬영한 설정 이미지를 서로 비교하여 사용후 차량의 사용 상태를 평가할 수 있는 효과가 있다.As described above, according to the in-vehicle image recognizing apparatus of the present invention, it is possible to provide an in-vehicle image recognizing apparatus and an in- There is an effect that the use state of the vehicle after the use can be evaluated by comparing the set images photographed inside the vehicle with each other.

또한, 본 발명은 차량의 사용 상태에 따라 차량을 청결하게 사용한 고객에게는 할인혜택을 제공하고, 차량을 청결하게 사용하지 않은 고객에게는 패널티를 부과하는 방식으로, 청결도 등급제와 연계하여 청결도 등급에 따른 점수를 제공하여 고객에게 해당 차량의 사용 청결도를 피드백함으로써 고객의 능동적인 청소 및 청결 유지를 가능하게 하는 효과가 있다.In addition, the present invention provides a discount benefit to customers who cleanly use the vehicle according to the use state of the vehicle, and a penalty is paid to the customers who do not use the vehicle cleanly. In accordance with the cleanliness rating system, Thereby providing the customer with the cleanliness of the vehicle to be used, thereby enabling the customer to be actively cleaned and kept clean.

또한, 본 발명은 차량의 사용 상태에 따라 세차 등급을 선정하여 해당 등급에 따른 최적의 세차가 진행되도록 함으로써 세차 비용을 절감할 수 있는 효과가 있다. 즉, 무조건적인 정기 세차 업체의 세차가 아니라 필요한 순간에만 세차를 진행하여 비용을 절감하고, 또한 많이 더럽지않은 경우 전문업체가 아닌 저렴한 비용의 비전문 세차인력, 예를 들면 아르바이트 인력을 이용하여 세차를 진행함으로써 비용을 절감할 수 있으며, 아울러, 더러운 차에 대한 상태를 다음 고객에게 인지시킨 후 스스로 청소하고 이용할 경우 할인해준다는 서비스 도입을 통해 비용을 절감할 수 있는 효과가 있다.Further, according to the present invention, the car wash cost can be reduced by selecting the car wash grade according to the use state of the vehicle and proceeding the optimum car wash according to the car grade. In other words, it is not an unconditional car wash, but it carries out car washing only at necessary moment, and if it is not so dirty, it carries out car wash using low-cost non-professional carpenters such as part-time manpower In addition, it is possible to reduce the cost by introducing a service that recognizes the status of the dirty car by the next customer and then cleans himself and discounts the car.

또한, 본 발명은 사용후 차량에 유실물이 존재하는 경우 차량 관리자가 해당 유실물을 확인함으로써 고객에게 해당 유실물을 고지할 수 있는 효과가 있다.In addition, the present invention has an effect that the vehicle manager can notify the customer of the lost item by checking the lost item when the lost vehicle exists in the vehicle after use.

또한, 본 발명은 차량 사용전 설정 이미지, 차량 사용후 촬영 이미지 및 세차 및 내부 점검이 완료된 촬영 이미지를 서로 비교하여 사용후의 차량 상태를 확인할 수 있고, 차량의 처음 상태와 시간이 지남에 따라 변화하는 상태의 변화를 통한 에이징 판단도 가능한 효과가 있다.Further, the present invention can compare the setting image before use of the vehicle, the image taken after the vehicle use, the car wash and the image taken after the internal inspection is completed to check the state of the vehicle after use, It is also possible to make aging judgment by changing the state.

아울러, 본 발명은 차량 내부 파손에 대한 모니터링을 통해 고객과 업체의 분쟁을 최소화할 수 있고, 자율주행차가 상용화되어 공유카 문화가 더 활성화될 경우, 차량 내부 점검을 수시로 진행하여 세차, 분실물, 파손 등에 대한 모니터링에 대한 정보를 적극 활용할 수 있는 효과가 있다.In addition, the present invention minimizes the dispute between the customer and the company through the monitoring of the damage inside the vehicle, and when the autonomous vehicle is commercialized and the shared car culture is further activated, the internal inspection of the vehicle is carried out from time to time, And the like can be effectively utilized.

도 1은 본 발명에 따른 차량 내부 이미지 인식 장치의 구성도이다.
도 2는 본 발명에 따른 차량 촬영부의 구성도이다.
도 3은 본 발명에 따른 차량 촬영부의 제 1실시도이다.
도 4는 본 발명에 따른 차량 촬영부의 제 2실시도이다.
도 5는 본 발명에 따른 이미지 분석부의 구성도이다.
도 6은 본 발명에 따른 비교모듈에서 비교하는 촬영 이미지와 설정 이미지의 제 1예시도이다.
도 7은 본 발명에 따른 비교모듈에서 비교하는 촬영 이미지와 설정 이미지의 제 2예시도이다.
도 8은 본 발명에 따른 상태 평가부의 구성도이다.1 is a configuration diagram of an in-vehicle image recognition apparatus according to the present invention.
2 is a configuration diagram of a vehicle photographing section according to the present invention.
3 is a first embodiment of a vehicle photographing unit according to the present invention.
4 is a second embodiment of a vehicle photographing section according to the present invention.
5 is a configuration diagram of an image analysis unit according to the present invention.
6 is a first exemplary view of a shot image and a set image to be compared in the comparison module according to the present invention.
7 is a second exemplary view of a shot image and a set image to be compared in the comparison module according to the present invention.
8 is a configuration diagram of a state evaluation unit according to the present invention.

이하, 첨부된 도면을 참조하여 본 발명의 실시 예를 상세히 설명한다. 우선, 도면들 중 동일한 구성요소 또는 부품들은 가능한 한 동일한 참조부호를 나타내고 있음에 유의해야 한다. 본 발명을 설명함에 있어서 관련된 공지기능 혹은 구성에 대한 구체적인 설명은 본 발명의 요지를 모호하게 하지 않기 위해 생략한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. First, it should be noted that the same components or parts among the drawings denote the same reference numerals whenever possible. In the following description of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted so as not to obscure the subject matter of the present invention.

도 1은 본 발명에 따른 차량 내부 이미지 인식 장치의 구성도이다.1 is a configuration diagram of an in-vehicle image recognition apparatus according to the present invention.

본 발명에 따른 차량 내부 이미지 인식 장치는 도 1에 도시된 바와 같이, 차량 촬영부(100), 이미지 분석부(200), 상태 평가부(300) 및 상태 전송부(400)를 포함한다.As shown in FIG. 1, an apparatus for recognizing an in-vehicle image according to the present invention includes a vehicle photographing unit 100, an image analyzing unit 200, a state evaluating unit 300, and a status transmitting unit 400.

본 발명은 차고지에 차량이 반납된 상태에서 해당 차량 내부에 고객이 없는 경우에 작동될 수 있다.The present invention can be operated when there is no customer inside the vehicle in a state that the vehicle is returned to the garage.

상기 차량 촬영부(100)는 고객의 차량 사용후 차량의 사용 상태를 확인하기 위해, 차량 내부를 촬영하여 차량 내부의 촬영 이미지를 생성할 수 있다.The vehicle photographing unit 100 may photograph the inside of the vehicle to generate a photographed image inside the vehicle, in order to check the use state of the vehicle after the customer uses the vehicle.

도 2는 본 발명에 따른 차량 촬영부의 구성도이다.2 is a configuration diagram of a vehicle photographing section according to the present invention.

구체적으로, 상기 차량 촬영부(100)는 도 2에 도시된 바와 같이, 이동가이드부재인 레일(110), 카메라(120), 틸트부재(130), 센싱부재(140) 및 제어부재(150)를 포함할 수 있다.2, the vehicle photographing unit 100 includes a rail 110, a camera 120, a tilt member 130, a sensing member 140, and a control member 150, which are movement guide members. . ≪ / RTI >

상기 레일(110)은 차량의 내부 천장에 설치될 수 있는데, 이러한 레일(110)은 차량의 길이방향을 따라 설치되어 후술하는 카메라(120)를 차량의 길이방향으로 이동시킬 수 있다.The rails 110 may be installed on the inner ceiling of the vehicle. The rails 110 may be installed along the longitudinal direction of the vehicle to move the camera 120, which will be described later, in the longitudinal direction of the vehicle.

여기서, 상기 레일(110)은 차량의 길이방향 뿐만 아니라 옆방향으로 설치되어 카메라(120)를 차량의 옆방향으로 이동시킬 수 있고, 또한 직선 형상이 아니라 곡선 형상으로 이루어짐으로써 카메라(120)를 곡선 레일을 통해 이동시킬 수 있다.Here, the rail 110 is installed not only in the longitudinal direction but also in the lateral direction of the vehicle, so that the camera 120 can be moved in the lateral direction of the vehicle. Further, the rail 110 is curved, Can be moved through the rail.

도 3은 본 발명에 따른 차량 촬영부의 제 1실시도이다.3 is a first embodiment of a vehicle photographing unit according to the present invention.

상기 카메라(120)는 도 3에 도시된 바와 같이, 레일(110) 상에 직접 설치되어 해당 레일을 따라 이동하며 차량 내부를 촬영함으로써 상기 촬영 이미지를 생성할 수 있다. 이때, 상기 레일(110)은 도 3에 도시된 바와 같이, 돌출될 수도 있고 천장 내부에 삽입될 수도 있다.As shown in FIG. 3, the camera 120 may be installed directly on the rail 110, move along the rail, and photograph the interior of the vehicle to generate the photographed image. At this time, the rail 110 may protrude as shown in FIG. 3 or be inserted into the ceiling.

구체적으로, 상기 카메라(120)는 차량에 기설치된 블랙 박스를 사용하거나, 또는 별도의 카메라를 차량에 장착하여 사용할 수 있는데, 이러한 카메라(120)는 차량의 길이방향 및 옆방향을 따라 이동하면서 차량 1열의 운전석 및 조수석, 차량 2열의 양 좌석을 순차적으로 촬영하여 해당 열에 매칭되는 촬영 이미지를 생성할 수 있다.Specifically, the camera 120 may use a black box installed in the vehicle, or a separate camera may be mounted on the vehicle. The camera 120 may be mounted on the vehicle 120 while moving along the longitudinal and lateral directions of the vehicle. A driver's seat and a passenger seat in one row, and both seats in two rows of the vehicle are sequentially photographed to generate a photographed image matched with the corresponding column.

또한, 상기 카메라(120)는 해당 차량이 예를 들어 3열이 존재하거나, 탑승 공간에 트렁크가 구비되는 차량인 경우, 차량 3열의 좌석 및 트렁크를 순차적으로 촬영하여 해당 공간과 매칭되는 촬영 이미지를 생성할 수 있다.When the vehicle is, for example, three rows or a trunk in the boarding space, the camera 120 sequentially photographs the seats and trunks of the three rows of the vehicle, Can be generated.

한편, 상기 카메라(120)는 차량 천장에 선루프가 있거나 다른 장치가 있는 경우 회피 설치된 레일(110)을 통해 이동할 수 있다.On the other hand, the camera 120 can be moved through the rail 110 installed on the ceiling if there is a sunroof in the vehicle ceiling or other devices.

도 4는 본 발명에 따른 차량 촬영부의 제 2실시도이다.4 is a second embodiment of a vehicle photographing section according to the present invention.

상기 틸트부재(130)는 도 4에 도시된 바와 같이, 레일(110)과 카메라(120) 사이에 설치되되, 레일 상에 직접 설치되어 해당 레일을 따라 이동함으로써 카메라(120)를 다양한 방향으로 이동 및 회전시킬 수 있다. 이때, 레일(110)은 일직선이 아닌 썬루프 장착 차량 또는 그 차량의 특성에 맞게 변화할 수 있는데, 이러한 레일(110)은 단순한 일직선의 형태가 아닌 곡선의 형태일 수 있으며 썬루프 장착된 차량과 같이 차량의 특성에 맞게 다양한 형태로 설치될 수 있다.4, the tilt member 130 is installed between the rail 110 and the camera 120. The tilt member 130 is installed directly on the rail and moves along the rail to move the camera 120 in various directions And rotate. At this time, the rail 110 may be changed according to characteristics of the sunroof mounted vehicle or the vehicle, not a straight line. Such a rail 110 may be a curved shape rather than a straight line, And can be installed in various forms in accordance with the characteristics of the vehicle.

구체적으로, 상기 틸트부재(130)는 레일 상의 특정 지점에서 카메라를 일정 각도로 틸트시킴으로써 해당 카메라의 촬영 각도를 변경시킬 수 있고, 이에 따라 카메라(120)가 다양한 각도에서 차량 내부를 촬영하도록 함으로써 차량 내부에 대한 다양한 촬영 이미지를 생성하도록 할 수 있다.Specifically, the tilt member 130 can change the photographing angle of the camera by tilting the camera at a specific angle on the rail at a certain angle, thereby allowing the camera 120 to photograph the inside of the vehicle at various angles, It is possible to generate various photographed images for the inside.

상기 센싱부재(140)는 카메라에 설치되어 차량 내부의 조도 및 명암을 포함하는 차량 내부 환경을 센싱할 수 있는데, 이러한 센싱부재(140)는 밝기를 센싱할 수 있는 다양한 센서로 이루어질 수 있고, 후술하는 바와 같이, 제어부재(150)에 연결되어 센싱한 결과값을 제어부재(150)에 전송할 수 있다.The sensing member 140 may be installed in the camera to sense the internal environment of the vehicle including the illuminance and contrast of the interior of the vehicle. The sensing member 140 may include various sensors capable of sensing brightness, The control member 150 may be connected to the control member 150 to transmit the sensing result to the control member 150. [

상기 제어부재(150)는 카메라 및 틸트부재에 각각 연결되어 해당 카메라 및 틸트부재를 각각 구동시킴으로써 상기 촬영 이미지를 생성하도록 할 수 있고, 특히, 제어부재(150)는 센싱부재(140) 및 차량 내부에 설치된 조명(미도시)에 각각 연결되어 센싱부재에서 센싱된 결과값에 따라 해당 조명을 제어할 수 있다.The control member 150 may be connected to the camera and the tilt member to drive the camera and the tilt member, respectively. In this case, the control member 150 may include a sensing member 140 and a vehicle interior (Not shown) provided in the illumination unit (not shown) to control the corresponding illumination according to the resultant value sensed by the sensing member.

구체적으로, 상기 제어부재(150)는 예를 들어, 차량 내부의 밝기에 대한 다양한 구간을 설정한 후, 상기 센싱부재(140)에서 센싱된 결과값이 특정 구간에 속하는 경우, 해당 구간과 매칭되는 밝기로 해당 조명을 제어함으로써 차량 내부의 밝기가 어두운 경우에도 자동적으로 차량 내부의 밝기를 조절하여 상기 촬영 이미지를 용이하게 생성하도록 할 수 있다.For example, when the sensed value of the sensing member 140 belongs to a specific section after setting various intervals of the brightness of the interior of the vehicle, the control member 150 may match the corresponding section It is possible to easily generate the photographed image by controlling the brightness of the inside of the vehicle automatically even when the brightness of the inside of the vehicle is low by controlling the lighting with the brightness.

또한, 상기 제어부재(150)는 카메라의 촬영 이미지 값 또는 카메라의 위치값을 각각 카메라로부터 전송받아 카메라의 정확한 위치를 파악하고, 해당 카메라를 레일을 따라 이동시킬 수 있다.In addition, the control member 150 can receive the photographed image value of the camera or the position value of the camera from the camera to grasp the exact position of the camera, and move the camera along the rail.

즉, 기설정된 위치로 이동하여 촬영을 하기 위해서 카메라를 레일을 따라 이동시켜주는 명령도 제어부재에서 하고, 또한 특정 위치를 촬영하기 위해 카메라를 기울이고 회전시켜주는 명령도 제어부재에서 할 수 있다.That is, a command for moving the camera along the rails in order to move to a predetermined position and take a photograph is also made in the control member, and a command for tilting and rotating the camera to photograph a specific position can also be performed in the control member.

이처럼, 상기 제어부재(150)는 카메라의 위치를 이동시킬 수 있고, 카메라의 기울기를 변화시킬 수 있으며, 조명을 변화시킬 수 있고, 카메라 회전을 통한 각도를 변화시킬 수 있다.Thus, the control member 150 can move the position of the camera, change the tilt of the camera, change the illumination, and change the angle through the rotation of the camera.

한편, 본원발명에서는 카메라를 이동시키는 방법으로, 모터 고정형의 경우 고정된 모터에서 끈 또는 체인과 같이 레일을 이동시키다가 카메라를 당겨서 이동시키는 방법이나, 이동형 모터의 경우 카메라와 모터가 하나의 모듈로 형성되어 직접 레일을 따라 이동시키는 방법을 사용할 수 있다.Meanwhile, in the present invention, a method of moving a camera is used. In the case of a motor fixed type, a method of moving a rail such as a string or a chain in a fixed motor and pulling the camera while moving the camera, And moving it along the rail directly can be used.

상기 이미지 분석부(200)는 차량 촬영부(100)에서 촬영된 촬영 이미지와 차량에 기설정된 설정 이미지를 서로 비교 및 분석하여 촬영 이미지와 설정 이미지의 불일치율을 산출할 수 있다.The image analyzing unit 200 may compare the captured image captured by the vehicle photographing unit 100 with the preset image set in the vehicle, and calculate the discordance rate between the captured image and the set image.

여기서, 설정 이미지는 차량 사용전 차량 내부를 촬영한 이미지로, 이러한 설정 이미지는 세차 직후 오염이 없는 상태의 차량 이미지가 설정될 수 있고, 후술바는 바와 같이, 이미지 분석부(200)에 포함된 저장모듈(250)에 기저장될 수 있다. Here, the set image is an image taken inside the vehicle before use of the vehicle. Such a set image may be set to a vehicle image in a state where there is no contamination right after the car was washed. As described later, May be stored in the storage module 250 in advance.

또한, 촬영 이미지는 카메라가 특정 위치에 정지하여 촬영한 정지 사진으로 이루어지거나, 카메라가 일정속도로 이동하며 촬영한 스테레오 이미지 또는 영상 이미지로 이루어질 수 있다.In addition, the photographed image may be a still image taken by the camera at a specific position, or may be a stereoscopic image or an image photographed while the camera moves at a constant speed.

도 5는 본 발명에 따른 이미지 분석부의 구성도이다.5 is a configuration diagram of an image analysis unit according to the present invention.

구체적으로, 상기 이미지 분석부(200)는 도 5에 도시된 바와 같이, 입력모듈(210), 비교모듈(220), 산출모듈(230), 출력모듈(240) 및 저장모듈(250)을 포함할 수 있다.5, the image analysis unit 200 includes an input module 210, a comparison module 220, a calculation module 230, an output module 240, and a storage module 250 can do.

상기 입력모듈(210)은 카메라(120) 및 저장모듈(250)에 각각 연결되어 카메라에서 촬영한 촬영 이미지와 저장모듈에 기저장된 설정 이미지를 각각 입력받을 수 있다.The input module 210 may be connected to the camera 120 and the storage module 250, respectively, and may receive a captured image captured by the camera and a set image previously stored in the storage module.

상기 비교모듈(220)은 입력모듈에 각각 입력된 촬영 이미지와 설정 이미지를 서로 비교 및 분석하여 촬영 이미지와 설정 이미지의 불일치 영역을 검색할 수 있다.The comparison module 220 may compare the captured image and the set image input to the input module with each other and analyze the captured image and the mismatch area between the captured image and the set image.

구체적으로, 상기 비교모듈(220)은 촬영 이미지와 설정 이미지의 색상을 서로 비교하여 촬영 이미지의 전체 영역 중 촬영 이미지와 설정 이미지의 색상 차이가 발생된 영역을 불일치 영역으로 검색할 수 있다.Specifically, the comparison module 220 may compare the colors of the photographed image and the set image with each other, thereby searching for a region in which the color difference between the photographed image and the set image is generated, as a mismatch area.

또한, 상기 비교모듈(220)은 불일치 정도, 사물 인식에 대한 정보를 참조하여 감지할 수 있는데, 예를 들면, 담배꽁초와 같이 작은 물체의 경우 불일치 정도는 적으나 사물인식을 통해 큰 패널티를 부과하거나 이물질 점수를 더 높게 하여 고객청결점수를 떨어트릴 수 있고, 나아가 라이다 센서, 적외선 센서와 같은 3d센서(깊이 인식센서)를 활용하여 이미지 내의 변화값을 인식하여 물체의 인식률을 높일 수 있다.In addition, the comparison module 220 can detect the inconsistency and the object recognition information. For example, in the case of a small object such as a cigarette butt, the degree of inconsistency is small, but a large penalty is imposed through object recognition Or the score of the foreign object can be made higher, and the recognition rate of the object can be increased by recognizing the change value in the image by utilizing the 3d sensor (depth recognition sensor) such as the Lada sensor and the infrared sensor.

도 6은 본 발명에 따른 비교모듈에서 비교하는 촬영 이미지와 설정 이미지의 제 1예시도이다.6 is a first exemplary view of a shot image and a set image to be compared in the comparison module according to the present invention.

상기 비교모듈(220)은 예를 들어, 도 6에 도시된 바와 같이, 차량 1열의 설정 이미지(a)와 촬영 이미지(b)를 서로 비교한 결과, 차량 1열의 센터페시아 부분 및 조수석에서 각각 색상 차이가 발생된 영역이 발견되는 경우, 해당 영역을 불일치 영역으로 검색할 수 있다.As shown in FIG. 6, for example, the comparison module 220 compares the setting image (a) of the first row of the vehicle with the shooting image (b) If a region in which a difference is found is found, the region can be searched as a mismatch region.

도 7은 본 발명에 따른 비교모듈에서 비교하는 촬영 이미지와 설정 이미지의 제 2예시도이다.7 is a second exemplary view of a shot image and a set image to be compared in the comparison module according to the present invention.

또한, 상기 비교모듈(220)은 예를 들어, 도 7에 도시된 바와 같이, 차량 2열의 설정 이미지(a)와 촬영 이미지(b)를 서로 비교한 결과, 차량 2열의 우측좌석 앞부분, 중앙좌석, 중앙좌석 앞부분 및 좌측좌석에서 각각 색상 차이가 발생된 영역이 발견되는 경우, 해당 영역을 불일치 영역으로 검색할 수 있다.7, the comparison module 220 compares the setting image (a) of the second row of the vehicle with the image of the image (b), and as a result, The central seat front portion, and the left seat portion, the corresponding region can be searched as a mismatch region.

즉, 상기 비교모듈(220)은 도 6 및 도 7에 도시된 바와 같이, 촬영 이미지의 특정 영역에 별도의 물건이 위치하는 경우 해당 영역을 색상 또는 깊이의 차이가 발생한 영역으로 판단하여 불일치 영역으로 검색할 수 있다.6 and 7, when a specific object is located in a specific area of the photographed image, the comparison module 220 determines the corresponding area as a region where a color or depth difference occurs, You can search.

한편, 상기 비교모듈(220)은 촬영 이미지의 특정 영역에 별도의 물건이 위치하지 않는 경우에도 해당 영역을 불일치 영역으로 검색하도록 프로그래밍될 수 있다.Meanwhile, the comparison module 220 can be programmed to search for a region of interest in a mismatched region even if a specific object is not located in a specific region of the photographed image.

구체적으로, 상기 비교모듈(220)은 도 6의 운전석 및 도 7의 우측좌석과 같이 별도의 물건이 위치하지 않는 경우에도, 예를 들어 해당 좌석 중 특정 영역이 이물질에 의한 얼룩으로 오염된 경우, 이러한 오염 영역을 색상 차이가 발생된 영역으로 판단하여 해당 영역을 불일치 영역으로 검색할 수 있다.6 and the right seat of FIG. 7, even when a separate object is not positioned, for example, when a specific area of the seat is contaminated with foreign matter, It is possible to determine such a contaminated area as an area in which a color difference has occurred and search the corresponding area as a non-matching area.

상기 산출모듈(230)은 비교모듈에서 검색된 불일치 영역에 따라 촬영 이미지와 설정 이미지의 불일치율을 산출할 수 있다.The calculation module 230 may calculate the mismatch ratio between the photographed image and the set image according to the mismatch area searched by the comparison module.

구체적으로, 상기 산출모듈(230)은 촬영 이미지의 전체 영역에서 불일치 영역이 차지하는 비율로 불일치율을 산출할 수 있는데, 이러한 불일치율은 촬영 이미지의 전체 면적과 불일치 영역의 합계 면적 간의 상대적인 면적 비율로 산출될 수 있다.Specifically, the calculation module 230 may calculate the mismatch ratio by the ratio of the mismatch area occupied by the entire area of the photographed image. The mismatch ratio may be a ratio of the total area of the photographed image to the total area of the mismatch area Can be calculated.

예를 들면, 촬영 이미지의 전체 면적을 100이라 가정했을 때, 불일치 영역의 합계 면적이 10인 경우, 이들 두 면적의 상대적인 면적 비율인 10%를 불일치율로 산출할 수 있다.For example, when the total area of the photographed image is assumed to be 100, when the total area of the inconsistent areas is 10, the relative area ratio of these two areas of 10% can be calculated as the inconsistency rate.

또한, 상기 산출모듈(230)은 촬영 이미지의 전체 영역에 표시되는 상기 불일치 영역의 개수로 불일치율을 산출할 수 있는데, 이는 불일치 영역의 개수가 증가함에 따라 불일치율이 증가한다는 가정하에 해당 불일치율을 산출하는 방법으로, 해당 원리와 다양한 변수 조건이 추가된 함수를 산출모듈에 적용함으로써 해당 불일치율을 산출할 수 있다.In addition, the calculation module 230 may calculate an inconsistency rate by the number of inconsistent areas displayed in the entire area of the photographed image. The inconsistency rate may be calculated based on the assumption that the inconsistency rate increases as the number of inconsistent areas increases , The inconsistency rate can be calculated by applying a function to which the principle and various variable conditions are added to the calculation module.

즉, 불일치 영역(범위), 불일치 정도(강도), 깊이 인식의 불일치 정도, 사물 인식을 통한 불일치 평가 결과를 이용하여 복합적으로 판별하여 불일치율에 대한 결과를 산출할 수 있는데, 예를 들어, 의자 위치 이동, 각도 변화, 안전 벨트 위치 변화, 사이드 바 위치 변화 등에 대해서는 이미지 학습로직을 이용하여 변화에 따른 불일치 판단시 포함시키지 않을 수 있고, 이외에도 다양한 방법으로 불일치에 대한 인식 방법을 적용할 수 있다.That is, the result of the discordance rate can be calculated by using the discordance area (range), the discordance degree (intensity), the discordance degree of depth recognition, and the discordance evaluation result through object recognition, Position shift, angle change, seatbelt position change, sidebar position change, etc., may not be included in the determination of inconsistency due to the change using the image learning logic. In addition, the inconsistency recognition method may be applied in various ways.

아울러, 상기 산출모듈(230)은 촬영 이미지의 전체 영역에서 불일치 영역이 차지하는 비율과, 상기 촬영 이미지의 전체 영역에 표시되는 상기 불일치 영역의 개수를 혼합 적용함으로써 상기 불일치율을 산출할 수도 있다.In addition, the calculation module 230 may calculate the mismatch rate by mixing the ratio of the mismatch area occupied by the entire area of the photographed image with the number of the mismatch areas displayed by the entire area of the photographed image.

상기 출력모듈(240)은 산출모듈에서 산출된 불일치율을 출력한 후, 후술하는 상태 평가부(300)로 해당 불일치율을 전송할 수 있다.The output module 240 may output the inconsistency rate calculated by the calculation module and then transmit the inconsistency rate to the state evaluator 300 described later.

또한, 상기 출력모듈(240)은 비교모듈에서 검색된 상기 촬영 이미지와 설정 이미지의 불일치 영역을 출력한 후, 후술하는 상태 평가부(300)로 해당 불일치율을 전송할 수 있다.In addition, the output module 240 may output a mismatch area between the photographed image and the set image searched by the comparison module, and then transmit the mismatch rate to the state evaluator 300, which will be described later.

상기 저장모듈(250)은 상기한 바와 같이, 차량에 기설정된 설정 이미지를 저장하여 해당 설정 이미지를 입력모듈(210)에 제공할 수 있다.As described above, the storage module 250 may store a predetermined setting image in the vehicle and provide the setting image to the input module 210. [

상기 상태 평가부(300)는 이미지 분석부(200)의 분석 결과에 따라 사용후 차량의 사용 상태를 평가할 수 있다.The state evaluation unit 300 may evaluate the state of use of the vehicle after use according to the analysis result of the image analysis unit 200. [

도 8은 본 발명에 따른 상태 평가부의 구성도이다.8 is a configuration diagram of a state evaluation unit according to the present invention.

구체적으로, 상기 상태 평가부(300)는 도 8에 도시된 바와 같이, 고객 평가모듈(310), 세차 선정모듈(320), 유실물 확인모듈(330), 유실물 저장모듈(340) 및 파손 확인모듈(350)을 포함할 수 있다.8, the state evaluating unit 300 includes a customer evaluation module 310, a car wash selection module 320, a lost and found item confirmation module 330, a lost and stolen item storage module 340, (350).

상기 고객 평가모듈(310)은 출력모듈(240)에 연결되어 해당 출력모듈에서 출력된 불일치율에 따라 차량에 대한 고객의 사용 상태를 평가할 수 있다.The customer evaluation module 310 is connected to the output module 240 and can evaluate the customer's use state of the vehicle according to the mismatch ratio output from the output module 240.

구체적으로, 상기 고객 평가모듈(310)은 출력모듈에서 출력된 불일치율이 기설정값 이하인 경우, 해당 고객에게 차량 사용에 대한 할인혜택을 제공할 수 있는데, 점수 제공과 같은 제도를 통해 사용의 청결도를 피드백할 수 있게 함으로써 고객의 능동적인 청소 및 청결 유지를 가능하게 할 수 있다.Specifically, the customer evaluation module 310 can provide discounts for vehicle use to the customer when the mismatch ratio output from the output module is less than a predetermined value. So that it is possible to actively clean and maintain cleanliness of the customer.

예를 들어, 상기 고객 평가모듈(310)은 할인혜택을 제공하기 위한 기준 설정값으로 불일치율을 5%로 설정할 수 있는데, 해당 경우 출력모듈에서 출력된 불일치율이 5% 이하인 경우 고객의 사용 상태를 "좋음" 으로 평가하여 차량 사용비용을 할인할 수 있다. 이때, 고객에 대한 할인율은 불일치율이 감소함에 따라 증가될 수 있다.For example, the customer evaluation module 310 may set the mismatch rate to 5% as a reference set value for providing discount benefits. If the mismatch rate output from the output module is 5% or less, Can be evaluated as "good" and the cost of using the vehicle can be discounted. At this time, the discount rate for the customer can be increased as the inconsistency rate decreases.

이에 반해, 상기 고객 평가모듈(310)은 해당 불일치율이 5% 를 초과하는 경우 고객의 사용 상태를 "나쁨" 으로 평가하여 차량 사용비용을 할인하지 않을 수 있고, 특히, 해당 불일치율이 10% 이상으로 매우 청결하지 않은 경우, 촬영 이미지인 사진을 근거로 하면서 추가 요금을 청구할 수 있다. 이때, 불일치율과 더불어 예를 들면, 흙먼지 -5, 음식물 -10, 담배꽁초 -20 과 같이, 사물인식을 통한 사용자의 청결도도 같이 평가할 수 있다.On the other hand, the customer evaluation module 310 may not discount the vehicle use cost by evaluating the use state of the customer as "bad " when the inconsistency rate exceeds 5% If it is not very clean, you can charge an additional fee on the basis of the photographic image. At this time, in addition to the inconsistency rate, for example, the cleanliness of the user through object recognition, such as dust-5, food-10, and cigarette butt-20, can be evaluated at the same time.

상기 세차 선정모듈(320)은 출력모듈(240)에 연결되어 해당 출력모듈에서 출력된 불일치율에 따라 차량에 대한 세차 등급을 선정할 수 있다.The car wash selection module 320 may be connected to the output module 240 to select the car grade for the vehicle according to the mismatch ratio output from the output module 240.

구체적으로, 상기 세차 선정모듈(320)은 촬영 이미지와 설정 이미지에 대한 다양한 불일치율 구간과, 각 구간에 매칭되는 세차 등급을 각각 선정할 수 있는데, 이러한 세차 선정모듈(320)은 출력모듈에서 출력된 불일치율이 다양한 불일치율 구간 중 특정 구간에 속하는 경우, 해당 구간과 매칭되는 세차 등급을 차량 관리자에게 제공함으로써 차량 관리자로 하여금 세차 비용을 절감하기 위해 해당 등급에 따른 최적의 세차를 진행하도록 할 수 있고, 또는 다음 사용자에게 알려 직접 치울 경우 할인을 해주는 시스템을 이용하여 세차 비용을 절감할 수 있다.Specifically, the car wash selection module 320 may select various inconsistency rate intervals for the photographed image and the set image, and a car wash grade matched to each section. If the inconsistency rate belongs to a specific section among the various inconsistency rate sections, it is possible to provide the vehicle manager with a car class that matches the section, thereby allowing the car manager to carry out the optimal car wash according to the grade to reduce the car wash cost Or if the next user is informed, a discounted system can be used to reduce car wash costs.

상기 유실물 확인모듈(330)은 차량에서 분실된 유실물의 존재 여부를 차량 관리자에게 확인시킬 수 있다.The lost material confirmation module 330 can confirm to the vehicle manager whether or not the lost object is lost in the vehicle.

구체적으로, 상기 유실물 확인모듈(330)은 출력모듈(240)에서 출력된 촬영 이미지와 설정 이미지의 불일치 영역이 유실물 저장모듈(340)에 저장된 유실물의 이미지와 매칭되는 경우, 차량 관리자에게 유실물의 존재 여부를 확인하도록 함으로써 해당 유실물이 차량에 존재하는 경우 고객에게 해당 유실물을 고지하도록 할 수 있고, 또는 사물 인식, 예를 들면 딥러닝을 통한 이미지인식을 통하여 책, 반지, 휴대폰 등 쓰레기가 아니라고 판단되는 물건이 존재하는 경우 이를 유실물로 판단하여 고지할 수 있다.Specifically, when the discrepancy area between the photographed image and the set image output from the output module 240 is matched with the image of the lost item stored in the lost image storage module 340, The user can notify the customer of the lost item if the lost item is present in the vehicle, or the user can judge whether the lost item is a garbage such as a book, a ring, or a mobile phone by recognizing the image through object recognition, for example, If an object exists, it can be judged to be a lost item and notified.

즉, 상기 유실물 확인모듈(330)은 상기 불일치 영역과 상기 유실물 저장모듈(340)에 저장된 유실물의 매칭율이 기설정된 매칭율 이상인 경우, 차량에 유실물이 존재할 가능성이 높은 것으로 판단하여 유실물의 존재 여부를 차량 관리자에게 확인시킬 수 있는데, 여기서, 유실물의 존재 여부를 확인시키기 위한 상기 매칭율은 차량 관리자에 의해 다양하게 변경될 수 있다.That is, if the matching rate of the mismatch area and the lost article stored in the lost article storage module 340 is equal to or greater than a predetermined matching rate, the lost article confirmation module 330 determines that there is a high possibility that the lost article exists in the vehicle, To the vehicle manager. Here, the matching rate for confirming the presence or absence of the lost item may be variously changed by the vehicle manager.

상기 파손 확인모듈(350)은 차량의 파손 여부를 차량 관리자에게 확인시킬 수 있다.The damage confirmation module 350 can confirm to the vehicle manager whether the vehicle is damaged or not.

구체적으로, 상기 파손 확인모듈(350)은 출력모듈(240)에서 출력된 촬영 이미지와 설정 이미지의 불일치 영역을 사물 인식을 통하여 차량이 파손되었는지 여부를 판단함으로써 차량 관리자에게 고지할 수 있다.Specifically, the damage confirmation module 350 may notify the vehicle manager of whether the vehicle is damaged through object recognition by detecting a mismatch area between the shot image and the set image output from the output module 240.

한편, 상기 상태 전송부(400)는 상기 차량 촬영부(100)에서 촬영된 촬영 이미지와 상기 상태 평가부(300)에서 평가된 평가 결과를 관리자 서버에 전송함으로써 관리자 서버를 운영하는 차량 관리자에게 해당 촬영 이미지와 평가 결과를 제공할 수 있다.Meanwhile, the status transferring unit 400 transmits a shot image photographed by the vehicle photographing unit 100 and an evaluation result evaluated by the state evaluating unit 300 to the manager server, And can provide shot images and evaluation results.

또한, 상기 상태 전송부(400)는 상기 상태 평가부(300) 자체적으로 평가가 어려운 경우 상기 차량 촬영부(100)에서 촬영된 촬영 이미지를 관리자 서버에 전송함으로써 차량 관리자가 직접 평가하도록 할 수 있다.In addition, when the status evaluation unit 300 itself is difficult to evaluate, the status transmission unit 400 may transmit the shot image taken by the vehicle image pickup unit 100 to the manager server so that the vehicle manager can directly evaluate the image .

상기한 바와 같이 본 발명에 따르면 차량 사용후 차량 내부를 촬영한 촬영 이미지와, 차량 사용전 차량 내부를 촬영한 설정 이미지 또는 세차 후 촬영한 기준 이미지를 서로 비교하여 사용후 차량의 사용 상태를 평가함으로써, 차량을 청결하게 사용한 고객에게 사용 청결도 점수화와 같은 제도를 통해 사용의 청결도를 피드백하여 할인혜택을 제공할 수 있고, 또한 차량의 사용 상태에 따라 세차 등급을 선정하여 해당 등급에 따른 최적의 세차가 진행되도록 함으로써 세차 비용을 절감하고 고객만족도를 높일 수 있으며, 또한 사용후 차량에 유실물이 존재하는 경우 차량 관리자가 해당 유실물을 확인함으로써 고객에게 해당 유실물을 고지하도록 할 수 있고, 아울러, 차량 내부 파손에 대한 모니터링을 통해 고객과 업체의 분쟁을 최소화할 수 있으며, 자율주행차가 상용화되어 공유카 문화가 더 활성화될 경우, 차량 내부 점검을 수시로 진행하여 세차, 분실물, 파손 등에 대한 모니터링에 대한 정보를 적극 활용할 수 있다.As described above, according to the present invention, by comparing the photographed image photographed inside the vehicle after use of the vehicle with the set image photographed inside the vehicle before use of the vehicle or the reference image photographed after the car wash, , It is possible to provide the discount benefit by feeding back the cleanliness of the use through the system such as the use cleanliness score to the customer who uses the cleanliness of the vehicle and by selecting the car grade according to the use state of the vehicle, It is possible to reduce the car wash cost and increase the customer satisfaction. Also, when there is a lost item in the vehicle after use, the vehicle manager can identify the lost item by notifying the customer of the lost item. In addition, We can minimize disputes between customers and companies through monitoring, If you come yulju commercialized shared car culture has become more active, you can take advantage of positive information on the monitoring of progress from time to time to check the inside of the car wash, Lost, damage or the like.

이상과 같이 본 발명에 따른 차량 내부 이미지 인식 장치를 예시한 도면을 참조로 하여 설명하였으나, 본 명세서에 개시된 실시예와 도면에 의해 본 발명이 한정되는 것은 아니며, 본 발명의 기술사상 범위 내에서 당업자에 의해 다양한 변형이 이루어질 수 있음은 물론이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, It will be understood that various modifications may be made by those skilled in the art.

100:차량 촬영부 110:레일
120:카메라 130:틸트부재
140:센싱부재 150:제어부재
200:이미지 분석부 210:입력모듈
220:비교모듈 230:산출모듈
240:출력모듈 250:저장모듈
300:상태 평가부 310:고객 평가모듈
320:세차 선정모듈 330:유실물 확인모듈
340:유실물 저장모듈 350:파손 확인모듈
400:상태 전송부100: vehicle photographing unit 110: rail
120: camera 130: tilt member
140: sensing member 150: control member
200: image analysis unit 210: input module
220: comparison module 230: calculation module
240: output module 250: storage module
300: status evaluation unit 310: customer evaluation module
320: Car wash selection module 330: Lost & Found module
340: Lost and Found Storage Module 350: Failure Verification Module
400:

Claims (14)

차량 내부를 촬영하는 차량 촬영부;
상기 차량 촬영부에서 촬영된 촬영 이미지와 상기 차량에 기설정된 설정 이미지를 서로 비교 분석하는 이미지 분석부;
상기 이미지 분석부의 분석 결과에 따라 상기 차량의 사용 상태를 평가하는 상태 평가부; 및
상기 차량 촬영부에서 촬영된 촬영 이미지와 상기 상태 평가부에서 평가된 평가 결과를 관리자 서버에 전송하는 상태 전송부를 포함하고,
상기 차량 촬영부는,
상기 차량의 천장에 설치되는 레일을 포함하는 이동가이드부재; 및 상기 레일 상에 설치되어 상기 레일을 이동하면서 상기 차량의 내부를 촬영하는 카메라를 포함하고,
상기 이미지 분석부는,
상기 설정 이미지를 저장하는 저장모듈; 상기 카메라에서 촬영된 촬영 이미지와 상기 저장모듈에 저장된 설정 이미지를 각각 입력 받는 입력모듈; 상기 입력모듈에 입력된 촬영 이미지와 설정 이미지를 서로 비교하여 상기 촬영 이미지와 설정 이미지의 불일치 영역을 검색하는 비교모듈; 상기 비교모듈에서 검색된 불일치 영역에 따라 상기 촬영 이미지와 설정 이미지의 불일치율을 산출하는 산출모듈; 및 상기 산출모듈에서 산출된 불일치율을 출력하는 출력모듈을 포함하고,
상기 상태 평가부는,
상기 출력모듈에서 출력된 불일치율에 따라 상기 차량에 대한 고객의 사용 상태를 평가하는 고객 평가모듈; 및 상기 출력모듈에서 출력된 불일치율에 따라 상기 차량에 대한 세차 등급을 선정하는 세차 선정모듈을 포함하는 것을 특징으로 하는 차량 내부 이미지 인식 장치.
A vehicle photographing section photographing the interior of the vehicle;
An image analyzer for comparing and analyzing a captured image photographed by the vehicle photographing unit and a preset image set in the vehicle;
A state evaluating unit for evaluating a state of use of the vehicle according to an analysis result of the image analyzing unit; And
And a status transmission unit for transmitting the shot image photographed by the vehicle photographing unit and the evaluation result evaluated by the state evaluation unit to the manager server,
The vehicle photographing unit
A moving guide member including a rail installed on a ceiling of the vehicle; And a camera installed on the rail and photographing the inside of the vehicle while moving the rail,
The image analysis unit may include:
A storage module for storing the setting image; An input module for receiving a captured image captured by the camera and a set image stored in the storage module, respectively; A comparison module for comparing the shot image and the set image input to the input module with each other to search for a mismatch area between the shot image and the set image; A calculation module for calculating a mismatch ratio between the photographed image and the set image according to the mismatch area searched by the comparison module; And an output module outputting the inconsistency rate calculated in the calculating module,
The state evaluating unit may include:
A customer evaluation module for evaluating a customer's use state of the vehicle according to a mismatch ratio output from the output module; And a car selection module for selecting a car grade for the vehicle according to a mismatch ratio output from the output module.
제 1항에 있어서,
상기 카메라는,
차량에 기설치된 블랙 박스이거나, 차량에 별도로 장착된 카메라이거나, 깊이인식 센서인 것을 특징으로 하는 차량 내부 이미지 인식 장치.
The method according to claim 1,
The camera comprises:
A black box installed in the vehicle, a camera separately mounted on the vehicle, or a depth recognition sensor.
제 1항에 있어서,
상기 차량 촬영부는,
상기 레일과 상기 카메라 사이에 설치되어 상기 카메라를 틸트 및 회전시켜 해당 카메라의 촬영 각도를 변경하는 틸트부재; 및
상기 카메라 및 틸트부재에 각각 연결되어 해당 카메라 및 틸트부재를 구동시키는 제어부재를 더 포함하는 것을 특징으로 하는 차량 내부 이미지 인식 장치.
The method according to claim 1,
The vehicle photographing unit
A tilt member installed between the rail and the camera for tilting and rotating the camera to change an angle of the camera; And
Further comprising a control member connected to the camera and the tilt member to drive the camera and the tilt member, respectively.
제 3항에 있어서,
상기 차량 촬영부는,
상기 카메라에 설치되어 차량 내부의 조도 및 명암을 센싱하는 센싱부재를 더 포함하고,
상기 제어부재는 상기 센싱부재에서 센싱된 결과값에 따라 차량 내부에 설치된 조명을 제어하는 것을 특징으로 하는 차량 내부 이미지 인식 장치.
The method of claim 3,
The vehicle photographing unit
Further comprising: a sensing member installed in the camera for sensing illuminance and contrast within the vehicle,
Wherein the control member controls the illumination installed inside the vehicle according to a result of sensing by the sensing member.
삭제delete 제 1항에 있어서,
상기 비교모듈은,
상기 촬영 이미지와 설정 이미지의 색상을 서로 비교하여 상기 촬영 이미지의 전체 영역 중 색상 또는 깊이 차이가 발생된 영역을 상기 불일치 영역으로 검색하는 것을 특징으로 하는 차량 내부 이미지 인식 장치.
The method according to claim 1,
Wherein the comparison module comprises:
Wherein the color matching unit compares the color of the shot image with the color of the set image to search for an area where color or depth difference has occurred in the entire area of the shot image as the unmatch area.
제 6항에 있어서,
상기 산출모듈은,
상기 촬영 이미지의 전체 영역에서 상기 불일치 영역이 차지하는 비율로 상기 불일치율을 산출하는 것을 특징으로 하는 차량 내부 이미지 인식 장치.
The method according to claim 6,
Wherein the calculation module comprises:
And calculates the incoincidence rate by a ratio occupied by the inconsistency area in the entire area of the photographed image.
제 6항에 있어서,
상기 산출모듈은,
상기 촬영 이미지의 전체 영역에 표시되는 상기 불일치 영역의 개수로 상기 불일치율을 산출하는 것을 특징으로 하는 차량 내부 이미지 인식 장치.
The method according to claim 6,
Wherein the calculation module comprises:
And calculates the incoincidence rate by the number of the inconsistent areas displayed in the entire area of the photographed image.
제 6항에 있어서,
상기 산출모듈은,
상기 촬영 이미지의 전체 영역에 표시되는 상기 불일치 영역을 딥러닝에 의한 이미지 인식 기법을 포함하는 사물 인식 기법을 이용하여 상기 불일치율을 산출하는 것을 특징으로 하는 차량 내부 이미지 인식 장치.
The method according to claim 6,
Wherein the calculation module comprises:
Wherein the inconsistency rate is calculated using an object recognition technique including an image recognition technique by deep-running the disparity area displayed in the entire area of the captured image.
삭제delete 제 1항에 있어서,
상기 고객 평가모듈은,
상기 출력모듈에서 출력된 불일치율이 기설정값 이하인 경우, 상기 고객에게 차량 사용에 대한 할인혜택을 제공하고,
상기 불일치율이 기설정값을 초과하는 경우, 패널티를 부과하는 것을 특징으로 하는 차량 내부 이미지 인식 장치.
The method according to claim 1,
The customer evaluation module,
Providing a discount benefit for vehicle use to the customer when the mismatch rate output from the output module is less than a predetermined value,
And imposes a penalty when the inconsistency rate exceeds the preset value.
제 11항에 있어서,
상기 세차 선정모듈은,
상기 촬영 이미지와 설정 이미지에 대한 불일치율 구간과, 각 구간에 매칭되는 세차 등급을 기선정한 후,
상기 출력모듈에서 출력된 불일치율이 속하는 구간과 매칭되는 세차 등급을 차량 관리자에게 제공하는 것을 특징으로 하는 차량 내부 이미지 인식 장치.
12. The method of claim 11,
The car wash selection module,
A mismatch rate section for the shot image and a set image, and a car class to match each section,
Wherein the vehicle classifier provides the vehicle class manager with a class of car that matches an interval to which the discordance rate that is output from the output module belongs.
제 12항에 있어서,
상기 상태 평가부는,
상기 차량에서 분실된 유실물의 존재 여부를 확인시키는 유실물 확인모듈;
상기 유실물의 이미지가 다수 저장된 유실물 저장모듈; 및
상기 차량의 파손 여부를 확인시키는 파손 확인모듈을 더 포함하되,
상기 출력모듈은 상기 비교모듈에서 검색된 상기 촬영 이미지와 설정 이미지의 불일치 영역을 출력하고,
상기 유실물 확인모듈은 상기 출력모듈에서 출력된 불일치 영역이 상기 유실물 저장모듈에 저장된 유실물의 이미지와 매칭되는 경우, 상기 차량 관리자에게 상기 유실물의 존재 및 파손 여부를 확인시키며,
상기 파손 확인모듈은 상기 출력모듈에서 출력된 불일치 영역을 사물 인식 기법을 이용하여 차량의 여부를 판단하는 것을 특징으로 하는 차량 내부 이미지 인식 장치.
13. The method of claim 12,
The state evaluating unit may include:
A lost material confirmation module for confirming whether the lost vehicle is present in the vehicle;
A lost-material storage module storing a plurality of images of the lost material; And
Further comprising a damage check module for checking whether the vehicle is damaged,
Wherein the output module outputs a mismatch area between the photographed image and the set image retrieved from the comparison module,
Wherein the lossy confirmation module checks the presence or absence of the lossy material to the vehicle manager when the mismatch area output from the output module matches an image of the lost material stored in the lost material storage module,
Wherein the damage confirmation module uses the object recognition technique to determine whether the vehicle is in the mismatch area output from the output module.
제 13항에 있어서,
상기 상태 전송부는,
상기 상태 평가부에서 상기 차량의 사용 상태를 평가하는 못하는 경우,
상기 차량 촬영부에서 촬영된 촬영 이미지만을 관리자 서버에 전송하여 차량 관리자가 직접 평가하도록 할 수 있는 것을 특징으로 하는 차량 내부 이미지 인식 장치.
14. The method of claim 13,
Wherein the status transmission unit comprises:
When the state evaluation unit fails to evaluate the use state of the vehicle,
Wherein only the captured image photographed by the vehicle photographing section is transmitted to the manager server so that the vehicle manager can directly evaluate the photographed image.
KR1020180031498A 2018-03-19 2018-03-19 Image recognition apparatus in the inside of vehicle KR102005956B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180031498A KR102005956B1 (en) 2018-03-19 2018-03-19 Image recognition apparatus in the inside of vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180031498A KR102005956B1 (en) 2018-03-19 2018-03-19 Image recognition apparatus in the inside of vehicle

Publications (1)

Publication Number Publication Date
KR102005956B1 true KR102005956B1 (en) 2019-07-31

Family

ID=67473956

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180031498A KR102005956B1 (en) 2018-03-19 2018-03-19 Image recognition apparatus in the inside of vehicle

Country Status (1)

Country Link
KR (1) KR102005956B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102331177B1 (en) * 2021-08-05 2021-12-01 티오더 주식회사 method and system for ordering and serving through tablet provided in store
CN113920576A (en) * 2020-07-07 2022-01-11 奥迪股份公司 Method, device, equipment and storage medium for identifying object loss behavior of personnel on vehicle
US11334985B2 (en) 2019-10-25 2022-05-17 Robert Bosch Gmbh System and method for shared vehicle cleanliness detection

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100058180A (en) * 2008-11-24 2010-06-03 주식회사 유디코 System and method for detecting disaster occurrence
KR101115944B1 (en) 2004-09-06 2012-02-13 바이에리셰 모토렌 베르케 악티엔게젤샤프트 Device for the detection of an object on a vehicle seat
JP2012069022A (en) * 2010-09-27 2012-04-05 Hitachi Ltd Monitoring system
KR20160043435A (en) * 2014-10-13 2016-04-21 엘지전자 주식회사 Apparatus for providing under vehicle image and vehicle including the same
KR101789690B1 (en) * 2017-07-11 2017-10-25 (주)블루비스 System and method for providing security service based on deep learning

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101115944B1 (en) 2004-09-06 2012-02-13 바이에리셰 모토렌 베르케 악티엔게젤샤프트 Device for the detection of an object on a vehicle seat
KR20100058180A (en) * 2008-11-24 2010-06-03 주식회사 유디코 System and method for detecting disaster occurrence
JP2012069022A (en) * 2010-09-27 2012-04-05 Hitachi Ltd Monitoring system
KR20160043435A (en) * 2014-10-13 2016-04-21 엘지전자 주식회사 Apparatus for providing under vehicle image and vehicle including the same
KR101789690B1 (en) * 2017-07-11 2017-10-25 (주)블루비스 System and method for providing security service based on deep learning

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11334985B2 (en) 2019-10-25 2022-05-17 Robert Bosch Gmbh System and method for shared vehicle cleanliness detection
CN113920576A (en) * 2020-07-07 2022-01-11 奥迪股份公司 Method, device, equipment and storage medium for identifying object loss behavior of personnel on vehicle
KR102331177B1 (en) * 2021-08-05 2021-12-01 티오더 주식회사 method and system for ordering and serving through tablet provided in store
KR20230021553A (en) * 2021-08-05 2023-02-14 티오더 주식회사 system for receiving orders through terminals in the store
KR102510066B1 (en) 2021-08-05 2023-03-15 티오더 주식회사 system for receiving orders through terminals in the store

Similar Documents

Publication Publication Date Title
KR102005956B1 (en) Image recognition apparatus in the inside of vehicle
US10521977B2 (en) Methods and systems for integrated vehicle sensor calibration and maintenance
CN103164708B (en) Determine the pixel classifications threshold value of vehicle carrying detection
CN107209082B (en) Tactical Mobile monitoring system
US10415297B2 (en) Assistance device for loading a motor vehicle
CN103287339A (en) Parking assistance system
KR20140118361A (en) System for Total Parking Control Solution
FR3046977A1 (en) METHOD AND SYSTEM FOR DETERMINING DATA FOR DRIVER-FREE DRIVING OF A VEHICLE
KR102477061B1 (en) Apparatus and method for monitoring vehicle in parking lot
US20210034888A1 (en) Method and System for Vision-Based Vehicle Interior Environment Sensing Guided by Vehicle Prior Information
CN105992999A (en) Assembly module
CN108337476A (en) Video camera and washer injection diagnosis
US20200258208A1 (en) Machine learning assisted image analysis
JP2020500391A (en) Method and system for detecting raised objects present in a parking lot
WO2014061793A1 (en) Vehicle window detection system, vehicle window detection method and device, program, and recording medium
JP7362792B2 (en) Damage detection device and method
EP0847030A2 (en) A method and device for automatically detecting and counting bodies passing through a gap
CN108394372A (en) The method of seat occupancy for identification
US11361559B2 (en) System and method for cargo management in a motor vehicle
CN110316156B (en) Method and processing device for detecting the cleaning necessity of a vehicle interior
CN115002416A (en) Vehicle movement detection method and terminal in vehicle washing process
KR102340720B1 (en) Vehicle management system
KR20200059749A (en) System for managing inside of vehicle
WO2008071601A1 (en) Method and device for detecting bodies on the trajectory of an opening and vehicle provided with said device
EP4070231A1 (en) Vehicle imaging station

Legal Events

Date Code Title Description
GRNT Written decision to grant