KR20220014681A - 자동차 및 그를 위한 실내 청결 관리 방법 - Google Patents

자동차 및 그를 위한 실내 청결 관리 방법 Download PDF

Info

Publication number
KR20220014681A
KR20220014681A KR1020200094603A KR20200094603A KR20220014681A KR 20220014681 A KR20220014681 A KR 20220014681A KR 1020200094603 A KR1020200094603 A KR 1020200094603A KR 20200094603 A KR20200094603 A KR 20200094603A KR 20220014681 A KR20220014681 A KR 20220014681A
Authority
KR
South Korea
Prior art keywords
guide information
indoor
cleaning
vehicle
response
Prior art date
Application number
KR1020200094603A
Other languages
English (en)
Inventor
우승현
박민재
아나스타샤 야리지나
Original Assignee
현대자동차주식회사
기아 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사, 기아 주식회사 filed Critical 현대자동차주식회사
Priority to KR1020200094603A priority Critical patent/KR20220014681A/ko
Priority to US17/110,933 priority patent/US11270570B2/en
Priority to CN202011604503.1A priority patent/CN114092921A/zh
Publication of KR20220014681A publication Critical patent/KR20220014681A/ko

Links

Images

Classifications

    • G06Q50/30—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/40—Business processes related to the transportation industry
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18—Status alarms
    • G08B21/24—Reminder alarms, e.g. anti-loss alarms
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N21/88—Investigating the presence of flaws or contamination
    • G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06K9/6267—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207—Discounts or incentives, e.g. coupons or rebates
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0283—Price estimation or determination
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/24—Character recognition characterised by the processing or recognition method
    • G06V30/248—Character recognition characterised by the processing or recognition method involving plural approaches, e.g. verification by template match; Resolving confusion among similar patterns, e.g. "O" versus "Q"
    • G06V30/2552—Combination of methods, e.g. classifiers, working on different input data, e.g. sensor fusion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N21/88—Investigating the presence of flaws or contamination
    • G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Signal Processing (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Emergency Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Chemical & Material Sciences (AREA)
  • Tourism & Hospitality (AREA)
  • Immunology (AREA)
  • Biochemistry (AREA)
  • Analytical Chemistry (AREA)
  • Pathology (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Primary Health Care (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Traffic Control Systems (AREA)
  • Operations Research (AREA)

Abstract

본 발명은 실내 오염 물질을 감지하고 다음 차량 이용자를 고려한 조치를 취할 수 있는 자동차 및 그를 위한 실내 청결 관리 방법에 관한 것이다. 본 발명의 일 실시예에 따른 차량용 실내 청결 관리 방법은, 적어도 카메라를 포함하는 감지부를 통해 실내 오염을 감지하는 단계; 탑승이 예정된 적어도 하나의 사용자에 대한 정보를 포함하는 다음 사용자 정보를 수신하는 단계; 상기 실내 오염의 감지 결과와 상기 다음 사용자 정보를 기반으로 적어도 하나의 유해물질을 판단하는 단계; 및 상기 판단된 적어도 하나의 유해물질에 대한 정보를 외부로 전송하는 단계를 포함할 수 있다.

Description

자동차 및 그를 위한 실내 청결 관리 방법{VEHICLE AND METHOD OF MANAGING IN-CAR CLEANLINESS FOR THE SAME}
본 발명은 차량 이용 종류 후 실내 오염 물질이나 유실물을 감지하면, 그에 따른 조치를 취할 수 있는 자동차 및 그를 위한 실내 청결 관리 방법에 관한 것이다.
차량은 이동 중 노면 환경 변화나 가감속에 의해 내부 물체에 관성이 작용하기 쉽다. 따라서, 오염을 발생시킬 수 있는 음식물 등이 쉽게 쏟아져 시트나 매트 등이 오염되기도 한다. 실내 오염이 발생할 경우 차량이 기존의 소유의 대상으로 인식되는 상황 하에서는 차량 소유자의 의지에 따라 청결 유지 여부가 크게 문제되지 않았다. 그러나, 최근 비용 부담과 효율성 관점에서 차량은 소유의 개념에서 공유의 개념이 점점 확정되고, 카 셰어링을 기반으로 하는 서비스 시장이 크게 성장할 것으로 예측되면서 실내 청결도 문제가 대두되고 있다.
즉, 카 셰어링 서비스에서는 하나의 차량을 불특정 다수가 이용하게 되면서 차량 소유자 대비 주인 의식이 약해지는 측면이 있어 사용시 실내 오염에 대한 주의가 부족해지는 경향이 있다. 그에 따라 차량 이용을 마치는 시점에서 사용 중 발생한 오염을 제거하지 않고 반납하는 경우가 빈번히 발생할 수 있으며, 다음 사용자는 실내 환경이 오염된 상태로 차량을 인도받아 사용하게 되어 서비스 불만족의 원인이 된다.
그러나, 일반적인 카 셰어링 서비스에서는 차량 내부 위생 상태를 판단하는 기능을 제공하지 않고 있으며, 사용자들은 이용하고자 하는 차량의 위생 상태를 알 수 없다.
본 발명은 보다 효과적으로 실내 오염 및 유실물 존재 여부를 감지하고, 그에 따른 조치를 취할 수 있는 자동차 및 그를 위한 실내 청결 관리 방법을 제공하기 위한 것이다.
본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
상기와 같은 기술적 과제를 해결하기 위하여, 본 발명의 일 실시예에 따른 차량용 실내 청결 관리 방법은, 적어도 카메라를 포함하는 감지부를 통해 실내 상태를 감지하는 단계; 상기 감지 결과, 유실물 및 오염물 중 적어도 하나의 감지 여부에 따라 유실물에 대응되는 제1 안내 정보 및 오염물에 대응되는 제2 안내 정보 중 적어도 하나를 생성하는 단계; 및 상기 생성된 적어도 하나의 안내 정보를 외부로 전송하는 단계를 포함할 수 있다.
또한, 본 발명의 일 실시예에 따른 차량용 실내 청결 관리 장치는, 적어도 카메라를 포함하는 감지부; 통신부; 및 상기 감지부를 통해 획득된 정보를 기반으로 실내 상태를 감지하고, 상기 감지 결과 유실물 및 오염물 중 적어도 하나의 감지 여부에 따라 유실물에 대응되는 제1 안내 정보 및 오염물에 대응되는 제2 안내 정보 중 적어도 하나를 생성하며, 상기 생성된 적어도 하나의 안내 정보가 상기 통신부를 통해 외부로 전송되도록 제어하는 제어부를 포함할 수 있다.
상기와 같이 구성되는 본 발명의 적어도 하나의 실시예에 관련된 자동차는 셰어링 서비스 사용이 종료된 차량에 대하여 다양한 방식으로 실내 오염이나 유실물의 존재 여부를 판단하고 적절한 조치를 취할 수 있다.
특히, 본 발명은 실내 오염이나 유실물 감지시 이전 사용자에게 조치를 취하도록 관련 정보를 소정 형태로 제공할 수 있으며, 다음 사용자에게는 미리 실내 청결 상태를 알려줄 수 있다.
본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 실시예들에 적용될 수 있는 차량용 청결 관리 장치 구조의 일례를 나타낸다.
도 2는 본 발명의 일 실시예에 따른 실내 청결 관리 과정의 일례를 나타내는 순서도이다.
도 3a은 도 2의 실내 상태 감지 단계가 수행되는 과정의 일례를 나타내는 순서도이다.
도 3b는 도 2의 정보 처리 단계가 수행되는 과정의 일례를 나타낸다.
도 3c는 도 2의 안내 출력 단계가 수행되는 과정의 일례를 나타낸다.
도 4는 본 발명의 일 실시예에 따른 영상 기반 오브젝트 감지가 수행되는 형태의 일례를 나타낸다.
도 5는 본 발명의 일 실시예에 따른 영상 기반 오염 감지가 수행되는 형태의 일례를 나타낸다.
도 6은 본 발명의 일 실시예에 따른 영상 기반 오염 추적이 수행되는 형태의 일례를 나타낸다.
도 7은 본 발명의 일 실시예에 따른 오염물 이미지를 획득하는 형태의 일례를 나타낸다.
도 8은 본 발명의 일 실시예에 따른 오염 안내 정보 형태의 일례를 나타낸다.
도 9는 본 발명의 일 실시예에 따른 구역별 오염물 안내 형태의 일례를 나타낸다.
도 10은 본 발명의 일 실시예에 따른 안내 정보가 사용자 단말기를 통해 표시되는 형태의 일례를 나타낸다.
아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시 예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서 전체에 걸쳐서 동일한 참조번호로 표시된 부분들은 동일한 구성요소들을 의미한다.
본 발명의 일 실시예에서는 다양한 방식을 통해 사용자의 이용이 종료된 차량의 실내 상태를 감지 및 분석하고, 이를 기반으로 안내 정보의 출력이 수행되도록 할 것을 제안한다.
도 1은 본 발명의 실시예들에 적용될 수 있는 차량용 청결 관리 장치 구조의 일례를 나타낸다.
도 1을 참조하면, 실시예들에 적용될 수 있는 차량용 청결 관리 장치는 실내 오염 및 유실물 등의 감지 대상물의 발생 여부를 감지하는 감지부(110), 안내 정보를 출력하는 출력부(120), 차량 내부 및 외부와 데이터 교환을 위한 통신을 수행하는 통신부(130) 및 전술한 각 구성요소의 전반적인 제어를 수행하는 제어부(140)를 포함할 수 있다.
먼저, 감지부(110)는 영상 정보 기반 감지 대상물의 감지를 수행하기 위한 실내 영상을 획득하는 카메라(111)와 냄새를 통해 오염 여부를 감지하는 후각센서(112)를 포함할 수 있다. 카메라(111)는 감지의 대상이 되는 실내 영역과 오염 감지 방식에 따라 복수의 카메라를 포함할 수도 있다. 예를 들어, 카메라의 배치 위치는 전석 주변(즉, 운전석, 조수석, 대시보드 등)을 촬영하기 위해 룸미러 부근과, 후석 주변(즉, 후석과 리어글라스 하단 영역 등)을 촬영하기 위해 루프 중앙이나 후미가 될 수 있으나, 이는 예시적인 것으로 오염 여부를 감지하고자 하는 실내 영역을 효과적으로 촬영할 수 있다면 그 위치와 개수에 제한되지 아니한다. 물론, 후각 센서(112)의 배치 위치와 개수도 한정되지 아니한다.
또한, 카메라(111)의 종류로는 후술할 오브젝트(즉, 유실물) 감지와 오염 감지를 위해, 일반적인 RGB 타입 카메라, 적외선(IR) 카메라, 3D 촬영을 위한 스테레오 카메라, 분광학(Spectroscopic) 센서를 구비한 카메라 중 적어도 하나가 사용될 수 있다.
비록 도 1에 도시되지는 않았으나, 감지부(110)는 실내 공기중 먼지, 미세먼지 등의 입자 농도 분석을 위한 먼지 센서를 더 포함할 수도 있다.
출력부(120)는 안내 정보를 다양한 형태로 출력할 수 있다. 예를 들어, 안내 정보를 시각 정보 형태로 출력하기 위해, 출력부(120)는 디스플레이를 구비할 수 있으며, 청각 정보 형태로 출력하기 위해 출력부(120)는 스피커를 구비할 수도 있다. 디스플레이는 헤드유닛의 디스플레이나 클러스터에 배치되는 디스플레이 등을 포함할 수 있으나, 안내 정보의 시각적 출력이 가능하다면 어떠한 형태의 디스플레이에도 한정되지 아니한다.
통신부(130)는 차량용 청결 관리 장치가 차량 내 다른 개체(예컨대, 제어기들)와 통신하기 위한 유선 통신부(미도시)와 해당 차량 이외의 개체(예컨대, 외부 서버, 탑승자가 소지한 스마트 기기 등)와 통신하기 위한 무선 통신부(미도시) 중 적어도 하나를 포함할 수 있다. 유선 통신부는 소정의 차량 네트워크 통신에 적용되는 하나 이상의 프로토콜, 예컨대, CAN, CAN-FD, LIN, 이더넷 등의 프로토콜을 지원할 수 있으나, 반드시 이에 한정되는 것은 아니다. 또한, 무선 통신부는 사용자가 소지한 스마트 기기 등과 통신하기 위한 근거리 통신(블루투스, Wi-Fi, Wi-Di, Zigbee, NFC 등)과, 텔레매틱스나 셀룰러 기반 통신(3G, LTE, 5G 등) 중 적어도 하나를 지원할 수 있다.
제어부(140)는 기 설정된 조건이 만족되면, 감지부(110)로부터 실내 상태 판단을 위한 정보를 획득하여 오염물이나 유실물의 존재 여부 및 오염도(또는 청결도)를 분석하고, 분석 결과에 대응되는 안내 정보가 출력부(120)를 통해 차량 내에서 출력되거나, 통신부(130)를 통해 차량이 아닌 타 장치를 통해 출력되도록 안내 정보를 전송할 수 있다. 따라서, 이하의 실시예들에서 안내 정보를 출력한다고 함은, 차량 내에서 탑승자가 차량 내에 배치된 출력부(120)를 통해 안내 정보를 출력함은 물론, 외부 개체를 통해 안내 정보가 출력되도록 통신부(130)를 통해 안내 정보를 전송할 수도 있다. 여기서, 외부 개체는 카 셰어링 서비스 서버나 텔레매틱스 서버, 또는 탑승자 소지 단말 등이 될 수 있으나, 반드시 이에 한정되는 것은 아니다. 또한, 실내 상태 판단의 개시 조건은 통신부(130)를 통해 특정 신호의 수신, 현재 사용자에 대하여 기 설정된 사용 종료 시간에 도달, 현재 사용자가 차량 내 소정의 입력수단(예컨대, 헤드 유닛 등)을 통해 사용 종료 명령을 입력한 경우 등이 될 수 있으나, 이는 예시적인 것으로 반드시 이에 한정되는 것은 아니다.
이하에서는 전술한 차량용 청결 관리 장치의 구성을 바탕으로 실시예에 따른 실내 청결 관리 과정을 구체적으로 설명한다.
도 2는 본 발명의 일 실시예에 따른 실내 청결 관리 과정의 일례를 나타내는 순서도이다.
도 2를 참조하면, 제어부(140)는 시작 조건의 만족 여부를 판단할 수 있다(S210). 시작 조건은 전술한 바와 같으므로 중복되는 기재는 생략한다.
시작 조건이 만족되면(S210의 Yes), 초기 환경 정보 획득이 수행될 수 있다(S220). 여기서 초기 환경 정보란 현재 사용자가 본격적으로 차량을 사용하기 전 실내 상태에 대한 정보를 의미할 수 있다. 예를 들어, 초기 환경 정보는 차량 출고시 실내 상태에 대한 정보를 의미할 수도 있고, 마지막 사용 이후 현재 운행이 시작되기 전, 또는 현재 탑승자가 탑승한 후 오염이 발생하기 전의 실내 상태 정보를 의미할 수도 있다. 따라서, 본 단계는 카메라(111)를 통해 차량 내장재나 기본 탑재 품목의 위치, 시트나 매트의 색상 등을 판단하기 위한 영상을 얻고, 후각 센서(112)를 통해 오염 전 실내 냄새 상태를 감지하는 형태로 수행될 수 있다. 실시예에 따라, 본 단계는 카 셰어링 서비스 서버로부터 디폴트 초기 환경 정보를 획득하는 형태로 수행될 수도 있으며, 또 다른 실시예에 의하면 생략될 수도 있다.
이후 감지부(111)를 통해 실내 오염 및 유실물 검출을 위한 실내 상태감지가 수행될 수 있다(S230). 구체적인 감지 과정(S230)은 도 3a 및 도 4 내지 도 6을 참조하여 후술하기로 한다.
제어부(140)는 감지 정보를 기반으로 실내 오염과 유실물에 대한 정보 처리를 수행할 수 있다(S240). 여기서 정보 처리란, 안내 정보를 생성하는 과정을 의미할 수 있으며, 이를 위해 제어부(140)는 오염물, 유실물 등의 이미지를 획득하거나 오염도(또는 청결도)를 판단하고 그에 따른 청소 시간이나 청소 비용 등을 결정할 수 있다. 청소 비용은 이전 사용자가 직접 청소하지 않을 경우 페널티로 부과되는 금액에 해당할 수 있으며, 다음 사용자가 직접 청소할 경우 다음 사용자에 보상(리워드)으로 부여되는 금액에 해당할 수 있다.
구체적인 정보 처리 과정(S240)은 도 3b 및 도 7 내지 도 9를 참조하여 후술하기로 한다.
제어부(140)는 정보 처리 과정(S240)을 통해 생성된 안내 정보가 있을 경우, 이에 대한 안내 정보가 출력되도록 제어하며, 출력된 안내 정보에 따른 사용자의 응답에 따라 후속 처리를 수행할 수 있다(S250). 구체적인 안내 정보를 통한 후속 처리 과정(S250) 및 안내 정보의 출력 형태는 도 3c 및 도 10을 참조하여 후술하기로 한다.
이하에서는 상술한 실내 상태 감지 과정을 도 3a 및 도 4 내지 도 6을 참조하여 구체적으로 설명한다.
도 3a은 도 2의 실내 상태 감지 단계가 수행되는 과정의 일례를 나타내는 순서도이다.
도 3a를 참조하면, 실내 청결도 감지를 위해, 카메라(111)를 통해 촬영된 영상을 기반으로 오브젝트 감지가 수행될 수 있다(S231). 오브젝트 감지는 RGB 카메라나 스테레오 카메라를 통해 촬영된 영상에서 오브젝트 검출 로직을 통해 초기 상태에 존재하지 않았던 오브젝트를 감지하는 과정을 의미할 수 있다. 이때, 오브젝트 감지는 기 준비된 인공지능(AI) 로직을 통해 제어부(140)가 직접 수행할 수도 있고, 카메라(111)를 통해 획득된 영상을 통신부(130)를 통해 외부 서버에 전송하여 외부 서버로부터 오브젝트 감지 결과를 수신하는 형태가 될 수도 있다. 또한, 초기 상태에 존재하지 않았던 오브젝트를 감지하기 위하여, 현재 획득된 영상과 초기 환경 정보의 비교가 수행될 수도 있다. 본 과정에서 탐지된 오브젝트는 유실물로 분류될 수 있다.
본 발명은 오브젝트 감지 로직에 대하여 한정하지 않는 바, 오브젝트 감지 및 분석 로직의 구체적인 알고리즘에 대한 기재는 생략하기로 한다.
오브젝트 감지 및 분석 과정(S231)을 통해 실내에 적어도 하나의 오브젝트가 감지되면, 제어부(140)는 해당 오브젝트가 감지된 위치를 마킹(즉, 기록)해둘 수 있다(S232). 또한, 본 과정에서 이미지 인식을 통해 오브젝트의 종류(의류, 용기류, 기타 분류 등)에 대한 분석이 수행될 수도 있다.
제어부(140)는 카메라(111)를 통해 촬영된 영상을 기반으로 오염 여부를 감지할 수 있다(S233). 이때, 오염 여부의 감지 대상이 되는 실내 영역은 오브젝트가 감지된 영역을 제외한 영역일 수 있다. 이는 오브젝트 자체를 오염으로 오인식하는 것을 방지하기 위함이다.
오염 감지 방식으로는 분광학 센서를 기반으로 실내 구성 요소의 분자가 가지고 있는 고유의 색상이 초기 환경 정보와 상이한지 여부를 판단하는 방식이 적용될 수 있다. 예컨대, 가죽 시트가 갖는 고유의 색상에 따른 파장과 다른 색상에 따른 파장이 있을 경우, 해당 부위에 오염이 발생한 것으로 판단할 수 있다. 또한, RGB나 IR 방식 카메라를 통해 촬영된 영상에서 특정 부분의 반사도가 상승한 경우 액체에 의한 오염이 발생한 것으로 판단할 수도 있다. 이 외에도, 영상(광학) 기반으로 오염도 판단이 가능하다면 어떠한 방식이라도 적용될 수 있음은 물론이다.
아울러, 실내 상태 감지를 위해 후각 센서(112)를 통한 냄새 감지가 수행될 수 있다(S234). 본 과정은 도 3a에서 마지막에 수행되는 것으로 도시되어 있으나, 영상 기반 감지 방식보다 먼저 수행될 수도 있고 병렬적으로 수행될 수도 있다. 만일, 오브젝트가 감지된 영역을 제외한 영역에서 광학 감지(즉, 카메라(111) 이용) 기반으로 오염이 감지되지 않은 상황에서 오염에 해당하는 냄새가 감지된 경우, 이는 오브젝트에 의한 냄새인 것으로 판단될 수 있다.
도 4는 본 발명의 일 실시예에 따른 영상 기반 오브젝트 감지가 수행되는 형태의 일례를 나타낸다.
도 4를 포함한 이하의 도면에서 카메라(111)는 차량 실내에서 후석 주변을 촬영하도록 실내 후석측에 배치된 카메라(111a)와 전석 주변을 촬영하도록 실내 전석측에 배치된 카메라(111b)를 포함하는 것으로 가정한다.
먼저 도 4의 (a)를 참조하면, 영상 기반 인식을 통해 운전석측 후석에 오브젝트(410)와, 조수석에 오브젝트(420)가 각각 감지될 수 있다. 그에 따라, 제어부(140)는 도 4의 (b)와 같이 해당 오브젝트가 감지된 위치(410', 420')를 마킹하여 영상 기반 오염 감지를 수행함에 있어 해당 위치(410', 420')가 판단 대상에서 제외되도록 할 수 있다.
도 5는 본 발명의 일 실시예에 따른 영상 기반 오염 감지가 수행되는 형태의 일례를 나타낸다.
도 5에서는 RGB 각각의 색상 영역에 대하여 분광학 기법을 적용하기 위한 촬영 이미지의 일례가 도시되어 있다. 여기서, 초기 환경 정보와 상이한 파장이 감지된 영역(510)이 있을 경우, 해당 영역이 오염이 발생한 영역으로 인식될 수 있다. 만일, 도 4에서와 유사하게 운전석측 후석에 오브젝트(410)가 감지되었던 경우, 해당 영역(510)은 판단 대상에서 제외되므로 해당 영역의 파장 차이는 무시될 수 있다.
도 6은 본 발명의 일 실시예에 따른 영상 기반 오염 추적이 수행되는 형태의 일례를 나타낸다.
도 6의 (a)를 참조하면, 실내 상태 감지 절차에서 오염 영역(610)이 감지될 수 있다. 만일, 오염 영역(610)의 오염 종류가 액체로 판단된 경우, 일정 주기로 재감지가 수행될 수 있으며, 도 6의 (b)와 같이 해당 영역의 오염이 확대(610')된 것으로 감지되면, 제어부(140)는 오염도가 증가한 것으로 판단할 수 있다.
다음으로, 도 3b 및 도 7 내지 도 9를 참조하여 정보 처리 과정(S240)을 설명한다.
도 3b는 도 2의 정보 처리 단계가 수행되는 과정의 일례를 나타낸다.
도 3b를 참조하면, 제어부(140)는 실내 상태 감지 결과를 기반으로 오염물이나 유실물의 발견 여부에 따라(S241) 서로 다른 과정에 따라 안내 정보를 생성할 수 있다.
유실물이 발견된 경우, 제어부(140)는 유실물의 이미지를 획득하고(S242), 유실물의 위치와 획득된 이미지를 포함하는 안내 정보를 생성할 수 있다(S243). 여기서, 유실물의 위치는 차량 실내에서의 위치(운전석, 조수석, 후석 풋레스트 등)를 의미할 수 있으며, 유실물의 이미지는 실내 상태 감지 과정에서 촬영된 이미지를 가공하는 형태로 획득될 수도 있고, 본 과정에서 카메라(111)를 통해 별도로 촬영된 것일 수도 있다. 유실물의 위치 판단을 위해, 제어부(140)는 미리 준비된 테이블을 이용할 수 있다. 여기서 테이블은 카메라(111)를 통해 촬영된 이미지의 픽셀 또는 영역별로 매칭되는 실내 부분을 정의한 테이블일 수 있으나, 반드시 이에 한정되는 것은 아니다.
유실물에 대한 정보 처리와 독립적으로, 오염물이 발견된 경우 제어부(140)는 오염의 위치를 판단할 수 있다(S244). 오염의 위치는 전술한 카메라(111)를 통해 촬영된 이미지에 검출된 오염물이라면 상술한 테이블을 통해 위치가 판단될 수 있으며, 카메라(111)를 통해 촬영되지 않았다면(예컨대, 냄새) 위치 특정이 불가능한 오염물로 처리될 수 있다(S244의 No).
위치 판단이 가능한 오염물인 경우(S244의 Yes), 제어부(140)는 오염도를 판단할 수 있다(S245).
오염도 분석은 아래와 같은 형태가 될 수 있다.
일례로, 오염도 분석은 오염물의 분류와 위치 등을 기준으로 수행될 수 있다.
오염종류 오염크기 오염위치와색상차 물질 냄새정도
액체 30cm 이상 차이큼 점도강함 심함
고체
 5_30cm 차이중간 점도약함 보통
5cm 이내 차이적음 점도없음
(건조함)		 냄새없음
오염물의 분류는 표 1에 나타난 바와 같이 오염 종류, 오염 크기, 오염 위치에 초기 색상과의 색상차, 물질(점도), 냄새 정도 등과 같이 분류될 수 있으며, 각 항목별 분류에 따라 서로 다른 점수(또는 가중치)가 부여될 수 있다. 예컨대, 오염크기가 30cm 이상이며 색상 차가 크고 냄새가 심각할 경우 오염도가 심각한 것으로 판단될 수 있으며, 오염 크기가 5cm 이내이고 색상 차이가 적으며 냄새가 없을 경우 오염도가 낮은 것으로 판단될 수 있다.
오염부분의재질 오염발견 후 경과시간
가죽류 60분이상
천류 30~60분
플라스틱류 10~30분
금속류 10분이내
또한, 표 2와 같이 위치별로 재질을 매칭시키고, 재질에 따른 오염 시간에 따라 서로 다른 가중치가 부여되도록 할 수도 있다. 예컨대, 비교적 오염에 강한 금속류는 오염 후 경과 시간이 많이 지나더라도 오염도 상승이 크지 않을 수 있으나, 오염에 취약한 천류는 짧은 시간이 경과되더라도 오염도가 크게 상승하도록 가중치가 부여될 수 있다.
아울러, 비록 오염 범위, 냄새 등이 적은 경우라도, 미리 설정된 특정 물질, 예컨대, 담배 꽁초나 음식물과 같이 혐오감이 높은 오염물이 발견되었다면 오염도는 바로 심각에 해당하는 값으로 결정될 수 있다.
정리하면, 제어부(140)는 표 1의 대조 결과와 표 2의 대조 결과 각각에서 항목별로 아래쪽 상태로 갈수록 낮은 오염도 점수를 부여하며, 항목별 점수를 종합하여 오염도를 판단할 수 있으나, 이는 예시적인 것으로 표 1 및 표 2의 구성, 항목, 가중치 등의 변경이 가능함은 당업자에 자명하다.
오염도가 판단되면, 제어부(140)는 오염도를 고려하여 청소 예상 시간, 청소 비용 등을 결정할 수 있다.
오염도가 심각한 경우(S245의 Yes), 제어부(140)는 카메라(111)를 통해 오염물의 확대 이미지를 획득할 수 있으며(S246A), 확대 이미지, 오염도, 오염물 위치, 오염물의 종류, 청소 비용이나 페널티 비용, 청소 예상 시간 중 적어도 하나를 포함하는 안내 정보를 생성할 수 있다(S247A). 여기서, 확대 이미지를 획득하는 이유는 사용자에게 오염의 심각성을 직관적으로 인지시키기 위함이다.
오염도가 심각하지 않은 경우(S245의 No), 제어부(140)는 카메라(111)를 통해 오염물의 이미지를 획득할 수 있으며(S246B), 이때 획득되는 이미지는 전술한 확대 이미지보다는 배율이 낮은 이미지일 수 있다. 그에 따라 제어부(140)는 오염물 이미지, 오염도, 오염물 위치, 오염물의 종류, 청소 비용이나 페널티 비용, 청소 예상 시간 중 적어도 하나를 포함하는 안내 정보를 생성할 수 있다(S247B).
실시예에 따라, 오염도가 심각하지 않은 경우 이미지 획득 과정(S246B)은 생략될 수도 있으며, 이러한 경우 안내 정보에서도 이미지가 생략될 수 있다.
만일, 오염 위치의 판단이 불가한 경우(S244의 No), 제어부(140)는 이미지 없이 확인 요청을 포함하는 안내 정보를 생성할 수 있다(S248). 다른 실시예에 의하면, 제어부(140)는 냄새의 정도가 낮은 경우 직전 사용자에게 보낼 안내 정보를 생성하는 대신 환기를 위해 공조 제어를 수행할 수도 있다.
이하에서는 준비되는 안내 정보의 형태를 도 7 내지 도 9를 참조하여 설명한다.
도 7은 본 발명의 일 실시예에 따른 오염물 이미지를 획득하는 형태의 일례를 나타낸다.
도 7의 (a)를 참조하면, 제어부(140)는 제1 크기(예컨대, 3cm) 미만이거나 오염도가 낮은 오염물(710)에 대해서는 오염물 이미지 획득을 생략할 수도 있으나, 제2 크기(예컨대, 10cm)를 넘어서거나 오염도가 심각 수준인 오염물(710)에 대해서는 확대 이미지를 획득할 수 있다.
오염물의 이미지를 획득함에 있어서, 제어부(140)는 오염 부위에 따라 배율을 달리할 수도 있다. 예컨대, 카메라(111)가 실내 루프 측에 설치된 경우 도 7의 (b)에 도시된 바와 같이 전석과 후석 사이의 후석 풋레스트 영역(730)은 후석 대비 카메라(111)로부터의 거리가 멀기 때문에, 가공되지 않은 촬영 이미지에서는 동일 물체라도 위치에 따라 크기가 다르게 나타날 수 있다. 따라서, 제어부(140)는 후석 풋레스트 영역(730)의 오염물의 이미지를 획득할 경우, 후석(740) 오염물의 이미지를 획득할 경우 대비 확대된 배율을 적용하여 오염물 이미지(750)를 획득할 수 있다.
또한, 일 실시예에 따르면, 오염물의 이미지는 아이콘 형태로 대체될 수도 있다. 이를 도 8을 참조하여 설명한다.
도 8은 본 발명의 일 실시예에 따른 오염 안내 정보 형태의 일례를 나타낸다.
도 8의 (a)를 참조하면, 오염물 타입에 따라 메인 아이콘의 외형이 결정될 수 있으며, 냄새의 정도에 따른 제1 보조 아이콘과 긴급 여부(오염 영역 확대 상황이나 청결도가 심각한 수준인 경우)시 제2 보조 아이콘이 메인 아이콘 주변에 부여될 수 있다. 또한, 메인 아이콘의 크기는 오염영역의 크기에 따라 변경될 수 있다. 아울러, 메인 아이콘의 색상은 오염도에 따라 변경될 수 있다. 예를 들어, 오염도가 낮으면 청색, 중간 수준인 경우 황색, 심각 수준인 경우 적색 등이 될 수 있으나, 이는 예시적인 것으로 반드시 이에 한정되는 것은 아니다. 다른 실시예에 의하면, 오염도는 5단계로 구분되어 5단계마다 서로 다른 색상이 부여될 수도 있고, 구현에 따라 오염도 단계는 5단계를 넘어 더욱 세분화될 수 있으며, 그에 따라 오염도에 대응되는 색상도 증가할 수 있다.
예컨대, 중간 정도 오염도에 냄새가 심한 액체 오염물에 의한 오염 영역이 확산되고 있는 경우, 아이콘(810)은 도 8의 (b)와 같은 형태가 될 수 있다.
한편, 전술한 바와 같이 안내 정보는 오염물 위치를 포함할 수도 있다. 이를 도 9를 참조하여 설명한다.
도 9는 본 발명의 일 실시예에 따른 구역별 오염물 안내 형태의 일례를 나타낸다.
먼저, 도 9의 좌측을 참조하면, 안내 정보에 포함되는 차량의 실내 영역(910)은 운전석 전방부(스티어링 휠, 운전석측 대시보드, 페달 주변 등), 센터페시아, 조수석 전방부(글로브 박스, 조수석측 대시 보드, 조수석 앞 매트 등), 운전석, 센터콘솔, 조수석, 후석 1, 후석 2, 후석 3 등과 같이 9개의 영역으로 구분될 수 있다. 제어부(140)는 도 9의 우측과 같이 오염이 감지된 영역에 도 8을 참조하여 전술한 아이콘(810)을 배치하여 오염 영역을 탑승자가 직관적으로 인식 가능하도록 할 수 있다. 이때, 오염이 감지된 영역에는 아이콘(810)과 함께 소정의 시각 효과(예컨대, 색상 부여)가 더욱 부여될 수도 있다.
구현에 따라 오염 영역의 표시는 아이콘(810) 대신 오염물 이미지와 연결된 시각 효과를 통해 수행될 수도 있으며, 이는 도 10을 참조하여 후술한다.
다음으로, 구체적인 안내 정보를 통한 후속 처리 과정(S250) 및 안내 정보의 출력 형태는 도 3c 및 도 10을 참조하여 후술하기로 한다.
도 3c는 도 2의 안내 출력 단계가 수행되는 과정의 일례를 나타낸다.
도 3c를 참조하면, 제어부(140)는 오염물이나 유실물의 발견 여부에 따라(S251) 서로 다른 과정에 따라 안내 정보를 출력하고 그에 따른 후속 절차를 진행할 수 있다.
유실물이 발견된 경우, 제어부(140)는 유실물에 대응하여 생성된 안내 정보를 이전(즉, 직전) 사용자가 확인할 수 있도록 출력(즉, 발송)할 수 있다(S252A). 여기서, 발송한다고 함은 제어부(140)가 통신부(130)를 통해 이전 사용자의 소지 단말로 안내 정보를 직접 전송함은 물론, 카 셰어링 서비스 서버나 텔레매틱스 센터 등을 경유하여 전송하는 형태도 포함하는 개념이다.
제어부(140)는 이전 사용자의 유실물에 대한 안내 정보 확인을 대기하며(S253A), 소정 시간 내로 응답을 수신하지 못한 경우 해당 사용자가 안내 정보를 확인하지 않은 것으로 판단할 수 있다(S253A의 No).
응답이 수신된 경우(S253A의 Yes), 제어부(140)는 응답의 내용을 확인하며(S254A), 응답이 즉시 회수에 해당하면(S254A의 Yes) 제어부(140)는 이전 사용자가 유실물을 회수할 동안 다음 사용자에 배정되지 않도록 대여 불가 상태를 설정하고 이전 사용자에 접근권(예컨대, 도어 오픈 권한)을 부여할 수 있다(S255A-1).
만일, 이전 사용자가 안내 정보를 확인하지 않은 것으로 판단되거나(S253A의 No), 즉시 회수 응답이 아닌 응답(예컨대, 나중에 회수 또는 자기 물건 아님)을 전송한 경우(S254A의 No), 제어부(140)는 통신부(130)를 통해 셰어링 서비스 관리자와 다음 사용자(배정된 경우)에 유실물이 있음을 통지할 수 있다(S255A-2).
한편, 오염물이 발견된 경우, 제어부(140)는 유실물에 대응하여 생성된 안내 정보를 이전(즉, 직전) 사용자가 확인할 수 있도록 발송할 수 있다(S252B). 발송의 개념은 유실물에 대응되는 안내 정보와 관련하여 전술한 바와 같으므로 중복되는 기재는 생략한다.
제어부(140)는 이전 사용자의 오염물에 대한 안내 정보 확인을 일정 시간 동안 대기할 수 있으며(S253B), 응답이 수신되면(S253B의 Yes), 응답의 종류를 확인한다(S254B).
응답이 직접 청소에 해당하면(S254B의 Yes) 제어부(140)는 이전 사용자가 오염물을 청소할 동안 다음 사용자에 배정되지 않도록 대여 불가 상태를 설정하고 이전 사용자에 접근권(예컨대, 도어 오픈 권한)을 부여할 수 있다(S255B).
이전 사용자가 청소를 위해 차량에 복귀하여 도어가 오픈된 후 차량 내 입력 수단이나 소지 단말 등을 통해 청소 완료 응답을 보낸 경우(또는 예상 청소 시간이 경과한 경우), 제어부(140)는 다시 실내 상태 감지 절차를 통해 오염물 제거 여부를 확인할 수 있다(S256).
제어부(140)는 실내 사태 감지 결과 오염물 안내 정보에 해당하는 오염이 제거된 경우(S257의 Yes), 정상 반납 처리를 수행할 수 있으며, 그렇지 않은 경우(S257의 No) 이를 통신부(130)를 통해 셰어링 서비스 서버에 통지하여 해당 사용자에 대하여 페널티 부과 처리가 되도록 하고, 다음 사용자(배정된 경우)에 오염물이 있음을 통지할 수 있다(S258).
이하에서는 사용자가 소지한 단말을 통해 안내 정보가 출력되는 형태를 도 10을 참조하여 설명한다.
도 10은 본 발명의 일 실시예에 따른 안내 정보가 사용자 단말기를 통해 표시되는 형태의 일례를 나타낸다.
도 10에 도시된 각 이미지는 사용자가 소지한 단말이 스마트폰인 경우를 가정하여 푸시 알림 형태로 안내 정보를 발송하고, 카 셰어링 어플리케이션을 통해 안내 정보가 출력됨을 가정하나, 이는 예시적인 것으로 반드시 이에 한정되는 것은 아니다. 예를 들어, 안내 정보는 카 셰어링 서비스 서버가 관리하는 웹페이지를 통해 게시될 수 있고, 안내 정보의 발송은 해당 웹페이지의 주소(URL 등)가 SMS 등으로 발송되는 형태가 될 수도 있다.
먼저 도 10의 (a)를 참조하면, 안내 정보가 도착함에 따른 점검 결과 안내 화면이 표시될 수 있다. 점검 결과 안내 화면에서는 유실물의 개수(1011)와 오염물의 개수(1012)가 표시될 수 있다.
도 10의 (b)에는 유실물에 대한 안내 정보 화면이 도시된다. 유실물에 대한 안내 정보는 유실물의 실내 위치와 링크된 유실물 이미지(1021)가 표시될 수 있으며, 화면 하단에는 응답 메뉴가 배치될 수 있다. 응답 메뉴는 내 물건 아님(1031), 지금(즉시) 회수(1032), 나중에 회수(1033) 등으로 구성될 수 있다.
도 10의 (c)에는 오염물에 대한 안내 정보 화면이 도시된다. 오염물에 대한 안내 정보는 오염물의 실내 위치와 링크된 오염물 이미지(1041)가 표시될 수 있으며, 그와 함께 오염도, 오염 종류, 예상 청소 시간, 예상 청소비(페널티) 등에 대한 정보(1042)도 표시될 수 있다. 또한, 화면 하단에는 응답 메뉴가 배치될 수 있다. 응답 메뉴는 내가 발생시킨 오염 아님(1051), 직접 청소(1052), 청소비 지불(1053) 등으로 구성될 수 있다.
도 10의 (d)에는 다음 사용자에게 전송되는 오염물에 대한 안내 정보 화면이 도시된다. 전술된 바와 같이, 이러한 안내 정보는 이전 사용자가 오염물에 대하여 청소비를 지불하거나 자신이 발생시킨 오염이 아님을 주장할 때 다음 사용자에 전달될 수 있다.
오염물에 대한 안내 정보는 오염물의 실내 위치와 링크된 오염물 이미지(1061)가 표시될 수 있으며, 그와 함께 오염도, 오염 종류, 예상 청소 시간, 다음 사용자가 해당 오염물을 청소할 경우 받게 될 보상(리워드) 등에 대한 정보(1062)도 표시될 수 있다. 또한, 화면 하단에는 응답 메뉴가 배치될 수 있다. 응답 메뉴는 오염물을 감수하고 이용하지 않을 경우 다른 차량을 선택하기 위한 메뉴(1071), 직접 청소(1072), 청소 없이 단순 탑승(1073) 등으로 구성될 수 있다.
전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있다.
따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.

Claims (20)

  1. 적어도 카메라를 포함하는 감지부를 통해 실내 상태를 감지하는 단계;
    상기 감지 결과, 유실물 및 오염물 중 적어도 하나의 감지 여부에 따라 유실물에 대응되는 제1 안내 정보 및 오염물에 대응되는 제2 안내 정보 중 적어도 하나를 생성하는 단계; 및
    상기 생성된 적어도 하나의 안내 정보를 외부로 전송하는 단계를 포함하는, 차량용 실내 청결 관리 방법.
  2. 제1 항에 있어서,
    상기 제1 안내 정보는,
    유실물 이미지 및 유실물의 실내 위치 중 적어도 하나를 포함하는, 차량용 실내 청결 관리 방법.
  3. 제1 항에 있어서,
    상기 제2 안내 정보는,
    상기 오염물의 실내 위치, 오염도, 오염물 분류, 오염물 이미지, 예상 청소 시간, 예상 청소비용 중 적어도 하나를 포함하는, 차량용 실내 청결 관리 방법.
  4. 제2 항에 있어서,
    상기 오염물 이미지는,
    상기 오염물의 크기, 상기 오염도, 상기 오염물 분류 중 적어도 하나에 따라 확대 배율을 달리하는, 차량용 실내 청결 관리 방법.
  5. 제3 항에 있어서,
    상기 오염물 이미지는,
    상기 카메라에 대한 상기 실내 위치에 따라 확대 배율을 달리하는, 차량용 실내 청결 관리 방법.
  6. 제1 항에 있어서,
    상기 생성된 적어도 하나의 안내 정보가 상기 제2 안내 정보를 포함할 경우, 상기 제2 안내 정보에 대한 응답을 수신하는 단계; 및
    상기 수신된 응답이 직접 청소에 대응되면, 상기 응답의 발신자에 실내 접근 권한을 부여하는 단계를 더 포함하는, 차량용 실내 청결 관리 방법.
  7. 제1 항에 있어서,
    상기 생성된 적어도 하나의 안내 정보가 상기 제2 안내 정보를 포함할 경우, 상기 제2 안내 정보에 대한 응답을 대기하는 단계; 및
    상기 응답이 일정 시간동안 수신되지 않거나, 수신된 상기 응답이 직접 청소에 해당하지 않는 경우 상기 응답의 발신자에 페널티를 부여하는 단계를 더 포함하는, 차량용 실내 청결 관리 방법.
  8. 제7 항에 있어서,
    상기 응답이 일정 시간동안 수신되지 않거나, 수신된 상기 응답이 직접 청소에 해당하지 않는 경우, 다음 사용자에게 상기 오염물에 대한 제3 안내 정보를 전송하는 단계를 더 포함하는, 차량용 실내 청결 관리 방법.
  9. 제1 항에 있어서,
    상기 실내 상태를 감지하는 단계는,
    실내의 감지 대상 영역 내에서 적어도 하나의 오브젝트를 검출하는 단계; 및
    상기 적어도 하나의 오브젝트 각각이 검출된 영역을 제외한 상기 감지 대상 영역에서 오염 여부를 감지하는 단계를 포함하는, 차량용 실내 청결 관리 방법.
  10. 제1 항 내지 제9 항 중 어느 한 항에 따른 차량용 실내 청결 관리 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터 해독 가능 기록 매체.
  11. 적어도 카메라를 포함하는 감지부;
    통신부; 및
    상기 감지부를 통해 획득된 정보를 기반으로 실내 상태를 감지하고, 상기 감지 결과 유실물 및 오염물 중 적어도 하나의 감지 여부에 따라 유실물에 대응되는 제1 안내 정보 및 오염물에 대응되는 제2 안내 정보 중 적어도 하나를 생성하며, 상기 생성된 적어도 하나의 안내 정보가 상기 통신부를 통해 외부로 전송되도록 제어하는 제어부를 포함하는, 차량용 실내 청결 관리 장치.
  12. 제11 항에 있어서,
    상기 제1 안내 정보는,
    유실물 이미지 및 유실물의 실내 위치 중 적어도 하나를 포함하는, 차량용 실내 청결 관리 장치.
  13. 제11 항에 있어서,
    상기 제2 안내 정보는,
    상기 오염물의 실내 위치, 오염도, 오염물 분류, 오염물 이미지, 예상 청소 시간, 예상 청소비용 중 적어도 하나를 포함하는, 차량용 실내 청결 관리 장치.
  14. 제12 항에 있어서,
    상기 오염물 이미지는,
    상기 오염물의 크기, 상기 오염도, 상기 오염물 분류 중 적어도 하나에 따라 확대 배율을 달리하는, 차량용 실내 청결 관리 장치.
  15. 제13 항에 있어서,
    상기 오염물 이미지는,
    상기 카메라에 대한 상기 실내 위치에 따라 확대 배율을 달리하는, 차량용 실내 청결 관리 장치.
  16. 제11 항에 있어서,
    상기 제어부는,
    상기 생성된 적어도 하나의 안내 정보가 상기 제2 안내 정보를 포함하며, 상기 통신부를 통해 상기 제2 안내 정보에 대하여 수신된 응답이 직접 청소에 대응되면, 상기 응답의 발신자에 실내 접근 권한이 부여되도록 제어하는, 차량용 실내 청결 관리 장치.
  17. 제11 항에 있어서,
    상기 제어부는,
    상기 생성된 적어도 하나의 안내 정보가 상기 제2 안내 정보를 포함할 경우, 상기 제2 안내 정보에 대한 응답을 대기하고, 상기 응답이 일정 시간동안 수신되지 않거나, 수신된 상기 응답이 직접 청소에 해당하지 않는 경우 상기 응답의 발신자에 페널티가 부여되도록 제어하는, 차량용 실내 청결 관리 장치.
  18. 제17 항에 있어서,
    상기 제어부는,
    상기 응답이 일정 시간동안 수신되지 않거나, 수신된 상기 응답이 직접 청소에 해당하지 않는 경우, 상기 통신부를 통해 다음 사용자에게 상기 오염물에 대한 제3 안내 정보가 전송되도록 제어하는, 차량용 실내 청결 관리 장치.
  19. 제11 항에 있어서,
    상기 제어부는,
    실내의 감지 대상 영역 내에서 적어도 하나의 오브젝트를 검출하고, 상기 적어도 하나의 오브젝트 각각이 검출된 영역을 제외한 상기 감지 대상 영역에서 오염 여부를 감지하는, 차량용 실내 청결 관리 장치.
  20. 제13 항에 있어서,
    상기 예상 청소비용은,
    이전 사용자에게는 상기 오염물의 미청소시에 부과되는 페널티 금액에 해당하고,
    다음 사용자에게는 상기 오염물의 직접 청소시에 부여되는 리워드 금액에 해당하는, 차량용 실내 청결 관리 장치.
KR1020200094603A 2020-07-29 2020-07-29 자동차 및 그를 위한 실내 청결 관리 방법 KR20220014681A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020200094603A KR20220014681A (ko) 2020-07-29 2020-07-29 자동차 및 그를 위한 실내 청결 관리 방법
US17/110,933 US11270570B2 (en) 2020-07-29 2020-12-03 Vehicle and method of managing cleanliness of interior of the same
CN202011604503.1A CN114092921A (zh) 2020-07-29 2020-12-29 管理车辆内部的清洁度的方法、装置及计算机可读介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200094603A KR20220014681A (ko) 2020-07-29 2020-07-29 자동차 및 그를 위한 실내 청결 관리 방법

Publications (1)

Publication Number Publication Date
KR20220014681A true KR20220014681A (ko) 2022-02-07

Family

ID=80003379

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200094603A KR20220014681A (ko) 2020-07-29 2020-07-29 자동차 및 그를 위한 실내 청결 관리 방법

Country Status (3)

Country Link
US (1) US11270570B2 (ko)
KR (1) KR20220014681A (ko)
CN (1) CN114092921A (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10795356B2 (en) * 2017-08-31 2020-10-06 Uatc, Llc Systems and methods for determining when to release control of an autonomous vehicle
JP7094929B2 (ja) * 2019-09-20 2022-07-04 本田技研工業株式会社 車両点検装置、及び車両点検システム
KR20220006895A (ko) * 2020-07-09 2022-01-18 현대자동차주식회사 자동차 및 그를 위한 실내 청결 관리 방법
CN114863669B (zh) * 2022-04-29 2023-04-25 湖南喜宝达信息科技有限公司 一种共享车辆及其车筐遗留物件的监控方法、存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8370030B1 (en) * 2009-09-04 2013-02-05 Michael H Gurin System for a shared vehicle involving feature adjustment, camera-mediated inspection, predictive maintenance, and optimal route determination
US10509974B2 (en) * 2017-04-21 2019-12-17 Ford Global Technologies, Llc Stain and trash detection systems and methods
WO2019014874A1 (en) * 2017-07-19 2019-01-24 Bayerische Motoren Werke Aktiengesellschaft APPARATUS, SERVER AND METHOD FOR SHARING VEHICLE
US11106927B2 (en) * 2017-12-27 2021-08-31 Direct Current Capital LLC Method for monitoring an interior state of an autonomous vehicle
JP2019168815A (ja) * 2018-03-22 2019-10-03 東芝メモリ株式会社 情報処理装置、情報処理方法、及び情報処理プログラム
JP7094929B2 (ja) * 2019-09-20 2022-07-04 本田技研工業株式会社 車両点検装置、及び車両点検システム
US11017248B1 (en) * 2019-12-18 2021-05-25 Waymo Llc Interior camera system for a self driving car

Also Published As

Publication number Publication date
US11270570B2 (en) 2022-03-08
US20220036720A1 (en) 2022-02-03
CN114092921A (zh) 2022-02-25

Similar Documents

Publication Publication Date Title
KR20220014681A (ko) 자동차 및 그를 위한 실내 청결 관리 방법
US10059342B2 (en) Global standard template creation, storage, and modification
CN106548623B (zh) 自主车辆未授权乘客或对象检测
US20190279447A1 (en) Automatic vehicle diagnostic detection and communication
US20140309866A1 (en) Building profiles associated with vehicle users
DE112012004785T5 (de) Merkmalerkennung zum Konfigurieren einer Fahrzeugkonsole und zugeordnete Vorrichtungen
JP7135656B2 (ja) 乗車マナー評価装置、乗車マナー評価システム、乗車マナー評価方法、及び乗車マナー評価用コンピュータプログラム
JP2019087045A (ja) ドライバレス輸送システム
US20170248441A1 (en) Assistance When Driving a Vehicle
EP2817787A1 (en) Vehicle intruder alert detection and indication
US20190272755A1 (en) Intelligent vehicle and method for using intelligent vehicle
CN113343741A (zh) 用于处理自动驾驶车辆中的遗落物品的系统和方法
KR20210149476A (ko) 자동차 및 그를 위한 실내 청결 관리 방법
KR20220003320A (ko) 자동차 및 그를 위한 실내 청결 관리 방법
US20220289075A1 (en) System and method for detecting objects left behind by using heated resistive filament in a vehicle
KR20220006895A (ko) 자동차 및 그를 위한 실내 청결 관리 방법
WO2023210433A1 (ja) 異常検出システム及び異常検出方法
CN113581134A (zh) 车辆及其清洁方法、装置以及存储介质和车载控制器