KR102109647B1 - 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템 및 방법 - Google Patents

딥러닝을 이용한 대중교통수단의 승하차 계수 시스템 및 방법 Download PDF

Info

Publication number
KR102109647B1
KR102109647B1 KR1020190158875A KR20190158875A KR102109647B1 KR 102109647 B1 KR102109647 B1 KR 102109647B1 KR 1020190158875 A KR1020190158875 A KR 1020190158875A KR 20190158875 A KR20190158875 A KR 20190158875A KR 102109647 B1 KR102109647 B1 KR 102109647B1
Authority
KR
South Korea
Prior art keywords
counting
passenger
getting
fare
information
Prior art date
Application number
KR1020190158875A
Other languages
English (en)
Inventor
김동기
Original Assignee
주식회사 핀텔
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 핀텔 filed Critical 주식회사 핀텔
Priority to KR1020190158875A priority Critical patent/KR102109647B1/ko
Application granted granted Critical
Publication of KR102109647B1 publication Critical patent/KR102109647B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07B—TICKET-ISSUING APPARATUS; FARE-REGISTERING APPARATUS; FRANKING APPARATUS
    • G07B15/00—Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points
    • G07B15/02—Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points taking into account a variable factor such as distance or time, e.g. for passenger transport, parking systems or car rental systems
    • G06K9/00362—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Evolutionary Computation (AREA)
  • Molecular Biology (AREA)
  • Artificial Intelligence (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Business, Economics & Management (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Finance (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Devices For Checking Fares Or Tickets At Control Points (AREA)

Abstract

본 발명은 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템 및 방법에 관한 것으로, 해결하고자 하는 기술적 과제는 딥러닝 알고리즘과 계수기를 함께 활용하여 대중교통수단의 승하차 승객 수를 정확히 카운팅하고, 카운팅 된 정보를 규칙적으로 보고하여 정확한 정보 취합을 이루는데 있다.
일례로, 대중교통수단의 출입문 상부 측에 설치되고, 가상 승하차 라인을 이용하여 승객의 승하차를 카운팅하는 계수 카메라; 대중교통수단에 설치되고, 교통카드의 체킹을 통해 과금 시스템과 연동하여 승객의 요금징수를 처리하는 요금징수 단말기; 대중교통수단의 출입문을 향해 설치되고, 딥러닝 알고리즘을 이용하여 승하차하는 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하여 승객의 승차적용요금을 판별하고, 승객의 이동궤적을 추적하여 상기 승차적용요금에 대한 정보를 상기 요금징수 단말기로 제공하는 얼굴인식 카메라; 및 대중교통수단에 설치되고, 상기 계수 카메라 및 상기 얼굴인식 카메라를 통해 처리된 정보를 취합하여 역에 설치된 중앙서버로 전송하는 관리서버를 포함하는 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템을 개시한다.

Description

딥러닝을 이용한 대중교통수단의 승하차 계수 시스템 및 방법{SYSTEM FOR COUNTING RIDE OF PUBLIC TRANSPORTATION USING DEEP LEARNING AND METHOD THEREOF}
본 발명의 실시예는 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템 및 방법에 관한 것이다.
최근, 자동차의 급격한 증가와 도로 교통의 정체 등 타 육상교통 수단이 한계에 이르면서 전기철도에 대한 수요가 나날이 증가하고 확장되는 추세이다.
이러한 추세에 따라 트램(Tram)과 같은 전기철도에 대한 수요가 점차 증가되어 공급이 확대되고 있다.
이러한 트램은 도로 상의 일부에 부설한 레일 위를 주행하는 노면전차로, 일반적인 전철과 달리 승하차 시 버스와 유사한 요금징수 시스템을 갖추고 있으나, 탑승자 수가 버스와 비교하여 상당하기 때문에 승객의 승하차 수를 정확히 카운팅하는 것이 중요하다.
종래의 대중교통수단에서 승객의 승하차를 계수하는 장치는, 송수신부를 가지는 적외선 센서를 사용하여 승객을 검출하거나, 영상 카메라로부터 획득한 영상 데이터를 신호 처리하여 승객을 검출하는 방법이 사용되었다.
그러나 이와 같이 송수신부를 가지는 적외선 센서 등을 이용하는 방법은, 승객이 겹쳐서 지나가는 경우 이를 분리해내지 못하여 정확도가 낮은 문제가 있다.
이와 같이, 적외선 센서 등의 방식을 사용하는 경우 승객의 승하차 상황에 따라 부정확한 카운트가 이루어지거나, 영상 카메라를 사용하는 경우에는 구현의 복잡성으로 인하여 비용이 높아지는 단점이 있다.
등록특허공보 제10-1939350호(등록일자: 2019년01월10일) 공개특허공보 제10-2011-0038983호(공개일자: 2011년04월15일)
본 발명의 실시예는, 딥러닝 알고리즘과 계수기를 함께 활용하여 대중교통수단의 승하차 승객 수를 정확히 카운팅하고, 카운팅 된 정보를 규칙적으로 보고하여 정확한 정보 취합을 이룰 수 있는 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템 및 방법을 제공한다.
본 발명의 실시예에 따른 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템은, 대중교통수단의 출입문 상부 측에 설치되고, 가상 승하차 라인을 이용하여 승객의 승하차를 카운팅하는 계수 카메라; 대중교통수단에 설치되고, 교통카드의 체킹을 통해 과금 시스템과 연동하여 승객의 요금징수를 처리하는 요금징수 단말기; 대중교통수단의 출입문을 향해 설치되고, 딥러닝 알고리즘을 이용하여 승하차하는 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하여 승객의 승차적용요금을 판별하고, 승객의 이동궤적을 추적하여 상기 승차적용요금에 대한 정보를 상기 요금징수 단말기로 제공하는 얼굴인식 카메라; 및 대중교통수단에 설치되고, 상기 계수 카메라 및 상기 얼굴인식 카메라를 통해 처리된 정보를 취합하여 역에 설치된 중앙서버로 전송하는 관리서버를 포함한다.
또한, 상기 계수 카메라는, 대중교통수단의 출입문을 가로지르며 서로 나란히 순차적으로 배열되는 제1 가상 감지 라인, 제2 가상 감지 라인 및 제3 가상 감지 라인을 형성하고, 대중교통수단의 출입문 영역에 대하여 촬영된 영상 중 승객 영역의 중심지점을 특정하고, 상기 중심지점이 상기 제1 가상 감지 라인, 제2 가상 감지 라인 및 제3 가상 감지 라인을 통과한 감지 순서와 조합에 따라 승차와 하차를 판별하고, 판별 결과에 따라 승하차 수를 카운팅 할 수 있다.
또한, 대중교통수단의 출입문의 상부 측에 설치되고, 출입문의 개폐상태를 감지하고, 감지된 개폐상태에 따라 상기 계수 카메라의 계수 동작을 시작하기 위한 제어 신호를 상기 계수 카메라로 출력하는 거리 센서를 더 포함할 수 있다.
또한, 상기 얼굴인식 카메라는, 승하차하는 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하고, 인식된 승객의 골격에 따른 신장, 얼굴 및 성별에 따라 미취학아동, 어린이, 청소년 및 성인에 따른 승차적용요금을 판별하는 승차적용요금 판별부; 및 상기 계수 카메라를 통해 승차로 카운팅 된 승객의 이동궤적을 추적하여 상기 요금징수 단말기에 교통카드를 태깅하는 동작이 인식되면, 상기 승차적용요금 판별부를 통해 판별된 승객의 승차적용요금정보를 상기 요금징수 단말기로 전송하는 승차적용요금정보 전송부를 포함할 수 있다.
또한, 상기 요금징수 단말기는, 상기 얼굴인식 카메라로부터 수신된 승차적용요금정보와 실제 교통카드의 결제요금이 상이한 경우 상기 얼굴인식 카메라에 해당 승차적용요금정보와 매칭되는 승객의 얼굴인식정보를 상기 관리서버로 전달하도록 요청할 수 있다.
또한, 상기 얼굴인식 카메라는, 승객의 이동궤적의 추적을 통해 승객의 하차 시 상기 요금징수 단말기에 교통카드를 태깅하지 않은 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하고, 인식된 해당 승객의 이동궤적의 추적에 따른 해당 승객의 재 승차 시 상기 계수 카메라로 카운팅 취소 신호를 전달하여 해당 승객의 재 승차 시 노카운팅되도록 하되, 해당 승객의 수에 따른 노카운팅 개수 정보를 포함된 카운팅 취소 신호를 전달하는 승하차 예외 상황 판별부를 더 포함할 수 있다.
또한, 상기 관리서버는, 상기 계수 카메라 및 상기 얼굴인식 카메라로부터 취합된 정보를 리스트화하고, 대중교통수단이 미리 지정된 역에 위치한 경우 상기 중앙서버에 해당 리스트정보를 자동으로 업로드 할 수 있다.
본 발명의 다른 실시예에 따른 딥러닝을 이용한 대중교통수단의 승하차 계수 방법은, 대중교통수단의 출입문 상부 측에 설치된 계수 카메라가, 가상 승하차 라인을 이용하여 승객의 승하차를 카운팅하는 승하차 계수 단계; 대중교통수단에 설치된 요금징수 단말기에 교통카드를 체킹하는 경우 과금 시스템과 연동하여 승객의 요금징수를 처리하는 요금징수 처리 단계; 대중교통수단의 출입문을 향해 설치된 얼굴인식 카메라가, 딥러닝 알고리즘을 이용하여 승하차하는 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하여 승객의 승차적용요금을 판별하고, 승객의 이동궤적을 추적하여 상기 승차적용요금에 대한 정보를 상기 요금징수 단말기로 제공하는 승객 인식 단계; 및 대중교통수단에 설치된 관리서버가, 상기 계수 카메라 및 상기 얼굴인식 카메라를 통해 처리된 정보를 취합하여 역에 설치된 중앙서버로 전송하는 정보 업데이트 단계를 포함한다.
또한, 상기 승하차 계수 단계는, 상기 계수 카메라가, 대중교통수단의 출입문을 가로지르며 서로 나란히 순차적으로 배열되는 제1 가상 감지 라인, 제2 가상 감지 라인 및 제3 가상 감지 라인을 형성하고, 대중교통수단의 출입문 영역에 대하여 촬영된 영상 중 승객 영역의 중심지점을 특정하고, 상기 중심지점이 상기 제1 가상 감지 라인, 제2 가상 감지 라인 및 제3 가상 감지 라인을 통과한 감지 순서와 조합에 따라 승차와 하차를 판별하고, 판별 결과에 따라 승하차 수를 카운팅 할 수 있다.
또한, 상기 승하차 계수 단계는, 대중교통수단의 출입문의 상부 측에 설치된 거리 센서가, 출입문의 개폐상태를 감지하고, 감지된 개폐상태에 따라 상기 계수 카메라의 계수 동작을 시작하기 위한 제어 신호를 상기 계수 카메라로 출력할 때 수행될 수 있다.
또한, 상기 승객 인식 단계는, 승차적용요금 판별부가 승하차하는 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하고, 인식된 승객의 골격에 따른 신장, 얼굴 및 성별에 따라 미취학아동, 어린이, 청소년 및 성인에 따른 승차적용요금을 판별하는 승차적용요금 판별 단계; 및 승차적용요금정보 전송부가, 상기 계수 카메라를 통한 승차로 카운팅 된 승객의 이동궤적을 추적하여 상기 요금징수 단말기에 교통카드를 태깅하는 동작을 인식하면, 상기 승차적용요금 판별 단계를 통해 판별된 승객의 승차적용요금정보를 상기 요금징수 단말기로 전송하는 승차적용요금정보 전송 단계를 포함할 수 있다.
또한, 상기 요금징수 처리 단계는, 상기 얼굴인식 카메라로부터 수신된 승차적용요금정보와 실제 교통카드의 결제요금이 상이한 경우 상기 얼굴인식 카메라에 해당 승차적용요금정보와 매칭되는 승객의 얼굴인식정보를 상기 관리서버로 전달하도록 요청할 수 있다.
또한, 상기 승객 인식 단계는, 승하차 예외 상황 판별부가, 승객의 이동궤적의 추적을 통해 승객의 하차 시 상기 요금징수 단말기에 교통카드를 태깅하지 않은 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하고, 인식된 해당 승객의 이동궤적의 추적에 따른 해당 승객의 재 승차 시 상기 계수 카메라로 카운팅 취소 신호를 전달하여 해당 승객의 재 승차 시 노카운팅되도록 하되, 해당 승객의 수에 따른 노카운팅 개수 정보를 포함된 카운팅 취소 신호를 전달하는 승하차 예외 상황 판별 단계를 더 포함할 수 있다.
또한, 상기 정보 업데이트 단계는, 상기 계수 카메라 및 상기 얼굴인식 카메라로부터 취합된 정보를 리스트화하고, 대중교통수단이 미리 지정된 역에 위치한 경우 상기 중앙서버에 해당 리스트정보를 자동으로 업로드 할 수 있다.
본 발명에 따르면, 딥러닝 알고리즘과 계수기를 함께 활용하여 대중교통수단의 승하차 승객 수를 정확히 카운팅하고, 카운팅 된 정보를 규칙적으로 보고하여 정확한 정보 취합을 이룰 수 있는 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템 및 방법을 제공할 수 있다.
도 1은 본 발명의 실시예에 따른 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템의 전체 구성과 그 관계를 나타낸 개요도이다.
도 2는 본 발명의 실시예에 따른 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템의 전체 구성을 나타낸 블록도이다.
도 3은 본 발명의 실시예에 따른 얼굴인식 카메라의 세부 구성을 나타낸 블록도이다.
도 4는 본 발명의 실시예에 따른 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템의 위치 구성을 나타낸 도면이다.
도 5는 본 발명의 실시예에 따른 계수 카메라를 통한 승하차 계수 방식을 설명하기 위해 나타낸 계수 실행 화면이다.
도 6 및 도 7은 본 발명의 실시예에 따른 승객의 골격 및 얼굴 검출 및 인식 방식을 설명하기 위해 나타낸 인식 화면이다.
도 8은 본 발명의 실시예에 따른 승하차 예외 상황 판별부의 동작 방식을 설명하기 위해 나타낸 도면이다.
도 9는 본 발명의 실시예에 따른 관리서버에서 중앙서버로 업로드 된 정보를 나타낸 도면이다.
도 10은 본 발명의 다른 실시예에 따른 딥러닝을 이용한 대중교통수단의 승하차 계수 방법을 나타낸 흐름도이다.
도 11은 본 발명의 다른 실시예에 따른 승객 인식 방법을 나타낸 흐름도이다.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "...부", "모듈" 등의 용어는 적어도 하나 이상의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.
아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
도 1은 본 발명의 실시예에 따른 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템의 전체 구성과 그 관계를 나타낸 개요도이고, 도 2는 본 발명의 실시예에 따른 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템의 전체 구성을 나타낸 블록도이고, 도 3은 본 발명의 실시예에 따른 얼굴인식 카메라의 세부 구성을 나타낸 블록도이고, 도 4는 본 발명의 실시예에 따른 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템의 위치 구성을 나타낸 도면이고, 도 5는 본 발명의 실시예에 따른 계수 카메라를 통한 승하차 계수 방식을 설명하기 위해 나타낸 계수 실행 화면이고, 도 6 및 도 7은 본 발명의 실시예에 따른 승객의 골격 및 얼굴 검출 및 인식 방식을 설명하기 위해 나타낸 인식 화면이며, 도 8은 본 발명의 실시예에 따른 승하차 예외 상황 판별부의 동작 방식을 설명하기 위해 나타낸 도면이며, 도 9는 본 발명의 실시예에 따른 관리서버에서 중앙서버로 업로드 된 정보를 나타낸 도면이다.
도 1 및 도 2를 참조하면, 본 발명의 실시예에 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템(100)은 계수 카메라(110), 요금징수 단말기(120), 얼굴인식 카메라(130), 관리서버(140) 및 거리 센서(150)를 포함한다.
이하에서 설명하는 대중교통수단은 트램(Tram)을 일례로 하여 설명하며, 본 실시예에서는 대중교통수단을 트램으로만 한정하는 것이 아니라, 버스, 지하철, 경전철 등 다양한 대중교통수단이 적용될 수 있다.
상기 계수 카메라(110)는, 트램의 출입문 상부 측에 설치되고, 가상 승하차 라인을 이용하여 승객의 승하차를 카운팅 할 수 있다.
예를 들어, 도 5에 도시된 바와 같이 계수 카메라(110)는, 트램의 출입문을 가로지르며 서로 나란히 순차적으로 배열되는 제1 가상 감지 라인(SL1), 제2 가상 감지 라인(SL2) 및 제3 가상 감지 라인(SL3)을 형성하고, 트램의 출입문 영역에 대하여 촬영된 영상 중 승객 영역의 중심지점(A1, A2)을 특정수 있다. 여기서, 제1 가상 감지 라인(SL1), 제2 가상 감지 라인(SL2) 및 제3 가상 감지 라인(SL3)은 이러한 순으로 출입문 쪽에 가깝게 배열되며, 중심지점(A1, A2)는 검출된 승객의 머리 영상 영역 또는 승객 몸체 영역의 중심부분을 의미하며, 이러한 지점이 제1 가상 감지 라인(SL1), 제2 가상 감지 라인(SL2) 및 제3 가상 감지 라인(SL3)에 의해 감지될 수 있다.
또한, 계수 카메라(110)는, 가상의 중심지점(A1, A2)이 제1 가상 감지 라인(SL1), 제2 가상 감지 라인(SL2) 및 제3 가상 감지 라인(SL3)을 통과한 감지 순서와 조합에 따라 승차와 하차를 판별하고, 판별 결과에 따라 승하차 수를 카운팅 할 수 있다.
예를 들어, 중심지점 A1이 검출되면, 검출된 중심지점 A1의 이동궤적을 추적하고, 그 이동궤적 상에 중심지점 A1이 제1 가상 감지 라인(SL1), 제2 가상 감지 라인(SL2) 및 제3 가상 감지 라인(SL3) 순으로 이동하는 것이 검출되면, 중심지점 A1에 해당하는 승객은 승차로 판별되어 승차 계수를 올릴 수 있다.
이러한 계수 카메라(110)는 스테레오 카메라를 포함할 수 있으나, 본 실시예에서는 계수 카메라(110)를 스테레오 카메라로만 한정하는 것이 아니라, 영상 감지 방식이 적용되는 다양한 계수 장치가 포함될 수 있다.
상기 요금징수 단말기(120)는, 트램에 설치되고, 교통카드의 체킹을 통해 과금 시스템(10)과 연동하여 승객의 요금징수를 처리할 수 있다. 이러한 요금징수 단말기(120)는 RFID 리더기를 구비하며 승객의 후불제 교통카드, 충전식 교통카드 등을 태깅을 통해 인식하여 과금 시스템(10)에 해당 카드 정보를 전달하여 요금 징수 처리를 수행할 수 있도록 하며, 결제자 정보, 요금 결제 금액 정보, 결제 시간 등의 정보가 관리서버(140)로 전송할 수 있다.
한편, 요금징수 단말기(120)의 화면은 얼굴인식 카메라(130)에 의해 보이도록 배치될 수 있으며, 적어도 하나 이상이 설치될 수 있으며, 승차칸 또는 출입문 마다 설치될 수 있다.
상기 얼굴인식 카메라(130)는, 트램의 출입문을 향해 설치되고, 딥러닝 알고리즘을 이용하여 승하차하는 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하여 승객의 승차적용요금을 판별하고, 승객의 이동궤적을 추적하여 해당 승차적용요금에 대한 정보를 요금징수 단말기(120)로 제공할 수 있다.
이를 위해, 얼굴인식 카메라(130)는 승차적용요금 판별부(131)와 승차적용요금정보 전송부(132)를 포함할 수 있으며, 추가적으로 승하차 예외 상황 판별부(133)를 포함할 수 있다.
상기 승차적용요금 판별부(131)는, 딥러닝 알고리즘을 이용하여 승하차하는 승객의 골격(구체적으로는 골격에 따른 신장), 얼굴 및 성별을 검출 및 인식하고, 인식된 승객의 골격에 따른 신장, 얼굴 및 성별에 따라 미취학아동, 어린이, 청소년 및 성인에 따른 승차적용요금을 판별할 수 있다.
예를 들어, 도 6에 도시된 바와 같이 승하차하는 승객의 골격을 검출하고 해당 승객에 대한 신장을 검출하여 인식할 수 있으며, 도 7에 도시된 바와 같이, 승객의 얼굴의 특징점을 추출하여 얼굴 자체를 인식할 뿐만 아니라, 이를 기반으로 성별을 인식할 수 있다. 이에 따라, 120cm 이상부터의 신장을 검출할 수 있으며, 가령 아동의 경우 8세 아동 평균 신장(133cm)를 기준으로 8세 이하의 미취학아동인지 어린이 혹은 청소년인지, 얼굴과 성별에 따른 평균 신장 값을 기준으로 청소년 또는 성인을 구분할 수 있으며, 이에 따라 해당 승객에 맞는 승차적용요금을 판별할 수 있다.
이러한 승차적용요금 판별부(131)는, 승객에 대한 검지를 위해서는 딥러닝 학습 방식 중 CNN(Convolutional neural network) 방식을 이용하여 승객을 탐지할 수 있으며, 이때 학습 데이터는 머리 색깔 별, 머리카락을 종류(펌), 모자, 의상에 따라 다양한 머리 형태로서 이러한 학습 데이터를 기반으로 한 학습이 추가적으로 진행될 수 있다.
상기 승차적용요금정보 전송부(132)는, 계수 카메라(110)를 통해 승차로 카운팅 된 승객의 이동궤적을 추적하여 요금징수 단말기(120)에 교통카드를 태깅하는 동작이 인식되면, 승차적용요금 판별부(131)를 통해 판별된 승객의 승차적용요금정보를 요금징수 단말기(120)로 전송할 수 있다.
즉, 승차 계수된 승객에 대한 이동궤적을 추적한 결과 요금징수 단말기(120)에 교통카드를 태깅하는 동작이 인식되면, 해당 타이밍에 해당 승객이 부가해야 할 요금과 적용 분류(미취학아동, 어린이, 청소년 및 성인)한 정보를 요금징수 단말기(120)로 주어 정확한 요금징수가 이루어지도록 한다.
이에 따라, 요금징수 단말기(120)는, 얼굴인식 카메라(130)로부터 수신된 승차적용요금정보와 실제 교통카드의 결제요금이 상이한 경우 얼굴인식 카메라(130)에 해당 승차적용요금정보와 매칭되는 승객의 얼굴인식정보를 관리서버(140)로 전달하도록 요청할 수 있다.
즉, 승차적용요금 판별부(131)를 통해 판별된 승차적용요금과 요금징수 단말기(120)에서 실제로 인식된 대상의 요금이 상이할 경우, 즉 성인으로 판별되었으나 청소년 교통카드가 인식되는 경우, 부정행위징후 승객으로 체크되고, 해당 승객에 대한 인식정보(신장, 얼굴, 성별, 카드정보, 태깅시간정보, 승차 역 위치정보 등)을 관리서버(140)에 전송하여, 추후 관리서버(140)가 중앙서버(20)로 보고할 수 있도록 한다.
또는, 요금징수 단말기(120)에서 음성이나 알림음을 출력하여 정확한 요금징수를 요구하도록 가이드 할 수 있다.
상기 승하차 예외 상황 판별부(133)는, 승객의 이동궤적의 추적을 통해 승객의 하차 시 요금징수 단말기(120)에 교통카드를 태깅하지 않은 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하고, 인식된 해당 승객의 이동궤적의 추적에 따른 해당 승객의 재 승차 시 계수 카메라(110)로 카운팅 취소 신호를 전달하여 해당 승객의 재 승차 시 노카운팅되도록 하되, 해당 승객의 수에 따른 노카운팅 개수 정보를 포함된 카운팅 취소 신호를 전달할 수 있다.
예를 들어, 도 8에 도시된 바와 같이, 얼굴인식 카메라(130)는 출입문 근처의 승객에 대한 이동궤적을 추적하고, 추적 결과 태깅을 하지 않은 상태로 출입문이 열릴 때 하차를 시도하는 것으로 인식되는 경우(①), 하차 시 승객에 대한 특징점과 승차 시 검출된 특징점 즉 골격, 신장, 얼굴, 성별, 뿐만 아니라 머리 색깔 별, 머리카락을 종류(펌), 모자, 의상 등에 대한 특징점을 비교(②)하여 승객을 특정할 수 있다(③). 얼굴인식 카메라(130)는 승차 시 승객에 대한 특징점을 검출 및 인식하게 되면 해당 승객에 대한 인식번호 혹은 식별번호를 부여해 각 승객을 구분할 수 있다.
이때, 특정된 승객이 그대로 하차하게 되면 하차 시 카드 미 태깅으로 기록되지만, 탑승인원이 증가하는 출퇴근시간의 경우 트램의 안쪽에 있는 승객이 하차하기 위해 출입문 근처에 있는 승객이 잠시 하차하였다가 승차하는 경우가 종종 발생되는데, 본 실시예에서는 이러한 승하차 예외 상황을 판별하여 해당 승객이 재 승차할 때 승차 계수를 별도로 하지 않으며, 무임승차로 판단하지 않도록 하여 해당 승객에 대한 피해를 예방할 수 있다.
이를 위해, 승하차 예외 상황 판별부(133)는 얼굴인식 카메라(130)를 통해 특정된 승객이 재 승차함을 인식(④)하게 되면, 계수 카메라(110)에 특정된 승객에 대한 승차 카운팅을 생략할 수 있도록 지시하고, 요금징수 단말기(120) 또한 태깅하지 않아도 무임승차로 기록되지 않도록 지시할 수 있다. 이때, 특정된 승객의 승차 카운팅의 생략을 위해서는 계수 카메라(110) 또한 어떠한 승객에 대한 승차 카운팅을 생략하는지 알고 있어야 하므로, 승하차 예외 상황 판별부(133)가 특정된 승객 인원과 해당 인원이 승차 인식 타이밍에 맞춰 계수 카메라(110) 및 요금징수 단말기(120)에 신호를 주도록 동작하는 것이 바람직하다.
상기 관리서버(140)는, 트램에 설치되고, 계수 카메라(110) 및 얼굴인식 카메라(130)를 통해 처리된 정보를 취합하여 역에 설치된 중앙서버(20)로 전송할 수 있다.
좀 더 구체적으로, 관리서버(140)는, 계수 카메라(110) 및 얼굴인식 카메라(130)로부터 취합된 정보를 리스트화하고, 트램이 미리 지정된 역(일반적으로 종착역임)에 위치한 경우 중앙서버(20)에 해당 리스트정보를 무선 인터넷 또는 보안 네트워크를 통해 자동으로 업로드 할 수 있다.
예를 들어, 도 9에 도시된 바와 같이 개폐 검지기와 계수기 즉 본 실시예의 계수 카메라(110)의 설정정보, 해당 트램의 상황 정보(역 정보, 출입문 상태, 승차인원, 하차인원, 탑승인원, 무임승차인원, 누적무임승차인원 등)와, 승하차 시간, 승하차 정보 등의 로그 정보를 제공할 수 있다.
상기 거리 센서(150)는, 트램의 출입문의 상부 측에 설치되고, 출입문의 개폐상태를 감지하고, 감지된 개폐상태에 따라 계수 카메라(110)의 계수 동작을 시작하기 위한 제어 신호를 계수 카메라(110)로 출력할 수 있다.
예를 들어, 거리 센서(150)는 트램의 출입문의 열림과 닫힘을 감지하고, 열림을 감지할 경우 계수 카메라(110)의 동작이 실행되도록 하는 제어 신호를 출력하며, 해당 출입문의 닫힘일 감지되는 경우 미리 설정된 시간 이후 계수 카메라(110)의 동작이 중지되도록 하는 제어 신호를 출력할 수 있다. 이에 따라, 트램의 출입문이 닫힌 상황에서 불필요한 승차 계수 동작을 차단할 수 있다.
도 10은 본 발명의 실시예에 따른 딥러닝을 이용한 대중교통수단의 승하차 계수 방법을 나타낸 흐름도이며, 도 11은 본 발명의 실시예에 따른 승객 인식 방법을 나타낸 흐름도이다.
이하의 본 실시예에 따른 대중교통수단의 승하차 계수 방법은 상술한 대중교통수단의 승하차 계수 시스템에 의한 방법으로, 도 1 내지 도 9와 함께 보다 상세히 설명한다.
도 10을 참조하면, 본 발명의 실시예에 따른 딥러닝을 이용한 대중교통수단의 승하차 계수 방법(S100)은 승하차 계수 단계(S110), 요금징수 처리 단계(S120), 승객 인식 단계(S130) 및 정보 업데이트 단계(S140)를 포함한다.
상기 승하차 계수 단계(S110)에서는, 트램의 출입문 상부 측에 설치된 계수 카메라가, 가상 승하차 라인을 이용하여 승객의 승하차를 카운팅 할 수 있다.
예를 들어, 승하차 계수 단계(S110)에서는, 계수 카메라(110)를 이용해 트램의 출입문을 가로지르며 서로 나란히 순차적으로 배열되는 제1 가상 감지 라인(SL1), 제2 가상 감지 라인(SL2) 및 제3 가상 감지 라인(SL3)을 형성하고, 트램의 출입문 영역에 대하여 촬영된 영상 중 승객 영역의 중심지점(A1, A2)을 특정수 있다. 여기서, 제1 가상 감지 라인(SL1), 제2 가상 감지 라인(SL2) 및 제3 가상 감지 라인(SL3)은 이러한 순으로 출입문 쪽에 가깝게 배열되며, 중심지점(A1, A2)는 검출된 승객의 머리 영상 영역 또는 승객 몸체 영역의 중심부분을 의미하며, 이러한 지점이 제1 가상 감지 라인(SL1), 제2 가상 감지 라인(SL2) 및 제3 가상 감지 라인(SL3)에 의해 감지될 수 있다.
또한, 승하차 계수 단계(S110)에서는, 계수 카메라(110)를 이용해 가상의 중심지점(A1, A2)이 제1 가상 감지 라인(SL1), 제2 가상 감지 라인(SL2) 및 제3 가상 감지 라인(SL3)을 통과한 감지 순서와 조합에 따라 승차와 하차를 판별하고, 판별 결과에 따라 승하차 수를 카운팅 할 수 있다.
예를 들어, 중심지점 A1이 검출되면, 검출된 중심지점 A1의 이동궤적을 추적하고, 그 이동궤적 상에 중심지점 A1이 제1 가상 감지 라인(SL1), 제2 가상 감지 라인(SL2) 및 제3 가상 감지 라인(SL3) 순으로 이동하는 것이 검출되면, 중심지점 A1에 해당하는 승객은 승차로 판별되어 승차 계수를 올릴 수 있다.
이러한 승하차 계수 단계(S110)는, 트램의 출입문의 상부 측에 설치된 거리 센서(150)가, 출입문의 개폐상태를 감지하고, 감지된 개폐상태에 따라 계수 카메라의 계수 동작을 시작하기 위한 제어 신호를 계수 카메라로 출력할 때 수행될 수 있다.
상기 요금징수 처리 단계(S120)에서는, 트램에 설치된 요금징수 단말기에 교통카드를 체킹하는 경우 과금 시스템(10)과 연동하여 승객의 요금징수를 처리할 수 있다.
상기 승객 인식 단계(S130)에서는, 트램의 출입문을 향해 설치된 얼굴인식 카메라가, 딥러닝 알고리즘을 이용하여 승하차하는 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하여 승객의 승차적용요금을 판별하고, 승객의 이동궤적을 추적하여 승차적용요금에 대한 정보를 요금징수 단말기(120)로 제공할 수 있다.
이를 위해, 승객 인식 단계(S130)는 승차적용요금 판별 단계(S131), 승차적용요금정보 전송 단계(S132) 및 승하차 예외 상황 판별 단계(S133)를 포함할 수 있다.
상기 승차적용요금 판별 단계(S131)에서는, 승차적용요금 판별부가 승하차하는 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하고, 인식된 승객의 골격에 따른 신장, 얼굴 및 성별에 따라 미취학아동, 어린이, 청소년 및 성인에 따른 승차적용요금을 판별할 수 있다.
예를 들어, 도 6에 도시된 바와 같이 승하차하는 승객의 골격을 검출하고 해당 승객에 대한 신장을 검출하여 인식할 수 있으며, 도 7에 도시된 바와 같이, 승객의 얼굴의 특징점을 추출하여 얼굴 자체를 인식할 뿐만 아니라, 이를 기반으로 성별을 인식할 수 있다. 이에 따라, 120cm 이상부터의 신장을 검출할 수 있으며, 가령 아동의 경우 8세 아동 평균 신장(133cm)를 기준으로 8세 이하의 미취학아동인지 어린이 혹은 청소년인지, 얼굴과 성별에 따른 평균 신장 값을 기준으로 청소년 또는 성인을 구분할 수 있으며, 이에 따라 해당 승객에 맞는 승차적용요금을 판별할 수 있다.
이러한 승차적용요금 판별 단계(S131)에서는, 승객에 대한 검지를 위해 딥러닝 학습 방식 중 CNN(Convolutional neural network) 방식을 이용하여 승객을 탐지할 수 있으며, 이때 학습 데이터는 머리 색깔 별, 머리카락을 종류(펌), 모자, 의상에 따라 다양한 머리 형태로서 이러한 학습 데이터를 기반으로 한 학습이 추가적으로 진행될 수 있다.
상기 승차적용요금정보 전송 단계(S132)에서는, 승차적용요금정보 전송부(132)가, 계수 카메라(110)를 통해 승차로 카운팅 된 승객의 이동궤적을 추적하여 요금징수 단말기(120)에 교통카드를 태깅하는 동작이 인식되면, 승차적용요금 판별 단계(S131)를 통해 판별된 승객의 승차적용요금정보를 요금징수 단말기(120)로 전송할 수 있다.
즉, 승차 계수된 승객에 대한 이동궤적을 추적한 결과 요금징수 단말기(120)에 교통카드를 태깅하는 동작이 인식되면, 해당 타이밍에 해당 승객이 부가해야 할 요금과 적용 분류(미취학아동, 어린이, 청소년 및 성인)한 정보를 요금징수 단말기(120)로 주어 정확한 요금징수가 이루어지도록 한다.
이에 따라, 요금징수 처리 단계(S120)에서는, 요금징수 단말기(120)에 의해 얼굴인식 카메라(130)로부터 수신된 승차적용요금정보와 실제 교통카드의 결제요금이 상이한 것으로 판별되는 경우 얼굴인식 카메라(130)에 해당 승차적용요금정보와 매칭되는 승객의 얼굴인식정보를 관리서버(140)로 전달하도록 요청할 수 있다.
또는, 요금징수 처리 단계(S120)에서는, 요금징수 단말기(120)를 통해 음성이나 알림음을 출력하여 정확한 요금징수를 요구하도록 가이드 할 수 있다.
상기 승하차 예외 상황 판별 단계(S133)에서는, 승하차 예외 상황 판별부(133)가, 승객의 이동궤적의 추적을 통해 승객의 하차 시 요금징수 단말기(120)에 교통카드를 태깅하지 않은 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하고, 인식된 해당 승객의 이동궤적의 추적에 따른 해당 승객의 재 승차 시 계수 카메라(110)로 카운팅 취소 신호를 전달하여 해당 승객의 재 승차 시 노카운팅되도록 하되, 해당 승객의 수에 따른 노카운팅 개수 정보를 포함된 카운팅 취소 신호를 전달할 수 있다.
예를 들어, 도 8에 도시된 바와 같이, 승하차 예외 상황 판별 단계(S133)에서는 얼굴인식 카메라(130)가 출입문 근처의 승객에 대한 이동궤적을 추적하고, 추적 결과 태깅을 하지 않은 상태로 출입문이 열릴 때 하차를 시도하는 것으로 인식되는 경우(①), 하차 시 승객에 대한 특징점과 승차 시 검출된 특징점 즉 골격, 신장, 얼굴, 성별, 뿐만 아니라 머리 색깔 별, 머리카락을 종류(펌), 모자, 의상 등에 대한 특징점을 비교(②)하여 승객을 특정할 수 있다(③). 얼굴인식 카메라(130)는 승차 시 승객에 대한 특징점을 검출 및 인식하게 되면 해당 승객에 대한 인식번호 혹은 식별번호를 부여해 각 승객을 구분할 수 있다.
이때, 특정된 승객이 그대로 하차하게 되면 하차 시 카드 미 태깅으로 기록되지만, 탑승인원이 증가하는 출퇴근시간의 경우 트램의 안쪽에 있는 승객이 하차하기 위해 출입문 근처에 있는 승객이 잠시 하차하였다가 승차하는 경우가 종종 발생되는데, 본 실시예에서는 이러한 승하차 예외 상황을 판별하여 해당 승객이 재 승차할 때 승차 계수를 별도로 하지 않으며, 무임승차로 판단하지 않도록 하여 해당 승객에 대한 피해를 예방할 수 있다.
이를 위해, 승하차 예외 상황 판별 단계(S133)에서는, 얼굴인식 카메라(130)를 통해 특정된 승객이 재 승차함을 인식(④)하게 되면, 계수 카메라(110)에 특정된 승객에 대한 승차 카운팅을 생략할 수 있도록 지시하고, 요금징수 단말기(120) 또한 태깅하지 않아도 무임승차로 기록되지 않도록 지시할 수 있다. 이때, 특정된 승객의 승차 카운팅의 생략을 위해서는 계수 카메라(110) 또한 어떠한 승객에 대한 승차 카운팅을 생략하는지 알고 있어야 하므로, 승하차 예외 상황 판별부(133)가 특정된 승객 인원과 해당 인원이 승차 인식 타이밍에 맞춰 계수 카메라(110) 및 요금징수 단말기(120)에 신호를 주도록 동작하는 것이 바람직하다.
상기 정보 업데이트 단계(S140)에서는, 트램에 설치된 관리서버(140)가, 계수 카메라(110) 및 얼굴인식 카메라(130)를 통해 처리된 정보를 취합하여 역에 설치된 중앙서버(20)로 전송할 수 있다.
좀 더 구체적으로 정보 업데이트 단계(S140)에서는, 계수 카메라(110) 및 얼굴인식 카메라(130로부터 취합된 정보를 리스트화하고, 트램이 미리 지정된 역에 위치한 경우 중앙서버(20)에 해당 리스트정보를 자동으로 업로드 할 수 있다.
예를 들어, 도 9에 도시된 바와 같이 개폐 검지기와 계수기 즉 본 실시예의 계수 카메라(110)의 설정정보, 해당 트램의 상황 정보(역 정보, 출입문 상태, 승차인원, 하차인원, 탑승인원, 무임승차인원, 누적무임승차인원 등)와, 승하차 시간, 승하차 정보 등의 로그 정보를 제공할 수 있다.
이상에서 설명한 것은 본 발명에 의한 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템 및 방법을 실시하기 위한 하나의 실시예에 불과한 것으로서, 본 발명은 상기 실시예에 한정되지 않고, 이하의 특허청구범위에서 청구하는 바와 같이 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변경 실시가 가능한 범위까지 본 발명의 기술적 정신이 있다고 할 것이다.
100: 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템
110: 계수 카메라
120: 요금징수 단말기
130: 얼굴인식 카메라
131: 승차적용요금 판별부
132: 승차적용요금정보 전송부
133: 승하차 예외 상황 판별부
140: 관리서버
150: 거리 센서
S100: 딥러닝을 이용한 대중교통수단의 승하차 계수 방법
S110: 승하차 계수 단계
S120: 요금징수 처리 단계
S130: 승객 인식 단계
S131: 승차적용요금 판별 단계
S132: 승차적용요금정보 전송 단계
S133: 승하차 예외 상황 판별 단계
S140: 정보 업데이트 단계
10: 과금 시스템
20: 중앙서버
SL1: 제1 가상 센싱 라인
SL2: 제2 가상 센싱 라인
SL3: 제3 가상 센싱 라인
A1, A2: 중심지점

Claims (12)

  1. 대중교통수단의 출입문 상부 측에 설치되고, 가상 승하차 라인을 이용하여 승객의 승하차를 카운팅하는 계수 카메라;
    대중교통수단에 설치되고, 교통카드의 체킹을 통해 과금 시스템과 연동하여 승객의 요금징수를 처리하는 요금징수 단말기;
    대중교통수단의 출입문을 향해 설치되고, 딥러닝 알고리즘을 이용하여 승하차하는 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하여 승객의 승차적용요금을 판별하고, 승객의 이동궤적을 추적하여 상기 승차적용요금에 대한 정보를 상기 요금징수 단말기로 제공하는 얼굴인식 카메라; 및
    대중교통수단에 설치되고, 상기 계수 카메라 및 상기 얼굴인식 카메라를 통해 처리된 정보를 취합하여 역에 설치된 중앙서버로 전송하는 관리서버를 포함하는 것을 특징으로 하는 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템.
  2. 제1 항에 있어서,
    상기 계수 카메라는,
    대중교통수단의 출입문을 가로지르며 서로 나란히 순차적으로 배열되는 제1 가상 감지 라인, 제2 가상 감지 라인 및 제3 가상 감지 라인을 형성하고, 대중교통수단의 출입문 영역에 대하여 촬영된 영상 중 승객 영역의 중심지점을 특정하고, 상기 중심지점이 상기 제1 가상 감지 라인, 제2 가상 감지 라인 및 제3 가상 감지 라인을 통과한 감지 순서와 조합에 따라 승차와 하차를 판별하고, 판별 결과에 따라 승하차 수를 카운팅하는 것을 특징으로 하는 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템.
  3. 제2 항에 있어서,
    대중교통수단의 출입문의 상부 측에 설치되고, 출입문의 개폐상태를 감지하고, 감지된 개폐상태에 따라 상기 계수 카메라의 계수 동작을 시작하기 위한 제어 신호를 상기 계수 카메라로 출력하는 거리 센서를 더 포함하는 것을 특징으로 하는 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템.
  4. 제1 항에 있어서,
    상기 얼굴인식 카메라는,
    승하차하는 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하고, 인식된 승객의 골격에 따른 신장, 얼굴 및 성별에 따라 미취학아동, 어린이, 청소년 및 성인에 따른 승차적용요금을 판별하는 승차적용요금 판별부; 및
    상기 계수 카메라를 통해 승차로 카운팅 된 승객의 이동궤적을 추적하여 상기 요금징수 단말기에 교통카드를 태깅하는 동작이 인식되면, 상기 승차적용요금 판별부를 통해 판별된 승객의 승차적용요금정보를 상기 요금징수 단말기로 전송하는 승차적용요금정보 전송부를 포함하는 것을 특징으로 하는 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템.
  5. 제4 항에 있어서,
    상기 요금징수 단말기는,
    상기 얼굴인식 카메라로부터 수신된 승차적용요금정보와 실제 교통카드의 결제요금이 상이한 경우 상기 얼굴인식 카메라에 해당 승차적용요금정보와 매칭되는 승객의 얼굴인식정보를 상기 관리서버로 전달하도록 요청하는 것을 특징으로 하는 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템.
  6. 제1 항에 있어서,
    상기 관리서버는,
    상기 계수 카메라 및 상기 얼굴인식 카메라로부터 취합된 정보를 리스트화하고, 대중교통수단이 미리 지정된 역에 위치한 경우 상기 중앙서버에 해당 리스트정보를 자동으로 업로드하는 것을 특징으로 하는 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템.
  7. 대중교통수단의 출입문 상부 측에 설치된 계수 카메라가, 가상 승하차 라인을 이용하여 승객의 승하차를 카운팅하는 승하차 계수 단계;
    대중교통수단에 설치된 요금징수 단말기에 교통카드를 체킹하는 경우 과금 시스템과 연동하여 승객의 요금징수를 처리하는 요금징수 처리 단계;
    대중교통수단의 출입문을 향해 설치된 얼굴인식 카메라가, 딥러닝 알고리즘을 이용하여 승하차하는 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하여 승객의 승차적용요금을 판별하고, 승객의 이동궤적을 추적하여 상기 승차적용요금에 대한 정보를 상기 요금징수 단말기로 제공하는 승객 인식 단계; 및
    대중교통수단에 설치된 관리서버가, 상기 계수 카메라 및 상기 얼굴인식 카메라를 통해 처리된 정보를 취합하여 역에 설치된 중앙서버로 전송하는 정보 업데이트 단계를 포함하는 것을 특징으로 하는 딥러닝을 이용한 대중교통수단의 승하차 계수 방법.
  8. 제7 항에 있어서,
    상기 승하차 계수 단계는,
    상기 계수 카메라가, 대중교통수단의 출입문을 가로지르며 서로 나란히 순차적으로 배열되는 제1 가상 감지 라인, 제2 가상 감지 라인 및 제3 가상 감지 라인을 형성하고, 대중교통수단의 출입문 영역에 대하여 촬영된 영상 중 승객 영역의 중심지점을 특정하고, 상기 중심지점이 상기 제1 가상 감지 라인, 제2 가상 감지 라인 및 제3 가상 감지 라인을 통과한 감지 순서와 조합에 따라 승차와 하차를 판별하고, 판별 결과에 따라 승하차 수를 카운팅하는 것을 특징으로 하는 딥러닝을 이용한 대중교통수단의 승하차 계수 방법.
  9. 제8 항에 있어서,
    상기 승하차 계수 단계는,
    대중교통수단의 출입문의 상부 측에 설치된 거리 센서가, 출입문의 개폐상태를 감지하고, 감지된 개폐상태에 따라 상기 계수 카메라의 계수 동작을 시작하기 위한 제어 신호를 상기 계수 카메라로 출력할 때 수행되는 것을 특징으로 하는 딥러닝을 이용한 대중교통수단의 승하차 계수 방법.
  10. 제7 항에 있어서,
    상기 승객 인식 단계는,
    승차적용요금 판별부가, 승하차하는 승객의 골격에 따른 신장, 얼굴 및 성별을 검출 및 인식하고, 인식된 승객의 골격에 따른 신장, 얼굴 및 성별에 따라 미취학아동, 어린이, 청소년 및 성인에 따른 승차적용요금을 판별하는 승차적용요금 판별 단계; 및
    승차적용요금정보 전송부가, 상기 계수 카메라를 통해 승차로 카운팅 된 승객의 이동궤적을 추적하여 상기 요금징수 단말기에 교통카드를 태깅하는 동작을 인식하면, 상기 승차적용요금 판별 단계를 통해 판별된 승객의 승차적용요금정보를 상기 요금징수 단말기로 전송하는 승차적용요금정보 전송 단계를 포함하는 것을 특징으로 하는 딥러닝을 이용한 대중교통수단의 승하차 계수 방법.
  11. 제10 항에 있어서,
    상기 요금징수 처리 단계는,
    상기 얼굴인식 카메라로부터 수신된 승차적용요금정보와 실제 교통카드의 결제요금이 상이한 경우 상기 얼굴인식 카메라에 해당 승차적용요금정보와 매칭되는 승객의 얼굴인식정보를 상기 관리서버로 전달하도록 요청하는 것을 특징으로 하는 딥러닝을 이용한 대중교통수단의 승하차 계수 방법.
  12. 제7 항에 있어서,
    상기 정보 업데이트 단계는,
    상기 계수 카메라 및 상기 얼굴인식 카메라로부터 취합된 정보를 리스트화하고, 대중교통수단이 미리 지정된 역에 위치한 경우 상기 중앙서버에 해당 리스트정보를 자동으로 업로드하는 것을 특징으로 하는 딥러닝을 이용한 대중교통수단의 승하차 계수 방법.
KR1020190158875A 2019-12-03 2019-12-03 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템 및 방법 KR102109647B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190158875A KR102109647B1 (ko) 2019-12-03 2019-12-03 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190158875A KR102109647B1 (ko) 2019-12-03 2019-12-03 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR102109647B1 true KR102109647B1 (ko) 2020-05-12

Family

ID=70679463

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190158875A KR102109647B1 (ko) 2019-12-03 2019-12-03 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR102109647B1 (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102235536B1 (ko) * 2020-08-27 2021-04-02 (주)휴먼아이티솔루션 버스 운행 노선의 실태 분석 방법, 장치 및 컴퓨터-판독가능 기록 매체
KR102235535B1 (ko) * 2020-08-27 2021-04-02 (주)휴먼아이티솔루션 실시간 탑승 정보를 활용한 버스 운행 노선 개편 방법, 장치 및 컴퓨터-판독가능 기록 매체
CN114120293A (zh) * 2021-11-30 2022-03-01 北京华高世纪科技股份有限公司 一种地铁列车乘客检测方法及系统
CN114358780A (zh) * 2020-09-29 2022-04-15 新开普电子股份有限公司 一种基于分布式人脸识别的公交乘车支付方法及系统
CN114999034A (zh) * 2022-06-01 2022-09-02 中交机电工程局有限公司 基于轨道交通的综合监控管理系统
CN115565274A (zh) * 2022-12-06 2023-01-03 成都智元汇信息技术股份有限公司 一种降低安检比对开销量的检票方法、系统及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004265212A (ja) * 2003-03-03 2004-09-24 Hitachi Electronics Service Co Ltd 乗客追跡システム
KR20110038983A (ko) 2009-10-09 2011-04-15 조용범 영상을 이용하여 승객의 승하차수를 카운트하는 방법 및 장치
KR101606162B1 (ko) * 2014-11-10 2016-04-05 한국철도기술연구원 궤도차량 출입문 승하차 인식장치 및 방법
JP6354585B2 (ja) * 2012-10-19 2018-07-11 日本電気株式会社 乗車人数計数システム、乗車人数計数方法および乗車人数計数プログラム
KR101939350B1 (ko) 2018-01-15 2019-01-16 주식회사 핀텔 무임 승차 감지 방법 및 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004265212A (ja) * 2003-03-03 2004-09-24 Hitachi Electronics Service Co Ltd 乗客追跡システム
KR20110038983A (ko) 2009-10-09 2011-04-15 조용범 영상을 이용하여 승객의 승하차수를 카운트하는 방법 및 장치
JP6354585B2 (ja) * 2012-10-19 2018-07-11 日本電気株式会社 乗車人数計数システム、乗車人数計数方法および乗車人数計数プログラム
KR101606162B1 (ko) * 2014-11-10 2016-04-05 한국철도기술연구원 궤도차량 출입문 승하차 인식장치 및 방법
KR101939350B1 (ko) 2018-01-15 2019-01-16 주식회사 핀텔 무임 승차 감지 방법 및 장치

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102235536B1 (ko) * 2020-08-27 2021-04-02 (주)휴먼아이티솔루션 버스 운행 노선의 실태 분석 방법, 장치 및 컴퓨터-판독가능 기록 매체
KR102235535B1 (ko) * 2020-08-27 2021-04-02 (주)휴먼아이티솔루션 실시간 탑승 정보를 활용한 버스 운행 노선 개편 방법, 장치 및 컴퓨터-판독가능 기록 매체
CN114358780A (zh) * 2020-09-29 2022-04-15 新开普电子股份有限公司 一种基于分布式人脸识别的公交乘车支付方法及系统
CN114120293A (zh) * 2021-11-30 2022-03-01 北京华高世纪科技股份有限公司 一种地铁列车乘客检测方法及系统
CN114999034A (zh) * 2022-06-01 2022-09-02 中交机电工程局有限公司 基于轨道交通的综合监控管理系统
CN114999034B (zh) * 2022-06-01 2023-08-29 中交机电工程局有限公司 基于轨道交通的综合监控管理系统
CN115565274A (zh) * 2022-12-06 2023-01-03 成都智元汇信息技术股份有限公司 一种降低安检比对开销量的检票方法、系统及存储介质
CN115565274B (zh) * 2022-12-06 2023-03-10 成都智元汇信息技术股份有限公司 一种降低安检比对开销量的检票方法、系统及存储介质

Similar Documents

Publication Publication Date Title
KR102109647B1 (ko) 딥러닝을 이용한 대중교통수단의 승하차 계수 시스템 및 방법
WO2021159865A1 (zh) 一种基于数据校准的公交路线预测方法及系统
EP2801956B1 (en) Passenger counter
CN106541968B (zh) 基于视觉分析的地铁车厢实时提示系统的识别方法
KR101718806B1 (ko) 열차의 승강장 정차시간 자동 산출 서버, 시스템 및 방법
CN104805784B (zh) 一种闸机逃票检测系统及方法
KR102109648B1 (ko) 딥러닝의 얼굴인식을 이용한 대중교통수단의 무임승차 검출 시스템 및 방법
KR101934330B1 (ko) 차량 승차 인원 검지를 이용한 요금 정산 방법 및 장치
CN106373461A (zh) 驾培管理服务系统及其方法
CN101893853A (zh) 一种基于智能模型的自学习型人体闸机通道判断算法
CN110222637B (zh) 一种基于3d图像人头识别的客流统计方法及其系统
KR102459906B1 (ko) 듀얼밴드 적외선 카메라를 이용한 승차인원 검지 시스템 및 그 방법
CN110874551A (zh) 用于门禁闸机通行逻辑控制的图像处理方法
KR101939350B1 (ko) 무임 승차 감지 방법 및 장치
WO2023174240A1 (zh) 一种公交客流检测方法及系统
CN113994399B (zh) 访客管理系统和访客管理方法
CN110516600A (zh) 一种基于人脸检测的公交客流检测方法
CN108550218A (zh) 一种自行车专用道综合管控系统及其管控方法
CN205354095U (zh) 自动检票人行通道中通行物体识别装置
CN117273664B (zh) 一种基于人工智能的智慧校车系统及装置
JP5560786B2 (ja) ゲート装置
CN112363415A (zh) 一种基于无线传感器网络的车站实时监控系统
KR102167052B1 (ko) 무임 승객 정보 관리 시스템 및 그 방법
CN113611025A (zh) 一种新型轨道交通快速检人系统及方法
KR102004998B1 (ko) 무단패스 방지 시스템

Legal Events

Date Code Title Description
GRNT Written decision to grant