KR20210114144A - 서버 및 그 제어 방법 - Google Patents

서버 및 그 제어 방법 Download PDF

Info

Publication number
KR20210114144A
KR20210114144A KR1020200029417A KR20200029417A KR20210114144A KR 20210114144 A KR20210114144 A KR 20210114144A KR 1020200029417 A KR1020200029417 A KR 1020200029417A KR 20200029417 A KR20200029417 A KR 20200029417A KR 20210114144 A KR20210114144 A KR 20210114144A
Authority
KR
South Korea
Prior art keywords
area
personal mobility
service area
server
pedestrians
Prior art date
Application number
KR1020200029417A
Other languages
English (en)
Inventor
우승현
박민재
이종복
Original Assignee
현대자동차주식회사
기아 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사, 기아 주식회사 filed Critical 현대자동차주식회사
Priority to KR1020200029417A priority Critical patent/KR20210114144A/ko
Priority to US17/024,881 priority patent/US11490285B2/en
Publication of KR20210114144A publication Critical patent/KR20210114144A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W28/00—Network traffic management; Network resource management
    • H04W28/02—Traffic management, e.g. flow control or congestion control
    • H04W28/0226—Traffic management, e.g. flow control or congestion control based on location or mobility
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/021—Services related to particular areas, e.g. point of interest [POI] services, venue services or geofences
    • H04W4/022—Services related to particular areas, e.g. point of interest [POI] services, venue services or geofences with dynamic range variability
    • G06Q50/30—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/40—Business processes related to the transportation industry
    • G06K9/00302—
    • G06K9/00771—
    • G06K9/00791—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/025—Services making use of location information using location based information parameters
    • H04W4/027—Services making use of location information using location based information parameters using movement velocity, acceleration information

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Medical Informatics (AREA)
  • Computing Systems (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Traffic Control Systems (AREA)
  • Operations Research (AREA)

Abstract

퍼스널 모빌리티(personal mobility)로부터 수신되는 영상 데이터에 기초하여 주행 영역의 혼잡도 및 주행 영역에서의 보행자 감정을 결정하고 이에 기초하여 서비스 영역을 조정하는 서버 및 그 제어 방법을 제공한다.
일 실시예에 따른 서버는, 통신부; 및 퍼스널 모빌리티(personal mobility)로부터 수신되는 영상 데이터에 기초하여 상기 퍼스널 모빌리티가 주행하는 영역의 혼잡도 및 상기 퍼스널 모빌리티가 주행하는 영역의 보행자의 감정 정보를 결정하고, 상기 혼잡도 및 상기 감정 정보에 기초하여 상기 퍼스널 모빌리티에 대한 서비스 영역을 조정하는 제어부;를 포함한다.

Description

서버 및 그 제어 방법{SERVER AND CONTROL METHOD FOR THE SAME}
본 발명은 퍼스널 모빌리티(personal mobility)의 서비스 영역을 제어하는 서버 및 그 제어 방법에 관한 것이다.
최근에는 전기를 동력으로 하는 1인용 이동수단에 해당하는 퍼스널 모빌리티(personal mobility)에 대한 시장 확대에 따라, 퍼스널 모빌리티를 이용하는 사용자가 많아지고 있다.
또한, 퍼스널 모빌리티 사업자는, 일정한 서비스 영역 내에서 퍼스널 모빌리티를 대여하고 반납할 수 있는 서비스를 제공하고 있으며, 퍼스널 모빌리티에 대한 수요 및 퍼스널 모빌리티의 재배치 등을 고려하여 서비스 영역을 설정한다.
이를 위해, 퍼스널 모빌리티 사업자는, 서비스 영역을 가상의 경계인 지오펜스(geofence)를 이용하여 설정할 수 있으며, 퍼스널 모빌리티가 서비스 영역을 벗어나는 경우 GPS(global positioning system)에 기초하여 퍼스널 모빌리티의 기능을 제한할 수 있다.
퍼스널 모빌리티(personal mobility)로부터 수신되는 영상 데이터에 기초하여 주행 영역의 혼잡도 및 주행 영역에서의 보행자 감정을 결정하고 이에 기초하여 서비스 영역을 조정하는 서버 및 그 제어 방법을 제공한다.
일 실시예에 따른 서버는, 통신부; 및 퍼스널 모빌리티(personal mobility)로부터 수신되는 영상 데이터에 기초하여 미리 설정된 시간 동안 감지되는 보행자 인원수를 결정하고, 상기 보행자 인원수 및 상기 퍼스널 모빌리티의 평균 속도에 기초하여 상기 퍼스널 모빌리티가 주행하는 영역의 혼잡도를 결정하고, 상기 혼잡도에 기초하여 상기 퍼스널 모빌리티에 대한 서비스 영역을 조정하는 제어부;를 포함한다.
상기 제어부는, 상기 혼잡도가 미리 설정된 기준 값 이상이면 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에서 삭제되도록 상기 서비스 영역의 경계를 축소할 수 있다.
상기 제어부는, 상기 혼잡도가 미리 설정된 기준 값 미만이면 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에 포함되도록 상기 서비스 영역의 경계를 확장할 수 있다.
상기 제어부는, 상기 영상 데이터에 기초하여 상기 퍼스널 모빌리티가 주행하는 영역의 보행자의 감정 정보를 결정할 수 있다.
상기 제어부는, 상기 혼잡도가 미리 설정된 기준 값 미만이면서 상기 감정 정보에 기초하여 보행자 중 제1 비율 이상의 보행자가 부정적 감정을 갖는 것으로 결정되면, 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에서 삭제되도록 상기 서비스 영역의 경계를 축소할 수 있다.
상기 제어부는, 상기 혼잡도가 미리 설정된 기준 값 이상이면서 상기 감정 정보에 기초하여 보행자 중 제2 비율 이상의 보행자가 긍정적 감정을 갖는 것으로 결정되면, 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에 포함되도록 상기 서비스 영역의 경계를 확장할 수 있다.
상기 제어부는, 상기 퍼스널 모빌리티가 주행하는 영역이 이미 상기 서비스 영역에 포함된 경우, 상기 퍼스널 모빌리티가 주행하는 영역을 추천 반납 영역으로 설정할 수 있다.
상기 제어부는, 상기 혼잡도가 미리 설정된 기준 값 이상이면서 상기 감정 정보에 기초하여 보행자 중 제3 비율 이상의 보행자가 부정적 감정을 갖는 것으로 결정되면, 상기 퍼스널 모빌리티가 주행하는 영역을 반납 금지 영역 또는 주행 금지 영역 중 적어도 하나로 설정할 수 있다.
상기 제어부는, 상기 영상 데이터에서의 보행자의 얼굴 표정에 기초하여 상기 감정 정보를 결정할 수 있다.
상기 서버는, 디스플레이;를 더 포함하고, 상기 제어부는, 상기 혼잡도 및 상기 감정 정보에 기초하여 상기 서비스 영역에 대한 추천 정보를 결정하고, 상기 추천 정보를 표시하도록 상기 디스플레이를 제어할 수 있다.
상기 서버는, 사용자로부터 입력을 수신하는 입력부;를 더 포함하고, 상기 제어부는, 상기 사용자로부터 상기 추천 정보에 대한 승인을 입력받는 경우 상기 추천 정보에 기초하여 상기 서비스 영역을 조정할 수 있다.
통신부를 포함하는 일 실시예에 따른 서버의 제어 방법은, 퍼스널 모빌리티(personal mobility)로부터 수신되는 영상 데이터에 기초하여 미리 설정된 시간 동안 감지되는 보행자 인원수를 결정하고; 상기 보행자 인원수 및 상기 퍼스널 모빌리티의 평균 속도에 기초하여 상기 퍼스널 모빌리티가 주행하는 영역의 혼잡도를 결정하고; 상기 혼잡도에 기초하여 상기 퍼스널 모빌리티에 대한 서비스 영역을 조정하는 것;을 포함한다.
상기 서비스 영역을 조정하는 것은, 상기 혼잡도가 미리 설정된 기준 값 이상이면 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에서 삭제되도록 상기 서비스 영역의 경계를 축소하는 것;을 포함할 수 있다.
상기 서비스 영역을 조정하는 것은, 상기 혼잡도가 미리 설정된 기준 값 미만이면 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에 포함되도록 상기 서비스 영역의 경계를 확장하는 것;을 포함할 수 있다.
상기 서버의 제어 방법은, 상기 영상 데이터에 기초하여 상기 퍼스널 모빌리티가 주행하는 영역의 보행자의 감정 정보를 결정하는 것;을 더 포함할 수 있다.
상기 서비스 영역을 조정하는 것은, 상기 혼잡도가 미리 설정된 기준 값 미만이면서 상기 감정 정보에 기초하여 보행자 중 제1 비율 이상의 보행자가 부정적 감정을 갖는 것으로 결정되면, 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에서 삭제되도록 상기 서비스 영역의 경계를 축소하는 것;을 포함할 수 있다.
상기 서비스 영역을 조정하는 것은, 상기 혼잡도가 미리 설정된 기준 값 이상이면서 상기 감정 정보에 기초하여 보행자 중 제2 비율 이상의 보행자가 긍정적 감정을 갖는 것으로 결정되면, 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에 포함되도록 상기 서비스 영역의 경계를 확장하는 것;을 포함할 수 있다.
상기 서비스 영역을 조정하는 것은, 상기 퍼스널 모빌리티가 주행하는 영역이 이미 상기 서비스 영역에 포함된 경우, 상기 퍼스널 모빌리티가 주행하는 영역을 추천 반납 영역으로 설정하는 것;을 포함할 수 있다.
상기 서비스 영역을 조정하는 것은, 상기 혼잡도가 미리 설정된 기준 값 이상이면서 상기 감정 정보에 기초하여 보행자 중 제3 비율 이상의 보행자가 부정적 감정을 갖는 것으로 결정되면, 상기 퍼스널 모빌리티가 주행하는 영역을 반납 금지 영역 또는 주행 금지 영역 중 적어도 하나로 설정하는 것;을 포함할 수 있다.
상기 감정 정보를 결정하는 것은, 상기 영상 데이터에서의 보행자의 얼굴 표정에 기초하여 상기 감정 정보를 결정하는 것;을 포함할 수 있다.
상기 서버는, 디스플레이;를 더 포함하고, 상기 서버의 제어 방법은, 상기 혼잡도 및 상기 감정 정보에 기초하여 상기 서비스 영역에 대한 추천 정보를 결정하고, 상기 추천 정보를 표시하도록 상기 디스플레이를 제어하는 것;을 더 포함할 수 있다.
상기 서버는, 사용자로부터 입력을 수신하는 입력부;를 더 포함하고, 상기 서버의 제어 방법은, 상기 사용자로부터 상기 추천 정보에 대한 승인을 입력받는 경우 상기 추천 정보에 기초하여 상기 서비스 영역을 조정하는 것;을 더 포함할 수 있다.
일 측면에 따른 서버 및 그 제어 방법에 따르면, 퍼스널 모빌리티(personal mobility)로부터 수신되는 영상 데이터에 기초하여 주행 영역의 혼잡도 및 주행 영역에서의 보행자 감정을 결정하고 이에 기초하여 서비스 영역을 조정함으로써, 퍼스널 모빌리티의 수요자 및 보행자 모두의 만족감을 유발하도록 서비스 영역을 적응적으로 조정할 수 있다.
도 1은 본 발명의 일 실시예에 따른 퍼스널 모빌리티 및 서버를 포함하는 서비스 영역 조정 시스템의 구성을 나타내는 블록도이다.
도 2는 본 발명의 일 실시예에 따른 서버의 제어블록도이다.
도 3은 본 발명의 일 실시예에 따른 서버가 퍼스널 모빌리티로부터 수신되는 영상 데이터를 처리하는 경우를 나타내는 도면이다.
도 4는 본 발명의 일 실시예에 따른 서버의 감정 분류 기준을 나타내는 도면이다.
도 5는 본 발명의 일 실시예에 따른 서버가 서비스 영역의 확장 또는 축소하는 경우를 나타내는 도면이다.
도 6은 본 발명의 일 실시예에 따른 서버가 추천 반납 지역 또는 반납 금지 지역을 결정하는 경우를 나타내는 도면이다.
도 7은 본 발명의 일 실시예에 따른 서버의 제어방법 중 서비스 영역을 조정하는 경우의 순서도이다.
도 8은 본 발명의 일 실시예에 따른 서버의 제어방법 중 혼잡도를 결정하는 경우의 순서도이다.
도 9는 본 발명의 일 실시예에 따른 서버의 제어방법 중 추천 정보에 대한 입력을 수신하여 서비스 영역을 조정하는 경우의 순서도이다.
명세서 전체에 걸쳐 동일 참조 부호는 동일 구성요소를 지칭한다. 본 명세서가 실시예들의 모든 요소들을 설명하는 것은 아니며, 본 발명이 속하는 기술분야에서 일반적인 내용 또는 실시예들 간에 중복되는 내용은 생략한다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐 아니라, 간접적으로 연결되어 있는 경우를 포함하고, 간접적인 연결은 무선 통신망을 통해 연결되는 것을 포함한다.
또한, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
단수의 표현은 문맥상 명백하게 예외가 있지 않는 한, 복수의 표현을 포함한다.
또한, "~부", "~기", "~블록", "~부재", "~모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미할 수 있다. 예를 들어, 상기 용어들은 FPGA(field-programmable gate array) / ASIC(application specific integrated circuit) 등 적어도 하나의 하드웨어, 메모리에 저장된 적어도 하나의 소프트웨어 또는 프로세서에 의하여 처리되는 적어도 하나의 프로세스를 의미할 수 있다.
각 단계들에 붙여지는 부호는 각 단계들을 식별하기 위해 사용되는 것으로 이들 부호는 각 단계들 상호 간의 순서를 나타내는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 실시될 수 있다.
이하에서는 첨부된 도면을 참조하여 일 측면에 따른 서버 및 그 제어 방법에 관한 실시예를 상세하게 설명하도록 한다.
도 1은 본 발명의 일 실시예에 따른 퍼스널 모빌리티 및 서버를 포함하는 서비스 영역 조정 시스템의 구성을 나타내는 블록도이다.
도 1을 참조하면, 일 실시예에 따른 서비스 영역 조정 시스템(1)은, 서버(10), 퍼스널 모빌리티(20) 및 네트워크(30)를 포함한다.
일 실시예에 따른 서버(10)는, 퍼스널 모빌리티(20)로부터 수신되는 영상 데이터에 기초하여 퍼스널 모빌리티(20)가 주행하는 영역에서의 혼잡도 및 퍼스널 모빌리티(20)가 주행하는 영역에서의 보행자들의 감정 정보를 결정하고, 이에 기초하여 퍼스널 모빌리티(20)의 서비스 영역을 조정할 수 있다.
이를 위해, 서버(10)는, 네트워크(30)를 통하여 퍼스널 모빌리티(20)와 무선 통신을 수행할 수 있다. 서버(10)는, 유선 또는 무선으로 네트워크(30)와 통신을 수행할 수 있다. 이 때, 유선 통신 및 무선 통신은, 기 공지된 통신 기법이 사용될 수 있다.
일 실시예에 따른 퍼스널 모빌리티(20)는, 전기를 동력으로 하는 1인용 이동수단으로, 전동 휠, 전동 킥보드, 전기 자전거, 초소형 전기차 등을 포함할 수 있다. 퍼스널 모빌리티(20)의 유형은, 상기 예에 한정되는 것은 아니며, 전기를 동력으로 하는 1인용 이동수단이면 제한없이 포함된다.
일 실시예에 따른 퍼스널 모빌리티(20)는, 네트워크(30)를 통하여 서버(10)와 무선 통신을 수행할 수 있으며, 서버(10)로 영상 데이터를 송신할 수 있다.
일 실시예에 따른 네트워크(30)는, 서버(10)와 퍼스널 모빌리티(20) 사이의 통신을 지원할 수 있으며, 텔레커뮤니케이션 네트워크, 예를 들면, 컴퓨터 네트워크(예: LAN 또는 WAN), 인터넷, 또는 텔레폰 네트워크 중 적어도 하나일 수 있다. 다만, 네트워크(30)의 유형은, 상기 예에 한정되는 것은 아니며, 통신 지원을 위한 네트워크이면 제한없이 포함될 수 있다.
도 2는 본 발명의 일 실시예에 따른 서버의 제어블록도이다.
도 2를 참조하면, 서버(10)는, 네트워크(30)를 통하여 퍼스널 모빌리티(20)와 통신을 수행하는 통신부(110)와, 퍼스널 모빌리티(20)로부터 수신된 영상 데이터를 처리하고, 이에 기초하여 퍼스널 모빌리티(20)의 서비스 영역을 조정하는 제어부(120)와, 서버(10)의 제어에 필요한 각종 정보를 저장하는 저장부(130)를 포함한다.
일 실시예에 따른 통신부(110)는, 네트워크(30)와 유선 또는 무선으로 연결되어, 퍼스널 모빌리티(20)와 데이터를 송수신할 수 있다. 예를 들어, 통신부(110)는, 퍼스널 모빌리티(20)로부터 영상 데이터를 수신할 수 있다.
일 실시예에 따른 제어부(120)는, 통신부(110)를 통하여 퍼스널 모빌리티(20)로부터 수신한 영상 데이터에 기초하여 퍼스널 모빌리티(20)가 주행하는 영역의 혼잡도 및 퍼스널 모빌리티(20)가 주행하는 영역의 보행자의 감정 정보를 결정할 수 있다.
즉, 제어부(120)는, 퍼스널 모빌리티(20)로부터 수신한 영상 데이터에 대한 영상 처리에 기초하여 퍼스널 모빌리티(20)가 주행하는 영역에서의 혼잡도와 보행자의 감정 정보를 결정할 수 있다.
이 때, 영상 데이터는, 퍼스널 모빌리티(20) 전방을 촬영한 영상을 포함하며, 퍼스널 모빌리티(20)에 마련되는 카메라를 통하여 획득될 수 있다.
제어부(120)는, 실시예에 따라, 혼잡도 및 보행자의 감정 정보를 미리 설정된 시간 간격으로 결정할 수 있다. 즉, 제어부(120)는, 미리 설정된 시간 동안에 대응하는 영상 데이터에 기초하여 혼잡도 및 보행자의 감정 정보를 결정할 수 있다.
제어부(120)는, 실시예에 따라, 영상 데이터에 기초하여 미리 설정된 시간 동안 감지된 보행자 인원수 및 미리 설정된 시간에서의 퍼스널 모빌리티(20)의 평균 속도에 기초하여 혼잡도를 결정할 수 있다.
구체적으로, 제어부(120)는, 기 공지된 영상 처리 알고리즘(예: 엣지 디텍션(edge detection) 등)에 기초하여 영상 데이터를 처리하여 영상 데이터 내의 보행자를 감지할 수 있으며, 미리 설정된 시간 동안 감지된 보행자 인원수를 미리 설정된 시간에서의 평균 속도로 나누어 단위 속도 당 보행자 인원에 해당하는 혼잡도를 결정할 수 있다.
예를 들어, 제어부(120)는, 10분 동안 150명의 보행자를 감지할 수 있으며, 감지된 보행자 인원수(150명)을 퍼스널 모빌리티(20)의 10분 동안의 평균 속도인 3km/h로 나누어 "50"을 혼잡도로 결정할 수 있다.
또한, 제어부(120)는, 실시예에 따라, 기 공지된 영상 처리 알고리즘에 기초하여 영상 데이터를 처리하여 영상 데이터 내의 보행자의 얼굴 표정을 분석할 수 있으며, 얼굴 표정에 기초하여 해당 보행자의 감정 상태를 나타내는 감정 정보를 결정할 수 있다.
구체적으로, 제어부(120)는 보행자에 대한 영상 데이터에 기초하여 보행자의 얼굴 표정을 감지하고, 감지된 얼굴 표정에 대응하는 감정 정보를 획득할 수 있다. 영상 데이터에 기초한 보행자의 감정 정보를 획득하는 구성은 뒤에서 다시 자세하게 설명하기로 한다.
일 실시예에 따른 제어부(120)는, 혼잡도 및 보행자의 감정 정보에 기초하여 퍼스널 모빌리티(20)에 대한 서비스 영역을 조정할 수 있다.
이 때, 서비스 영역은, 퍼스널 모빌리티(20)의 대여 및 반납 등의 서비스가 제공되는 영역에 해당할 수 있으며, 가상의 경계인 지오펜스(geofence)에 의해 정의될 수 있다.
서버(10)는, GPS(global positioning system)에 기초하여 퍼스널 모빌리티(20)가 서비스 영역을 벗어나는 것으로 결정하는 경우, 퍼스널 모빌리티(20)의 기능을 제한할 수 있다. 예를 들어, 서버(10)는, 퍼스널 모빌리티(20)의 반납을 제한하거나, 퍼스널 모빌리티(20)의 속도를 제한하는 등 서비스 영역을 벗어난 퍼스널 모빌리티(20)의 기능을 제한할 수 있다.
제어부(120)는, 실시예에 따라, 혼잡도가 미리 설정된 기준 값 미만이면서 감정 정보에 기초하여 보행자 중 제1 비율 이상의 보행자가 부정적 감정을 갖는 것으로 결정되면, 퍼스널 모빌리티(20)가 주행하는 영역이 서비스 영역에서 삭제되도록 서비스 영역의 경계를 축소할 수 있다.
또한, 제어부(120)는, 실시예에 따라, 혼잡도가 미리 설정된 기준 값 이상이면서 감정 정보에 기초하여 보행자 중 제2 비율 이상의 보행자가 긍정적 감정을 갖는 것으로 결정되면, 퍼스널 모빌리티(20)가 주행하는 영역이 서비스 영역에 포함되도록 서비스 영역의 경계를 확장할 수 있다.
이 때, 제어부(120)는, 퍼스널 모빌리티(20)가 주행하는 영역이 이미 서비스 영역에 포함된 경우에는, 퍼스널 모빌리티(20)가 주행하는 영역을 추천 반납 영역으로 결정할 수 있다.
이 경우, 제어부(120)는, 추천 반납 영역에 대한 위치 정보를 퍼스널 모빌리티(20)의 사용자들에게 제공할 수 있도록, 추천 반납 영역에 대한 위치 정보에 기초하여 서비스를 제공하는 어플리케이션을 갱신할 수 있으며, 퍼스널 모빌리티(20)가 추천 반납 영역에 반납되는 경우, 퍼스널 모빌리티(20)의 사용자에 대응하는 사용자 계정에 미리 설정된 보상(예: 포인트 등)을 제공할 수 있다.
제어부(120)는, 실시예에 따라, 혼잡도가 미리 설정된 기준 값 이상이면서 감정 정보에 기초하여 보행자 중 제3 비율 이상의 보행자가 부정적 감정을 갖는 것으로 결정되면, 퍼스널 모빌리티(20)가 주행하는 영역을 반납 금지 영역 또는 주행 금지 영역 중 적어도 하나로 설정할 수 있다.
이 경우, 제어부(120)는, 반납 금지 영역 또는 주행 금지 영역에 대한 위치 정보를 퍼스널 모빌리티(20)의 사용자들에게 제공할 수 있도록, 반납 금지 영역 또는 주행 금지 영역에 대한 위치 정보에 기초하여 서비스를 제공하는 어플리케이션을 갱신할 수 있으며, 해당 영역에서 퍼스널 모빌리티(20)의 반납을 제한하거나 속도를 제한할 수 있다. 즉, 제어부(120)는, GPS 신호에 기초하여 해당 영역에 진입한 퍼스널 모빌리티(20)의 반납 또는 속도를 제한할 수 있다.
일 실시예에 따른 제어부(120)는, 혼잡도 및 감정 정보에 기초하여 서비스 영역에 대한 추천 정보를 결정할 수 있으며, 추천 정보를 표시하도록 디스플레이(미도시)를 제어할 수 있다.
이를 위해, 서버(10)는, 디스플레이를 더 포함할 수 있으며, 디스플레이는, 기 공지된 유형의 디스플레이 패널이 이용될 수 있다.
이 때, 추천 정보는, 기존의 서비스 영역에 대한 조정을 추천하는 정보를 포함할 수 있으며, 퍼스널 모빌리티(20)가 주행하는 영역을 서비스 영역에서 삭제하거나 포함하는 추천 내용을 포함할 수 있다. 또한, 실시예에 따라, 추천 정보는, 퍼스널 모빌리티(20)가 주행하는 영역을 추천 반납 영역, 반납 금지 영역, 또는 주행 금지 영역 중 적어도 하나로 추천하는 내용을 포함할 수 있다.
추천 정보는, 실시예에 따라, 추천 내용을 텍스트로 나타낼 수도 있으며, 추천 내용을 지도 상에 시각적으로 나타낼 수도 있다. 다만, 추천 정보의 표시 형식은 이에 제한되지 않으며, 서버(10)의 사용자에게 표시할 수 있는 형식이면 제한이 없다.
일 실시예에 따른 제어부(120)는, 사용자로부터 입력부(미도시)를 통하여 추천 정보에 대한 승인을 입력받는 경우 추천 정보에 기초하여 서비스 영역을 조정할 수 있다.
이를 위해, 서버(10)는, 사용자의 입력을 수신하는 입력부를 포함할 수 있으며, 입력부는, 기 공지된 유형의 입력 장치가 사용될 수 있다.
일 실시예에 따른 제어부(120)는, 조정된 서비스 영역에 기초하여 퍼스널 모빌리티(20)를 제어할 수 있다.
구체적으로, 제어부(120)는, GPS 신호에 기초하여 퍼스널 모빌리티(20)가 서비스 영역에서 벗어나는 것으로 결정하는 경우, 해당 퍼스널 모빌리티(20)의 일부 기능을 제한함으로써, 퍼스널 모빌리티(20)가 서비스 영역에서 운용될 수 있도록 한다. 예를 들어, 제어부(120)는, 해당 퍼스널 모빌리티(20)의 반납을 제한하거나, 해당 퍼스널 모빌리티(20)의 속도를 제한할 수 있다.
일 실시예에 따른 제어부(120)는, 혼잡도만을 고려하여 퍼스널 모빌리티(20)에 대한 서비스 영역을 조정할 수도 있다.
즉, 제어부(120)는, 퍼스널 모빌리티(20)로부터 수신되는 영상 데이터에 기초하여 미리 설정된 시간 동안 감지되는 보행자 인원수를 결정하고, 보행자 인원수 및 퍼스널 모빌리티(20)의 평균 속도에 기초하여 퍼스널 모빌리티(20)가 주행하는 영역의 혼잡도를 결정하고, 혼잡도에 기초하여 퍼스널 모빌리티(20)에 대한 서비스 영역을 조정할 수 있다.
구체적으로, 제어부(120)는, 혼잡도가 미리 설정된 기준 값 이상이면 퍼스널 모빌리티(20)가 주행하는 영역이 서비스 영역에서 삭제되도록 서비스 영역의 경계를 축소할 수 있다. 또한, 제어부(120)는, 혼잡도가 미리 설정된 기준 값 미만이면 퍼스널 모빌리티(20)가 주행하는 영역이 서비스 영역에 포함되도록 서비스 영역의 경계를 확장할 수 있다.
제어부(120)는 전술한 동작 및 후술하는 동작을 수행하는 프로그램이 저장된 적어도 하나의 메모리 및 저장된 프로그램을 실행시키는 적어도 하나의 프로세서를 포함할 수 있다. 메모리와 프로세서가 복수인 경우에, 이들이 하나의 칩에 집적되는 것도 가능하고, 물리적으로 분리된 위치에 마련되는 것도 가능하다.
일 실시예에 따른 저장부(130)는 통신부(110)가 수집한 영상 데이터, 보행자의 얼굴 표정과 감정 인자 간의 상관관계 정보, 보행자의 감정 정보, 혼잡도 등을 저장할 수 있다. 저장부(130)에 저장된 데이터는 제어부(120)로 전송될 수 있다. 이를 위해, 저장부(130)는, 기 공지된 유형의 저장 매체를 포함할 수 있다.
일 실시예에 따른 서버(10)는, 퍼스널 모빌리티(20)로부터 퍼스널 모빌리티(20)가 주행하는 영역의 혼잡도 및 퍼스널 모빌리티(20)가 주행하는 영역의 보행자의 감정 정보를 수신할 수 있으며, 수신된 혼잡도 및 감정 정보에 기초하여 퍼스널 모빌리티(20)의 서비스 영역을 조정할 수도 있다.
즉, 서버(10)는, 퍼스널 모빌리티(20)로부터 영상 데이터를 수신하고 이를 처리하여 혼잡도 및 감정 정보를 얻는 것 외에, 실시예에 따라, 혼잡도 및 감정 정보를 퍼스널 모빌리티(20)로부터 직접 수신할 수도 있다.
이 경우, 퍼스널 모빌리티(20)는, 기 공지된 영상 처리 알고리즘에 기초하여 영상 데이터를 처리하여 퍼스널 모빌리티(20)가 주행하는 영역의 혼잡도 및 감정 정보를 획득할 수 있다.
도 3은 본 발명의 일 실시예에 따른 서버(10)가 퍼스널 모빌리티(20)로부터 수신되는 영상 데이터를 처리하는 경우를 나타내는 도면이고, 도 4는 본 발명의 일 실시예에 따른 서버(10)의 감정 분류 기준을 나타내는 도면이다.
도 3을 참조하면, 일 실시예에 따른 퍼스널 모빌리티(20)는, 전방을 촬영하는 카메라(25)를 포함할 수 있으며, 카메라(25)를 통하여 전방에 위치하는 보행자(p1, p2)를 포함하는 영상 데이터를 획득할 수 있다. 이 경우, 영상 데이터는, 보행자(p1, p2)들의 얼굴(f1, f2) 역시 포함할 수 있다.
일 실시예에 따른 서버(10)는, 통신부(110)를 통하여 퍼스널 모빌리티(20)로부터 영상 데이터를 수신할 수 있으며, 영상 데이터에 대한 영상 처리에 기초하여 보행자(p1, p2)를 감지하여 퍼스널 모빌리티(20)가 주행하는 영역의 혼잡도를 결정할 수 있으며, 얼굴(f1, f2)에 대한 영상 처리에 기초하여 퍼스널 모빌리티(20)가 주행하는 영역에서의 보행자(p1, p2)에 대한 감정 정보를 결정할 수 있다.
구체적으로, 제어부(120)는, 실시예에 따라, 영상 데이터에 기초하여 미리 설정된 시간 동안 감지된 보행자 인원수 및 미리 설정된 시간에서의 퍼스널 모빌리티(20)의 평균 속도에 기초하여 혼잡도를 결정할 수 있다.
구체적으로, 제어부(120)는, 기 공지된 영상 처리 알고리즘(예: 엣지 디텍션(edge detection) 등)에 기초하여 영상 데이터를 처리하여 영상 데이터 내의 보행자(p1, p2 등)를 감지할 수 있으며, 미리 설정된 시간 동안 감지된 보행자 인원수를 미리 설정된 시간에서의 평균 속도로 나누어 단위 속도 당 보행자 인원에 해당하는 혼잡도를 결정할 수 있다.
또한, 제어부(120)는, 실시예에 따라, 기 공지된 영상 처리 알고리즘에 기초하여 영상 데이터를 처리하여 영상 데이터 내의 얼굴(f1, f2등)의 얼굴 표정을 분석할 수 있으며, 얼굴 표정에 기초하여 해당 보행자(p1, p2 등)의 감정 상태를 나타내는 감정 정보를 결정할 수 있다.
구체적으로, 제어부(120)는 보행자에 대한 영상 데이터에 기초하여 보행자의 얼굴 표정을 감지하고, 감지된 얼굴 표정에 대응하는 감정 정보를 획득할 수 있다.
이 때, 제어부(120)는, 보행자 각각의 얼굴 표정에 얼굴 움직임 부화화 시스템(facial action coding system, FACS)을 적용하여 보행자 각각의 감정 정보를 획득할 수 있다.
구체적으로, 제어부(120)는 보행자의 얼굴에서 특징점을 추출하고, 추출된 특징점을 이용하여 복수의 얼굴요소를 추출할 수 있다. 복수의 얼굴요소는 눈썹, 눈, 코, 입 등을 포함할 수 있다. 제어부(120)는 추출된 복수의 얼굴요소 각각에 대한 패턴을 조합하고, 조합된 패턴을 저장부(130)에 저장된 얼굴 표정과 감정인자 간의 상관관계 정보(400)와 비교할 수 있다. 얼굴 표정과 감정인자 간의 상관관계 정보(400)는 얼굴 표정과 감정과의 관계를 나타내는 정보에 해당한다.
도 4를 참조하면, 일 실시예에 따른 제어부(120)는 얼굴 표정과 감정인자 간의 상관관계 정보(400) 중 보행자의 조합된 패턴과 동일한 패턴 또는 가장 유사한 패턴에 대응하는 얼굴 표정을 보행자의 얼굴 표정으로 판단할 수 있다.
또한, 일 실시예에 따른 제어부(120)는 판단된 보행자의 얼굴 표정에 대한 얼굴 표정과 감정인자 간의 상관관계 정보(400) 상의 상관관계 값을 고려하여 보행자의 감정을 나타내는 감정 정보를 획득할 수 있다.
예를 들어, 제어부(120)는 보행자의 판단된 표정이 얼굴 표정과 감정인자 간의 상관관계 정보(400) 상의 표정 2에 해당하는 경우 상관관계 값이 가장 높은 즐거운 감정이 보행자의 감정임을 나타내는 감정 정보를 획득할 수 있다.
도 4의 얼굴 표정과 감정인자 간의 상관관계 정보(400)는 표정 1, 표정 2 및 표정 3만을 도시하고 있으나, 보행자의 감정을 분류할 수 있는 얼굴 표정이면 제한 없이 포함할 수 있다.
이와 같이, 제어부(120)는 퍼스널 모빌리티(20)의 카메라(25)로 촬영된 퍼스널 모빌리티(20)가 주행하는 영역에서의 영상 데이터를 분석하여 보행자 각각의 얼굴 표정을 판단하고, 판단된 얼굴 표정에 기초하여 보행자 각각의 감정 정보를 획득할 수 있다.
이 때, 획득된 감정 정보는, 러셀(russell)의 감정 모델에 기초하여 감정의 정도에 따라, 긍정도, 부정도 및 흥분도 각각에 대하여 수치 값으로 정의될 수 있다.
도 5는 본 발명의 일 실시예에 따른 서버(10)가 서비스 영역의 확장 또는 축소하는 경우를 나타내는 도면이고, 도 6은 본 발명의 일 실시예에 따른 서버(10)가 추천 반납 지역 또는 반납 금지 지역을 결정하는 경우를 나타내는 도면이다.
도 5를 참조하면, 일 실시예에 따른 제어부(120)는, 혼잡도 및 보행자의 감정 정보에 기초하여 퍼스널 모빌리티(20)에 대한 서비스 영역(500)을 조정할 수 있다.
이 때, 서비스 영역(500)은, 퍼스널 모빌리티(20)의 대여 및 반납 등의 서비스가 제공되는 영역에 해당할 수 있으며, 가상의 경계인 지오펜스(geofence)에 의해 정의될 수 있다.
서버(10)는, GPS(global positioning system)에 기초하여 퍼스널 모빌리티(20)가 서비스 영역(500)을 벗어나는 것으로 결정하는 경우, 퍼스널 모빌리티(20)의 기능을 제한할 수 있다. 예를 들어, 서버(10)는, 퍼스널 모빌리티(20)의 반납을 제한하거나, 퍼스널 모빌리티(20)의 속도를 제한하는 등 서비스 영역(500)을 벗어난 퍼스널 모빌리티(20)의 기능을 제한할 수 있다.
제어부(120)는, 실시예에 따라, 혼잡도가 미리 설정된 기준 값 미만이면서 감정 정보에 기초하여 보행자 중 제1 비율 이상의 보행자가 부정적 감정을 갖는 것으로 결정되면, 퍼스널 모빌리티(20)가 주행하는 영역(510)이 서비스 영역(500)에서 삭제되도록 서비스 영역(500)의 경계를 축소할 수 있다.
이 때, 제어부(120)는, 실시예에 따라, 퍼스널 모빌리티(20)가 주행하는 영역(510)이 서비스 영역(500)의 경계로부터 미리 설정된 거리(예: 50m) 이내인 경우에 퍼스널 모빌리티(20)가 주행하는 영역(510)이 서비스 영역(500)에서 삭제되도록 서비스 영역(500)의 경계를 축소할 수 있다.
또한, 제어부(120)는, 실시예에 따라, 혼잡도가 미리 설정된 기준 값 이상이면서 감정 정보에 기초하여 보행자 중 제2 비율 이상의 보행자가 긍정적 감정을 갖는 것으로 결정되면, 퍼스널 모빌리티(20)가 주행하는 영역(520)이 서비스 영역(500)에 포함되도록 서비스 영역(500)의 경계를 확장할 수 있다.
이 때, 제어부(120)는, 실시예에 따라, 퍼스널 모빌리티(20)가 주행하는 영역(520)이 서비스 영역(500)의 경계로부터 미리 설정된 거리(예: 50m) 이내인 경우에 퍼스널 모빌리티(20)가 주행하는 영역(520)이 서비스 영역(500)에 포함되도록 서비스 영역(500)의 경계를 확대할 수 있다.
이 때, 제어부(120)는, 도 6에 도시된 바와 같이, 퍼스널 모빌리티(20)가 주행하는 영역(520)이 이미 서비스 영역에 포함된 경우에는, 퍼스널 모빌리티(20)가 주행하는 영역(520)을 추천 반납 영역으로 결정할 수 있다.
이 경우, 제어부(120)는, 추천 반납 영역에 대한 위치 정보를 퍼스널 모빌리티(20)의 사용자들에게 제공할 수 있도록, 추천 반납 영역에 대한 위치 정보에 기초하여 서비스를 제공하는 어플리케이션을 갱신할 수 있으며, 퍼스널 모빌리티(20)가 추천 반납 영역에 반납되는 경우, 퍼스널 모빌리티(20)의 사용자에 대응하는 사용자 계정에 미리 설정된 보상(예: 포인트 등)을 제공할 수 있다.
제어부(120)는, 실시예에 따라, 혼잡도가 미리 설정된 기준 값 이상이면서 감정 정보에 기초하여 보행자 중 제3 비율 이상의 보행자가 부정적 감정을 갖는 것으로 결정되면, 퍼스널 모빌리티(20)가 주행하는 영역(530)을 반납 금지 영역 또는 주행 금지 영역 중 적어도 하나로 설정할 수 있다.
이 경우, 제어부(120)는, 반납 금지 영역 또는 주행 금지 영역에 대한 위치 정보를 퍼스널 모빌리티(20)의 사용자들에게 제공할 수 있도록, 반납 금지 영역 또는 주행 금지 영역에 대한 위치 정보에 기초하여 서비스를 제공하는 어플리케이션을 갱신할 수 있으며, 해당 영역에서 퍼스널 모빌리티(20)의 반납을 제한하거나 속도를 제한할 수 있다. 즉, 제어부(120)는, GPS 신호에 기초하여 해당 영역에 진입한 퍼스널 모빌리티(20)의 반납 또는 속도를 제한할 수 있다.
일 실시예에 따른 제어부(120)는, 조정된 서비스 영역에 기초하여 퍼스널 모빌리티(20)를 제어할 수 있다.
구체적으로, 제어부(120)는, GPS 신호에 기초하여 퍼스널 모빌리티(20)가 서비스 영역에서 벗어나는 것으로 결정하는 경우, 해당 퍼스널 모빌리티(20)의 일부 기능을 제한함으로써, 퍼스널 모빌리티(20)가 서비스 영역에서 운용될 수 있도록 한다. 예를 들어, 제어부(120)는, 해당 퍼스널 모빌리티(20)의 반납을 제한하거나, 해당 퍼스널 모빌리티(20)의 속도를 제한할 수 있다.
이하, 일 실시예에 따른 서버(10)의 제어 방법을 설명하기로 한다. 후술하는 서버(10)의 제어 방법에는 전술한 실시예에 따른 서버(10)가 적용될 수 있다. 따라서, 앞서 도 1 내지 도 6을 참조하여 설명한 내용은 특별한 언급이 없더라도 일 실시예에 따른 서버(10)의 제어 방법에도 동일하게 적용 가능하다.
도 7은 본 발명의 일 실시예에 따른 서버(10)의 제어방법 중 서비스 영역(500)을 조정하는 경우의 순서도이다.
도 7을 참조하면, 일 실시예에 따른 서버(10)는, 퍼스널 모빌리티(20)로부터 영상 데이터를 수신할 수 있으며(710), 영상 데이터에 기초하여 퍼스널 모빌리티(20)가 주행하는 영역의 혼잡도 및 보행자의 감정 정보를 결정할 수 있다(720).
즉, 서버(10)는, 퍼스널 모빌리티(20)로부터 수신한 영상 데이터에 대한 영상 처리에 기초하여 퍼스널 모빌리티(20)가 주행하는 영역에서의 혼잡도와 보행자의 감정 정보를 결정할 수 있다.
이 때, 영상 데이터는, 퍼스널 모빌리티(20) 전방을 촬영한 영상을 포함하며, 퍼스널 모빌리티(20)에 마련되는 카메라를 통하여 획득될 수 있다
일 실시예에 따른 서버(10)는, 실시예에 따라, 혼잡도가 미리 설정된 기준 값 이상이면서(730의 예), 보행자 중 미리 설정된 비율(제2 비율) 이상이 긍정적 감정을 갖는 경우(740의 예), 퍼스널 모빌리티(20)가 주행하는 영역이 서비스 영역(500)에 포함되도록 서비스 영역(500)의 경계를 확장할 수 있다(750).
이 때, 서버(10)는, 퍼스널 모빌리티(20)가 주행하는 영역이 이미 서비스 영역에 포함된 경우에는, 퍼스널 모빌리티(20)가 주행하는 영역을 추천 반납 영역으로 결정할 수 있다.
이 경우, 제어부(120)는, 추천 반납 영역에 대한 위치 정보를 퍼스널 모빌리티(20)의 사용자들에게 제공할 수 있도록, 추천 반납 영역에 대한 위치 정보에 기초하여 서비스를 제공하는 어플리케이션을 갱신할 수 있으며, 퍼스널 모빌리티(20)가 추천 반납 영역에 반납되는 경우, 퍼스널 모빌리티(20)의 사용자에 대응하는 사용자 계정에 미리 설정된 보상(예: 포인트 등)을 제공할 수 있다.
또한, 서버(10)는, 실시예에 따라, 혼잡도가 미리 설정된 기준 값 이상이면서(730의 예), 보행자 중 미리 설정된 비율(제3 비율) 이상의 보행자가 부정적 감정을 갖는 경우(760의 예), 퍼스널 모빌리티(20)가 주행하는 영역을 반납 금지 영역 또는 주행 금지 영역 중 적어도 하나로 설정할 수 있다(770).
이 경우, 제어부(120)는, 반납 금지 영역 또는 주행 금지 영역에 대한 위치 정보를 퍼스널 모빌리티(20)의 사용자들에게 제공할 수 있도록, 반납 금지 영역 또는 주행 금지 영역에 대한 위치 정보에 기초하여 서비스를 제공하는 어플리케이션을 갱신할 수 있으며, 해당 영역에서 퍼스널 모빌리티(20)의 반납을 제한하거나 속도를 제한할 수 있다. 즉, 제어부(120)는, GPS 신호에 기초하여 해당 영역에 진입한 퍼스널 모빌리티(20)의 반납 또는 속도를 제한할 수 있다.
또한, 서버(10)는, 실시예에 따라, 혼잡도가 미리 설정된 기준 값 미만이면서(730의 아니오), 보행자 중 미리 설정된 비율(제1 비율) 이상이 부정적 감정을 갖는 경우(780의 예), 퍼스널 모빌리티(20)가 주행하는 영역이 서비스 영역(500)에서 삭제되도록 서비스 영역(500)의 경계를 축소할 수 있다(790).
도 8은 본 발명의 일 실시예에 따른 서버(10)의 제어방법 중 혼잡도를 결정하는 경우의 순서도이다.
도 8을 참조하면, 일 실시예에 따른 서버(10)는, 퍼스널 모빌리티(20)로부터 영상 데이터를 수신할 수 있다(810). 이때, 서버(10)는, 미리 설정된 시간 경과할 때 까지(820의 예), 영상 데이터를 수신할 수 있다.
일 실시예에 따른 서버(10)는, 미리 설정된 시간이 경과하는 경우(820의 예), 미리 설정된 시간에서의 퍼스널 모빌리티(20)의 평균 속도를 결정하고(830), 미리 설정된 시간 동안 감지된 보행자 인원수 및 평균 속도에 기초하여 혼잡도를 결정할 수 있다(840).
즉, 서버(10)는, 실시예에 따라, 혼잡도 및 보행자의 감정 정보를 미리 설정된 시간 간격으로 결정할 수 있으며, 서버(10)는, 실시예에 따라, 영상 데이터에 기초하여 미리 설정된 시간 동안 감지된 보행자 인원수 및 미리 설정된 시간에서의 퍼스널 모빌리티(20)의 평균 속도에 기초하여 혼잡도를 결정할 수 있다.
구체적으로, 서버(10)는, 기 공지된 영상 처리 알고리즘(예: 엣지 디텍션(edge detection) 등)에 기초하여 영상 데이터를 처리하여 영상 데이터 내의 보행자를 감지할 수 있으며, 미리 설정된 시간 동안 감지된 보행자 인원수를 미리 설정된 시간에서의 평균 속도로 나누어 단위 속도 당 보행자 인원에 해당하는 혼잡도를 결정할 수 있다.
도 9는 본 발명의 일 실시예에 따른 서버(10)의 제어방법 중 추천 정보에 대한 입력을 수신하여 서비스 영역(500)을 조정하는 경우의 순서도이다.
도 9를 참조하면, 일 실시예에 따른 서버(10)는, 혼잡도 및 감정 정보에 기초하여 서비스 영역(500)에 대한 추천 정보를 결정할 수 있으며(910), 디스플레이를 통하여 추천 정보를 표시할 수 있다(920).
이 때, 추천 정보는, 기존의 서비스 영역에 대한 조정을 추천하는 정보를 포함할 수 있으며, 퍼스널 모빌리티(20)가 주행하는 영역을 서비스 영역에서 삭제하거나 포함하는 추천 내용을 포함할 수 있다. 또한, 실시예에 따라, 추천 정보는, 퍼스널 모빌리티(20)가 주행하는 영역을 추천 반납 영역, 반납 금지 영역, 또는 주행 금지 영역 중 적어도 하나로 추천하는 내용을 포함할 수 있다.
추천 정보는, 실시예에 따라, 추천 내용을 텍스트로 나타낼 수도 있으며, 추천 내용을 지도 상에 시각적으로 나타낼 수도 있다. 다만, 추천 정보의 표시 형식은 이에 제한되지 않으며, 서버(10)의 사용자에게 표시할 수 있는 형식이면 제한이 없다.
일 실시예에 따른 서버(10)는, 추천 정보에 대한 승인이 입력되면(930의 예), 추천 정보에 기초하여 서비스 영역을 조정할 수 있다(940).
한편, 개시된 실시예들은 컴퓨터에 의해 실행 가능한 명령어를 저장하는 기록매체의 형태로 구현될 수 있다. 명령어는 프로그램 코드의 형태로 저장될 수 있으며, 프로세서에 의해 실행되었을 때, 프로그램 모듈을 생성하여 개시된 실시예들의 동작을 수행할 수 있다. 기록매체는 컴퓨터로 읽을 수 있는 기록매체로 구현될 수 있다.
컴퓨터가 읽을 수 있는 기록매체로는 컴퓨터에 의하여 해독될 수 있는 명령어가 저장된 모든 종류의 기록 매체를 포함한다. 예를 들어, ROM(read only memory), RAM(random access memory), 자기 테이프, 자기 디스크, 플래쉬 메모리, 광 데이터 저장장치 등이 있을 수 있다.
이상에서와 같이 첨부된 도면을 참조하여 개시된 실시예들을 설명하였다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고도, 개시된 실시예들과 다른 형태로 본 발명이 실시될 수 있음을 이해할 것이다. 개시된 실시예들은 예시적인 것이며, 한정적으로 해석되어서는 안 된다.
1: 서비스 영역 조정 시스템 10: 서버
110: 통신부 120: 제어부
130: 저장부 20: 퍼스널 모빌리티
25: 카메라 30: 네트워크

Claims (22)

  1. 통신부; 및
    퍼스널 모빌리티(personal mobility)로부터 수신되는 영상 데이터에 기초하여 미리 설정된 시간 동안 감지되는 보행자 인원수를 결정하고, 상기 보행자 인원수 및 상기 퍼스널 모빌리티의 평균 속도에 기초하여 상기 퍼스널 모빌리티가 주행하는 영역의 혼잡도를 결정하고, 상기 혼잡도에 기초하여 상기 퍼스널 모빌리티에 대한 서비스 영역을 조정하는 제어부;를 포함하는 서버.
  2. 제1항에 있어서,
    상기 제어부는,
    상기 혼잡도가 미리 설정된 기준 값 이상이면 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에서 삭제되도록 상기 서비스 영역의 경계를 축소하는 서버.
  3. 제1항에 있어서,
    상기 제어부는,
    상기 혼잡도가 미리 설정된 기준 값 미만이면 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에 포함되도록 상기 서비스 영역의 경계를 확장하는 서버.
  4. 제1항에 있어서,
    상기 제어부는,
    상기 영상 데이터에 기초하여 상기 퍼스널 모빌리티가 주행하는 영역의 보행자의 감정 정보를 결정하는 서버.
  5. 제4항에 있어서,
    상기 제어부는,
    상기 혼잡도가 미리 설정된 기준 값 미만이면서 상기 감정 정보에 기초하여 보행자 중 제1 비율 이상의 보행자가 부정적 감정을 갖는 것으로 결정되면, 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에서 삭제되도록 상기 서비스 영역의 경계를 축소하는 서버.
  6. 제4항에 있어서,
    상기 제어부는,
    상기 혼잡도가 미리 설정된 기준 값 이상이면서 상기 감정 정보에 기초하여 보행자 중 제2 비율 이상의 보행자가 긍정적 감정을 갖는 것으로 결정되면, 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에 포함되도록 상기 서비스 영역의 경계를 확장하는 서버.
  7. 제6항에 있어서,
    상기 제어부는,
    상기 퍼스널 모빌리티가 주행하는 영역이 이미 상기 서비스 영역에 포함된 경우, 상기 퍼스널 모빌리티가 주행하는 영역을 추천 반납 영역으로 설정하는 서버.
  8. 제4항에 있어서,
    상기 제어부는,
    상기 혼잡도가 미리 설정된 기준 값 이상이면서 상기 감정 정보에 기초하여 보행자 중 제3 비율 이상의 보행자가 부정적 감정을 갖는 것으로 결정되면, 상기 퍼스널 모빌리티가 주행하는 영역을 반납 금지 영역 또는 주행 금지 영역 중 적어도 하나로 설정하는 서버.
  9. 제4항에 있어서,
    상기 제어부는,
    상기 영상 데이터에서의 보행자의 얼굴 표정에 기초하여 상기 감정 정보를 결정하는 서버.
  10. 제4항에 있어서,
    상기 서버는,
    디스플레이;를 더 포함하고,
    상기 제어부는,
    상기 혼잡도 및 상기 감정 정보에 기초하여 상기 서비스 영역에 대한 추천 정보를 결정하고, 상기 추천 정보를 표시하도록 상기 디스플레이를 제어하는 서버.
  11. 제10항에 있어서,
    상기 서버는,
    사용자로부터 입력을 수신하는 입력부;를 더 포함하고,
    상기 제어부는,
    상기 사용자로부터 상기 추천 정보에 대한 승인을 입력받는 경우 상기 추천 정보에 기초하여 상기 서비스 영역을 조정하는 서버.
  12. 통신부를 포함하는 서버의 제어 방법에 있어서,
    퍼스널 모빌리티(personal mobility)로부터 수신되는 영상 데이터에 기초하여 미리 설정된 시간 동안 감지되는 보행자 인원수를 결정하고;
    상기 보행자 인원수 및 상기 퍼스널 모빌리티의 평균 속도에 기초하여 상기 퍼스널 모빌리티가 주행하는 영역의 혼잡도를 결정하고;
    상기 혼잡도에 기초하여 상기 퍼스널 모빌리티에 대한 서비스 영역을 조정하는 것;을 포함하는 서버의 제어 방법.
  13. 제12항에 있어서,
    상기 서비스 영역을 조정하는 것은,
    상기 혼잡도가 미리 설정된 기준 값 이상이면 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에서 삭제되도록 상기 서비스 영역의 경계를 축소하는 것;을 포함하는 서버의 제어 방법.
  14. 제12항에 있어서,
    상기 서비스 영역을 조정하는 것은,
    상기 혼잡도가 미리 설정된 기준 값 미만이면 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에 포함되도록 상기 서비스 영역의 경계를 확장하는 것;을 포함하는 서버의 제어 방법.
  15. 제12항에 있어서,
    상기 영상 데이터에 기초하여 상기 퍼스널 모빌리티가 주행하는 영역의 보행자의 감정 정보를 결정하는 것;을 더 포함하는 서버의 제어 방법.
  16. 제15항에 있어서,
    상기 서비스 영역을 조정하는 것은,
    상기 혼잡도가 미리 설정된 기준 값 미만이면서 상기 감정 정보에 기초하여 보행자 중 제1 비율 이상의 보행자가 부정적 감정을 갖는 것으로 결정되면, 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에서 삭제되도록 상기 서비스 영역의 경계를 축소하는 것;을 포함하는 서버의 제어 방법.
  17. 제15항에 있어서,
    상기 서비스 영역을 조정하는 것은,
    상기 혼잡도가 미리 설정된 기준 값 이상이면서 상기 감정 정보에 기초하여 보행자 중 제2 이상의 보행자가 긍정적 감정을 갖는 것으로 결정되면, 상기 퍼스널 모빌리티가 주행하는 영역이 상기 서비스 영역에 포함되도록 상기 서비스 영역의 경계를 확장하는 것;을 포함하는 서버의 제어 방법.
  18. 제17항에 있어서,
    상기 서비스 영역을 조정하는 것은,
    상기 퍼스널 모빌리티가 주행하는 영역이 이미 상기 서비스 영역에 포함된 경우, 상기 퍼스널 모빌리티가 주행하는 영역을 추천 반납 영역으로 설정하는 것;을 포함하는 서버의 제어 방법.
  19. 제15항에 있어서,
    상기 서비스 영역을 조정하는 것은,
    상기 혼잡도가 미리 설정된 기준 값 이상이면서 상기 감정 정보에 기초하여 보행자 중 제3 비율 이상의 보행자가 부정적 감정을 갖는 것으로 결정되면, 상기 퍼스널 모빌리티가 주행하는 영역을 반납 금지 영역 또는 주행 금지 영역 중 적어도 하나로 설정하는 것;을 포함하는 서버의 제어 방법.
  20. 제15항에 있어서,
    상기 감정 정보를 결정하는 것은,
    상기 영상 데이터에서의 보행자의 얼굴 표정에 기초하여 상기 감정 정보를 결정하는 것;을 포함하는 서버의 제어 방법.
  21. 제15항에 있어서,
    상기 서버는,
    디스플레이;를 더 포함하고,
    상기 혼잡도 및 상기 감정 정보에 기초하여 상기 서비스 영역에 대한 추천 정보를 결정하고, 상기 추천 정보를 표시하도록 상기 디스플레이를 제어하는 것;을 더 포함하는 서버의 제어 방법.
  22. 제21항에 있어서,
    상기 서버는,
    사용자로부터 입력을 수신하는 입력부;를 더 포함하고,
    상기 사용자로부터 상기 추천 정보에 대한 승인을 입력받는 경우 상기 추천 정보에 기초하여 상기 서비스 영역을 조정하는 것;을 더 포함하는 서버의 제어 방법.
KR1020200029417A 2020-03-10 2020-03-10 서버 및 그 제어 방법 KR20210114144A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020200029417A KR20210114144A (ko) 2020-03-10 2020-03-10 서버 및 그 제어 방법
US17/024,881 US11490285B2 (en) 2020-03-10 2020-09-18 Server and method of controlling the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200029417A KR20210114144A (ko) 2020-03-10 2020-03-10 서버 및 그 제어 방법

Publications (1)

Publication Number Publication Date
KR20210114144A true KR20210114144A (ko) 2021-09-23

Family

ID=77665469

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200029417A KR20210114144A (ko) 2020-03-10 2020-03-10 서버 및 그 제어 방법

Country Status (2)

Country Link
US (1) US11490285B2 (ko)
KR (1) KR20210114144A (ko)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8175031B2 (en) * 2004-11-18 2012-05-08 Telefonaktiebolaget Lm Ericsson (Publ) Method and apparatus for supporting packet data services in service area boundary regions
US11107365B1 (en) * 2015-08-28 2021-08-31 State Farm Mutual Automobile Insurance Company Vehicular driver evaluation
JP6897377B2 (ja) * 2017-07-11 2021-06-30 トヨタ自動車株式会社 情報提供装置
WO2019031002A1 (ja) * 2017-08-08 2019-02-14 ソニー株式会社 制御システムおよび制御方法
US11175153B2 (en) * 2019-08-20 2021-11-16 Toyota Motor North America, Inc. Pedestrian and vehicle route optimization
US11150665B2 (en) * 2019-09-17 2021-10-19 Ha Q Tran Smart vehicle
US20210247196A1 (en) * 2020-02-10 2021-08-12 Uber Technologies, Inc. Object Detection for Light Electric Vehicles

Also Published As

Publication number Publication date
US11490285B2 (en) 2022-11-01
US20210289387A1 (en) 2021-09-16

Similar Documents

Publication Publication Date Title
CN107705808B (zh) 一种基于面部特征与语音特征的情绪识别方法
US20180172464A1 (en) In-vehicle device and route information presentation system
US20180314889A1 (en) Information processing device, information processing method, and program
US9932000B2 (en) Information notification apparatus and information notification method
US20210019520A1 (en) System and method for eye-tracking
EP3706095A1 (en) Evaluation device, evaluation system, vehicle, and program
US9503632B2 (en) Guidance based image photographing device and method thereof for high definition imaging
KR20160123644A (ko) 스마트 미러 장치 및 사용자 맞춤형 영상 제공 방법
EP2525288A2 (en) Method, system, and computer-readable recording medium for providing information on an object using a viewing frustum
JP5874980B2 (ja) 情報提供システムおよび情報提供方法
JP6500139B1 (ja) 視覚支援装置
KR20210114144A (ko) 서버 및 그 제어 방법
CN106168487B (zh) 基于用户识别自定义导航数据的系统和方法
CN111931694A (zh) 确定人物的视线朝向的方法、装置、电子设备和存储介质
US11715332B2 (en) System and method for eye-tracking
CN107832726B (zh) 使用者识别和确认装置及车用中央控制系统
JP6143986B1 (ja) 情報提示システム
JP2023014402A (ja) 情報処理装置、情報提示システム、情報処理方法、及び情報処理プログラム
JP6623657B2 (ja) 情報提供装置、情報提供システム及び情報提供方法
EP3438939A1 (en) Information processing device, information processing method, and program
KR20230082081A (ko) 맞춤형 증강 현실 기반 관광 추천 시스템 및 방법
Chen et al. AR-based Taxi recommendation by leveraging crowd sharing comments
JP6449504B1 (ja) 情報処理装置、情報処理方法、及び情報処理プログラム
JP7359208B2 (ja) 情報処理装置、情報処理方法およびプログラム
JP2020057178A (ja) 情報処理装置