KR102239439B1 - 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법 - Google Patents

Abstract

본 발명은 탑승객의 정보를 기반으로 고객군을 설정하여 효용성이 높은 정보 및 컨텐츠를 효율적으로 제공할 수 있도록 맞춤형 광고를 제공하는 시스템에 관한 것이다.
또한, 광고주가 광고료를 부담없이 지불하고 지불된 비용을 운송수단 영업자, 광고 영업주, 광고 서버 관리자가 합리적으로 배분하는 것이 가능한 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템에 관한 것이다.

Description

운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법 {Apparatus for providing transportation passengers customized digital signage systems}

본 발명은 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법에 관한 것으로, 더욱 상세하게는 종래의 운송수단 탑승객에 광고를 전달함에 있어서 소비자에 메시지를 일방적으로 전달하는 것에 치중해 있는 단점이 있으나, 본 발명은 운송수단에 탑승객이 승차하면 탑승객의 정보를 기반으로 맞춤형 광고를 용이하게 제공하는 것이 가능한 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법에 관한 것이다.

무선 통신과 데이터 처리 기술에 대한 과학의 진보에 따라 무선 네트워크 기능을 이용한 모바일 광고 서비스 기술이 상당히 빠른 속도로 발전하고 있으며, 그 사용빈도 또한 증가하고 있다. 이에 따라, 디지털 정보 디스플레이를 이용하여 옥외 광고를 제공하는 디지털사이니지 기술이 개발되어 서비스되고 있는 실정이다.

디지털사이니지 기술은 통신망을 통해 관제센터에서 광고 내용을 제어할 수 있는 광고판을 의미하며, 광고판의 설치 위치를 기준으로 아웃도어(Outdoor)형과 인도어(Indoor)형으로 분리된다.

기존에 버스, 지하철, 택시, 철도, 비행기 등과 같은 운송수단 탑승객에도 디지털사이니지 기술을 이용하여 광고를 제공하는 기술이 개발되어 서비스되고 있는 실정이다.

하지만, 종래의 기술들은 사전 계획된 스케줄에 따라 불특정 다수에게 영상 광고를 반복 상영하거나, 동시에 다수의 광고를 상영함에 있어서 상영 가능한 광고 수가 제한되는 문제가 있다.

또한, 기존에 서비스되고 있는 기술은 광고 매체의 위치, 상영 시간대 등에 따른 등급을 기준으로 광고료를 책정하는 경우 고가의 광고료를 선결제하도록 되어 있어, 광고주의 부담이 커지는 문제가 있다. 이로 인해, 지역 광고주 대상 저변 확대에 어려움이 있는 문제가 있다.

그리고 광고 수행 결과도 광고 사용자 수, 성별, 연령 등 적극적이고 구체적인 피드백이 불가하여 비효율적으로 광고 제공 시스템을 운영하는 문제가 있다.

국내 등록 실용신안 제20-0207307호("자동차용 디스플레이 장치", 이하 선행문헌 1)에서는 탑승 승객에게 다양한 정보를 제공할 수 있는 차량용 디스플레이 장치가 개시되고 있다. 상기 선행문헌 1은 프론트 시트의 후면에 형성되는 액정 모니터, 액정 모니터 상에 영상을 표시하는 영상 처리 장치 및 액정 모니터와 영상 처리 장치를 구동시키는 영상 구동 장치를 포함하여 구성되고 있으며, 이에 대한 기대효과는 프론트 시트의 헤드레스트 후면에 장착된 액정 모니터를 영업용 차량 등에 설치함으로써, 기업 광고, 최근 뉴스나 날씨 혹은 도로 교육 정보를 탑승 승객에서 제공할 수 있는 특징을 가진다.

국내 등록 특허 제10-1552277호("모바일택시 기반 실시간 광고시스템", 이하 선행문헌 2)에서는 주행 중인 택시를 통해 행정구역별로 구분되는 각 지역을 지날 때마다 해당 지역에 속하는 고유의 축제, 특산품, 관광지, 문화재, 상점 및 제조업체 등의 홍보를 광고 형태로 노출시켜 주는 수단을 통해, 주행 중인 택시 주변의 무수히 많은 보행자들이 볼 수 있어 지역업체들에 극대화된 광고홍보 효과를 제공할 수 있는 특징을 가진다.

그러나, 상기 선행문헌 1 및 2에 의해서도, 소비자에 광고를 일방적으로 제공하는 광고주 중심의 광고 전달의 문제점을 해결하지 못하고 있다.

국내 등록 실용신안 제20-0207307호 국내 등록 특허 제10-1552277호

본 발명은 운송수단 탑승객의 정보를 기반으로 고객군을 설정하여 효용성이 높은 정보 및 컨텐츠를 효율적으로 제공할 수 있도록 맞춤형 광고를 제공하는 것을 목적으로 한다.

또한, 광고주가 광고료를 부담없이 지불하고 지불된 비용을 운송수단 영업자, 광고 영업자, 광고 서버 관리자가 합리적으로 배분하는 것이 가능한 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법을 제안하는 것을 목적으로 한다.

본 발명의 일 실시예에 따른 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법은 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이, (a) 카메라를 통해 영상 인식을 수행하는 단계; (b) 영상 인식에 따른 고객군을 설정하는 단계; (c) 설정된 고객군에 따라 기저장된 광고를 매칭하는 단계; 및 (d) 매칭한 광고를 디스플레이로 송출하는 단계;를 포함하는 것을 특징으로 할 수 있다.

또한, 상기 (b) 단계는: 2 이상의 영상 인식시, 기저장된 영상이 있는지 판단하는 단계; 및 판단결과 기저장된 영상이 있는 경우 이를 제외하는 단계;를 포함하는 것을 특징으로 할 수 있다.

또한, 상기 (b) 단계는: 상기 제외하는 단계 이후에, 제외한 이후에도 인식결과, 2 이상의 영상이 존재하는 경우, 2 이상의 영상 각각에 대한 고객군을 별도판별하는 단계;를 더 포함하는 것을 특징으로 할 수 있다.

또한, 상기 (b) 단계는: 음성 인식에 따른 고객군을 설정하는 단계를 더 포함하고, 상기 영상 인식에 따른 고객군을 설정할 때, 인식한 영상 정보에서 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술을 통해, 조명, 포즈, 표정, 액세서리 변화를 고려하여 탑승객의 성별, 연령 정보를 인식하거나, 인식한 음성 정보에서 주파수 및 음색을 포함하는 음성 인식 정보를 통해 고객군을 설정하는 단계를 포함하되, 상기 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술은, 인식한 얼굴에서 최소 6개에서 최대 68개의 포인트를 추출하여 영상 정보의 랜드마크를 검출하고, 추출한 상기 랜드마크 정보를 정규화를 통해 가공하며, 가공된 정보를 바탕으로 CNN(Convolution Neural Network) 특징을 추출하는 것을 특징으로 할 수 있다.

또한, 상기 (c) 단계는: 상기 (b) 단계에서 설정한 고객군에 상응하여 추정한 상기 관심 지역 및 관심 서비스를 매칭하는 단계; 및 판단결과 현재 위치가 미리 설정한 행정 구역 밖으로 판단한 경우에는 매칭한 상기 관심 지역 및 관심 서비스를 해제하는 단계;를 포함하는 것을 특징으로 할 수 있다.

또한. 상기 (c) 단계는: 상기 (b) 단계에서 별도판별한 2 이상의 고객군을 그룹화한 고객군 SET에 대하여, 기설정된 관계 표준 기준에 따라 상기 2 이상의 고객군 상호간의 관계를 추정한 최적 그룹 고객군을 설정하는 단계; 및 상기 최적 그룹 고객군에 상응하는 기저장된 최적 관심 서비스를 매칭하는 단계;를 포함하는 것을 특징으로 하는 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법.

또한, 상기 송출하는 단계 이후에, 광고 송출에 따른 단위 시간당 광고비 총액을 광고주에게 청구하는 단계; 및 청구한 광고비 총액을 관리 서버 관리자, 운송수단 영업자 및 광고 영업자에게 분배하는 단계;를 포함하는 것을 특징으로 할 수 있다.

또한, 상기 (a) 단계는, 상기 카메라를 통해 신규 영상이 수신된 경우에 한해 상기 영상 인식을 수행하는 것을 특징으로 할 수 있다.

또한, 상기 송출하는 단계 이후에, 송출한 광고의 제품 또는 서비스에 관하여 터치 신호가 입력되면 카메라 촬영을 위한 상기 송출한 광고의 제품 또는 서비스의 QR 코드를 디스플레이하는 단계; 및 상기 송출한 광고의 제품 및 서비스에 관한 쿠폰 또는 예약 서비스를 디스플레이하는 단계를 더 포함하는 것을 특징으로 할 수 있다.

또한, 상기 (c) 단계는, 운송수단의 운행 방향, 운송수단의 위치 및 시간 정보를 고려하여 운송수단의 운행 경로를 예측하는 단계; 및 설정된 고객군 및 상기 예측 운행 경로를 고려해 송출할 광고를 검색하고 시간순으로 스케쥴링하여 기저장된 광고를 매칭하는 단계;를 포함하는 것을 특징으로 할 수 있다.

본 발명의 일 실시 예에 의하면, 탑승객의 정보를 기반으로 고객군을 설정하여 효용성이 높은 정보 및 컨텐츠를 효율적으로 제공할 수 있도록 맞춤형 광고를 제공할 수 있다.

또한, 본 발명의 일 실시 예에 의하면, 광고주가 광고료를 부담없이 지불하고 지불된 비용을 운송수단 영업자, 관리 서버 관리자, 광고 영업자가 합리적으로 배분할 수 있다.

도 1은 본 발명의 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템 이 수행하는 방법을 나타낸 블록구성도이다.
도 2 (a)는 본 발명의 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법을 이루는 구성 중 관리 서버를 나타낸 블록구성도이다.
도 2 (b)는 본 발명의 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법을 이루는 구성 중 운송수단 단말을 나타낸 블록구성도이다.
도 3은 본 발명의 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법을 이루는 구성 중 운송수단 단말의 판단모듈을 나타낸 블록구성도이다.
도 4는 본 발명의 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법에서 맞춤형 광고를 제공하는 방법을 나타낸 흐름도이다.
도 5는 본 발명의 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법에서 광고료를 분배하는 방법을 나타낸 흐름도이다.
도 6은 본 발명의 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법이 수행하는 방법에서 위치 체크 모듈에 따라 운송수단의 현재 위치를 판단하고, 광고 콘텐츠를 매칭하는 방법을 나타낸 실시예이다.
도 7은 본 발명의 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법에서 운송수단 탑승객에 맞춤형 광고를 제시하는 방법을 나타낸 실시예이다.
도 8은 본 발명의 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템에서 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술을 이용하여 운송수단 탑승객의 정보를 추출하는 방법을 나타낸 실시예이다.
도 9는 본 발명의 운송수단 중에서도 택시 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법을 이루는 구성 중 택시 단말의 판단모듈을 나타낸 블록구성도이다.
도 10은 본 발명의 운송수단 중에서도 택시 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법에서 맞춤형 광고를 제공하는 방법을 나타낸 흐름도이다.
도 11은 본 발명의 운송수단 중에서도 택시 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법에서 맞춤형 광고를 제공하기 위하여 탑승객의 고객군을 판별하는 방법을 나타낸 흐름도이다.

본 발명의 다른 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술 되는 실시 예를 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예는 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.

만일 정의되지 않더라도, 여기서 사용되는 모든 용어들(기술 혹은 과학 용어들을 포함)은 이 발명이 속한 종래 기술에서 보편적 기술에 의해 일반적으로 수용되는 것과 동일한 의미를 가진다. 일반적인 사전들에 의해 정의된 용어들은 관련된 기술 그리고/혹은 본 출원의 본문에 의미하는 것과 동일한 의미를 갖는 것으로 해석될 수 있고, 그리고 여기서 명확하게 정의된 표현이 아니더라도 개념화 되거나 혹은 과도하게 형식적으로 해석되지 않을 것이다.

본 명세서에서 사용된 용어는 실시 예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 '포함한다' 및/또는 이 동사의 다양한 활용형들 예를 들어, '포함', '포함하는', '포함하고', '포함하며' 등은 언급된 조성, 성분, 구성요소, 단계, 동작 및/또는 소자는 하나 이상의 다른 조성, 성분, 구성요소, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다. 본 명세서에서 '및/또는' 이라는 용어는 나열된 구성들 각각 또는 이들의 다양한 조합을 가리킨다.

한편, 본 명세서 전체에서 사용되는 '~부', '~기', '~블록', '~모듈' 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미할 수 있다. 예를 들어 소프트웨어, FPGA 또는 ASIC과 같은 하드웨어 구성요소를 의미할 수 있다. 그렇지만 '~부', '~기', '~블록', '~모듈' 등이 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. '~부', '~기', '~블록', '~모듈'은 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다.

따라서, 일 예로서 '~부', '~기', '~블록', '~모듈'은 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 '~부', '~기', '~블록', '~모듈'들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 '~부', '~기', '~블록', '~모듈'들로 결합되거나 추가적인 구성요소들과 '~부', '~기', '~블록', '~모듈'들로 더 분리될 수 있다.

이하, 본 발명의 실시 예를 첨부된 도면들을 참조하여 더욱 상세하게 설명한다.

도 1은 본 발명의 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법을 나타낸 블록구성도이다.

도시된 바와 같이, 본 발명의 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법의 실시예는 관리 서버(100), 광고 영업자(200), 광고주(300), 운송수단 영업자(400), 운송수단 단말(500)로 이루어 진다.

관리 서버(100)는 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템을 수행하는 방법으로, 운송수단 단말에 송출되는 광고 컨텐츠, 고객군 정보, 행정구역 정보 등을 저장하고 관리 서버 관리자에 의해 운영되는 관리 서버(100)로, 광고 영업자(200)는 관리 서버 관리자에 광고할 것을 신청하고, 광고하고자 하는 물품 또는 서비스의 광고 컨텐츠를 관리 서버 관리자에 전달할 수 있다.

또한, 운송수단 영업자(400)는 관리 서버(100)로부터 운송수단의 운영관련 정보를 전달 받을 수 있고, 원하는 경우에는 상기 관리 서버 관리자에 상기 운송수단 운행 관련 정보를 요청할 수 있다.

이 때, 운송수단 영업자(400)는 버스, 지하철, 택시, 자가용 등과 같은 운송수단을 이용 및 운영하는 자를 말하며, 상기 운송수단 영업자 (400)는 운송수단 단말(500)로부터 운송수단 단말(500)의 실시간 위치 정보 등, GPS(Global positioning system) 또는 디지털운행기록계(DTG)를 통해 획득할 수 있는 운송수단 운행 정보를 전달받을 수 있다.

상기 운송수단 영업자(400)는 GPS(Global positioning system) 또는 디지털운행기록계(DTG)를 통해 획득할 수 있는 정보 외에 다른 정보가 필요한 경우에는 상기 관리 서버(100) 관리자에 요청하여 정보를 획득할 수도 있다.

운송수단 단말(500)은 운송수단 단말에 저장된 데이터베이스와 판단모듈의 정보를 바탕으로 운송수단 탑승객이 속하는 고객군 정보 또는 운송수단의 현재 위치에 따라 매칭된 광고 정보를 탑승객에 송출할 수 있다.

관리 서버(100)는 네트워크에 연결되어 데이터를 주고 받을 수 있는 컴퓨팅 장치로서, 일 예로 데스크탑, 랩탑과 같은 퍼스널 컴퓨터이나 이에 제한되지 않고 태블릿 PC나 스마트 디바이스와 같은 다양한 종류의 단말 장치를 포함한다.

광고 영업주(200)는 광고주(300)으로부터 광고를 전달받아 광고를 운영하고 관리하는 주체를 말하며, 광고 영업주는 관리 서버(100)가 운송수단 단말(500)로부터 전달받은 송출된 광고의 종류 및 광고 전달 횟수, 전달 시간 정보 등을 전달받을 수 있다. 광고 영업주(200)는 상기 관리 서버(100)로부터 전달받은 광고 운영 정보를 바탕으로 광고비를 운송수단 영업자, 관리 서버 관리자, 광고 영업자가 합리적으로 배분할 수 있도록 정산할 수 있다.

광고주(300)는 자신의 제품 또는 서비스를 홍보하기 위해 제작된 광고 컨텐츠를 입력하는 주체를 말하며, 예컨대 지역적 규모의 영업/마케팅을 지향하는 지역 소재 광고주 또는 지역 소재 중소기업 및 중소상공인, 병원, 학원, 음식점업 및 각종 편의시설 등 서비스 업종의 광고 컨텐츠를 상기 광고 영업주(300)에 광고 운영을 신청할 수 있다. 이 때, 상기 광고 영업주(300)에 전달하는 광고 컨텐츠는 광고뿐만 아니라 예능 방송, 영화 등의 영상 또는 음성 컨텐츠일 수도 있다.

운송수단 단말(500)은 운송수단 내부에 설치되어 있으며, 버스, 지하철, 택시, 자가용 등과 같은 운송수단을 이용 및 운영하는 운송수단 영업자(400) 또는 관리 서버(100)로부터 운송수단 운영 또는 광고와 관련된 정보를 전달받을 수 있다.

또한, 운송수단 단말(500)은 운송수단의 운행정보, 승객 탑승 횟수, 광고 재생 횟수, 회사별, 지역별 차량 운행 일수 등의 정보를 운송수단 사업자(300) 또는 관리 서버(100)로 전송할 수 있으며, 그 외에도 차량의 운행속도, 분당엔진횟수, 브레이크 사용기록, 위치정보 등의 GPS(Global positioning system) 또는 디지털운행기록계(DTG) 정보도 함께 전송할 수 있다.

상기 관리 서버(100)로 전송되는 운송수단의 운행정보, 승객 탑승 횟수, 광고 재생 횟수, 회사별, 지역별 차량 운행 일수 등의 정보는, 운송수단 단말(500)이 운송수단 영업자(400)의 차고로 입고할 때에 상기 관리 서버(100)로 전송될 수 있다. 상기 관리 서버(100)로 운행 정보가 전송되는 것은 1일 1회 이상 전송될 수 있다.

더 추가적으로, 운송수단 단말(500)에는 적어도 하나의 카메라(501)를 포함할 수 있다. 상기 카메라를 통해서 영상의 전체 변화도를 판단하는 것이 가능하며, 승객이 없는 경우의 좌석 영상과 운송수단 탑승객이 승차한 경우의 빈 좌석 영상을 비교하여 좌석 영상의 변화도를 판단하여 상기 변화도 정보를 바탕으로 승객이 승차했는지 판단할 수 있다.

또한 상기 카메라를 통해 획득한 운송수단 탑승객의 영상정보를 기반으로 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술을 사용하여 운송수단 탑승객의 연령, 성별 등을 판단할 수 있다.

상기 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술은 일반 CCTV 카메라나 저가의 USB 카메라 환경에서도 모두 적용하는 것이 가능하며, 미리 국내 혹은 외국인 1,000명의 얼굴 자동검출, 성별 및 연령인식 라이브러리 및 소스 코드를 등록시키고 학습을 수행한다.

상기 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술은 640x480 화소인 일반 사양의 컴퓨팅 환경에서 초당 1~5 프레임 이상의 실시간 얼굴 검출 및 인식이 가능하며, 68 포인트 랜드마크를 검출하고 이를 기반으로 시선 추적이 가능하다.

따라서 상기 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술을 바탕으로 운송수단 탑승객의 내, 외국인 얼굴 자동검출, 성별 및 연령인식이 모두 가능하다.

도 2 (a)는 본 발명의 일 실시예에 따른 관리 서버(100) 시스템을 설명하기 위한 예시적인 블록구성도이다.

도 2 (a)를 참조하면, 상기 관리 서버(100)는 통신 모듈(110), 처리 모듈(120), 광고비 설정 모듈(130), 데이터베이스(140)를 포함한다.

통신모듈(110)은 차량에 설치된 운송수단 단말(500)에 광고컨텐츠를 송출할 수 있고, 운송수단 단말(500)로부터 탑승객의 영상정보를 수신하고 상기 영상정보를 바탕으로 판별한 결과를 전송할 수 있다.

처리 모듈(120)은 광고 영업자(200), 운송수단 영업자(400), 운송수단 단말(500) 로부터 관리 서버(100)에 송수신되는 정보를 처리할 수 있고 해당 정보를 데이터베이스(140)에 저장할 수 있다.

광고비설정모듈(130)은 운송수단 단말(500)의 광고 매칭 모듈(530)로부터, 운송수단 탑승객에 송출된 광고 콘텐츠 또는 예능 콘텐츠에 대하여 광고 재생 횟수, 회사별, 지역별 운송수단 운행 일수 등의 정보를 전달받아 광고비를 설정하는 모듈이다. 상기 광고비는 광고의 송출 횟수, 송출 기간 등에 의해 책정될 수 있으며, 상기 정보를 바탕으로 책정된 광고비는 광고 영업자(200)가 상기 광고주(300)에 청구하고, 상기 광고주(300)는 상기 광고 영업자(200)에 후불로 정산할 수 있다.

더 추가적으로, 광고비설정모듈(130)에서는 책정된 광고비를 관리 서버 관리자, 운송수단 영업자, 광고 영업자가 일정 비율로 광고비를 분배할 수 있다. 예를 들어 관리 서버 관리자가 전체 광고료의 10%, 운송수단 영업자가 전체 광고료의 10%, 광고 영업자가 전체 광고료의 80%의 일정 비율로 상기 광고료를 분배하는 경우에는 각각의 지정된 비율에 따라 자동적으로 광고비 수익이 분배된다.

도 2 (b)는 본 발명의 일 실시예에 따른 운송수단 단말(500)을 설명하기 위한 예시적인 블록구성도이다.

운송수단 단말(500)은 송수신 모듈(510), 판단 모듈(520), 광고 매칭 모듈(530), 데이터베이스(540)를 포함한다.

송수신 모듈(510)은 관리 서버(100)로 광고 정보를 송신하고

판단 모듈(520)은 영상정보를 분석하여 운송수단에 승객이 승차 하였는지를 판단하는 것과 상기 영상정보를 기반으로 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술을 사용하여 운송수단 탑승객의 연령, 성별 등을 판단하고 탑승객이 해당하는 고객군을 판단할 수 있다.

또한, 운송수단 단말의 GPS정보를 이용하여 운송수단의 실시간 위치를 파악하고, 현재 운송수단이 운행하고 있는 지역의 행정정보를 판단할 수 있다.

더해서, 판단모듈(520)은 위치 체크 모듈(521), 영상 판별 모듈(523)을 포함한다.

광고매칭모듈(530)은 운송수단 탑승객에 맞춤형 광고를 매칭한다. 상기 판단모듈(520)을 통해 결정된 운송수단 탑승객의 고객군 정보와 현재 시간, 위치 정보를 기반으로 탑승객의 성별, 연령대에 적합한 광고 콘텐츠 또는 예능 콘텐츠를 검색하고 매칭한다.

더 추가적으로, 광고매칭모듈(530)은 탑승객의 성별, 연령대에 적합한 광고 콘텐츠 또는 예능 콘텐츠를 검색하고 매칭하는 것 외에도, 해당 광고 콘텐츠 또는 예능 콘텐츠를 송출하는 순서와 횟수 등을 지정하여 광고 송출 스케줄을 작성할 수도 있다.

도 3은 본 발명의 일 실시예에 따른 운송수단 단말(500)의 판단모듈(520)을 설명하기 위한 예시적인 블록구성도이다.

위치 체크 모듈(521)은 운송수단 단말(500)의 GPS 기능을 이용하여 현재 위치 정보를 용이하게 획득할 수 있다. 위치 체크 모듈(521)은 실시간으로 운송수단의 현재 위치를 모니터링하고, 해당 정보를 운송수단 영업자에 전송할 수 있다.

더 추가적으로, 상기 GPS를 통해 획득한 현재 위치 정보에 따라 운송수단이 현재 위치한 지역의 행정구역을 판단할 수 있다. 상기 행정구역 정보는 광고 매칭 모듈(530)에서 운송수단 탑승객에 맞춤형 광고를 제공할 때에 광고를 매칭하는 기준이 될 수 있다.

더 추가적으로, 상기 GPS를 통해 획득한 현재 위치 정보에 따라 운송수단 단말(500)의 데이터베이스(540)에 저장된 광고를 추가적으로 매칭하여 송출하거나 노출 빈도를 증감하기 위한 기준으로 사용될 수 있다.

영상 판별 모듈(523)은 상기 운송수단 단말(500)에 포함되어 있는 상기 카메라(501)를 통해 영상정보를 용이하게 획득할 수 있다. 영상 판별 모듈(523)은 실시간으로 운송수단 내부의 촬영하여 영상정보를 획득하며, 운송수단 탑승객 승차 여부를 판단하기 위하여 탑승객이 없을 때의 영상정보와 실시간으로 획득하는 영상을 비교하고 변화도를 판단한다.

상기 변화도를 실시간으로 획득하면서 변화도가 커지는 때에 영상 판별 모듈(523)은 운송수단에 탑승한 것으로 판단하고 변화도가 크게 판단되다가 다시 작게 판단되는 경우에는 탑승객이 하차한것으로 판단할 수 있다.

더 추가적으로, 운송수단에 탑승한 것으로 판단된 경우, 탑승객의 영상정보를 이용하여 탑승한 승객의 수를 판단할 수 있다. 탑승객이 한 명으로 판단된 경우 영상정보를 기반으로 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술을 사용하여 운송수단 탑승객의 연령, 성별 등을 판단하여 탑승객이 포함되는 고객군을 판단할 수 있다.

만약 탑승객이 두 명 이상으로 판단된 경우에는, 운송수단에 탑승한 승객 각각에 대하여 영상정보를 기반으로 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술을 사용하여 운송수단 탑승객의 연령, 성별 등을 판단하여 각각의 탑승객이 포함되는 고객군을 판단할 수 있다.

도 4는 본 발명의 일 실시예에 따른 영상정보를 이용한 고객군 분류방법을 나타낸 순서도이다. 도 4를 참조로 하여 본 발명의 일 실시예에 따른 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법을 상세히 설명한다.

본 발명의 일 실시예에 따른 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법은 도 4에 도시된 바와 같이, 영상 인식(S110), 영상 인식에 따른 고객군 설정(S120), 설정된 고객군에 따라 기저장된 광고를 매칭(S130), 광고 송출(S140), DB 저장 후, 관리서버로 데이터 송출(S150) 단계로 이루어질 수 있다.

각 단계에 대해서 자세히 알아보자면, 상기 영상 인식(S110) 단계는 상기 운송수단 단말(500)의 카메라(501)를 통해 영상정보를 획득하고 판단모듈(520)의 영상 판별 모듈(523)에서 영상정보를 분석하여 승객의 탑승 여부를 판단하다.

여기서 상기 영상 판별 모듈(523)의 결과를 병합하여 승객의 탑승 여부를 더 정확하게 판단할 수 있다. 또한, 탑승객이 운송수단에 탑승한것으로 판단되는 경우에는, 상기 영상 인식(S110) 단계에서 탑승객의 상기 영상정보를 분석하여 운송수단 탑승객의 승객의 연령, 성별 등의 정보를 판단할 수 있다.

상기 영상 인식에 따른 고객군 설정(S120) 단계는, 상기 영상 인식(S110) 단계에서 획득한 탑승객의 정보를 바탕으로 각각의 탑승객의 고객군을 설정할 수 있다.

상기 고객군은 탑승객의 연령, 성별, 탑승시간 등의 정보를 바탕으로 설정된다. 예컨대, 상기 고객군은 유아 또는 학생, 대학생, 30~40대, 중년층, 장년층 등으로 나뉠 수 있으며 각각의 연령별 고객군은 여성 또는 남성으로 분류될 수 있다.

각각의 고객군은 연령, 성별 외에도 지역별로 분류될 수 있으며, 예컨대, 서울, 대전, 경기도, 강원도, 충청도, 경상도, 전라도, 제주도 등으로 나뉠 수 있다. 또한, 각각의 고객군은 연령, 성별 외에도 나라별로 분류될 수 있으며, 예컨대, 한국, 미국, 중국, 일본 등으로도 나뉠 수 있다. 상기 고객군 설정(S120) 단계는 상기 고객군 분류 중에서 영상 또는 음성 인식(S110) 단계를 통해 획득한 탑승객의 정보에 따라 상기 탑승객의 고객군을 설정한다.

상기 설정된 고객군에 따라 기저장된 광고를 매칭(S130)하는 단계는, 미리 저장된 고객군별 송출 광고 컨텐츠 또는 예능 컨텐츠를 상기 고객군 설정(S120) 단계에서 설정된 탑승객의 고객군에 따라 기저장된 광고를 매칭한다.

예컨대, 상기 고객군 설정(S120) 단계에서 탑승객이 여성, 중년, 강남구, 점심시간으로 설정된 경우, 강남구 행정구역 내에 미리 데이터베이스(550)에 등록되어 있는 식당 또는 식재료 판매점 등 음식관련 광고 컨텐츠를 미리 지정할 수 있고, 상기 광고 컨텐츠를 상기 탑승객에 송출하기 위한 광고 컨텐츠로 매칭한다.

상기 광고 송출(S140) 단계는, 설정된 고객군에 따라 운송수단 단말(500)의 데이터베이스(540)에 기저장된 광고를 매칭(S130)하는 단계를 통해 탑승객에 상기 운송수단 단말(500)을 통해 상기 매칭된 광고 컨텐츠를 송출할 수 있다.

상기 광고 송출(S140) 단계를 통해 송출된 광고의 송출 횟수, 송출 기간 등에 관한 정보는, DB 저장 후, 관리 서버로 데이터 송출(S150) 단계를 통해 운송수단 단말(500)의 데이터베이스(500)에 저장된다. 상기 데이터베이스(500)에 저장된 광고 송출 정보는 최소 1일 1회에 한하여, 운송수단이 차고에 입고할 때에 관리 서버(100)의 통신 모듈(110)을 통해 전달된다. 상기 관리 서버(100)로 전달된 상기 광고 송출 정보는 광고 설정 모듈(130)에 의해 광고비를 설정하고, 데이터베이스(140)에 저장된다.

본 발명의 일 실시예에 따른 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법에서 광고비 설정 모듈(130)에 따라 산출된 광고비를 광고 영업자(200)가 광고주(300)에 청구하고, 분배하는 방법은 도 5에 도시된 바와 같이, 광고 송출이 있는 경우 단위 시간당 광고비를 상기 광고주(300)에게 후불 청구(S210)하는 단계, 청구 정산된 광고비를 관리 서버 관리자, 광고 영업자, 운송수단 영업주가 기설정된 비율로 분배(S220)하는 단계로 이루어질 수 있다.

각 단계에 대해서 구체적으로는, 상기 광고 송출이 있는 경우 단위 시간당 광고비를 해당 광고주에게 후불 청구(S210)하는 단계는, 상기 운송수단 단말(500)을 통해 송출된 광고가 탑승객에 송출된 횟수, 시간 등의 정보를 운송수단 단말의 데이터베이스(540)에 저장하고, 운송수단이 차고에 입고하면 상기 광고 송출 정보를 관리 서버(100)로 운송수단 단말(500)의 송수신 모듈(510)을 통해 송신한다.

상기 송신한 광고 송출 정보는 관리 서버의 통신모듈(110)을 통해서 관리 서버의 데이터베이스(140)에 저장되고, 상기 저장된 광고 송출 정보를 바탕으로 관리 서버의 광고비 설정 모듈(130)에서 단위 시간당 광고비를 설정한다. 상기 설정된 광고비는 광고 영업자(200)가 광고주(300)에게 청구할 수 있다.

또한, 상기 광고료를 청구함에 있어서, 광고주는 광고료의 부담을 덜 수 있도록 하기 위하여 광고료를 후불로 지불할 수 있다. 상기 방법을 이용하는 경우에는 광고주의 광고료에 대한 부담을 덜 수 있어 광고주를 대상으로 저변을 확대하는 것이 용이해 질 수 있다.

청구 정산된 광고비를 관리 서버 관리자, 광고 영업자, 운송수단 영업주가 기설정된 비율로 분배(S220)하는 단계는, 상기 광고 송출이 있는 경우 단위 시간당 광고비 설정하는 단계를 통해 설정된 광고비를 관리 서버 관리자, 광고 영업자, 운송수단 영업주가 기설정된 일정한 비율로 분배하는 것을 말한다.

상기 기설정된 비율은 관리 서버 관리자, 광고 영업자, 운송수단 영업주가 미리 협의하여 결정될 수 있으며, 결정된 비율에 따라 광고비 설정 모듈(130)에서 자동으로 각각의 관리 서버 관리자, 광고 영업자, 운송수단 영업주에게 광고비를 분배할 수 있다.

본 발명의 일 실시예에 따른 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법에서 위치 체크 모듈(121)에 따라 운송수단의 현재 위치를 판단하고, 광고 콘텐츠를 매칭함에 있어서, 도 6에 도시된 바와 같이, 운송수단이 위치한 위치 정보 또는 행정구역 정보를 반영하여 송출하기 위한 상기 광고 컨텐츠를 매칭할 수 있다.

도6 왼쪽에 도시된 것과 같이 좀 더 상세하게는, 상기 운송수단의 실시간 위치 정보를 운송수단 단말(500)의 GPS 기능을 통해 용이하게 획득할 수 있으며, 획득한 위치 정보를 이용하여 운송수단의 현재 위치의 반경 5km 범위 내에 위치한 광고주의 광고를 현재 운송수단에 탑승하고 있는 탑승객에 송출되도록 광고를 매칭할 수 있다.

운송수단의 실시간 위치가 바뀜에 따라 운송수단 단말(500)에서는 지속적으로 운송수단의 위치를 파악하고, 기존에 매칭되어 작성된 광고 컨텐츠 송출 스케줄을 수정할 수 있다.

좀 더 나아가서 도6 오른쪽에 도시된 것과 같이, 광고주의 광고 타겟 설정 의견에 따라 필요한 경우에는, 지역별로 행정구역을 분리하여 광고주가 원하는 소비자를 대상으로 마케팅 할 수 있도록 선택한 행정구역 내에서만 광고 컨텐츠를 송출하는 것이 가능하도록 설정할 수 있다.

예컨대, 광고주가 상기 광고 컨텐츠 송출 지역으로 '서울'을 선택한 경우에, 기본적으로 운송수단 단말(500)의 GPS 기능을 통해 획득한 운송수단의 실시간 위치 정보를 이용하여 현재 위치에서 반경 5km 범위 내에 위치한 광고주의 광고를 현재 운송수단에 탑승하고 있는 탑승객에 송출되도록 광고를 매칭하고, 만약에 반경 5km 범위 내에 '서울'이 아닌 '행정구역A'가 있고, 운송수단의 실시간 위치가 '행정구역A'로 변경되는 때에는 기존에 '서울'에 위치한 것으로 판단하여 매칭된 광고 컨텐츠 중에서, '서울' 내에서만 송출되도록 설정된 광고 컨텐츠는 더 이상 송출되지 않도록 광고 컨텐츠 송출 스케줄에서 제외할 수 있다.

본 발명의 일 실시예에 따른 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법에서 운송수단 탑승객에 맞춤형 광고를 제시하는 방법은 도7에 도시된 바와 같이, 운송수단 단말(500)에 포함된 카메라를 통해 영상정보를 획득하고, 영상정보를 바탕으로 탑승객 수를 판별한다.

판별된 탑승객 수를 바탕으로 탑승객 각각에 대하여 연령, 성별 등을 판별한 뒤 각각의 탑승객에 대하여 상기 고객군을 판단한다. 판단된 고객군을 바탕으로 탑승객이 한명인 경우에는 상기 고객군을 최종 고객군으로 설정하여 상기 최종 고객군에 따라 광고를 매칭한다.

탑승객이 2 이상인 경우에는, 각각의 탑승객에 대하여 판단된 고객군을 바탕으로 고객군 SET에 대하여 최적의 상기 그룹 고객군을 설정하고, 상기 그룹 고객군을 최종 고객군으로 설정하여 해당 고객군에 기저장된 광고를 매칭할 수 있다.

본 발명의 일 실시예에 따른 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법에서 운송수단 탑승객에 맞춤형 광고를 제시하는 방법에 있어서, 운송수단이 현재 위치한 위치 정보 또는 행정구역 정보를 반영하여 송출하기 위한 상기 광고 컨텐츠를 매칭할 수 있다.

구체적으로는 광고 송출 정보를 매칭하고 스케줄링함에 있어서, 운송수단의 이동 경로를 통해 운송수단이 운행되는 경로를 예측한 뒤, 상기 예측된 경로를 고려하여 운송수단 단말(500)의 데이터베이스(540)에서 송출할 광고를 미리 검색할 수 있다.

상기 예측된 경로를 반영하여 검색된 광고 정보는, 운송수단 운행이 예측되는 경로의 방향정보, 위치정보, 시간정보를 반영하여 검색하는 것이 가능하다. 따라서, 운송수단 단말(500)의 데이터베이스(540)에서 검색된 광고를, 운송수단의 예상 경로에 따라 시간순으로 매칭하여 스케쥴링하는는 것이 가능하다.

본 발명의 일 실시예에 따른 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법에서 광고 송출(S140) 단계에 따라 광고를 송출함에 있어서, 운송수단 탑승객이 광고를 보면서 실시간으로 광고 제품 또는 서비스를 구매하거나 예약할 수 있도록 QR코드 등을 통해 광고 제품 또는 서비스의 정보를 전달 받을 수 있다.

구체적으로 상기 광고 제품 또는 서비스를 구매하거나 예약하기 위하여, 운송수단 단말(500)의 영상을 터치할 수 있고, 운송수단 탑승객의 터치 신호가 입력되면 QR 코드가 노출된다. 상기 QR코드를 운송수단 탑승객이 보유한 전자단말의 카메라로 촬영한 뒤, QR코드에 입력되어 있는 정보를 상기 전자단말과 연동할 수 있도록 링크 등이 제공된다.

추가적으로, 상기 QR코드에 입력되어 있는 광고 제품 또는 서비스의 정보외에도 운송수단 탑승객에 별도로 쿠폰 또는 예약 서비스가 함께 제공될 수 있다.

본 발명의 일 실시예에 따른 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법에서 영상 판별 모듈(523)에서는 상기 영상정보를 기반으로 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술을 이용하여 운송수단 탑승객의 얼굴을 실시간으로 검출하고 탑승객의 성별, 연령 정보를 실시간으로 인식할 수 있다.

구체적으로, 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술은 딥 러닝을 이용하여 조명, 표정, 포즈, 액세서리 변화 등의 환경변화에 강인한 실시간 얼굴인식 기술, 다각도 얼굴등록 방법 및 시선 추적 기술, 딥러닝기반 내국인 성별 및 연령인식 기술을 이용하여 탑승객의 성별, 연령 등의 정보를 실시간으로 인식하는 것이 가능하다.

도8에 도시된 바와 같이, 상기 운송수단 탑승객을 인식하기 위하여, 운송수단 단말(500)의 카메라(501)를 통해 영상 정보가 입력되고, 얼굴 부분을 검출한다.

상기 검출된 얼굴 부분에서 최소 6개에서 최대 68개의 포인트를 추출하여 영상 정보의 랜드마크를 검출한다. 그리고 상기 추출된 랜드마크 정보를 정규화를 통해 영상 정보를 분석할 수 있도록 가공하며, 상기 가공된 정보를 바탕으로 CNN(Convolution Neural Network) 특징을 추출해낸다. 추출된 상기 특징 정보는 빅데이터에 저장될 수 있으며, 상기 특징 정보를 바탕으로 운송수단 탑승객의 정보를 인식할 수 있다.

도 9에 도시된 바와 같이, 본 발명의 일 실시예로 운송수단 중에서도, 택시의 탑승객을 대상으로 맞춤형 광고를 제공할 수 있다. 택시 탑승객을 대상으로 맞춤형 광고를 제공하는 경우에는 특히, 영상정보 외에도 음성정보를 추가로 이용할 수 있으며, 도9에 도시된 바와 같이 택시의 판단모듈(520`)은 목소리 판별 모듈(525`)을 더 포함할 수 있다. 목소리 판별 모듈(525`)은 상기 택시에 설치된 운송수단 단말(500`)에 포함되어 있는 상기 마이크를 통해 음성정보를 용이하게 획득할 수 있다.

목소리 판별 모듈(525`)은 실시간으로 택시 내부의 음성정보를 획득하며, 탑승객의 승차여부를 판단하기 위한 정보로 사용될 수 있다. 또한, 획득한 음성정보의 주파수, 진폭 등을 분석하여 2명 이상의 목소리가 포함된 경우에는 몇 명이 탑승한 것인지 판단하기 위한 정보로 사용될 수 있다.

더 추가적으로, 택시에 승객이 탑승한 것으로 판단된 경우에, 상기 음성정보를 이용하여 승객이 한 명으로 판단되면 승객의 연령, 성별 등의 정보를 판단하여 승객이 포함되는 고객군을 판단할 수 있다.

만약 승객이 두 명 이상으로 판단된 경우에는, 탑승객 각각의 음성정보를 분할하여 상기 탑승객 각각에 대하여 연령, 성별 등의 정보를 판단하여 각각의 탑승객이 포함되는 고객군을 판단할 수 있다.

더 추가적으로, 택시기사의 음성정보를 사전에 추출하여, 승객의 탑승여부를 판단할 때에 택시기사의 음성정보를 제외하고 분석할 수 있다. 상기 택시기사의 음성정보가 제외된 음성정보를 이용하여 더 정확한 음성정보 분석을 수행할 수 있다.

도10 에 도시된 바와 같이, 본 발명의 일 실시예로 운송수단 중에서도, 택시의 탑승객을 대상으로 맞춤형 광고를 제공할 수 있다. 택시 탑승객을 대상으로 맞춤형 광고를 제공하는 경우에는 특히, 영상정보 외에도 음성정보를 추가로 이용할 수 있다.

도11 에 도시된 바와 같이, 본 발명의 일 실시예로 운송수단 중에서도, 택시의 탑승객을 대상으로 맞춤형 광고를 제공할 수 있다. 택시 탑승객을 대상으로 맞춤형 광고를 제공하는 경우에는 특히, 영상정보 외에도 음성정보를 추가로 이용하여 고객군을 설정할 수 있다.

도 11에 도시된 바와 같이, 상세하게는 2 이상의 음성 인식시 기저장된 목소리를 제외(S121`)하는 단계 및 제외된 음성을 고려해도 2 이상의 음성 인식시에는 각각의 고객군을 별도 판별(S123`)하는 단계, 판별한 각 고객군 SET에 상응하는 최적의 그룹 고객군을 설정(S125`)하는 단계로 이루어질 수 있다.

상기 2 이상의 음성이 인식된 경우에는, 기본적으로 택시기사와 1명의 탑승객이 승차한 것으로 판단하여, 기저장된 택시기사 등의 목소리를 음성정보에서 제외한 뒤에 상기 음성정보 분석을 수행한다.

만약 상기 2 이상의 음성이 인식되고, 기저장된 택시기사 등의 목소리를 음성정보에서 제외하였음에도 2 이상의 음성이 인식되는 경우에는 2인 이상의 탑승객이 승차한 것으로 판단하여 영상정보 및 음성정보를 통해 탑승객의 수를 판단한 후에, 각각의 탑승객에 대하여 고객군을 별도로 판별한다.

더 나아가서, 탑승객 모두에 적합한 광고 컨텐츠 및 방송 컨텐츠를 제공하기 위하여, 각각의 탑승객에 대하여 상기 설정된 고객군을 바탕으로 고객군간의 관계를 고려하고, 상기 고객군 SET에 상응하는 최적의 그룹 고객군을 설정한다.

예컨대, 음성 인식(S110) 단계를 통해 탑승객의 음성정보를 통해 탑승객 1은 여성, 대학생, 강남구, 점심시간으로 상기 고객군이 설정되고, 탑승객 2는 여성, 중년, 강남구, 점심시간으로 상기 고객군이 설정된 경우에는, 상기 탑승객 1과 상기 탑승객 2의 고객군 관계를 고려하여, 상기 고객군 SET에 상응하는 최적의 그룹 고객군으로 모녀관계 그룹 고객군으로 설정할 수 있다. 최종적으로는, 상기 그룹 고객군을 바탕으로 송출하기 위한 광고를 매칭할 수 있다.

이상의 상세한 설명은 본 발명을 예시하는 것이다. 또한 전술한 내용은 본 발명의 바람직한 실시 형태를 나타내어 설명하는 것이며, 본 발명은 다양한 다른 조합, 변경 및 환경에서 사용할 수 있다. 즉 본 명세서에 개시된 발명의 개념의 범위, 저술한 개시 내용과 균등한 범위 및/또는 당업계의 기술 또는 지식의 범위내에서 변경 또는 수정이 가능하다. 저술한 실시예는 본 발명의 기술적 사상을 구현하기 위한 최선의 상태를 설명하는 것이며, 본 발명의 구체적인 적용 분야 및 용도에서 요구되는 다양한 변경도 가능하다. 따라서 이상의 발명의 상세한 설명은 개시된 실시 상태로 본 발명을 제한하려는 의도가 아니다. 또한 첨부된 청구범위는 다른 실시 상태도 포함하는 것으로 해석되어야 한다.

100: 관리 서버
110: 통신 모듈
120: 처리 모듈
130: 광고비 설정 모듈
140: 관리 서버의 데이터베이스
200: 광고 영업자
300: 광고주
400: 운송수단 영업자
500: 운송수단 단말
501: 카메라.
510: 송수신 모듈
520: 판단 모듈
530: 광고 매칭 모듈
540: 운송수단 단말의 데이터베이스
521: 위치 체크모듈
523: 영상 판별모듈
525: 목소리 판별모듈

Claims (3)

1. 택시에 해당하는 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이,
   (a) 신규영상 수신시 카메라를 통해 영상 인식을 수행하고, 마이크를 통해 음성 인식을 수행하는 단계;
   (b) 영상 인식 및 음성 인식을 함께 분석하여 고객군을 설정하는 단계;
   -여기서, 영상 인식의 분석 시, 승객이 없는 경우의 좌석 영상과 탑승객이 승차한 경우의 좌석 영상을 실시간 비교하여 변화도를 판단하며, 변화도가 커지는 때에 탑승객이 운송수단에 승차한 것으로 판단하고 변화도가 크다가 다시 작게 판단되는 때에 탑승객이 운송수단에 하차한 것으로 판단하고,
   상기 (b) 단계는 2 이상의 영상 인식시, 기저장된 영상정보를 제외하고 2 이상의 음성 인식시, 기저장된 운송수단 택시기사 음성정보를 제외하고, 제외한 이후에도 2 이상의 영상 및 음성이 존재하는 경우, 2 이상의 탑승객이 승차한 것으로 판단하여 탑승객의 수를 판단한 뒤, 영상 및 음성 각각에 대해 분석하여 2 이상의 탑승객 각각에 대해 고객군에 대해 별도판별함-
   (c) 설정된 고객군에 따라 기저장된 광고를 매칭하는 단계;
   -여기서, 상기 (c) 단계는 2 이상의 탑승객 각각에 대해 별도판별한 고객군 각각을 바탕으로, 기설정된 관계 표준 기준에 따라 상기 2 이상의 탑승객의 각각의 고객군 상호간의 관계를 고려하여 최적의 그룹 고객군을 설정하는 단계; 및 상기 최적의 그룹 고객군에 상응하는 기저장된 최적 관심 광고를 매칭하는 단계;를 포함함-
   (d) 매칭한 광고를 디스플레이로 송출하는 단계; 및
   (e) 송출한 광고 수 및 송출 기간을 포함하는 광고 송출 정보를 관리 서버에 전달하여 상기 관리 서버를 통해 상기 광고 송출 정보를 바탕으로 광고 송출에 따른 단위 시간당 광고비 총액을 광고주에게 청구하고, 청구한 광고비 총액을 관리 서버 관리자, 운송수단 영업자 및 광고 영업자에게 분배하는 단계;를 포함하되,
   상기 (c) 단계는:
   (c-1) 상기 (b) 단계에서 설정한 고객군에 상응하여 추정한 관심 지역 및 관심 서비스를 매칭하는 단계;
   (c-2) 상기 운송수단의 현재 위치 정보에 따라 운송수단 단말의 데이터베이스에 저장된 광고를 추가적으로 매칭하여 송출하거나 노출 빈도를 증감하는 단계;
   (c-3) 상기 운송수단의 현재 위치 정보에 따라 운송수단이 위치한 행정구역을 판단하고 이를 기준으로 광고를 매칭하되, 현재 위치가 미리 설정한 행정 구역 밖으로 판단한 경우에는 매칭한 상기 관심 지역 및 관심 서비스를 해제하는 단계;
   (c-4) 상기 운송수단의 운행 방향, 운송수단의 위치 및 시간 정보를 고려하여 운송수단의 운행 경로를 예측하는 단계; 및
   (c-5) 설정된 최적의 그룹 고객군을 고려해 예측한 상기 운송수단의 운행 경로에 따라 송출할 광고를 검색하여 시간순으로 스케쥴링하여 기저장된 광고를 매칭하는 단계;를 포함하는 것을 특징으로 하는 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법.
2. 제1항에 있어서,
   상기 (b) 단계는:
   상기 영상 인식에 따른 고객군을 설정할 때, 인식한 영상 정보에서 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술을 통해, 조명, 포즈, 표정, 액세서리 변화를 고려하여 탑승객의 성별, 연령 정보를 인식하거나, 인식한 음성 정보에서 주파수 및 음색을 포함하는 음성 인식 정보를 통해 고객군을 설정하는 단계를 포함하되,
   상기 딥 러닝을 이용한 환경변화에 강인한 실시간 얼굴인식 기술은,
   인식한 얼굴에서 최소 6개에서 최대 68개의 포인트를 추출하여 영상 정보의 랜드마크를 검출하고, 추출한 상기 랜드마크 정보를 정규화를 통해 가공하며, 가공된 정보를 바탕으로 CNN(Convolution Neural Network) 특징을 추출하는 것을 특징으로 하는 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법.
3. 제1항에 있어서,
   상기 송출하는 단계 이후에,
   송출한 광고의 제품 또는 서비스에 관하여 터치 신호가 입력되면 카메라 촬영을 위한 상기 송출한 광고의 제품 또는 서비스의 QR 코드를 디스플레이하는 단계; 및
   상기 송출한 광고의 제품 및 서비스에 관한 쿠폰 또는 예약 서비스를 디스플레이하는 단계를 더 포함하는 것을 특징으로 하는 운송수단 탑승객 대상 고객 맞춤형 디지털 사이니지 시스템이 수행하는 방법.

Images