KR102456370B1 - 고객과 상호작용하는 무인 매장 장치 - Google Patents

Abstract

본 발명은 고객과 상호작용하는 증강현실 무인 매장 장치에 관한 것으로서, 오프라인 매장을 무인으로 운영하면서 실제 상품을 진열하지 않고 서도 상품을 전시하고 구매할 수 있도록 한 고객과 상호작용하는 증강현실 무인 매장 장치에 관한 것이다. 이를 위해 무인매장 방문고객에게 다양한 상품 이미지를 무인매장의 분할 구획된 벽에 화면으로 보여주고, 방문고객이 화면 상품 이미지를 선택할 수 있도록 화면 상품 이미지를 쇼잉하는 상품 쇼잉부, 상품 쇼잉부에서 전송된 화면 상품 이미지가 분할 구획된 벽에 화면으로 표시되며, 기 설정된 조건에 따라 분할 구획된 벽에 표시되는 UI가 맞춤 변경 표시되는 상호작용 월부, 화면 상품 이미지 중 적어도 어느 하나의 선택을 인식하는 상품선택 인식부, 설정 조건의 변경에 따라 상호작용 월부에 쇼잉되는 화면 상품 이미지가 변경되도록 제어하는 제어부를 포함하는 것을 특징으로 하는 고객과 상호작용하는 증강현실 무인 매장 장치가 개시된다.

Description

고객과 상호작용하는 무인 매장 장치{Clerkless store apparatus}

본 발명은 고객과 상호작용하는 증강현실 무인 매장 장치에 관한 것으로서, 보다 상세하게는 오프라인 매장을 무인으로 운영하면서 실제 상품을 진열하지 않고 서도 상품을 전시하고 구매할 수 있도록 한 고객과 상호작용하는 증강현실 무인 매장 장치에 관한 것이다.

선행특허문헌인 대한민국 등록특허공보 10-1746838에는 실제 진열대를 이용하여 증강현실로 상품을 판매하는 장치가 공지되어 있다. 좀 더 자세하게 선행특허문헌에는 실제 공간의 실제 상품 진열대를 인식하고, 진열대에 실제 상품이 진열되지 않은 빈공간을 증강현실을 이용하여 가상 상품을 표시할 공간으로 할당함으로써 실제 상품과 가상 상품을 동시에 전시할 수 있는 발명이 개시되어 있다.

이러한 선행특허문헌에 공지된 기술은 증강현실을 통해 가상의 상품을 보여주기 때문에 증강현실 장치를 착용하여야 하거나 또는 자신의 스마트폰으로 계속 매장 진열대를 비춰야 하기 때문에 장치의 사용에 불편한 문제점이 있다.

대한민국 등록특허공보 10-1746838(발명의 명칭 : 진열대를 이용한 증강현실 운영 방법) 대한민국 등록특허공보 10-1669882(발명의 명칭 : 증강 현실 기반 쇼핑 정보 제공 시스템 및 그의 제어 방법) 대한민국 공개특허공보 10-2018-0000007 대한민국 등록특허공보 10-1875697 대한민국 공개특허공보 10-2019-0142850 대한민국 공개특허공보 10-2020-0031756 대한민국 공개특허공보 10-2019-0096922

따라서, 본 발명은 전술한 바와 같은 문제점을 해결하기 위하여 창출된 것으로서, 무인 매장을 운영하면서 동시에 실제 상품을 전시하지 않고 방문고객이 상품을 쇼핑하고 구매할 수 있는 발명을 제공하는데 그 목적이 있다.

그러나, 본 발명의 목적들은 상기에 언급된 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.

전술한 본 발명의 목적은, 무인매장 방문고객에게 다양한 상품 이미지를 무인매장의 분할 구획된 벽에 화면으로 보여주고, 방문고객이 화면 상품 이미지를 선택할 수 있도록 화면 상품 이미지를 쇼잉하는 상품 쇼잉부, 상품 쇼잉부에서 전송된 화면 상품 이미지가 분할 구획된 벽에 화면으로 표시되며, 기 설정된 조건에 따라 분할 구획된 벽에 표시되는 UI가 맞춤 변경 표시되는 상호작용 월부, 화면 상품 이미지 중 적어도 어느 하나의 선택을 인식하는 상품선택 인식부, 설정 조건의 변경에 따라 상호작용 월부에 쇼잉되는 화면 상품 이미지가 변경되도록 제어하는 제어부를 포함하는 것을 특징으로 하는 고객과 상호작용하는 증강현실 무인 매장 장치를 제공함으로써 달성될 수 있다.

또한, 방문고객의 개별 구매 이력을 저장하여 분석하며, 방문고객의 매장 방문 인식에 따라 고객 맞춤형 화면 상품 이미지를 제시함으로써 상호작용 월부에 제시된 화면 상품 이미지가 표시되도록 하여 방문고객의 상품 구매를 자극시키는 구매 이력부를 더 포함한다.

또한, 무인매장을 방문한 고객의 영상을 촬영하는 카메라부, 카메라부에서 촬영된 영상을 기초로 무인매장을 방문한 방문고객의 수를 카운팅하는 피플 카운터부, 카메라부에서 촬영된 영상을 기초로 각 방문고객의 위치 및 움직임을 추적하고, 각 방문고객의 위치 정보에 따라 상호작용 월부와 방문고객의 떨어진 거리 및 방문고객 간 떨어진 거리를 산출하는 움직임 추적부를 더 포함한다.

또한, 상호작용 월부는 피플 카운터부에서 카운팅한 방문고객의 수에 따라 분할 구획된 벽에 표시되는 UI가 맞춤 변경 표시되도록 한다.

또한, 상호작용 월부는 피플 카운터부에서 카운팅한 방문고객의 수 및 상호작용 월부와 방문고객의 떨어진 거리에 기초하여 분할 구획된 벽에 표시되는 UI가 초기 제공 영상에서 화면 상품 이미지로 변경되어 전환 표시된다.

또한, 무인매장을 안내하거나 또는 방문고객과 상품구매에 대해 상호작용하도록 하는 가상의 캐릭터를 생성하는 가상캐릭터 구현부를 더 포함한다.

또한, 가상캐릭터 구현부는, 상품정보 설명 및 상품 추천을 위해 상호작용 월 내에서 표시되며, 움직임 추적부의 방문고객 동선 추적에 따라 방문고객의 위치에 대응되는 상호작용 월부에 동기 이동 표시됨으로써 끊임없는 연속적인 설명이 가능한 상호작용 월 가상 캐릭터, 상품 정보 설명을 위해 방문고객의 스마트폰부를 통해 증강현실로 구현되며, 움직임 추적부의 방문고객 동선 추적에 따라 방문고객의 움직임에 의해서도 가상 캐릭터가 사라지지 않고 스마트폰부를 통해 지속적으로 보이도록 함으로써 상품 설명에 대한 증강현실 체험이 중단되지 않고 지속되도록 하는 스마트폰 증강현실 가상 캐릭터를 구현한다.

한편, 본 발명의 목적은 무인매장 방문고객에게 다양한 상품 이미지를 무인매장의 분할 구획된 벽에 화면으로 보여주고, 방문고객이 화면 상품 이미지를 선택할 수 있도록 화면 상품 이미지를 쇼잉하는 상품 쇼잉부, 화면 상품 이미지 중 적어도 어느 하나의 선택을 인식하는 상품선택 인식부, 상품선택 인식부에서 인식한 복수의 화면 상품 이미지 중 방문고객의 선택에 따라 선택된 화면 상품 이미지의 증강현실 구현정보를 생성하고, 설정 조건의 변경에 따라 분할 구획된 벽에 쇼잉되는 화면 상품 이미지가 변경되도록 제어하는 제어부를 포함하는 것을 특징으로 하는 고객과 상호작용하는 증강현실 무인 매장 장치를 제공함으로써 달성될 수 있다.

또한, 상품 쇼잉부는 화면 상품 이미지 중 어느 하나가 방문고객에 의해 선택되면 제어부의 제어신호에 따라 상품정보를 팝업하여 화면으로 보여주거나 또는 화면 상품 이미지의 상품을 소개하는 이차원 영상을 화면으로 보여줌으로써 방문고객의 구매를 자극하도록 한다.

또한, 상품 쇼잉부는 제어부의 설정 조건 변경에 따라 분할 구획된 벽에 디스플레이되는 화면 상품 이미지를 각 분할 구역별로 서로 다른 카테고리의 상품이 화면으로 보여지도록 한다.

또한, 방문고객의 요청, 시간대별, 지역별, 방문고객의 행동패턴에 따라 설정 조건이 변경된다.

또한, 상품선택 인식부는 화면으로 보여주는 화면 상품 이미지 중 적어도 어느 하나의 방문고객 터치를 인식한다.

또한, 제어부는 상품 쇼잉부로 전송할 화면 상품 이미지를 생성하고, 선택된 화면 상품 이미지의 상품정보 또는 이차원 영상을 생성하는 쇼잉상품 생성부, 설정 조건의 변경에 따라 분할 구획된 벽에 쇼잉되는 화면 상품 이미지가 변경되도록 쇼잉상품 생성부에 제어정보를 전송하는 쇼잉상품 변경부, 방문고객의 선택에 따라 선택된 화면 상품 이미지의 증강현실 구현정보를 생성하는 선택상품 AR구현정보 생성부, 상품선택 인식부에서 인식한 화면 상품 이미지 정보를 개별 수집하는 선택상품 수집부, 화면 상품 이미지 정보에 대응되는 상품 구매정보를 생성하는 구매상품정보 생성부, 상품 구매정보를 취합하여 방문고객별로 분류 생성하고, 상품 구매정보를 방문고객의 스마트폰으로 전송하는 고객별 구매정보 분류부를 포함한다.

또한, 무인매장을 안내하거나 또는 방문고객과 상품구매에 대해 상호작용하도록 하는 가상의 캐릭터를 생성하는 가상캐릭터 구현부를 더 포함한다.

또한, 방문고객의 행동패턴을 분석하고, 행동패턴의 분석에 기초하여 방문고객 맞춤형 화면 상품 이미지가 분할 구획된 벽에 보여지도록 쇼잉상품 변경부에 제어정보를 전송하는 고객 행동패턴 분석부를 더 포함한다.

또한, 방문고객의 선택에 따라 고객 맞춤형 매장 또는 고객 맞춤형 상품이 화면에 보여지도록 하는 선택부를 제공하는 키오스크부를 더 포함한다.

또한, 쇼잉상품 변경부는 키오스크부에서 선택된 고객 맞춤형 매장 또는 상품이 화면에 보여지도록 하는 고객별 쇼잉상품 변경부, 분할 구획된 벽에 보여지는 화면 상품 이미지가 시간대별로 변경되도록 하는 시간대별 쇼잉상품 변경부, 분할 구획된 벽에 보여지는 화면 상품 이미지가 지역별 소비자 특성에 맞게 변경되도록 하는 지역별 쇼잉상품 변경부, 고객 행동패턴 분석부에서 분석된 방문고객의 행동패턴에 기초하여 방문고객 맞춤형 화면 상품 이미지가 변경되도록 하는 행동패턴별 쇼잉상품 변경부를 포함한다.

또한, 무인매장 방문고객에게 다양한 상품 이미지를 무인매장의 분할 구획된 벽에 화면으로 보여주고 선택되도록 하며, 선택된 화면 상품 이미지와 대응되는 상품 구매정보를 생성하여 전송하는 상호작용 무인 매장부, 방문고객의 선택에 따라 선택된 화면 상품 이미지의 증강현실 구현정보를 상호작용 무인 매장부로부터 전송받아 선택 상품의 상품정보를 증강현실로 구현하여 방문고객에게 상품정보를 전달하는 증강현실 구현부, 상품 구매정보를 상호작용 무인 매장부로부터 전송받아 구매 상품을 확인하고, 최종 선택된 구매 상품에 대한 결재를 진행하는 상품 결재부, 결재부의 결재 완료에 따라 방문고객과 가장 가까운 매장에서 실제 상품이 배송되도록 하는 상품 배송부를 포함한다.

전술한 바와 같은 본 발명에 의하면 무인매장 운영 및 가상 캐릭터의 구현에 의해 비대면으로, 실제 상품 진열이 없으면서도 재고 없는 무인 매장을 제공할 수 있는 효과가 있다.

또한, 본 발명에 의하면 실제 진열 상품이 없기 때문에 면적이 좁은 매장에서도 수많은 종류의 상품을 전시할 수 있는 효과가 있다.

또한, 본 발명에 의하면 무인매장을 방문하는 고객의 수를 카운팅하고, 고객 간 떨어진 거리를 산출함으로써 상호작용 월에 표시되는 UI를 맞춤형으로 변경 적용할 수 있다.

본 명세서에 첨부되는 다음의 도면들은 본 발명의 바람직한 일실시예를 예시하는 것이며, 발명의 상세한 설명과 함께 본 발명의 기술적 사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석 되어서는 아니 된다.
도 1은 본 발명의 일실시예에 따른 본 발명의 일실시예에 따른 증강현실 무인 매장을 개략적으로 나타낸 도면이고,
도 2(a)는 증강현실 무인 매장에서 방문고객이 전시 상품을 고르는 것을 도시한 도면이고, 도 2(b)는 방문고객이 선택한 상품 중 더욱 자세한 상품 설명을 위해 증강현실 구현존에서 당해 상품에 대한 증강현실 상품 설명이 이루어지는 것을 도시한 도면이고, 도 2(c)는 방문고객의 자신의 스마트폰으로 구매 결재를 진행하는 것을 도시한 도면이고, 도 2(d)는 방문고객의 집 주소로 실제 상품을 배달하는 것을 도시한 도면이고,
도 3 및 도 4는 본 발명의 일실시예에 따른 증강현실 무인 매장 장치의 구성을 개략적으로 도시한 도면이고,
도 4는 본 발명의 일실시예에 따른 증강현실 무인 매장 시스템의 구성을 개략적으로 도시한 도면이다.

이하, 도면을 참조하여 본 발명의 바람직한 일실시예에 대해서 설명한다. 또한, 이하에 설명하는 일실시예는 특허청구범위에 기재된 본 발명의 내용을 부당하게 한정하지 않으며, 본 실시 형태에서 설명되는 구성 전체가 본 발명의 해결 수단으로서 필수적이라고는 할 수 없다. 또한, 종래 기술 및 당업자에게 자명한 사항은 설명을 생략할 수도 있으며, 이러한 생략된 구성요소(방법) 및 기능의 설명은 본 발명의 기술적 사상을 벗어나지 아니하는 범위내에서 충분히 참조될 수 있을 것이다.

본 발명의 일실시예에 따른 고객과 상호작용하는 증강현실 무인 매장 장치는 오프라인 매장에서 실제 판매상품의 진열 없이 재고를 확보하지 않고 무인매장으로 운영함으로써 판매상품의 진열, 쇼핑, 및 결제가 가능한 비대면, 미진열, 무재고의 신개념 무인 마켓이다. 이하에서는 첨부된 도면을 참고하여 본 발명의 일실시예에 따른 고객과 상호작용하는 증강현실 무인 매장 장치에 대해 상세히 설명하기로 한다.

도 1에 도시된 본 발명의 일실시예에 따른 증강현실 무인 매장은 오프라인 매장으로서 오프라인 매장에는 실제 상품을 구비하여 진열할 필요가 없으며, 무인매장으로 운영되기 때문에 매장을 관리하는 사람이 필요 없다. 본 발명의 증강현실 무인 매장은 실제 상품을 진열하지 않기 때문에 화면으로 판매할 상품의 이미지를 보여준다. 화면으로 보이는 화면 상품 이미지(111a,112a)를 사용자가 선택하면 증강현실 무인 매장은 화면 상품 이미지에 대응되는 구매 상품정보를 수집 및 정리하여 방문고객의 스마트폰으로 전송하고, 방문고객의 스마트폰에서 장바구니 상품을 최종 확인하고 결재가 이루어지도록 한다.

도 1에 도시된 바와 같이 증강현실 무인 매장은 실제 오프라인 매장으로서 분할 구획된 벽(또는 wall)이 존재한다. 각 분활 구획된 벽에 화면 상품 이미지(111a,112a)를 디스플레이하여 방문고객이 쇼핑할 수 있도록 한다.

상품 쇼잉부(110,110a,110b)는 분할 구획된 벽에 화면 상품 이미지(111a,112a)가 나타나도록 하여 방문고객이 쇼핑을 할 수 있도록 한다. 상품 쇼잉부는 빔 프로젝터(110a,110b)로 구체화될 수 있다. 각각의 빔 프로젝터(110a,110b)는 할당된 분할 구획된 벽에 화면 상품 이미지를 각각 디스플레이한다. 이를 위해 빔 프로젝터(110a,110b)는 각 분활 구획된 벽의 천정에 배치될 수 있다. 빔 프로젝터(110a,110b)는 후술하는 제어부(140)와 연동되어 화면에 나타나는 상품의 이미지를 다양하게 변경 표시할 수 있다. 한편, 본 발명에서 사용되는 상품의 전시는 실제 상품의 전시가 아니라 화면으로 보이는 상품의 이미지를 말한다. 빔 프로젝터(110a,110b)에서 뿌려지는 화면 상품 이미지(111a,112a)를 방문고객이 선택하면 후술하는 상품선택 인식부(120)는 선택된 상품을 인식하여 이를 제어부(140)로 전송한다. 제어부(140)는 선택된 상품의 구매 상품정보를 취합하여 방문고객의 스마트폰으로 전송하고, 방문고객은 자신의 구매 상품을 최종 확인하고 스마트폰을 통해 결재를 진행한다. 다만, 구매 상품의 최종 확인 및 결재는 스마트폰 이외에 컴퓨터를 통해서도 이루어질 수 있어 꼭 이에 한정되는 것은 아니다.

한편, 자주 이용하는 구매 고객에게는 맞춤형 관련상품을 노출하는 것이 바람직하다. 이를 위해 구매 이력부(도면 미도시)는 구매 고객의 가입 정보 또는 가입 아이디를 기초로 구매 이력을 각 구매 고객별로 관리한다. 따라서 무인 매장에 구매 고객이 입장하면 이를 인지하여 당해 구매 고객에게 맞는 맞춤형 상품을 구매 이력부가 제시하고, 구매 이력부의 맞춤형 상품 제시에 따라 쇼잉상품 생성부(141)가 맞춤형 상품을 생성하여 상품 쇼잉부(110)로 전송함으로써 상품 표시 및 선택부(111,112,113)에 구매 고객별 맞춤형 상품이 디스플레이될 수 있다. 이때, 무인 매장에 당해 구매 고객의 입장을 인지하는 것과 관련하여 무인 매장에 가입된 구매 고객의 스마트폰부(200)에는 서버부(400)와 연동할 수 있는 앱이 설치되어 있고, 앱과 서버부(400)가 지속적으로 통신하며 구매 고객의 인증 또는 구매 고객의 ID 확인과 관련된 정보를 서버부(400)로 전송하고 또한 동시에 스마트폰부(200)의 GPS 등의 위치 좌표도 서버부(400)로 전송된다. 이에 따라 구매 고객이 무인 매장으로 입장하는 것을 알 수 있다.

본 발명의 일실시예에 따른 제1,2,3 상품 표시 및 선택부(111,112,113)는 각각의 빔 프로젝터에서 뿌려지는 화면 상품 이미지를 방문고객이 보고 선택하는 곳으로서 실제 오프라인 매장의 벽이거나 또는 화면 상품 이미지의 상품 전시를 좀 더 잘 보이게 하기 위한 스크린 일 수 있다. 다른 예로서 제1,2,3 상품 표시 및 선택부(111,112,113)는 터치가 가능한 모니터 화면일 수 있다.

각각의 상품 표시 및 선택부(111,112,113)에는 다양한 종류의 화면 상품 이미지가 빔 프로젝터에 의해 보이며, 상품의 종류는 한정이 없다. 제1,2,3 상품 표시 및 선택부(111,112,113) 각각은 서로 카테고리별로 각각의 상품을 전시할 수 있다. 일예로서 제1 상품 표시 및 선택부(111)는 가전제품 위주로 전시되고, 제2 상품 표시 및 선택부(112)는 공산품 위주로 전시되고, 제3 상품 표시 및 선택부(113)는 식용품 위주로 전시될 수 있다. 또한, 제1,2,3 상품 표시 및 선택부(111,112,113) 각각은 기 설정된 시간에 따라 화면 상품 이미지가 바뀔 수 있다. 즉, 한 번에 상품 표시 및 선택부에 전시할 수 있는 상품의 수가 제한적일 수 있기 때문에 순차적으로 돌아가면서 상품을 전시하는 것이 바람직하다. 이러한 순차적인 상품의 전시는 제어부(140)가 제어한다.

또한, 방문고객이 전시된 상품 중 어느 하나의 화면 상품 이미지를 선택하면 그 상품을 설명하는 상품정보가 당해 화면 상품 이미지가 표시된 위치에서 팝업(이하 팝업 정보라 함) 되거나 또는 그 상품을 소개하는 이차원 영상이 그 위치에서 화면으로 플레이 될 수 있다. 다만, 이러한 팝업 정보 및 플레이 영상은 기 설정된 상품설명 지정 위치인 팝업 및 영상 표시부(114)에서 표시되게 할 수도 있다.

상술한 상품 표시 및 선택부(111,112,113)는 방문고객에게 상품을 보여주고, 선호하는 상품을 선택할 수 있도록 하면서 상품 선택시에 다양한 상품정보를 보여주도록 하기 때문에 본 발명에서는 대화형 월(또는 상호작용 월)이라 할 수 있다.

한편, 카메라부에서 촬영된 방문고객의 영상을 바탕으로 방문고객이 상호작용 월부(111,112,113)에 기 설정된 거리만큼 다가간 경우에 일반 영상에서 상품 영상으로 전환 표시되도록 제어할 수 있다. 즉, 촬영된 영상을 토대로 방문고객이 기 설정된 거리만큼 떨어진 경우에는 방문고객의 입장을 환영하는 환영 영상이나 상품구매 욕구를 자극하도록 무인 매장을 홍보하는 홍보 영상이 상호작용 월부(111,112,113)에 표시되다가 방문고객이 일정 거리 이하로 다가간 경우에 환영 영상이나 홍보 영상에서 구매상품 이미지로 전환 표시되도록 제어부(140)가 제어할 수 있다.

한편, 카메라부는 무인 매장을 입장하는 방문고객의 영상을 촬영할 수 있다. 이때, 촬영된 방문고객의 영상은 피플 카운터부(도면 미도시)로 입력된다. 피플 카운터부는 무인 매장에 입장하는 방문고객의 수를 영상 분석을 통해 카운터 할 수 있다. 피플 카운터부에서 카운터 한 방문고객의 수에 따라 맞춤형으로 상호작용 월부(111,112,113)의 표시 내용을 변경할 수 있다.

즉, 일예로서 현재 매장 내에 1인이 방문한 경우에는 상호작용 월부(111,112,113) 전체를 화면을 환영 영상이나 홍보 영상으로 표시하여 고객의 상품구매 욕구를 자극하고, 일정 시간 이후에 상품 이미지로 전환 표시되도록 제어부(140)가 제어할 수 있다. 매장에 2인이 방문한 경우에는 제2,3 상호작용 월부(112,113)에 상품 정보를 표시하고, 중앙에 마련된 제1 상호작용 월부(111)에는 고객의 상품구매 욕구를 자극하는 홍보 영상을 표시할 수 있다. 매장에 3인이 방문한 경우에는 상호작용 월부(111,112,113) 모두에 상품 정보를 표시하여 방문고객이 상품을 구매하도록 할 수 있다. 매장에 6 이상 방문시에는 "사회적 거리 두기 안내 메시지"를 상호작용 월부(111,112,113) 모두에 표시하도록 하고, 매장에 10인 이상 방문시에는 "정원 초과로 구매 불가 안내 메시지"를 상호작용 월부(111,112,113) 모두에 표시하도록 제어할 수 있다. 다만, 상술한 예에서 무인 매장의 방문 고객의 수에 따른 상호작용 월부의 UI(User Interface) 표시 변경방법은 매장 환경에 따라 방문 고객의 수가 달리 설정될 수 있다.

다른 예로서, 피플 카운터부는 카메라부로부터 입력된 영상에 기초하여 매장 내의 방문고객의 위치를 파악하고, 각 방문고객 간 떨어진 거리를 계산할 수 있다. 이에 따라 피플 카운터부는 방문 고객 간 거리가 기 설정된 거리 이내인 경우에는 "사회적 거리 두기 안내 메시지"를 상호작용 월부에 표시하도록 제어하거나 스피커를 통해 안내 메시지가 송출되도록 할 수 있다.

본 발명의 일실시예에 따른 상품선택 인식부(120)는 방문고객이 화면 상품 이미지 중 어느 하나 또는 동시에 2개 이상의 상품을 선택하는 경우에 어떤 상품을 터치 선택했는지 인식한다. 이러한 상품선택 인식부(120)는 레이저 카메라(Laser Camera) 센서 및 제어 프로그램에 의해 구체화될 수 있다. 즉, 상품 표시 및 선택부의 터치 위치 및 터치 시간을 감지하고, 감지된 터치 위치 및 터치 시간에 맞는 화면 상품 이미지를 매칭하면 방문고객이 어떤 상품을 선택했는지 알 수 있다.

도 2에 도시된 바와 같이 상품선택 인식부(120)에서 방문고객의 상품 선택을 인식하면 당해 방문고객의 태그정보 또는 로그인 정보에 따라 장바구니에 선택 상품이 담기게 된다. 장바구니에 선택 상품이 담기면서 당해 상품정보를 설명하는 팝업 정보가 나타나거나 또는 당해 상품의 이차원 영상이 플레이 되거나 또는 당해 상품의 증강현실이 구현되도록 할 수 있다. 이때, 방문고객의 선택에 따라 다양한 상품정보를 접할 수 있어 구매 전 상품을 꼼꼼히 따져볼 수 있는 장점이 있다. 이러한 상품정보는 오프라인에 전시된 실제 상품에서는 받아 볼 수 없는 정보들이다.

한편, 당해 상품의 설명을 위해 증강현실이 구현될 때 필요에 따라 가상캐릭터 구현부(147)에서 구현한 가상 캐릭터가 선택된 상품을 설명하도록 할 수 있다. 즉, 방문고객은 자신의 스마트폰부(200)를 통해 가상 캐릭터를 증강현실로 볼 수 있으며, 스마트폰부(200)를 통해 가상 캐릭터의 상품 설명을 증강현실로 체험할 수 있다. 이때, 방문고객이 상품 설명에 대한 증강현실 체험 중에 무인 매장 내를 이동하게 되면 가상 캐릭터가 스마트폰부(200)에서 사라지면서 상품 설명에 대한 증강현실 체험이 중단될 수 있다. 이러한 점을 보완하기 위해 무인 매장의 천장 등에 설치된 카메라부(도면 미도시)는 방문고객의 움직임(위치 이동이나 스마트폰의 움직임)을 촬영하고, 움직임 추적부(도면 미도시)는 카메라부를 통해 촬영된 영상에 의해 각 방문고객의 움직임을 추적한다. 움직임 추적부와 SLAM(simultaneous localization and mapping) 기술에 의해 방문고객의 움직임에 의해서도 가상 캐릭터가 사라지지 않고 스마트폰부(200)를 통해 지속적으로 보이도록 함으로써 상품 설명에 대한 증강현실 체험이 중단되지 않고 지속될 수 있는 장점이 있다.

본 발명의 일실시예에 따른 증강현실 구현존(130)은 오프라인 매장에 할당된 증강현실 구현 장소로서 앞서 설명한 바와 같이 상품정보에 대한 자세한 설명을 증강현실을 통해 확인할 수 있다. 증강현실 구현존(130)은 임의로 할당된 증강현실 구현 장소로서 스마트폰의 증강현실 어플리케이션 또는 웹 AR이 구동될 수 있도록 증강현실 마커가 표시될 수 있다. 이때, 증강현실 마커는 QR코드일 수 있다. 일예로서, 방문고객이 증강현실을 통해 상품정보를 보려고 한다면 제어부(140)는 선택된 상품의 QR코드를 생성하여 이를 증강현실 구현존(130)에 표시되도록 한다. 이에 따라 방문고객은 증강현실 구현존(130)에 표시된 QR코드를 스마트폰을 통해 인식함으로써 이와 연동되어 웹 AR이 구동되고 상품에 대한 증강현실이 구현될 수 있다. 증강현실을 통해 실제 상품에서는 설명할 수 없는 다양한 정보를 제공할 수 있는 장점이 있다. 또한, 앞서 설명한 가상 캐릭터에 의해 상품 설명을 증강현실로 체험하도록 할 수 있다.

도 3에 도시된 바와 같이 본 발명의 일실시예에 따른 제어부(140)는 쇼잉상품 생성부(141), 쇼잉상품 변경부(142), 선택상품 AR 구현정보 생성부(143), 선택상품 수집부(144), 구매 상품정보 생성부(145), 고객별 구매정보 분류부(146), 가상캐릭터 구현부(147), 고객 행동패턴 분석부(148)를 포함한다.

쇼잉상품 생성부(141)는 전시하고자 하는 상품의 화면 상품 이미지를 생성하여 빔 프로젝터로 전송한다. 또한, 방문고객에 의해 선택된 상품의 팝업정보를 생성하거나 또는 선택된 상품의 이차원 영상을 생성하여 빔 프로젝터로 전송한다.

쇼잉상품 변경부(142)는 설정 조건의 변경에 따라 화면에 보이는 상품의 전시를 변경시키도록 하는 제어정보를 쇼잉상품 생성부(141)로 전송한다. 쇼잉상품 변경부(142)의 제어정보에 따라 쇼잉상품 생성부(141)는 이에 상응하는 화면 상품 이미지를 생성하고 이를 빔 프로젝터로 전송한다. 설정 조건은 고객별, 시간대별, 지역별, 방문고객 행동패턴별일 수 있으며 다양한 설정 조건이 적용되어 화면 상품 이미지가 변경 전시될 수 있다.

고객별 쇼잉상품 변경부(142a)는 키오스크부(150)에서 설정된 조건에 따라 연동되어 화면 상품 이미지가 변경되어 전시되도록 한다. 키오스크부(150)는 무인 매장 내에 배치되는 것으로서 방문고객이 자신의 취향에 맞는 스토어나 상품을 선택하도록 할 수 있으며, 이와 연동되어 화면에 보여지는 전시 상품이 달라질 수 있다. 일예로서 방문고객은 편의점, 생활용품 판매점, 빵 판매점 같은 다양한 종류의 제공 스토어 중 어느 하나를 키오스크부(150)를 통해 선택함으로써 전시되는 상품이 자신의 취향에 맞도록 바뀌게 할 수 있다. 또한, 스토어를 변경시키지 않고 상품 종류의 카테고리만을 변경시킬 수도 있다. 이러한 키오스크부(150)를 통해 고객 맞춤형 쇼핑을 제공함으로써 방문고객의 구매 의욕을 상승시킬 수 있다.

시간대별 쇼잉상품 변경부(142b)는 시간대별로 상품 표시 및 선택부에 각각 전시되는 상품의 종류를 변경시킨다. 즉, 출근 시간에 전시되는 상품과, 점심시간에 전시되는 상품과 퇴근 시간에 전시되는 상품을 각각 다르게 설정할 수 있다. 이렇게 함으로써 방문고객의 시간대별 맞춤 무인매장이 될 수 있다. 다만, 어느 하나의 상품 표시 및 선택부는 바뀌지 않고 고정시킬 수도 있다.

지역별 쇼잉상품 변경부(142c)는 아파트 지역, 상가 지역, 번화가 지역 등 지역별로 소비자 특성에 맞게 지역별 맞춤 무인매장이 되도록 상품 전시를 변경시킬 수 있다.

행동패턴별 쇼잉상품 변경부(142d)는 고객 행동패턴 분석부(148)에서 분석한 방문고객의 행동패턴 분석에 따라 전시되는 상품을 실시간으로 변경시킴으로써 방문고객의 구매 의욕을 상승시킬 수 있다. 일예로서, 방문고객이 식료품 전시 상품 앞에 머무는 시간이 다른 전시 상품에 비해 길다고 판단되면 복수의 상품 표시 및 선택부(111.112.113)에 전시되는 상품이 식료품 위주로 전시되도록 한다. 왜냐하면, 하나의 상품 표시 및 선택부에 전시되는 상품의 수는 제한적일 수 있기 때문에 동시에 다양한 상품을 보여주기 위해서는 모든 상품 표시 및 선택부(111,112,113)에 방문고객이 관심을 보이는 카테고리에 맞는 다양한 상품을 동시에 전시하는 것이 바람직하다.

선택상품 AR 구현정보 생성부(143)는 방문고객에 의해 선택된 상품의 상품정보를 다양하게 제공하기 위해 일예로서 증강현실 구현용 QR코드를 생성한다. 생성된 증강현실 구현용 QR코드는 빔 프로젝터로 전송되어 상술한 증강현실 구현존(130)에 디스플레이되고, 방문고객 자신의 스마트폰으로 표시된 증강현실 구현용 QR코드를 인식함으로써 웹 AR이 연동 구동되어 당해 상품을 설명하는 증강현실이 스마트폰에서 구현된다. 증강현실 구현용 QR코드는 방문고객에 의해 선택된 상품 중 방문고객이 별도로 요청하는 경우에 한해 생성되며, 증강현실 무인 매장에서 전시되는 상품 중 증강현실 구현 가능한 상품에 한해 생성될 수 있다.

선택상품 수집부(144)는 상품선택 인식부(120)에서 인식한 화면 상품 이미지 정보를 개별 수집한다. 즉, 선택상품 수집부(144)는 방문고객이 전시된 상품 중 어느 하나 또는 복수의 상품을 선택하면 이러한 선택정보를 수집 저장한다. 따라서 방문고객이 선택한 전시 상품은 장바구니에 임시 저장된다. 이때, 방문고객은 장바구니에 저장된 선택 상품을 취소시킬 수도 있다. 장바구니에 저장된 상품의 취소는 후술하는 키오스크부(150)에서 고객 로그인을 통해 할 수도 있고, 실제 결재시에 방문고객의 스마트폰에서 취소시킬 수도 있다. 또한, 전시된 상품의 이미지를 눌러 팝업 창이 팝업될 때 상품을 취소시킬 수도 있다.

구매상품 정보 생성부(145)는 장바구니에 담긴 선택 상품에 대응되는 상품 구매정보를 생성한다.

고객별 구매정보 분류부(146)는 상품 구매정보를 취합하여 방문고객별로 분류 생성하고, 상품 구매정보를 당해 방문고객의 스마트폰으로 전송한다. 상품 구매정보 분류부(146)는 스마트폰(200) 또는 키오스크부(150)를 통해 로그인한 방문고객의 정보를 이용하여 구매 상품을 고객별로 분류할 수 있다. 이러한 로그인 정보는 제어부(140)와 연동된다.

한편, 증강현실 무인 매장에 동시에 여러 명의 고객이 방문하여 동시 다발적으로 전시 상품을 선택하는 경우에는 어떤 방문고객이 어떤 전시 상품을 선택했는지 알 수가 없다. 이를 위해 일예로서 방문고객마다 무인 매장을 순차적으로 이용하게 할 수 있다. 또한, 다른 예로서 동시에 무인 매장을 이용하는 경우에는 고객의 얼굴 인식이나 무인 매장에서 제공하는 인식 가능한 카드를 패용하게 함으로써 당해 고객임을 인식할 수 있고 이에 따라 자동으로 당해 고객이 선택한 상품임을 알 수 있다.

가상캐릭터 구현부(147)는 무인 매장을 안내하거나 또는 방문고객과 상품구매에 대해 상호작용하도록 하는 가상의 캐릭터를 생성한다. 생성된 가상 캐릭터는 증강현실을 통해 구현되거나 빔 프로젝터에 의해 영상으로 표시될 수 있다.

이때, 가상캐릭터 구현부(147)에서 구현되는 가상 캐릭터는 상품정보 설명 및 상품 추천을 위해 상호작용 월 내에서 보이는 상호작용 월 가상 캐릭터와 상품정보 설명을 위해 방문고객의 스마트폰부(200)를 통해 증강현실로 보이는 스마트폰 증강현실 가상 캐릭터로 나뉠 수 있다. 스마트폰 증강현실 가상 캐릭터는 앞서 설명한 바와 같이 증강현실을 통한 상품 설명시에 방문고객의 스마트폰부(200)를 통해 체험할 수 있다. 또한, 상술한 움직임 추적부에 의해 방문고객의 동선이 추적되면 상호작용 월 가상 캐릭터는 상호작용 월 내를 방문고객을 따라다니면서 또는 방문고객의 움직임과 동기되어 움직임으로써 상품 추천 및 상품 정보를 안내해 줄 수 있다. 즉, 일예로서 도 1에 도시된 바와 같이 방문고객이 제1 상호작용 월부(111) 앞에 최초에 위치하면 상호작용 월 가상 캐릭터가 제1 상호작용 월부(111)에 표시된다. 이때, 방문고객이 제2 상호작용 월부(112)로 이동하면 움직임 추적부에 의해 방문고객의 동선이 파악되며, 이에 따라 상호작용 월 가상 캐릭터도 제2 상호작용 월부(112)로 이동하여 표시되면서 상품 설명이 중단되지 않고 연속되도록 할 수 있다. 따라서 상호작용 월 가상 캐릭터는 고객 동선을 추적 가이드할 수 있다.

고객 행동패턴 분석부(148)는 방문고객의 행동패턴을 분석하고, 행동패턴의 분석에 기초하여 방문고객 맞춤형 화면 상품 이미지가 분할 구획된 벽에 보이도록 쇼잉상품 변경부(142)에 제어정보를 전송한다. 일예로서 무인 매장을 방문한 고객이 특정 전시 상품 앞에 머무는 시간이 많은 경우에는 이러한 행동패턴을 분석하여 고객의 기호에 맞는 동종의 상품이 복수의 상품 표시 및 선택부에 동시에 전시되도록 한다. 또한, 방문고객이 선택한 상품이 특정 카테고리에 해당하는 상품인 경우에는 이러한 행동패턴을 분석하여 동종의 카테고리에 해당하는 더욱 많은 상품이 동시에 전시되도록 할 수 있다.

본 발명의 일실시예에 따른 키오스크부(150)는 도 3 및 도 4에 도시된 바와 같이 무인 매장 내에 배치되어 방문고객의 로그인, 고객별 맞춤형 매장 및 상품 선택, 상품선택 취소 등 다양한 기능을 수행한다. 키오스크부(150)는 상술한 제어부(140)와 연동된다. 이때, 제어부(140)는 필요에 따라 키오스크부(150)에서 구현할 수도 있다.

키오스크부(150)는 이를 위해 고객별 매장 선택부(151), 상품선택 취소부(152), 로그인부(153)를 포함한다. 고객별 매장 선택부(151)는 다양한 종류의 스토어를 선택할 수 있는 매장 선택부(151a)와 전시되는 상품의 종류를 카테고리별로 선택할 수 있는 쇼잉상품 선택부(151b)를 포함한다. 고객별 매장 선택부(151)에서 제공하는 다양한 선택에 따라 고객별 쇼잉상품 변경부(142a)가 연동되어 변경정보를 생성하고, 이를 다시 쇼잉상품 생성부(141)로 전달함으로써 매장 및 전시 상품이 고객의 취항에 따라 바뀌게 할 수 있다.

상품선택 취소부(152)는 방문고객이 선택한 상품을 방문고객의 요청에 따라 취소시키며, 로그인부(152)는 방문고객의 로그인 정보를 생성하고 이를 제어부(140)와 공유한다.

본 발명의 일실시에에 따른 스마트폰(200)은 방문고객이 소지하는 것으로서 도 2 및 도 5에 도시된 바와 같이 제어부(140)로부터 방문고객 자신이 구매한 상품정보가 올라온다. 방문고객은 구매한 상품정보를 최종 확인하고 자신의 스마트폰으로 결재를 진행한다. 이를 위해 스마트폰에는 증강현실 무인 매장과 연동될 수 있는 어플리케이션이 설치된다.

결재가 완료되면, 상품 배송부(300)는 스마트폰(200)의 결재 완료에 따라 방문고객과 가장 가까운 매장에서 실제 상품이 배송되도록 한다.

본 발명의 일실시예에 따른 서버부(400)는 증강현실 무인 매장(140), 키오스크부(150), 스마트폰(200), 상품 배송부(300)와 연동되며, 생성된 데이터를 저장하거나 전시될 상품에 필요한 각종 데이터를 저장한다.

본 발명을 설명함에 있어 종래 기술 및 당업자에게 자명한 사항은 설명을 생략할 수도 있으며, 이러한 생략된 구성요소(방법) 및 기능의 설명은 본 발명의 기술적 사상을 벗어나지 아니하는 범위내에서 충분히 참조될 수 있을 것이다. 또한, 상술한 본 발명의 구성요소는 본 발명의 설명의 편의를 위하여 설명하였을 뿐 여기에서 설명되지 아니한 구성요소가 본 발명의 기술적 사상을 벗어나지 아니하는 범위내에서 추가될 수 있다.

상술한 각부의 구성 및 기능에 대한 설명은 설명의 편의를 위하여 서로 분리하여 설명하였을 뿐 필요에 따라 어느 한 구성 및 기능이 다른 구성요소로 통합되어 구현되거나, 또는 더 세분화되어 구현될 수도 있다.

이상, 본 발명의 일실시예를 참조하여 설명했지만, 본 발명이 이것에 한정되지는 않으며, 다양한 변형 및 응용이 가능하다. 즉, 본 발명의 요지를 일탈하지 않는 범위에서 많은 변형이 가능한 것을 당업자는 용이하게 이해할 수 있을 것이다. 또한, 본 발명과 관련된 공지 기능 및 그 구성 또는 본 발명의 각 구성에 대한 결합관계에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는, 그 구체적인 설명을 생략하였음에 유의해야 할 것이다.

110,110a,110b : 상품 쇼잉부
111 : 제1 상품 표시 및 선택부(또는 제1 인터렉티브 월부)
111a : 화면 상품 이미지
112 : 제2 상품 표시 및 선택부(또는 제2 인터렉티브 월부)
112a : 화면 상품 이미지
113 : 제3 상품 표시 및 선택부(또는 제3 인터렉티브 월부)
114 : 팝업 및 영상 표시부
114a : 증강현실 매장 출입문
120 : 상품선택 인식부
130 : 증강현실 구현존
140 : 제어부
141 : 쇼잉상품 생성부
142 : 쇼잉상품 변경부
142a : 고객별 쇼잉상품 변경부
142b : 시간대별 쇼잉상품 변경부
142c : 지역별 쇼잉상품 변경부
142d : 행동패턴별 쇼잉상품 변경부
143 : 선택상품 AR 구현정보 생성부
144 : 선택상품 수집부
145 : 구매상품정보 생성부
146 : 고객별 구매정보 분류뷰
147 : 가상캐릭터 구현부
148 : 고객 행동패턴 분석부
150 : 키오스크부
151 : 고객별 매장 선택부
151a : 매장 선택부
151b : 쇼잉상품 선택부
152 : 상품선택 취소부
153 : 로그인부
200 : 스마트폰(또는 상품 결재부)
300 : 상품 배송부
400 : 서버부

Claims (8)

1. 무인매장 방문고객에게 다양한 상품 이미지를 무인매장의 분할 구획된 벽에 화면으로 보여주고, 방문고객이 화면 상품 이미지를 선택할 수 있도록 상기 화면 상품 이미지를 쇼잉하는 상품 쇼잉부,
   상기 상품 쇼잉부에서 전송된 화면 상품 이미지가 분할 구획된 벽에 화면으로 표시되며, 기 설정된 조건에 따라 상기 분할 구획된 벽에 표시되는 UI가 맞춤 변경 표시되는 상호작용 월부,
   상기 화면 상품 이미지 중 적어도 어느 하나의 선택을 인식하는 상품선택 인식부,
   설정 조건의 변경에 따라 상기 상호작용 월부에 쇼잉되는 화면 상품 이미지가 변경되도록 제어하는 제어부,
   상기 무인매장을 방문한 고객의 영상을 촬영하는 카메라부,
   상기 카메라부에서 촬영된 영상을 기초로 무인매장을 방문한 방문고객의 수를 카운팅하는 피플 카운터부,
   상기 카메라부에서 촬영된 영상을 기초로 각 방문고객의 위치 및 움직임을 추적하고, 각 방문고객의 위치 정보에 따라 상호작용 월부와 방문고객의 떨어진 거리 및 방문고객 간 떨어진 거리를 산출하는 움직임 추적부를 포함하는 것을 특징으로 하는 고객과 상호작용하는 무인 매장 장치.
   
2. 제 1 항에 있어서,
   상기 방문고객의 개별 구매 이력을 저장하여 분석하며, 방문고객의 매장 방문 인식에 따라 고객 맞춤형 화면 상품 이미지를 제시함으로써 상기 상호작용 월부에 제시된 화면 상품 이미지가 표시되도록 하여 방문고객의 상품 구매를 자극시키는 구매 이력부를 더 포함하는 것을 특징으로 하는 고객과 상호작용하는 무인 매장 장치.
   
3. 삭제
4. 제 1 항에 있어서,
   상기 상호작용 월부는,
   상기 피플 카운터부에서 카운팅한 방문고객의 수에 따라 상기 분할 구획된 벽에 표시되는 UI가 맞춤 변경 표시되도록 하는 것을 특징으로 하는 고객과 상호작용하는 무인 매장 장치.
   
5. 제 1 항에 있어서,
   상기 상호작용 월부는,
   상기 피플 카운터부에서 카운팅한 방문고객의 수 및 상호작용 월부와 방문고객의 떨어진 거리에 기초하여 상기 분할 구획된 벽에 표시되는 UI가 초기 제공 영상에서 화면 상품 이미지로 변경되어 전환 표시되는 것을 특징으로 하는 고객과 상호작용하는 무인 매장 장치.
   
6. 제 5 항에 있어서,
   무인매장을 안내하거나 또는 방문고객과 상품구매에 대해 상호작용하도록 하는 가상의 캐릭터를 생성하는 가상캐릭터 구현부를 더 포함하는 것을 특징으로 하는 고객과 상호작용하는 무인 매장 장치.
   
7. 제 6 항에 있어서,
   상기 가상캐릭터 구현부는,
   상품정보 설명 및 상품 추천을 위해 상기 상호작용 월부 내에서 표시되며, 상기 움직임 추적부의 방문고객 동선 추적에 따라 방문고객의 위치에 대응되는 상호작용 월부에 동기 이동 표시됨으로써 끊임없는 연속적인 설명이 가능한 상호작용 월 가상 캐릭터,
   상품 정보 설명을 위해 방문고객의 스마트폰부를 통해 증강현실로 구현되며, 상기 움직임 추적부의 방문고객 동선 추적에 따라 방문고객의 움직임에 의해서도 가상 캐릭터가 사라지지 않고 스마트폰부를 통해 지속적으로 보이도록 함으로써 상품 설명에 대한 증강현실 체험이 중단되지 않고 지속되도록 하는 스마트폰 증강현실 가상 캐릭터를 구현하는 것을 특징으로 하는 고객과 상호작용하는 무인 매장 장치.
   
8. 제 1 항에 있어서,
   상기 제어부는,
   상기 상품 쇼잉부로 전송할 상기 화면 상품 이미지를 생성하고, 선택된 화면 상품 이미지의 상품정보 또는 이차원 영상을 생성하는 쇼잉상품 생성부,
   설정 조건의 변경에 따라 분할 구획된 벽에 쇼잉되는 화면 상품 이미지가 변경되도록 상기 쇼잉상품 생성부에 제어정보를 전송하는 쇼잉상품 변경부,
   방문고객의 선택에 따라 선택된 화면 상품 이미지의 증강현실 구현정보를 생성하는 선택상품 AR구현정보 생성부,
   상기 상품선택 인식부에서 인식한 화면 상품 이미지 정보를 개별 수집하는 선택상품 수집부,
   상기 화면 상품 이미지 정보에 대응되는 상품 구매정보를 생성하는 구매상품정보 생성부,
   상기 상품 구매정보를 취합하여 방문고객별로 분류 생성하고, 상기 상품 구매정보를 방문고객의 스마트폰으로 전송하는 고객별 구매정보 분류부를 포함하는 것을 특징으로 하는 고객과 상호작용하는 무인 매장 장치.

Images