KR102601329B1 - 디지털사이니지를 이용한 맞춤형 고객 대응 장치 - Google Patents
디지털사이니지를 이용한 맞춤형 고객 대응 장치 Download PDFInfo
- Publication number
- KR102601329B1 KR102601329B1 KR1020220161391A KR20220161391A KR102601329B1 KR 102601329 B1 KR102601329 B1 KR 102601329B1 KR 1020220161391 A KR1020220161391 A KR 1020220161391A KR 20220161391 A KR20220161391 A KR 20220161391A KR 102601329 B1 KR102601329 B1 KR 102601329B1
- Authority
- KR
- South Korea
- Prior art keywords
- customer
- unit
- action
- virtual character
- manager
- Prior art date
Links
- 238000006243 chemical reaction Methods 0.000 title description 3
- 230000009471 action Effects 0.000 claims abstract description 180
- 230000004044 response Effects 0.000 claims abstract description 85
- 238000004458 analytical method Methods 0.000 claims abstract description 41
- 230000001360 synchronised effect Effects 0.000 claims abstract description 36
- 230000003993 interaction Effects 0.000 claims abstract description 30
- 230000006399 behavior Effects 0.000 claims description 30
- 238000013459 approach Methods 0.000 claims description 16
- 230000008451 emotion Effects 0.000 claims description 11
- 238000004364 calculation method Methods 0.000 claims description 6
- 230000008909 emotion recognition Effects 0.000 claims description 6
- 230000008450 motivation Effects 0.000 claims description 6
- 239000000284 extract Substances 0.000 claims description 3
- 230000002194 synthesizing effect Effects 0.000 claims 1
- 238000000034 method Methods 0.000 description 14
- 230000033001 locomotion Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 230000001737 promoting effect Effects 0.000 description 6
- 230000008901 benefit Effects 0.000 description 4
- 241000282693 Cercopithecidae Species 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000003542 behavioural effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000001939 inductive effect Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000005021 gait Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0269—Targeted advertisements based on user profile or attribute
- G06Q30/0271—Personalized advertisement
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0261—Targeted advertisements based on user location
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0281—Customer communication at a business location, e.g. providing product or service information, consulting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
Abstract
본 발명은 디지털 사이니지를 이용한 맞춤형 고객 대응 장치에 관한 것으로서, 가상 캐릭터를 통해 고객을 유인하도록 하고, 매개체인 가상 캐릭터와 관리자를 동기 접속시켜 매장을 찾은 고객과 가상 캐릭터가 상호작용을 수행하도록 하는 디지털 사이니지를 이용한 맞춤형 고객 대응 장치에 관한 것이다. 이를 위해 자동 대응 모드, 고객 유인 모드, 및 수동 대응 모드를 구비하고, 디지털 사이니지의 고객 대응 모드를 설정 제어하는 고객 대응 모드부, 각각의 고객 대응 모드와 연동되어 고객 대응 액션을 수행하도록 하는 가상 캐릭터를 생성 및 제어하는 가상 캐릭터부, 관리자의 액션을 인식함으로써 관리자의 행동 패턴을 분석하는 관리자부, 관리자의 액션과 동기된 가상 캐릭터의 관리자 모방 동기 액션이 디지털 사이니지의 화면에 표현되어 고객과 인터액션을 수행하도록 수동 대응 모드시에 가상 캐릭터와 동기 접속을 제어하는 인터액션부, 및 맞춤형 고객 대응 액션이 제공되도록 고객의 성향을 분석하는 고객 분석부를 포함하는 것을 특징으로 하는 디지털사이니지를 이용한 맞춤형 고객 대응 장치가 개시된다.
Description
본 발명은 디지털 사이니지를 이용한 맞춤형 고객 대응 장치에 관한 것으로서, 보다 상세하게는 가상 캐릭터를 통해 고객을 유인하도록 하고, 매개체인 가상 캐릭터와 관리자를 동기 접속시켜 매장을 찾은 고객과 가상 캐릭터가 상호작용을 수행하도록 하는 디지털 사이니지를 이용한 맞춤형 고객 대응 장치에 관한 것이다.
선행기술문헌인 특2002-0050016 및 특2003-0075880에는 사용자 중심으로 캐릭터를 성장시킬 수 있고, 사용자가 선택한 각종 정보를 캐릭터를 통해 제공하여 사용자의 욕구를 충족시킬 수 있는 기술이 공지되어 있다. 그러나 선행기술문헌에 개시된 기술은 사용자가 캐릭터를 성장시키는 기술에 관한 기술로서 본 발명에서와 같이 가상 캐릭터가 디지털 사이니지에 접목되어 고객을 유인하도록 하는 기술이 개시되어 있지 않다.
또한, 선행기술문헌인 10-2017-0050268에는 디지털 사이니지의 기술에 있어서, 광고 시청자인 행인을 감지하면 주목 유도 영상을 디지털 사이니지에서 내보내어 행인의 주목을 이끌어 내고 이때 목적하는 광고를 송출하도록 한 기술이 개시되어 있다. 그러나 선행기술문헌은 행인의 주목을 끌기 위해 주목 유도 영상만을 송출함으로써 고객과 상호작용할 수 없는 한계가 있다.
따라서, 본 발명은 전술한 바와 같은 문제점을 해결하기 위하여 창출된 것으로서, 가상 캐릭터가 고객의 접근을 감지하여 고객을 유도하는 액션을 취함으로써 고객을 디지털 사이니지쪽으로 유인하도록 하고, 가상 캐릭터의 액션이 관리자의 액션에 동기됨으로써 가상 캐릭터가 관리자의 액션을 모방함에 따라 관리자와 고객이 매개체인 가상 캐릭터를 통해 상호작용할 수 있는 발명을 제공하는데 그 목적이 있다.
그러나, 본 발명의 목적들은 상기에 언급된 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
전술한 본 발명의 목적은, 자동 대응 모드, 고객 유인 모드, 및 수동 대응 모드를 구비하고, 디지털 사이니지의 고객 대응 모드를 설정 제어하는 고객 대응 모드부, 각각의 고객 대응 모드와 연동되어 고객 대응 액션을 수행하도록 하는 가상 캐릭터를 생성 및 제어하는 가상 캐릭터부, 관리자의 액션을 인식함으로써 관리자의 행동 패턴을 분석하는 관리자부, 관리자의 액션과 동기된 가상 캐릭터의 관리자 모방 동기 액션이 디지털 사이니지의 화면에 표현되어 고객과 인터액션을 수행하도록 수동 대응 모드시에 가상 캐릭터와 동기 접속을 제어하는 인터액션부, 및 맞춤형 고객 대응 액션이 제공되도록 고객의 성향을 분석하는 고객 분석부를 포함하는 것을 특징으로 하는 디지털사이니지를 이용한 맞춤형 고객 대응 장치를 제공함으로써 달성될 수 있다.
또한, 고객 대응 모드부는 가상 캐릭터의 기 설정된 기본 액션을 디지털 사이니지 화면에 제공하도록 제어하는 자동 대응 모드부, 디지털 사이니지가 배치된 부근을 지나가는 고객이 인식되면 고객을 디지털 사이니지쪽으로 유인하기 위해 가상 캐릭터의 유인 액션을 요청하는 고객 유인 요청 모드부, 가상 캐릭터의 유인 액션에 의해 고객이 접근하면 가상 캐릭터의 액션과 관리자의 액션이 서로 동기되어 가상 캐릭터의 관리자 모방 동기 액션이 디지털 사이니지의 화면에 표현되도록 제어하는 수동 대응 모드부를 포함한다.
또한, 고객 분석부는 디지털 사이니지와 고객 간의 떨어진 거리, 고객의 얼굴 방향을 인식 및 분석하는 고객 인식부, 고객의 얼굴을 통해 성별, 연령, 또는 감정을 식별 및 분석하는 고객 식별부, 고객의 음성을 인식 및 분석하여 주요 키워드를 추출하는 고객 음성 인식부, 디지털 사이니지 앞에 머무른 시간을 분석하는 체류시간 산출부, 각종 정보를 종합하여 고객의 성향을 분석하는 고객 성향 분석부, 분석된 고객의 성향에 맞도록 고객 맞춤형 시나리오를 생성하는 시나리오 생성부, 및 고객 맞춤형 시나리오에 따라 맞춤형 광고를 고객에게 제공하는 맞춤형 광고 제공부를 포함한다.
또한, 가상 캐릭터부는 가상 캐릭터를 생성하는 가상 캐릭터 생성부, 자동 대응 모드부의 제어에 따라 기 설정된 가상 캐릭터의 기본 액션을 제공하는 기본액션 모드부, 고객 유인 요청 모드부의 요청에 따라 고객의 흥미를 유발시키도록 가상 캐릭터의 고객 유인 액션을 제공하는 유인액션 모드부, 기본 액션 및 유인 액션에 대한 시나리오가 저장되는 동작 시나리오부, 및 가상 캐릭터의 액션과 관리자의 액션이 서로 동기됨에 따라 가상 캐릭터의 관리자 모방 동기 액션이 표현되는 가상 캐릭터 동기 행동부를 포함하며,
동작 시나리오부는 고객 성향 분석부의 고객 성향 분석에 따라 고객의 성향에 맞는 고객 맞춤형 유인 동작을 생성하여 유인액션 모드부에 제공한다.
또한, 관리자부는 카메라로부터 입력된 데이터에 기초하여 관리자의 행동을 인식하는 행동 인식부, 카메라로부터 입력된 데이터에 기초하여 관리자의 감정을 인식하는 감정 인식부, 관리자의 음성을 인식하여 동일한 음성 메시지를 생성하는 음성 인식부, 및 각종 정보를 취합 분석하여 관리자의 행동 패턴을 분석하는 행동 패턴 분석부를 포함한다.
또한, 인터액션부는 관리자부의 행동 패턴 분석부로부터 관리자의 행동 패턴을 전송받고, 행동 패턴에 따라 가상 캐릭터의 액션을 관리자의 액션에 동기시키는 액션 동기부, 및 동기에 따라 관리자 모방 동기 액션을 수행하는 가상 캐릭터와 고객 상호간에 인터액션을 수행하고, 인터액션에 따라 관리자의 전문적인 안내를 고객에게 제공하거나 고객의 성향을 분석한 고객 분석 데이터를 맞춤형 광고 제공부에 제공하는 인터액션 수행부를 포함한다.
또한, 고객 유인 요청 모드부는 디지털 사이니지의 카메라로부터 입력된 데이터에 기초하여 디지털 사이니지 부근으로 접근하는 고객의 등장을 인식하는 고객 접근 인식부, 고객 접근 인식부의 인식 결과에 따라 가상 캐릭터의 유인 액션을 요청하는 고객 유인 액션 요청부, 및 디지털 사이니지의 카메라로부터 입력된 데이터에 기초하여 디지털 사이니지로부터 멀어지는 고객의 퇴장을 인식하고, 자동 대응 모드부로 복귀하도록 요청하는 고객 퇴장 인식부를 포함한다.
또한, 수동 대응 모드부는 고객 접근 인식부로부터 전송된 신호에 따라 고객이 기 설정된 시간 계속적으로 디지털 사이니지 영역에 체류하는 것을 감지함으로써 가상 캐릭터의 액션을 관리자의 액션에 동기시키도록 하는 동기 요청 메시지를 생성하는 시간 감지 동기 요청부, 및 고객이 가상 캐릭터와 인터액션을 수행함으로써 관리자의 연결 접속을 요청하면 가상 캐릭터의 액션을 관리자의 액션에 동기시키도록 하는 동기 요청 메시지를 생성하는 고객 동기 요청부를 포함한다.
전술한 바와 같은 본 발명에 의하면 가상 캐릭터가 고객의 접근을 감지하여 고객을 유도하는 액션을 취함으로써 고객을 디지털 사이니지쪽으로 유인하도록 하고, 가상 캐릭터의 액션이 관리자의 액션에 동기됨으로써 가상 캐릭터가 관리자의 액션을 모방함에 따라 관리자와 고객이 매개체인 가상 캐릭터를 통해 상호작용할 수 있는 효과가 있다.
본 명세서에 첨부되는 다음의 도면들은 본 발명의 바람직한 일실시예를 예시하는 것이며, 발명의 상세한 설명과 함께 본 발명의 기술적 사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석 되어서는 아니 된다.
도 1은 본 발명의 일실시예에 따른 디지털사이니지를 이용한 맞춤형 고객 대응 장치에 대한 대략적인 구성도이고,
도 2는 본 발명의 일실시예에 따른 디지털 사이니지의 카메라부 및 적외선 센서부를 이용하여 고객 분석을 하고, 자동 대응 모드, 고객 유인 모드(또는 고객 유인 요청 모드), 수동 대응 모드로 모드가 전환될 수 있는 것을 도시한 도면이고,
도 3은 본 발명의 일실시예에 따른 가상 캐릭터의 기본동작 및 유인동작이 데이터베이스에 저장될 수 있으며, 필요에 따라 고객 분석을 통해 맞춤형 유인 동작을 실시간으로 생성할 수 있음을 도시한 도면이고,
도 4는 본 발명의 일실시예에 따른 수동 대응 모드에서 관리자의 액션과 가상 캐릭터의 액션이 인터액션부에 의해 동기될 수 있음을 도시한 도면이고,
도 5는 본 발명의 일실시예에 따른 고객의 성향을 분석하여 맞춤형 광고를 고객에게 디지털 사이니지의 화면을 통해 제공하는 것을 도시한 도면이고,
도 6은 본 발명의 일실시예에 따른 가상 캐릭터가 자동 대응 모드에서 "기본액션"으로 제어되고 있음을 도시한 도면이고,
도 7은 본 발명의 일실시예에 따른 가상 캐릭터가 고객 유인 요청 모드에서 "고객 유인 액션"을 통해 고객을 디지털 사이니지 쪽으로 유인하는 것을 도시한 도면이고,
도 8은 본 발명의 일실시예에 따른 관리자 영역(50)과 디지털 사이니지 영역(60)으로 구분된 각각의 영역에서 관리자와 고객이 매개체인 가상 캐릭터를 상호 연결 접속된 것을 도시한 도면이고,
도 9는 본 발명의 일실시예에 따른 디지털사이니지를 이용한 맞춤형 고객 대응 방법을 순차적으로 도시한 도면이다.
도 1은 본 발명의 일실시예에 따른 디지털사이니지를 이용한 맞춤형 고객 대응 장치에 대한 대략적인 구성도이고,
도 2는 본 발명의 일실시예에 따른 디지털 사이니지의 카메라부 및 적외선 센서부를 이용하여 고객 분석을 하고, 자동 대응 모드, 고객 유인 모드(또는 고객 유인 요청 모드), 수동 대응 모드로 모드가 전환될 수 있는 것을 도시한 도면이고,
도 3은 본 발명의 일실시예에 따른 가상 캐릭터의 기본동작 및 유인동작이 데이터베이스에 저장될 수 있으며, 필요에 따라 고객 분석을 통해 맞춤형 유인 동작을 실시간으로 생성할 수 있음을 도시한 도면이고,
도 4는 본 발명의 일실시예에 따른 수동 대응 모드에서 관리자의 액션과 가상 캐릭터의 액션이 인터액션부에 의해 동기될 수 있음을 도시한 도면이고,
도 5는 본 발명의 일실시예에 따른 고객의 성향을 분석하여 맞춤형 광고를 고객에게 디지털 사이니지의 화면을 통해 제공하는 것을 도시한 도면이고,
도 6은 본 발명의 일실시예에 따른 가상 캐릭터가 자동 대응 모드에서 "기본액션"으로 제어되고 있음을 도시한 도면이고,
도 7은 본 발명의 일실시예에 따른 가상 캐릭터가 고객 유인 요청 모드에서 "고객 유인 액션"을 통해 고객을 디지털 사이니지 쪽으로 유인하는 것을 도시한 도면이고,
도 8은 본 발명의 일실시예에 따른 관리자 영역(50)과 디지털 사이니지 영역(60)으로 구분된 각각의 영역에서 관리자와 고객이 매개체인 가상 캐릭터를 상호 연결 접속된 것을 도시한 도면이고,
도 9는 본 발명의 일실시예에 따른 디지털사이니지를 이용한 맞춤형 고객 대응 방법을 순차적으로 도시한 도면이다.
이하, 도면을 참조하여 본 발명의 바람직한 일실시예에 대해서 설명한다. 또한, 이하에 설명하는 일실시예는 특허청구범위에 기재된 본 발명의 내용을 부당하게 한정하지 않으며, 본 실시 형태에서 설명되는 구성 전체가 본 발명의 해결 수단으로서 필수적이라고는 할 수 없다. 또한, 종래 기술 및 당업자에게 자명한 사항은 설명을 생략할 수도 있으며, 이러한 생략된 구성요소(방법) 및 기능의 설명은 본 발명의 기술적 사상을 벗어나지 아니하는 범위내에서 충분히 참조될 수 있을 것이다.
본 발명의 일실시예에 따른 디지털사이니지를 이용한 맞춤형 고객 대응 장치는 도 1에 도시된 바와 같이 대략 디지털 사이니지(100), 태블릿(200), 서버(300)로 구성될 수 있다. 한편, 후술하는 고객 대응 모드부(410), 가상 캐릭터부(420), 관리자부(430), 인터액션부(440), 및 고객 분석부(450)는 디지털 사이니지(100) 또는 서버(300)에 구현될 수도 있고 또는 별도의 컴퓨터에 의해 구현될 수도 있다. 이하에서는 별도의 컴퓨터에 구현되는 예를 들어 본 발명의 일실시예에 따른 디지털 사이니지를 이용한 맞춤형 고객 대응 장치에 대해 설명하기로 한다.
도 1 및 도 6에 도시된 바와 같이 디지털 사이니지(100)는 특정 영역에 배치되어 문자 또는 영상을 통해 다양한 정보를 디스플레이 화면(110)에 제공한다. 디지털 사이니지(100)는 실내의 특정 영역에 배치되어 일예로서 매장을 방문하는 고객에게 매장 정보 및 다양한 이벤트 정보를 안내 및 전달한다. 또한, 디지털 사이니지(100) 앞을 지나가는 고객(10)에게 광고 및 홍보 동영상을 화면(110)에 제공한다. 디지털 사이니지의 디스플레이부(110)에는 도 6과 같이 가상 캐릭터가 나타나 고객을 유인하고 고객과 상호작용을 수행한다.
디지털 사이니지의 카메라부(121)는 도 7 및 도 8과 같이 디지털 사이니지 영역(60)으로 지나가는 고객(10)의 접근을 감지하기 위한 촬영 데이터를 제공하고, 고객(10)이 디지털 사이니지(100)의 전면에 위치하는지를 판단하기 위한 촬영 데이터를 제공한다. 카메라부(121)는 고객의 성향을 파악하기 위해 3D 깊이 인식 카메라인 것이 바람직하다.
디지털 사이니지의 적외선 센서부(122)는 카메라부(121)와 함께 대상체인 고객과의 거리를 파악하도록 배치되어 측정된 데이터를 제공한다. 고객(10)과 디지털 사이니지(100) 간의 거리를 파악함으로써 고객(10)이 디지털 사이니지(100)쪽으로 이동하고 있는지와 고객(10)이 디지털 사이니지(100)의 전면에 위치하는지 아니면 고객(10)이 디지털 사이니지(100)로부터 멀어지는지를 디지털 사이니지(100)가 판단할 수 있도록 한다.
디지털 사이니지의 입력부(130)는 디지털 사이니지에 다양한 문자를 입력시킬 수 있도록 터치 스크린으로 구성될 수 있다. 터치 스크린 상에는 문자 입력을 위한 가상 키보드가 표시될 수 있다. 또한, 고객(10)은 후술하는 바와 같이 필요에 따라 가상 캐릭터와 상호작용을 통해 관리자를 호출하도록 하거나 다른 예로서 터치 스크린에 관리자를 호출하는 버튼을 누르거나 문자를 입력할 수 있다.
디지털 사이니지의 제어부(140)는 상술한 디스플레이부(110), 카메라부(121), 적외선 센서부(122), 입력부(130)를 각각 제어하며, 디지털 사이니지(100)의 전체 운영 프로그램(오퍼레이팅 시스템)을 포함한다. 상술한 디지털 사이니지의 구성요소는 본 발명의 설명의 편의를 위하여 설명하였을 뿐 여기에서 설명되지 아니한 구성요소가 본 발명의 기술적 사상을 벗어나지 아니하는 범위내에서 추가될 수 있다.
도 1에 도시된 단말기(200)는 도 8에 도시된 관리자 영역(50)에 관리자(20)와 함께 배치된다. 단말기(200)는 카메라부(121)를 통해 관리자(20)의 행동을 촬영한 행동 촬영 데이터를 제공하고, 관리자(20)의 음성을 인식한다. 제어부(140)는 단말기(200)의 전체 운영 프로그램(오퍼레이팅 시스템)을 포함한다. 단말기(20)는 카메라가 부착된 스마트폰이나 태블릿 또는 카메라가 부착된 컴퓨터나 노트북도 될 수 있다.
서버(300)는 전체 운영 프로그램(오퍼레이팅 시스템)을 포함한 제어부(310)를 통해 각종 복잡한 연산을 수행하거나 데이터베이스(320)와 연계되어 저장된 데이트를 읽어와서 디지털 사이니지(100) 또는 단말기(200)로 전송한다. 데이터베이스(320)에는 본 발명의 일실시예를 위해 생성된 각종 데이터가 저장된다. 필요에 따라 서버(300)는 데이터베이스(320)에 저장된 데이터를 이용하여 고객 맞춤형 학습을 수행할 수 있다. 학습을 통해 고객에게 좀 더 적합한 맞춤형 광고를 제공할 수 있는 장점이 있다.
디지털 사이니지(100)는 도 1에 도시된 바와 같이 단말기(200) 및 서버(300)와 인터넷 망 또는 네트워크를 통해 연결 접속된다. 디지털 사이니지(100)는 실내 또는 실외의 홍보하기 위한 적당한 장소에 배치되며, 서버(300)는 서버 운영실에 배치된다. 단말기(200)는 전체 시스템을 운영 관리하는 관리자 영역(50)에 배치된다. 일예를 들어 건물의 1층 안내실에 디지털 사이니지(100)가 배치된다고 가정하면 디지털 사이니지(100)를 관리 운영하는 관리실(50)에 관리자(20)와 단말기(200)가 배치된다.
이하에서는 도 2 및 도 8을 참조하여 고객(10)의 접근을 감지하면 가상 캐릭터(30)가 고객의 흥미를 유발하여 고객을 디지털 사이니지(100) 쪽으로 유인하도록 하고, 가상 캐릭터(30)의 고객 유인에 의해 고객이 디지털 사이니지(100)에 머무르면 관리자의 액션과 동기된 가상 캐릭터의 관리자 모방 동기 액션을 통해 관리자(20)와 고객(10)이 매개체인 가상 캐릭터(30)를 통해 상호작용함으로써 일예로서 매장에 대한 정교하고 전문적인 안내를 받을 수 있는 방법에 대해 설명하기로 한다.
도 2에 도시된 바와 같이 고객 대응 모드부(410)는 디지털 사이니지(100)의 고객 대응에 따른 동작 모드를 설정하고, 각 설정된 모드에 따라 디지털 사이니지(100)가 동작되도록 한다. 즉, 고객 대응 모드부(410)는 자동 대응 모드, 고객 유인 모드, 또는 수동 대응 모드를 구비할 수 있다.
자동 대응 모드부(411)는 기 설정된 프로그램 루틴에 따라 디지털 사이니지의 화면(110)에 일반 광고영상이나 실내 매장의 안내 화면, 또는 실내 매장의 광고 홍보영상을 제공한다. 또한, 자동 대응 모드부(411)는 기 설정된 프로그램 루틴에 따라 가상 캐릭터(30)를 도 6과 같이 디지털 사이니지 화면(110)에 노출시킬 수도 있다. 이때, 가상 캐릭터(30)는 도 3에 도시된 기 설정된 기본 동작 액션(동작1, 동작2, 동작3 등)을 프로그램 루틴에 따라 수행한다. 기본 동작 액션의 일예로서 디지털 사이니지 화면(110) 상에서 가상 캐릭터(30)가 자신의 캐릭터에 맞게(일예로서 가상 캐릭터가 원숭이인 경우 원숭이의 동작에 맞게) 걸어다니거나 뛰어다니는 등 프로그램에 따라 정해진 동작을 수행하는 것이다. 자동 대응 모드부(411)는 디지털 사이니지(100)를 운영하는 기본적인 모드이다. 만약에 특정 이벤트가 발생되어(일예로서 후술하는 고객 유인 요청 모드부 및 수동 대응 모드부가 실행) 특정 이벤트 모드가 실행되면 이벤트 종료 후 다시 자동 대응 모드부(411)로 복귀된다.
고객 유인 요청 모드부(412)는 도 7과 같이 디지털 사이니지(100)가 배치된 부근을 지나가는 고객이 인식되면 고객을 디지털 사이니지(100)쪽으로 유인하기 위해 가상 캐릭터(30)의 유인 액션을 도 7과 같이 요청한다. 고객 유인 요청 모드부의 고객 접근 인식부는 디지털 사이니지의 카메라(121) 또는 적외선 센서(122)로부터 입력된 데이터에 기초하여 디지털 사이니지(100) 부근으로 접근하는 고객의 접근과 등장을 인식한다. 고객 유인 요청 모드부의 고객 유인 액션 요청부는 도 7의 유인영역(40)으로 고객(10)이 접근하거나 등장하면 고객 접근 인식부의 판단 결과에 따라 가상 캐릭터(30)의 유인 액션을 요청한다. 고객(10)이 유인영역(40)으로 접근하면 가상 캐릭터(30)를 통해 흥미를 적극적으로 불러일으키도록 하여 고객(10)을 디지털 사이니지(100)쪽으로 유인할 수 있는 장점이 있다. 고객(10)이 디지털 사이니지(100) 앞에 서면 매개체인 가상 캐릭터(30)와 상호작용을 통해 고객 맞춤형 광고나 다양한 홍보를 고객(10)에게 제공하여 적극적인 고객 맞춤형 홍보가 가능한 장점이 있다. 고객 유인 요청 모드부의 고객 퇴장 인식부는 디지털 사이니지(100)의 카메라 및 적외선 센서로부터 입력된 데이터에 기초하여 디지털 사이니지(100)로부터 고객(10)의 퇴장을 인식한다. 가상 캐릭터(30)의 적극적인 고객 유인 액션을 통한 관심 유발에도 불구하고 고객(10)이 디지털 사이니지(100)에서 멀어지거나 또는 맞춤형 광고 영상을 다 보고 일정시간 체류 후에 디지털 사이니지(100)로부터 퇴장하는 경우에는 자동 대응 모드부로 복귀하도록 요청한다.
수동 대응 모드부는 가상 캐릭터(30)의 적극적인 고객 유인 액션에 의해 고객(10)이 디지털 사이니지(100)쪽으로 접근하고 머무르고 기 설정된 조건에 부합하는 경우에는 가상 캐릭터(30)의 액션과 관리자(20)의 액션이 서로 동기되도록 제어한다. 가상 캐릭터(30)의 액션이 관리자(20)의 액션과 서로 동기됨으로써 가상 캐릭터의 관리자 모방 동기 액션이 디지털 사이니지의 화면에 표현되고, 매개체인 가상 캐릭터(30)를 통해 관리자(20)와 고객(10)이 상호 인터액션을 주고 받을 수 있다. 이때, 기 설정된 조건은 다음과 같은 경우에 부합될 수 있다. 일예로서 고객 접근 인식부로부터 전송된 신호에 따라 고객(10)이 기 설정된 시간 계속적으로 디지털 사이니지 영역(60)에 머무르는 것을 감지하거나 고객(10)이 가상 캐릭터(30)와 인터액션을 수행함으로써 관리자(20)의 연결 접속을 요청하면 관리자(20)의 액션을 가상 캐릭터(30)의 액션에 동기시킨다. 시간 감지 동기 요청부는 기 설정된 시간을 체크하여 조건에 부합하면 가상 캐릭터(30)의 액션을 관리자(20)의 액션에 동기시키도록 하는 동기 요청 메시지를 생성하고, 고객 동기 요청부는 고객(10)과 가상 캐릭터(30)가 상호작용 프로세스를 통해 관리자(20)의 연결 접속을 요청하는 경우에 가상 캐릭터(30)의 액션을 관리자(20)의 액션에 동기시키도록 하는 동기 요청 메시지를 생성하여 전송한다. 동기 요청 메시지의 전송에 따라 후술하는 인터액션부(440)는 서로를 동기시키도록 제어한다.
가상 캐릭터부(420)는 상술한 각각의 고객 대응 모드와 연동되어 기본 액션 또는 고객 대응 액션을 수행하도록 하는 가상 캐릭터를 생성 및 제어한다. 가상 캐릭터 생성부(421)는 다양한 종류의 가상 캐릭터(30)를 생성한다. 즉, 제1 디지털 사이니지에는 원숭이 형상의 가상 캐릭터를 생성하여 넣을 수 있고, 다른 위치에 배치된 제2 디지털 사이니지에는 곰 형상의 가상 캐릭터를 생성하여 넣을 수 있다. 가상 캐릭터의 형상은 본 발명에서 제한되지 않는다. 다만, 가상 캐릭터의 동작은 생성된 캐릭터에 맞게 행동하도록 프로그램 루틴이 수행되는 것이 바람직하다. 일예로서 가상 캐릭터가 돼지 형상인 경우에는 돼지 걸음걸이와 돼지 소리를 흉내내는 것이 바람직하다. 생성된 가상 캐릭터(30)는 기본적으로 고객(10)과 상호작용을 수행할 수 있다. 상호작용의 일예로서 고객(10)의 니즈를 파악하여 고객(10)이 원하는 서비스를 안내해 주거나 상술한 바와 같이 관리자(20)와 연결 접속을 요청할 수도 있다.
기본액션 모드부(422) 및 유인액션 모드부(423)는 도 3에 도시된 바와 같이 기 설정된 동작이 데이터베이스에 미리 저장될 수 있다. 기본액션 모드부(422)는 자동 대응 모드부의 제어에 따라 기 설정된 가상 캐릭터(30)의 기본 액션을 도 6과 같이 디지털 사이니지의 화면(110)에 제공한다. 이때, 후술하는 동작 시나리오부(424)의 시나리오에 따라 가상 캐릭터(30)의 동작을 제어한다.
유인액션 모드부(423)는 상술한 고객 유인 요청 모드부의 요청에 따라 도 7과 같이 고객의 흥미를 유발시키도록 가상 캐릭터(30)의 고객 유인 액션을 제공한다. 고객 유인 액션은 도 3에 도시된 바와 같이 데이터베이스에 각 가상 캐릭터마다 유형별로 저장될 수 있다. 즉, 가상 캐릭터의 형상과 실내 상황에 맞는 고객 유인 액션을 다양하게 디지털 사이니지 화면(110)에 노출시킬 수 있는 장점이 있다. 이에 더하여 필요에 따라 고객 분석부의 고객 성향 분석에 따라 고객의 성향에 맞는 고객 맞춤형 유인 동작을 실시간으로 생성하여 제공할 수도 있다. 고객 맞춤형 유인 동작을 제공함으로써 디지털 사이니지(100)로 고객을 더 잘 끌어들일 수 있다. 일예로서 유인영역(40)으로 접근하는 고객이 엄마와 초등학생 딸이라고 판단되면 엄마를 유인할 수 있는 유인 동작보다는 초등학생 딸을 유인할 수 있는 유인 동작을 생성하여 제공하는 것이 더 효과적일 수 있다.
동작 시나리오부(424)는 도 3에 도시된 기본 액션 및 유인 액션에 대한 시나리오를 생성 및 저장하고, 각 가상 캐릭터 또는 고객 맞춤형 시나리오를 작성하여 시나리오대로 기본액션 모드부(422) 또는 유인액션 모드부(423)가 가상 캐릭터(30)를 동작시키도록 한다. 일예로서 상술한 예에서 접근 고객이 엄마와 초등학생 딸이라고 가정하면, 동작 시나리오부는 초등학생 딸을 유인하기 위한 시나리오를 생성한다. 즉, 생성된 가상 캐릭터에 맞는 시나리오를 작성한다. 초등학생 딸이 좋아할 수 있는 유행하는 노래를 선별하고, 노래 및 노래에 맞는 안무를 가상 캐릭터가 시나리오대로 수행하도록 할 수 있다.
가상 캐릭터 동기 행동부(425)는 가상 캐릭터(30)의 액션과 관리자(20)의 액션이 서로 동기됨에 따라 가상 캐릭터(30)가 관리자 모방 액션을 하도록 제어한다. 즉, 관리자(20)가 어떤 행동이나 말을 하면 그에 동기되어 가상 캐릭터(30)가 똑같은 동작이나 말을 한다. 일예로서 관리자(20)가 왼쪽으로 고개를 돌리면 가상 캐릭터(30)도 왼쪽으로 고개를 돌리고, 관리자(20)가 "안녕"이라고 말하면 가상 캐릭터(30)도 "안녕"이라고 말한다. 또한, 관리자(20)가 화난 표정을 지으면 가상 캐릭터(30)도 자신의 캐릭터를 통해 화난 표정을 짓는다. 따라서 가상 캐릭터(30)는 관리자(20)의 행동, 감정, 또는 말을 모방 흉내냄으로써 고객(10)과 관리자(20) 간의 매개체 역할을 한다. 매개체인 가상 캐릭터를 통해 고객(10)의 흥미를 유발하고 고객(10)과 관리자(20)가 가상 캐릭터를 통해 상호 소통함으로써 좀 더 유연하게 정보를 전달할 수 있다.
관리자부(430)는 관리자 영역(50)에 위치한 관리자(20)의 액션(여기서 액션은 관리자의 행동, 감정, 말 등을 포함)을 인식하고 판단하여 관리자(20)의 행동 패턴을 분석한다. 관리자의 행동 패턴을 분석하여 관리자의 액션과 동일한 액션을 가상 캐릭터가 동기 모방하도록 하는 데이터를 제공한다.
행동 인식부(431)는 관리자 영역(50)에 배치된 단말기(200)의 카메라로부터 입력된 데이터에 기초하여 관리자의 행동을 인식한 행동 인식 데이터를 생성한다. 감정 인식부(432)는 관리자 영역(50)에 배치된 단말기(200)의 카메라로부터 입력된 데이터에 기초하여 관리자의 감정을 인식한 감정 인식 데이터를 생성한다. 음성 인식부는 관리자(20)의 음성을 인식하여 동일한 음성 메시지 데이터를 생성한다. 행동 패턴 분석부(434)는 행동 인식 데이터, 감정 인식 데이터, 음성 메시지 데이트를 취합 분석하여 관리자의 행동 패턴을 분석하고 행동 패턴 분석 데이터를 생성한다. 또한, 행동 패턴에 맞는 음성 데이터를 생성한다. 생성된 행동 패턴 분석 데이터 및 음성 데이터를 동작 시나리오부(424)에 제공함으로써 가상 캐릭터 동기 행동부(425)의 제어에 의해 가상 캐릭터(30)가 관리자(20)의 액션을 동기 모방하도록 할 수 있다.
인터액션부(440)는 수동 대응 모드부(413)로 동작시에 관리자(30)의 액션과 동기된 가상 캐릭터(30)의 관리자 모방 동기 액션이 디지털 사이니지의 화면(110)에 표현되고, 고객(10)과 인터액션을 수행하도록 가상 캐릭터의 액션과 관리자의 액션을 동기 접속시킨다. 액션 동기부(441)는 관리자와 가상 캐릭터를 서로 동기 접속시키는 것으로서 행동 패턴 분석부(434)로부터 분석된 행동 패턴 분석 데이터 및 음성 데이터를 전송받아 가상 캐릭터의 액션을 관리자의 액션에 동기시켜 가상 캐릭터의 액션을 제어한다.
인터액션 수행부(442)는 동기 접속에 따라 관리자 모방 동기 액션을 수행하는 가상 캐릭터(30)와 고객 상호간에 인터액션을 수행할 수 있도록 제어하고, 인터액션에 따라 관리자(20)의 전문적인 매장 안내를 고객에게 제공하거나 고객(10)의 성향을 분석함으로써 고객 분석 데이터를 맞춤형 광고 제공부에 제공한다. 인터액션의 일예로서 가상 캐릭터(30)에게 고객(10)이 질문을 하면 그에 대해 관리자(20)가 응답 액션을 하고, 관리자의 응답 액션에 동기 접속된 가상 캐릭터(30)가 관리자의 응답 액션을 모방 표현함으로써 고객(10)에게 적절한 안내를 할 수 있다.
고객 분석부(450)는 맞춤형 고객 대응 액션이 제공되도록 고객의 성향을 분석한다. 고객 인식부(451)는 디지털 사이니지(100)에 부착된 카메라 및 적외선 센서 데이터를 통해 디지털 사이니지(100)와 고객 간의 떨어진 거리, 고객(10)의 얼굴 방향을 인식 및 분석한다. 분석을 통해 고객(10)이 디지털 사이니지(100)로 접근하고 등장하는지 또는 디지털 사이니지(100)로부터 멀저여 퇴장하는지를 파악할 수 있고, 고객(10)의 얼굴 방향 분석을 통해 고객(10)이 제공된 영상에 대해 흥미를 보이는지 등을 파악할 수 있다.
고객 식별부(452)는 디지털 사이니지(100)에 부착된 카메라의 데이터를 통해 고객의 얼굴을 분석하고, 분석에 따라 성별, 연령, 또는 감정을 식별 및 분석한다. 분석된 성별, 연령 또는 감정은 고객에게 맞춤형 가상 캐릭터 시나리오를 제공하거나 맞춤형 광고 홍보 영상을 제공할 때 이용될 수 있다.
고객 음성 인식부(453)는 고객의 음성을 인식 및 분석하여 주요 키워드를 추출한다. 추출된 주요 키워드는 고객의 니즈를 반영하는 것으로서 분석된 주요 키워드를 활용하여 고객 맞춤형 대응 절차를 수행할 수 있다. 일예로서 고객(10)이 "관리자 연결"이라고 말하면, 고객(10)과 인터액션을 수행하고 있는 가상 캐릭터(30)는 관리자 호출 절차를 수행하고, 관리자(20)와 고객(10)이 가상 캐릭터를 통해 매개 연결되로록 동기 접속된다. 고객 음성 인식부(453)는 고객(10)의 음성을 인식하여 성별, 연령 또는 감정을 식별 및 분석할 수 있다.
체류시간 산출부(454)는 디지털 사이니지(100) 앞에 고객(10)이 머무른 시간을 분석한다. 고객의 체류시간에 따라 시나리오에 따라 액션한 가상 캐릭터와 맞춤형 광고 홍보에 대한 고객 반응도를 알 수 있으며, 고객 반응도는 학습되어 더욱 최적화된 시나리오 및 정보를 제공할 수 있다.
시나리오 생성부(455)는 고객 성향 분석부(456)의 분석 데이터에 따라 분석된 고객의 성향에 맞도록 고객 맞춤형 시나리오를 생성 및 제공한다. 일예로서 어머니와 학생이 함께 접근한 경우에는 어머니와 학생 모두 흥미를 유발할 수 있는 학습과 관련된 고객 맞춤형 광고 및 홍보 시나리오를 생성한다. 또한, 다른 예로서 30대 남성이면서 스포츠 의류와 블루투스 헤드셋을 착용했다고 인식하면 액티비티를 즐기는 젊은 남성을 위한 광호 홍보 영상에 대한 시나리오를 생성 및 제공한다.
고객 성향 분석부(456)는 상술한 고객 인식부(451), 고객 식별부(452), 고객 음성 인식부(453) 및 체류시간 산출부(454)에서 각각 생성된 데이터를 취합 종합하여 고객의 성향을 분석한다.
맞춤형 광고 제공부(457)는 시나리오 생성부(455)에서 생성한 고객 맞춤형 시나리오에 따라 맞춤형 광고를 고객에게 제공한다.
이하에서는 맞춤형 가상 캐릭터 제공 및 맞춤형 광고 홍보 영상을 제공하는 단계를 순차적으로 설명하기로 한다.
먼저, 디지털 사이니지(100)가 "자동 대응 모드부의 기본모드”로 동작시 가상 캐릭터(30)가 디지털 사이니지의 화면(110)에서 기 설정된 프로그램에 따라 기본 동작(제1 동작)을 수행하며, 디지털 사이니지(100)에 부착되거나 또는 별도로 설치된 카메라에서 고객의 접근을 감지하는 단계를 수행한다.
고객의 접근을 감지하면, 가상 캐릭터(30)는 “고객 유인 요청 모드부에 의해 고객 유인 모드”로 전환되고, 고객을 유인하는 고객 유인동작(제2 동작)을 수행한다. 이때, 고객 유인동작은 기 설정된 동작이거나 또는 고객(10) 분석을 통한 고객 맞춤형 고객 유인동작일 수 있다.
가상 캐릭터(30)의 고객 유인동작에 의해 지나가는 고객을 유인하고, 고객(10)과 가상 캐릭터(30)가 인터액션을 수행하고, 기 설정된 시간이 지나거나 고객이 요청하는 경우에 가상 캐릭터(30)가 관리자(30)에게 연결 접속을 통보하는 절차를 수행한다.
가상 캐릭터(30)의 요청에 따라 관리자(20)와 가상 캐릭터(30)가 상호 연동 접속되어 관리자의 액션이 가상 캐릭터에 의해 모방 표현되며, 고객과 관리자가 매개체인 가상 캐릭터를 통해 상호 접속된다. 고객과 인터액션을 수행하는 관리자의 액션(행동, 반응, 음성, 감정)이 가상 캐릭터와 동기되어 가상 캐릭터를 매개로 표현되고, 가상 캐릭터의 모방 동기 액션이 디지털 사이니지 화면에 제공된다.
관리자의 액션과 동기된 가상 캐릭터의 모방 동기 액션에 의해 고객에게 흥미를 유발하고, 고객(10)과 관리자(20)는 상호 인터액션을 수행한다.
관리자와 고객이 가상 캐릭터를 매개로 상호 인터액션을 수행함으로써 관리자의 전문적인 안내를 고객이 받거나 또는 고객의 성향, 반응, 및 행동패턴을 관리자가 상호작용을 통해 분석하여 고객 분석 데이터를 고객 성향 분석부(456)에 제공한다.
고객(10)이 디지털 사이니지(100)로부터 멀어져 퇴장하면 관리자(20)가 가상 캐릭터(30)의 동기 제어를 해제하고, 가상 캐릭터는 기본모드로 복귀되며, 가상 캐릭터의 기본 동작이 디지털 사이니지의 화면에 다시 제공된다.
본 발명을 설명함에 있어 종래 기술 및 당업자에게 자명한 사항은 설명을 생략할 수도 있으며, 이러한 생략된 구성요소(방법) 및 기능의 설명은 본 발명의 기술적 사상을 벗어나지 아니하는 범위내에서 충분히 참조될 수 있을 것이다. 또한, 상술한 본 발명의 구성요소는 본 발명의 설명의 편의를 위하여 설명하였을 뿐 여기에서 설명되지 아니한 구성요소가 본 발명의 기술적 사상을 벗어나지 아니하는 범위내에서 추가될 수 있다.
상술한 각부의 구성 및 기능에 대한 설명은 설명의 편의를 위하여 서로 분리하여 설명하였을 뿐 필요에 따라 어느 한 구성 및 기능이 다른 구성요소로 통합되어 구현되거나, 또는 더 세분화되어 구현될 수도 있다.
이상, 본 발명의 일실시예를 참조하여 설명했지만, 본 발명이 이것에 한정되지는 않으며, 다양한 변형 및 응용이 가능하다. 즉, 본 발명의 요지를 일탈하지 않는 범위에서 많은 변형이 가능한 것을 당업자는 용이하게 이해할 수 있을 것이다. 또한, 본 발명과 관련된 공지 기능 및 그 구성 또는 본 발명의 각 구성에 대한 결합관계에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는, 그 구체적인 설명을 생략하였음에 유의해야 할 것이다.
10 : 고객
20 : 관리자
30 : 가상 캐릭터
40 : 유인영역
50 : 관리자 영역
60 : 디지털 사이니지 영역
100 : 디지털 사이니지
110 : 디스플레이부
121 : 카메라부
122 : 적외선 센서부
130 : 입력부
140 : 제어부
200 : 단말기 또는 태블릿
210 : 디스플레이부
220 : 카메라부
230 : 제어부
300 : 서버
310 : 제어부
320 : 데이터베이스
410 : 고객 대응 모드부
411 : 자동 대응 모드부
412 : 고객 유인 요청 모드부
413 : 수동 대응 모드부
420 : 가상 캐릭터부
421 : 가상 캐릭터 생성부
422 : 기본액션 모드부
423 : 유인액션 모드부
424 : 동작 시나리오부
425 : 가상 캐릭터 동기 행동부
430 : 관리자부
431 : 행동 인식부
432 : 감정 인식부
433 : 음성 인식부
434 : 행동 패턴 분석부
440 : 인터액션부
441 : 액션 동기부
442 : 인터액션 수행부
450 : 고객 분석부
451 : 고객 인식부
452 : 고객 식별부
453 : 고객 음성 인식부
454 : 체류시간 산출부
455 : 시나리오 생성부
456 : 고객 성향 분석부
457 : 맞춤형 광고 제공부
20 : 관리자
30 : 가상 캐릭터
40 : 유인영역
50 : 관리자 영역
60 : 디지털 사이니지 영역
100 : 디지털 사이니지
110 : 디스플레이부
121 : 카메라부
122 : 적외선 센서부
130 : 입력부
140 : 제어부
200 : 단말기 또는 태블릿
210 : 디스플레이부
220 : 카메라부
230 : 제어부
300 : 서버
310 : 제어부
320 : 데이터베이스
410 : 고객 대응 모드부
411 : 자동 대응 모드부
412 : 고객 유인 요청 모드부
413 : 수동 대응 모드부
420 : 가상 캐릭터부
421 : 가상 캐릭터 생성부
422 : 기본액션 모드부
423 : 유인액션 모드부
424 : 동작 시나리오부
425 : 가상 캐릭터 동기 행동부
430 : 관리자부
431 : 행동 인식부
432 : 감정 인식부
433 : 음성 인식부
434 : 행동 패턴 분석부
440 : 인터액션부
441 : 액션 동기부
442 : 인터액션 수행부
450 : 고객 분석부
451 : 고객 인식부
452 : 고객 식별부
453 : 고객 음성 인식부
454 : 체류시간 산출부
455 : 시나리오 생성부
456 : 고객 성향 분석부
457 : 맞춤형 광고 제공부
Claims (6)
- 자동 대응 모드, 고객 유인 모드, 및 수동 대응 모드를 구비하고, 디지털 사이니지의 고객 대응 모드를 설정 제어하는 고객 대응 모드부,
각각의 고객 대응 모드와 연동되어 고객 대응 액션을 수행하도록 하는 가상 캐릭터를 생성 및 제어하는 가상 캐릭터부,
관리자의 액션을 인식함으로써 관리자의 행동 패턴을 분석하는 관리자부,
관리자의 액션과 동기된 가상 캐릭터의 관리자 모방 동기 액션이 상기 디지털 사이니지의 화면에 표현되어 고객과 인터액션을 수행하도록 상기 수동 대응 모드시에 상기 가상 캐릭터와 동기 접속을 제어하는 인터액션부,
맞춤형 고객 대응 액션이 제공되도록 상기 고객의 성향을 분석하는 고객 분석부를 포함하며,
상기 고객 대응 모드부는,
상기 가상 캐릭터의 기 설정된 기본 액션을 상기 디지털 사이니지 화면에 제공하도록 제어하는 자동 대응 모드부,
상기 디지털 사이니지가 배치된 부근을 지나가는 고객이 인식되면 상기 고객을 상기 디지털 사이니지쪽으로 유인하기 위해 상기 가상 캐릭터의 유인 액션을 요청하며, 상기 유인 액션 요청에 따라 상기 가상 캐릭터가 자동 대응 모드의 기본 액션에서 고객 유인 모드의 고객 유인 액션으로 변경 표현되도록 하는 고객 유인 요청 모드부,
상기 가상 캐릭터의 유인 액션에 의해 상기 고객이 접근하면 고객과 인터액션을 수행하는 상기 관리자의 액션이 상기 가상 캐릭터의 액션과 서로 동기됨으로써 상기 가상 캐릭터를 매개로 관리자 모방 동기 액션이 표현되고, 상기 관리자와 고객이 상기 가상 캐릭터를 매개로 상호 인터액션을 수행하도록 상기 가상 캐릭터의 관리자 모방 동기 액션이 상기 디지털 사이니지의 화면에 표현되도록 제어하는 수동 대응 모드부를 포함하며,
상기 가상 캐릭터부는,
상기 가상 캐릭터를 생성하는 가상 캐릭터 생성부,
상기 자동 대응 모드부의 제어에 따라 기 설정된 가상 캐릭터의 기본 액션을 제공하는 기본액션 모드부,
상기 고객 유인 요청 모드부의 요청에 따라 상기 고객의 흥미를 유발시키도록 가상 캐릭터의 고객 유인 액션을 제공하는 유인액션 모드부,
상기 기본 액션 및 유인 액션에 대한 시나리오가 저장되며, 상기 고객 분석부의 고객 성향 분석에 따라 상기 고객의 성향에 맞는 고객 맞춤형 유인 동작을 생성하여 상기 유인액션 모드부에 제공하는 동작 시나리오부,
상기 가상 캐릭터의 액션과 상기 관리자의 액션이 서로 동기됨에 따라 상기 가상 캐릭터의 관리자 모방 동기 액션이 표현되는 가상 캐릭터 동기 행동부를 포함하며,
상기 가상 캐릭터 동기 행동부에 의해 상기 관리자와 고객이 매개체인 가상 캐릭터를 통해 상호작용함으로써 매장에 대한 전문적인 안내를 제공 받을 수 있으며,
상기 유인액션 모드부는,
유인 영역으로 접근한 복수의 고객의 분석된 성향을 기초로 복수의 고객 중 우선하는 어느 한 명의 고객의 흥미를 유발할 수 있는 유인 동작 및 고객 모두의 흥미를 유발할 수 있는 유인 동작 중 고객 유인 액션에 상대적으로 효과적인 유인 동작을 선택하여 생성하며,
상기 동작 시나리오부는,
유인 영역으로 접근한 복수의 고객 중 우선하는 어느 한 명의 고객의 흥미를 유발할 수 있는 시나리오 또는 고객 모두의 흥미를 유발할 수 있는 시나리오를 생성하고, 선택된 시나리오에 따라 상기 가상 캐릭터가 시나리오대로 동작되도록 하는 것을 특징으로 하는 디지털사이니지를 이용한 맞춤형 고객 대응 장치.
- 제 1 항에 있어서,
상기 고객 분석부는,
상기 디지털 사이니지와 고객 간의 떨어진 거리, 상기 고객의 얼굴 방향을 인식 및 분석하는 고객 인식부,
상기 고객의 얼굴을 통해 성별, 연령, 또는 감정을 식별 및 분석하는 고객 식별부,
상기 고객의 음성을 인식 및 분석하여 주요 키워드를 추출하는 고객 음성 인식부,
상기 디지털 사이니지 앞에 머무른 시간을 분석하는 체류시간 산출부,
각종 정보를 종합하여 고객의 성향을 분석하는 고객 성향 분석부,
분석된 고객의 성향에 맞도록 고객 맞춤형 시나리오를 생성하는 시나리오 생성부, 및
고객 맞춤형 시나리오에 따라 맞춤형 광고를 고객에게 제공하는 맞춤형 광고 제공부를 포함하는 것을 특징으로 하는 디지털사이니지를 이용한 맞춤형 고객 대응 장치.
- 제 1 항에 있어서,
상기 관리자부는,
카메라로부터 입력된 데이터에 기초하여 상기 관리자의 행동을 인식하는 행동 인식부,
카메라로부터 입력된 데이터에 기초하여 상기 관리자의 감정을 인식하는 감정 인식부,
상기 관리자의 음성을 인식하여 동일한 음성 메시지를 생성하는 음성 인식부, 및
각종 정보를 취합 분석하여 관리자의 행동 패턴을 분석하는 행동 패턴 분석부를 포함하는 것을 특징으로 하는 디지털사이니지를 이용한 맞춤형 고객 대응 장치.
- 제 3 항에 있어서,
상기 인터액션부는,
상기 관리자부의 행동 패턴 분석부로부터 상기 관리자의 행동 패턴을 전송받고, 상기 행동 패턴에 따라 상기 가상 캐릭터의 액션을 상기 관리자의 액션에 동기시키는 액션 동기부, 및
동기에 따라 관리자 모방 동기 액션을 수행하는 상기 가상 캐릭터와 고객 상호간에 인터액션을 수행하고, 인터액션에 따라 상기 관리자의 전문적인 안내를 상기 고객에게 제공하거나 고객의 성향을 분석한 고객 분석 데이터를 고객 맞춤형 시나리오에 따라 맞춤형 광고를 고객에게 제공하는 맞춤형 광고 제공부에 제공하는 인터액션 수행부를 포함하는 것을 특징으로 하는 디지털사이니지를 이용한 맞춤형 고객 대응 장치.
- 제 1 항에 있어서,
상기 고객 유인 요청 모드부는,
상기 디지털 사이니지의 카메라로부터 입력된 데이터에 기초하여 상기 디지털 사이니지 부근으로 접근하는 상기 고객의 등장을 인식하는 고객 접근 인식부,
상기 고객 접근 인식부의 인식 결과에 따라 상기 가상 캐릭터의 유인 액션을 요청하는 고객 유인 액션 요청부, 및
상기 디지털 사이니지의 카메라로부터 입력된 데이터에 기초하여 상기 디지털 사이니지로부터 멀어지는 상기 고객의 퇴장을 인식하고, 상기 자동 대응 모드부로 복귀하도록 요청하는 고객 퇴장 인식부를 포함하는 것을 특징으로 하는 디지털사이니지를 이용한 맞춤형 고객 대응 장치.
- 제 5 항에 있어서,
상기 수동 대응 모드부는,
상기 고객 접근 인식부로부터 전송된 신호에 따라 상기 고객이 기 설정된 시간 계속적으로 상기 디지털 사이니지 영역에 체류하는 것을 감지함으로써 상기 가상 캐릭터의 액션을 상기 관리자의 액션에 동기시키도록 하는 동기 요청 메시지를 생성하는 시간 감지 동기 요청부, 및
상기 고객이 상기 가상 캐릭터와 인터액션을 수행함으로써 상기 관리자의 연결 접속을 요청하면 상기 가상 캐릭터의 액션을 상기 관리자의 액션에 동기시키도록 하는 동기 요청 메시지를 생성하는 고객 동기 요청부를 포함하는 것을 특징으로 하는 디지털사이니지를 이용한 맞춤형 고객 대응 장치.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020220161391A KR102601329B1 (ko) | 2020-03-03 | 2022-11-28 | 디지털사이니지를 이용한 맞춤형 고객 대응 장치 |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200026860A KR20210111953A (ko) | 2020-03-03 | 2020-03-03 | 디지털사이니지를 이용한 맞춤형 고객 대응 장치 |
| KR1020220161391A KR102601329B1 (ko) | 2020-03-03 | 2022-11-28 | 디지털사이니지를 이용한 맞춤형 고객 대응 장치 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020200026860A Division KR20210111953A (ko) | 2020-03-03 | 2020-03-03 | 디지털사이니지를 이용한 맞춤형 고객 대응 장치 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20220165227A KR20220165227A (ko) | 2022-12-14 |
| KR102601329B1 true KR102601329B1 (ko) | 2023-11-14 |
Family
ID=77774379
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020200026860A KR20210111953A (ko) | 2020-03-03 | 2020-03-03 | 디지털사이니지를 이용한 맞춤형 고객 대응 장치 |
| KR1020220161391A KR102601329B1 (ko) | 2020-03-03 | 2022-11-28 | 디지털사이니지를 이용한 맞춤형 고객 대응 장치 |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020200026860A KR20210111953A (ko) | 2020-03-03 | 2020-03-03 | 디지털사이니지를 이용한 맞춤형 고객 대응 장치 |
Country Status (1)
| Country | Link |
|---|---|
| KR (2) | KR20210111953A (ko) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102596390B1 (ko) | 2023-03-20 | 2023-11-01 | 주식회사 화컴 | 근거리 통신기술을 활용한 디지털 사이니지 연동 서비스 제공 방법 및 이를 위한 시스템 |
Family Cites Families (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20020050016A (ko) | 2000-12-20 | 2002-06-26 | 조석현 | 스케줄을 관리할 수 있는 캐릭터와 캐릭터를 이용한 정보제공 시스템 및 그 방법 |
| KR20030075880A (ko) | 2002-03-21 | 2003-09-26 | 황병부 | 인터넷상에서의 3차원 채팅 시스템과 그 시스템에서의가상 상점의 임대 운영 방법 |
| KR20110090158A (ko) | 2010-02-03 | 2011-08-10 | 조수호 | 사용자의 위치 혹은 근접도에 연동되는 인터랙티브 디지털 사이니지 시스템 및 컨텐츠 표시 방법 |
| JP5629511B2 (ja) | 2010-07-05 | 2014-11-19 | 株式会社日立製作所 | サイネージ端末とそのシステム |
| KR20140031566A (ko) | 2012-09-04 | 2014-03-13 | (주) 미디어인터랙티브 | 사용자 맞춤형 인터랙티브 디지털사이니지 게임 및 광고 플랫폼(기간별, 요일별, 시간별 행인의 특징을 추출 및 분석하여 맞춤형 콘텐츠를 서비스하며, 콘텐츠를 사용자의 동작인식으로 제어하는 플랫폼) |
| KR101440691B1 (ko) | 2012-12-11 | 2014-09-16 | (주)디스트릭트홀딩스 | 사용자의 움직임 또는 제스처에 따라 디스플레이를 제공하는 스마트 디지털 사이니지 |
| KR20140091141A (ko) * | 2013-01-08 | 2014-07-21 | 계명대학교 산학협력단 | 게임 엔진 기반의 삼차원 캐릭터를 이용한 화상 커뮤니케이션 시스템 및 그 운용방법 |
| KR20150000026A (ko) | 2013-06-20 | 2015-01-02 | 한국항공대학교산학협력단 | 사용자 인식기능을 이용하는 스마트 모바일 디지털 사이니지 |
| KR101602828B1 (ko) | 2014-09-01 | 2016-03-14 | 유형근 | 얼굴인식형 인터랙티브 디지털 사이니지장치 |
| KR101692335B1 (ko) | 2015-02-25 | 2017-01-03 | 이은미 | 증강현실 영상표시 시스템 및 증강현실 영상표시 방법 |
| KR20160131332A (ko) | 2015-05-06 | 2016-11-16 | (주) 와이즈솔루션 | 디지털 사이니지의 맞춤 광고 운영 시스템 |
| KR101654904B1 (ko) | 2015-06-29 | 2016-09-22 | 주식회사 디에스아이텍 | 디지털 사이니지의 구동장치와 구동방법 |
| KR102136223B1 (ko) * | 2015-08-18 | 2020-07-21 | 삼성전자주식회사 | LFD(large format display) 장치 및 그 제어 방법 |
| KR101790656B1 (ko) | 2015-10-29 | 2017-10-27 | 디노플러스 (주) | 광고시청자 시선추적에 의한 디지털 사이니지 광고시청 분석장치 및 그 방법 |
| KR20170050268A (ko) | 2015-10-30 | 2017-05-11 | 디노플러스 (주) | 디지털 사이니지 광고시청자의 주목 유도방법 |
| KR102085304B1 (ko) | 2016-06-23 | 2020-03-05 | 주식회사 케이티 | 맞춤형 광고 컨텐츠를 제공하는 디바이스, 컨텐츠 서버 및 디지털 사이니지 장치 |
| KR101851356B1 (ko) * | 2016-09-09 | 2018-04-23 | 동서대학교산학협력단 | 3d 디지털액터에 의한 지능형 사용자 인터페이스 제공방법 |
| KR102091655B1 (ko) * | 2018-03-14 | 2020-04-23 | 김중근 | 고객행동분석을 위한 NB-IoT 단말기, 이를 포함한 시스템 및 이의 동작방법 |
| KR20200004014A (ko) * | 2018-07-03 | 2020-01-13 | 배솜이 | 의류피팅 디지털 사이니지 시스템 및 디지털 사이니지 시스템을 이용한 상품 디스플레이 방법 |
-
2020
- 2020-03-03 KR KR1020200026860A patent/KR20210111953A/ko not_active IP Right Cessation
-
2022
- 2022-11-28 KR KR1020220161391A patent/KR102601329B1/ko active IP Right Grant
Non-Patent Citations (1)
| Title |
|---|
| 네이버 블로그, "[PMC] 증강현실 피팅 거울~ IoT 기술로 태어난 에프엑스미러 가상 피팅 체험존 운영! IT뉴스" (2016.06.21.) <URL: http://blog.naver.com/pmccorp5088/220741933629> |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20210111953A (ko) | 2021-09-14 |
| KR20220165227A (ko) | 2022-12-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20230105041A1 (en) | Multi-media presentation system | |
| US9721257B2 (en) | Virtual photorealistic digital actor system for remote service of customers | |
| US7225414B1 (en) | Method and system for virtual touch entertainment | |
| KR102139241B1 (ko) | 스펙테이팅 시스템과 게임 시스템들 통합 | |
| US10613699B2 (en) | Multi-view display cueing, prompting, and previewing | |
| Lombard et al. | Interactive advertising and presence: A framework | |
| US20110004481A1 (en) | System and method for communicating and interfacing between real and virtual environments | |
| US20140130076A1 (en) | System and Method of Media Content Selection Using Adaptive Recommendation Engine | |
| US20220171454A1 (en) | Method and apparatus to compose a story for a user depending on an attribute of the user | |
| KR102601329B1 (ko) | 디지털사이니지를 이용한 맞춤형 고객 대응 장치 | |
| KR102581583B1 (ko) | 커스터마이징 상품 주문이 가능한 디지털 사이니지 장치 | |
| Eng et al. | An investigation of collective human behavior in large-scale mixed reality spaces | |
| Nijholt | Humorous and playful social interactions in augmented reality | |
| JP2007535720A (ja) | 小売環境を改善するディスプレイシステムとその方法 | |
| Lombard et al. | Digital Advertising in a New Age: The Power of (Tele) Presence | |
| EP3182361A1 (en) | System and method to provide interactive advertising | |
| KR102555012B1 (ko) | 오프라인 광고-홍보 디지털액터 운용시스템 | |
| US20240104870A1 (en) | AR Interactions and Experiences | |
| NL2014682B1 (en) | Method of simulating conversation between a person and an object, a related computer program, computer system and memory means. | |
| Meng-Chew et al. | Digital Signage-Augmented Roadshow (DiSAR) | |
| Girgis | Assessing the impact of interactivity on recall and recognition | |
| Ohta et al. | Digital Signage that Reacts to Smoking in Non-Smoking Zone | |
| Lammerts van Bueren | The influence of a choice on the sense of presence for older adults in digital nature | |
| KR20230041477A (ko) | 고유패턴을 활용한 서비스 제공 방법 및 이를 위한 연산장치 | |
| Sjöberg | Making use of the environmental space in augmented reality |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A107 | Divisional application of patent | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |