KR20230066780A - Kiosk system based on customer serving algorithms using face recognition check-in - Google Patents

Kiosk system based on customer serving algorithms using face recognition check-in Download PDF

Info

Publication number
KR20230066780A
KR20230066780A KR1020210152135A KR20210152135A KR20230066780A KR 20230066780 A KR20230066780 A KR 20230066780A KR 1020210152135 A KR1020210152135 A KR 1020210152135A KR 20210152135 A KR20210152135 A KR 20210152135A KR 20230066780 A KR20230066780 A KR 20230066780A
Authority
KR
South Korea
Prior art keywords
information
output
management unit
check
member information
Prior art date
Application number
KR1020210152135A
Other languages
Korean (ko)
Other versions
KR102615937B1 (en
Inventor
노성환
Original Assignee
주식회사 타키
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 타키 filed Critical 주식회사 타키
Priority to KR1020210152135A priority Critical patent/KR102615937B1/en
Publication of KR20230066780A publication Critical patent/KR20230066780A/en
Application granted granted Critical
Publication of KR102615937B1 publication Critical patent/KR102615937B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06037—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking multi-dimensional coding
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00563—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F17/00—Coin-freed apparatus for hiring articles; Coin-freed facilities or services
    • G07F17/40—Coin-freed apparatus for hiring articles; Coin-freed facilities or services for devices for accepting orders, advertisements, or the like

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

The present invention relates to a system installed on a kiosk having a touch display in an upper part on the front side, where the output of specific output UI and a signal input through touch can be performed, a camera module disposed on one side of the front to photograph a face, and a sensor module detecting biometric information. The system of the present invention comprises: a check-in management unit comparing and analyzing the facial photographic information on a guest captured through the camera module with the facial reference information in the guests' member information already registered and stored to select member information containing the corresponding facial reference information; and an order management unit receiving the member information selected by the check-in management unit to customize the output form of the preset menu order output UI on the touch display according to the provided member information. Accordingly, safer and faster guest identification and check-in can be achieved.

Description

얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템 {KIOSK SYSTEM BASED ON CUSTOMER SERVING ALGORITHMS USING FACE RECOGNITION CHECK-IN} Kiosk system based on customer response algorithm through face recognition check-in {KIOSK SYSTEM BASED ON CUSTOMER SERVING ALGORITHMS USING FACE RECOGNITION CHECK-IN}

본 발명은 얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템에 관한 것이다.The present invention relates to a kiosk system based on a customer response algorithm through facial recognition check-in.

키오스크(Kiosk)란 상품 및 서비스를 제공하는 소규모 점포 또는 공공장소에 설치되는 터치스크린 방식의 무인 정보 단말기를 의미하며, 최근 인건비의 상승으로 인해 키오스크를 도입하고자 하는 시설이 많아지고 있는 추세이다.A kiosk refers to a touch screen type unmanned information terminal installed in a small store providing goods and services or a public place. Recently, due to the rise in labor costs, there is a trend that more facilities to introduce the kiosk are increasing.

이러한 키오스크의 사용은 인건비 절감 및 매출 증대의 효과뿐만 아니라 주문 대기 및 처리에 소요되는 시간을 단축시키고 소비자 자신이 직접 개인화 수준의 최적화 및 서비스 품질 제어가 가능하여 더욱 편리함을 느끼는 이점이 있다.The use of such a kiosk not only reduces labor costs and increases sales, but also reduces the time required to wait and process orders, and allows consumers to optimize the level of personalization and control service quality, which makes them feel more convenient.

이에 따라, 키오스크의 기능적 성능의 다양화 및 고도화를 위한 많은 기술 개발이 시도되고 있으며, 그 중 키오스크를 사용하는 손님이 단순히 터치 입력을 통해 주문만을 진행하는 것이 아니라 각각의 손님 개인별로 구분된 특정 서비스를 제공받을 수 있는 제품이 제시되고 있다.Accordingly, many technology developments are being attempted to diversify and advance the functional performance of the kiosk, and among them, customers using the kiosk do not simply process orders through touch input, but provide specific services that are differentiated for each individual customer. Products that can be provided are presented.

예를 들어, 손님이 키오스크를 이용해 자신의 휴대전화번호를 입력하면, 해당 번호를 식별정보로 이용해 체크인되도록 하여 각각의 손님별로 주문 내역에 따른 리워드 혹은 포인트 적립이 이루어질 수 있도록 하는 기술이 제시된 바 있다.For example, when a guest inputs his/her mobile phone number using a kiosk, a technology has been proposed that enables check-in using the number as identification information so that each guest can accumulate rewards or points according to order details. .

이와 관련하여, 더욱 다양한 기능들을 키오스크를 이용하는 손님이 제공받고, 손님의 선택에 의해 생성되는 주문정보의 관리를 특정 방식으로 제공하기 위해 마련된 종래기술에 대한 선행문헌에는 대한민국 등록특허공보 제10-2141172호의 "인공지능 및 사물인터넷을 적용한 키오스크 주문 관리 시스템 및 그 방법"(이하, '종래기술'이라고 함)이 있다.In this regard, prior art related to the prior art prepared to provide more diverse functions to customers using the kiosk and to provide management of order information generated by the customer's selection in a specific way includes Korean Registered Patent Publication No. 10-2141172. Ho. "Kiosk order management system and method applying artificial intelligence and Internet of things" (hereinafter referred to as 'prior art').

하지만, 종래기술을 비롯한 기존의 키오스크 내 구축되는 관리 시스템의 경우, 단순히 입력되는 휴대전화번호만을 이용하여 손님을 식별하여 보안상의 취약함과 악용의 여지를 가지고 있어 정보 안정성이 부족하였으며, 손님의 휴대전화번호가 변경될 경우 정보의 수정 및 통합에 있어 서비스가 원활하게 이루어지지 못하고 정보의 소실 혹은 충돌 등을 일으키는 문제점이 있었다.However, in the case of the management system built in the existing kiosk, including the prior art, it has security vulnerabilities and room for abuse by identifying guests using only the cell phone number that is simply entered, and lacks information stability, and the customer's mobile phone number When the phone number is changed, there is a problem in that the service is not smoothly performed in modifying and integrating information and causes loss or collision of information.

또한, 종래기술을 비롯한 기존의 키오스크 내 구축되는 관리 시스템의 경우, 제공되는 기능적 효과가 단순히 식별되는 손님별로 특정 혜택을 제공하는 형태에 그치고, 키오스크에 출력되는 화면UI의 형태가 모든 손님에게 일괄적으로 처리되는 형태에 그치는 문제점이 있었다.In addition, in the case of the management system built in the existing kiosk, including the prior art, the functional effect provided is simply in the form of providing specific benefits for each identified guest, and the form of the screen UI output on the kiosk is uniform to all guests. There was a problem with the form being processed as .

본 발명은 상기 문제점을 해결하기 위해 창작된 것으로써, 본 발명의 목적은 손님을 식별하는 과정이 더욱 고도화된 정보 안정성을 갖추어 신속하게 진행되고, 이를 통해 식별된 손님별로 달리 구성되는 출력UI를 통해 손님 맞춤 응대가 가능한 키오스크 시스템을 제공하는데 있다.The present invention was created to solve the above problems, and an object of the present invention is to ensure that the process of identifying guests is carried out quickly with more advanced information stability, and through the output UI configured differently for each identified guest. It is to provide a kiosk system capable of customizing customer response.

상기 목적을 달성하기 위하여 본 발명에 따른 얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템은, 전면 상부에 특정 출력UI의 출력 및 터치를 통한 신호 입력이 가능한 터치 디스플레이가 구비되고, 전면 일측에 얼굴 촬영을 위한 카메라 모듈 및 생체정보의 감지를 위한 센서모듈이 구비된 키오스크(Kiosk) 내 구축되는 시스템에 있어서, 상기 카메라 모듈을 통해 촬영된 손님의 얼굴 촬영정보를 기 등록 저장된 손님들의 회원정보 내 얼굴 기준정보와의 비교 분석을 통해 대응되는 얼굴 기준정보가 포함된 회원정보를 선별하는 체크인 관리유닛; 및 상기 체크인 관리유닛을 통해 선별된 회원정보를 제공받아 제공된 회원정보를 따라 기 설정된 메뉴 주문용 출력UI(User Interface)의 상기 터치 디스플레이 상 출력형태를 달리 맞춤 조절하는 주문 관리유닛;을 포함한다. In order to achieve the above object, a kiosk system based on a customer response algorithm through face recognition check-in according to the present invention is provided with a touch display capable of outputting a specific output UI and inputting signals through touch on the upper front surface, In the system built in a kiosk equipped with a camera module for face photographing and a sensor module for detecting biometric information on one side, the customer's face photographing information photographed through the camera module is pre-registered and stored as a member of the customers a check-in management unit that selects member information including corresponding face reference information through comparative analysis with face reference information in the information; and an order management unit that receives member information selected through the check-in management unit and adjusts the output form of a preset menu order output UI (User Interface) on the touch display according to the provided member information.

여기서, 상기 체크인 관리유닛은, 회원의 성별정보, 나이정보, 방문횟수정보, 구매이력정보, 등급정보 및 얼굴 기준정보를 포함하는 회원정보가 회원별로 구분되어 내부에 마련된 별도의 데이터베이스 내에 기록 저장되는 회원정보 관리부; 기 설정된 체크인 시작용 출력UI가 출력 반영된 상기 터치 디스플레이 상에 터치 입력을 통해 체크인 시작신호가 생성될 경우 상기 카메라 모듈의 작동을 활성화시키며, 활성화된 상기 카메라 모듈을 통해 촬영된 손님의 얼굴에 관한 얼굴 촬영정보를 생성하는 얼굴 인식부; 및 상기 얼굴 인식부를 통해 생성된 얼굴 촬영정보를 제공받아 상기 회원정보 관리부에 기 저장된 회원 정보 중 제공된 얼굴 촬영정보와 대응되는 얼굴 기준정보가 포함된 회원정보를 상기 주문 관리유닛에 전송하는 제1체크인 관리부;를 포함한다.Here, in the check-in management unit, member information including member gender information, age information, number of visits information, purchase history information, rating information, and face standard information is classified by member and recorded and stored in a separate database provided inside. Member information management department; When a check-in start signal is generated through a touch input on the touch display to which the preset check-in start output UI is outputted, the operation of the camera module is activated, and the face of the guest photographed through the activated camera module. a face recognition unit generating photographing information; and first check-in for receiving face photographing information generated through the face recognition unit and transmitting member information including face reference information corresponding to the provided face photographing information among member information pre-stored in the member information management unit to the order management unit. Management department; includes.

또한, 상기 회원정보 관리부에 기 저장된 회원 정보는 회원의 휴대전화번호 정보 및 생체 기준정보를 포함하며, 상기 체크인 관리유닛은, 상기 제1체크인 관리부가 상기 얼굴 인식부를 통해 제공된 얼굴 촬영정보와 대응되는 얼굴 기준정보가 포함된 회원정보를 상기 회원정보 관리부에 기 저장된 회원 정보 중 선별하지 못할 경우 활성화되며, 상기 터치 디스플레이 상에 터치 입력을 통해 휴대전화번호 기반의 체크인 요청 신호 및 입력번호 정보가 생성될 경우 상기 회원정보 관리부에 기 저장된 회원 정보 중 생성된 입력번호 정보와 대응되는 휴대전화번호 정보가 포함된 회원정보를 상기 주문 관리유닛에 전송하고, 상기 터치 디스플레이 상에 터치 입력을 통해 생체정보 기반의 체크인 요청 신호가 생성되고 상기 센서모듈을 통해 생체정보가 감지될 경우 상기 회원정보 관리부에 기 저장된 회원 정보 중 감지된 생체정보와 대응되는 생체 기준정보가 포함된 회원정보를 상기 주문 관리유닛에 전송하는 제2체크인 관리부;를 더 포함한다.In addition, the member information pre-stored in the member information management unit includes cell phone number information and biometric reference information of the member, and the check-in management unit corresponds to face photographing information provided by the first check-in management unit through the face recognition unit. Activated when member information including facial reference information cannot be selected from member information pre-stored in the member information management unit, and through touch input on the touch display, a check-in request signal and input number information based on mobile phone number are generated. In this case, member information including mobile phone number information corresponding to the generated input number information among member information pre-stored in the member information management unit is transmitted to the order management unit, and biometric information-based information is transmitted through touch input on the touch display. When a check-in request signal is generated and biometric information is detected through the sensor module, member information including biometric reference information corresponding to detected biometric information among member information pre-stored in the member information management unit is transmitted to the order management unit. A second check-in management unit; is further included.

아울러, 상기 회원정보 관리부에 기 저장된 회원 정보는 회원 명의의 단말 기준정보를 포함하며, 상기 제2체크인 관리부는 상기 터치 디스플레이 상에 터치 입력을 통해 QR(Quick Response)코드 기반의 체크인 요청 신호가 생성될 경우, 기 설정된 QR코드 제공용 출력UI가 상기 터치 디스플레이 상에 출력 반영되도록 하며, 상기 제2체크인 관리부를 통해 상기 터치 디스플레이 상에 출력 반영된 QR코드 제공용 출력UI 내 QR코드를 촬영한 회원 단말은 단말 정보를 무선통신 네트워크를 통해 연결된 상기 제2체크인 관리부에 제공하고, 상기 제2체크인 관리부는 상기 회원정보 관리부에 기 저장된 회원 정보 중 제공된 단말 정보와 대응되는 단말 기준정보가 포함된 회원정보를 상기 주문 관리유닛에 전송한다.In addition, the member information pre-stored in the member information management unit includes terminal reference information in the member's name, and the second check-in management unit generates a QR (Quick Response) code-based check-in request signal through a touch input on the touch display If it is, the preset output UI for providing a QR code is output and reflected on the touch display, and the member terminal that has photographed the QR code in the output UI for providing a QR code output and reflected on the touch display through the second check-in management unit. provides terminal information to the second check-in management unit connected through a wireless communication network, and the second check-in management unit provides member information including terminal reference information corresponding to the provided terminal information among member information pre-stored in the member information management unit It is transmitted to the order management unit.

다음으로, 상기 주문 관리유닛은, 상기 체크인 관리유닛으로부터 수신되는 회원정보를 기반으로 회원정보에 포함된 회원의 나이정보에 따라 기 설정된 상기 메뉴 주문용 출력UI의 출력 음성, 음성 출력속도, 출력 글자크기, 미성년 판매금지 상품의 출력여부 중 적어도 하나 이상을 달리 조절하여 상기 터치 디스플레이 상 출력 반영되도록 하는 제1출력UI 관리부;를 포함한다.Next, the order management unit, based on the member information received from the check-in management unit, outputs voice, voice output speed, and output characters of the menu order output UI preset according to the age information of the member included in the member information. and a first output UI management unit configured to differently adjust at least one of size and output of prohibited products for minors so that output is reflected on the touch display.

여기서, 상기 제1출력UI 관리부는 상기 체크인 관리유닛으로부터 수신되는 회원정보에 포함된 회원의 나이정보가 10세 미만일 경우, 상기 메뉴 주문용 출력UI를 기반으로 음성 출력 가능한 모든 출력음성을 어린이의 목소리로 녹음되어 기 등록된 어린이용 출력음성 데이터를 이용하고, 어린이용 출력음성 데이터를 이용한 출력음성의 출력속도를 기본으로 기 설정된 기본출력속도 기준 20% 느린 속도로 출력시키며, 상기 메뉴 주문용 출력UI 내에 표시 가능한 상품 중 미성년 판매금지 상품은 숨기며, 상기 제1출력UI 관리부는 상기 체크인 관리유닛으로부터 수신되는 회원정보에 포함된 회원의 나이정보가 10세 이상 20세 미만일 경우, 상기 메뉴 주문용 출력UI 내에 표시 가능한 상품 중 미성년 판매금지 상품은 숨기며, 상기 제1출력UI 관리부는 상기 체크인 관리유닛으로부터 수신되는 회원정보에 포함된 회원의 나이정보가 60세 이상일 경우, 상기 메뉴 주문용 출력UI를 기반으로 음성 출력 가능한 모든 출력음성의 출력속도를 기본으로 기 설정된 기본출력속도 기준 20% 느린 속도로 출력시키며, 상기 메뉴 주문용 출력UI 내 표시 가능한 모든 글자의 크기를 기 설정된 기본글자크기 기준 20% 확대시킨다.Here, if the member's age information included in the member information received from the check-in management unit is less than 10 years old, the first output UI management unit converts all output voices that can be output based on the menu order output UI to a child's voice. Using the output voice data for children recorded and registered in advance, the output speed of the output voice using the output voice data for children is output at a slow speed of 20% based on the preset basic output speed, and the output UI for ordering the menu Among the products that can be displayed within the store, products that are prohibited from being sold to minors are hidden, and the first output UI management unit outputs the menu order output UI when the member's age information included in the member information received from the check-in management unit is between 10 and 20 years old. Among the products that can be displayed inside, products prohibited for sale by minors are hidden. The output speed of all output voices that can be output is output at a slow speed of 20% based on the preset basic output speed, and the size of all characters that can be displayed in the output UI for ordering the menu is enlarged by 20% based on the preset basic character size .

또한, 상기 회원정보 관리부에 기 저장된 회원 정보 내 포함된 등급정보는 회원 정보 내 포함된 회원의 방문횟수정보 및 구매이력정보를 기반으로 방문횟수 및 구매금액이 높아질수록 기 설정된 등급설정 기준정보에 따라 더 높은 등급으로 설정되며, 상기 주문 관리유닛은, 상기 체크인 관리유닛으로부터 수신되는 회원정보를 기반으로 회원정보에 포함된 회원의 등급정보에 따라 기 설정된 상기 메뉴 주문용 출력UI 내 표시되는 상품 할인 관련 정보를 기 설정된 등급별 할인 기준정보를 기반으로 달리 조절하여 상기 터치 디스플레이 상 출력 반영되도록 하는 제2출력UI 관리부;를 포함한다.In addition, the level information included in the member information pre-stored in the member information management unit is based on the number of visits and purchase history information of the member included in the member information, and as the number of visits and purchase amount increase, the level setting standard information is set to a higher grade, and the order management unit is related to product discounts displayed in the output UI for ordering the menu, which is preset according to the member's grade information included in the member information based on the member information received from the check-in management unit. and a second output UI management unit configured to differently adjust information based on preset discount reference information for each grade so that the output is reflected on the touch display.

또한, 상기 주문 관리유닛은 상기 체크인 관리유닛으로부터 수신되는 회원정보들 내 포함된 구매이력정보들 및 성별정보들을 기반으로 전체 회원 기준 상품별 구매횟수 및 각 성별 기준 상품별 구매횟수를 산출한 상품구매 통계정보를 생성 및 갱신하여 내부에 마련된 별도의 데이터베이스 내에 기록 저장하며, 상기 주문 관리유닛은, 상기 메뉴 주문용 출력UI 내 표시되는 상품의 정렬 기준이 개인구매순으로 기 설정되어 있을 경우 상기 체크인 관리유닛으로부터 수신되는 회원정보를 기반으로 회원정보에 포함된 회원의 구매이력정보에 따라 기 설정된 상기 메뉴 주문용 출력UI 내 표시되는 상품들이 회원의 구매횟수가 많은 순으로 정렬되도록 조절하여 상기 터치 디스플레이 상 출력 반영되도록 하고, 상기 메뉴 주문용 출력UI 내 표시되는 상품의 정렬 기준이 성별구매순으로 기 설정되어 있을 경우 상기 체크인 관리유닛으로부터 수신되는 회원정보 및 기 저장된 상품구매 통계정보를 기반으로 회원정보에 포함된 회원의 성별정보에 따라 기 설정된 상기 메뉴 주문용 출력UI 내 표시되는 상품들이 상품구매 통계정보 내 회원의 성별정보와 대응되는 성별 기준 상품별 구매횟수가 많은 순으로 정렬되도록 조절하여 상기 터치 디스플레이 상 출력 반영되도록 하는 제3출력UI 관리부;를 포함한다.In addition, the order management unit calculates the number of purchases per product based on all members and the number of purchases per product based on each gender based on the purchase history information and gender information included in the member information received from the check-in management unit. is generated and updated and recorded and stored in a separate database provided inside, and the order management unit, when the sorting standard of products displayed in the menu order output UI is preset in the order of individual purchase, from the check-in management unit Based on the received member information, the products displayed in the output UI for ordering the menu, which are preset according to the purchase history information of the member included in the member information, are adjusted so that they are sorted in the order of the number of purchases by the member, and the output is reflected on the touch display. and, when the sorting criteria of the products displayed in the output UI for ordering the menu is preset in the order of purchase by gender, based on the member information received from the check-in management unit and the pre-stored product purchase statistical information included in the member information According to the member's gender information, the products displayed in the menu order output UI set in advance are adjusted to be sorted in the order of the number of purchases per product based on gender that corresponds to the member's gender information in the product purchase statistical information, and the output is reflected on the touch display. and a third output UI management unit to be configured.

아울러, 상기 제3출력UI 관리부는 기 저장된 상품구매 통계정보를 기반으로 상기 메뉴 주문용 출력UI 내 표시되는 상품들 중 상품구매 통계정보 내 전체 회원 기준 상품별 구매횟수가 기 설정된 추천상품표시 기준상의 구매기준횟수 보다 많거나 추천상품표시 기준 상의 순위기준수치 내에 포함되는 상품 일측에 추천상품표시를 위해 기 설정 등록된 소정의 추천표시 이미지를 추가 표시하여 상기 터치 디스플레이 상 출력 반영되도록 한다.In addition, the third output UI management unit, based on pre-stored product purchase statistical information, among the products displayed in the menu order output UI, the number of purchases per product based on all members in the product purchase statistical information is the number of purchases based on the preset recommendation product display standard. To display recommended products on one side of a product that is greater than the reference number of times or included within the ranking criterion on the recommended product display criteria, a predetermined recommended display image registered in advance is additionally displayed so that the output is reflected on the touch display.

또한, 상기 주문 관리유닛은 주문 시간대 별로 표시되는 상품이 상이하도록 개별 설정된 복수의 메뉴 주문용 출력UI 정보가 구분되어 내부에 마련된 별도의 데이터베이스 내에 기록 저장되며, 상기 주문 관리유닛은, 상기 체크인 관리유닛으로부터 회원정보가 수신되는 시간에 따라 기 설정 저장된 상기 메뉴 주문용 출력UI정보 중 대응되는 주문 시간대의 메뉴 주문용 출력UI 정보를 기반으로 메뉴 주문용 출력UI가 상기 터치 디스플레이 상 출력 반영되도록 하는 제4출력UI 관리부;를 포함한다.In addition, in the order management unit, output UI information for ordering a plurality of menus, which are individually set so that products displayed for each order time slot are distinguished, are recorded and stored in a separate database provided therein, and the order management unit, the check-in management unit Fourth, according to the time at which member information is received from the touch display, the output UI for menu ordering is output and reflected on the touch display based on the output UI information for menu ordering of the corresponding order time zone among the output UI information for menu ordering stored in advance. Output UI management unit; includes.

본 발명에 의하면 다음과 같은 효과가 있다.According to the present invention, there are the following effects.

첫째, 얼굴인식을 통해 더욱 안전하고 신속한 손님의 식별 및 체크인이 이루어질 수 있으며, 한편으로 상황에 따라 손님이 얼굴인식 외 다양한 방식 중 하나를 선택하여 식별 및 체크인할 수 있는 범용성 또한 갖추고 있다.First, through face recognition, identification and check-in of guests can be made safer and faster, and on the other hand, it is also equipped with versatility that allows guests to select one of various methods other than face recognition to identify and check-in depending on the situation.

둘째, 식별 및 체크인된 손님 각각의 성별, 나이, 등급, 방문횟수, 구매이력, 주문시간 등을 고려하여 각각의 상황에 맞춰 손님이 사용 및 주문 선택에 편의를 느낄 수 있는 구성의 메뉴 주문용 출력UI가 제공될 수 있다.Second, considering the gender, age, grade, number of visits, purchase history, ordering time, etc. of each identified and checked-in guest, printout for ordering menus configured so that guests can feel the convenience of using and ordering according to each situation A UI may be provided.

셋째, 앞 서 설명한 효과를 제공하기 위해 시스템 내 구비된 손님 맞춤 응대용 알고리즘을 손님 응대용 서비스 로봇에도 확장 적용하여 더욱 높은 수준의 손님 응대 서비스가 이루어질 수 있도록 하는 기술 확정성을 충분히 갖추고 있다.Third, in order to provide the above-mentioned effects, the algorithm for customer service provided in the system is expanded and applied to the service robot for customer service, so that a higher level of customer service can be achieved.

도1은 본 발명에 따른 얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템을 도시한 구성도이다.
도2는 본 발명에 따른 얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템의 구성을 도시한 블록도이다.1 is a configuration diagram showing a kiosk system based on a customized customer response algorithm through face recognition check-in according to the present invention.
Figure 2 is a block diagram showing the configuration of a kiosk system based on a customer response algorithm through face recognition check-in according to the present invention.

본 발명의 바람직한 실시예에 대하여 첨부된 도면을 참조하여 더 구체적으로 설명하되, 이미 주지된 기술적 부분에 대해서는 설명의 간결함을 위해 생략하거나 압축하기로 한다.A preferred embodiment of the present invention will be described in more detail with reference to the accompanying drawings, but already well-known technical parts will be omitted or compressed for conciseness of description.

<얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템에 관한 설명><Description of kiosk system based on customer response algorithm through facial recognition check-in>

먼저, 본 발명의 얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템(100)에 대해 이하에서 도1의 구성도 및 도2의 블록도를 참조하여 상세하게 설명한다.First, the kiosk system 100 based on the customer response algorithm through face recognition check-in of the present invention will be described in detail with reference to the configuration diagram of FIG. 1 and the block diagram of FIG. 2 below.

우선, 본 발명의 얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템(100)은 도1에 도시된 바와 같이 전면 상부에 특정 출력UI(U)의 출력 및 터치를 통한 신호 입력이 가능한 터치 디스플레이(D)가 구비되고, 전면 일측에 얼굴 촬영을 위한 카메라 모듈(C) 및 생체정보의 감지를 위한 센서모듈(S)이 구비된 키오스크(Kiosk, K) 내 구축되는 시스템으로서, 얼굴 인식 체크인을 통한 손님 맞춤 응대가 가능한 알고리즘을 이루기 위해 체크인 관리유닛(110); 및 주문 관리유닛(120);을 포함한다.First of all, the kiosk system 100 based on the customer response algorithm through face recognition check-in of the present invention, as shown in FIG. A system built in a kiosk (Kiosk, K) equipped with a touch display (D) and equipped with a camera module (C) for photographing a face on one side of the front side and a sensor module (S) for detecting biometric information, face recognition Check-in management unit 110 to achieve an algorithm capable of customizing customer response through check-in; and an order management unit 120.

여기서, 생체정보의 감지를 위한 센서모듈(S)은 생체 인증에 사용 가능한 홍채를 인식하는 홍채감지센서 혹은 지문을 인식하는 지문감지센서 등으로 실시 가능하다.Here, the sensor module S for detecting biometric information can be implemented as an iris sensor for recognizing an iris usable for biometric authentication or a fingerprint sensor for recognizing a fingerprint.

체크인 관리유닛(110)은 카메라 모듈(C)을 통해 촬영된 손님의 얼굴 촬영정보를 기 등록 저장된 손님들의 회원정보 내 얼굴 기준정보와의 비교 분석을 통해 대응되는 얼굴 기준정보가 포함된 회원정보를 선별하여 키오스크(Kiosk, K)의 설치가 이루어진 설치장소로의 체크인이 이루어질 수 있도록 한다.The check-in management unit 110 compares and analyzes the customer's facial photographing information photographed through the camera module (C) with the facial reference information in the member information of the previously registered and stored guests to obtain member information including the corresponding facial reference information. It is selected so that check-in can be made to the installation site where the Kiosk (K) is installed.

이를 위해, 체크인 관리유닛(110)은 도2에 도시된 바와 같이 회원정보 관리부(111), 얼굴 인식부(112), 제1체크인 관리부(113) 및 제2체크인 관리부(114)를 포함한다.To this end, the check-in management unit 110 includes a member information management unit 111, a face recognition unit 112, a first check-in management unit 113, and a second check-in management unit 114, as shown in FIG.

우선, 회원정보 관리부(111)는 회원의 성별정보, 나이정보, 방문횟수정보, 구매이력정보, 등급정보 및 얼굴 기준정보를 포함하는 회원정보가 회원별로 구분되어 내부에 마련된 별도의 데이터베이스 내에 기록 저장되도록 한다.First of all, the member information management unit 111 records and stores member information including gender information, age information, number of visits information, purchase history information, rating information, and face standard information of the member by member and stored in a separate database provided inside. Let it be.

이러한 회원정보 관리부(111)는 관리자 단말 혹은 회원 단말로부터 무선통신 네트워크를 통해 생성된 회원정보를 제공받아 분류 저장하거나, 키오스크(K) 자체에서 최초 방문인 손님이 직접 터치 입력을 통해 회원정보를 생성하여 저장 관리되도록 실시될 수도 있다.The member information management unit 111 receives member information generated through a wireless communication network from an administrator's terminal or member terminal, classifies and stores it, or generates member information through direct touch input by a first-time visitor at the kiosk (K) itself. It may also be implemented to be stored and managed.

여기서, 회원정보는 실시에 따라 회원의 휴대전화번호 정보, 생체 기준정보(지문, 홍채 등) 및 회원 명의의 단말 정보(단말 휴대전화번호, 단말 고유식별번호, 단말 명의자 인적사항 등)를 더 포함할 수 있다.Here, the member information further includes the member's mobile phone number information, biometric reference information (fingerprint, iris, etc.) and terminal information (terminal mobile phone number, unique terminal identification number, personal information of the terminal owner, etc.) under the member's name according to implementation. can do.

또한, 회원 정보 내 포함된 등급정보는 회원 정보 내 포함된 회원의 방문횟수정보 및 구매이력정보를 기반으로 방문횟수 및 구매금액이 높아질수록 기 설정된 등급설정 기준정보에 따라 더 높은 등급으로 설정된다.In addition, the level information included in the member information is set to a higher level based on the number of visits and purchase history information of the member included in the member information, and the higher the number of visits and purchase amount, the higher the grade setting standard information.

구체적으로, 기 설정되는 등급설정 기준정보는 등급이 몇 단계로 이루어지는가에 대한 정보와, 각 등급별로 충족되어야 하는 방문횟수와 구매금액의 정도가 어느 정도 인지에 대한 정보를 반영하고 있다. Specifically, the standard information for setting a level reflects information on how many levels the level is composed of, and information on the number of visits and the amount of purchases to be satisfied for each level.

따라서 회원의 방문횟수정보 및 구매이력정보가 체크인에 따라 갱신되면 자동적으로 이에 연계되어 등급정보 역시 대응되어 갱신이 이루어진다. Therefore, if the member's visit frequency information and purchase history information are updated according to check-in, the level information is automatically updated in correspondence with it.

다음으로, 얼굴 인식부(112)는 기 설정된 체크인 시작용 출력UI가 출력 반영된 터치 디스플레이(D) 상에 터치 입력을 통해 체크인 시작신호가 생성될 경우, 카메라 모듈(C)의 작동을 활성화시키며, 활성화된 카메라 모듈(C)을 통해 촬영된 손님의 얼굴에 관한 얼굴 촬영정보를 생성한다.Next, the face recognition unit 112 activates the operation of the camera module (C) when a check-in start signal is generated through a touch input on the touch display (D) to which the preset output UI for starting check-in is reflected. Face photographing information about the customer's face photographed through the activated camera module (C) is generated.

평소 기본적으로 키오스크(K)의 터치 디스플레이(D) 상에는 체크인 시작용 출력UI가 출력되어 있고, 이러한 체크인 시작용 출력UI에 표시된 체크인 시작버튼 이미지를 손님이 터치 입력하게 되면 체크인 시작신호가 생성되어 얼굴 인식부(112)에 전송되고, 이를 전송받은 얼굴 인식부(112)는 기본적으로 비활성화 상태였던 카메라 모듈(C)의 작동을 활성화시켜 방문한 손님의 얼굴이 촬영되어 얼굴 촬영정보를 생성이 이루어질 수 있도록 한다.Normally, an output UI for starting check-in is output on the touch display (D) of the kiosk (K), and when a guest touches and inputs the image of the check-in start button displayed on the output UI for starting check-in, a check-in start signal is generated, The face recognition unit 112, which is transmitted to the recognition unit 112, activates the operation of the camera module C, which was basically in an inactive state, so that the face of the visiting guest can be photographed and face photographing information can be generated. do.

다음으로, 제1체크인 관리부(113)는 얼굴 인식부(112)를 통해 생성된 얼굴 촬영정보를 제공받아 회원정보 관리부(111)에 기 저장된 회원 정보 중 제공된 얼굴 촬영정보와 대응되는 얼굴 기준정보가 포함된 회원정보를 선별하는 분석작업을 수행한 뒤, 이를 통해 선별된 회원정보를 주문 관리유닛(120)에 전송하게 된다.Next, the first check-in management unit 113 receives the face photographing information generated through the face recognition unit 112, and among the member information pre-stored in the member information management unit 111, the face standard information corresponding to the provided face photographing information is provided. After performing an analysis operation to select included member information, the member information selected through this is transmitted to the order management unit 120 .

마지막으로, 제2체크인 관리부(114)는 제1체크인 관리부(113)가 얼굴 인식부(112)를 통해 제공된 얼굴 촬영정보와 대응되는 얼굴 기준정보가 포함된 회원정보를 회원정보 관리부(111)에 기 저장된 회원 정보 중 선별하지 못할 경우 활성화되어 다른 체크인 방식의 진행이 이루어질 수 있도록 한다.Finally, the second check-in management unit 114 transmits member information including reference face information corresponding to the face photographing information provided by the first check-in management unit 113 through the face recognition unit 112 to the member information management unit 111. If it is not possible to select among the pre-stored member information, it is activated so that other check-in methods can be performed.

이에 따라, 제2체크인 관리부(114)가 활성화되면 기 설정된 체크인 방식 선택용 출력UI가 터치 디스플레이(D) 상에 출력 반영되는데, 체크인 방식 선택용 출력UI상에는 휴대전화번호 체크인 시작버튼 이미지, QR 체크인 시작버튼 이미지, 생체정보 체크인 시작버튼 이미지 및 회원등록 버튼 이미지가 표시된다.Accordingly, when the second check-in management unit 114 is activated, the output UI for selecting the preset check-in method is output and reflected on the touch display D. On the output UI for selecting the check-in method, the mobile phone number check-in start button image, QR check-in A start button image, a biometric information check-in start button image, and a member registration button image are displayed.

여기서, 터치 디스플레이(D) 상에 출력 반영된 체크인 방식 선택용 출력UI 내 휴대전화번호 체크인 시작버튼 이미지를 손님이 터치 입력하게 되면, 휴대전화번호 기반의 체크인 요청 신호 및 입력번호 정보가 생성되어 제2체크인 관리부(114)가 회원정보 관리부(111)에 기 저장된 회원 정보 중 생성된 입력번호 정보와 대응되는 휴대전화번호 정보가 포함된 회원정보를 선별하여 주문 관리유닛(120)에 전송한다.Here, when a guest touches and inputs the mobile phone number check-in start button image in the output UI for selecting a check-in method reflected on the touch display (D), a check-in request signal and input number information based on the mobile phone number are generated and the second The check-in management unit 114 selects member information including mobile phone number information corresponding to the generated input number information among member information previously stored in the member information management unit 111 and transmits it to the order management unit 120 .

또 다르게, 터치 디스플레이(D) 상에 출력 반영된 체크인 방식 선택용 출력UI 내 생체정보 체크인 시작버튼 이미지를 손님이 터치 입력하게 되면, 생체정보 기반의 체크인 요청 신호가 생성되고 센서모듈(S)을 통해 생체정보가 감지되어 제2체크인 관리부(114)가 회원정보 관리부(111)에 기 저장된 회원 정보 중 감지된 생체정보와 대응되는 생체 기준정보가 포함된 회원정보를 주문 관리유닛(120)에 전송한다.Alternatively, when a guest touches and inputs the biometric information check-in start button image in the output UI for selecting the check-in method reflected on the touch display (D), a check-in request signal based on biometric information is generated and transmitted through the sensor module (S). When the biometric information is detected, the second check-in management unit 114 transmits member information including reference biometric information corresponding to the detected biometric information among member information pre-stored in the member information management unit 111 to the order management unit 120. .

여기서, 제2체크인 관리부(114)는 생체정보 기반의 체크인 요청 신호가 생성될 경우 센서모듈(S)을 활성화시키고, 이와 같이 활성화된 센서모듈(S)에 눈을 가져다 대거나 손을 가져다대어 홍채 혹은 지문의 인식이 이루어질 수 있도록 하여 감지 결과를 반영하여 생성되는 생체정보를 제공받는다. Here, the second check-in management unit 114 activates the sensor module (S) when a check-in request signal based on biometric information is generated, and places an eye or a hand on the sensor module (S) activated in this way to use the iris or By allowing fingerprint recognition to be performed, biometric information generated by reflecting the detection result is provided.

또 다르게, 터치 디스플레이(D) 상에 출력 반영된 체크인 방식 선택용 출력UI 내 QR 체크인 시작버튼 이미지를 손님이 터치 입력하게 되면, QR(Quick Response)코드 기반의 체크인 요청 신호가 생성되어 제2체크인 관리부(114)가 기 설정된 QR코드 제공용 출력UI가 터치 디스플레이(D) 상에 출력 반영되게 한다.Alternatively, when a guest touches and inputs the QR check-in start button image in the output UI for selecting a check-in method reflected on the touch display (D), a QR (Quick Response) code-based check-in request signal is generated and the second check-in management unit (114) causes the output UI for providing a preset QR code to be output and reflected on the touch display (D).

이와 같이, 제2체크인 관리부(114)를 통해 터치 디스플레이(D) 상에 출력 반영된 QR코드 제공용 출력UI 내에 표시되는 QR코드를 촬영한 회원 단말은 단말 정보를 무선통신 네트워크를 통해 연결된 체크인 관리유닛(110) 내 제2체크인 관리부에 제공하게 된다.In this way, the member terminal that has photographed the QR code displayed in the output UI for providing the QR code output and reflected on the touch display D through the second check-in management unit 114 transmits the terminal information to the check-in management unit connected through the wireless communication network. (110) It is provided to the second check-in management department.

여기서, 단말 정보는 앞 서 설명한 휴대전화번호 정보와 동일할 수 있으나, 이에 한정되지 않고 단말 자체의 고유식별번호 정보 혹은 단말 소유자의 인적사항이 반영된 정보 등으로 다양하게 변형 실시 가능하다. Here, the terminal information may be the same as the mobile phone number information described above, but is not limited thereto, and may be modified in various ways such as unique identification number information of the terminal itself or information reflecting personal information of the terminal owner.

이에 따라, 제2체크인 관리부(114)는 회원정보 관리부(111)에 기 저장된 회원 정보 중 제공된 단말 정보와 대응되는 단말 기준정보가 포함된 회원정보를 주문 관리유닛(120)에 전송한다.Accordingly, the second check-in management unit 114 transmits member information including terminal reference information corresponding to the provided terminal information among member information pre-stored in the member information management unit 111 to the order management unit 120 .

그리고 만약 터치 디스플레이(D) 상에 출력 반영된 체크인 방식 선택용 출력UI 내 회원등록 버튼 이미지를 손님이 터치 입력하게 되면, 회원정보 입력을 위해 기 설정된 회원정보 입력용 출력UI가 터치 디스플레이(D) 상에 출력 반영되도록 화면 전환이 이루어지고, 이러한 회원정보 입력용 출력UI에 터치 입력을 통해 정보를 반영하고 이에 더해져 카메라 모듈(C) 및 센서모듈(S)을 활성화시켜 이를 이용해 얼굴 기준정보 및 생체 기준정보의 생성 및 회원정보로의 포함이 이루어질 수 있도록 한다.And, if the guest touches and inputs the member registration button image in the output UI for selecting the check-in method reflected on the touch display (D), the output UI for inputting member information preset for member information input is displayed on the touch display (D). The screen is converted to be reflected in the output, and the information is reflected through touch input on the output UI for inputting member information, and the camera module (C) and sensor module (S) are activated and used to apply face reference information and biometric standards. Create information and include it as member information.

그리고 체크인 관리유닛(110)은 구성 및 표시 형태가 기 설정된 체크인 시작용 출력UI정보, 회원정보 입력용 출력UI정보, 체크인 방식 선택용 출력UI정보 및 QR코드 제공용 출력UI정보 등을 관리자 단말로부터 제공받아 소정의 데이터베이스 내에 저장 관리하며, 이와 같이 저장 관리되는 출력UI정보들을 이용해 특정 출력UI가 터치 디스플레이(D) 상에 출력 반영될 수 있도록 한다.In addition, the check-in management unit 110 transmits output UI information for starting check-in with a preset configuration and display format, output UI information for inputting member information, output UI information for selecting a check-in method, and output UI information for providing a QR code from an administrator terminal. It is received and stored and managed in a predetermined database, and a specific output UI can be output and reflected on the touch display (D) by using the output UI information stored and managed in this way.

주문 관리유닛(120)은 체크인 관리유닛(110)을 통해 선별된 회원정보를 제공받아 제공된 회원정보를 따라 기 설정된 메뉴 주문용 출력UI(User Interface, U)의 터치 디스플레이(D) 상 출력형태를 달리 맞춤 조절하고, 이를 이용해 터치 입력하여 손님이 주문을 진행하면 주문 접수 및 회원 정보의 갱신이 이루어질 수 있도록 한다.The order management unit 120 receives the member information selected through the check-in management unit 110 and displays the output form of the preset menu order output UI (User Interface, U) on the touch display D according to the provided member information. When a customer proceeds to order by touch input using this, the order reception and member information can be updated.

이를 위해, 주문 관리유닛(120)은 도2에 도시된 바와 같이 제1출력UI 관리부(121), 제2출력UI 관리부(122), 제3출력UI 관리부(123), 제4출력UI 관리부(124), 주문 관리부(125) 및 회원정보 갱신부(126)을 포함한다.To this end, as shown in FIG. 2, the order management unit 120 includes a first output UI management unit 121, a second output UI management unit 122, a third output UI management unit 123, and a fourth output UI management unit ( 124), an order management unit 125 and a member information updating unit 126.

우선, 제1출력UI 관리부(121)는 상호 통신 네트워크를 구축하고 있는 체크인 관리유닛(110)으로부터 수신되는 회원정보를 기반으로 회원정보에 포함된 회원의 나이정보에 따라 기 설정된 메뉴 주문용 출력UI의 출력 음성, 음성 출력속도, 출력 글자크기, 미성년 판매금지 상품의 출력여부 중 적어도 하나 이상을 달리 조절하여 터치 디스플레이(D) 상 출력 반영되도록 한다.First of all, the first output UI management unit 121 outputs UI for ordering menus preset according to the age information of the member included in the member information based on the member information received from the check-in management unit 110 constructing the mutual communication network. At least one of output voice, voice output speed, output font size, and output of products prohibited for sale to minors is adjusted differently so that the output is reflected on the touch display D.

구체적으로, 제1출력UI 관리부(121)는 체크인 관리유닛(110)으로부터 수신되는 회원정보에 포함된 회원의 나이정보가 10세 미만일 경우, 메뉴 주문용 출력UI를 기반으로 음성 출력 가능한 모든 출력음성을 어린이의 목소리로 녹음되어 기 등록된 어린이용 출력음성 데이터를 이용하게 된다.Specifically, when the member's age information included in the member information received from the check-in management unit 110 is less than 10 years of age, the first output UI management unit 121 outputs all possible output voices based on the menu order output UI. is recorded as a child's voice and pre-registered output voice data for children is used.

이를 위해, 제1출력UI 관리부(121) 내에는 메뉴 주문용 출력UI를 기반으로 음성 출력 가능한 모든 출력음성을 어린이의 목소리로 녹음하여 생성된 어린이용 출력음성 데이터를 비롯해 각종 연령대 별로 구분하여 메뉴 주문용 출력UI를 기반으로 음성 출력 가능한 모든 출력음성을 녹음한 각각의 연령대별 출력음성 데이터가 내부에 마련된 별도의 데이터베이스 내에 기록 저장되도록 한다.To this end, in the first output UI management unit 121, children's output voice data generated by recording all output voices capable of voice output based on the output UI for menu ordering as children's voices, as well as menu ordering by classifying them according to various age groups Output voice data for each age group, in which all output voices capable of voice output are recorded based on the output UI for voice output, are recorded and stored in a separate internal database.

또한, 제1출력UI 관리부(121)는 체크인 관리유닛(110)으로부터 수신되는 회원정보에 포함된 회원의 나이정보가 10세 미만일 경우, 어린이용 출력음성 데이터를 이용한 출력음성의 출력속도를 기본으로 기 설정된 기본출력속도 기준 20% 느린 속도로 출력시키며, 메뉴 주문용 출력UI 내에 표시 가능한 상품 중 미성년 판매금지 상품은 숨긴 상태가 되도록 한다.In addition, when the member's age information included in the member information received from the check-in management unit 110 is less than 10 years old, the first output UI management unit 121 bases the output speed of the output voice using the output voice data for children. It is output at 20% slower than the preset basic output speed, and among the products that can be displayed in the output UI for menu ordering, products prohibited from selling to minors are hidden.

또 다른 예로, 제1출력UI 관리부(121)는 체크인 관리유닛(120)으로부터 수신되는 회원정보에 포함된 회원의 나이정보가 10세 이상 20세 미만일 경우, 메뉴 주문용 출력UI 내에 표시 가능한 상품 중 미성년 판매금지 상품은 숨긴 상태가 되도록 한다.As another example, if the member's age information included in the member information received from the check-in management unit 120 is between the ages of 10 and 20, the first output UI management unit 121 selects among products that can be displayed in the menu order output UI. Products that are prohibited from being sold to minors must be hidden.

또한, 제1출력UI 관리부(121)는 체크인 관리유닛(120)으로부터 수신되는 회원정보에 포함된 회원의 나이정보가 60세 이상일 경우, 메뉴 주문용 출력UI를 기반으로 음성 출력 가능한 모든 출력음성의 출력속도를 기본으로 기 설정된 기본출력속도 기준 20% 느린 속도로 출력시키며, 메뉴 주문용 출력UI 내 표시 가능한 모든 글자의 크기를 기 설정된 기본글자크기 기준 20% 확대시킨 상태가 되도록 한다.In addition, when the member's age information included in the member information received from the check-in management unit 120 is over 60 years of age, the first output UI management unit 121 outputs all possible output voices based on the menu order output UI. Based on the output speed, it is output at a slow speed of 20% based on the preset basic output speed, and the size of all displayable characters in the output UI for menu order is enlarged by 20% based on the preset default font size.

다음으로, 제2출력UI 관리부(122)는 체크인 관리유닛(110)으로부터 수신되는 회원정보를 기반으로 회원정보에 포함된 회원의 등급정보에 따라 기 설정된 메뉴 주문용 출력UI 내 표시되는 상품 할인 관련 정보를 기 설정된 등급별 할인 기준정보를 기반으로 달리 조절하여 터치 디스플레이(D) 상 출력 반영되도록 한다.Next, based on the member information received from the check-in management unit 110, the second output UI management unit 122 is related to product discounts displayed in the preset menu order output UI according to the member's level information included in the member information. The information is differently adjusted based on the preset discount standard information for each grade so that the output is reflected on the touch display D.

여기서, 기 설정된 메뉴 주문용 출력UI 내 표시 가능한 상품 할인 관련 정보라 함은 상품별 할인된 금액, 사용 가능한 할인 쿠폰 및 참여 가능한 할인 이벤트 중 적어도 하나 이상에 관해 회원의 등급정보에 따라 금액의 할인비율, 사용 가능한 할인 쿠폰 또는 참여 가능한 할인 이벤트의 종류는 달리 적용되는 기준에 관한 정보에 해당한다.Here, the product discount-related information that can be displayed in the output UI for ordering menus is the discount rate of the amount according to the member's level information for at least one of the discounted amount for each product, available discount coupons, and participating discount events, The types of discount coupons that can be used or discount events that can be participated in correspond to information about standards that are otherwise applied.

예를 들어, 회원등급이 높아질수록 상품별 할인 금액은 낮아지고, 사용 가능한 할인 쿠폰 또는 참여 가능한 할인 이벤트의 종류는 다양해지고, 이러한 사항은 제2출력UI 관리부(122)를 통해 메뉴 주문용 출력UI 내에 달리 구분되어 표시가 이루어지게 된다.For example, as the membership level increases, the discount amount for each product decreases, and the types of discount coupons that can be used or discount events that can be participated in become diverse. They are differentiated and displayed differently.

그리고 주문 관리유닛(120)은 체크인 관리유닛(110)으로부터 수신되는 회원정보들 내 포함된 구매이력정보들 및 성별정보들을 기반으로 전체 회원 기준 상품별 구매횟수 및 각 성별 기준 상품별 구매횟수를 산출한 상품구매 통계정보를 생성 및 갱신하여 내부에 마련된 별도의 데이터베이스 내에 기록 저장한다.In addition, the order management unit 120 calculates the number of purchases per product based on all members and the number of purchases per product based on each gender based on the purchase history information and gender information included in the member information received from the check-in management unit 110. Purchase statistics are created and updated, and recorded and stored in a separate internal database.

이와 관련하여, 제3출력UI 관리부(123)는 메뉴 주문용 출력UI 내 표시되는 상품의 정렬 기준의 기 설정 내용에 따라 기 설정된 메뉴 주문용 출력UI 내 표시되는 상품들의 정렬 방식을 다르게 조절하여 터치 디스플레이(D) 상 출력 반영되도록 한다.In this regard, the third output UI management unit 123 adjusts the sorting method of the products displayed in the preset menu order output UI differently according to the preset content of the sorting criterion of the products displayed in the menu order output UI, and touches The output is reflected on the display (D).

이를 위해, 제3출력UI 관리부(123)는 도2에 도시된 바와 같이 제1메뉴정렬 관리부분(123a), 제2메뉴정렬 관리부분(123b), 메뉴정보표시 관리부분(123c)을 포함한다.To this end, the third output UI management unit 123 includes a first menu alignment management unit 123a, a second menu alignment management unit 123b, and a menu information display management unit 123c, as shown in FIG. .

구체적으로, 메뉴 주문용 출력UI 내 표시되는 상품의 정렬 기준이 관리자에 의해 개인구매순으로 기 설정되어 있을 경우, 제3출력UI 관리부(123)의 제1메뉴정렬 관리부분(123a)은 체크인 관리유닛(110)으로부터 수신되는 회원정보를 기반으로 회원정보에 포함된 회원의 구매이력정보에 따라 기 설정된 상기 메뉴 주문용 출력UI 내 표시되는 상품들이 회원의 구매횟수가 많은 순으로 정렬되도록 조절하여 터치 디스플레이(D) 상 출력 반영되도록 한다.Specifically, when the sorting criteria of products displayed in the output UI for menu ordering are preset by the manager in the order of personal purchase, the first menu sorting management unit 123a of the third output UI management unit 123 manages check-in. Based on the member information received from the unit 110, according to the member's purchase history information included in the member information, the products displayed in the menu order output UI are adjusted to be sorted in the order of the number of purchases by the member. The output is reflected on the display (D).

이를 통해, 손님은 본인이 이때까지 가장 많이 구매하여 선호하고 있는 상품이 어떤 것인지 직관적으로 파악할 수 있게 되어 메뉴 주문의 결정에 도움을 받을 수 있다.Through this, the customer can intuitively figure out which product he or she has purchased and prefers the most so far, and can receive help in determining the menu order.

또 다르게, 메뉴 주문용 출력UI 내 표시되는 상품의 정렬 기준이 관리자에 의해 성별구매순으로 기 설정되어 있을 경우, 제3출력UI 관리부(123)의 제2메뉴정렬 관리부분(123b)은 체크인 관리유닛(110)으로부터 수신되는 회원정보를 기반으로 회원정보에 포함된 회원의 성별정보에 따라 기 설정된 상기 메뉴 주문용 출력UI 내 표시되는 상품들이 상품구매 통계정보 내 회원의 성별정보와 대응되는 성별 기준 상품별 구매횟수가 많은 순으로 정렬되도록 조절하여 터치 디스플레이(D) 상 출력 반영되도록 한다.Alternatively, when the sorting criteria of products displayed in the output UI for menu ordering are preset by the manager in the order of purchase by gender, the second menu sorting management unit 123b of the third output UI management unit 123 manages check-in. Based on the member information received from the unit 110, based on the gender information of the member included in the member information, the products displayed in the output UI for ordering the menu, which are preset according to the gender information of the member in the product purchase statistics information, correspond to the gender standard The number of purchases per product is adjusted to be sorted in ascending order so that the output is reflected on the touch display (D).

이를 통해, 손님은 본인과 같은 성별의 회원들이 가장 많이 구매하여 선호하고 있는 상품이 어떤 것인지 직관적으로 파악할 수 있게 되어 메뉴 주문의 결정에 도움을 받을 수 있다.Through this, the customer can intuitively figure out which product most purchased and preferred by members of the same gender as the customer is, and thus can receive help in determining a menu order.

또한, 실시에 따라 제3출력UI 관리부(123)의 메뉴정보표시 관리부분(123c)은 기 저장된 상품구매 통계정보를 기반으로 메뉴 주문용 출력UI 내 표시되는 상품들 중 상품구매 통계정보 내 전체 회원 기준 상품별 구매횟수가 기 설정된 추천상품표시 기준상의 구매기준횟수 보다 많거나 추천상품표시 기준 상의 순위기준수치 내에 포함되는 상품 일측에 추천상품표시를 위해 기 설정 등록된 소정의 추천표시 이미지를 추가 표시하여 터치 디스플레이(D) 상 출력 반영되도록 할 수 있다.In addition, according to implementation, the menu information display management part 123c of the third output UI management unit 123 is based on pre-stored product purchase statistics information among all members in the product purchase statistics information among the products displayed in the output UI for menu ordering. The number of purchases per standard product is greater than the number of purchases based on the preset recommendation product display standard or a predetermined recommended display image is additionally displayed to display recommended products on one side of the product that is included in the ranking standard number on the recommended product display standard. The output may be reflected on the touch display D.

예를 들어, 추천상품표시 기준이 전체 회원 기준 구매횟수가 5위 내에 들어오는 상품 혹은 전체 회원 기준 구매횟수가 1000회 이상인 상품으로 설정되어 있을 경우 제3출력UI 관리부(123)는 기 저장된 상품구매 통계정보를 기반으로 메뉴 주문용 출력UI 내 표시되는 상품들 중 상품구매 통계정보 내 전체 회원 기준 상품별 구매횟수를 분석하여 전체 회원 기준 구매횟수가 5위 내에 들어오거나 전체 회원 기준 구매횟수가 1000회 이상인 상품의 표시위치 옆에 'BEST','인기' 혹은 '추천'등과 같이 도시화된 소정의 추천표시 이미지를 추가 표시하여 터치 디스플레이(D) 상 출력 반영되도록 한다.For example, when the recommended product display standard is set to a product whose number of purchases is in the top 5 based on all members or a product whose number of purchases is 1000 or more based on all members, the third output UI management unit 123 displays pre-stored product purchase statistics. Based on the information, among the products displayed in the output UI for menu ordering, the number of purchases by product based on all members in the product purchase statistics information is analyzed, and the number of purchases based on all members is in the top 5 or the number of purchases based on all members is 1000 or more. A predetermined recommended display image such as 'BEST', 'Popular', or 'Recommended' is additionally displayed next to the display position of the display so that the output is reflected on the touch display D.

그리고 주문 관리유닛(120)은 주문 시간대 별로 표시되는 상품이 상이하도록 개별 설정된 복수의 메뉴 주문용 출력UI 정보가 구분되어 내부에 마련된 별도의 데이터베이스 내에 기록 저장된다.In addition, in the order management unit 120 , output UI information for ordering a plurality of menus, which are individually set so that products displayed for each order time period are distinguished, are recorded and stored in a separate database provided therein.

예를 들어, 점심 시간대에 이용되는 메뉴 주문용 출력UI 정보는 메뉴 주문용 출력UI 내에 표시되는 메뉴가 점심할인 상품 혹은 점심세트 상품 등은 표시되고 주(酒)류의 상품은 표시되지 않도록 숨기는 형태로 구성되도록 하며, 저녁 시간대에 이용되는 메뉴 주문용 출력UI 정보는 메뉴 주문용 출력UI 내에 표시되는 메뉴가 점심할인 상품 혹은 점심세트 상품 등은 표시되지 않도록 숨기고 주류의 상품은 표시되도록 형태로 구성되도록 할 수 있다.For example, in the output UI information for menu ordering used during lunch time, the menu displayed in the output UI for menu ordering is displayed so that lunch discount products or lunch set products are displayed and alcoholic products are not displayed. So that the output UI information for menu ordering used during the evening hours is configured in such a way that the menu displayed in the output UI for menu ordering is hidden so that lunch discount products or lunch set products are not displayed, and alcoholic products are displayed. can do.

이와 관련하여, 제4출력UI 관리부(124)는 체크인 관리유닛(110)으로부터 회원정보가 수신되는 시간에 따라 이를 주문 시각으로 판단하여 기 설정 저장된 상기 메뉴 주문용 출력UI정보 중 대응되는 주문 시간대의 메뉴 주문용 출력UI 정보를 기반으로 메뉴 주문용 출력UI가 터치 디스플레이(D) 상 출력 반영되도록 한다.In this regard, the fourth output UI management unit 124 determines the order time according to the time at which the member information is received from the check-in management unit 110, and determines the order time of the corresponding order time zone among the previously set and stored output UI information for menu ordering. Based on the menu ordering output UI information, the menu ordering output UI is reflected on the touch display D.

또한, 주문 관리부(125)는 터치 디스플레이(D)에 상 출력 반영된 메뉴 주문용 출력UI 상에 손님이 터치 입력을 통해 특정 상품을 선택하여 메뉴 주문 및 주문 내역에 관한 결제가 이루어질 수 있도록 하며, 이를 통해 주문정보가 생성된다.In addition, the order management unit 125 allows a customer to select a specific product through a touch input on the menu order output UI reflected on the touch display D, so that menu orders and payment for order details can be made. Order information is created through

마지막으로, 회원정보 갱신부(126)는 주문 관리부(125)를 통해 주문정보가 생성될 경우, 이를 기반으로 회원의 방문횟수정보 및 구매이력정보를 갱신하여 회원정보 관리부(111)에 기 저장된 회원 정보 내 포한된 세부정보의 업데이트가 이루어질 수 있도록 하며, 더 나아가 회원의 방문횟수정보 및 구매이력정보 갱신내용에 대응되어 자동적으로 이와 관련된 등급정보 역시 같이 갱신될 수 있도록 한다.Finally, when order information is generated through the order management unit 125, the member information updating unit 126 updates the number of visits and purchase history information of the member based on this, and the member information previously stored in the member information management unit 111. It allows the detailed information included in the information to be updated, and furthermore, to correspond to the member's number of visits information and purchase history information updates, so that the related level information can also be updated automatically.

본 발명에 개시된 실시예는 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의해서 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 보호범위는 아래 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리 범위에 포함되는 것으로 해석되어야 할 것이다.The embodiments disclosed in the present invention are not intended to limit the technical idea of the present invention, but to explain, and the scope of the technical idea of the present invention is not limited by these embodiments. The scope of protection should be interpreted according to the claims below, and all technical ideas within the scope equivalent thereto should be construed as being included in the scope of the present invention.

K : 키오스크
C : 카메라 모듈
S : 센서모듈
D : 터치 디스플레이
U : 출력UI
100 : 키오스크 시스템
110 : 체크인 관리유닛
111 : 회원정보 관리부 112 : 얼굴 인식부
113 : 제1체크인 관리부 114 : 제2체크인 관리부
120 : 주문 관리유닛
121 : 제1출력UI 관리부 122 : 제2출력UI 관리부
123 : 제3출력UI 관리부
123a : 제1메뉴정렬 관리부분
123b : 제2메뉴정렬 관리부분
123c : 메뉴정보표시 관리부분
124 : 제4출력UI 관리부 125 : 주문 관리부
126 : 회원정보 갱신부K: Kiosk
C: Camera module
S: sensor module
D: touch display
U: Output UI
100: kiosk system
110: check-in management unit
111: member information management unit 112: face recognition unit
113: first check-in management unit 114: second check-in management unit
120: order management unit
121: first output UI management unit 122: second output UI management unit
123: third output UI management unit
123a: first menu arrangement management unit
123b: second menu arrangement management unit
123c: menu information display management part
124: fourth output UI management unit 125: order management unit
126: member information update unit

Claims (10)

전면 상부에 특정 출력UI의 출력 및 터치를 통한 신호 입력이 가능한 터치 디스플레이가 구비되고, 전면 일측에 얼굴 촬영을 위한 카메라 모듈 및 생체정보의 감지를 위한 센서모듈이 구비된 키오스크(Kiosk) 내 구축되는 시스템에 있어서,
상기 카메라 모듈을 통해 촬영된 손님의 얼굴 촬영정보를 기 등록 저장된 손님들의 회원정보 내 얼굴 기준정보와의 비교 분석을 통해 대응되는 얼굴 기준정보가 포함된 회원정보를 선별하는 체크인 관리유닛; 및
상기 체크인 관리유닛을 통해 선별된 회원정보를 제공받아 제공된 회원정보를 따라 기 설정된 메뉴 주문용 출력UI(User Interface)의 상기 터치 디스플레이 상 출력형태를 달리 맞춤 조절하는 주문 관리유닛;을 포함하는 것을 특징으로 하는
얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템.
Built in a kiosk equipped with a touch display capable of outputting a specific output UI and inputting signals through touch on the upper part of the front, and equipped with a camera module for taking a face and a sensor module for detecting biometric information on one side of the front in the system,
a check-in management unit that selects member information including the corresponding face reference information through comparative analysis of the customer's facial photographing information photographed through the camera module with face reference information in the registered and stored customer member information; and
and an order management unit that receives member information selected through the check-in management unit and adjusts the output form of a preset menu order output UI (User Interface) on the touch display according to the provided member information. to be
A kiosk system based on a customized customer response algorithm through facial recognition check-in.
 제1항에 있어서,
상기 체크인 관리유닛은,
회원의 성별정보, 나이정보, 방문횟수정보, 구매이력정보, 등급정보 및 얼굴 기준정보를 포함하는 회원정보가 회원별로 구분되어 내부에 마련된 별도의 데이터베이스 내에 기록 저장되는 회원정보 관리부;
기 설정된 체크인 시작용 출력UI가 출력 반영된 상기 터치 디스플레이 상에 터치 입력을 통해 체크인 시작신호가 생성될 경우 상기 카메라 모듈의 작동을 활성화시키며, 활성화된 상기 카메라 모듈을 통해 촬영된 손님의 얼굴에 관한 얼굴 촬영정보를 생성하는 얼굴 인식부; 및
상기 얼굴 인식부를 통해 생성된 얼굴 촬영정보를 제공받아 상기 회원정보 관리부에 기 저장된 회원 정보 중 제공된 얼굴 촬영정보와 대응되는 얼굴 기준정보가 포함된 회원정보를 상기 주문 관리유닛에 전송하는 제1체크인 관리부;를 포함하는 것을 특징으로 하는
얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템.
According to claim 1,
The check-in management unit,
A member information management unit in which member information, including gender information, age information, number of visits information, purchase history information, rating information, and face reference information of members is classified by member and recorded and stored in a separate database provided inside;
When a check-in start signal is generated through a touch input on the touch display to which the preset check-in start output UI is outputted, the operation of the camera module is activated, and the face of the guest photographed through the activated camera module. a face recognition unit generating photographing information; and
A first check-in management unit that receives face photographing information generated through the face recognition unit and transmits member information including face reference information corresponding to the provided face photographing information among member information pre-stored in the member information management unit to the order management unit. characterized in that it includes;
A kiosk system based on a customized customer response algorithm through facial recognition check-in.
 제2항에 있어서,
상기 회원정보 관리부에 기 저장된 회원 정보는 회원의 휴대전화번호 정보 및 생체 기준정보를 포함하며,
상기 체크인 관리유닛은,
상기 제1체크인 관리부가 상기 얼굴 인식부를 통해 제공된 얼굴 촬영정보와 대응되는 얼굴 기준정보가 포함된 회원정보를 상기 회원정보 관리부에 기 저장된 회원 정보 중 선별하지 못할 경우 활성화되며, 상기 터치 디스플레이 상에 터치 입력을 통해 휴대전화번호 기반의 체크인 요청 신호 및 입력번호 정보가 생성될 경우 상기 회원정보 관리부에 기 저장된 회원 정보 중 생성된 입력번호 정보와 대응되는 휴대전화번호 정보가 포함된 회원정보를 상기 주문 관리유닛에 전송하고, 상기 터치 디스플레이 상에 터치 입력을 통해 생체정보 기반의 체크인 요청 신호가 생성되고 상기 센서모듈을 통해 생체정보가 감지될 경우 상기 회원정보 관리부에 기 저장된 회원 정보 중 감지된 생체정보와 대응되는 생체 기준정보가 포함된 회원정보를 상기 주문 관리유닛에 전송하는 제2체크인 관리부;를 더 포함하는 것을 특징으로 하는
얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템.
According to claim 2,
The member information pre-stored in the member information management unit includes the member's cell phone number information and biometric reference information;
The check-in management unit,
Activated when the first check-in management unit fails to select member information including face reference information corresponding to the face photographing information provided through the face recognition unit from member information pre-stored in the member information management unit, and touches the touch display on the touch display. When a mobile phone number-based check-in request signal and input number information are generated through input, the member information including the mobile phone number information corresponding to the generated input number information among member information pre-stored in the member information management unit is transferred to the order management unit. unit, and when a biometric information-based check-in request signal is generated through a touch input on the touch display and the biometric information is detected through the sensor module, the detected biometric information among member information pre-stored in the member information management unit and A second check-in management unit for transmitting member information including corresponding biometric reference information to the order management unit; characterized in that it further comprises
A kiosk system based on a customized customer response algorithm through facial recognition check-in.
 제3항에 있어서,
상기 회원정보 관리부에 기 저장된 회원 정보는 회원 명의의 단말 기준정보를 포함하며,
상기 제2체크인 관리부는 상기 터치 디스플레이 상에 터치 입력을 통해 QR(Quick Response)코드 기반의 체크인 요청 신호가 생성될 경우, 기 설정된 QR코드 제공용 출력UI가 상기 터치 디스플레이 상에 출력 반영되도록 하며,
상기 제2체크인 관리부를 통해 상기 터치 디스플레이 상에 출력 반영된 QR코드 제공용 출력UI 내 QR코드를 촬영한 회원 단말은 단말 정보를 무선통신 네트워크를 통해 연결된 상기 제2체크인 관리부에 제공하고,
상기 제2체크인 관리부는 상기 회원정보 관리부에 기 저장된 회원 정보 중 제공된 단말 정보와 대응되는 단말 기준정보가 포함된 회원정보를 상기 주문 관리유닛에 전송하는 것을 특징으로 하는
얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템.
According to claim 3,
The member information pre-stored in the member information management unit includes terminal reference information in the name of the member,
When a check-in request signal based on a QR (Quick Response) code is generated through a touch input on the touch display, the second check-in manager causes a predetermined output UI for providing a QR code to be output and reflected on the touch display,
The member terminal that has photographed the QR code in the output UI for providing a QR code output and reflected on the touch display through the second check-in management unit provides terminal information to the second check-in management unit connected through a wireless communication network,
The second check-in management unit transmits member information including terminal reference information corresponding to the provided terminal information among member information pre-stored in the member information management unit to the order management unit.
A kiosk system based on a customized customer response algorithm through facial recognition check-in.
 제2항에 있어서,
상기 주문 관리유닛은,
상기 체크인 관리유닛으로부터 수신되는 회원정보를 기반으로 회원정보에 포함된 회원의 나이정보에 따라 기 설정된 상기 메뉴 주문용 출력UI의 출력 음성, 음성 출력속도, 출력 글자크기, 미성년 판매금지 상품의 출력여부 중 적어도 하나 이상을 달리 조절하여 상기 터치 디스플레이 상 출력 반영되도록 하는 제1출력UI 관리부;를 포함하는 것을 특징으로 하는
얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템.
According to claim 2,
The order management unit,
Based on the member information received from the check-in management unit, the output voice of the output UI for ordering the menu, which is preset according to the member's age information included in the member information, the voice output speed, the output font size, and whether products prohibited for sale to minors are output and a first output UI management unit configured to differently adjust at least one of the outputs to be reflected on the touch display.
A kiosk system based on a customized customer response algorithm through facial recognition check-in.
 제5항에 있어서,
상기 제1출력UI 관리부는 상기 체크인 관리유닛으로부터 수신되는 회원정보에 포함된 회원의 나이정보가 10세 미만일 경우, 상기 메뉴 주문용 출력UI를 기반으로 음성 출력 가능한 모든 출력음성을 어린이의 목소리로 녹음되어 기 등록된 어린이용 출력음성 데이터를 이용하고, 어린이용 출력음성 데이터를 이용한 출력음성의 출력속도를 기본으로 기 설정된 기본출력속도 기준 20% 느린 속도로 출력시키며, 상기 메뉴 주문용 출력UI 내에 표시 가능한 상품 중 미성년 판매금지 상품은 숨기며,
상기 제1출력UI 관리부는 상기 체크인 관리유닛으로부터 수신되는 회원정보에 포함된 회원의 나이정보가 10세 이상 20세 미만일 경우, 상기 메뉴 주문용 출력UI 내에 표시 가능한 상품 중 미성년 판매금지 상품은 숨기며,
상기 제1출력UI 관리부는 상기 체크인 관리유닛으로부터 수신되는 회원정보에 포함된 회원의 나이정보가 60세 이상일 경우, 상기 메뉴 주문용 출력UI를 기반으로 음성 출력 가능한 모든 출력음성의 출력속도를 기본으로 기 설정된 기본출력속도 기준 20% 느린 속도로 출력시키며, 상기 메뉴 주문용 출력UI 내 표시 가능한 모든 글자의 크기를 기 설정된 기본글자크기 기준 20% 확대시키는 것을 특징으로 하는
얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템.
According to claim 5,
When the member's age information included in the member information received from the check-in management unit is less than 10 years old, the first output UI management unit records all output voices that can be output based on the menu order output UI as children's voices. using the previously registered children's output voice data, and based on the output speed of the output voice using the children's output voice data, it is output at a speed that is 20% slower than the preset basic output speed, and is displayed in the output UI for ordering the menu. Among possible products, products prohibited from selling to minors are hidden,
When the member's age information included in the member information received from the check-in management unit is between 10 and 20 years old, the first output UI management unit hides products prohibited for sale by minors among products that can be displayed in the menu order output UI,
When the age information of the member included in the member information received from the check-in management unit is 60 years or older, the first output UI management unit based on the output speed of all output voices capable of outputting audio based on the menu order output UI Characterized in that it outputs at a slow speed of 20% based on the preset basic output speed, and enlarges the size of all characters that can be displayed in the output UI for menu ordering by 20% based on the preset basic font size
A kiosk system based on a customized customer response algorithm through facial recognition check-in.
 제2항에 있어서,
상기 회원정보 관리부에 기 저장된 회원 정보 내 포함된 등급정보는 회원 정보 내 포함된 회원의 방문횟수정보 및 구매이력정보를 기반으로 방문횟수 및 구매금액이 높아질수록 기 설정된 등급설정 기준정보에 따라 더 높은 등급으로 설정되며,
상기 주문 관리유닛은,
상기 체크인 관리유닛으로부터 수신되는 회원정보를 기반으로 회원정보에 포함된 회원의 등급정보에 따라 기 설정된 상기 메뉴 주문용 출력UI 내 표시되는 상품 할인 관련 정보를 기 설정된 등급별 할인 기준정보를 기반으로 달리 조절하여 상기 터치 디스플레이 상 출력 반영되도록 하는 제2출력UI 관리부;를 포함하는 것을 특징으로 하는
얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템.
According to claim 2,
The level information included in the member information pre-stored in the member information management unit is based on the number of visits and purchase history information of the member included in the member information. is set by grade.
The order management unit,
Based on the member information received from the check-in management unit, the product discount-related information displayed in the output UI for ordering the menu, which is preset according to the member's grade information included in the member information, is adjusted differently based on the discount standard information for each grade. characterized in that it comprises a; second output UI management unit for reflecting the output on the touch display
A kiosk system based on a customized customer response algorithm through facial recognition check-in.
 제2항에 있어서,
상기 주문 관리유닛은 상기 체크인 관리유닛으로부터 수신되는 회원정보들 내 포함된 구매이력정보들 및 성별정보들을 기반으로 전체 회원 기준 상품별 구매횟수 및 각 성별 기준 상품별 구매횟수를 산출한 상품구매 통계정보를 생성 및 갱신하여 내부에 마련된 별도의 데이터베이스 내에 기록 저장하며,
상기 주문 관리유닛은,
상기 메뉴 주문용 출력UI 내 표시되는 상품의 정렬 기준이 개인구매순으로 기 설정되어 있을 경우 상기 체크인 관리유닛으로부터 수신되는 회원정보를 기반으로 회원정보에 포함된 회원의 구매이력정보에 따라 기 설정된 상기 메뉴 주문용 출력UI 내 표시되는 상품들이 회원의 구매횟수가 많은 순으로 정렬되도록 조절하여 상기 터치 디스플레이 상 출력 반영되도록 하고, 상기 메뉴 주문용 출력UI 내 표시되는 상품의 정렬 기준이 성별구매순으로 기 설정되어 있을 경우 상기 체크인 관리유닛으로부터 수신되는 회원정보 및 기 저장된 상품구매 통계정보를 기반으로 회원정보에 포함된 회원의 성별정보에 따라 기 설정된 상기 메뉴 주문용 출력UI 내 표시되는 상품들이 상품구매 통계정보 내 회원의 성별정보와 대응되는 성별 기준 상품별 구매횟수가 많은 순으로 정렬되도록 조절하여 상기 터치 디스플레이 상 출력 반영되도록 하는 제3출력UI 관리부;를 포함하는 것을 특징으로 하는
얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템.
According to claim 2,
The order management unit generates product purchase statistical information that calculates the number of purchases per product based on all members and the number of purchases per product based on each gender based on the purchase history information and gender information included in the member information received from the check-in management unit. And updated and stored in a separate database provided inside,
The order management unit,
When the sorting criteria of the products displayed in the output UI for ordering the menu is preset in the order of personal purchase, based on the member information received from the check-in management unit, the purchase history information of the member included in the member information The products displayed in the menu order output UI are adjusted to be sorted in the order of the number of purchases by the member so that the output is reflected on the touch display, and the sorting criteria of the products displayed in the menu order output UI is based on the order of purchase by gender. If it is set, based on the member information received from the check-in management unit and the pre-stored product purchase statistical information, the products displayed in the output UI for ordering the menu are preset according to the gender information of the member included in the member information. and a third output UI management unit that adjusts the number of purchases for each gender-based product corresponding to the member's gender information in the information to be sorted in ascending order so that the output is reflected on the touch display.
A kiosk system based on a customized customer response algorithm through facial recognition check-in.
 제8항에 있어서,
상기 제3출력UI 관리부는 기 저장된 상품구매 통계정보를 기반으로 상기 메뉴 주문용 출력UI 내 표시되는 상품들 중 상품구매 통계정보 내 전체 회원 기준 상품별 구매횟수가 기 설정된 추천상품표시 기준상의 구매기준횟수 보다 많거나 추천상품표시 기준 상의 순위기준수치 내에 포함되는 상품 일측에 추천상품표시를 위해 기 설정 등록된 소정의 추천표시 이미지를 추가 표시하여 상기 터치 디스플레이 상 출력 반영되도록 하는 것을 특징으로 하는
얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템.
According to claim 8,
The third output UI management unit, based on pre-stored product purchase statistics information, among the products displayed in the menu order output UI, the number of purchases per product based on all members in the product purchase statistics information is the purchase standard number of times based on the preset recommendation product display standard. Characterized in that a predetermined recommended display image registered in advance is additionally displayed to display a recommended product on one side of a product that is more than or included within the ranking criterion on the recommended product display standard so that the output is reflected on the touch display
A kiosk system based on a customized customer response algorithm through facial recognition check-in.
 제2항에 있어서,
상기 주문 관리유닛은 주문 시간대 별로 표시되는 상품이 상이하도록 개별 설정된 복수의 메뉴 주문용 출력UI 정보가 구분되어 내부에 마련된 별도의 데이터베이스 내에 기록 저장되며,
상기 주문 관리유닛은,
상기 체크인 관리유닛으로부터 회원정보가 수신되는 시간에 따라 기 설정 저장된 상기 메뉴 주문용 출력UI정보 중 대응되는 주문 시간대의 메뉴 주문용 출력UI 정보를 기반으로 메뉴 주문용 출력UI가 상기 터치 디스플레이 상 출력 반영되도록 하는 제4출력UI 관리부;를 포함하는 것을 특징으로 하는
얼굴 인식 체크인을 통한 손님 맞춤 응대 알고리즘을 기반으로 한 키오스크 시스템.According to claim 2,
In the order management unit, output UI information for ordering a plurality of menus, which are individually set so that products displayed for each order time slot are distinguished, are recorded and stored in a separate database provided therein,
The order management unit,
According to the time at which member information is received from the check-in management unit, the menu order output UI reflects the output on the touch display based on the menu order output UI information of the corresponding order time zone among the menu order output UI information stored in advance. characterized in that it comprises a; fourth output UI management unit to be
A kiosk system based on a customized customer response algorithm through facial recognition check-in.
KR1020210152135A 2021-11-08 2021-11-08 Kiosk system based on customer serving algorithms using face recognition check-in KR102615937B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210152135A KR102615937B1 (en) 2021-11-08 2021-11-08 Kiosk system based on customer serving algorithms using face recognition check-in

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210152135A KR102615937B1 (en) 2021-11-08 2021-11-08 Kiosk system based on customer serving algorithms using face recognition check-in

Publications (2)

Publication Number Publication Date
KR20230066780A true KR20230066780A (en) 2023-05-16
KR102615937B1 KR102615937B1 (en) 2023-12-20

Family

ID=86546214

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210152135A KR102615937B1 (en) 2021-11-08 2021-11-08 Kiosk system based on customer serving algorithms using face recognition check-in

Country Status (1)

Country Link
KR (1) KR102615937B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102596160B1 (en) 2023-08-28 2023-11-01 (주)퍼스트솔루션즈 Kiosk device capable of image storage for claim prevention

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140134155A (en) * 2013-05-13 2014-11-21 임윤재 Order management system using mobile in real time
KR20180027707A (en) * 2016-09-06 2018-03-15 주식회사 에이치제이엠앤씨 An entry and exit control system with the monitoring center using the kiosk
KR20200010651A (en) * 2018-06-29 2020-01-31 주식회사 디에프알씨 System, server and method for providing customer service
KR102244097B1 (en) * 2018-10-26 2021-04-23 (주)솔로몬기술단기술사사무소 Food sell system using a smart phone and a KIOSK terminal
KR20210054227A (en) * 2019-11-05 2021-05-13 신주헌 Digital sinage system
KR20210086195A (en) * 2019-12-31 2021-07-08 주식회사 이엠비 Method for supplying service of adaptive client using kiosk

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140134155A (en) * 2013-05-13 2014-11-21 임윤재 Order management system using mobile in real time
KR20180027707A (en) * 2016-09-06 2018-03-15 주식회사 에이치제이엠앤씨 An entry and exit control system with the monitoring center using the kiosk
KR20200010651A (en) * 2018-06-29 2020-01-31 주식회사 디에프알씨 System, server and method for providing customer service
KR102244097B1 (en) * 2018-10-26 2021-04-23 (주)솔로몬기술단기술사사무소 Food sell system using a smart phone and a KIOSK terminal
KR20210054227A (en) * 2019-11-05 2021-05-13 신주헌 Digital sinage system
KR20210086195A (en) * 2019-12-31 2021-07-08 주식회사 이엠비 Method for supplying service of adaptive client using kiosk

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102596160B1 (en) 2023-08-28 2023-11-01 (주)퍼스트솔루션즈 Kiosk device capable of image storage for claim prevention
KR102606172B1 (en) 2023-08-28 2023-11-30 (주)퍼스트솔루션즈 Kiosk for user behavior analysis

Also Published As

Publication number Publication date
KR102615937B1 (en) 2023-12-20

Similar Documents

Publication Publication Date Title
KR102144943B1 (en) Product recommendation system and product recommendation method for prospective customers in offline stores
CN105741451B (en) Information processing system and information processing method
KR102004328B1 (en) Product and service order system for mobile kiosk service, and method thereof
EP2709045A1 (en) System and method for hotel reservation and for automated check-in
EP3001286A1 (en) Apparatus and method for automated adaptation of a user interface
US20100082487A1 (en) Systems and methods for managing a virtual card based on geographical information
US11830287B2 (en) Method and system for customizing user experience
CN110264153A (en) The intelligence of document is presented
CN103797752A (en) Method and computer program for providing authentication to control access to a computer system
US11651407B2 (en) Mirrored display and proximal control of autonomous retail systems
KR101541180B1 (en) Smart mirror device and thereby system
KR102132714B1 (en) System and method for providing related services of immersive virtual fitting
KR102286286B1 (en) System and method for sharing fashion coordination
KR20200132897A (en) Store system, method, and apparatus for processing information of clothes to be tried on
CN108805644A (en) The commercial articles vending method and machine for vending of machine for vending
US20150294437A1 (en) Systems and methods for scanning payment and loyalty cards as a service
KR20230066780A (en) Kiosk system based on customer serving algorithms using face recognition check-in
KR102115364B1 (en) Electronic business card platform and information sharing method using thereof
US11935022B2 (en) Unmanned store operation method and unmanned store system using same
KR102290855B1 (en) Digital sinage system
KR20220102823A (en) Artificial Intelligence-based User Responsive Kiosk Payment System
JP2020201826A (en) Information processing apparatus, information processing system, information processing method, and program
US11935111B2 (en) Voice-based transaction terminal ordering
US20200160233A1 (en) Tap to reserve
CN112528140B (en) Information recommendation method, device, equipment, system and storage medium

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right