KR20190130215A - the serving system using the face information recognition type robot - Google Patents

the serving system using the face information recognition type robot Download PDF

Info

Publication number
KR20190130215A
KR20190130215A KR1020180047664A KR20180047664A KR20190130215A KR 20190130215 A KR20190130215 A KR 20190130215A KR 1020180047664 A KR1020180047664 A KR 1020180047664A KR 20180047664 A KR20180047664 A KR 20180047664A KR 20190130215 A KR20190130215 A KR 20190130215A
Authority
KR
South Korea
Prior art keywords
customer
facial recognition
robot
face
present
Prior art date
Application number
KR1020180047664A
Other languages
Korean (ko)
Other versions
KR102117824B1 (en
Inventor
한경하
곽성환
홍승현
Original Assignee
(주)우퍼디자인
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)우퍼디자인 filed Critical (주)우퍼디자인
Priority to KR1020180047664A priority Critical patent/KR102117824B1/en
Publication of KR20190130215A publication Critical patent/KR20190130215A/en
Application granted granted Critical
Publication of KR102117824B1 publication Critical patent/KR102117824B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06K9/00221—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Manipulator (AREA)

Abstract

The present invention relates to a system for managing a customer using a facial recognition robot (200). After a facial recognition camera (100) recognizes the face of a customer entering a store and then outputs consumer information including a past purchase history of the customer to the facial recognition robot (200) at a counter, an employee providing a service grasps the history of the customer by seeing the consumer information and serves the customer.

Description

안면인식 로봇을 이용한 고객관리 시스템{the serving system using the face information recognition type robot}Customer management system using facial recognition robot {the serving system using the face information recognition type robot}

본 발명은 안면인식 로봇이 고객의 안면을 인식하여 고객의 과거 구매이력을 실시간으로 출력함으로써, 서비스를 공급하는 직원은 상기 소비자 정보를 보고 고객의 이력을 파악하여 응대하는 것을 특징으로 하는 안면인식 로봇을 이용한 고객관리 시스템에 관한 것이다.According to the present invention, the facial recognition robot recognizes the customer's face and outputs the past purchase history of the customer in real time, so that the employee providing the service responds by grasping the customer's history by looking at the consumer information. It relates to a customer management system using.

도 4는 종래 고객관리 시스템과 본 발명의 안면인식 로봇을 이용한 고객관리 시스템을 비교한 것이다.Figure 4 compares the conventional customer care system and the customer care system using the facial recognition robot of the present invention.

도 4A에 도시된 종래의 시스템은 아무리 단골손님이라도 구매이력을 파악하지 못하여 직원이 응대하는데 불편함을 초래하고 있었다.The conventional system shown in FIG. 4A is inconvenient for the staff to respond, even if the regular customer cannot grasp the purchase history.

이 같은 문제점을 해결하기 위하여 본 발명자는 도 4B에 도시된 바와 같이,In order to solve such a problem, the present inventors, as shown in Figure 4B,

고객의 입장시 바로 안면을 인식하여 구매이력을 직원에게 알려주므로, 효과적으로 고객을 응대할 수 있는 본 발명의 안면인식 로봇을 이용한 고객관리 시스템을 개발하기에 이르렀다.Recognizing the face immediately when the customer's position tells the employee the purchase history, and led to the development of a customer management system using the facial recognition robot of the present invention that can effectively respond to customers.

[문헌 1] 대한민국 공개특허 제10-2008-0008528호 ‘고객 접대 기능을 가지는 서빙 로봇’, 2008년01월24일[Document 1] Republic of Korea Patent Publication No. 10-2008-0008528 'Serving Robot with Customer Hospitality', January 24, 2008 [문헌 2] 대한민국 공개특허 제10-2011-0040340호 ‘이용자를 접대하고 품위가 높아지도록 차별화 된 서비스를 제공하는 차세대 엘리베이터에 대한 발명’, 2011년04월20일[Patent 2] Republic of Korea Patent Publication No. 10-2011-0040340 'Invention for the next generation elevator to provide differentiated services to entertain users and dignity', April 20, 2011

본 발명은 상기한 바와 같은 종래의 제반 문제점을 해소하기 위해서 제시되는 것이다. 그 목적은 안면인식 로봇이 고객의 안면을 인식하여 고객의 과거 구매이력을 실시간으로 출력함으로써, 서비스를 공급하는 직원은 상기 소비자 정보를 보고 고객의 이력을 파악하여 응대하는 것을 특징으로 하는 안면인식 로봇을 이용한 고객관리 시스템을 제공하고자 한다. The present invention is proposed to solve the conventional problems as described above. The purpose is that the facial recognition robot recognizes the customer's face and outputs the past purchase history of the customer in real time, so that the employee supplying the service sees and responds to the customer's history by looking at the consumer information. We want to provide a customer management system.

상기한 기술적 과제를 해결하기 위해 본 발명은 안면인식 카메라(100)를 이용한 것으로,In order to solve the above technical problem, the present invention uses a facial recognition camera 100,

상기 안면인식 카메라(100)가 매장으로 들어오는 고객의 안면을 인식한 후,After the face recognition camera 100 recognizes the face of the customer entering the store,

상기 고객의 과거 구매내력을 포함한 소비자 정보를 카운터 안면인식 로봇(200)에 출력하므로,Since the consumer information including the past purchase history of the customer is output to the counter face recognition robot 200,

서비스를 공급하는 직원은 상기 소비자 정보를 보고 고객의 이력을 파악하여 응대하는 것을 특징으로 하는 안면인식 로봇을 이용한 고객관리 시스템에 관한 것이다.The employee providing the service relates to a customer management system using a facial recognition robot, characterized in that the customer information is viewed and the customer's history is identified and responded to.

본 발명에 따르면 안면인식 로봇이 고객의 안면을 인식하여 고객의 과거 구매이력을 실시간으로 출력함으로써, 서비스를 공급하는 직원은 상기 소비자 정보를 보고 고객의 이력을 파악하여 응대하는 것을 특징으로 하는 안면인식 로봇을 이용한 고객관리 시스템을 제공한다. According to the present invention, the face recognition robot recognizes the customer's face and outputs the past purchase history of the customer in real time, so that the employee providing the service responds by grasping the customer's history by looking at the consumer information. Provide a customer management system using a robot.

도 1은 본 발명의 안면인식 로봇을 이용한 고객관리 시스템이 적용된 매장을 도시한 것이다.
도 2는 본 발명의 안면인식 로봇을 이용한 고객관리 시스템에 사용되는 카운터 안면인식 로봇을 도시한 것이다.
도 3은 본 발명의 안면인식 로봇을 이용한 고객관리 시스템에 사용되는 안면인식 카메라를 도시한 것이다.
도 4는 종래 고객관리 시스템과 본 발명의 안면인식 로봇을 이용한 고객관리 시스템을 비교한 것이다.
도 5는 본 발명의 안면인식 로봇을 이용한 고객관리 시스템에서 전체 개념을 도시한 것이다.
도 6은 본 발명의 안면인식 로봇을 이용한 고객관리 시스템에서 상황별 개념을 도시한 것이다.
도 7은 도 5 및 6에 따른 작동 개념을 순서도로 도시한 것이다.Figure 1 shows a store to which the customer management system using the facial recognition robot of the present invention is applied.
Figure 2 shows a counter face recognition robot used in the customer management system using a face recognition robot of the present invention.
Figure 3 shows a facial recognition camera used in the customer care system using the facial recognition robot of the present invention.
Figure 4 compares the conventional customer care system and the customer care system using the facial recognition robot of the present invention.
Figure 5 shows the overall concept in a customer care system using a facial recognition robot of the present invention.
Figure 6 illustrates a situational concept in the customer management system using a facial recognition robot of the present invention.
7 shows a flowchart of the operating concept according to FIGS. 5 and 6.

이하 첨부한 도면과 함께 상기와 같은 본 발명의 개념이 바람직하게 구현된 실시예를 통하여 본 발명을 더욱 상세하게 설명한다. Hereinafter, the present invention will be described in more detail with reference to the accompanying drawings.

도 1은 본 발명의 안면인식 로봇을 이용한 고객관리 시스템이 적용된 매장을 도시한 것이고,1 illustrates a store to which a customer management system using a facial recognition robot of the present invention is applied,

도 2는 본 발명의 안면인식 로봇을 이용한 고객관리 시스템에 사용되는 카운터 안면인식 로봇을 도시한 것이며,Figure 2 illustrates a counter face recognition robot used in the customer management system using a face recognition robot of the present invention,

도 3은 본 발명의 안면인식 로봇을 이용한 고객관리 시스템에 사용되는 안면인식 카메라를 도시한 것이다.Figure 3 shows a facial recognition camera used in the customer care system using the facial recognition robot of the present invention.

본 발명의 안면인식 카메라(100)는,The facial recognition camera 100 of the present invention,

상하좌우 회전 운동이 가능하고, 동작감지센서가 내장되어 매장으로 입장하는 고객의 동선을 추적하며, 카메라로 얼굴을 촬영하여 중앙관리서버와 연동하여 안면인식을 통해 고객을 특정하는 기능을 한다.It can rotate up, down, left and right, and has a built-in motion sensor that tracks the moving lines of customers entering the store, and captures faces with cameras to link customers with the central management server to identify customers through facial recognition.

본 발명의 카운터 안면인식 로봇(200)은,Counter facial recognition robot 200 of the present invention,

회전 운동이 가능하고, 상기 고객의 과거 구매내력을 포함한 소비자 정보를 디스플레이부(210)에 출력하여 직원이 볼 수 있도록 하며, 상기 소비자 정보에는 상기 고객의 구매패턴을 고려하여 추천 구매 예상 품목이 포함될 수 있다.Rotational movement is possible, and the employee outputs the consumer information including the past purchase history of the customer to the display unit 210 so that the employee can view the consumer information, and the consumer information includes the expected purchase item in consideration of the purchase pattern of the customer. Can be.

그리고 후방에 후방카메라(220)가 설치되어 상기 안면인식 카메라(100)가 안면인식에 실패할 경우, 이를 보완하여 안면인식 기능을 실행한다. 물론 상기 안면인식 카메라(100)가 안면인식에 성공할 경우에도 확인 차원에서 2차적으로 안면인식 기능을 실행한다.And if the rear camera 220 is installed at the rear and the face recognition camera 100 fails to recognize the face, it supplements this to execute the face recognition function. Of course, even when the facial recognition camera 100 is successful in facial recognition, the facial recognition function is executed secondarily in view of confirmation.

도 5는 본 발명의 안면인식 로봇을 이용한 고객관리 시스템에서 전체 개념을 도시한 것이고,Figure 5 illustrates the entire concept in a customer care system using a facial recognition robot of the present invention,

도 6은 본 발명의 안면인식 로봇을 이용한 고객관리 시스템에서 상황별 개념을 도시한 것이며,Figure 6 illustrates a situational concept in the customer management system using a facial recognition robot of the present invention,

도 7은 도 5 및 6에 따른 작동 개념을 순서도로 도시한 것이다.7 shows a flowchart of the operating concept according to FIGS. 5 and 6.

본 발명의 안면인식 로봇을 이용한 고객관리 시스템은,Customer management system using the facial recognition robot of the present invention,

상기 안면인식 카메라(100)를 이용한 것으로,By using the facial recognition camera 100,

상기 안면인식 카메라(100)가 매장으로 들어오는 고객의 안면을 인식한 후,After the face recognition camera 100 recognizes the face of the customer entering the store,

상기 고객의 과거 구매내력을 포함한 소비자 정보를 카운터 안면인식 로봇(200)에 출력하므로,Since the consumer information including the past purchase history of the customer is output to the counter face recognition robot 200,

서비스를 공급하는 직원은 상기 소비자 정보를 보고 고객의 이력을 파악하여 응대하는 것을 특징으로 한다.The employee providing the service is characterized by responding to the customer's history by looking at the consumer information.

만약 상기 고객이 신규 고객인 경우,If the customer is a new customer,

상기 카운터 안면인식 로봇(200)에 신규고객임을 알리고,Inform the counter facial recognition robot 200 that the new customer,

상기 신규 고객의 구매 정보를 중앙관리서버에 기록하는 것을 특징으로 한다.The purchase information of the new customer is characterized in that recorded in the central management server.

그리고 상기 소비자 정보에는 상기 고객의 구매패턴을 고려하여 추천 구매 예상 품목이 포함되는 것을 특징으로 한다.In addition, the consumer information may include a recommended purchase expected item in consideration of the purchase pattern of the customer.

본 발명은 상기에서 언급한 바와 같이 바람직한 실시예와 관련하여 설명되었으나, 본 발명의 요지를 벗어남이 없는 범위 내에서 다양한 수정 및 변형이 가능하며, 다양한 분야에서 사용 가능하다. Although the present invention has been described in connection with the preferred embodiment as mentioned above, various modifications and variations are possible without departing from the gist of the present invention, and can be used in various fields.

따라서 본 발명의 청구범위는 이건 발명의 진정한 범위 내에 속하는 수정 및 변형을 포함한다.Therefore, the claims of the present invention include modifications and variations that fall within the true scope of the invention.

100: 안면인식 카메라
200: 카운터 안면인식 로봇
210: 디스플레이부
220: 후방카메라100: facial recognition camera
200: counter facial recognition robot
210: display unit
220: rear camera

Claims (3)

안면인식 카메라(100)를 이용한 것으로,
상기 안면인식 카메라(100)가 매장으로 들어오는 고객의 안면을 인식한 후,
상기 고객의 과거 구매내력을 포함한 소비자 정보를 카운터 안면인식 로봇(200)에 출력하므로,
서비스를 공급하는 직원은 상기 소비자 정보를 보고 고객의 이력을 파악하여 응대하는 것을 특징으로 하는 안면인식 로봇을 이용한 고객관리 시스템.
In using the facial recognition camera 100,
After the face recognition camera 100 recognizes the face of the customer entering the store,
Since the consumer information including the past purchase history of the customer is output to the counter face recognition robot 200,
The employee supplying the service is a customer management system using a facial recognition robot, characterized in that by looking at the consumer information and grasping the customer's history.
제1항에서,
상기 고객이 신규 고객인 경우,
상기 카운터 안면인식 로봇(200)에 신규고객임을 알리고,
상기 신규 고객의 구매 정보를 중앙관리서버에 기록하는 것을 특징으로 하는 안면인식 로봇을 이용한 고객관리 시스템.
In claim 1,
If the customer is a new customer,
Inform the counter facial recognition robot 200 that the new customer,
Customer management system using a facial recognition robot, characterized in that for recording the purchase information of the new customer to the central management server.
제1항에서,
상기 소비자 정보에는 상기 고객의 구매패턴을 고려하여 추천 구매 예상 품목이 포함되는 것을 특징으로 하는 안면인식 로봇을 이용한 고객관리 시스템.

In claim 1,
The customer information includes a customer management system using a facial recognition robot, characterized in that the expected purchase item in consideration of the purchase pattern of the customer.

KR1020180047664A 2018-04-25 2018-04-25 the serving system using the face information recognition type robot KR102117824B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180047664A KR102117824B1 (en) 2018-04-25 2018-04-25 the serving system using the face information recognition type robot

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180047664A KR102117824B1 (en) 2018-04-25 2018-04-25 the serving system using the face information recognition type robot

Publications (2)

Publication Number Publication Date
KR20190130215A true KR20190130215A (en) 2019-11-22
KR102117824B1 KR102117824B1 (en) 2020-06-03

Family

ID=68731037

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180047664A KR102117824B1 (en) 2018-04-25 2018-04-25 the serving system using the face information recognition type robot

Country Status (1)

Country Link
KR (1) KR102117824B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110910035A (en) * 2019-12-02 2020-03-24 中国银行股份有限公司 Method and device for evaluating service area in bank outlet
CN113327130A (en) * 2021-06-01 2021-08-31 深圳市爱深盈通信息技术有限公司 Control method of greeting robot, greeting robot and storage medium
KR20210156169A (en) 2020-06-17 2021-12-24 현대자동차주식회사 Customer Reception Robot

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102503014B1 (en) 2020-08-10 2023-02-24 김종만 Artificial intelligence-based non-contact admission management system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010096930A (en) * 2000-04-19 2001-11-08 정만원 Method and System for Personalized Menu Recommendation Service
KR20080008528A (en) 2006-07-20 2008-01-24 주식회사 유진로봇 Serving robot having function serving customer
KR20090082713A (en) * 2008-01-28 2009-07-31 한국과학기술원 System for providing restaurant customer service bases on robot agent and method therefor
KR20110040340A (en) 2009-10-14 2011-04-20 서예란 Invention for next-generation elevators that provide differentiated services to entertain users and improve dignity
KR20170082294A (en) * 2016-01-06 2017-07-14 방승온 A integration store management system using intelligent type image analysis technology

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010096930A (en) * 2000-04-19 2001-11-08 정만원 Method and System for Personalized Menu Recommendation Service
KR20080008528A (en) 2006-07-20 2008-01-24 주식회사 유진로봇 Serving robot having function serving customer
KR20090082713A (en) * 2008-01-28 2009-07-31 한국과학기술원 System for providing restaurant customer service bases on robot agent and method therefor
KR20110040340A (en) 2009-10-14 2011-04-20 서예란 Invention for next-generation elevators that provide differentiated services to entertain users and improve dignity
KR20170082294A (en) * 2016-01-06 2017-07-14 방승온 A integration store management system using intelligent type image analysis technology

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110910035A (en) * 2019-12-02 2020-03-24 中国银行股份有限公司 Method and device for evaluating service area in bank outlet
KR20210156169A (en) 2020-06-17 2021-12-24 현대자동차주식회사 Customer Reception Robot
CN113327130A (en) * 2021-06-01 2021-08-31 深圳市爱深盈通信息技术有限公司 Control method of greeting robot, greeting robot and storage medium

Also Published As

Publication number Publication date
KR102117824B1 (en) 2020-06-03

Similar Documents

Publication Publication Date Title
KR20190130215A (en) the serving system using the face information recognition type robot
US20220414713A1 (en) Information collection system, electronic shelf label, electronic pop advertising, and character information display device
US11756367B2 (en) Investigation generation in an observation and surveillance system
US11068949B2 (en) Distributed and automated transaction systems
US10445563B2 (en) Time-in-store estimation using facial recognition
WO2019056881A1 (en) Artificial intelligence-based automatic vending machine
JP2020518936A (en) Method, system, and device for detecting user interaction
US20120271785A1 (en) Adjusting a consumer experience based on a 3d captured image stream of a consumer response
CN107206601A (en) Customer service robot and related systems and methods
US11018939B1 (en) Determining product compatibility and demand
US20150220783A1 (en) Method and system for semi-automated venue monitoring
US9563914B2 (en) Using head mountable displays to provide real-time assistance to employees in a retail environment
JP2020502649A (en) Intelligent service robot and related systems and methods
US10929675B2 (en) Decentralized video tracking
US9922257B2 (en) Image auditing method and system
US20190318491A1 (en) System and method for gathering data related to quality service in a customer service environment
EP4211605A1 (en) Method and system to provide real time interior analytics using machine learning and computer vision
US10891480B2 (en) Image zone processing
CN111191995A (en) Method for realizing store intelligent monitoring and member-to-store intelligent reminding based on Internet platform
US10268855B2 (en) System and method for tracking
CN102222381A (en) Customer reception system
US20200059603A1 (en) A method of providing information about an object
CN210691491U (en) Auxiliary system for self-service terminal and self-service terminal
TWI537857B (en) Customer reception system
CN109753869A (en) The member system system of recognition of face

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant