WO2022145864A1 - 음성인식 키오스크 장치 - Google Patents

음성인식 키오스크 장치 Download PDF

Info

Publication number
WO2022145864A1
WO2022145864A1 PCT/KR2021/019612 KR2021019612W WO2022145864A1 WO 2022145864 A1 WO2022145864 A1 WO 2022145864A1 KR 2021019612 W KR2021019612 W KR 2021019612W WO 2022145864 A1 WO2022145864 A1 WO 2022145864A1
Authority
WO
WIPO (PCT)
Prior art keywords
customer
unit
information
voice
payment
Prior art date
Application number
PCT/KR2021/019612
Other languages
English (en)
French (fr)
Inventor
김규섭
Original Assignee
쿠팡 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 쿠팡 주식회사 filed Critical 쿠팡 주식회사
Publication of WO2022145864A1 publication Critical patent/WO2022145864A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F17/00—Coin-freed apparatus for hiring articles; Coin-freed facilities or services
    • G07F17/40—Coin-freed apparatus for hiring articles; Coin-freed facilities or services for devices for accepting orders, advertisements, or the like

Definitions

  • the present invention relates to a voice recognition kiosk device.
  • the voice recognition kiosk device is for implementing smart store order and untact form of store order.
  • the voice recognition kiosk device is to assist visually impaired people with in-store ordering.
  • the customer order processing unit for processing the customer's order; and a cradle on which the customer order processing unit is mounted, wherein the customer order processing unit includes a voice information input unit for receiving the customer's voice, a memory unit for storing order information corresponding to the customer's voice, and the customer's voice
  • a voice recognition kiosk device including a controller for recognizing the order information to read the order information from the memory unit and to control the order information to be exposed to the customer.
  • the voice recognition kiosk device further includes a payment information input unit for receiving payment information related to a payment method and payment information for the order information from the customer's payment method, wherein the memory unit provides a voice for the payment method Storing payment secret information, the control unit, payment method related information and voice payment secret information input from the payment information input unit and the voice information input unit to match the payment method related information and voice payment secret information stored in the memory unit In this case, payment for the order information may be processed.
  • the length of the cradle may be changed according to the height of the customer according to the control of the controller.
  • the customer order processing unit includes a camera unit that generates a customer image by photographing the customer, the control unit derives an expected key through the customer image located in a reference line or a reference area, and determines the length of the cradle according to the expected key can be adjusted
  • the voice recognition kiosk device may further include a display unit for displaying the order information, and Braille corresponding to the item of the order information may be formed on the surface of the display unit.
  • the customer order processing unit includes a camera unit for generating a customer image by photographing the customer, and the control unit derives a touchable hand height for the braille of the display unit through the customer image located in a reference line or a reference area, and the touch The length of the holder can be adjusted according to the possible hand height.
  • the voice recognition kiosk device can implement smart store order and untact form of store order since an order is made through a customer's voice recognition.
  • the voice recognition kiosk device can help visually impaired people to order in-store because orders are made through voice recognition.
  • FIG. 1 shows a voice recognition kiosk apparatus according to an embodiment of the present invention.
  • FIG. 2 is a block diagram of a customer order processing unit according to an embodiment of the present invention.
  • FIG 3 shows an example of a driving unit of a customer order processing unit according to an embodiment of the present invention.
  • FIG. 5 shows an example of a display unit in which braille is formed.
  • the voice recognition kiosk device includes a customer order processing unit 100 and a cradle. (300).
  • the customer order processing unit 100 processes the customer's order.
  • the customer order processing unit 100 may be a computing device such as a tablet PC, a personal computer, a notebook computer, a smartphone, or a store-specific POS device.
  • the customer order processing unit 100 is mounted on the cradle 300 .
  • the voice recognition kiosk device may further include a receipt output unit 500 for outputting a receipt according to the customer's order.
  • the receipt output unit 500 may also be mounted on the cradle 300 .
  • the customer order processing unit 100 may include a voice information input unit 130 , a memory unit 150 , a control unit 210 , and a driving unit 230 .
  • the voice information input unit 130 receives the customer's voice.
  • the voice information input unit 130 may include a microphone.
  • the memory unit 150 stores order information corresponding to the customer's voice.
  • the order information may include, but is not limited to, information on the main menu, information on the side menu, an order date and time period, and an order amount.
  • the sub-menu may be a menu that accompanies the main menu.
  • the side menu may include drinks, french fries, ketchup, and the like.
  • the side menu may be a type of topping.
  • the side menu may be a side dish served with the stew or meat.
  • the information on the side menu may include information on additives added to the main beverage.
  • the information on the additives may be at least one of whether syrup is added, the amount of syrup added, the sugar content according to the syrup addition, whether or not whipped cream is added, and the amount of whipped cream added.
  • the information on the side menu may include information on a side menu (eg, side dishes, types of broth, etc.) provided with the main food.
  • a side menu eg, side dishes, types of broth, etc.
  • the main menu and the sub menu of the present invention are not limited to these examples.
  • the memory unit 150 is a ROM, an optical disk drive (eg, CD, DVD, Blu-ray, etc.) for the operation of the customer order processing unit 100, a hard disk drive, a solid state drive (SSD), such as a USB drive It may include non-volatile memory.
  • the customer order processing unit 100 may include a volatile memory such as RAM for temporary storage of data.
  • various programs eg, OS, firmware, application programs, drivers, various logic or commands
  • various programs eg, OS, firmware, application programs, drivers, various logic or commands
  • the control unit 210 reads the order information from the memory unit 150 by recognizing the customer's voice and controls the order information to be exposed to the customer.
  • the control unit 210 may analyze the customer's voice waveform input through the voice information input unit 130 for voice recognition of the customer to extract a pattern of the customer's voice and the characteristics of the customer's voice.
  • the control unit 210 may recognize the customer's order information through the pattern of the customer's voice and the characteristics of the customer's voice.
  • the order information may be exposed in at least one of an auditory, visual and tactile manner.
  • the voice recognition kiosk device may include an order information output unit 110 .
  • the order information output unit 110 for exposure by an auditory method may include a speaker, and a display unit (eg, LCD, OLED, LED, etc.) for exposure by a visual method, exposure by a tactile method may include at least one of a vibrating unit (eg, a vibrating motor) for
  • the controller 210 controls the operation of the voice recognition kiosk device of the present invention, and may include, but is not limited to, a central processing unit (CPU), an application processor (AP), or a microcontroller.
  • CPU central processing unit
  • AP application processor
  • microcontroller a microcontroller
  • the voice recognition kiosk device can implement smart store order and untact form of store order since an order is made through the customer's voice recognition.
  • the voice recognition kiosk device can help visually impaired people to order in-store because orders are made through voice recognition.
  • the voice recognition kiosk device may further include a payment information input unit 190 .
  • the payment information input unit 190 may receive payment information related to payment method and payment information regarding order information from the customer's payment method.
  • the payment information input unit 190 may include a card reader for reading credit card or check card information, a communication module capable of communicating with a mobile device for mobile payment, or a code scanner capable of scanning barcodes or QR codes.
  • a card reader for reading credit card or check card information
  • a communication module capable of communicating with a mobile device for mobile payment
  • a code scanner capable of scanning barcodes or QR codes.
  • the present invention is not limited thereto.
  • the payment method related information may be check or credit card related information or mobile payment (eg, Kakao Pay, Samsung Pay, Apple Pay, etc.) related information, but is not limited thereto.
  • mobile payment eg, Kakao Pay, Samsung Pay, Apple Pay, etc.
  • the payment information may include, but is not limited to, information on the name of the store where the payment is made, the payment amount, the payment item, the payment date and time, the installment period, and the like.
  • the memory unit 150 may store voice payment secret information for the payment method.
  • the controller 210 may analyze the customer's voice waveform to extract a pattern of the customer's voice and the characteristics of the customer's voice. Accordingly, the present invention can match and store the customer's voice characteristics and customer information.
  • the control unit 210, the payment method related information and voice payment secret information input from the payment information input unit 190 and the voice information input unit 130 match the payment method related information and voice payment secret information stored in the memory unit 150 If you do, you can process payment for order information.
  • control unit 210 may perform a payment request to the customer.
  • the payment request of the controller 210 may be requested by at least one of a visual, auditory, and tactile method, and the above-described order information output unit 110 may be used.
  • the voice payment secret information may correspond to the password of the payment method.
  • the voice information input unit 130 transmits the password in voice form to the control unit 210, and the control unit 210 processes the voice corresponding to the password and stores the password in the memory unit 150. You can check whether it matches the stored voice payment secret information.
  • the voice payment secret information may include information about customer identification information and password.
  • the customer identification information may be characteristic information of the customer's voice derived by analyzing the customer's voice.
  • control unit 210 may perform two authentications for the payment means. That is, the control unit 210 may authenticate the customer of the payment means as well as authenticate the password of the payment means.
  • the height of the cradle 300 may cause inconvenience to some customers.
  • the length of the cradle 300 may be changed according to the height of the customer according to the control of the controller 210 .
  • the voice recognition kiosk device of the present invention may further include a driving unit 230 .
  • the driving unit 230 may include a driving force transmitting unit 231 and a motor (not shown). The central axis of the motor may rotate according to the direction and the number of rotations according to the control of the controller 210 .
  • the driving force transmitting unit 231 may transmit the driving force of the motor to the cradle 300 .
  • the driving force transmitting unit 231 may include a gear (eg, a rack-pigion gear) for moving the cradle 300 up and down according to the driving force.
  • the central shaft of the motor may be coupled to the pinion gear.
  • the structure of the driving unit 230 of the present invention is not limited to the structure of FIG. 3 , and the structure of the driving unit 230 may vary according to design.
  • the driving unit 230 may be implemented using a pulley instead of a gear.
  • the customer order processing unit 100 may include a camera unit 170 that generates a customer image 401 by photographing the customer.
  • the control unit 210 may derive the expected key through the customer image 401 located in the line or reference area, and adjust the length of the cradle 300 according to the expected key.
  • the customer may approach the voice recognition kiosk device of the present invention and stand on the reference line 402 or the reference area, at this time, the camera unit 170 takes a picture of the customer under the control of the control unit 210, The same customer image 401 may be created.
  • the reference line 402 or the reference area may be actually displayed on the floor on which the voice recognition kiosk device of the present invention is installed, or may be a virtual line or virtual area set only in the customer image 401 .
  • the controller 210 may recognize the position of the customer's eyes by recognizing the face of the customer image 401 .
  • the controller 210 may derive the expected height of the customer through the distance L between the position of the customer's eyes and the reference line 402 . At this time, information on the customer's key according to the distance L may be stored in advance in the memory unit 150 .
  • the control unit 210 may adjust the length of the cradle 300 by controlling the driving unit 230 according to the expected height of the customer.
  • the present invention is not limited to such a method of deriving an expected key, and various methods may be applied.
  • the voice recognition kiosk device may further include a display unit for displaying order information.
  • a display unit for displaying order information The exposure of order information to customers through the display unit of the order information output unit 110 has been described above.
  • Braille 501 corresponding to the item of order information may be formed on the surface of the display unit.
  • the order information provided in Braille 501 may be at least a part of information on the main menu and the sub menu, but is not limited thereto.
  • a touch screen may be provided on the display unit, and an order may be made by a visually impaired person touching the braille 501 or a region around the braille 501 .
  • the controller 210 may output the order information as a machine sound through the order information output unit 110 .
  • data and programs necessary for processing order information through the braille 501 may be stored in the memory unit 150 .
  • braille 501 is formed on the display unit, a visually impaired person visiting a store can smoothly place an order.
  • the customer order processing unit 100 may include a camera unit 170 that generates a customer image 401 by photographing the customer.
  • the control unit 210 derives the touchable hand height for the braille 501 of the display unit through the reference line 402 or the customer image 401 located in the reference area, and determines the length of the cradle 300 according to the touchable hand height can be adjusted
  • the length of the cradle 300 needs to be adjusted according to the height of the hand capable of touching the braille 501 .
  • the controller 210 recognizes the face of the customer image 401 to determine the position of the customer's eyes, and through the distance L between the customer's eye position and the reference line 402 , the customer's The touchable hand height LP can be derived.
  • the memory unit 150 may match and store the touchable hand height LP according to the distance L in advance, and the control unit 210 reads the touchable hand height LP from the memory unit 150 according to the distance L and reads the touchable hand height LP according to the distance L to the driving unit 230 . can control
  • the controller 210 may first identify whether the customer is visually impaired in order to control the braille 501 touch and the length of the cradle 300 by the visually impaired. To this end, the customer may be identified through the pattern and characteristics of the voice described above. A customer registration process may be performed in advance through identification of the customer. In the customer registration process, patterns and characteristics of the customer's voice and whether the person is visually impaired may be registered.
  • control unit 210 may perform voice guidance to guide the visually impaired person to stand on the reference line 402 or the reference area of FIG. 6 . . Data necessary for such voice guidance may be stored in advance in the memory unit 150 .
  • control unit 210 through the speaker of the order information output unit 110 "Customer, come a little closer.” "Customer, please step back a little.”, “Customer, please move a little further to the left. ", “Sir, please step back a little to the right.” It is possible to perform voice guidance, such as.

Landscapes

  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Computer Security & Cryptography (AREA)
  • Cash Registers Or Receiving Machines (AREA)

Abstract

본 발명의 실시예에 따른 음성인식 키오스크 장치는 고객의 주문을 처리하는 고객 주문 처리부; 및 상기 고객 주문 처리부가 거치되는 거치대를 포함하고, 상기 고객 주문 처리부는, 상기 고객의 음성을 입력받는 음성정보 입력부, 상기 고객의 음성에 해당되는 주문정보를 저장하는 메모리부, 및 상기 고객의 음성을 인식하여 상기 주문정보를 상기 메모리부로부터 읽어들여 상기 주문정보가 상기 고객에게 노출되도록 제어하는 제어부을 포함한다.

Description

음성인식 키오스크 장치
본 발명은 음성인식 키오스크 장치에 관한 것이다.
매장의 운영 효율화를 위하여 최근 매장에는 고객의 주문 정보를 입력받는 매장 키오스크 장치가 설치되고 있다.
특히 코로나 바이러스로 인한 언택트(untact) 시대를 맞이하여 주문을 자동으로 처리할 수 있는 매장 키오스크 장치에 대한 요구가 증대되고 있다.
이에 따라 주문 처리뿐만 아니라 보다 다양한 기능을 갖춘 매장 키오스크 장치에 대한 요구가 증대되고 있다.
본 발명의 실시예에 따른 음성인식 키오스크 장치는 매장 주문 스마트화 및 매장 주문의 언택트(untact)화를 구현하기 위한 것이다.
또한 본 발명의 실시예에 따른 음성인식 키오스크 장치는 시각 장애인들의 매장 내 주문을 돕기 위한 것이다.
본 출원의 과제는 이상에서 언급한 과제로 제한되지 않으며, 언급되지 않는 또 다른 과제는 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일측면에 따르면, 고객의 주문을 처리하는 고객 주문 처리부; 및 상기 고객 주문 처리부가 거치되는 거치대를 포함하고, 상기 고객 주문 처리부는, 상기 고객의 음성을 입력받는 음성정보 입력부, 상기 고객의 음성에 해당되는 주문정보를 저장하는 메모리부, 및 상기 고객의 음성을 인식하여 상기 주문정보를 상기 메모리부로부터 읽어들여 상기 주문정보가 상기 고객에게 노출되도록 제어하는 제어부을 포함하는 음성 인식 키오스크 장치가 제공된다.
본 발명의 일측면에 따른 음성인식 키오스크 장치는 결제 수단 관련 정보와 상기 주문 정보에 대한 결제 정보를 상기 고객의 결제 수단으로부터 입력받는 결제 정보 입력부를 더 포함하고, 상기 메모리부는 상기 결제 수단에 대한 음성 결제 비밀 정보를 저장하고, 상기 제어부는, 상기 결제 정보 입력부 및 상기 음성정보 입력부로부터 입력된 결제 수단 관련 정보와 음성 결제 비밀 정보가 상기 메모리부에 저장된 결제 수단 관련 정보와 음성 결제 비밀 정보와 일치할 경우, 상기 주문 정보에 대한 결제를 처리할 수 있다.
상기 거치대는 상기 제어부의 제어에 따라 상기 고객의 키에 맞추어 길이가 변할 수 있다.
상기 고객 주문 처리부는 상기 고객을 촬영하여 고객 이미지를 생성하는 카메라부를 포함하며, 상기 제어부는 기준선 또는 기준 영역에 위치한 상기 고객 이미지를 통하여 예상 키를 도출하고, 상기 예상 키에 따라 상기 거치대의 길이를 조절할 수 있다.
본 발명의 일측면에 따른 음성인식 키오스크 장치는 상기 주문정보를 표시하는 표시부를 더 포함하며, 상기 표시부의 표면에는 상기 주문정보의 항목에 해당되는 점자가 형성될 수 있다.
상기 고객 주문 처리부는 상기 고객을 촬영하여 고객 이미지를 생성하는 카메라부를 포함하며, 상기 제어부는 기준선 또는 기준 영역에 위치한 상기 고객 이미지를 통하여 상기 표시부의 점자에 대한 터치 가능 손 높이를 도출하고, 상기 터치 가능 손 높이에 따라 상기 거치대의 길이를 조절할 수 있다.
본 발명의 실시예에 따른 음성인식 키오스크 장치는 고객의 음성인식을 통하여 주문이 이루어지므로 매장 주문 스마트화 및 매장 주문의 언택트(untact)화를 구현할 수 있다.
또한 본 발명의 실시예에 따른 음성인식 키오스크 장치는 음성인식을 통하여 주문이 이루어지므로 시각장애인들의 매장 내 주문을 도울 수 있다.
본 출원의 효과는 이상에서 언급한 효과로 제한되지 않으며, 언급되지 않는 또 다른 효과는 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 실시예에 따른 음성인식 키오스크 장치를 나타낸다.
도 2는 본 발명의 실시예에 따른 고객 주문 처리부의 블록도를 나타낸다.
도 3은 본 발명의 실시예에 따른 고객 주문 처리부의 구동부의 일례를 나타낸다.
도 4 및 도 6은 고객 이미지의 일례를 나타낸다.
도 5는 점자가 형성된 표시부의 일례를 나타낸다.
이하 본 발명의 실시예에 대하여 첨부한 도면을 참조하여 상세하게 설명하기로 한다. 다만, 첨부된 도면은 본 발명의 내용을 보다 쉽게 개시하기 위하여 설명되는 것일 뿐, 본 발명의 범위가 첨부된 도면의 범위로 한정되는 것이 아님은 이 기술분야의 통상의 지식을 가진 자라면 용이하게 알 수 있을 것이다.
또한, 본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
도 1은 본 발명의 실시예에 따른 음성인식 키오스크 장치를 나타낸다. 도 2는 본 발명의 실시예에 따른 고객 주문 처리부의 블록도를 나타낸다.도 1 및 도 2에 도시된 바와 같이, 본 발명의 실시예에 따른 음성인식 키오스크 장치는 고객 주문 처리부(100) 및 거치대(300)를 포함한다.
고객 주문 처리부(100)는 고객의 주문을 처리한다. 고객 주문 처리부(100)는 태블릿 PC, 퍼스널 컴퓨터, 노트북, 스마트폰, 매장 전용 포스(POS) 장치와 같은 컴퓨팅 장치일 수 있다.
거치대(300)에는 고객 주문 처리부(100)가 거치된다. 또한 본 발명의 실시예에 따른 음성인식 키오스크 장치는 고객의 주문에 따른 영수증을 출력하는 영수증 출력부(500)를 더 포함할 수 있다. 영수증 출력부(500) 역시 거치대(300)에 거치될 수 있다.
이 때 고객 주문 처리부(100)는 음성정보 입력부(130), 메모리부(150), 제어부(210) 및 구동부(230)를 포함할 수 있다.
음성정보 입력부(130)는 고객의 음성을 입력받는다. 이를 위하여 음성정보 입력부(130)는 마이크를 포함할 수 있다.
메모리부(150)는 고객의 음성에 해당되는 주문정보를 저장한다. 주문정보는 메인 메뉴에 대한 정보, 부수 메뉴에 대한 정보, 주문 일자 및 주문 시간대, 주문 금액을 포함할 수 있으나 이에 한정되는 것은 아니다.
부수 메뉴는 메인 메뉴에 곁들여 지는 메뉴일 수 있다. 예를 들어, 메인 메뉴가 햄버거인 경우 부수 메뉴는 음료, 감자튀김, 캐찹 등일 수 있다. 메인 메뉴가 피자인 경우, 부수 메뉴는 토핑의 종류가 될 수 있다. 메인 메뉴가 찌개나 고기일 경우, 부수 메뉴는 이들 찌게나 고기에 곁들여지는 반찬일 수 있다.
메인 메뉴에 대한 정보가 메인 음료인 경우, 부수 메뉴에 대한 정보는 메인 음료에 추가되는 첨가물에 대한 정보를 포함할 수 있다. 예를 들어, 메인 음료가 카페라떼인 경우, 첨가물에 대한 정보는 시럽 추가 여부, 시럽 추가량, 시럽 추가에 따른 당도, 휘핑 크림 추가 여부, 휘핑 크림 추가량 중 적어도 하나일 수 있다.
또한 메인 메뉴에 대한 정보가 메인 음식인 경우, 부수 메뉴에 대한 정보는 메인 음식과 함께 제공되는 사이드 메뉴(예를 들어, 반찬, 육수의 종류 등)에 대한 정보를 포함할 수 있다.
본 발명의 메인 메뉴 및 부수 메뉴는 이와 같은 예들에 한정되는 것은 아니다.
메모리부(150)는 고객 주문 처리부(100)의 동작을 위한 ROM, 광학 디스크 드라이브(예를 들어, CD, DVD, 블루레이 등), 하드 디스크 드라이브, SSD(Solid State Drive), USB 드라이브와 같은 비휘발성 메모리를 포함할 수 있다. 이외에 고객 주문 처리부(100)는 데이터의 임시 저장을 위하여 RAM과 같은 휘발성 메모리를 포함할 수도 있다.
메모리부(150)에는 앞서 설명된 정보들 뿐만 아니라 본 발명의 실시예에 따른 음성인식 키오스크 장치의 동작을 위한 다양한 프로그램(예를 들어, OS, 펌웨어, 응용 프로그램, 드라이버, 다양한 로직이나 명령)을 저장할 수 있다.
제어부(210)는 고객의 음성을 인식하여 주문정보를 메모리부(150)로부터 읽어들여 주문정보가 고객에게 노출되도록 제어한다. 제어부(210)는 고객의 음성 인식을 위하여 음성정보 입력부(130)를 통하여 입력된 고객의 음성 파형을 분석하여 고객 음성의 패턴 및 고객 음성의 특징을 추출할 수 있다. 제어부(210)는 고객 음성의 패턴 및 고객 음성의 특징을 통하여 고객의 주문정보를 인식할 수 있다.
주문정보의 노출은 청각적, 시각적 및 촉각적 방법 적어도 하나의 방법으로 노출될 수 있다. 주문정보의 노출을 위하여 본 발명의 실시예에 따른 음성인식 키오스카 장치는 주문정보 출력부(110)를 포함할 수 있다.
청각적 방법으로의 노출을 위한 주문정보 출력부(110)는 스피커를 포함할 수 있고, 시각적 방법으로의 노출을 위한 표시부(예를 들어, LCD, OLED, LED 등), 촉각적 방법으로의 노출을 위한 진동부(예를 들어, 진동 모터) 중 적어도 하나를 포함할 수 있다.
제어부(210)는 본 발명의 음성인식 키오스크 장치의 동작을 제어하며, CPU(Central Processing Unit), AP(Applicaton Processor), 또는 마이크로 컨트롤러(Microcontroller)를 포함할 수 있으나 이에 한정되는 것은 아니다.
이와 같이 본 발명의 실시예에 따른 음성인식 키오스크 장치는 고객의 음성인식을 통하여 주문이 이루어지므로 매장 주문 스마트화 및 매장 주문의 언택트(untact)화를 구현할 수 있다.
또한 본 발명의 실시예에 따른 음성인식 키오스크 장치는 음성인식을 통하여 주문이 이루어지므로 시각장애인들의 매장 내 주문을 도울 수 있다.
한편, 본 발명의 실시예에 따른 음성인식 키오스크 장치는 결제 정보 입력부(190)를 더 포함할 수 있다. 결제 정보 입력부(190)는 결제 수단 관련 정보와 주문 정보에 대한 결제 정보를 고객의 결제 수단으로부터 입력받을 수 있다.
결제 정보 입력부(190)는 신용 카드 또는 체크 카드의 정보를 읽기 위한 카드 리더기, 모바일 결제를 위한 모바일 장치와 통신할 수 있는 통신 모듈 또는 바코드나 QR 코드를 스캐닝할 수 있는 코드 스캐너를 포함할 수 있으나 이에 한정되는 것은 아니다.
결제 수단 관련 정보는 체크 카드 또는 신용 카드 관련 정보나 모바일 결제(예를 들어, 카카오 페이, 삼성 페이, 애플 페이 등) 관련 정보일 수 있으나 이에 한정되는 것은 아니다.
결제 정보는 결제가 이루어진 매장의 이름, 결제 금액, 결제 품목, 결제 일시, 할부 기간 등에 대한 정보를 포함할 수 있으나 이에 한정되는 것은 아니다.
이 때 메모리부(150)는 결제 수단에 대한 음성 결제 비밀 정보를 저장할 수 있다. 앞서 설명된 바와 같이, 제어부(210)는 고객의 음성 파형을 분석하여 고객 음성의 패턴 및 고객 음성의 특징을 추출할 수 있다. 이에 따라 본 발명은 고객의 음성 특징과 고객 정보를 매칭시켜 저장할 수 있다.
제어부(210)는, 결제 정보 입력부(190) 및 음성정보 입력부(130)로부터 입력된 결제 수단 관련 정보와 음성 결제 비밀 정보가 메모리부(150)에 저장된 결제 수단 관련 정보와 음성 결제 비밀 정보와 일치할 경우, 주문 정보에 대한 결제를 처리할 수 있다.
이에 앞서 제어부(210)는 고객에게 결제 요청을 수행할 수 있다. 제어부(210)의 결제 요청은 시각적, 청각적 및 촉각적 방법 중 적어도 하나의 방법으로 요청될 수 있으며, 앞서 설명된 주문정보 출력부(110)가 이용될 수 있다.
음성 결제 비밀 정보는 결제 수단의 비밀 번호에 해당될 수 있다. 고객이 비밀 번호를 음성으로 말하면, 음성정보 입력부(130)는 음성 형태의 비밀 번호를 제어부(210)로 전달하고, 제어부(210)는 비밀 번호에 해당되는 음성을 처리하여 메모리부(150)에 저장된 음성 결제 비밀 정보와 일치하는 지를 확인할 수 있다.
이 때 음성 결제 비빌 정보는 고객 식별 정보와 비밀 번호에 대한 정보를 포함할 수 있다. 고객 식별 정보는 고객의 음성을 분석하여 도출된 고객 음성의 특징 정보일 수 있다.
이에 따라 제어부(210)는 결제 수단에 두가지 인증을 수행할 수 있다. 즉, 제어부(210)는 결제 수단의 고객을 인증할 수 있을 뿐만 아니라 결제 수단의 비밀번호를 인증할 수 있다.
결제 수단에 대한 두 가지 인증을 통하여 음성 인식을 통한 주문 및 거래가 안전하게 이루어질 수 있다. 이에 따라 일반 고객 뿐만 아니라 시각 장애인 고객 역시 매장에서 안전하게 주문 및 거래를 수행할 수 있다.
한편, 매장을 방문하는 고객들은 다양한 키을 지니는데, 이들 고객이 본 발명의 음성인식 키오스크 장치를 조작해야 하므로 거치대(300)의 높이가 일부 고객에게 불편함을 초래할 수 있다. 이를 해결하기 위하여 거치대(300)는 제어부(210)의 제어에 따라 고객의 키에 맞추어 길이가 변할 수 있다.
도 2에 도시된 바와 같이, 본 발명의 음성인식 키오스크 장치는 구동부(230)를 더 포함할 수 있다. 예를 들어, 도 3에 도시된 바와 같이, 구동부(230)는 구동력 전달부(231)와 모터(미도시)를 포함할 수 있다. 모터는 제어부(210)의 제어에 따른 방향 및 회전수에 맞추어 중심축이 회전할 수 있다.
구동력 전달부(231)는 모터의 구동력을 거치대(300)에 전달할 수 있다. 예를 들어, 도 3에 도시된 바와 같이 구동력 전달부(231)는 구동력에 따라 거치대(300)를 상하로 움직이기 위한 기어(예를 들어, 랙-피기언 기어)를 포함할 수 있다. 도 3에서 모터의 중심축은 피니언 기어와 결합할 수 있다.
본 발명의 구동부(230)의 구조는 도 3의 구조에 한정되는 것은 아니며 설계에 따른 구동부(230)의 구조가 달라질 수 있다. 예를 들어, 구동부(230)는 기어 대신에 풀리를 이용하여 구현될 수도 있다.
한편, 고객 주문 처리부(100)는 고객을 촬영하여 고객 이미지(401)를 생성하는 카메라부(170)를 포함할 수 있다. 이 때 제어부(210)는 선 또는 기준 영역에 위치한 고객 이미지(401)를 통하여 예상 키를 도출하고, 예상 키에 따라 거치대(300)의 길이를 조절할 수 있다.
예를 들어, 고객이 본 발명의 음성인식 키오스크 장치에 다가와서 기준선(402)이나 기준 영역에 설 수 있으며, 이 때 카메라부(170)는 제어부(210)의 제어에 따라 고객을 촬영하여 도 4와 같은 고객 이미지(401)를 생성할 수 있다.
기준선(402)이나 기준 영역은 본 발명의 음성인식 키오스크 장치가 설치된 바닥 상에 실재 표시된 것일 수도 있고, 고객 이미지(401)에만 설정된 가상선이나 가상 영역일 수도 있다.
제어부(210)는 고객 이미지(401)의 안면을 인식하여 고객의 눈의 위치를 파악할 수 있다. 제어부(210)는 고객의 눈의 위치와 기준선(402) 사이의 거리 L을 통하여 고객의 예상 키를 도출할 수 있다. 이 때 거리 L에 따른 고객의 키에 대한 정보는 메모리부(150)에 미리 저장될 수 있다.
제어부(210)는 고객의 예상 키에 따라 구동부(230)를 제어함으로써 거치대(300)의 길이를 조절할 수 있다.
본 발명은 이와 같은 예상 키의 도출 방식에 한정되지 않고 다양한 방법이 적용될 수 있다.
한편, 본 발명의 실시예에 따른 음성인식 키오스크 장치는 주문정보를 표시하는 표시부를 더 포함할 수 있다. 앞서 주문정보 출력부(110)의 표시부를 통하여 주문정보가 고객에게 노출하는 것에 대하여 설명되었다.
이 때 도 5에 도시된 바와 같이, 표시부의 표면에는 주문정보의 항목에 해당되는 점자(501)가 형성될 수 있다. 점자(501)로 제공되는 주문정보는 메인 메뉴 및 부수 메뉴에 대한 정보 중 적어도 일부일 수 있으나 이에 한정되는 것은 아니다.
표시부에는 터치 스크린이 구비될 수 있으며, 시각 장애인이 점자(501)를 터치하거나 점자(501) 주변의 영역을 터치함으로써 주문이 이루어질 수 있다. 또한 점자(501) 또는 점자(501) 주변의 영역의 터치에 따라 제어부(210)는 주문정보 출력부(110)를 통하여 주문정보가 기계음으로 출력되도록 할 수 있다. 이와 같이 점자(501)를 통한 주문정보의 처리에 필요한 데이터 및 프로그램은 메모리부(150)에 저장될 수 있다.
이와 같은 점자(501)가 표시부에 형성됨으로써 매장을 방문한 시각 장애인이 주문을 원활하게 수행할 수 있다.
한편, 고객 주문 처리부(100)는 고객을 촬영하여 고객 이미지(401)를 생성하는 카메라부(170)를 포함할 수 있다. 제어부(210)는 기준선(402) 또는 기준 영역에 위치한 고객 이미지(401)를 통하여 표시부의 점자(501)에 대한 터치 가능 손 높이를 도출하고, 터치 가능 손 높이에 따라 거치대(300)의 길이를 조절할 수 있다.
시각 장애인이 점자(501) 터치를 위해서는 거치대(300)의 길이가 점자(501)에 대한 터치 가능 손 높이에 맞추어 조절될 필요가 있다. 도 6에 도시된 바와 같이, 제어부(210)는 고객 이미지(401)의 안면을 인식하여 고객의 눈의 위치를 파악하고, 고객의 눈의 위치와 기준선(402) 사이의 거리 L을 통하여 고객의 터치 가능 손 높이 LP를 도출할 수 있다.
메모리부(150)는 거리 L에 따른 터치 가능 손 높이 LP를 매칭시켜 미리 저장할 수 있으며, 제어부(210)는 거리 L에 따라 메모리부(150)로부터 터치 가능 손 높이 LP를 읽어들여 구동부(230)를 제어할 수 있다.
제어부(210)는 시각 장애인의 점자(501) 터치 및 거치대(300) 길이 조절을 위하여 고객이 시각 장애인인지 아닌지에 대한 식별을 먼저 수행할 수 있다. 이를 위하여 앞서 설명된 음성의 패턴 및 특징을 통하여 고객이 식별될 수 있다. 고객의 식별을 통하여 고객 등록 과정이 사전에 이루어질 수 있는데, 고객 등록 과정에서 고객 음성의 패턴 및 특징과 시각 장애인 여부가 등록될 수 있다.
제어부(210)가 고객의 식별을 통하여 상기 고객을 시각 장애인으로 파악할 경우, 제어부(210)는 도 6의 기준선(402)이나 기준 영역에 시각 장애인이 설 수 있도록 유도하는 음성 안내를 수행할 수 있다. 이와 같은 음성 안내에 필요한 데이터는 메모리부(150)에 미리 저장될 수 있다.
예를 들어, 제어부(210)는 주문정보 출력부(110)의 스피커를 통하여 "고객님, 조금 더 다가오세요.", "고객님, 조금 더 물러서 주세요.", "고객님, 조금 더 좌측으로 이동해주세요.", "고객님, 조금 더 우측으로 물러서 주세요." 등과 같은 음성 안내를 수행할 수 있다.
이상과 같이 본 발명에 따른 실시예를 살펴보았으며, 앞서 설명된 실시예 이외에도 본 발명이 그 취지나 범주에서 벗어남이 없이 다른 특정 형태로 구체화 될 수 있다는 사실은 해당 기술에 통상의 지식을 가진 이들에게는 자명한 것이다. 그러므로, 상술된 실시예는 제한적인 것이 아니라 예시적인 것으로 여겨져야 하고, 이에 따라 본 발명은 상술한 설명에 한정되지 않고 첨부된 청구항의 범주 및 그 동등 범위 내에서 변경될 수도 있다.

Claims (4)

  1. 고객의 주문을 처리하는 고객 주문 처리부; 및
    상기 고객 주문 처리부가 거치되는 거치대를 포함하고,
    상기 고객 주문 처리부는,
    상기 고객의 음성을 입력받는 음성정보 입력부,
    상기 고객의 음성에 해당되는 주문정보를 저장하는 메모리부, 및
    상기 고객의 음성을 인식하여 상기 주문정보를 상기 메모리부로부터 읽어들여 상기 주문정보가 상기 고객에게 노출되도록 제어하는 제어부을 포함하고,
    상기 거치대는 상기 제어부의 제어에 따라 상기 고객의 키에 맞추어 길이가 변하며,
    상기 고객 주문 처리부는 상기 고객을 촬영하여 고객 이미지를 생성하는 카메라부를 포함하며, 상기 제어부는 기준선 또는 기준 영역에 위치한 상기 고객 이미지를 통하여 예상 키를 도출하고, 상기 예상 키에 따라 상기 거치대의 길이를 조절하고,
    상기 기준선이나 기준 영역은 상기 거치대가 설치된 바닥 상에 실재 표시된 것이며,
    상기 제어부는 상기 고객 이미지의 안면을 인식하여 고객의 눈의 위치를 파악하고, 상기 고객 이미지에 표시된 상기 고객의 눈의 위치와 상기 기준선 사이의 거리를 통하여 고객의 예상 키를 도출하며, 상기 도축된 고객의 예상 키에 따라 상기 거치대의 길이를 조절하는 것을 특징으로 하는 음성 인식 키오스크 장치.
  2. 제1항에 있어서,
    결제 수단 관련 정보와 상기 주문 정보에 대한 결제 정보를 상기 고객의 결제 수단으로부터 입력받는 결제 정보 입력부를 더 포함하고,
    상기 메모리부는 상기 결제 수단에 대한 음성 결제 비밀 정보를 저장하고,
    상기 제어부는,
    상기 결제 정보 입력부 및 상기 음성정보 입력부로부터 입력된 결제 수단 관련 정보와 음성 결제 비밀 정보가 상기 메모리부에 저장된 결제 수단 관련 정보와 음성 결제 비밀 정보와 일치할 경우, 상기 주문 정보에 대한 결제를 처리하는 것을 특징으로 하는 음성 인식 키오스크 장치.
  3. 제1항에 있어서,
    상기 주문정보를 표시하는 표시부를 더 포함하며,
    상기 표시부의 표면에는 상기 주문정보의 항목에 해당되는 점자가 형성되는 것을 특징으로 하는 음성인식 키오스크 장치.
  4. 제3항에 있어서,
    상기 고객 주문 처리부는 상기 고객을 촬영하여 고객 이미지를 생성하는 카메라부를 포함하며,
    상기 제어부는 기준선 또는 기준 영역에 위치한 상기 고객 이미지를 통하여 상기 표시부의 점자에 대한 터치 가능 손 높이를 도출하고, 상기 터치 가능 손 높이에 따라 상기 거치대의 길이를 조절하는 것을 특징으로 하는 음성인식 키오스크 장치.
PCT/KR2021/019612 2020-12-30 2021-12-22 음성인식 키오스크 장치 WO2022145864A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2020-0187557 2020-12-30
KR1020200187557A KR102306092B1 (ko) 2020-12-30 2020-12-30 음성인식 키오스크 장치

Publications (1)

Publication Number Publication Date
WO2022145864A1 true WO2022145864A1 (ko) 2022-07-07

Family

ID=77922998

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2021/019612 WO2022145864A1 (ko) 2020-12-30 2021-12-22 음성인식 키오스크 장치

Country Status (2)

Country Link
KR (1) KR102306092B1 (ko)
WO (1) WO2022145864A1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102306092B1 (ko) * 2020-12-30 2021-09-28 주식회사 진승정보기술 음성인식 키오스크 장치
KR102573965B1 (ko) * 2021-10-29 2023-09-01 동의대학교 산학협력단 소외계층을 위한 차세대 디지털 키오스크
KR102484224B1 (ko) 2022-02-04 2023-01-04 주식회사 굿타임즈 숙박 시설에 설치되는 키오스크의 동작 방법 및 장치

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090107217A (ko) * 2008-04-08 2009-10-13 석호상 다기능 키오스크 시스템
KR20120097978A (ko) * 2011-02-28 2012-09-05 노틸러스효성 주식회사 자동 높이조절이 가능한 로봇 키오스크
KR101446437B1 (ko) * 2013-07-26 2014-10-06 유창경 키오스크
KR20140143047A (ko) * 2013-06-05 2014-12-15 브이피 주식회사 음성 정보를 이용한 결제 방법 및 결제 중계 서버
KR102100703B1 (ko) * 2019-11-25 2020-04-14 정원석 복수의 입력수단이 구비된 음성 인식 키오스크
KR102306092B1 (ko) * 2020-12-30 2021-09-28 주식회사 진승정보기술 음성인식 키오스크 장치

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050005830A (ko) 2003-07-07 2005-01-15 김민식 디지털 기기와 연동이 가능한 웹 기반의 키오스크

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090107217A (ko) * 2008-04-08 2009-10-13 석호상 다기능 키오스크 시스템
KR20120097978A (ko) * 2011-02-28 2012-09-05 노틸러스효성 주식회사 자동 높이조절이 가능한 로봇 키오스크
KR20140143047A (ko) * 2013-06-05 2014-12-15 브이피 주식회사 음성 정보를 이용한 결제 방법 및 결제 중계 서버
KR101446437B1 (ko) * 2013-07-26 2014-10-06 유창경 키오스크
KR102100703B1 (ko) * 2019-11-25 2020-04-14 정원석 복수의 입력수단이 구비된 음성 인식 키오스크
KR102306092B1 (ko) * 2020-12-30 2021-09-28 주식회사 진승정보기술 음성인식 키오스크 장치

Also Published As

Publication number Publication date
KR102306092B1 (ko) 2021-09-28

Similar Documents

Publication Publication Date Title
WO2022145864A1 (ko) 음성인식 키오스크 장치
US11310223B2 (en) Identity authentication method and apparatus
US8873147B1 (en) Chord authentication via a multi-touch interface
WO2022145863A1 (ko) 매장 키오스크 장치
WO2022154604A1 (ko) 인공지능기반 유저 반응형 키오스크 결제 시스템
CN107633627A (zh) 一种无卡取款方法、装置、设备和存储介质
CN103390316A (zh) 一种自助服务设备
JP7500603B2 (ja) キャッシュレス決済システムおよび情報端末
US10628810B2 (en) Automatic teller machine
JP2007025825A (ja) 自動取引装置およびそれによる取引承認方法並びに自動取引装置用取引承認プログラム
US10133967B2 (en) Card and card printing control device
US10496882B2 (en) Coded ocular lens for identification
JP2006330957A (ja) 本人確認システム
JP2001266218A (ja) 顧客操作端末の遠隔操作支援システム
KR20120029846A (ko) 순번 대기 시스템
US10657240B2 (en) Information display device
US11054983B2 (en) Gestural touch interface
JPH10143715A (ja) ボディアクションによる顧客誘導システム及び方法
CN113066238B (zh) 交互式柜台业务处理系统及方法
JP2007041977A (ja) 個人認証装置
CN218852371U (zh) 卡座式银行自助柜台
JP7570986B2 (ja) 本人確認装置
JP2019114077A (ja) 自動取引装置、覗き見検知出力方法およびプログラム
US20230142200A1 (en) Non-transitory storage medium, processing method for portable terminal, and portable terminal
US10776617B2 (en) Sign-language automated teller machine

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21915662

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21915662

Country of ref document: EP

Kind code of ref document: A1