KR102530107B1 - Non-faced food order service providing apparatus - Google Patents

Non-faced food order service providing apparatus Download PDF

Info

Publication number
KR102530107B1
KR102530107B1 KR1020200121091A KR20200121091A KR102530107B1 KR 102530107 B1 KR102530107 B1 KR 102530107B1 KR 1020200121091 A KR1020200121091 A KR 1020200121091A KR 20200121091 A KR20200121091 A KR 20200121091A KR 102530107 B1 KR102530107 B1 KR 102530107B1
Authority
KR
South Korea
Prior art keywords
augmented reality
food
menu
unit
scenario
Prior art date
Application number
KR1020200121091A
Other languages
Korean (ko)
Other versions
KR20220039863A (en
Inventor
이정현
Original Assignee
주식회사 코아소프트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 코아소프트 filed Critical 주식회사 코아소프트
Priority to KR1020200121091A priority Critical patent/KR102530107B1/en
Publication of KR20220039863A publication Critical patent/KR20220039863A/en
Application granted granted Critical
Publication of KR102530107B1 publication Critical patent/KR102530107B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/12—Payment architectures specially adapted for electronic shopping systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
    • G06Q20/322—Aspects of commerce using mobile devices [M-devices]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/12—Hotels or restaurants
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality

Abstract

본 발명은 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치에 관한 것으로서, 매장 직원을 통하지 않고 비대면으로 증강현실을 통해 음식을 주문 결제하는 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치에 관한 것이다. 이를 위해 음식 매장에서 제공하는 음식정보 증강현실 콘텐츠 접속을 위한 콘텐츠 접속 매개체를 제공하고, 콘텐츠 접속 매개체를 터치 또는 인식함에 따라 음식정보 증강현실 콘텐츠 제공 사이트로 안내하거나 또는 증강현실 어플리케이션 앱을 실행하도록 하는 증강현실 콘텐츠 링크부, 증강현실 콘텐츠 링크부의 접속 연결에 따라 음식 매장에서 제공하는 다양한 음식에 대한 증강현실 음식정보 콘텐츠를 접속하는 이용자에게 증강현실을 통해 체험하도록 하고, 증강현실 음식정보 콘텐츠의 증강현실 음식메뉴를 선택할 수 있도록 제공하는 음식정보 증강현실 콘텐츠 제공부, 증강현실 음식메뉴의 선택에 따라 음식을 주문하는 음식 주문부, 주문한 음식에 대한 결제를 제공하는 주문 결제부를 포함하는 것을 특징으로 하는 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치가 개시된다.The present invention relates to an augmented reality non-face-to-face food order and payment service providing device that interacts with a customer, and relates to an augmented reality non-face-to-face food order that interacts with a customer who orders and pays for food through augmented reality non-face-to-face without going through a store employee. It relates to a payment service providing device. To this end, it provides a content access medium for accessing food information augmented reality content provided by food stores, and guides you to a food information augmented reality content providing site or executes an augmented reality application app as you touch or recognize the content access medium According to the augmented reality content linking unit and the connection connection of the augmented reality content linking unit, users accessing augmented reality food information contents for various foods provided by food stores are allowed to experience through augmented reality, and augmented reality of augmented reality food information contents Customers characterized by including a food information augmented reality content providing unit providing food menu selection, a food ordering unit ordering food according to the selection of the augmented reality food menu, and an order payment unit providing payment for the ordered food An augmented reality non-face-to-face food order payment service providing device that interacts with is disclosed.

Description

고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치{Non-faced food order service providing apparatus}Augmented reality non-face-to-face food order payment service providing apparatus interacting with customers {Non-faced food order service providing apparatus}

본 발명은 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치에 관한 것으로서, 보다 상세하게는 매장 직원을 통하지 않고 비대면으로 증강현실을 통해 음식을 주문 결제하는 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치에 관한 것이다.The present invention relates to an augmented reality non-face-to-face food order and payment service providing device that interacts with customers, and more particularly, augmented reality that interacts with customers who order and pay for food through non-face-to-face augmented reality without going through a store employee. It relates to a non-face-to-face food order payment service providing device.

최근 코로나로 인한, 대면 대화가 어려운 상황에서 고객들이 해당 음식점의 종업원과 직접 대화하지 않고도 웹이나 어플리케이션(앱)을 통해 음식에 대한 정보를 제공받을 수 있으면서 주문 결재까지 한번에 이루어질 수 있는 관련 기술의 개발이 시급한 문제점이 있다.In a situation where face-to-face conversation is difficult due to the recent corona, development of related technology that allows customers to receive information about food through the web or application (app) without having to talk directly with the restaurant's employees, and even complete order payment at once There is this urgent problem.

대한민국 등록특허공보 10-1632958Korean Registered Patent Publication No. 10-1632958 대한민국 등록특허공보 10-2108535Republic of Korea Patent Registration No. 10-2108535 대한민국 공개특허공보 10-2019-0142850Republic of Korea Patent Publication No. 10-2019-0142850 대한민국 등록특허공보 10-2062888Republic of Korea Registered Patent Publication 10-2062888

따라서, 본 발명은 전술한 바와 같은 문제점을 해결하기 위하여 창출된 것으로서, 음식 매장 방문시에 직원을 통하지 않고 비대면으로 음식주문에서 결재까지 제공할 수 있는 발명을 제공하는데 그 목적이 있다.Accordingly, the present invention was created to solve the above-described problems, and an object of the present invention is to provide an invention that can provide from food order to payment in a non-face-to-face manner without going through an employee when visiting a food store.

그러나, 본 발명의 목적들은 상기에 언급된 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.However, the objects of the present invention are not limited to the above-mentioned objects, and other objects not mentioned will be clearly understood by those skilled in the art from the description below.

전술한 본 발명의 목적은, 음식 매장에서 제공하는 음식정보 증강현실 콘텐츠 접속을 위한 콘텐츠 접속 매개체를 제공하고, 콘텐츠 접속 매개체를 터치 또는 인식함에 따라 음식정보 증강현실 콘텐츠 제공 사이트로 안내하거나 또는 증강현실 어플리케이션 앱을 실행하도록 하는 증강현실 콘텐츠 링크부, 증강현실 콘텐츠 링크부의 접속 연결에 따라 음식 매장에서 제공하는 다양한 음식에 대한 증강현실 음식정보 콘텐츠를 접속하는 이용자에게 증강현실을 통해 체험하도록 하고, 증강현실 음식정보 콘텐츠의 증강현실 음식메뉴를 선택할 수 있도록 제공하는 음식정보 증강현실 콘텐츠 제공부, 증강현실 음식메뉴의 선택에 따라 음식을 주문하는 음식 주문부, 주문한 음식에 대한 결제를 제공하는 주문 결제부를 포함하는 것을 특징으로 하는 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치를 제공함으로써 달성될 수 있다.An object of the present invention described above is to provide a content access medium for accessing food information augmented reality content provided by a food store, and to guide to a food information augmented reality content providing site or augmented reality content access medium by touching or recognizing the content access medium. According to the augmented reality content link unit that executes the application app, and the connection connection of the augmented reality content link unit, users accessing augmented reality food information contents for various foods provided by food stores are allowed to experience through augmented reality, and augmented reality Includes a food information augmented reality content providing unit that allows users to select augmented reality food menus of food information contents, a food ordering unit that orders food according to the selection of augmented reality food menus, and an order payment unit that provides payment for ordered food It can be achieved by providing an augmented reality non-face-to-face food order payment service providing device that interacts with customers, characterized in that.

또한, 단말기를 통해 음식 매장의 식탁 테이블 영역을 촬영함으로써 고객 응대, 음식정보 및 엔터테인먼트를 제공할 수 있는 가상 캐릭터를 증강현실로 구현 및 연출하도록 하는 증강현실 가상 캐릭터 구현부, 고객 응대 및 엔터테인먼트의 제공에 따른 가상 캐릭터의 증강현실 대응 시나리오를 생성 및 제공하고, 증강현실 음식메뉴의 선택에 따른 가상 캐릭터의 증강현실 대응 시나리오, 증강현실 음식정보 제공 시나리오 및 증강현실 음식메뉴 구현 시나리오를 생성 및 제공하는 증강현실 시나리오 제공부를 더 포함한다.In addition, by photographing the dining table area of the food store through the terminal, an augmented reality virtual character implementation unit that implements and directs a virtual character capable of providing customer service, food information and entertainment in augmented reality, and providing customer service and entertainment Augmentation that creates and provides augmented reality response scenarios of virtual characters according to augmented reality response scenarios, augmented reality food information provision scenarios, and augmented reality food menu implementation scenarios of virtual characters according to the selection of augmented reality food menus. A reality scenario providing unit is further included.

또한, 음식정보 증강현실 콘텐츠 제공부는 증강현실 콘텐츠 링크부의 접속 연결에 따라 음식메뉴별로 3D로 구현된 음식 메뉴판이 증강현실로 제공되는 증강현실 음식메뉴판 구현부, 증강현실 음식 메뉴판에 포함된 증강현실 음식메뉴 중 적어도 어느 하나의 선택을 감지하는 증강현실 음식메뉴 선택 감지부, 증강현실 음식메뉴의 선택에 따라 선택된 음식메뉴에 대한 음식정보를 가상 캐릭터의 증강현실 대응 시나리오에 따라 설명하도록 제어하는 증강현실 음식정보 제공부, 증강현실 음식메뉴의 선택에 따라 선택된 음식메뉴에 대한 3D 이미지를 증강현실 음식메뉴 구현 시나리오에 따라 연출되도록 하는 증강현실 음식메뉴 이미지 연출부를 포함한다.In addition, the food information augmented reality content providing unit provides augmented reality food menu board implementation unit in which food menu boards implemented in 3D for each food menu are provided in augmented reality according to the connection connection of the augmented reality content link unit, augmentation included in the augmented reality food menu board An augmented reality food menu selection detection unit that detects selection of at least one of the real food menus, and augmentation that controls food information about the food menu selected according to the augmented reality corresponding scenario of the virtual character to be explained according to the selection of the augmented reality food menu. It includes a real food information providing unit and an augmented reality food menu image directing unit for directing a 3D image of the food menu selected according to the selection of the augmented reality food menu according to an augmented reality food menu implementation scenario.

또한, 증강현실 음식메뉴의 선택에 따라 선택된 음식메뉴의 적어도 일부의 객체를 증강현실 음식메뉴 구현 시나리오에 따라 생동감 있는 모션 이미지로 연출하도록 하는 증강현실 음식메뉴 모션 연출부, 증강현실 음식메뉴의 선택에 따라 선택된 음식메뉴의 적어도 일부의 객체를 증강현실 음식메뉴 구현 시나리오에 따라 생동감 있는 소리로 연출하도록 하는 증강현실 음식메뉴 소리 연출부, 증강현실 음식메뉴의 선택에 따라 선택된 음식메뉴의 적어도 일부의 객체를 증강현실 음식메뉴 구현 시나리오에 따라 생동감 있는 배경 이미지로 연출하도록 하는 증강현실 음식메뉴 배경 연출부를 포함한다.In addition, according to the selection of the augmented reality food menu motion direction unit for directing at least some objects of the food menu selected according to the selection of the augmented reality food menu as a lively motion image according to the augmented reality food menu implementation scenario, according to the selection of the augmented reality food menu An augmented reality food menu sound directing unit for directing at least some objects of the selected food menu with lively sounds according to an augmented reality food menu implementation scenario, and at least some objects of the selected food menu according to the selection of the augmented reality food menu in augmented reality. An augmented reality food menu background directing unit for producing a lively background image according to a food menu implementation scenario is included.

또한, 증강현실 시나리오 제공부는 음식 메뉴별로 가상 캐릭터의 제1 증강현실 대응 시나리오 및 증강현실 음식메뉴 구현 시나리오를 생성 및 제공하는 음식메뉴별 증강현실 시나리오 제공부, 주문 고객별로 가상 캐릭터의 제2 증강현실 대응 시나리오 및 증강현실 음식메뉴 구현 시나리오를 생성 및 제공하는 주문고객별 증강현실 시나리오 제공부, 고객 응대에 따른 가상 캐릭터의 제3 증강현실 대응 시나리오를 생성 및 제공하는 고객응대 증강현실 시나리오 제공부, 고객 불만 사항 접수에 따른 가상 캐릭터의 제4 증강현실 대응 시나리오를 생성 및 제공하는 고객 불만대처 증강현실 시나리오 제공부, 엔터테인먼트의 제공에 따른 가상 캐릭터의 제5 증강현실 대응 시나리오 및 엔터테인먼트 증강현실 연출 시나리오를 생성 및 제공하는 엔터테인먼트 증강현실 시나리오 제공부를 포함한다.In addition, the augmented reality scenario providing unit creates and provides augmented reality scenarios for each food menu that creates and provides first augmented reality response scenarios and augmented reality food menu implementation scenarios for virtual characters for each food menu, and second augmented reality for virtual characters for each ordering customer. Augmented reality scenario provision unit for each ordering customer that creates and provides response scenarios and augmented reality food menu implementation scenarios, customer response augmented reality scenario provision unit that creates and provides a third augmented reality response scenario of virtual characters according to customer response, customer A customer complaint handling augmented reality scenario providing unit that generates and provides a 4th augmented reality response scenario of a virtual character in response to a complaint, generates a 5th augmented reality response scenario of a virtual character and an entertainment augmented reality directing scenario according to the provision of entertainment. And it includes an entertainment augmented reality scenario providing unit.

또한, 단말기를 통해 음식 매장의 식탁 테이블 영역을 촬영함으로써 가상 캐릭터의 제5 증강현실 대응 시나리오 및 엔터테인먼트 증강현실 연출 시나리오에 따라 음식 매장 방문고객에게 가상 캐릭터의 연출을 포함하여 증강현실을 통해 체험하도록 하는 증강현실 엔터테인먼트 연출부를 더 포함한다.In addition, by photographing the dining table area of the food store through the terminal, the virtual character's fifth augmented reality response scenario and entertainment augmented reality directing scenario allow customers visiting the food store to experience through augmented reality, including directing the virtual character It further includes an augmented reality entertainment directing unit.

또한, 증강현실 엔터테인먼트 연출부는 선택된 음식메뉴의 조리과정에 상응하도록 시간 동기되면서 엔터테인먼트 증강현실 연출 시나리오에 따라 증강현실을 통해 애니메이션으로 조리과정을 연출하며, 음식 메뉴별 및 주문 고객별 가상 캐릭터의 대응 시나리오 및 엔터테인먼트 증강현실 연출 시나리오에 따라 가상 캐릭터를 포함한 조리과정이 증강현실을 통해 애니메이션으로 체험되도록 하는 증강현실 조리과정 애니메이션 연출부, 음식 매장의 매장 홍보 영상을 매장홍보 증강현실 시나리오 및 엔터테인먼트 증강현실 연출 시나리오에 따라 가상 캐릭터를 포함하여 증강현실을 통해 애니메이션으로 체험되도록 하는 증강현실 매장홍보 애니메이션 연출부, 엔터테인먼트의 제공을 위해 가상 캐릭터의 제5 증강현실 대응 시나리오 및 엔터테인먼트 증강현실 연출 시나리오에 따라 가상 캐릭터를 포함하여 증강현실을 통해 애니메이션으로 체험되도록 하는 증강현실 엔터테인먼트 애니메이션 연출부를 포함한다.In addition, the augmented reality entertainment directing unit directs the cooking process with animation through augmented reality according to the entertainment augmented reality directing scenario while being synchronized in time to correspond to the cooking process of the selected food menu, and corresponding scenarios of virtual characters for each food menu and each ordering customer. and augmented reality cooking process animation directing unit that allows the cooking process including virtual characters to be experienced as animation through augmented reality according to the entertainment augmented reality directing scenario, store promotion video of the food store to store promotion augmented reality scenario and entertainment augmented reality directing scenario Augmented reality store promotion animation directing unit for experiencing animation through augmented reality, including virtual characters according to augmented reality including virtual characters according to the fifth augmented reality response scenario of virtual characters and entertainment augmented reality directing scenarios to provide entertainment It includes an augmented reality entertainment animation directing unit to experience animation through reality.

또한, 선택된 음식메뉴의 조리과정에 필요한 시간을 산출하는 메뉴 조리시간 산출부, 조리과정에 필요한 시간을 메뉴 조리시간 산출부로부터 입력받으며, 입력된 조리과정 시간이 동기되어 증강현실 조리과정 애니메이션 연출부에 의해 증강현실로 체험되도록 동기 제어하는 메뉴 조리과정 동기부를 포함한다.In addition, a menu cooking time calculation unit that calculates the time required for the cooking process of the selected food menu, the time required for the cooking process is input from the menu cooking time calculation unit, and the input cooking process time is synchronized to the augmented reality cooking process animation production unit. and a menu cooking process synchronization unit that synchronizes control so that it is experienced as augmented reality by the user.

또한, 음식정보 증강현실 콘텐츠 접속에서 음식정보 증강현실 콘텐츠 제공 사이트 접속까지 또는 음식정보 증강현실 콘텐츠 접속에서 증강현실 어플리케이션 앱 실행까지의 접속 시간을 제어하는 제1 실행속도 제어부, 음식정보 증강현실 콘텐츠 제공을 위한 데이터 로드 시간을 제어하는 제2 실행속도 제어부, 주문 결제부를 통한 고객 주문에서 주문메뉴 주방 전달시간까지의 시간을 제어하는 제3 실행속도 제어부를 더 포함한다.In addition, a first execution speed controller that controls the access time from accessing food information augmented reality content to accessing food information augmented reality content providing site or from food information augmented reality content access to augmented reality application app execution, providing food information augmented reality content A second execution speed control unit controlling a data load time for the second execution speed controller and a third execution speed control unit controlling a time from a customer order through the order payment unit to delivery time of the order menu to the kitchen.

전술한 바와 같은 본 발명에 의하면 음식 매장 방문시에 직원을 통하지 않고 비대면으로 음식주문에서 결재까지 제공할 수 있는 효과가 있다.According to the present invention as described above, when visiting a food store, there is an effect that can be provided from food ordering to payment in a non-face-to-face manner without going through an employee.

본 명세서에 첨부되는 다음의 도면들은 본 발명의 바람직한 일실시예를 예시하는 것이며, 발명의 상세한 설명과 함께 본 발명의 기술적 사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석 되어서는 아니 된다.
도 1은 본 발명의 일실시예에 따른 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치의 대략적인 구성을 나타낸 도면이고,
도 2 및 도 3은 본 발명의 일실시예에 따른 음식정보 증강현실 콘텐츠 제공부의 대략적인 구성과 연결관계를 나타낸 도면이고,
도 4는 본 발명의 일실시예에 따른 고객응대 증강현실 시나리오 제공부와 고객 불만대처 증강현실 시나리오 제공부의 개략적인 연결관계를 도시한 도면이고,
도 5는 본 발명의 일실시예에 따른 증강현실 엔터테인먼트 연출부의 대략적인 구성과 연결관계를 나타낸 도면이고,
도 6은 본 발명의 일실시예에 따른 실행시간, 로드시간, 전달시간의 정해진 시간을 나타낸 도면이고,
도 7(a)는 랍스타 찜 요리 메뉴가 증강현실을 통해 체험되는 것을 나타낸 도면이고,
도 7(b)는 본 발명의 일실시예에 따른 다양한 앱 메뉴를 나타낸 도면이고,
도 7(c)는 본 발명의 일실시예에 따른 랍스타 찜 요리 메뉴가 장바구니에 담겨 결재를 대기하고 있는 것을 나타낸 도면이다.The following drawings attached to this specification illustrate a preferred embodiment of the present invention, and together with the detailed description of the present invention serve to further understand the technical idea of the present invention, the present invention is limited to those described in the drawings. It should not be construed as limiting.
1 is a diagram showing a schematic configuration of an augmented reality non-face-to-face food order payment service providing device interacting with a customer according to an embodiment of the present invention;
2 and 3 are diagrams showing the approximate configuration and connection relationship of the food information augmented reality content provider according to an embodiment of the present invention,
4 is a diagram showing a schematic connection relationship between a customer response augmented reality scenario providing unit and a customer complaint handling augmented reality scenario providing unit according to an embodiment of the present invention;
5 is a diagram showing an approximate configuration and connection relationship of an augmented reality entertainment directing unit according to an embodiment of the present invention;
6 is a diagram showing predetermined times of execution time, load time, and delivery time according to an embodiment of the present invention;
7 (a) is a diagram showing that the steamed lobster dish menu is experienced through augmented reality;
7(b) is a diagram showing various app menus according to an embodiment of the present invention;
7(c) is a view showing that a steamed lobster dish menu according to an embodiment of the present invention is put in a shopping cart and is waiting for payment.

이하, 도면을 참조하여 본 발명의 바람직한 일실시예에 대해서 설명한다. 또한, 이하에 설명하는 일실시예는 특허청구범위에 기재된 본 발명의 내용을 부당하게 한정하지 않으며, 본 실시 형태에서 설명되는 구성 전체가 본 발명의 해결 수단으로서 필수적이라고는 할 수 없다. 또한, 종래 기술 및 당업자에게 자명한 사항은 설명을 생략할 수도 있으며, 이러한 생략된 구성요소(방법) 및 기능의 설명은 본 발명의 기술적 사상을 벗어나지 아니하는 범위내에서 충분히 참조될 수 있을 것이다.Hereinafter, a preferred embodiment of the present invention will be described with reference to the drawings. In addition, the embodiment described below does not unduly limit the contents of the present invention described in the claims, and the entire configuration described in the present embodiment cannot be said to be essential as a solution to the present invention. In addition, descriptions of matters obvious to prior art and those skilled in the art may be omitted, and descriptions of these omitted components (methods) and functions may be sufficiently referred to within the scope not departing from the technical spirit of the present invention.

본 발명의 일실시예에 따른 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치는 도 1에 도시된 바와 같이 음식 주문에 따른 음식정보의 증강현실 체험을 위해 카메라부(100), 증강현실 콘텐츠 링크부(200), 음식정보 증강현실 콘텐츠 제공부(300), 증강현실 시나리오 제공부(400), 증강현실 가상 캐릭터 구현부(500)를 대략적으로 포함하며, 음식 메뉴의 선택이 완료되면 후속적으로 음식 주문부(600), 주문 결제부(700), 주문메뉴 수령 알림부(800), 및 주문상황 디지털 보드부(900)를 통해 음식주문과 결제 및 주문상황을 실시간으로 파악할 수 있다. 이하에서는 첨부된 도면을 참고하여 본 발명의 일실시예에 따른 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치에 대해 상세히 설명하기로 한다. 한편, 본 발명에 기재된 AR은 Augmented reality의 약자로서 증강현실을 의미한다.As shown in FIG. 1, an augmented reality non-face-to-face food order payment service providing device interacting with a customer according to an embodiment of the present invention includes a camera unit 100, augmented reality experience of food information according to a food order, It roughly includes a reality content linking unit 200, a food information augmented reality content providing unit 300, an augmented reality scenario providing unit 400, and an augmented reality virtual character implementation unit 500, and when the selection of the food menu is completed Subsequently, food ordering, payment, and order status can be grasped in real time through the food ordering unit 600, the order payment unit 700, the order menu receipt notification unit 800, and the order status digital board unit 900. . Hereinafter, an augmented reality non-face-to-face food order payment service providing device interacting with a customer according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings. On the other hand, AR described in the present invention means augmented reality as an abbreviation of Augmented reality.

도 1에 도시된 바와 같이 카메라부(100)는 음식 매장을 방문하는 방문 고객의 단말기에 부착된 것이다. 방문 고객은 음식 매장에 배치된 식탁 테이블에 착석한 후에 자신의 단말기에 구비된 카메라부(100)를 통해 식탁 테이블의 일 영역을 촬영함으로써 본 발명의 일실시예에 따른 다양한 증강현실이 체험될 수 있다. 다만, 필요에 따라 단말기는 음식 매장에 기 배치된 단말일 수도 있다. 본 발명의 일실시예에 따른 다양한 증강현실 체험은 일예로서 음식 메뉴에 대한 증강현실 체험과 엔터테인먼트를 위한 증강현실 체험일 수 있다.As shown in FIG. 1 , the camera unit 100 is attached to a terminal of a visiting customer visiting a food store. Visiting customers can experience various augmented reality according to an embodiment of the present invention by taking a picture of an area of the dining table through the camera unit 100 provided in their terminal after being seated at a dining table arranged in a food store. there is. However, if necessary, the terminal may be a terminal pre-arranged in a food store. Various augmented reality experiences according to an embodiment of the present invention may be, for example, an augmented reality experience for a food menu and an augmented reality experience for entertainment.

증강현실 콘텐츠 링크부(200)는 본 발명에서 제공되는 다양한 증강현실 체험을 위해 증강현실 체험 사이트로 접속 연결하거나 증강현실 체험 앱을 실행하도록 한다. 즉, 증강현실 콘텐츠 링크부(200)는 방문 고객에 의해 음식매장에서 제공된 URL이 터치 되거나 제공된 QR코드가 인식됨으로써 증강현실 체험이 이루어지도록 관련 WEB 사이트를 접속 연결하거나 단말기에 설치된 증강현실 체험 앱이 실행되도록 한다. QR코드는 방문 고객이 카메라부(100)를 통해 식탁 테이블 영역을 촬영함으로써 인식될 수 있으며, QR코드의 인식에 따라 URL이 접속 연결되거나 증강현실 체험 입이 실행될 수 있다. 다만, URL WEB 접속은 QR코드 이외의 방법에 의해서도 충분히 접속될 수 있다.The augmented reality content linking unit 200 connects to an augmented reality experience site or executes an augmented reality experience app for various augmented reality experiences provided in the present invention. That is, the augmented reality content link unit 200 connects and connects related WEB sites so that the augmented reality experience is achieved by touching the URL provided by the food store or recognizing the provided QR code by the visiting customer, or the augmented reality experience app installed on the terminal. make it run The QR code can be recognized by a visiting customer photographing the dining table area through the camera unit 100, and a URL can be connected or an augmented reality experience can be executed according to the recognition of the QR code. However, URL WEB access can be sufficiently accessed by methods other than QR codes.

음식정보 증강현실 콘텐츠 제공부(300)는 URL 링크 접속에 따른 웹이나 증강현실 체험 앱을 통해 증강현실 콘텐츠를 제공한다. 이를 위해 음식정보 증강현실 콘텐츠 제공부(300)는 도 2 및 도 3에 도시된 바와 같이 증강현실 음식메뉴판 구현부(311), 증강현실 음식메뉴 선택 감지부(312), 증강현실 음식정보 제공부(313), 증강현실 음식메뉴 이미지 연출부(321), 증강현실 음식메뉴 모션 연출부(322), 증강현실 음식소리 연출부(323), 증강현실 음식메뉴 배경 연출부(324)를 포함한다.The food information augmented reality content providing unit 300 provides augmented reality content through the web or augmented reality experience app according to URL link access. To this end, the food information augmented reality content provider 300 includes an augmented reality food menu implementation unit 311, an augmented reality food menu selection detector 312, and an augmented reality food information agent as shown in FIGS. 2 and 3. It includes a study 313, an augmented reality food menu image directing unit 321, an augmented reality food menu motion directing unit 322, an augmented reality food sound directing unit 323, and an augmented reality food menu background directing unit 324.

도 2 및 도 3에 도시된 증강현실 음식메뉴판 구현부(311)는 증강현실 콘텐츠 링크부(200)의 접속 연결에 따라 음식메뉴별로 3D로 구현된 음식 메뉴판을 증강현실로 방문 고객에게 체험 제공한다. 따라서 증강현실 음식메뉴판 구현부(311)는 방문 고객이 식탁 테이블 영역을 촬영하는 경우 식탁 테이블 영역의 실제 이미지와 음식 매장에서 판매하는 각종 음식에 대한 3D 음식 이미지를 서로 병합하여 음식 메뉴판을 통해 증강현실 체험이 되도록 한다. 증강현실 음식메뉴판 구현부(311)는 각종 음식에 대한 3D 음식 이미지를 방문 고객이 편리하게 볼 수 있고 쉽게 선택할 수 있도록 구현되며, 후술하는 증강현실 음식메뉴 이미지 연출부(321)에 의해 3D 음식 이미지가 제공된다. 한편, 증강현실 음식메뉴판 구현부(311)는 해당 매장의 인기 메뉴, 추천 메뉴, 할인 메뉴 등, 사이드 메뉴에 대한 메뉴 구성과, 칼로리 정보, 영양 정보, 음식 구성정보에 대한 메뉴 구성 등 카테고리별로 메뉴를 구성하여 방문 고객이 편리하고 쉽게 음식을 선택할 수 있도록 카테고리별로 음식정보를 제공할 수 있다. The augmented reality food menu board implementation unit 311 shown in FIGS. 2 and 3 experiences the food menu board implemented in 3D for each food menu to visiting customers in augmented reality according to the connection connection of the augmented reality content link unit 200. to provide. Therefore, the augmented reality food menu implementation unit 311 merges the actual image of the dining table table area with the 3D food images of various foods sold in the food store when the visiting customer photographs the dining table area, and displays the food through the food menu board. Make it an augmented reality experience. The augmented reality food menu board implementation unit 311 is implemented so that visiting customers can conveniently view and easily select 3D food images for various foods, and by the augmented reality food menu image production unit 321 to be described later, 3D food images is provided. On the other hand, the augmented reality food menu board implementation unit 311 organizes menus for side menus such as popular menus, recommended menus, and discount menus of the corresponding store, and organizes menus for calorie information, nutrition information, and food composition information by category. By configuring a menu, it is possible to provide food information by category so that visiting customers can conveniently and easily select food.

증강현실 음식메뉴 선택 감지부(312)는 증강현실 음식 메뉴판에 포함된 음식메뉴 중 적어도 어느 하나의 선택을 감지한다. 즉, 방문 고객이 자신의 단말기를 통해 증강현실 음식메뉴판 구현부(311)에 접속한 후에 자신이 원하는 음식 메뉴를 선택하면 선택된 음식메뉴를 감지한다.The augmented reality food menu selection detection unit 312 detects selection of at least one of the food menus included in the augmented reality food menu board. That is, when a visiting customer accesses the augmented reality food menu board implementing unit 311 through his/her terminal and selects a desired food menu, the selected food menu is sensed.

증강현실 음식정보 제공부(313)는 선택된 음식메뉴에 대한 음식정보를 매장 직원의 도움없이 비대면으로 증강현실 가상 캐릭터를 이용하여 설명하도록 제어한다. 증강현실 가상 캐릭터는 후술하는 증강현실 가상 캐릭터 구현부(500)에 의해 구현되며, 가상 캐릭터 구현부(500)는 증강현실 가상 캐릭터의 음식메뉴별 제공 시나리오에 따라 가상 캐릭터를 구현시킴으로써 가상 캐릭터가 음식정보를 방문 고객에게 설명하도록 한다. 일예로서, 음식메뉴 중 "랍스타 찜 요리"가 음식 메뉴판에서 선택된 경우에 카메라부(100)가 촬영하고 있는 "실제 식탁 테이블 이미지"와 "3D 랍스타 찜 요리 이미지"가 서로 병합되어 증강현실로 방문 고객에게 체험되며, 이때, 랍스타 찜 요리에 대한 음식정보를 가상 캐릭터가 증강현실 가상 캐릭터의 음식정보 제공 시나리오에 따라 설명할 수 있다. The augmented reality food information providing unit 313 controls the food information for the selected food menu to be described using augmented reality virtual characters in a non-face-to-face manner without the help of a store employee. The augmented reality virtual character is implemented by the augmented reality virtual character implementation unit 500, which will be described later, and the virtual character implementation unit 500 implements the virtual character according to the provided scenario for each food menu of the augmented reality virtual character, so that the virtual character can eat food. Provide information to visiting customers. As an example, when “steamed lobster dish” is selected from the food menu board, the “real dining table image” and the “3D steamed lobster dish image” captured by the camera unit 100 are merged with each other and visited in augmented reality. It is experienced by the customer, and at this time, the virtual character can explain the food information about the steamed lobster dish according to the food information provision scenario of the augmented reality virtual character.

도 2의 음식메뉴별 증강현실 시나리오 제공부(401)에서 생성 및 제공하는 가상 캐릭터의 음식메뉴별 제공 시나리오는 다양한 시나리오를 가질 수 있다. 일예로서 "랍스타 찜 요리"의 경우에 가상 캐릭터가 랍스타 찜 요리를 설명할 수 있도록 음식메뉴별 증강현실 음식정보 제공 시나리오와 랍스타의 모션, 소리 및 배경을 연출할 수 있는 음식메뉴별 증강현실 음식메뉴 구현 시나리오를 포함할 수 있다. The provision scenario for each food menu of the virtual character generated and provided by the augmented reality scenario provider 401 for each food menu of FIG. 2 may have various scenarios. As an example, in the case of "steamed lobster dish", virtual characters provide augmented reality food information for each food menu so that the virtual character can explain the steamed lobster dish, and implement an augmented reality food menu for each food menu that can produce motion, sound and background of the lobster Scenarios may be included.

한편, 도 3과 같이 주문 고객별 증강현실 시나리오 제공부(402)에서 생성 및 제공하는 가상 캐릭터의 주문고객별 제공 시나리오는 다양한 시나리오를 가질 수 있다. 일예로서 "방문 고객이 어린이"이고, "랍스타 찜 요리"의 경우에 가상 캐릭터가 랍스타 찜 요리를 설명할 수 있도록 주문고객별 증강현실 음식정보 제공 시나리오와 랍스타의 모션, 소리 및 배경을 연출할 수 있는 주문고객별 증강현실 음식메뉴 구현 시나리오를 포함할 수 있다. 방문 고객이 어린이인 경우와 성인인 경우를 비교해 보면 어린이의 경우에는 가상 캐릭터가 음식정보를 설명할 때 코믹하고 재미있게 설명하도록 하거나 또는 랍스타의 동작을 코믹하게 모션 움직임 하도록 하여 관심을 유발하도록 할 수 있다.On the other hand, as shown in FIG. 3 , the provision scenario for each ordering customer of the virtual character generated and provided by the augmented reality scenario providing unit 402 for each ordering customer may have various scenarios. As an example, in the case of "visiting customers are children" and "steamed lobster dish", virtual characters can provide augmented reality food information for each ordering customer so that the virtual character can explain the steamed lobster dish and the motion, sound and background of the lobster Augmented reality food menu implementation scenarios for each ordering customer may be included. Comparing the case where the visiting customers are children and adults, in the case of children, the virtual character can explain the food information in a comical and fun way, or the motion of the lobster can be comically moved to arouse interest. .

따라서 도 2 및 도 3에 도시된 음식메뉴별 증강현실 시나리오 제공부(401) 또는 주문고객별 증강현실 시나리오 제공부(402)에서 각각 제공하는 시나리오에 따라 증강현실 가상 캐릭터 구현부(500)가 구현 동작된다. 또한, 증강현실 음식정보 제공부(313), 증강현실 음식메뉴 이미지 연출부(321), 증강현실 음식메뉴 모션 연출부(322), 증강현실 음식메뉴 소리 연출부(323), 증강현실 음식메뉴 화면 연출부(324)도 음식메뉴별 증강현실 시나리오 제공부(401) 또는 주문고객별 증강현실 시나리오 제공부(402)에서 각각 제공하는 시나리오에 따라 연출된다.Therefore, the augmented reality virtual character implementation unit 500 is implemented according to the scenarios provided by the augmented reality scenario providing unit 401 for each food menu or the augmented reality scenario providing unit 402 for each ordering customer shown in FIGS. 2 and 3 . it works In addition, augmented reality food information providing unit 313, augmented reality food menu image production unit 321, augmented reality food menu motion production unit 322, augmented reality food menu sound production unit 323, augmented reality food menu screen production unit 324 ) is also produced according to the scenarios provided by the augmented reality scenario provider 401 for each food menu or the augmented reality scenario provider 402 for each ordering customer.

방문 고객 정보 확인은 일예로서 해당 단말기의 정보를 이용함으로써 알 수 있거나 음식 매장의 고객 정보 대조 및 분석을 통해 알 수 있다. Visiting customer information can be known, for example, by using the information of the corresponding terminal or by collating and analyzing the customer information of the food store.

증강현실 음식메뉴 이미지 연출부(321)는 방문 고객의 음식메뉴의 선택에 따라 선택된 음식메뉴에 대한 3D 이미지를 음식메뉴별 증강현실 음식메뉴 구현 시나리오 또는 방문고객별 증강현실 음식메뉴 구현 시나리오에 따라 3D 이미지 연출한다. 일예로서, 방문 고객 중 어린이가 "랍스타 찜 요리"를 선택한 경우에 도 7에 도시된 바와 같이 증강현실 음식메뉴 구현 시나리오에 따라 랍스타 위에서 김이 모락모락 나도록 연출할 수 있다. 다른 예로서 방문 고객 중 어른이 "랍스타 찜 요리"를 선택한 경우에 증강현실 음식메뉴 구현 시나리오에 따라 랍스타 찜 요리와 함께 즐길 수 있는 와인 또느 술을 포함하여 3D 이미지 연출할 수 있다.The augmented reality food menu image production unit 321 converts the 3D image of the food menu selected according to the customer's selection of the food menu into a 3D image according to the augmented reality food menu implementation scenario for each food menu or the augmented reality food menu implementation scenario for each visiting customer. directing As an example, when a child among visiting customers selects “steamed lobster dish”, as shown in FIG. 7 , the lobster may be steamed according to an augmented reality food menu implementation scenario. As another example, when an adult among visiting customers selects "steamed lobster dish", a 3D image may be created including wine or alcohol that can be enjoyed together with the steamed lobster dish according to an augmented reality food menu implementation scenario.

증강현실 음식메뉴 모션 연출부(322)는 음식메뉴의 선택에 따라 선택된 음식메뉴의 적어도 일부의 객체를 음식메뉴별 및 주문고객별 증강현실 음식메뉴 구현 시나리오에 따라 생동감 있는 모션 이미지로 연출한다. 일예로서 "랍스타 찜 요리"가 도 7에 도시된 바와 같이 선택된 경우에 "랍스타" 객체를 생동감 있는 모션 이미지로 움직이도록 연출(랍스타가 실제 움직이는 것과 동일하게 움직이도록)한다. 이때, "랍스타" 객체와 함께 "김이 모락모락 나는" 객체를 생동감 있는 연속되는 움직임으로 표현 연출할 수도 있다. 한편, 방문 고객 중 어린이가 "랍스타 찜 요리"를 선택한 경우에 증강현실 음식메뉴 구현 시나리오에 따라 랍스타가 코믹하게 움직이도록 연출할 수 있다.The augmented reality food menu motion directing unit 322 directs at least some objects of the food menu selected according to the selection of the food menu into a lively motion image according to an augmented reality food menu realization scenario for each food menu and for each ordering customer. As an example, when “steamed lobster dish” is selected as shown in FIG. 7 , the “lobster” object is directed to move in a lively motion image (to move in the same way as the lobster actually moves). At this time, along with the "lobster" object, the "steamy" object may be expressed and directed with a lively continuous movement. Meanwhile, when a child among visiting customers selects “steamed lobster dish,” the lobster may move comically according to an augmented reality food menu implementation scenario.

증강현실 음식메뉴 소리 연출부(323)는 음식메뉴의 선택에 따라 선택된 음식메뉴의 적어도 일부의 객체를 음식메뉴별 및 주문고객별 증강현실 음식메뉴 구현 시나리오에 따라 생동감 있는 소리로 연출한다. 일예로서 "랍스타 찜 요리"가 도 7에 도시된 바와 같이 선택된 경우에 "랍스타" 객체의 소리를 실제 살아있는 것과 동일하게 생동감 있는 소리로 연출(랍스타가 실제 소리 내는 것과 동일하게 소리 내도록)한다. 이때, "랍스타" 객체와 함께 "김이 모락모락 나는" 객체를 생동감 있는 소리로 표현 연출할 수도 있다. 한편, 방문 고객 중 어린이가 "랍스타 찜 요리"를 선택한 경우에 증강현실 음식메뉴 구현 시나리오에 따라 랍스타가 코믹하게 움직일 때 나는 소리를 연출할 수 있다.The augmented reality food menu sound production unit 323 creates a lively sound for at least some objects of the food menu selected according to the selection of the food menu according to the augmented reality food menu realization scenario for each food menu and for each ordering customer. As an example, when “steamed lobster dish” is selected as shown in FIG. 7 , the sound of the “lobster” object is produced as a lively sound as if it were actually alive (so that the lobster makes the same sound as the actual sound). At this time, along with the "lobster" object, the "steamy" object may be expressed and produced with a lively sound. On the other hand, when a child among visiting customers selects "steamed lobster dish", a sound generated when the lobster moves comically may be produced according to an augmented reality food menu implementation scenario.

증강현실 음식메뉴 배경 연출부(324)는 음식메뉴의 선택에 따라 선택된 음식메뉴의 적어도 일부의 객체를 음식메뉴별 및 주문고객별 증강현실 음식메뉴 구현 시나리오에 따라 생동감 있는 배경 이미지로 연출한다. 일예로서, 방문 고객이 "랍스타 찜 요리"를 선택한 경우에 도 7에 도시된 바와 같이 증강현실 음식메뉴 구현 시나리오에 따라 랍스타 위에서 김이 모락모락 나도록 배경 연출하거나 또는 랍스타의 색상이 살아 있을 때의 색상에서 점차 익어 갈 때의 색상으로 점점 붉게 변해가도록 연출할 수 있다. The augmented reality food menu background designing unit 324 displays at least some objects of the food menu selected according to the selection of the food menu as a lively background image according to the augmented reality food menu realization scenario for each food menu and for each ordering customer. As an example, when a visiting customer selects "steamed lobster dish", as shown in FIG. 7, according to the augmented reality food menu implementation scenario, the background is directed so that steam is steamed on the lobster, or the color when the color of the lobster is alive It can be directed so that it gradually changes to red with the color when it is gradually ripening.

증강현실 시나리오 제공부(400)는 가상 캐릭터가 고객 응대 및 엔터테인먼트를 제공할 수 있도록 증강현실 가상 캐릭터의 대응 시나리오를 생성 및 제공하고, 음식메뉴 선택 및 주문고객의 성향에 따른 증강현실 가상 캐릭터의 대응 시나리오, 증강현실 음식정보 제공 시나리오 및 증강현실 음식메뉴 구현 시나리오를 생성 및 제공한다. 이를 위해 음식메뉴별 증강현실 시나리오 제공부(401), 주문고개별 증강현실 시나리오 제공부(402), 고객응대 증강현실 시나리오 제공부(403), 고객 불만대처 증강현실 시나리오 제공부(404), 엔터테인먼트 증강현실 시나리오 제공부(401)를 포함한다.The augmented reality scenario providing unit 400 generates and provides corresponding scenarios of augmented reality virtual characters so that the virtual characters can respond to customers and provide entertainment, and respond to augmented reality virtual characters according to the preferences of customers who select food menus and order. Create and provide scenarios, augmented reality food information provision scenarios, and augmented reality food menu implementation scenarios. To this end, an augmented reality scenario providing unit 401 for each food menu, an augmented reality scenario providing unit 402 for each order, an augmented reality scenario providing unit 403 for customer response, an augmented reality scenario providing unit 404 for handling customer complaints, and entertainment It includes an augmented reality scenario providing unit 401 .

음식메뉴별 증강현실 시나리오 제공부(401)는 가상 캐릭터의 음식메뉴별 증강현실 대응 시나리오, 음식메뉴별 증강현실 음식정보 제공 시나리오, 음식메뉴별 음식메뉴 구현 시나리오를 생성 및 제공한다.The augmented reality scenario providing unit 401 for each food menu generates and provides an augmented reality response scenario for each food menu of a virtual character, a scenario for providing augmented reality food information for each food menu, and a food menu implementation scenario for each food menu.

주문고객별 증강현실 시나리오 제공부(402)는 가상 캐릭터의 주문고객별 증강현실 대응 시나리오, 주문고객별 증강현실 음식정보 제공 시나리오, 주문고객별 증강현실 음식메뉴 구현 시나리오를 생성 및 제공한다.The augmented reality scenario providing unit 402 for each ordering customer generates and provides an augmented reality response scenario for each ordering customer of a virtual character, an augmented reality food information providing scenario for each ordering customer, and an augmented reality food menu implementation scenario for each ordering customer.

도 4에 도시된 고객응대 증강현실 시나리오 제공부(403)는 고객 응대에 따른 제1 가상 캐릭터의 고객응대 증강현실 대응 시나리오를 생성 및 제공한다. 고객응대 증강현실 가상 캐릭터의 대응 시나리오는 일예로서 방문 고객이 메뉴음식을 선택하고 주문하기까지의 가상 캐릭터의 대응 시나리오를 생성 및 제공한다.The customer response augmented reality scenario providing unit 403 shown in FIG. 4 generates and provides a customer response augmented reality response scenario of a first virtual character according to customer response. As an example, a corresponding scenario of a customer-facing augmented reality virtual character is created and provided, for example, a corresponding scenario of a virtual character until a visiting customer selects menu food and places an order.

고객 불만대처 증강현실 시나리오 제공부(404)는 고객 불만 사항 접수에 따른 제2 가상 캐릭터의 고객응대 증강현실 대응 시나리오를 생성 및 제공한다. 고객응대 증강현실 가상 캐릭터의 대응 시나리오는 일예로서 방문 고객이 주문한 음식과 다른 음식이 제공되거나 방문 고객의 요청사항을 응대하기 위한 가상 캐릭터의 대응 시나리오를 생성 및 제공한다.The customer complaint handling augmented reality scenario providing unit 404 generates and provides a customer response augmented reality response scenario of the second virtual character according to customer complaint reception. As an example, the response scenario of the augmented reality virtual character for customer response is to generate and provide a response scenario of the virtual character to provide food different from the food ordered by the visiting customer or to respond to the request of the visiting customer.

엔터테인먼트 증강현실 시나리오 제공부(405)는 음식 주문 전 또는 음식 주문 후의 막간의 시간을 이용하여 방문 고객에게 엔터테인먼트를 제공하기 위한 시나리오로서 엔터테인먼트의 제공에 따른 가상 캐릭터의 엔터테인먼트 증강현실 대응 시나리오 및 엔터테인먼트 증강현실 연출 시나리오를 생성 및 제공한다. 고객에게 제공되는 엔터테인먼트 증강현실 연출 시나리오는 음식메뉴와 주문고객에 따라 달라질 수 있으며, 이와 별개로 주문 음식을 기다릴 때 단순히 즐길 수 있도록 가상 캐릭터가 애니메이션으로 제공되는 증강현실 연출일 수 있다. The entertainment augmented reality scenario providing unit 405 is a scenario for providing entertainment to visiting customers using an intermission before or after ordering food, and an entertainment augmented reality response scenario and entertainment augmented reality of a virtual character according to the provision of entertainment. Create and provide directing scenarios. The entertainment augmented reality presentation scenario provided to the customer may vary depending on the food menu and the ordering customer, and separately, it may be an augmented reality presentation in which a virtual character is provided as an animation so that the user can simply enjoy while waiting for the food ordered.

증강현실 가상 캐릭터 구현부(500)는 단말기를 통해 음식 매장의 식탁 테이블 영역을 촬영함으로써 실제 이미지와 병합되어 연출 구현되는 가상의 캐릭터를 구현하는 것으로서 고객 응대, 음식정보 및 엔터테인먼트의 상황에 맞게 상술한 각 가상 캐릭터의 구현 시나리오에 따라 가상 캐릭터를 구현 및 연출한다.The augmented reality virtual character implementation unit 500 realizes a virtual character that is merged with a real image and directed and implemented by photographing the dining table area of a food store through a terminal, and is described above according to customer service, food information, and entertainment situations. Implement and direct a virtual character according to the implementation scenario of each virtual character.

도 5에 도시된 바와 같이 증강현실 엔터테인먼트 연출부(450)는 단말기를 통해 음식 매장의 식탁 테이블 영역을 촬영함으로써 가상 캐릭터의 엔터테인먼트 증강현실 대응 시나리오 및 엔터테인먼트 증강현실 연출 시나리오에 따라 음식 매장 방문고객에게 가상 캐릭터의 연출을 포함하여 증강현실을 통해 각종 엔터테인먼트를 체험하도록 한다. 이를 위해 증강현실 엔터테인먼트 연출부(450)는 증강현실 조리과정 애니메이션 연출부(451), 증강현실 매장홍보 애니메이션 연출부(452), 증강현실 엔터테인먼트 애니메이션 연출부(453)를 포함한다.As shown in FIG. 5 , the augmented reality entertainment directing unit 450 photographs the table area of the dining table of the food store through the terminal, and provides virtual characters to customers visiting the food store according to the entertainment augmented reality response scenario of the virtual character and the entertainment augmented reality directing scenario. Experience various entertainment through augmented reality, including directing. To this end, the augmented reality entertainment directing unit 450 includes an augmented reality cooking process animation directing unit 451, an augmented reality store promotion animation directing unit 452, and an augmented reality entertainment animation directing unit 453.

증강현실 조리과정 애니메이션 연출부(451)는 선택된 음식메뉴의 전체 조리과정 시간에 상응하도록 시간 동기되면서 엔터테인먼트 증강현실 연출 시나리오에 따라 증강현실을 통해 애니메이션으로 조리과정이 시간 동기되어 연출된다. 음식 메뉴별 및 주문고객별 가상 캐릭터의 대응 시나리오, 음식메뉴별 및 주문고객별 엔터테인먼트 증강현실 연출 시나리오에 따라 가상 캐릭터를 포함한 조리과정이 증강현실을 통해 애니메이션으로 체험된다.The augmented reality cooking process animation directing unit 451 time-synchronizes the cooking process to correspond to the entire cooking process time of the selected food menu, and directs the cooking process through augmented reality animation according to the entertainment augmented reality presentation scenario in time synchronization. The cooking process, including virtual characters, is experienced as an animation through augmented reality according to the response scenario of virtual characters for each food menu and ordering customer, and the entertainment augmented reality production scenario for each food menu and ordering customer.

음식메뉴 식별부(471)는 방문 고객이 주문한 음식메뉴를 증강현실 음식메뉴 선택 감지부(312)로부터 입력받음으로써 알 수 있다. 또한, 주문고객 식별부(472)는 방문 고객의 단말 정보나 음식 매장의 고객 가입 정보 등을 통해 주문고객 정보를 알 수 있다. 음식메뉴 식별부(417) 및 주문고객 식별부(472)를 통해 선택된 음식메뉴와 주문고객 정보를 증강현실 조리과정 애니메이션 연출부(451)로 전송하여 각 상황 시나리오에 맞게 엔터테인먼트 증강현실이 제공 및 연출되도록 한다.The food menu identification unit 471 can know the food menu ordered by the visiting customer by receiving an input from the augmented reality food menu selection detection unit 312 . In addition, the ordering customer identification unit 472 may know ordering customer information through terminal information of a visiting customer or customer subscription information of a food store. The food menu identification unit 417 and the ordering customer identification unit 472 transmit the selected food menu and order customer information to the augmented reality cooking process animation directing unit 451 so that augmented reality entertainment is provided and directed according to each situation scenario. do.

일예로서, "방문 고객이 어린이이면서", 선택 음식메뉴가 "랍스타 찜 요리"인 경우에 증강현실 조리과정 애니메이션 연출부(451)는 랍스타 찜 요리의 전체 조리시간에 맞도록 랍스타의 조리과정이 시간 동기되어 애니메이션으로 연출되고(일예로서 랍스타의 익는 정도에 따라 색깔이 변해가거나 랍스타의 모습이 점점 오므라드는 경우), 이와 증강현실 병합되는 가상 캐릭터가 랍스타의 조리과정에 참여하여 어린이를 위해 랍스타를 조리하는 모습을 코믹 연출하도록 하면서 또한 랍스타의 조리에 부합하는 배경 이미지를 증강현실 병합하여 연출할 수 있다.As an example, if "the visiting customer is a child" and the selected food menu is "steamed lobster dish", the augmented reality cooking process animation director 451 synchronizes the cooking process of the lobster with time to match the total cooking time of the steamed lobster dish. It is animated (for example, when the color changes depending on the degree of ripeness of the lobster or when the shape of the lobster gradually shrinks), and a virtual character merged with augmented reality participates in the cooking process of the lobster to cook lobster for children. While making the appearance comical, it can also be directed by merging augmented reality with a background image that matches the cooking of the lobster.

이때, 메뉴 조리시간의 시간 동기를 위해 메뉴 조리과정 동기부(462) 및 메뉴 조리시간 산출부(461)를 포함한다. 메뉴 조리시간 산출부(461)는 선택된 음식메뉴의 조리과정에 필요한 시간을 산출한다. 따라서 각 메뉴의 조리 시간이 이미 산출되어 저장될 수 있다. At this time, a menu cooking process synchronizing unit 462 and a menu cooking time calculating unit 461 are included for time synchronization of the menu cooking time. The menu cooking time calculation unit 461 calculates the time required for the cooking process of the selected food menu. Accordingly, the cooking time of each menu may be already calculated and stored.

메뉴 조리과정 동기부(462)는 선택된 음식메뉴의 조리과정에 필요한 시간을 메뉴 조리시간 산출부(461)로부터 입력받으며, 입력된 조리과정 시간이 동기되어 증강현실 조리과정 애니메이션 연출부(451)에 의해 증강현실로 체험되도록 동기 제어한다. 랍스타의 전체 조리시간이 일예로서 30분이면, 랍스타의 조리시간 및 익힘 정도에 따라 랍스타의 모습이 변해가는 것과 랍스타의 조리시간 및 익힘 정도에 따라 랍스타의 색이 변해가는 것을 정확히 동기시킬 수 있다. 이에 더 나아가 실제 주문한 시간에 맞춰서 랍스타의 조리과정을 시간 동기하여 애니메이션으로 증강현실을 통해 보여줌으로써 실제 주방에서의 조리 과정 시간에 비슷하도록 흥미를 제공할 수 있다. The menu cooking process synchronizing unit 462 receives the time necessary for the cooking process of the selected food menu from the menu cooking time calculation unit 461, and the input cooking process time is synchronized and displayed by the augmented reality cooking process animation directing unit 451. Synchronous control so that it can be experienced as augmented reality. If the total cooking time of the lobster is 30 minutes as an example, the change in appearance of the lobster according to the cooking time and degree of cooking of the lobster and the change in color of the lobster according to the cooking time and degree of cooking of the lobster can be accurately synchronized. Furthermore, by time-synchronizing the lobster cooking process according to the actual order time and showing it through augmented reality as an animation, it is possible to provide interest similar to the cooking process time in the actual kitchen.

증강현실 매장홍보 애니메이션 연출부(452)는 음식 매장의 매장 홍보 영상을 매장홍보 증강현실 시나리오 및 엔터테인먼트 증강현실 연출 시나리오에 따라 가상 캐릭터를 포함하여 증강현실을 통해 애니메이션으로 연출한다. 즉, 가상 캐릭터가 매장 홍보 시나리오에 따라 매장을 홍보 설명하면서 매장 홍보에 맞는 배경 이미지를 병합하여 연출한다. The augmented reality store promotion animation directing unit 452 directs the store promotion video of the food store as an animation through augmented reality including virtual characters according to the store promotion augmented reality scenario and the entertainment augmented reality presentation scenario. That is, while the virtual character publicizes and explains the store according to the store publicity scenario, the background image suitable for the store publicity is merged and directed.

증강현실 엔터테인먼트 애니메이션 연출부(453)는 엔터테인먼트의 제공을 위해 가상 캐릭터의 엔터테인먼트 증강현실 대응 시나리오 및 엔터테인먼트 증강현실 연출 시나리오에 따라 가상 캐릭터를 포함하여 증강현실을 통해 애니메이션으로 연출한다. 즉, 메뉴 음식 주문 전이나 주문 후의 막간의 시간을 이용하여 가상 캐릭터가 주인공으로 등장하는 애니메이션을 증강현실을 통해 연출 제공할 수 있다. 이때, 제공되는 애니메이션은 음식메뉴나 주문고객에 따라 다양한 장르로 선택 제공될 수 있다.The augmented reality entertainment animation directing unit 453 directs animation through augmented reality including the virtual character according to the entertainment augmented reality response scenario and the entertainment augmented reality directing scenario of the virtual character in order to provide entertainment. That is, an animation in which a virtual character appears as a main character may be directed and provided through augmented reality by using an intermission time before or after ordering menu food. In this case, the provided animations may be selected and provided in various genres according to food menus or ordering customers.

제1 실행속도 제어부(도면 미도시)는 도 6에 도시된 바와 같이 음식정보 증강현실 콘텐츠 접속에서 음식정보 증강현실 콘텐츠 제공 사이트 접속까지 또는 음식정보 증강현실 콘텐츠 접속에서 증강현실 어플리케이션 앱 실행까지의 접속 시간을 제어한다. 제2 실행속도 제어부(도면 미도시)는 음식정보 증강현실 콘텐츠 제공을 위한 전체 데이터 로드 시간을 제어한다. 일예로서 앱 실행 후 전체 데이터 로드까지 걸리는 시간을 제어한다. 제3 실행속도 제어부(도면 미도시)는 주문 결제부를 통한 고객 주문에서 주문메뉴의 주방 전달시간까지의 시간을 제어한다. 상술한 각각의 실행속도 제어부는 각각의 실행속도를 제어하며, 바람직하게는 각 실행속도에 맞추도록 앱을 관리한다. 특히, 도 6에 도시된 제1,2,3 실행속도 제어부에 따라 제어되는 각각의 실행속도는 실제 직원이 고객 응대를 통한 주문 및 주방 전달 시간 대비 비대면으로 진행하는 비대면 주문 실행속도가 늦지 않도록 하기 위함이다. As shown in FIG. 6, the first execution speed control unit (not shown) connects from food information augmented reality content access to food information augmented reality content providing site access or from food information augmented reality content access to augmented reality application app execution. Control your time. The second execution speed controller (not shown) controls the entire data loading time for providing food information augmented reality content. As an example, it controls the time taken from app launch to full data load. A third execution speed controller (not shown) controls the time from a customer order through the order payment unit to delivery time of the order menu to the kitchen. Each of the above-described execution speed control units controls each execution speed, and preferably manages apps to match each execution speed. In particular, each execution speed controlled according to the first, second, and third execution speed controllers shown in FIG. 6 does not slow down the execution speed of non-face-to-face orders compared to the actual ordering and kitchen delivery time by employees. is to avoid

본 발명을 설명함에 있어 종래 기술 및 당업자에게 자명한 사항은 설명을 생략할 수도 있으며, 이러한 생략된 구성요소(방법) 및 기능의 설명은 본 발명의 기술적 사상을 벗어나지 아니하는 범위내에서 충분히 참조될 수 있을 것이다. 또한, 상술한 본 발명의 구성요소는 본 발명의 설명의 편의를 위하여 설명하였을 뿐 여기에서 설명되지 아니한 구성요소가 본 발명의 기술적 사상을 벗어나지 아니하는 범위내에서 추가될 수 있다. In describing the present invention, descriptions of matters obvious to those skilled in the art and those skilled in the art may be omitted, and descriptions of these omitted components (methods) and functions will be sufficiently referred to within the scope that does not depart from the technical spirit of the present invention. You will be able to. In addition, the above-described components of the present invention have been described for convenience of description of the present invention, but components not described herein may be added within a range that does not deviate from the technical spirit of the present invention.

상술한 각부의 구성 및 기능에 대한 설명은 설명의 편의를 위하여 서로 분리하여 설명하였을 뿐 필요에 따라 어느 한 구성 및 기능이 다른 구성요소로 통합되어 구현되거나, 또는 더 세분화되어 구현될 수도 있다.The description of the configuration and function of each part described above has been separately described for convenience of explanation, but any one configuration and function may be implemented by integrating into other components or implemented in more subdivided form, if necessary.

이상, 본 발명의 일실시예를 참조하여 설명했지만, 본 발명이 이것에 한정되지는 않으며, 다양한 변형 및 응용이 가능하다. 즉, 본 발명의 요지를 일탈하지 않는 범위에서 많은 변형이 가능한 것을 당업자는 용이하게 이해할 수 있을 것이다. 또한, 본 발명과 관련된 공지 기능 및 그 구성 또는 본 발명의 각 구성에 대한 결합관계에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는, 그 구체적인 설명을 생략하였음에 유의해야 할 것이다.Although the above has been described with reference to one embodiment of the present invention, the present invention is not limited thereto, and various modifications and applications are possible. That is, those skilled in the art will easily understand that many modifications are possible without departing from the gist of the present invention. In addition, when it is determined that the detailed description of known functions and their configurations related to the present invention or the coupling relationship of each component of the present invention may unnecessarily obscure the gist of the present invention, it should be noted that the detailed description is omitted. something to do.

100 : 카메라부
200 : AR 콘텐츠 링크부
300 : 음식정보 AR 콘텐츠 제공부
311 : AR 음식메뉴판 구현부
312 : AR 음식메뉴 선택 감지부
313 : AR 음식정보 제공부
321 : AR 음식메뉴 이미지 연출부
322 : AR 음식메뉴 모션 연출부
323 : AR 음식메뉴 소리 연출부
324 : AR 음식메뉴 배경 연출부
400 : AR 시나리오 제공부
401 : 음식메뉴별 AR 시나리오 제공부
402 : 주문고객별 AR 시나리오 제공부
403 : 고객응대 AR 시나리오 제공부
404 : 고객 불만대처 AR 시나리오 제공부
405 : 엔터테인먼트 AR 시나리오 제공부
450 : AR 엔터테인먼트 연출부
451 : AR 조리과정 애니메이션 연출부
452 : AR 매장홍보 애니메이션 연출부
453 : AR 엔터테인먼트 애니메이션 연출부
461 : 메뉴 조리시간 산출부
462 : 메뉴 조리과정 동기부
471 : 음식메뉴 식별부
472 : 주문고객 식별부
500 : AR 가상 캐릭터 구현부
600 : 음식 주문부
700 : 주문 결제부
800 : 주문메뉴 수령 알리부
900 : 주문상황 디지털 보드부100: camera unit
200: AR content link unit
300: Food information AR content provider
311: AR food menu implementation unit
312: AR food menu selection detection unit
313: AR food information provision department
321: AR food menu image production unit
322: AR food menu motion direction unit
323: AR food menu sound production unit
324: AR food menu background production unit
400: AR scenario providing unit
401: AR scenario providing unit for each food menu
402: AR scenario provision unit for each ordering customer
403: customer response AR scenario provision unit
404: Customer Complaint Response AR Scenario Provider Department
405: entertainment AR scenario provision unit
450: AR Entertainment Directing Department
451: AR Cooking Process Animation Director
452: AR store promotion animation production department
453: AR Entertainment Animation Directing Department
461: menu cooking time calculation unit
462 Synchronization of menu cooking process
471: food menu identification unit
472: order customer identification unit
500: AR virtual character implementation unit
600: food ordering department
700: order payment unit
800: Alibu for receiving order menu
900: order status digital board

Claims (9)

음식 매장에서 제공하는 음식정보 증강현실 콘텐츠 접속을 위한 콘텐츠 접속 매개체를 제공하고, 상기 콘텐츠 접속 매개체를 터치 또는 인식함에 따라 음식정보 증강현실 콘텐츠 제공 사이트로 안내하거나 또는 증강현실 어플리케이션 앱을 실행하도록 하는 증강현실 콘텐츠 링크부,
상기 증강현실 콘텐츠 링크부의 접속 연결에 따라 상기 음식 매장에서 제공하는 다양한 음식에 대한 증강현실 음식정보 콘텐츠를 접속하는 고객에게 증강현실을 통해 체험하도록 하고, 상기 증강현실 음식정보 콘텐츠의 증강현실 음식메뉴를 선택할 수 있도록 제공하는 음식정보 증강현실 콘텐츠 제공부,
상기 증강현실 음식메뉴의 선택에 따라 음식을 주문하는 음식 주문부,
주문한 음식에 대한 결제를 제공하는 주문 결제부,
단말기를 통해 음식 매장의 식탁 테이블 영역을 촬영함으로써 고객 응대, 음식정보 및 엔터테인먼트를 제공할 수 있는 가상 캐릭터를 증강현실로 구현 및 연출하도록 하는 증강현실 가상 캐릭터 구현부,
상기 고객 응대 및 엔터테인먼트의 제공에 따른 가상 캐릭터의 증강현실 대응 시나리오를 생성 및 제공하고, 상기 증강현실 음식메뉴의 선택에 따른 상기 가상 캐릭터의 증강현실 대응 시나리오, 증강현실 음식정보 제공 시나리오 및 증강현실 음식메뉴 구현 시나리오를 생성 및 제공하는 증강현실 시나리오 제공부를 포함하며,
상기 음식정보 증강현실 콘텐츠 제공부는,
상기 증강현실 음식메뉴의 선택에 따라 선택된 음식메뉴의 적어도 일부의 객체를 상기 증강현실 음식메뉴 구현 시나리오에 따라 생동감 있는 모션 이미지로 연출하도록 하는 증강현실 음식메뉴 모션 연출부,
상기 증강현실 음식메뉴의 선택에 따라 선택된 음식메뉴의 적어도 일부의 객체를 상기 증강현실 음식메뉴 구현 시나리오에 따라 생동감 있는 소리로 연출하도록 하는 증강현실 음식메뉴 소리 연출부,
상기 증강현실 음식메뉴의 선택에 따라 선택된 음식메뉴의 적어도 일부의 객체를 상기 증강현실 음식메뉴 구현 시나리오에 따라 생동감 있는 배경 이미지로 연출하도록 하는 증강현실 음식메뉴 배경 연출부를 포함하며,
상기 선택된 음식메뉴의 전체 조리 과정 시간에 시간 동기되면서 상기 증강현실 음식메뉴 구현 시나리오에 따라 선택된 음식메뉴의 조리과정이 시간 동기되어 증강현실을 통해 애니메이션으로 연출 체험되는 것을 특징으로 하는 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치.
Augmentation that provides a content access medium for accessing food information augmented reality content provided by a food store, and guides you to a food information augmented reality content providing site or executes an augmented reality application app upon touching or recognizing the content access medium real content links,
Customers accessing the augmented reality food information contents for various foods provided by the food store are allowed to experience through augmented reality according to the connection of the augmented reality content link unit, and the augmented reality food menu of the augmented reality food information contents A food information augmented reality content provider that provides choices,
A food ordering unit for ordering food according to the selection of the augmented reality food menu;
an order payment unit that provides payment for ordered food;
An augmented reality virtual character implementation unit that realizes and directs a virtual character capable of providing customer service, food information, and entertainment in augmented reality by photographing the dining table area of the food store through the terminal;
Creates and provides augmented reality response scenarios of virtual characters according to the customer service and provision of entertainment, augmented reality response scenarios of the virtual characters according to the selection of the augmented reality food menu, augmented reality food information provision scenarios, and augmented reality food Includes an augmented reality scenario providing unit that creates and provides menu implementation scenarios,
The food information augmented reality content providing unit,
An augmented reality food menu motion director for directing at least some objects of the food menu selected according to the selection of the augmented reality food menu into a lively motion image according to the augmented reality food menu implementation scenario;
An augmented reality food menu sound production unit for directing at least some objects of the food menu selected according to the selection of the augmented reality food menu with lively sounds according to the augmented reality food menu implementation scenario;
An augmented reality food menu background directing unit for directing at least some objects of the food menu selected according to the selection of the augmented reality food menu as a lively background image according to the augmented reality food menu implementation scenario,
Interacting with customers, characterized in that the cooking process of the food menu selected according to the augmented reality food menu implementation scenario is time-synchronized with the entire cooking process time of the selected food menu and experienced as an animation through augmented reality Augmented reality non-face-to-face food order payment service providing device.
 제 1 항에 있어서,
상기 음식정보 증강현실 콘텐츠 제공부는,
상기 증강현실 콘텐츠 링크부의 접속 연결에 따라 음식메뉴별로 3D로 구현된 음식 메뉴판이 증강현실로 제공되는 증강현실 음식메뉴판 구현부,
증강현실 음식 메뉴판에 포함된 증강현실 음식메뉴 중 적어도 어느 하나의 선택을 감지하는 증강현실 음식메뉴 선택 감지부,
상기 증강현실 음식메뉴의 선택에 따라 선택된 음식메뉴에 대한 음식정보를 상기 가상 캐릭터의 증강현실 음식정보 제공 시나리오에 따라 설명하도록 제어하는 증강현실 음식정보 제공부,
상기 증강현실 음식메뉴의 선택에 따라 선택된 음식메뉴에 대한 증강현실 3D 이미지를 음식메뉴별 증강현실 음식메뉴 구현 시나리오 또는 방문고객별 증강현실 음식메뉴 구현 시나리오에 기초하여 연출하면서 상기 선택된 음식메뉴에 포함된 객체의 모션, 객체의 소리 및 상기 선택된 음식메뉴와 연관된 배경 이미지를 포함하여 증강현실로 연출하는 증강현실 음식메뉴 이미지 연출부를 포함하는 것을 특징으로 하는 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치.
According to claim 1,
The food information augmented reality content providing unit,
An augmented reality food menu board implementation unit in which a food menu board implemented in 3D for each food menu is provided in augmented reality according to the connection of the augmented reality content link unit,
An augmented reality food menu selection detection unit for detecting selection of at least one of the augmented reality food menus included in the augmented reality food menu board;
An augmented reality food information providing unit that controls food information for a food menu selected according to a selection of the augmented reality food menu according to an augmented reality food information providing scenario of the virtual character;
Based on the augmented reality food menu implementation scenario for each food menu or the augmented reality food menu implementation scenario for each visiting customer, the augmented reality 3D image for the food menu selected according to the selection of the augmented reality food menu is included in the selected food menu Augmented reality non-face-to-face food order payment service that interacts with customers, characterized in that it includes an augmented reality food menu image production unit that directs an augmented reality food menu image including the motion of the object, the sound of the object, and a background image associated with the selected food menu. provision device.
 제 2 항에 있어서,
상기 선택된 음식메뉴와 연관된 배경 이미지는,
상기 음식메뉴에 포함된 객체의 조리과정에서 연출되는 생동감 있는 배경 이미지인 것을 특징으로 하는 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치.
According to claim 2,
The background image associated with the selected food menu,
Augmented reality non-face-to-face food order payment service providing device that interacts with customers, characterized in that the lively background image produced during the cooking process of the object included in the food menu.
 삭제delete 제 1 항에 있어서,
상기 증강현실 시나리오 제공부는,
음식 메뉴별로 가상 캐릭터의 제1 증강현실 대응 시나리오 및 증강현실 음식메뉴 구현 시나리오를 생성 및 제공하는 음식메뉴별 증강현실 시나리오 제공부,
주문 고객별로 가상 캐릭터의 제2 증강현실 대응 시나리오 및 증강현실 음식메뉴 구현 시나리오를 생성 및 제공하는 주문고객별 증강현실 시나리오 제공부,
고객 응대에 따른 가상 캐릭터의 제3 증강현실 대응 시나리오를 생성 및 제공하는 고객응대 증강현실 시나리오 제공부,
고객 불만 사항 접수에 따른 상기 가상 캐릭터의 제4 증강현실 대응 시나리오를 생성 및 제공하는 고객 불만대처 증강현실 시나리오 제공부,
엔터테인먼트의 제공에 따른 상기 가상 캐릭터의 제5 증강현실 대응 시나리오 및 엔터테인먼트 증강현실 연출 시나리오를 생성 및 제공하는 엔터테인먼트 증강현실 시나리오 제공부를 포함하는 특징으로 하는 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치.
According to claim 1,
The augmented reality scenario providing unit,
An augmented reality scenario providing unit for each food menu that creates and provides a first augmented reality response scenario of a virtual character and an augmented reality food menu implementation scenario for each food menu;
An augmented reality scenario providing unit for each ordering customer that creates and provides a second augmented reality response scenario of a virtual character and an augmented reality food menu implementation scenario for each ordering customer;
A customer response augmented reality scenario providing unit that generates and provides a third augmented reality response scenario of a virtual character according to customer response;
A customer complaint handling augmented reality scenario providing unit for generating and providing a fourth augmented reality response scenario of the virtual character according to customer complaints received;
An augmented reality non-face-to-face food order payment service interacting with customers, characterized by including an entertainment augmented reality scenario providing unit generating and providing a fifth augmented reality response scenario of the virtual character and an entertainment augmented reality directing scenario according to the provision of entertainment. provision device.
 제 5 항에 있어서,
단말기를 통해 음식 매장의 식탁 테이블 영역을 촬영함으로써 상기 가상 캐릭터의 제5 증강현실 대응 시나리오 및 엔터테인먼트 증강현실 연출 시나리오에 따라 음식 매장 방문고객에게 가상 캐릭터의 연출을 포함하여 증강현실을 통해 체험하도록 하는 증강현실 엔터테인먼트 연출부를 더 포함하는 것을 특징으로 하는 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치.
According to claim 5,
Augmentation to allow customers visiting the food store to experience through augmented reality, including the production of virtual characters, according to the fifth augmented reality response scenario and entertainment augmented reality directing scenario of the virtual character by photographing the dining table area of the food store through the terminal Augmented reality non-face-to-face food order payment service providing device interacting with customers, further comprising a reality entertainment directing unit.
 제 6 항에 있어서,
상기 증강현실 엔터테인먼트 연출부는,
상기 엔터테인먼트 증강현실 연출 시나리오에 따라 선택된 음식메뉴의 조리과정에 상응하도록 시간 동기되면서 증강현실을 통해 애니메이션으로 조리과정을 연출하며, 상기 음식 메뉴별 및 주문 고객별 가상 캐릭터의 대응 시나리오 및 엔터테인먼트 증강현실 연출 시나리오에 따라 상기 가상 캐릭터를 포함한 조리과정이 증강현실을 통해 애니메이션으로 체험되도록 하는 증강현실 조리과정 애니메이션 연출부,
음식 매장의 매장 홍보 영상을 매장홍보 증강현실 시나리오 및 엔터테인먼트 증강현실 연출 시나리오에 따라 상기 가상 캐릭터를 포함하여 증강현실을 통해 애니메이션으로 체험되도록 하는 증강현실 매장홍보 애니메이션 연출부,
엔터테인먼트의 제공을 위해 상기 가상 캐릭터의 제5 증강현실 대응 시나리오 및 엔터테인먼트 증강현실 연출 시나리오에 따라 상기 가상 캐릭터를 포함하여 증강현실을 통해 애니메이션으로 체험되도록 하는 증강현실 엔터테인먼트 애니메이션 연출부를 포함하는 것을 특징으로 하는 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치.
According to claim 6,
The augmented reality entertainment directing unit,
The cooking process is synchronized in time to correspond to the cooking process of the food menu selected according to the entertainment augmented reality directing scenario, and the cooking process is directed through animation through augmented reality, and corresponding scenarios and entertainment augmented reality of virtual characters for each food menu and ordering customer are produced. An augmented reality cooking process animation directing unit that allows the cooking process including the virtual character to be experienced as an animation through augmented reality according to a scenario;
An augmented reality store promotion animation directing unit for experiencing a store promotion video of a food store as an animation through augmented reality, including the virtual character, according to a store promotion augmented reality scenario and an entertainment augmented reality directing scenario;
In order to provide entertainment, an augmented reality entertainment animation directing unit for experiencing animation through augmented reality including the virtual character according to a fifth augmented reality corresponding scenario and an entertainment augmented reality directing scenario of the virtual character An augmented reality non-face-to-face food order payment service providing device that interacts with customers.
 제 7 항에 있어서,
상기 선택된 음식메뉴의 조리시간의 시간 동기를 위해 상기 선택된 음식메뉴의 조리과정에 필요한 시간을 산출하는 메뉴 조리시간 산출부,
조리과정에 필요한 시간을 상기 메뉴 조리시간 산출부로부터 입력받으며, 입력된 조리과정 시간이 동기되어 상기 증강현실 조리과정 애니메이션 연출부에 의해 증강현실로 체험되도록 동기 제어하는 메뉴 조리과정 동기부를 포함하는 것을 특징으로 하는 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치.
According to claim 7,
a menu cooking time calculation unit for calculating the time required for the cooking process of the selected food menu to synchronize the cooking time of the selected food menu;
A menu cooking process synchronizing unit that receives the time required for the cooking process from the menu cooking time calculation unit and synchronizes the input cooking process time so that the augmented reality cooking process animation directing unit can synchronously control the augmented reality experience. An augmented reality non-face-to-face food order payment service providing device that interacts with customers as
 음식 매장에서 제공하는 음식정보 증강현실 콘텐츠 접속을 위한 콘텐츠 접속 매개체를 제공하고, 상기 콘텐츠 접속 매개체를 터치 또는 인식함에 따라 음식정보 증강현실 콘텐츠 제공 사이트로 안내하거나 또는 증강현실 어플리케이션 앱을 실행하도록 하는 증강현실 콘텐츠 링크부,
상기 증강현실 콘텐츠 링크부의 접속 연결에 따라 상기 음식 매장에서 제공하는 다양한 음식에 대한 증강현실 음식정보 콘텐츠를 접속하는 고객에게 증강현실을 통해 체험하도록 하고, 상기 증강현실 음식정보 콘텐츠의 증강현실 음식메뉴를 선택할 수 있도록 제공하는 음식정보 증강현실 콘텐츠 제공부,
상기 증강현실 음식메뉴의 선택에 따라 음식을 주문하는 음식 주문부,
주문한 음식에 대한 결제를 제공하는 주문 결제부,
상기 음식정보 증강현실 콘텐츠 접속에서 음식정보 증강현실 콘텐츠 제공 사이트 접속까지 또는 상기 음식정보 증강현실 콘텐츠 접속에서 증강현실 어플리케이션 앱 실행까지의 접속 시간을 제어하는 제1 실행속도 제어부,
음식정보 증강현실 콘텐츠 제공을 위한 데이터 로드 시간을 제어하는 제2 실행속도 제어부,
주문 결제부를 통한 고객 주문에서 주문메뉴 주방 전달시간까지의 시간을 제어하는 제3 실행속도 제어부를 포함하는 것을 특징으로 하는 고객과 상호작용하는 증강현실 비대면 음식주문결제 서비스 제공장치.Augmentation that provides a content access medium for accessing food information augmented reality content provided by a food store, and guides you to a food information augmented reality content providing site or executes an augmented reality application app upon touching or recognizing the content access medium real content links,
Customers accessing the augmented reality food information contents for various foods provided by the food store are allowed to experience through augmented reality according to the connection of the augmented reality content link unit, and the augmented reality food menu of the augmented reality food information contents A food information augmented reality content provider that provides choices,
A food ordering unit for ordering food according to the selection of the augmented reality food menu;
an order payment unit that provides payment for ordered food;
A first execution speed controller for controlling a connection time from accessing the food information augmented reality content to accessing a food information augmented reality content providing site or from accessing the food information augmented reality content to executing an augmented reality application app;
A second execution speed control unit controlling a data loading time for providing food information augmented reality contents;
An augmented reality non-face-to-face food order payment service providing device that interacts with a customer, comprising a third execution speed controller for controlling a time from a customer order through the order payment unit to delivery time to the order menu kitchen.
KR1020200121091A 2020-09-20 2020-09-20 Non-faced food order service providing apparatus KR102530107B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200121091A KR102530107B1 (en) 2020-09-20 2020-09-20 Non-faced food order service providing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200121091A KR102530107B1 (en) 2020-09-20 2020-09-20 Non-faced food order service providing apparatus

Publications (2)

Publication Number Publication Date
KR20220039863A KR20220039863A (en) 2022-03-30
KR102530107B1 true KR102530107B1 (en) 2023-05-10

Family

ID=80947961

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200121091A KR102530107B1 (en) 2020-09-20 2020-09-20 Non-faced food order service providing apparatus

Country Status (1)

Country Link
KR (1) KR102530107B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101910931B1 (en) * 2017-08-09 2018-10-23 서영철 Method for providing 3d ar contents service on food using 64bit-identifier
KR101923591B1 (en) * 2017-09-26 2018-11-30 이재성 Method for menu ordering using character

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101632958B1 (en) 2013-08-20 2016-06-23 주식회사 롯데닷컴 Method and server for placing an order simply
KR102108535B1 (en) 2017-11-23 2020-06-16 오연재 Method for Processing Food Information using Augmented Reality
KR20190142850A (en) 2018-06-19 2019-12-30 민찬홍 Shop Ordering System based on Augmented Reality
KR20200103933A (en) * 2019-02-25 2020-09-03 조성호 Intermediary service Platform for restaurant and client using Augmented Reality App
KR102062888B1 (en) 2019-07-05 2020-01-06 주식회사 케이디아이덴 System for Integration Management of Non-Faced Food Order Platform

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101910931B1 (en) * 2017-08-09 2018-10-23 서영철 Method for providing 3d ar contents service on food using 64bit-identifier
KR101923591B1 (en) * 2017-09-26 2018-11-30 이재성 Method for menu ordering using character

Also Published As

Publication number Publication date
KR20220039863A (en) 2022-03-30

Similar Documents

Publication Publication Date Title
US20210174461A1 (en) Restaurant service and management system
US20190332400A1 (en) System and method for cross-platform sharing of virtual assistants
CN104769627B (en) Method and apparatus for opposite end auxiliary shopping
US9747307B2 (en) Systems and methods for immersive backgrounds
US11709576B2 (en) Providing a first person view in a virtual world using a lens
US11471775B2 (en) System and method for providing a computer-generated environment
KR20190096451A (en) Store of the future
US20160045834A1 (en) Overlay of avatar onto live environment for recording a video
KR20220093216A (en) Information reproduction method, apparatus, computer readable storage medium and electronic device
US10853869B2 (en) Electronic wish list system
WO2016191685A1 (en) Graphical processing of data, in particular by mesh vertices comparison
US9011246B1 (en) Systems and methods for immersive backgrounds
JP2010176232A (en) Content providing system
JP2022507245A (en) A technology adapted to provide a user interface through the presentation of 2D content via a 3D display object rendered in a navigable virtual space.
KR20200041839A (en) Method for providing virtual reality userinterface for viewing broadcastand apparatus using the same
JP2018101312A (en) Three-dimensional projection mapping output system and three-dimensional projection mapping output method
KR102530107B1 (en) Non-faced food order service providing apparatus
CN110858376A (en) Service providing method, device, system and storage medium
JP5821152B2 (en) Content providing server and content providing method
JP7092930B1 (en) Program, information processing method, server and server information processing method
US11756108B2 (en) Virtual/augmented reality custom ordering service
US20230290033A1 (en) Information processing system, information processing method, and computer program
Ketchum Kitchen Bytes: The Retrofuturism of Kitchen Computers and Robots
Mădălina Augmented Reality for wedding
Schöning et al. ACM UIST, pp. 139–148. ACM (2009) Leap Motion Inc: Leap Motion (2012). http://www. leapmotion. com/Li, Y., Hinckley, K., Guan, Z., Landay, JA: Experimental analysis of mode switching techniques in pen-based user interfaces. In: Proceedings of the SIGCHI CHI, pp. 461–470. ACM (2005)

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant