KR20120126157A - The method and the system affording food information using augmented reality - Google Patents

The method and the system affording food information using augmented reality Download PDF

Info

Publication number
KR20120126157A
KR20120126157A KR1020110043742A KR20110043742A KR20120126157A KR 20120126157 A KR20120126157 A KR 20120126157A KR 1020110043742 A KR1020110043742 A KR 1020110043742A KR 20110043742 A KR20110043742 A KR 20110043742A KR 20120126157 A KR20120126157 A KR 20120126157A
Authority
KR
South Korea
Prior art keywords
food
cooking
pattern
ingredients
image
Prior art date
Application number
KR1020110043742A
Other languages
Korean (ko)
Inventor
전화성
한종수
김지혁
백재열
이시우
Original Assignee
주식회사 로보쓰리
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 로보쓰리 filed Critical 주식회사 로보쓰리
Priority to KR1020110043742A priority Critical patent/KR20120126157A/en
Publication of KR20120126157A publication Critical patent/KR20120126157A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0662—Virtualisation aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06018—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking one-dimensional coding
    • G06K19/06028—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking one-dimensional coding using bar codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/12—Hotels or restaurants

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

PURPOSE: A method for providing food information by using augmented reality and a food information providing system thereof are provided to display images of ingredients for food on an actual image of a kitchen by using an augmented reality program of a smart device. CONSTITUTION: A smart device including a camera is operated(S10). A particular image pattern is focused(S20). The existence of a selected food in a cooking standard database is checked(S30). If there is the selected food in the cooking standard database, a recognized specific image pattern value is encoded(S40). The encoded pattern value is decoded(S50). [Reference numerals] (AA) Ending the application; (S10) Driving an application; (S20) Step of focusing a specific image pattern through a camera(step of selecting food and materials); (S30) Step of checking whether selected food exists in a food cooking standard DB; (S31) Step of inquiring to a food and nutrition research institute and a cooking method research institute; (S40) Step of encoding a recognized pattern value; (S50) Step of decoding the pattern value and matching with a food image module; (S60) Step of overlapping and arranging selected material images with the actual screen according to cooking orders; (S70) Step of informing additional recommended and alternative materials; (S80) Step of overlapping health-benefit information on the actual screen

Description

증강현실을 이용한 음식정보 제공방법 및 음식정보 제공시스템{The method and the system affording food information using augmented reality}The method and the system affording food information using augmented reality}

본 발명은 스마트 기기의 증강현실 프로그램을 이용하여 한국의 전통음식, 대중음식, 대표음식 등의 조리방법 및 음식정보를 제공하는 방법과 음식정보 제공시스템에 관한 것이다.
The present invention relates to a method of providing a cooking method and food information of a traditional Korean food, a popular food, a representative food, and the like and a food information providing system using an augmented reality program of a smart device.

증강현실(AR: Augmented Reality)이란 가상현실(VR: Virtual Reality)의 한 분야이며, 현실화면이 보여지는 영상위로 가상의 사물이 중첩되는 바, 결과적으로 현실화면을 보충하여 가공함에 따라, 현실화면 위로 제공하고자 하는 정보를 더욱 역동적이며 구체적으로 구현하기 위한 기술이다.Augmented Reality (AR) is a field of Virtual Reality (VR), and virtual objects are superimposed on the image where the reality screen is displayed. Back to top Techniques to make the information you want to provide more dynamic and concrete

종래에는 한국음식의 조리방법 및 해당 음식의 정보를 제공받기 위해, 활자체로 인쇄된 요리책이 출판되고 있으므로 이를 구매하여 읽거나, 인터넷을 통해 원하는 음식의 조리방법을 다운받아 출력하여 사용하고 있는 실정이다. 그러나 스마트 기기의 보급으로 인해 다양한 정보들을 손쉽게 손안에서 검색할 수 있음에 따라, 종래의 활자를 매개로 한 전달방식은 사양화되고 있는데다, 스마트 기기를 통한 더욱 세련된 한국 음식 조리방법과 해당 음식의 다양한 정보를 제공받고 싶어하는 욕구가 늘어나고 있는 추세이다.
Conventionally, in order to be provided with the cooking method of the Korean food and the information of the food, a cookbook printed in typeface has been published, so you can purchase and read it or download the cooking method of the desired food through the Internet and use it. to be. However, due to the spread of smart devices, various information can be easily retrieved in the palm of the hand, and the conventional type of delivery method is being specified, and more sophisticated Korean food cooking methods and various information of the food through smart devices are specified. The desire to be provided is increasing trend.

따라서, 본 발명은 상기와 같은 종래의 실정을 감안하여 창안한 것으로서, 근자에 널리 보급되고 있는 스마트 기기의 증강현실 프로그램을 이용하여 한국의 전통음식, 대중음식, 대표음식 등의 조리방법 및 음식정보를 제공함에 있어서, 스마트 기기의 카메라를 통해 보여지는 현실화면 위로 한국음식과 그에 따른 식재료가 중첩되도록 한 증강현실을 이용한 음식정보 제공방법 및 음식정보 제공시스템을 제안하고자 한다.
Therefore, the present invention was devised in view of the above-described conventional situation, and the cooking method and food information of Korean traditional food, popular food, representative food, etc. using the augmented reality program of smart devices that are widely used in recent years. In providing the information, a food information providing method and a food information providing system using augmented reality to overlap the Korean food and the corresponding ingredients on the reality screen shown through the camera of the smart device.

본 발명에 따른 스마트 기기의 증강현실을 이용한 음식정보 제공방법의 구체적인 방법으로는, 카메라가 내장된 스마트 기기의 어플리케이션을 구동하는 단계(S10)와, 기 제작된 음식과 식재료에 대한 특정영상패턴의 스티커 또는 웹사이트의 특정영상패턴을 카메라를 통해 포커싱 하는 단계(S20)와, 카메라를 통해 포커싱 되어 선택된 음식이 음식조리 표준DB에 존재하는지 파악하는 단계(S30)와, 선택한 음식이 음식조리 표준DB에 존재하지 않는다면, 선택한 음식을 식품영양연구소 및 조리방법연구소에 의뢰하는 단계(S31)와,Specific method of the food information providing method using the augmented reality of the smart device according to the present invention, the step of driving the application of the smart device with a built-in camera (S10), and the specific image pattern of the pre-made food and ingredients Focusing a specific image pattern of a sticker or a website through a camera (S20), determining whether the selected food is focused on the food by the camera in the standard food cooking standard (S30), and the selected food is the food cooking standard DB If it does not exist in the step, commissioning the selected food to the Institute of Food and Nutrition Research and Cooking Method (S31),

선택한 음식이 음식조리 표준DB에 존재함에 따라 인식된 특정영상패턴값을 암호화 하는 단계(S40)와, 암호화된 패턴값을 해독하여 음식 이미지 모듈과 매칭하는 단계(S50)와, 매칭된 식재료의 이미지가 조리순서에 따라 현실화면과 중첩 및 정렬되는 단계(S60)와, 기 선택된 식재료 외에 더 추가되면 좋을 추천 식재료 및 기 선택된 식재료와 대체할 수 있는 식재료를 현실화면 위로 중첩하여 알려주는 단계(S70)와, 선택된 음식의 보양정보가 현실화면 위로 중첩되는 단계(S80)가 포함된다.Encrypting the specific image pattern value recognized as the selected food exists in the food cooking standard DB (S40), decrypting the encrypted pattern value and matching it with the food image module (S50), and an image of the matched ingredients Is superimposed and aligned with the reality screen according to the cooking order (S60), and the recommended foods that may be added in addition to the pre-selected foods and foods that can be replaced with the pre-selected foods to be superimposed on the reality screen (S70). And, step (S80) that the maintenance information of the selected food is superimposed on the reality screen.

또한, 본 발명에 따른 스마트 기기의 증강현실을 이용한 음식정보 제공시스템의 구체적인 구성으로는, 스마트 기기에 내장된 카메라부(1)와, 특정영상패턴을 인지하는 피드백모듈(20)과, 이용자의 식습관을 도출하기 위한 사용자 특성화DB(50) 및 음식의 표준 조리방법이 저장된 음식조리 표준DB(40)로 구성된 관리운영부(30)와, 이용자가 선택한 식재료를 기준으로 음식조리 표준DB(40)로부터 한국음식 표준 조리방법과 비교하여 추가되어야 할 재료나 대체해도 좋은 식재료를 분석하는 견련관계통계모듈(60)과, 이용자가 선택한 식재료를 통해 만들어질 음식의 보양정보를 분석하는 분석모듈(70)이 포함된다.
In addition, as a specific configuration of the food information providing system using the augmented reality of the smart device according to the present invention, the camera unit 1 embedded in the smart device, the feedback module 20 for recognizing a specific image pattern, and the user's From the management operation unit 30 consisting of the user specialization DB (50) for deriving the eating habits and the food cooking standard DB (40) storing the standard cooking method of the food, and the food cooking standard DB (40) based on the food ingredients selected by the user Compared with the standard cooking method of Korean food, the relationship statistics module 60 for analyzing the ingredients to be added or replaceable foods, and the analysis module 70 for analyzing the maintenance information of the food to be made through the food selected by the user Included.

본 발명에 따른 증강현실을 이용한 음식정보 제공방법 및 음식정보 제공시스템은 근자에 널리 보급되고 있는 스마트 기기의 증강현실 프로그램을 이용함으로써, 음식을 만들때에 들어가는 식재료의 이미지를 주방의 실사 영상위에서 볼 수 있는데다, 해당 음식의 보양정보를 실사 영상의 위에서 중첩된 상태로 볼 수 있음에 따라, 음식을 조리하는 과정이 유쾌해지며, 음식 조리에 대한 흥미를 불러일으킬 수 있을 뿐 아니라, 새로운 음식에 대한 보양정보를 용이하게 취득할 수 있는 장점이 있다.
Food information providing method and food information providing system using augmented reality according to the present invention by using the augmented reality program of smart devices that are widely used in the near field, to view the image of the food ingredients when making food on the live action image of the kitchen In addition, as the food information of the food can be superimposed on the live image, the process of cooking food becomes pleasant, and it is not only interesting to cook food but also to induce new food. There is an advantage that can easily obtain the rehabilitation information.

도 1은 본 발명에 따른 증강현실을 이용한 음식정보 제공시스템의 구성도
도 2는 본 발명중 피드백모듈의 상세 시스템 구성도
도 3은 본 발명에 따른 증강현실을 이용한 음식정보 제공방법의 흐름도1 is a block diagram of a food information providing system using augmented reality according to the present invention
2 is a detailed system configuration of the feedback module of the present invention
3 is a flow chart of the food information providing method using augmented reality according to the present invention

이하, 본 발명의 목적을 달성할 수 있는 바람직한 실시예에 따른 증강현실을 이용한 음식정보 제공방법 및 음식정보 제공시스템을 상세하게 설명하되, 본 발명과 관련된 공지 기능이나 구성 및 시스템에 대한 구체적인 설명이 본 발명의 요지와 부합되지 않는 부연 설명에 지나지 않을 경우 그에 대한 상세한 설명은 생략하기로 한다.Hereinafter, the food information providing method and a food information providing system using augmented reality according to a preferred embodiment to achieve the object of the present invention will be described in detail, but a detailed description of the known function or configuration and system related to the present invention If it is only a description that does not correspond to the gist of the present invention, a detailed description thereof will be omitted.

도 1은 본 발명에 따른 증강현실을 이용한 음식정보 제공시스템의 구성도로서, 먼저 피드백모듈(20)은 이용자가 어플리케이션을 구동시킨 상태에서 본 발명과 소통하는 매개수단이다. 즉, 이용자는 본 발명에 따른 어플리케이션을 구동시킨 다음, 한국음식의 조리방법과 음식 정보를 알려주는 컴퓨터의 웹사이트(10)에서 QR코드(11)를 카메라부(1)로 인식하게 하는 소통모듈이다.1 is a block diagram of a system for providing food information using augmented reality according to the present invention. First, the feedback module 20 is an intermediary means for communicating with the present invention while a user drives an application. That is, the user runs the application according to the present invention, the communication module for causing the camera section 1 to recognize the QR code 11 on the website 10 of the computer informing the cooking method and food information of Korean food to be.

도 1의 관리운영부(30)는 이용자가 피드백모듈(20)에서 선택한 음식과 식재료에 따라 이용자의 특성을 사용자 특성화DB(50)로 저장하여 추후 식습관을 도출할 수 있도록 하는 사용자 특성화DB(50)와, 이용자가 피드백모듈(20)에서 선택한 음식의 표준 조리방법이 기 저장된 음식조리 표준DB(40)로 이루어진다.The management and operation unit 30 of FIG. 1 stores the user's characteristics according to the food and ingredients selected by the user in the feedback module 20 as the user specialization DB 50 so that the user's specialization DB 50 can be derived later. And, the standard cooking method of the food selected by the user in the feedback module 20 is made of the pre-stored food cooking standard DB (40).

또한, 견련관계통계모듈(60)은 이용자가 선택한 식재료를 기준으로 음식조리 표준DB(40)로부터 한국음식 표준 조리방법과 비교하여 추가되어야 할 재료나 대체해도 좋은 식재료를 분석한다. 한편, 분석모듈(70)은 이용자가 선택한 식재료를 통해 만들어질 음식의 칼로리와 영양소 등 음식의 보양정보를 분석한다.In addition, the relationship statistics module 60 analyzes the ingredients to be added or replaceable from the food cooking standard DB 40 in comparison with the Korean food standard cooking method based on the food ingredients selected by the user. On the other hand, the analysis module 70 analyzes the maintenance information of the food, such as calories and nutrients of the food to be made by the food selected by the user.

한편, 이용자가 피드백모듈(20)에서 선택한 음식이 음식조리 표준DB(40)에 존재하지 않을 경우, 이용자가 입력한 정보는 연계기관(80)인 식품영양연구소(81) 및 조리방법연구소(82)로 정보가 이관되어 해당 음식의 조리방법과 보양정보가 추후에 음식조리 표준DB(40)에 저장될 수 있도록 한다.Meanwhile, when the food selected by the user in the feedback module 20 does not exist in the food cooking standard DB 40, the information input by the user is associated with the food nutrition research institute 81 and the cooking method research institute 82. Information is transferred to) so that the cooking method and maintenance information of the food can be stored in the food cooking standard DB 40 later.

도 2는 본 발명중 피드백모듈(20)의 상세 시스템 구성도로서, 스마트 기기에 내장된 카메라부(1)와, 다른 컴퓨터에서 웹사이트(10)를 접속한 후, 해당 웹사이트(10)상에서 보여주는 QR코드(11)를 인식하는 패턴인식부(21)와, 인식된 패턴값을 암호화 하는 패턴암호화부(22)와, 암호화된 패턴값을 해독 및 음식 이미지 모듈(24)과 매칭하는 패턴해독 및 매칭부(23)와, 이용자가 선택한 음식과 식재료의 다양한 이미지가 저장되어 작동되는 음식 이미지 모듈(24)과, 선택된 음식과 식재료의 이미지를 출력하는 영상출력부(25)와, 스마트 기기의 현실화면 위로 음식과 식재료의 이미지를 중첩하는 영상중첩부(26)와 현실화면과 이미지의 중첩된 화면을 동시에 보여주는 스마트 기기의 디스플레이부(2)로 이루어진다.FIG. 2 is a detailed system configuration diagram of the feedback module 20 according to the present invention. After the website 10 is connected to the camera unit 1 embedded in a smart device and another computer, the website 10 is connected to the website 10. The pattern recognition unit 21 for recognizing the QR code 11 to be shown, the pattern encryption unit 22 for encrypting the recognized pattern value, and the pattern decryption for matching the encrypted pattern value with the food image module 24. And a matching unit 23, a food image module 24 for storing and operating various images of food and ingredients selected by the user, an image output unit 25 for outputting images of the selected food and ingredients, and a smart device. The video overlapping unit 26 overlaps the image of food and ingredients on the reality screen, and the display unit 2 of the smart device for simultaneously displaying the overlapping screen of the reality screen and the image.

상기, 카메라부(1)는 스마트 기기에 내장된 것으로서, 음식을 만드는 주방 내부를 실사 영상으로 촬영하여 스마트 기기의 디스플레이부(2)에 현실화면으로 보여준다.The camera unit 1 is built in a smart device, and photographs the inside of a kitchen for making food as a live-action image and shows it on the display unit 2 of the smart device as a real screen.

또한, 상기 패턴인식부(21)는 카메라부(1)에서 실사로 보여주는 현실화면에서 다른 컴퓨터 예를 들면 거실에 설치된 컴퓨터를 통해 음식 제공 웹사이트(10)에 접속하여 특정영상패턴을 인식하거나, 음식조리 및 음식정보가 담긴 특정영상패턴의 스티커를 인식하는 것으로서, 특정영상패턴의 종류에는 QR코드(11), 바코드, RFID코드 및 기타 특정화된 코드가 있을 수 있으며, 특정영상패턴의 종류에 따라 해당 리더기는 다르게 결정될 수 있다. 본 발명에서는 QR코드(11)를 실시예로 사용하고 있다.In addition, the pattern recognition unit 21 recognizes a specific image pattern by accessing the food providing website 10 through another computer, for example, a computer installed in a living room on a real screen shown in the live view from the camera unit 1, Recognizing a sticker of a specific image pattern containing food cooking and food information, the specific image pattern may be a QR code (11), a barcode, an RFID code and other specified code, depending on the type of specific image pattern The reader may be determined differently. In the present invention, the QR code 11 is used as an example.

한편, 상기 패턴암호화부(22)는 패턴인식부(21)를 통해 인식된 특정영상패턴값이 범용으로 사용되고 있는 해당 리더기(QR코드리더기, 바코드리더기, RFID코드리더기 등)를 통해 인식되지 않도록 암호화함으로써, 음식과 식재료의 정보를 갖는 특정영상패턴이 본 발명에 따른 발명을 통해서만 인식되도록 한다. 또한, 상기 패턴해독 및 매칭부(23)는 암호화된 특정영상패턴값을 해독함으로써, 각종 한국음식과 각종 식재료의 이미지를 갖고 있는 음식 이미지 모듈(24)과 매칭시킨다.Meanwhile, the pattern encryption unit 22 encrypts the specific image pattern value recognized by the pattern recognition unit 21 so as not to be recognized by a corresponding reader (QR code reader, barcode reader, RFID code reader, etc.) that is used for general purposes. Thus, a specific image pattern having information of food and ingredients is recognized only through the invention according to the present invention. In addition, the pattern decoding and matching unit 23 decrypts the encrypted specific image pattern value and matches it with the food image module 24 having images of various Korean foods and various food ingredients.

또한, 상기 영상출력부(25)는 암호화된 패턴값에 매칭된 음식 이미지를 구분동작 또는 정지동작으로 디스플레이부(2)에 출력하여 배치한다. 한편, 상기 영상중첩부(26)는 출력된 음식과 식재료의 이미지를 카메라를 통해 보여지는 현실화면 위로 중첩시키는 것으로서, 스마트 기기의 디스플레이부(2)를 통해 눈앞에 보여지는 주방과 조리과정 위로 만들고 있는 음식의 식재료에 해당하는 이미지가 중첩되면서 보여짐에 따라, 스마트 기기의 증강현실을 통해 한국음식 조리과정을 더욱 흥미있고 재미있게 즐길 수 있게 된다.In addition, the image output unit 25 outputs and arranges the food image matched with the encrypted pattern value to the display unit 2 in a division operation or a stop operation. On the other hand, the image overlapping part 26 is to superimpose the output of the image of food and ingredients on the reality screen seen through the camera, through the display unit 2 of the smart device to make up the kitchen and cooking process shown in front of the eyes As the images corresponding to the ingredients of the food are overlapped, the Korean food cooking process is more interesting and fun through the augmented reality of smart devices.

도 3은 본 발명에 따른 증강현실을 이용한 음식정보 제공방법의 흐름도로서, 먼저 본 발명에 따른 상기의 시스템 구성도로 이루어진 어플리케이션을 구동한다(S10: 어플리케이션 구동 단계). 스마트 기기에서 어플리케이션을 구동한 후, 기 부팅된 컴퓨터의 음식관련 웹사이트(10)에서 선택하고자 하는 음식과 식재료의 특정영상패턴(본 발명에서는 QT코드를 특정영상패턴으로 사용하고 있다.)을 인식시키거나, 기 제작된 음식과 식재료의 특정영상패턴의 스티커를 카메라를 통해 포커싱 한다(S20: 특정영상패턴 카메라 포커싱 단계).Figure 3 is a flow chart of the food information providing method using augmented reality according to the present invention, first driving the application consisting of the system configuration according to the present invention (S10: application driving step). After running the application on the smart device, the food-related website 10 of the pre-booted computer to recognize the specific image pattern (food in the present invention uses a QT code as a specific image pattern) to select. Alternatively, a sticker of a specific image pattern of pre-made food and ingredients is focused through a camera (S20: specific image pattern camera focusing step).

한편, 카메라를 통해 포커싱하여 인식한 음식이 음식조리 표준DB(40)에 있는지 파악을 하게 된다(S30: 선택음식이 음식조리 표준DB에 존재하는지 파악하는 단계). 파악된 결과에 따라, 음식조리 표준DB(40)에서 선택한 음식이 존재한다면, 인식된 음식의 패턴값을 암호화 한다(S40: 인식된 패턴값의 암호화 단계).On the other hand, it is determined whether the food recognized by focusing through the camera in the food cooking standard DB (40) (S30: determining whether the selected food exists in the food cooking standard DB). According to the grasped result, if there is a food selected in the food cooking standard DB 40, the pattern value of the recognized food is encrypted (S40: encryption step of the recognized pattern value).

특정영상패턴을 암호화하는 이유는 상용되고 있는 각종 리더기를 통해 본 발명에 따른 특정영상패턴을 인식하도록 한다면, 현실화면 위에 음식 이미지가 중첩되지 않게 된다. 즉, 디스플레이부(2)에서 보여지고 있는 현실화면이 패턴값을 나타내는 화면으로 전환되기 때문에 증강현실을 이용한 음식정보 제공방법이 구현되지 않게 되는 것이다.The reason for encrypting a specific image pattern is that if a specific image pattern according to the present invention is recognized through various readers that are commercially available, the food image is not superimposed on the reality screen. That is, since the reality screen shown on the display unit 2 is converted to a screen indicating a pattern value, the food information providing method using augmented reality is not implemented.

한편, 선택한 음식이 음식조리 표준DB(40)에 존재하지 않는다면, 선택한 음식을 식품영양연구소(81) 및 조리방법연구소(82)에 의뢰하여 표준 조리방법과 보양정보를 추후에 공급받을 수 있도록 조치한다(S31: 식품영양연구소 및 조리방법연구소에 의뢰하는 단계).On the other hand, if the selected food does not exist in the food cooking standard DB (40), the food and nutrition research institute 81 and the cooking method research institute 82 to request the standard cooking method and supplementary information to be supplied later (S31: step commissioned by the Institute of Food and Nutrition Research Institute).

또한, 암호화된 패턴값은 피드백모듈(20)의 상세구성중 음식 이미지 모듈(24)에서 선택된 음식 및 식재료와 매칭되고(S50: 패턴값을 해독 및 음식 이미지 모듈과 매칭하는 단계), 매칭된 음식 이미지는 현실화면위로 조리순서에 따라 중첩됨과 동시에 정렬된다(S60: 선택된 식재료의 이미지가 조리순서에 따라 현실화면과 중첩 및 정렬되는 단계).In addition, the encrypted pattern value is matched with the food and ingredients selected in the food image module 24 of the detailed configuration of the feedback module 20 (S50: matching the pattern value with the decryption and food image module), the matched food Images are superimposed on the real screen according to the cooking order and aligned at the same time (S60: step of overlapping and sorting the images of the selected ingredients with the real screen according to the cooking order).

한편, 기 선택된 식재료 외에 더 추가되면 좋을 추천 식재료를 안내하거나, 기 선택된 식재료와 대체할 수 있는 식재료를 현실화면 위로 중첩하여 알려준다(S70: 추가할 추천 식재료와 대체 식재료를 알려주는 단계). 또한, 선택된 음식의 보양정보가 현실화면 위로 중첩되면서 스마트기기의 디스플레이부(2)를 통해 이용자에게 보여진다(S80: 선택된 음식의 보양정보가 현실화면 위로 중첩되는 단계).On the other hand, in addition to the pre-selected foods to guide the recommended foods to be added more, or the foods that can be replaced with the pre-selected foods and informs the superimposed on the reality screen (S70: step to inform the recommended foods and substitutes to add). In addition, while the information on the selected food is superimposed on the real screen, it is shown to the user through the display unit 2 of the smart device (S80: step of superimposing the information on the selected food on the real screen).

이상에서 살펴본 바와 같이, 본 발명에 따른 증강현실을 이용한 음식정보 제공방법 및 음식정보 제공시스템은 근자에 널리 보급되고 있는 스마트 기기의 증강현실 프로그램을 이용함으로써, 음식을 만들때에 들어가는 식재료의 이미지를 주방의 실사 영상위에서 볼 수 있는데다, 해당 음식의 보양정보를 실사 영상의 위에서 중첩된 상태로 볼 수 있음에 따라, 음식을 조리하는 과정이 유쾌해지며, 음식 조리에 대한 흥미를 불러일으킬 수 있을 뿐 아니라, 새로운 음식에 대한 보양정보를 취득할 수 있게 된다.
As described above, the food information providing method and the food information providing system using augmented reality according to the present invention by using the augmented reality program of smart devices that are widely used in recent years, by using the image of the food ingredients when making food As it can be seen on the live-action video of the kitchen, and the information on the food's maintenance can be seen as superimposed on the live-action video, the process of cooking food becomes pleasant and can only induce interest in food cooking. In addition, it is possible to obtain the rehabilitation information for the new food.

1 : 카메라부
2 : 디스플레이부
10 : 웹사이트
11 : QR코드
20 : 피드백모듈
21 : 패턴인식부
22 : 패턴암호화부
23 : 패턴해독 및 매칭부
24 : 음식 이미지 모듈
25 : 영상출력부
26 : 영상중첩부
30 : 관리운영부
40 : 음식조리 표준DB
50 : 사용자 특성화DB
60 : 견련관계통계모듈
70 : 분석모듈
80 : 연계기관
81 : 식품영양연구소
82 : 조리방법연구소1: Camera unit
2: display unit
10: Website
11: QR code
20: feedback module
21: pattern recognition unit
22: pattern encryption unit
23: pattern decoding and matching unit
24: food image module
25: video output unit
26: video nesting unit
30: Management and Operations Department
40: Food Cooking Standard DB
50: user characterization DB
60: Appearance Relations Module
70: analysis module
80: Linked Agency
81: Institute of Food and Nutrition
82: Cooking Method Research Institute

Claims (3)

카메라가 내장된 스마트 기기의 어플리케이션을 구동하는 단계(S10)와, 기 제작된 음식과 식재료에 대한 특정영상패턴의 스티커 또는 웹사이트의 특정영상패턴을 카메라를 통해 포커싱 하는 단계(S20)와, 카메라를 통해 포커싱 되어 선택된 음식이 음식조리 표준DB에 존재하는지 파악하는 단계(S30)와, 선택한 음식이 음식조리 표준DB에 존재하지 않는다면, 선택한 음식을 식품영양연구소 및 조리방법연구소에 의뢰하는 단계(S31)와,
선택한 음식이 음식조리 표준DB에 존재함에 따라 인식된 특정영상패턴값을 암호화 하는 단계(S40)와, 암호화된 패턴값을 해독하여 음식 이미지 모듈과 매칭하는 단계(S50)와, 매칭된 식재료의 이미지가 조리순서에 따라 현실화면과 중첩 및 정렬되는 단계(S60)와, 기 선택된 식재료 외에 더 추가되면 좋을 추천 식재료 및 기 선택된 식재료와 대체할 수 있는 식재료를 현실화면 위로 중첩하여 알려주는 단계(S70)와, 선택된 음식의 보양정보가 현실화면 위로 중첩되는 단계(S80)를 포함하는 것을 특징으로 하는 증강현실을 이용한 음식정보 제공방법.
Driving an application of a smart device with a built-in camera (S10), focusing a specific image pattern on a website or a specific image pattern on a pre-made food and ingredients through a camera (S20), and a camera Determining whether the selected food is focused in the food cooking standard DB (S30), and if the selected food does not exist in the food cooking standard DB, requesting the selected food to the Food and Nutrition Research Institute and the Cooking Method Research Institute (S31). )Wow,
Encrypting the specific image pattern value recognized as the selected food exists in the food cooking standard DB (S40), decrypting the encrypted pattern value and matching it with the food image module (S50), and an image of the matched ingredients Is superimposed and aligned with the reality screen according to the cooking order (S60), and the recommended foods that may be added in addition to the pre-selected foods and foods that can be replaced with the pre-selected foods to be superimposed on the reality screen (S70). And, food information providing method using augmented reality, comprising the step (S80) of the maintenance information of the selected food is superimposed on the reality screen.
스마트 기기에 내장된 카메라부(1)와, 특정영상패턴을 인지하는 피드백모듈(20)과, 이용자의 식습관을 도출하기 위한 사용자 특성화DB(50) 및 음식의 표준 조리방법이 저장된 음식조리 표준DB(40)로 구성된 관리운영부(30)와, 이용자가 선택한 식재료를 기준으로 음식조리 표준DB(40)로부터 한국음식 표준 조리방법과 비교하여 추가되어야 할 재료나 대체해도 좋은 식재료를 분석하는 견련관계통계모듈(60)과, 이용자가 선택한 식재료를 통해 만들어질 음식의 보양정보를 분석하는 분석모듈(70)이 포함된 것을 특징으로 하는 증강현실을 이용한 음식정보 제공시스템.
The camera unit 1 embedded in the smart device, a feedback module 20 for recognizing a specific image pattern, a user characterization DB 50 for deriving a user's eating habits, and a standard food cooking standard DB for storing standard cooking methods Comprehensive statistics to analyze the ingredients to be added or replaceable in comparison with the Korean food standard cooking method from the food cooking standard DB (40) on the basis of the management and operation unit 30 consisting of (40) and the user selected ingredients Module 60 and the food information providing system using augmented reality, characterized in that it comprises an analysis module 70 for analyzing the maintenance information of the food to be made through the food selected by the user.
청구항 2에 있어서,
상기 피드백모듈(20)은 다른 컴퓨터에서 웹사이트(10)를 접속한 후, 해당 웹사이트(10)상에서 보여주는 QR코드(11)를 인식하는 패턴인식부(21)와, 인식된 패턴값을 암호화 하는 패턴암호화부(22)와, 암호화된 패턴값을 해독 및 음식 이미지 모듈과 매칭하는 패턴해독 및 매칭부(23)와, 이용자가 선택한 음식과 식재료의 다양한 이미지가 저장되어 작동되는 음식 이미지 모듈(24)과, 선택된 음식과 식재료의 이미지를 출력하는 영상출력부(25)와, 스마트 기기의 현실화면 위로 음식과 식재료의 이미지를 중첩하는 영상중첩부(26)가 포함된 것을 특징으로 하는 증강현실을 이용한 음식정보 제공시스템.
The method according to claim 2,
The feedback module 20 encrypts the pattern recognition unit 21 and the pattern recognition unit 21 that recognizes the QR code 11 shown on the website 10 after accessing the website 10 from another computer. The pattern encryption unit 22, the pattern decryption and matching unit 23 which matches the encrypted pattern value with the decryption and food image module, and the food image module which stores and operates various images of the food and ingredients selected by the user ( 24), an image output unit 25 for outputting an image of the selected food and ingredients, and an image superimposition unit 26 for superimposing images of food and ingredients on the reality screen of the smart device Food information providing system using.
KR1020110043742A 2011-05-11 2011-05-11 The method and the system affording food information using augmented reality KR20120126157A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110043742A KR20120126157A (en) 2011-05-11 2011-05-11 The method and the system affording food information using augmented reality

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110043742A KR20120126157A (en) 2011-05-11 2011-05-11 The method and the system affording food information using augmented reality

Publications (1)

Publication Number Publication Date
KR20120126157A true KR20120126157A (en) 2012-11-21

Family

ID=47511534

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110043742A KR20120126157A (en) 2011-05-11 2011-05-11 The method and the system affording food information using augmented reality

Country Status (1)

Country Link
KR (1) KR20120126157A (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014107681A1 (en) * 2013-01-04 2014-07-10 Awyse, Inc. System and method for providing augmented reality on mobile devices
US9269133B2 (en) 2013-05-10 2016-02-23 Samsung Electronics Co., Ltd. Method and system for providing cooking information about food
KR20180052362A (en) * 2016-11-10 2018-05-18 엘지전자 주식회사 Mobile terminal performing method of providing recipe of beer brewed by beer maker, recording medium recording program performing the method
CN108464729A (en) * 2018-04-24 2018-08-31 珠海优特物联科技有限公司 Use the auxiliary cooking method of AR glasses, AR glasses and cooking system
CN113361338A (en) * 2021-05-20 2021-09-07 江苏大学 Cooking process parameter intelligent decision-making system and method based on nutritional characteristics and proportion of coarse cereal rice
WO2022055030A1 (en) * 2020-09-14 2022-03-17 주식회사 에이브로스 Artificial intelligence (ai)-based contactless qsc inspection solution system
CN114503060A (en) * 2019-10-10 2022-05-13 韩国烟草人参公社 Smoking system for providing a smoking experience in virtual reality

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014107681A1 (en) * 2013-01-04 2014-07-10 Awyse, Inc. System and method for providing augmented reality on mobile devices
US9269133B2 (en) 2013-05-10 2016-02-23 Samsung Electronics Co., Ltd. Method and system for providing cooking information about food
KR20180052362A (en) * 2016-11-10 2018-05-18 엘지전자 주식회사 Mobile terminal performing method of providing recipe of beer brewed by beer maker, recording medium recording program performing the method
US10831340B2 (en) 2016-11-10 2020-11-10 Lg Electronics Inc. Mobile terminal performing method of providing recipe for making a beverage by a beverage-making apparatus and recording medium recording program performing the method
CN108464729A (en) * 2018-04-24 2018-08-31 珠海优特物联科技有限公司 Use the auxiliary cooking method of AR glasses, AR glasses and cooking system
CN114503060A (en) * 2019-10-10 2022-05-13 韩国烟草人参公社 Smoking system for providing a smoking experience in virtual reality
CN114503060B (en) * 2019-10-10 2024-03-22 韩国烟草人参公社 Smoking system, control method thereof, and computer-readable recording medium
WO2022055030A1 (en) * 2020-09-14 2022-03-17 주식회사 에이브로스 Artificial intelligence (ai)-based contactless qsc inspection solution system
CN113361338A (en) * 2021-05-20 2021-09-07 江苏大学 Cooking process parameter intelligent decision-making system and method based on nutritional characteristics and proportion of coarse cereal rice

Similar Documents

Publication Publication Date Title
KR20120126157A (en) The method and the system affording food information using augmented reality
JP6055160B1 (en) Cosmetic information providing system, cosmetic information providing apparatus, cosmetic information providing method, and program
RU2731362C1 (en) Method of providing information on purchases in live video
US9665960B1 (en) Image-based item location identification
US11042607B2 (en) Recognition-based content management, systems and methods
WO2017190471A1 (en) Method and device for processing tv shopping information
TWI465946B (en) Synching one or more matrix codes to content related to a multimedia presentation
WO2018072617A1 (en) Method and device for interaction of data objects in virtual reality/augmented reality spatial environment
KR101476732B1 (en) Certificating qualifying goods label, certificating qualifying goods terminal thereof, certificating qualifying goods label printer, the system and method for certificating qualifying goods
US20160180441A1 (en) Item preview image generation
KR101620938B1 (en) A cloth product information management apparatus and A cloth product information management sever communicating to the appartus, a server recommending a product related the cloth, a A cloth product information providing method
US9542703B2 (en) Virtual custom framing expert system
WO2016183629A1 (en) Augmented reality system and method
CN103942243A (en) Display apparatus and method for providing customer-built information using the same
CN110827099B (en) Household commodity recommendation method, client and server
KR20140068332A (en) Menu board advertising service system using recognition of augmented reality marker and method thereof
CN111494946A (en) Image processing method, device, equipment and computer readable storage medium
CN105931063A (en) Jewelry product information examination method
KR20200009336A (en) Furniture placement service provision system using augmented reality
US20150106200A1 (en) Enhancing a user's experience by providing related content
CN104850400A (en) Method and apparatus for generating online shop page
KR20150093930A (en) Apparatus and method for makeup by using augmented reality
CN109145816B (en) Commodity identification method and system
KR101258454B1 (en) The method and the system finding the exit using augmented reality in big maze
KR20210083551A (en) Method, apparatus, system and computer program for real-time adaptive moving picture virtual clothes fitting

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application