KR20140133337A - 음식의 조리 정보를 제공하는 시스템 및 방법 - Google Patents

음식의 조리 정보를 제공하는 시스템 및 방법 Download PDF

Info

Publication number
KR20140133337A
KR20140133337A KR1020130053390A KR20130053390A KR20140133337A KR 20140133337 A KR20140133337 A KR 20140133337A KR 1020130053390 A KR1020130053390 A KR 1020130053390A KR 20130053390 A KR20130053390 A KR 20130053390A KR 20140133337 A KR20140133337 A KR 20140133337A
Authority
KR
South Korea
Prior art keywords
information
mobile device
cooking
food
user
Prior art date
Application number
KR1020130053390A
Other languages
English (en)
Inventor
조영이
김나리
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130053390A priority Critical patent/KR20140133337A/ko
Priority to EP14155110.1A priority patent/EP2801947A3/en
Priority to US14/180,500 priority patent/US9269133B2/en
Publication of KR20140133337A publication Critical patent/KR20140133337A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/12—Hotels or restaurants
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0631—Item recommendations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G06T2207/30128—Food products

Abstract

음식의 조리 정보를 제공하는 시스템 및 방법이 제공된다. 모바일 디바이스가 음식을 조리하기 위한 정보를 제공하는 방법은, 플레이트(plate) 상에 놓인 재료의 이미지를 카메라로부터 수신하는 단계; 상기 재료의 이미지에 기초하여, 상기 재료를 인식하는 단계; 상기 모바일 디바이스의 사용자에 관한 사용자 정보에 기초하여, 상기 재료와 관련된 음식의 추천 목록을 획득하는 단계; 상기 추천 목록에서 선택된 음식에 관한 조리 정보를 획득하는 단계; 및 상기 획득된 조리 정보를 상기 모바일 디바이스와 연결된 프로젝터(projector)에게 제공하는 단계;를 포함하며, 상기 제공된 조리 정보는, 상기 프로젝터를 통하여 상기 재료가 놓인 상기 플레이트 상에 조사된다.

Description

음식의 조리 정보를 제공하는 시스템 및 방법{SYSTEM AND METHOD FOR PROVIDING COOKING INFORMATION OF FOOD}
본 발명은 음식의 조리 정보를 제공하는 시스템 및 방법에 관한 것으로서, 보다 상세하게는, 음식의 재료가 놓이는 플레이트 상에 음식의 조리 정보를 제공하는 시스템 및 방법에 관한 것이다.
일반적으로 사용자는 음식을 조리할 때에 사용자가 기존에 알고 있는 경험에 기초하여 조리를 한다. 또한, 사용자는 서적에 기재된 레시피에 따라 음식을 조리하거나, 인터넷을 통하여 제공되는 레시피를 이용하여 음식을 조리한다.
그러나, 이와 같은 경우에 사용자는 부엌에서 멀리 떨어져 있는 방으로 가서 음식을 조리하는 방법을 확인하고 난 후에, 음식을 조리해야 하는 불편함이 여전히 있다. 게다가, 음식을 조리하는 사용자가 조리 도구를 이용하고 있는 중에는, 서적 또는 인터넷을 통하여 음식에 관한 조리 정보를 획득하기 어려운 문제가 있다.
따라서, 사용자가 음식을 용이하게 조리할 수 있도록, 음식을 조리하기 위한 조리 정보, 음식에 관련된 쇼핑 정보 및 영양 정보를 사용자에게 효율적으로 제공할 수 있는 기술이 요구되고 있다.
본 발명의 일 실시예는, 플레이트 상에 놓인 재료의 이미지를 이용하여 음식을 추천하고, 음식의 조리 정보를 프로젝터를 통하여 플레이트 상에 조사할 수 있는, 음식의 조리 정보를 제공하는 시스템 및 방법을 제공한다.
또한, 본 발명의 일 실시예는, 재료의 이미지를 이용하여 재료를 인식하고, 사용자에 맞는 음식을 추천할 수 있는, 음식의 조리 정보를 제공하는 시스템 및 방법을 제공한다.
또한, 본 발명의 일 실시예는, 플레이트 상에 놓인 재료가 변경됨에 따라, 조리 정보를 변경하여 제공할 수 있는, 음식의 조리 정보를 제공하는 시스템 및 방법을 제공한다.
또한, 본 발명의 일 실시예는, 음식을 조리하는데 이용되는 재료에 관한 쇼핑 정보를 제공할 수 있는, 음식의 조리 정보를 제공하는 시스템 및 방법을 제공한다.
또한, 본 발명의 일 실시예는, 음식의 조리 상황에 관한 정보를 제공할 수 있는, 음식의 조리 정보를 제공하는 시스템 및 방법을 제공한다.
상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 제 1 측면은, 플레이트(plate) 상에 놓인 재료의 이미지를 카메라로부터 수신하는 단계; 상기 재료의 이미지에 기초하여, 상기 재료를 인식하는 단계; 상기 모바일 디바이스의 사용자에 관한 사용자 정보에 기초하여, 상기 재료와 관련된 음식의 추천 목록을 획득하는 단계; 상기 추천 목록에서 선택된 음식에 관한 조리 정보를 획득하는 단계; 및 상기 획득된 조리 정보를 상기 모바일 디바이스와 연결된 프로젝터(projector)에게 제공하는 단계;를 포함하며, 상기 제공된 조리 정보는, 상기 프로젝터를 통하여 상기 재료가 놓인 상기 플레이트 상에 조사되는 것인, 모바일 디바이스가 음식을 조리하기 위한 정보를 제공하는 방법을 제공할 수 있다.
또한, 상기 재료를 인식하는 단계는, 상기 촬영된 재료의 이미지를 서버에게 제공하고, 상기 서버로부터 상기 재료의 종류 및 상기 재료의 무게에 관한 정보를 수신할 수 있다.
또한, 상기 음식의 추천 목록을 획득하는 단계는, 상기 사용자 정보를 서버에게 제공하고, 상기 촬영된 이미지 및 상기 제공된 사용자 정보에 기초하여 상기 서버에 의해 추천된 상기 음식의 추천 목록을 상기 서버로부터 수신할 수 있다.
또한, 상기 음식의 추천 목록은, 상기 사용자의 몸무게, 상기 사용자의 성별, 상기 사용자의 선호 음식, 상기 사용자의 건강 상태 중 적어도 하나에 기초하여 추천될 수 있다.
또한, 상기 조리 정보는, 상기 선택된 음식을 조리하는데 이용되는 재료들의 종류 및 중량에 관한 정보, 및 상기 음식을 조리하기 위한 세부 조리 단계에 관한 정보를 포함할 수 있다.
또한, 상기 조리 정보를 상기 프로젝터에게 제공하는 단계는, 상기 재료들의 종류 및 중량에 관한 정보를 상기 프로젝터에게 먼저 제공하고, 상기 세부 조리 단계에 관한 정보를 상기 프로젝트에게 순차적으로 제공할 수 있다.
또한, 상기 플레이트 상에 놓인 상기 재료의 양이 변경됨에 따라, 상기 양이 변경된 재료의 중량에 기초하여, 상기 조리 정보를 변경하는 단계;를 더 포함하며, 상기 변경된 조리 정보가 상기 프로젝터에게 제공될 수 있다.
또한, 상기 선택된 음식을 조리하는데 이용되는 재료들이 상기 모바일 디바이스와 연결된 냉장고에 수납되어 있는지를 확인하는 단계; 및 상기 선택된 음식을 조리하는데 이용되는 재료들 중에서 상기 냉장고에 수납되어 있지 않은 재료에 대한 쇼핑 정보를 획득하는 단계;를 더 포함할 수 있다.
또한, 상기 쇼핑 정보는 상기 모바일 디바이스의 화면 및 상기 프로젝터 중 적어도 하나를 통하여 상기 사용자에게 제공될 수 있다.
또한, 상기 모바일 디바이스는 크래들(cradle) 장치에 장착됨으로써, 상기 카메라 및 상기 프로젝터와 연결될 수 있다.
또한, 본 발명의 제 2 측면은, 적어도 하나의 프로그램이 저장되는 메모리; 및 상기 적어도 하나의 프로그램을 실행함으로써 음식을 조리하기 위한 정보를 제공하는 프로세서를 포함하고, 상기 적어도 하나의 프로그램은, 플레이트(plate) 상에 놓인 재료의 이미지를 카메라로부터 수신하는 단계; 상기 재료의 이미지에 기초하여, 상기 재료를 인식하는 단계; 상기 모바일 디바이스의 사용자에 관한 사용자 정보에 기초하여, 상기 인식된 재료와 관련된 음식의 추천 목록을 획득하는 단계; 상기 추천 목록에서 선택된 음식에 관한 조리 정보를 획득하는 단계; 및 상기 획득된 조리 정보를 상기 모바일 디바이스와 연결된 프로젝터(projector)에게 제공하는 단계;를 실행하는 명령어들을 포함하며, 상기 제공된 조리 정보는, 상기 프로젝터를 통하여 상기 재료가 놓인 상기 플레이트 상에 조사되는 것인, 모바일 디바이스를 제공할 수 있다.
또한, 상기 재료를 인식하는 단계는, 상기 촬영된 재료의 이미지를 서버에게 제공하고, 상기 서버로부터 상기 재료의 이름 및 상기 재료의 무게에 관한 정보를 수신할 수 있다.
또한, 상기 음식의 추천 목록을 획득하는 단계는, 상기 사용자 정보를 서버에게 제공하고, 상기 촬영된 이미지 및 상기 제공된 사용자 정보에 기초하여 상기 서버에 의해 추천된 상기 음식의 추천 목록을 상기 서버로부터 수신할 수 있다.
또한, 상기 음식의 추천 목록은, 상기 사용자의 몸무게, 상기 사용자의 성별, 상기 사용자의 선호 음식, 상기 사용자의 건강 상태 중 적어도 하나에 기초하여 추천될 수 있다.
또한, 상기 조리 정보는, 상기 선택된 음식을 조리하는데 이용되는 재료들의 이름 및 중량에 관한 정보, 및 상기 음식을 조리하기 위한 세부 조리 단계에 관한 정보를 포함할 수 있다.
또한, 상기 조리 정보를 상기 프로젝터에게 제공하는 단계는, 상기 재료들의 이름 및 중량에 관한 정보를 상기 프로젝터에게 먼저 제공하고, 상기 세부 조리 단계에 관한 정보를 상기 프로젝트에게 순차적으로 제공할 수 있다.
또한, 상기 플레이트 상에 놓인 상기 재료의 양이 변경됨에 따라, 상기 양이 변경된 재료의 중량에 기초하여, 상기 조리 정보를 변경하는 단계;를 더 포함하며, 상기 변경된 조리 정보가 상기 프로젝터에게 제공될 수 있다.
또한, 상기 선택된 음식을 조리하는데 이용되는 재료들이 상기 모바일 디바이스와 연결된 냉장고에 수납되어 있는지를 확인하는 단계; 및 상기 선택된 음식을 조리하는데 이용되는 재료들 중에서 상기 냉장고에 수납되어 있지 않은 재료에 대한 쇼핑 정보를 획득하는 단계;를 더 포함할 수 있다.
또한, 상기 쇼핑 정보는 상기 모바일 디바이스의 화면 및 상기 프로젝터 중 적어도 하나를 통하여 상기 사용자에게 제공될 수 있다.
또한, 상기 모바일 디바이스는 크래들(cradle) 장치에 장착됨으로써, 상기 카메라 및 상기 프로젝터와 연결될 수 있다.
또한, 본 발명의 제 3 측면은, 플레이트(plate) 상에 놓인 재료의 이미지를 모바일 디바이스로부터 수신하는 단계; 상기 수신된 재료의 이미지에 기초하여, 상기 재료를 인식하는 단계; 상기 모바일 디바이스의 사용자에 관한 사용자 정보를 상기 모바일 디바이스로부터 수신하는 단계; 상기 사용자 정보에 기초하여, 상기 재료와 관련된 음식의 조리 정보를 생성하는 단계; 및 상기 생성된 조리 정보를 상기 모바일 디바이스에게 제공하는 단계;를 포함하며, 상기 재료의 이미지는 상기 모바일 디바이스와 연결된 카메라에 의해 생성되고, 상기 카메라로부터 상기 모바일 디바이스에게 제공된 것이며, 상기 모바일 디바이스에게 제공된 조리 정보는, 상기 모바일 디바이스와 연결된 프로젝터를 통하여 상기 플레이트 상에 조사되는 것인, 서버가 음식을 조리하기 위한 정보를 제공하는 방법을 제공할 수 있다.
또한, 본 발명의 제 4 측면은, 플레이트(plate) 상에 놓인 재료의 이미지를 카메라로부터 수신하는 단계; 상기 재료의 이미지에 기초하여, 상기 재료를 인식하는 단계; 및 상기 인식된 재료에 관련된 음식의 조리 정보 를 상기 모바일 디바이스와 연결된 프로젝터(projector)에게 제공하는 단계;를 포함하며, 상기 제공된 조리 정보는, 상기 프로젝터를 통하여 상기 재료가 놓인 상기 플레이트 상에 조사되는 것인, 모바일 디바이스가 음식을 조리하기 위한 정보를 제공하는 방법을 제공할 수 있다.
또한, 본 발명의 제 5 측면은, 제 1 측면의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 조리 정보 제공 시스템의 개요도이다.
도 2는 본 발명의 일 실시예에 따른 모바일 디바이스(1000)가 음식의 조리 정보를 플레이트(4000) 상에 제공하는 방법의 흐름도이다.
도 3은 본 발명의 일 실시예에 따른 음식의 추천 목록을 제공하는 방법의 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 조리 정보 제공 시스템에서 플레이트(4000)에 놓인 재료와 관련된 조리 정보를 제공하는 방법의 흐름도이다.
도 5는 본 발명의 일 실시예에 따른 모바일 디바이스(1000)가 프로젝터(3000)에게 음식의 조리에 관련된 각종의 정보를 제공하는 방법의 흐름도이다.
도 6은 본 발명의 일 실시예에 따른 모바일 디바이스(1000)가 플레이트(4000) 상에 놓인 재료가 변경됨에 따라 조리 정보를 변경하는 방법의 흐름도이다.
도 7은 본 발명의 일 실시예에 따른 모바일 디바이스(1000)가 음식을 조리하는데 이용되는 재료에 관한 쇼핑 정보를 제공하는 방법의 흐름도이다.
도 8은 본 발명의 일 실시예에 따른 모바일 디바이스(1000)가 음식에 관한 영양 정보를 제공하는 방법의 흐름도이다.
도 9는 본 발명의 일 실시예에 따른 모바일 디바이스(1000)가 카메라(2000) 및 프로젝터(3000)와 연결되는 일례를 도시한 도면이다.
도 10은 본 발명의 일 실시예에 따른 사용자 정보에 기초하여 추천된 메뉴가 모바일 디바이스(1000)의 화면에 표시되는 일례를 도시한 도면이다.
도 11은 본 발명의 일 실시예에 따른 모바일 디바이스(1000)의 화면에, 사용자에 의해 선택된 음식의 재료 정보가 표시되는 일레를 도시한 도면이다.
도 12는 본 발명의 일 실시예에 따른 플레이트(4000)에 표시되는 아이콘을 이용하여, 조리 정보 제공 서비스를 초기화하는 일례를 도시한 도면이다.
도 13은 본 발명의 일 실시예에 따른 플레이트(4000) 상에 조사되는 메뉴 이미지의 일례를 도시한 도면이다.
도 14는 본 발명의 일 실시예에 따른 메뉴 이미지에 포함된 아이콘이 사용자의 제스처에 기초하여 선택되는 일례를 도시한 도면이다.
도 15는 본 발명의 일 실시예에 따른 플레이트(4000) 상에 표시되는 메뉴 이미지가 사용자의 제스처에 기초하여 선택 모드에서 이동 모드로 변경되는 일례를 도시한 도면이다.
도 16은 본 발명의 일 실시예에 따른 플레이트(4000)에 표시되는 메뉴 이미지가 사용자의 제스처에 기초하여 이동하는 일례를 도시한 도면이다.
도 17은 본 발명의 일 실시예에 따른 쇼핑 정보가 플레이트(4000) 상에 조사되는 일례를 도시한 도면이다.
도 18은 본 발명의 일 실시예에 따른, 사용자가 음식의 재료를 준비할 수 있도록, 플레이트(4000) 상에 조리 정보가 표시되는 일례를 도시한 도면이다.
도 19는 본 발명의 일 실시예에 따른 플레이트(4000) 상에 놓인 재료의 중량이 변경됨에 따라, 음식의 재료에 관한 정보가 변경되어 표시되는 일례를 도시한 도면이다.
도 20은 본 발명의 일 실시예에 따른 플레이트(4000) 상에 놓인 재료에 컷팅 가이드 라인이 조사되는 일례를 도시한 도면이다.
도 21은 본 발명의 일 실시예에 따른 플레이트(4000) 상에 음식의 조리에 관한 코멘트가 조사되는 일례를 도시한 도면이다.
도 22는 본 발명의 일 실시예에 따른 모바일 디바이스(1000)의 블록도이다.
도 23은 본 발명의 일 실시예에 따른 서버(6000)의 블록도이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
이하 첨부된 도면을 참고하여 본 발명을 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 조리 정보 제공 시스템의 개요도이다.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 조리 정보 제공 시스템은, 모바일 디바이스(1000), 카메라(2000), 프로젝터(3000), 플레이트(4000), 가전 기기(5000), 서버(6000) 및 네트워크(7000)를 포함한다.
모바일 디바이스(1000)는 음식의 조리에 관련된 조리 정보를 획득하고, 획득된 조리 정보를 프로젝터(3000)를 이용하여 플레이트(4000)에 조사한다. 모바일 디바이스(1000)는 플레이트(4000) 상에 놓인 재료의 이미지를 카메라(2000)로부터 수신할 수 있으며, 수신된 재료 이미지 및 사용자 정보에 기초하여 사용자에게 음식의 추천 목록을 제공할 수 있다. 또한, 모바일 디바이스(1000)는 사용자 입력에 기초하여 소정의 음식을 선택할 수 있으며, 선택된 음식에 관련된 조리 정보를 프로젝터(3000)를 이용하여 플레이트(4000)에 조사할 수 있다. 조리 정보는, 음식의 조리에 관련된 정보로서, 예를 들어, 음식을 조리하는데 필요한 재료의 이름, 종류, 재료의 중량, 음식을 조리하기 위한 조리 방법에 관련된 정보를 포함할 수 있다.
또한, 모바일 디바이스(1000)는 가전 기기(5000)에 수납된 재료의 식별 값을 가전 기기(5000)로부터 수집할 수 있다. 또한, 모바일 디바이스(1000)는, 수집된 재료 식별 값에 기초하여, 음식을 조리하기 위하여 구매해야 할 재료를 확인할 수 있다. 또한, 모바일 디바이스(1000)는 구매해야 할 재료에 관련된 쇼핑 정보를 사용자에게 제공할 수 있다.
또한, 모바일 디바이스(1000)는 현재의 조리 단계에서 이용되는 가전 기기(5000)의 동작에 관한 정보를 가전 기기(5000)로부터 수신할 수 있다. 모바일 디바이스(1000)는 가전 기기(5000)의 동작에 관한 정보에 기초하여, 현재의 조리 단계에 관련된 조리 상황을 사용자에게 알릴 수 있다.
또한, 모바일 디바이스(1000)는 플레이트(4000)에 놓인 재료 또는 음식을 인식하고, 인식된 재료 또는 음식에 관련된 영양 정보를 사용자에게 제공할 수 있다.
모바일 디바이스(1000)는 스마트폰, 태블릿 폰, 휴대폰, PDA(personal digital assistant), 랩톱, 미디어 플레이어, 및 GPS(global positioning system) 장치일 수 있으나, 이에 제한되지 않는다.
카메라(2000)는 플레이트(4000), 플레이트(4000) 상에 놓인 재료, 및 플레이트(4000) 상에서의 사용자의 손짓을 촬영하고, 촬영된 영상을 모바일 디바이스(1000)에게 제공한다. 카메라(2000)에 의해 촬영된 재료의 영상은, 모바일 디바이스(1000)가 재료를 인식하는데 이용될 수 있다. 또한, 카메라(2000)에 의해 촬영된 사용자의 손짓의 영상은, 모바일 디바이스(1000)가 사용자의 입력을 확인하는데 이용될 수 있다. 카메라(2000)는, 예를 들어, 2D 카메라 및 3D 카메라를 포함할 수 있으나, 이에 제한되지 않는다.
프로젝터(3000)는 플레이트(4000) 상에 각종의 정보를 조사한다. 프로젝터(3000)는 모바일 디바이스(1000)로부터 소정의 정보를 수신하고, 수신된 정보를 플레이트(4000) 상에 조사할 수 있다. 프로젝터(3000)는, 예를 들어, 조리 정보, 쇼핑 정보, 및 조리에 관련된 알림 정보를 플레이트(4000)에 조사할 수 있으나, 이에 제한되지 않는다. 또한, 프로젝터(3000)는 모바일 디바이스(1000)로부터 조사 위치에 관한 정보를 수신할 수 있으며, 수신된 조사 위치 정보에 기초하여 플레이트(4000) 상의 소정의 위치에 조리 정보를 조사할 수 있다.
플레이트(4000) 상에는 음식의 재료가 놓일 수 있으며, 음식의 조리에 관련된 각종의 정보가 표시될 수 있다. 플레이트(4000)는, 예를 들어, 씽크대 상에 위치할 수 있으나, 이에 제한되지 않는다.
가전 기기(5000)는 네트워크(7000)를 통하여 모바일 디바이스(1000)에 연결될 수 있으며, 가전 기기(5000)에 수납된 음식 재료의 식별 값을 모바일 디바이스(1000)에게 제공할 수 있다. 또한, 가전 기기(5000)는 가전 기기(5000)의 동작에 관한 정보를 모바일 디바이스(1000)에게 제공할 수 있으며, 이를 통하여 모바일 디바이스(1000)는 음식의 조리 상황에 관한 정보를 사용자에게 제공할 수 있다. 가전 기기(5000)는, 예를 들어, 오븐, 가스레인지, 전자레인지, 냉장고를 포함할 수 있으나, 이에 제한되지 않는다. 또한, 가전 기기(5000)는 홈 네트워크를 통하여 모바일 디바이스(1000)와 연결될 수 있으나, 이에 제한되지 않는다. 또한, 예를 들어, 가전 기기(5000)는 모바일 디바이스(1000)와 직접 연결되거나, 홈 게이트웨이(미도시)를 통하여 연결될 수 있으나, 이에 제한되지 않는다.
서버(6000)는 플레이트(4000) 상에 놓인 재료에 관한 정보, 음식의 추천 목록 및 음식의 조리에 관한 정보 중 적어도 하나를, 모바일 디바이스(1000)에게 제공한다. 서버(6000)는 모바일 디바이스(1000)로부터 재료의 이미지를 수신하고, 수신된 재료의 이미지를 분석하여 재료의 이름, 종류 및 중량을 확인할 수 있다. 또한, 서버(6000)는 모바일 디바이스(1000)로부터 사용자 정보를 수신하고, 수신된 사용자 정보를 이용하여 소정의 음식을 추천할 수 있다. 또한, 서버(6000)는 음식의 조리에 필요한 재료에 관한 정보, 및 음식의 조리를 위한 세부 조리 단계에 관한 정보를 모바일 디바이스(1000)에게 제공할 수 있다.
네트워크(7000)는 근거리 통신망(Local Area Network; LAN), 광역 통신망(Wide Area Network; WAN) 또는 부가가치 통신망(Value Added Network; VAN) 등과 같은 유선 네트워크나 이동 통신망(mobile radio communication network), 근접 통신망(Near Field Communication network) 또는 위성 통신망 등과 같은 무선 네트워크로 구현될 수 있다. 또한, 도 1에 도시된 각 네트워크 구성 주체가 서로 원활하게 통신을 할 수 있도록 하는 포괄적인 의미의 데이터 통신망이며, 유선 인터넷, 무선 인터넷 및 모바일 무선 통신망을 포함한다.
도 2는 본 발명의 일 실시예에 따른 모바일 디바이스(1000)가 음식의 조리 정보를 플레이트(4000) 상에 제공하는 방법의 흐름도이다.
단계 S200에서 모바일 디바이스(1000)는 음식의 추천 목록을 획득한다. 모바일 디바이스(1000)는 카메라(2000)로부터 플레이트(4000) 상에 놓인 재료의 이미지를 수신할 수 있으며, 수신된 재료 이미지에 기초하여 재료를 인식할 수 있다. 모바일 디바이스(1000)는 재료의 이름, 종류 및 중량을 확인할 수 있다. 예를 들어, 모바일 디바이스(1000)는 재료 이미지를 서버(6000)에게 제공하고, 서버(6000)로부터 재료의 이름, 종류 및 중량에 관한 정보를 수신할 수 있으나, 이에 제한되지 않는다. 모바일 디바이스(1000)가 수신된 재료 이미지를 분석하고, 플레이트(4000) 상에 놓인 재료가 어떤 재료인지를 확인할 수도 있다.
또한, 모바일 디바이스(1000)는 확인된 재료와 관련된 음식의 추천 목록을 획득할 수 있다. 모바일 디바이스(1000)는 모바일 디바이스(1000)의 사용자에 관한 사용자 정보에 기초하여 음식의 추천 목록을 획득할 수 있다. 예를 들어, 모바일 디바이스(1000)는 사용자의 성별, 몸무게, 신장, 체지방, 선호 음식 및 건강 상태 중 적어도 하나에 따라 사용자에게 추천할 음식의 추천 목록을 획득할 수 있다. 모바일 디바이스(1000)는 사용자 정보를 서버(6000)에게 제공하고 음식의 추천 목록을 서버(6000)로부터 수신할 수 있으나, 이에 제한되지 않는다. 모바일 디바이스(1000)는 사용자 정보에 기초하여 직접 추천 목록을 생성할 수도 있다.
또한, 상기에서는, 모바일 디바이스(1000)가 플레이트(4000) 상에 놓인 재료와 관련된 음식의 추천 목록을 획득하는 것으로 설명하였지만, 이에 제한되지 않는다. 모바일 디바이스(1000)는 플레이트(4000) 상에 놓인 재료와 무관하게, 사용자에게 제공할 음식의 추천 목록을 획득할 수도 있다.
또한, 모바일 디바이스(1000)는 음식의 추천 목록을 모바일 디바이스(1000)의 화면에 디스플레이하거나, 프로젝터(3000)를 이용하여 플레이트(4000) 상에 조사할 수 있다.
단계 S210에서 모바일 디바이스(1000)는 사용자 입력에 기초하여 조리할 음식을 선택한다. 사용자 입력은, 플레이트(4000) 상의 사용자의 제스처 입력일 수 있다. 예를 들어, 사용자는 플레이트(4000) 상에서 자신의 손을 움직일 수 있으며, 사용자의 손의 움직임이 카메라(2000)에 의해 촬영되어 모바일 디바이스(1000)에게 제공될 수 있다. 또한, 사용자 입력은, 모바일 디바이스(1000)의 화면을 터치하는 입력일 수도 있다.
단계 S220에서 모바일 디바이스(1000)는 선택된 음식에 관한 조리 정보를 획득한다. 조리 정보는 음식의 조리와 관련된 정보로서, 예를 들어, 재료 정보 및 세부 조리 단계에 관한 정보를 포함할 수 있다. 모바일 디바이스(1000)는 선택된 음식을 조리하는데 필요한 재료들에 관한 재료 정보를 획득할 수 있다. 예를 들어, 플레이트(4000) 상에 재료 'AA'가 놓이고, 재료 'AA'에 관한 음식 'A'가 선택되면, 모바일 디바이스(1000)는 음식 'A'를 조리하는데 필요한 재료 'BB','CC'에 관한 정보를 획득할 수 있다. 또한, 예를 들어, 재료 'AA'가 400g인 경우에, 음식 'A'를 조리하기 위하여 100g의 재료'BB'와 50g의 재료 'CC'가 필요함을 모바일 디바이스(1000)는 확인할 수 있다.
또한, 모바일 디바이스(1000)는 선택된 음식의 조리를 위한 세부 조리 단계에 관한 정보를 획득할 수 있다. 세부 조리 단계에 관한 정보는, 사용자가 음식을 조리하기 위하여 행해야 하는 조리 동작을 순차적으로 나열한 정보일 수 있다. 예를 들어, 세부 조리 단계는, 재료 'AA'를 컷팅하는 단계, 재료 'AA'와, 재료 'BB'를 혼합하는 단계, 혼합된 재료 'AA' 및 재료 'BB'를 오븐에서 굽는 단계, 및 오븐에서 구워진 재료 'AA' 및 재료 'BB' 에 재료 'CC'를 뿌리는 단계를 포함할 수 있으나, 이에 제한되지 않는다.
모바일 디바이스(1000)는 재료 정보 및 세부 조리 단계에 관한 정보 중 적어도 하나를 서버(6000)로부터 제공받을 수 있으나, 이에 제한되지 않는다. 모바일 디바이스(1000)가 재료 정보 및 세부 조리 단계에 관한 정보를 생성할 수도 있다.
단계 S230에서 모바일 디바이스(1000)는 획득된 조리 정보를 플레이트(4000)에 조사한다. 모바일 디바이스(1000)는 획득된 조리 정보를 프로젝터(3000)에게 제공할 수 있으며, 프로젝터(3000)가 제공된 조리 정보를 플레이트(4000) 상에 조사할 수 있다. 또한, 모바일 디바이스(1000)는 플레이트(4000) 상에서 조리 정보가 표시될 위치에 관한 정보를 프로젝터(3000)에게 제공할 수 있으며, 프로젝터(3000)는 수신된 위치 정보에 기초하여 조리 정보를 플레이트(4000) 상에 조사할 수 있다.
도 3은 본 발명의 일 실시예에 따른 음식의 추천 목록을 제공하는 방법의 흐름도이다.
단계 S300에서 카메라(2000)는 플레이트(4000) 상에 놓인 재료를 촬영한다. 사용자는 플레이트(4000) 상에 소정의 재료를 놓을 수 있으며, 카메라(2000)는 플레이트(4000) 상에 놓인 재료를 촬영할 수 있다. 또한, 카메라(2000)는 재료를 촬영함으로써, 정지 영상 이미지 및 동영상 이미지 중 적어도 하나를 생성할 수 있다. 또한, 카메라(2000)는 재료를 촬영함으로써, 2D 또는 3D 이미지를 생성할 수 있다.
단계 S310에서 카메라(2000)는 촬영된 재료 이미지를 모바일 디바이스(1000)에게 제공한다. 카메라(2000)는 정지 영상 이미지 및 동영상 이미지 중 적어도 하나를 모바일 디바이스(1000)에게 제공할 수 있다. 또한, 카메라(2000)는 단수 또는 복수의 재료 이미지를 모바일 디바이스(1000)에게 제공할 수 있다.
단계 S320에서 모바일 디바이스(1000)는 재료 이미지 및 사용자 정보를 서버(6000)에게 제공한다. 모바일 디바이스(1000)는 카메라(2000)로부터 수신된 재료 이미지 및 모바일 디바이스(1000)의 사용자의 식별 값을 서버(6000)에게 제공할 수 있다. 사용자의 식별 값은, 예를 들어, 모바일 디바이스(1000)의 전화 번호, 사용자의 서비스 ID, 사용자의 이름을 포함할 수 있으나, 이에 제한되지 않는다. 또한, 사용자 정보는 사용자의 식별 값뿐만 아니라, 예를 들어, 사용자가 선호하는 음식의 이름, 종류, 사용자의 신장, 몸무게, 및 사용자가 선호하는 맛 등에 관한 정보를 포함할 수 있으나, 이에 제한되지 않는다.
단계 S330에서 서버(6000)는 사용자 정보에 기초하여, 재료와 관련된 음식의 추천 목록을 획득한다. 서버(6000)는 모바일 디바이스(1000)로부터 수신된 사용자 식별 값에 기초하여, 사용자의 성별, 신장, 체지방, 몸무게 및 건강 상태를 확인할 수 있다. 또한, 서버(6000)는 사용자 식별 값에 기초하여, 사용자가 선호하는 음식의 이름, 종류 및 사용자가 선호하는 맛을 확인할 수 있다. 이 경우, 사용자의 성별, 신장, 체지방, 몸무게 및 건강 상태, 사용자가 선호하는 음식의 이름, 종류 및 사용자가 선호하는 맛에 관한 정보는, 사용자의 식별 값에 매칭되어 서버(6000)에 미리 저장될 수 있다. 또한, 사용자의 성별, 신장, 체지방, 몸무게 및 건강 상태, 사용자가 선호하는 음식의 이름, 종류 및 사용자가 선호하는 맛에 관한 정보는, 사용자의 다른 기기(미도시), SNS 서비스 서버(미도시)에 미리 저장될 수도 있다.
또한, 서버(6000)는 사용자의 신장 및 몸무게를 고려하여, 플레이트(4000) 상에 놓인 재료와 관련된 음식의 추천 목록을 생성할 수 있다. 또한, 서버(6000)는 사용자가 선호하는 음식의 이름, 종류 및 사용자가 선호하는 맛을 고려하여 음식의 추천 목록을 생성할 수도 있다. 또한, 서버(6000)는 사용자의 건강 상태를 고려하여 음식의 추천 목록을 생성할 수도 있다.
단계 S340에서 서버(6000)는 모바일 디바이스(1000)에게 음식의 추천 목록을 제공한다.
단계 S350에서 모바일 디바이스(1000)는 사용자 입력에 기초하여, 조리될 음식을 선택한다. 모바일 디바이스(1000)는 서버(6000)로부터 수신된 음식의 추천 목록을 프로젝터(3000)를 이용하여 플레이트(4000) 상에 조사할 수 있다. 이 경우, 모바일 디바이스(1000)는 플레이트(4000) 상에서의 사용자의 제스처를 카메라(2000)를 이용하여 확인하고, 확인된 사용자의 제스처에 기초하여 소정의 음식을 선택할 수 있다.
또한, 모바일 디바이스(1000)는 서버(6000)로부터 수신된 음식의 추천 목록을 모바일 디바이스(1000)의 화면에 디스플레이할 수 있으며, 모바일 디바이스(1000)의 화면에 대한 터치 입력에 기초하여 소정의 음식을 선택할 수 있다.
도 4는 본 발명의 일 실시예에 따른 조리 정보 제공 시스템에서 플레이트(4000)에 놓인 재료와 관련된 조리 정보를 제공하는 방법의 흐름도이다.
단계 S400에서 카메라(2000)는 플레이트(4000)에 놓인 재료를 촬영한다. 사용자는 플레이트(4000) 상에 소정의 재료를 놓을 수 있으며, 카메라(2000)는 플레이트(4000) 상에 놓인 재료를 촬영할 수 있다. 또한, 카메라(2000)는 재료를 촬영함으로써, 정지 영상 이미지 및 동영상 이미지 중 적어도 하나를 생성할 수 있다.
또한, 모바일 디바이스(1000)는 사용자 정보(예를 들어, 사용자의 체중, 체지방량)에 기초하여, 재료의 양을 사용자에게 추천할 수 있으며, 추천된 재료의 양에 관한 정보를 플레이트(4000) 상에 조사할 수 있다. 또한, 사용자는 추천된 재료의 양을 참고하여, 플레이트(4000) 상에 재료를 놓을 수 있다.
단계 S410에서 카메라(2000)는 모바일 디바이스(1000)에게 촬영된 재료 이미지를 제공한다. 카메라(2000)는 정지 영상 이미지 및 동영상 이미지 중 적어도 하나를 모바일 디바이스(1000)에게 제공할 수 있다. 또한, 카메라(2000)는 단수 또는 복수의 재료 이미지를 모바일 디바이스(1000)에게 제공할 수 있다.
단계 S420에서 모바일 디바이스(1000)는 촬영된 재료 이미지를 서버(6000)에게 제공한다.
단계 S430에서 서버(6000)는 수신된 재료 이미지에 기초하여, 재료의 이름, 종류 및 무게를 판단한다. 서버(6000)는 다양한 재료의 이미지를 DB(미도시)에 미리 저장할 수 있으며, 모바일 디바이스(1000)로부터 수신된 재료 이미지를 DB(미도시)에 미리 저장된 재료 이미지와 비교함으로써, 플레이트(4000) 상에 놓인 재료가 무엇인지를 판단할 수 있다.
또한, 서버(6000)는 수신된 재료 이미지에 기초하여, 플레이트(4000) 상의 재료의 부피를 추정할 수 있다. 예를 들어, 플레이트(4000) 상에 소정의 눈금이 표시될 수 있으며, 서버(6000)는 수신된 재료 이미지에 포함된 눈금을 이용하여, 플레이트(4000) 상에 놓인 재료의 부피를 추정할 수 있다. 또한, 예를 들어, 플레이트(4000)의 크기 값이 서버(6000)에 미리 저장될 수 있으며, 서버(6000)는 저장된 크기 값에 기초하여 플레이트(4000) 상에 놓인 재료의 부피를 추정할 수 있다. 그러나, 이에 제한되지 않는다.
또한, 서버(6000)는 확인된 재료 부피에 기초하여, 플레이트(4000) 상에 놓인 재료의 중량을 확인할 수 있다. 이 경우, 서버(6000)는 재료의 이름 또는 종류 별로, 밀도 값을 미리 저장할 수 있다. 또한, 서버(6000)는 확인된 재료의 밀도 값 및 확인된 재료의 부피 값을 곱함으로써, 확인된 재료의 중량을 산출할 수 있다.
단계 S440에서 서버(6000)는 모바일 디바이스(1000)에게 재료의 이름, 종류 및 무게에 관한 정보를 제공한다.
한편, 상기에서는 서버(6000)가 재료 이미지에 기초하여 재료의 무게를 판단하고, 모바일 디바이스(1000)에게 제공하는 것으로 설명하였지만, 이에 제한되지 않는다. 플레이트(4000) 내에 소정의 센서(예를 들어, 압력 센서)가 포함되고, 플레이트(4000)가 센서를 이용하여 플레이트(4000) 상에 놓인 재료의 무게를 측정할 수도 있다. 이 경우, 플레이트(4000)가 플레이트(4000) 내의 소정의 통신 수단을 이용하여 모바일 디바이스(1000)에게 재료의 무게에 관한 정보를 제공할 수 있다. 또한, 서버(6000)는 재료의 무게 값을 모바일 디바이스(1000)로부터 수신할 수도 있다.
단계 S450에서 모바일 디바이스(1000)는 재료의 이름, 종류 및 무게에 기초하여 조리 정보를 생성한다. 모바일 디바이스(1000)는 플레이트(4000) 상에 놓인 재료와 관련된 음식을 결정하고, 결정된 음식을 조리하는데 이용되는 다른 재료들에 관한 재료 정보를 생성할 수 있다. 예를 들어, 플레이트(4000) 상에 재료 'AA'가 놓이고, 재료 'AA'에 관한 음식 'A'가 선택되면, 모바일 디바이스(1000)는 음식 'A'를 조리하는데 필요한 재료 'BB','CC'에 관한 정보를 메모리로부터 추출할 수 있다. 이 경우, 재료 'BB','CC'에 관한 정보가 메모리에 미리 저장될 수 있으나, 이에 제한되지 않는다.
또한, 모바일 디바이스(1000)는 결정된 음식의 조리를 위한 세부 조리 단계에 관한 정보를 생성할 수 있다. 예를 들어, 세부 조리 단계는, 재료 'AA'를 컷팅하는 단계, 재료 'AA'와, 재료 'BB'를 혼합하는 단계, 혼합된 재료 'AA' 및 재료 'BB'를 오븐에서 굽는 단계, 및 오븐에서 구워진 재료 'AA' 및 재료 'BB' 에 재료 'CC'를 뿌리는 단계를 포함할 수 있다.
또한, 모바일 디바이스(1000)는 생성된 재료 정보 및 세부 조리 단계에 관한 정보를 어떻게 묘사할 지를 결정할 수 있다. 모바일 디바이스(1000)는 텍스트, 이미지, 음성 중 적어도 하나의 데이터를 통하여 생성된 정보를 사용자에게 제공할 것을 결정할 수 있다.
단계 S460에서 모바일 디바이스(1000)는 조리 정보가 조사될 플레이트(4000) 상의 위치를 결정한다. 모바일 디바이스(1000)는 플레이트(4000) 상에 놓인 재료의 위치를 고려하여, 플레이트(4000) 상에서 재료가 놓여지지 않은 영역에 조리 정보가 조사되도록 할 수 있다.
단계 S470에서 모바일 디바이스(1000)는 프로젝터(3000)에게 조리 정보 및 조사 위치에 관한 정보를 제공한다. 모바일 디바이스(1000)는, 재료들의 이름 및 중량에 관한 정보를 상기 프로젝터(3000)에게 먼저 제공할 수 있다. 또한, 모바일 디바이스(1000)는 현재 조리 상황을 모니터링하고, 현재 조리 상황에 따라, 세부 조리 단계에 관한 정보를 프로젝트(3000)에게 순차적으로 제공할 수 있다.
단계 S480에서 프로젝터(3000)는 플레이트(4000)로 조리 정보를 조사한다. 프로젝터(3000)는 모바일 디바이스(1000)로부터 수신된 위치 정보에 기초하여, 플레이트(4000) 상에 조리 정보를 조사할 수 있다.
도 5는 본 발명의 일 실시예에 따른 모바일 디바이스(1000)가 프로젝터(3000)에게 음식의 조리에 관련된 각종의 정보를 제공하는 방법의 흐름도이다.
단계 S500에서 모바일 디바이스(1000)는 선택된 음식에 관련된 재료 정보를 획득한다. 모바일 디바이스(1000)는 선택된 음식을 조리하는데 필요한 재료들에 관한 재료 정보를 획득할 수 있다. 예를 들어, 플레이트(4000) 상에 재료 'AA'가 놓이고, 재료 'AA'에 관한 음식 'A'가 선택되면, 모바일 디바이스(1000)는 음식 'A'를 조리하는데 필요한 재료 'BB','CC'에 관한 정보를 획득할 수 있다. 또한, 예를 들어, 재료 'AA'가 400g인 경우에, 음식 'A'를 조리하기 위하여 100g의 재료'BB'와 50g의 재료 'CC'가 필요함을 모바일 디바이스(1000)는 확인할 수 있다.
또한, 모바일 디바이스(1000)는 사용자 정보(예를 들어, 사용자의 체중, 체지방량)에 기초하여, 재료의 양을 사용자에게 추천할 수 있으며, 추천된 재료의 양에 관한 정보를 플레이트(4000) 상에 조사할 수 있다.
만약, 플레이트(4000) 상에 놓인 재료의 중량이 변경되면, 모바일 디바이스(1000)는 변경된 중량에 맞추어 다른 재료의 중량을 변경할 수 있다.
단계 S505에서 모바일 디바이스(1000)는 획득된 재료 정보를 프로젝터(3000)에게 제공한다. 또한, 재료 정보는 프로젝터(3000)를 통하여 플레이트(4000) 상의 소정의 위치에 조사될 수 있다.
단계 S510에서 모바일 디바이스(1000)는 선택된 음식의 조리에 이용되는 재료를 구매하기 위한 쇼핑 정보를 획득한다. 모바일 디바이스(1000)는 선택된 음식의 조리에 이용되는 재료들 중에서, 가전 기기(5000)에 수납되어 있지 않은 재료에 대한 쇼핑 정보를 획득할 수 있다. 쇼핑 정보는 사용자가 재료를 구매하는데 필요한 각종의 정보로서, 예를 들어, 재료에 관련된 쿠폰 정보, 할인 정보, 쇼핑 사이트의 주소, 쇼핑을 위한 사용자 인터페이스를 포함하나, 이에 제한되지 않는다. 모바일 디바이스(1000)는 가전 기기(5000)에 수납되어 있지 않은 재료를 판매하는 쇼핑 서버에 접속하고, 가전 기기(5000)에 수납되어 있지 않은 재료에 관련된 쿠폰 정보 및 할인 정보를 획득할 수 있다. 또한, 모바일 디바이스(1000)는 사용자가 가전 기기(5000)에 수납되어 있지 않은 재료를 구매할 수 있도록 소정의 사용자 인터페이스를 생성할 수 있다.
단계 S515에서 모바일 디바이스(1000)는 획득된 쇼핑 정보를 프로젝터(3000)에게 제공한다. 모바일 디바이스(1000)는 쿠폰 정보 및 할인 정보를 프로젝터(3000)에게 제공하고, 재료의 구매를 위한 사용자 인터페이스를 프로젝터(3000)에게 제공할 수 있다.
단계 S520에서 모바일 디바이스(1000)는 선택된 음식에 관련된 세부 조리 단계에 관한 정보를 획득한다. 예를 들어, 세부 조리 단계는, 재료 'AA'를 컷팅하는 단계, 재료 'AA'와, 재료 'BB'를 혼합하는 단계, 혼합된 재료 'AA' 및 재료 'BB'를 오븐에서 굽는 단계, 및 오븐에서 구워진 재료 'AA' 및 재료 'BB' 에 재료 'CC'를 뿌리는 단계를 포함할 수 있다.
단계 S525에서 모바일 디바이스(1000)는 획득된 세부 조리 단계에 관한 정보를 프로젝터(3000)에게 제공한다. 모바일 디바이스(1000)는 카메라(2000)를 이용하여 조리의 현재 진행 상황을 모니터링할 수 있으며, 세부 조리 단계에 관한 정보들을 조리의 현재 진행 상황에 맞추어 순차적으로 프로젝터(3000)에게 제공할 수 있다. 그러나, 이에 제한되지 않는다. 또한, 플레이트(4000) 상에 놓인 재료의 중량이 변경되면, 모바일 디바이스(1000)는 음식의 조리 단계를 변경할 수도 있다.
단계 S530에서 모바일 디바이스(1000)는 촬영된 재료 이미지를 이용하여 컷팅 가이드 정보를 생성한다. 플레이트(4000) 상에 놓인 재료를 자를 필요가 있는 경우에, 모바일 디바이스(1000)는 재료의 형상 및 재료의 위치에 기초하여, 컷팅 가이드 정보를 생성할 수 있다. 컷팅 가이드 정보는, 사용자에게 재료의 컷팅을 안내하기 위한 정보로서, 예를 들어, 재료를 컷팅해야 할 위치를 표시하는 적어도 하나의 안내 선(컷팅 가이드 라인)에 관한 정보를 포함할 수 있다. 이 경우, 모바일 디바이스(1000)는 컷팅 가이드 라인의 간격, 개수, 방향 및 위치를 결정할 수 있다.
단계 S535에서 모바일 디바이스(1000)는 생성된 컷팅 가이드 정보를 프로젝터(3000)에게 제공한다. 또한, 컷팅 가이드 정보는, 프로젝터(3000)에 의해 플레이트(4000) 상의 재료 상에 조사될 수 있다.
단계 S540에서 모바일 디바이스(1000)는 조리 상황 정보를 가전 기기(5000)로부터 수신한다. 조리 상황 정보는, 음식의 조리와 관련된 가전 기기(5000)의 동작에 관한 정보로서, 예를 들어, 오븐의 예열이 완료되었다는 정보, 가스렌지가 동작한지 얼마의 시간이 경과되었는지에 관한 정보, 및 전자레인지에 설정된 동작이 종료하였다는 정보를 포함할 수 있으나, 이에 제한되지 않는다. 가전 기기(5000)가 오븐인 경우, 음식의 조리와 관련된 가전 기기(5000)의 동작에 관한 정보는, 예를 들어, 오븐의 온도, 조리 시간, 조리 상태, 및 조리 모드를 포함할 수 있다. 또한, 가전 기기(5000)가 가스렌지인 경우, 음식의 조리와 관련된 가전 기기(5000)의 동작에 관한 정보는, 조리 시간, 조리가 완료되엇는지에 대한 정보를 포함할 수 있다.
단계 S545에서 모바일 디바이스(1000)는 수신된 조리 상황 정보를 프로젝터(3000)에게 제공한다. 또한, 조리 상황 정보는 프로젝터(3000)에 의해 플레이트(4000) 상에 조사될 수 있다.
단계 S550에서 모바일 디바이스(1000)는 선택된 음식의 조리에 관련된 코멘트를 SNS(Social Network Service) 서버(미도시)로부터 수집한다. 모바일 디바이스(1000)는 선택된 음식 및 선택된 음식에 관한 조리 정보를 SNS 서버(미도시)에 업로드할 수 있다. 또한, 다른 디바이스(미도시)의 사용자는 업로드된 정보를 확인하고, 선택된 음식 및 조리 정보에 관련된 코멘트를 SNS 서버(미도시)에 업로드할 수 있다. 코멘트는, 예를 들어, 조리 정보에 포함된 재료와 다른 재료의 사용을 추천하는 코멘트, 및 조리 정보에 포함된 조리 방법과 다른 조리 방법을 추천하는 코멘트를 포함할 수 있으나, 이에 제한되지 않는다. 코멘트는, 예를 들어, 음식의 조리와는 무관할 수도 있다.
단계 S555에서 모바일 디바이스(1000)는 수집된 코멘트를 프로젝터(3000)에게 제공한다. 또한, 제공된 코멘트는 프로젝터(3000)에 의해 플레이트(4000) 상의 소정의 위치에 조사될 수 있다. 예를 들어, 음식의 재료와 관련된 코멘트는, 플레이트(4000) 상에서 재료가 놓인 위치의 주변에 조사될 수 있다. 또한, 음식의 조리 방법에 관련된 코멘트는, 플레이트(4000) 상에서 조리 방법에 관한 정보가 조사된 위치 주변에 조사될 수 있다. 그러나, 이에 제한되지 않는다.
도 6은 본 발명의 일 실시예에 따른 모바일 디바이스(1000)가 플레이트(4000) 상에 놓인 재료가 변경됨에 따라 조리 정보를 변경하는 방법의 흐름도이다.
단계 S600에서 모바일 디바이스(1000)는 플레이트(4000) 상에 놓인 재료의 양이 변경됨을 확인한다. 예를 들어, 사용자는 플레이트(4000) 상에 놓인 400g의 재료 'AA'를 반으로 자른 후, 200g의 재료 'AA'를 플레이트(4000) 상에 놓을 수 있다. 이 경우, 모바일 디바이스(1000)는 카메라(2000)를 이용하여 플레이트(4000) 상에 놓인 재료 'AA'를 모니터링할 수 있으며, 재료 'AA'의 중량이 400g에서 200g으로 변경되었는지를 확인할 수 있다. 모바일 디바이스(1000)는 재료 'AA'의 촬영 이미지를 이용하여, 재료 'AA'의 중량이 변경됨을 확인할 수 있다. 이 경우, 재료 'AA'는 음식을 조리하기 위하여 최초로 처리되는 재료일 수 있다.
단계 S610에서 모바일 디바이스(1000)는 음식을 조리하는데 이용되는 다른 재료에 관한 재료 정보를 변경한다. 모바일 디바이스(1000)는 음식을 조리하는데 이용되는 재료들 중에서 플레이트(4000) 상에 놓인 재료 이외의 다른 재료에 관한 재료 정보를 변경할 수 있다. 예를 들어, 음식 'A'를 조리하기 위하여 400g의 재료 'AA', 100g의 재료 'BB'와 50g의 재료 'CC'가 필요한 경우에, 재료 'AA'의 무게가 200g으로 변경될 수 있다. 이 경우, 모바일 디바이스(1000)는 재료 'BB'의 무게를 50g으로 변경하고, 재료 'CC'의 무게를 25g으로 변경할 수 있다.
단계 S620에서 모바일 디바이스(1000)는 현재의 조리 단계에서 처리되어야 할 재료가 아닌 다른 재료가 플레이트(4000) 상에 놓임을 확인한다. 예를 들어, 재료 'AA'를 컷팅하는 단계에, 플레이트(4000) 상에 재료 'BB'가 놓여질 수 있으며, 모바일 디바이스(1000)는 재료 'BB'의 촬영 이미지를 이용하여 플레이트(4000) 상에 재료 'BB'가 잘못 놓여짐을 확인할 수 있다.
또한, 플레이트(4000) 상에 50g의 재료 'BB'가 놓여야 하는데, 30g의 재료가 놓여졌다면, 모바일 디바이스(1000)는 잘못된 무게의 재료 'BB'가 플레이트(4000)상에 놓여짐을 확인할 수 있다.
단계 S630에서 모바일 디바이스(1000)는 플레이트(4000) 상에 재료가 잘못 놓여짐을 알린다. 모바일 디바이스(1000)는 플레이트(4000) 상에 재료가 잘못 놓여짐을 알리기 위한 알림 정보를 생성하고, 생성된 알림 정보를 프로젝터(3000)에게 제공할 수 있다. 알림 정보는, 예를 들어, 현재의 조리 단계에서 플레이트(4000) 상에 놓여야 할 재료가 잘못 놓여짐을 알리는 메시지, 현재의 조리 단계에서 플레이트(4000) 상에 놓여야 할 재료가 무엇인지를 알리는 메시지일 수 있으나, 이에 제한되지 않는다.
도 7은 본 발명의 일 실시예에 따른 모바일 디바이스(1000)가 음식을 조리하는데 이용되는 재료에 관한 쇼핑 정보를 제공하는 방법의 흐름도이다.
단계 S700에서 모바일 디바이스(1000)는 선택된 음식을 조리하는데 이용되는 재료를 확인한다. 사용자는 조리하고자 하는 소정의 음식을 선택할 수 있으며, 모바일 디바이스(1000)는 선택된 음식을 조리하는데 이용되는 재료들의 목록을 확인할 수 있다. 예를 들어, 모바일 디바이스(1000)는 음식 'B'를 선택하고, 음식 'B'를 조리하기 위하여, 재료 'CC', 재료 'DD', 및 재료 'EE'가 이용됨을 확인할 수 있다.
또한, 음식의 이름 또는 종류 별로 이용되는 재료의 목록은 모바일 디바이스(1000)의 메모리 또는 서버(6000)의 DB에 미리 저장될 수 있으나, 이에 제한되지 않는다.
단계 S710에서 모바일 디바이스(1000)는 가전 기기(5000)로부터 가전 기기(5000)에 수납된 재료에 관한 정보를 수신한다. 재료를 수납하는 가전 기기(5000)는, 예를 들어, 냉장고일 수 있으나, 이에 제한되지 않는다. 가전 기기(5000)에 수납된 재료에는 태그가 부착될 수 있으며, 가전 기기(5000)는, 예를 들어, RFID(Radio Frequency Identification) 통신, NFC(Near Field Communication) 통신을 통하여, 태그로부터 가전 기기(5000)에 수납된 재료들의 식별 값(예를 들어, 이름, 상품명)을 확인할 수 있다. 그러나, 이에 제한되지 않으며, 사용자가 가전 기기(5000)에 수납되는 재료들의 식별 값을 직접 입력할 수도 있다. 또한, 가전 기기(5000)는 확인된 재료들의 식별 값을 소정의 통신 방법을 통하여 모바일 디바이스(1000)에게 전송할 수 있다. 또한, 가전 기기(5000)는, 재료들이 수납된 날짜 및 재료의 상태를 확인할 수도 있다. 가전 기기(5000)에 의해 확인된 재료들의 수납 날짜 및 재료의 상태를 모바일 디바이스(1000)에게 제공될 수 있으며, 모바일 디바이스(1000)는 재료의 수납 날짜 또는 재료의 신선도를 플레이트(4000) 상에 조사하거나 모바일 디바이스(1000)의 화면에 디스플레이할 수 있다.
단계 S720에서 모바일 디바이스(1000)는 선택된 음식의 조리에 이용되는 재료를 가전 기기(5000)에 수납된 재료와 비교한다. 모바일 디바이스(1000)는 단계 S700에서 확인된 재료의 목록을 단계 S710에서 확인된 재료들과 비교함으로써, 선택된 음식을 조리하는데 이용되는 재료들 중에서 가전 기기(5000)에 수납되지 않은 재료를 확인할 수 있다.
단계 S730에서 모바일 디바이스(1000)는 구매해야 할 재료를 결정한다. 모바일 디바이스(1000)는 단계 S720에서의 비교 결과에 기초하여, 선택된 음식을 조리하는데 이용되는 재료들 중에서 가전 기기(5000)에 수납되지 않은 재료를 구매해야 할 재료로 결정할 수 있다.
단계 S740에서 모바일 디바이스(1000)는 구매해야 할 재료에 관련된 쿠폰 정보 및 할인 정보를 수집한다. 모바일 디바이스(1000)는 가전 기기(5000)에 수납되어 있지 않은 재료를 판매하는 쇼핑 서버에 접속하고, 가전 기기(5000)에 수납되어 있지 않은 재료에 관련된 쿠폰 정보 및 할인 정보를 획득할 수 있다.
단계 S750에서 모바일 디바이스(1000)는 쿠폰 정보 및 할인 정보에 기초하여, 구매해야 할 재료를 판매하는 쇼핑 사이트를 선택한다. 모바일 디바이스(1000)는 획득된 쿠폰 정보 및 할인 정보에 기초하여, 적어도 하나의 쇼핑 사이트를 추천할 수 있다. 이 경우, 예를 들어, 추천된 쇼핑 사이트의 목록에는, 쇼핑 사이트의 명칭, 재료명, 쿠폰명, 할인율이 포함될 수 있다. 또한, 추천된 쇼핑 사이트의 목록은, 모바일 디바이스(1000)의 화면에 디스플레이되거나 플레이트(4000) 상에 조사될 수 있다.
또한, 모바일 디바이스(1000)는 추천된 쇼핑 사이트 중 하나를 사용자 입력에 기초하여 선택할 수 있다. 추천된 쇼핑 사이트의 목록이 모바일 디바이스(1000)의 화면에 디스플레이된 경우에는, 모바일 디바이스(1000)의 화면에 대한 터치 입력에 기초하여 소정의 쇼핑 사이트가 선택될 수 있다. 또한, 추천된 쇼핑 사이트의 목록이 플레이트(4000) 상에 조사된 경우에는, 플레이트(4000) 상의 사용자의 제스처에 기초하여 소정의 쇼핑 사이트가 선택될 수 있다.
단계 S760에서 모바일 디바이스(1000)는 선택된 쇼핑 사이트를 통하여 구매해야 할 재료를 구매한다. 모바일 디바이스(1000)는 선택된 쇼핑 사이트에 접속하여 재료를 구매하기 위한 사용자 인터페이스를 사용자에게 제공할 수 있으며, 사용자 인터페이스를 통한 사용자 입력에 기초하여 쇼핑 사이트에서 재료를 구매할 수 있다.
도 8은 본 발명의 일 실시예에 따른 모바일 디바이스(1000)가 음식에 관한 영양 정보를 제공하는 방법의 흐름도이다.
단계 S800에서 모바일 디바이스(1000)는 플레이트(4000) 상에 놓인 재료를 확인한다. 카메라(2000)는 플레이트(4000) 상에 놓인 재료를 촬영할 수 있으며, 모바일 디바이스(1000)는 플레이트(4000)에 놓인 재료의 이미지를 카메라(2000)로부터 수신할 수 있다. 또한, 모바일 디바이스(1000)는 재료의 이미지를 서버(6000)에게 제공할 수 있으며, 서버(6000)가 재료 이미지를 분석하여 재료의 종류 및 이름을 확인할 수 있다. 또한, 모바일 디바이스(1000)는 서버(6000)에 의해 확인된 재료의 종류 및 이름을 모바일 디바이스(1000)에게 제공할 수 있다.
또한, 서버(6000)는 확인된 재료와 관련된 음식의 목록을 모바일 디바이스(1000)에게 제공할 수 있다.
한편, 상기에서는, 모바일 디바이스(1000)가 재료의 이미지를 서버(6000)에게 제공하고, 서버(6000)로부터 재료의 종류, 재료의 이름, 재료와 관련된 음식의 목록을 수신하는 것으로 설명하였지만, 이에 제한되지 않는다. 모바일 디바이스(1000)가 재료의 이미지를 분석하여 재료의 종류 및 이름을 확인할 수 있으며, 확인된 재료와 관련된 음식의 목록을 생성할 수도 있다.
단계 S810에서 모바일 디바이스(1000)는 확인된 재료와 관련된 음식을 선택한다. 모바일 디바이스(1000)는 확인된 재료와 관련된 음식의 목록을 모바일 디바이스(1000)의 화면에 디스플레이 하거나, 플레이트(4000) 상에 조사할 수 있다. 또한, 모바일 디바이스(1000)는 사용자 입력에 기초하여 음식 목록에 포함된 음식 중에서 적어도 하나를 선택할 수 있다.
단계 S820에서 모바일 디바이스(1000)는 선택된 음식에 관한 영양 정보를 제공한다. 모바일 디바이스(1000)는 선택된 음식과 관련된 영양 정보를 서버(6000)로부터 획득할 수 있다. 영양 정보는 음식에 포함된 영양 성분에 관한 정보로서, 예를 들어, 음식의 칼로리, 음식에 포함된 주요 영양소에 관한 정보를 포함할 수 있으나, 이에 제한되지 않는다.
도 9는 본 발명의 일 실시예에 따른 모바일 디바이스(1000)가 카메라(2000) 및 프로젝터(3000)와 연결되는 일례를 도시한 도면이다.
모바일 디바이스(1000)는 크래들(cradle) 장치에 도킹되어 카메라(2000) 및 프로젝터(3000)와 연결될 수 있다. 이 경우, 카메라(2000) 및 프로젝터(3000)는 크래들 장치에 내장되어 있을 수 있으나, 이에 제한되지 않는다. 카메라(2000) 및 프로젝터(3000)도 크래들에 도킹될 수 있다.
도 10은 본 발명의 일 실시예에 따른 사용자 정보에 기초하여 추천된 메뉴가 모바일 디바이스(1000)의 화면에 표시되는 일례를 도시한 도면이다.
도 10을 참조하면, 모바일 디바이스(1000)는 사용자 정보에 기초하여 서버(6000)로부터 추천된 음식의 추천 목록을 디스플레이할 수 있다. 모바일 디바이스(1000)는 사용자 식별 값을 서버(6000)에게 제공하고, 서버(6000)는 사용자 식별 값에 기초하여, 사용자가 선호하는 음식의 이름, 종류, 사용자의 신장, 몸무게, 및 사용자가 선호하는 맛 등을 확인할 수 있다. 또한, 서버(6000)는 사용자가 선호하는 음식의 이름, 종류, 사용자의 신장, 몸무게, 및 사용자가 선호하는 맛 등에 기초하여, 음식을 추천 목록을 생성할 수 있으며, 생성된 음식의 추천 목록을 모바일 디바이스(1000)에게 제공할 수 있다.
또한, 모바일 디바이스(1000)는 음식의 추천 목록을 도 10에서와 같이 모바일 디바이스(1000)의 화면에 디스플레이할 수 있다. 음식의 추천 목록은, 예를 들어, 음식의 이미지, 음식의 이름, 및 음식에 대한 평가 정보를 포함할 수 있다.
또한, 사용자는 모바일 디바이스(1000)의 화면을 터치하여 음식의 추천 목록에서 소정의 음식을 선택할 수 있다. 그러나, 이에 제한되지 않으며, 모바일 디바이스(1000)는 플레이트(4000) 상의 사용자의 손짓에 기초하여, 소정의 음식을 선택할 수도 있다. 이 경우, 모바일 디바이스(1000)는 플레이트(4000) 상의 사용자의 손짓을 촬영한 영상을 카메라(2000)로부터 수신하고, 수신된 영상을 분석하여 소정의 음식을 선택할 수 있다.
또한, 예를 들어, 모바일 디바이스(100)에 디스플레이되는 소정의 정보가 복수의 페이지를 포함하는 경우에, 모바일 디바이스(1000)는 플레이트(4000) 상의 사용자의 손짓에 기초하여, 페이지를 넘길 수 있다. 예를 들어, 사용자가 플레이트(4000)의 좌측에서 우측으로 기 설정된 시간 내에 이동시키면, 모바일 디바이스(1000)는 모바일 디바이스(1000)의 화면에 표시된 페이지를 넘길 수 있다.
또한, 모바일 디바이스(1000)는 플레이트(4000) 상의 사용자의 손짓을 인식할 수 있으며, 사용자의 손짓이 입력됨에 따라, 소정의 알림음을 출력할 수 있다.
도 11은 본 발명의 일 실시예에 따른 모바일 디바이스(1000)의 화면에, 사용자에 의해 선택된 음식의 재료 정보가 표시되는 일레를 도시한 도면이다.
도 11을 참조하면, 소정의 음식이 선택되면, 모바일 디바이스(1000)는 선택된 음식의 이미지, 이름, 조리 시간, 칼로리 및 영양 정보를 디스플레이할 수 있다. 또한, 모바일 디바이스(1000)는 선택된 음식을 조리하는데 필요한 재료들의 이미지, 이름 및 중량을 화면에 표시할 수 있다. 또한, 모바일 디바이스(1000)의 화면에 표시된 “START” 아이콘이 선택되면, 후술될 도 18에서와 같이, 모바일 디바이스(1000)는 프로젝터(3000)를 이용하여 플레이트(4000) 상에 조리 정보를 조사할 수 있다.
도 12는 본 발명의 일 실시예에 따른 플레이트(4000)에 표시되는 아이콘을 이용하여, 조리 정보 제공 서비스를 초기화하는 일례를 도시한 도면이다.
도 12(a)를 참조하면, 플레이트(4000) 상에는 서비스 초기화를 위한 아이콘(2)이 표시될 수 있다. 또한, 도 12(b)에서와 같이, 아이콘(2) 상에 사용자의 손이 기 설정된 시간동안 위치하면, 조리 정보 제공 서비스가 초기화될 수 있다. 조리 정보 제공 서비스가 초기화되면, 조리 정보 제공 서비스를 위한 초기 화면이 플레이트(4000) 상에 조사될 수 있다. 또한, 아이콘(2) 상에 사용자의 손이 위치하면, 아이콘(2)의 색상이 변경되어 플레이트(4000) 상에 조사될 수도 있다.
한편, 플레이트(4000) 상에 아이콘(2)이 표시되지 않은 상태에서, 사용자의 손이 플레이트(4000) 상의 소정의 위치에 위치하면, 모바일 디바이스(1000)가 프로젝터(3000)를 활성화시키고, 활성화된 프로젝터(3000)를 이용하여 아이콘(2)을 플레이트(4000) 상에 조사할 수도 있다. 또한, 아이콘(2) 상에 사용자의 손이 기 설정된 시간동안 위치하면, 조리 정보 제공 서비스가 초기화될 수 있다.
한편, 아이콘(2) 상에 사용자의 손이 기 설정된 시간동안 위치함에 따라, 모바일 디바이스(1000)는 아이콘(2)이 선택되었다고 판단할 수 있다. 또한, 모바일 디바이스(1000)는 아이콘(2)이 선택됨을 사용자에게 알리기 위하여, 소정의 알림음을 출력할 수 있다. 또한, 또한, 모바일 디바이스(1000)는 아이콘(2)이 선택됨을 사용자에게 알리기 위하여, 아이콘(2)의 색상 및 모양 중 적어도 하나를 변경할 수 있다.
도 13은 본 발명의 일 실시예에 따른 플레이트(4000) 상에 조사되는 메뉴 이미지의 일례를 도시한 도면이다.
도 13(a)를 참조하면, 본 발명의 일 실시예에 따른 플레이트(4000) 상에는, 조리 정보 제공 서비스를 이용하기 위한 메뉴 이미지(4)가 조사될 수 있다. 메뉴 이미지(4)는 미세하게 움직일 수 있으며, 예를 들어, 물 위에 떠 있는 것과 같은 애니메이션 효과가 메뉴 이미지(4)에 적용될 수 있다.
또한, 13(b)를 참조하면, 메뉴 이미지(4) 상에 사용자의 손이 기 설정된 시간동안 위치하면, 도 13(c)에서와 같이 메뉴 이미지(4)에 포함된 복수의 아이콘들이 표시될 수 있다. 또한, 사용자가 메뉴 이미지(4) 상에서 소정의 손짓을 하면, 도 13(c)에서와 같이 메뉴 이미지(4)에 포함된 복수의 아이콘들이 표시될 수 있다.
도 14는 본 발명의 일 실시예에 따른 메뉴 이미지에 포함된 아이콘이 사용자의 제스처에 기초하여 선택되는 일례를 도시한 도면이다.
사용자가 플레이트(4000) 상에서 소정의 손짓을 하면, 도 14(a)에서와 같이 본 발명의 일 실시예에 따른 조리 정보 제공 서비스를 이용하기 위한 메뉴 이미지가 플레이트(4000) 상에 조사될 수 있다. 또한, 메뉴 이미지는, 예를 들어, 'RECIPE' 아이콘, 'APPLIANCE' 아이콘, 'SHOPPING' 아이콘 및 'HEALTH' 아이콘을 포함할 수 있다. 'RECIPE' 아이콘이 선택되면, 음식에 관한 조리 정보가 제공될 수 있다. 또한, 'APPLIANCE' 아이콘이 선택되면, 음식의 조리와 관련된 가전 기기(5000)의 상황에 관한 정보가 제공될 수 있다. 또한, 'SHOPPING' 아이콘이 선택되면 재료의 구매와 관련된 쇼핑 정보가 제공될 수 있다. 또한, 'HEALTH' 아이콘이 선택되면, 플레이트(4000) 상의 음식에 관한 영양 정보가 제공될 수 있다.
또한, 도 14(b)에서와 같이, 사용자가 메뉴 이미지의 'SHOPPING' 아이콘 상에서 소정의 손짓을 함으로써, 'SHOPPING' 아이콘을 선택할 수 있다. 또한, 'SHOPPING' 아이콘이 선택됨에 따라, 도 14(c)에서와 같이, 'SHOPPING' 아이콘이 다른 아이콘들보다 크게 표시될 수 있다.
또한, 모바일 디바이스(1000)는 아이콘이 선택됨을 사용자에게 알리기 위하여, 소정의 알림음을 출력할 수 있다. 또한, 또한, 모바일 디바이스(1000)는 아이콘이 선택됨을 사용자에게 알리기 위하여, 아이콘의 색상 및 모양 중 적어도 하나를 변경할 수 있다.
도 15는 본 발명의 일 실시예에 따른 플레이트(4000) 상에 표시되는 메뉴 이미지가 사용자의 제스처에 기초하여 선택 모드에서 이동 모드로 변경되는 일례를 도시한 도면이다.
도 15(a) 및 도 15(b)의 메뉴 이미지는 선택 모드에서의 메뉴 이미지이며, 선택 모드에서는 메뉴에 포함되는 아이콘들 중 하나를 선택함으로써, 선택된 아이콘에 대응되는 서비스를 제공받을 수 있다.
또한, 도 15(c)의 메뉴 이미지는 이동 모드에서의 메뉴 이미지이며, 이동 모드에서는 메뉴 이미지가 플레이트(4000) 상에서 이동되어 표시될 수 있다.
도 15(a)에서와 같이, 사용자가 메뉴 이미지 상에 손을 위치시키고, 도 15(b)에서와 같이 사용자가 손을 움켜쥘 수 있다. 이에 따라, 도 15(c)에서와 같이, 메뉴 이미지는 선택 모드에서 이동 모드로 변경될 수 있다. 또한, 사용자가 다시 손을 펼치면, 도 15(a)에서와 같이, 메뉴 이미지는 이동 모드에서 선택 모드를 변경될 수 있다.
도 16은 본 발명의 일 실시예에 따른 플레이트(4000)에 표시되는 메뉴 이미지가 사용자의 제스처에 기초하여 이동하는 일례를 도시한 도면이다.
도 16을 참조하면, 사용자는 움켜쥔 손을 플레이트(4000) 상에서 이동시킬 수 있으며, 이에 따라 플레이트(4000) 상의 메뉴 이미지가 사용자의 손과 함께 이동될 수 있다.
도 17은 본 발명의 일 실시예에 따른 쇼핑 정보가 플레이트(4000) 상에 조사되는 일례를 도시한 도면이다.
도 17을 참조하면, 사용자가 플레이트(4000) 상에 조사된 메뉴 이미지의 'SHOPPING' 아이콘을 선택하면, 재료를 구매하는데 이용될 수 있는 쇼핑 정보(6)가 플레이트(4000) 상에 조사될 수 있다. 쇼핑 정보(6)는, 예를 들어, 재료의 이름, 재료를 판매하는 쇼핑몰의 링크 주소, 재료의 구매와 관련된 쿠폰을 다운로드하기 위한 링크 주소를 포함할 수 있으나, 이에 제한되지 않는다.
도 18은 본 발명의 일 실시예에 따른, 사용자가 음식의 재료를 준비할 수 있도록, 플레이트(4000) 상에 조리 정보가 표시되는 일례를 도시한 도면이다.
도 18(a)를 참조하면, 선택된 음식의 재료인 닭 가슴살에 관한 조리 정보가 플레이트(4000) 상에 조사될 수 있다. 예를 들어, 닭 가슴살의 이름 및 중량에 관한 정보가 플레이트(4000) 상의 좌측 상단 영역(80)에 표시될 수 있다. 또한, 플레이트(4000) 상의 우측 영역(82)에 사용자가 재료를 준비하도록 가이드하기 위한 정보가 표시될 수 있다. 예를 들어, 닭 가슴살의 대략적인 크기가 점선으로 표시되고, 닭 가슴살의 무게 250g이 표시될 수 있다. 또한, 플레이트(4000) 상에 놓인 닭 가슴살의 무게가 0g으로 표시될 수 있다.
또한, 모바일 디바이스(1000)는 플레이트(4000) 상에 놓인 닭 가슴살의 이미지를 서버(6000)에게 제공하고, 서버(6000)로부터 닭 가슴살의 무게 값을 수신함으로써, 플레이트(4000) 상에 닭 가슴살의 무게를 조사할 수 있다. 이 경우, 서버(6000)는 닭 가슴살의 이미지에 기초하여 닭 가슴살의 부피를 추정할 수 있다. 또한, 서버(6000)는 닭 가슴살의 밀도 값을 미리 저장할 수 있으며. 닭 가슴살의 밀도 값 및 닭 가슴살의 부피 값을 곱함으로써, 닭 가슴살의 무게를 산출할 수 있다. 또한, 모바일 디바이스(1000)는 닭 가슴살의 무게 값을 서버(6000)로부터 수신하고, 플레이트(4000) 상에 닭 가슴살의 무게 값을 조사할 수 있다.
한편, 플레이트(4000) 내에 소정의 센서(예를 들어, 압력 센서)가 포함되고, 플레이트(4000)가 센서를 이용하여 플레이트(4000) 상에 놓인 닭 가슴살의 무게를 측정할 수도 있다. 이 경우, 모바일 디바이스(1000)에게 닭 가슴살의 무게 값을 플레이트(4000)로부터 수신하고, 플레이트(4000) 상에 닭 가슴살의 무게 값을 조사할 수 있다.
또한, 도 18(b)를 참조하면, 사용자는 플레이트(4000) 상에 표시된 점선을 참고하여 닭 가슴살(84)을 준비하고, 준비된 닭 가슴살(84)을 플레이트(4000) 상에 놓을 수 있다. 또한, 닭 가슴살(84)이 플레이트(4000) 상에 놓이면, 모바일 디바이스(1000)는 플레이트(4000) 상에 놓인 닭 가슴살(84)의 무게 250g을 플레이트(4000) 상에 표시할 수 있다.
또한, 도 18(c)를 참조하면, 선택된 음식의 다른 재료인 양파에 관한 조리 정보가 플레이트(4000) 상에 조사될 수 있다. 예를 들어, 양파의 이름 및 중량에 관한 정보가 플레이트(4000) 상의 좌측 상단 영역(80)에 표시될 수 있다.
도 19는 본 발명의 일 실시예에 따른 플레이트(4000) 상에 놓인 재료의 중량이 변경됨에 따라, 음식의 재료에 관한 정보가 변경되어 표시되는 일례를 도시한 도면이다.
도 19(a)에 도시된 바와 같이, 플레이트(4000) 상에 재료 'AA'가 놓여지면, 모바일 디바이스(1000)는, 촬영된 재료의 이미지를 이용하여, 재료의 이름이 'AA'이고 무게가 400g임을 확인할 수 있다. 또한, 모바일 디바이스(1000)는, 프로젝터(3000)를 이용하여 플레이트(4000) 상에 재료 'AA'의 이름 및 무게를 조사할 수 있다. 예를 들어, 'AA: 400g' 가 플레이트(4000) 상에 조사될 수 있다.
또한, 모바일 디바이스(1000)는, 음식 A를 조리하기 위하여 100g의 재료 'BB' 및 50g의 재료 'CC'가 이용됨을 확인하고, 재료 정보인 'BB: 100g' 및 'CC: 50g'을 플레이트(4000) 상에 조사할 수 있다.
또한, 도 19(b)에 도시된 바와 같이, 플레이트(4000) 상의 재료 'AA'의 무게가 400g에서 200g으로 변경될 수 있다. 이 경우, 모바일 디바이스(1000)는, 촬영된 재료의 이미지를 이용하여, 재료 'AA'의 무게가 200g으로 변경됨을 확인할 수 있다.
또한, 재료 'AA'의 무게가 변경됨에 따라, 모바일 디바이스(1000)는, 프로젝터(3000)를 이용하여 플레이트(4000) 상에 조사된 'AA: 400g'을 'AA: 200g'로 변경할 수 있다. 또한, 재료 'AA'의 무게가 변경됨에 따라, 모바일 디바이스(1000)는, 재료 정보를 변경하여 표시할 수 있다. 모바일 디바이스(1000)는, 예를 들어, 'BB: 50g' 및 'CC: 25g'을 플레이트(4000) 상에 조사할 수 있다.
한편, 플레이트(4000) 상에는, 재료 'AA', 'BB' 및 'CC'의 이미지가 함께 표시될 수 있다. 이 경우, 모바일 디바이스(1000)는, 플레이트(4000) 상에 표시된 재료 'AA', 'BB' 및 'CC'의 이미지의 모양 및 크기를 변형시킴으로써, 재료 'AA', 'BB' 및 'CC'의 무게가 변경되는 것을 표현할 수 있다. 플레이트(4000) 상에 표시된 재료 'AA', 'BB' 및 'CC'의 이미지에는 다양한 애니메이션 효과가 적용될 수 있다.
또한, 플레이트(4000) 상에는, 완성된 요리의 이미지가 표시될 수 있다. 또한, 재료 'AA'의 무게가 변경됨에 따라, 완성된 요리의 이미지가 플레이트(4000) 상에 변경되어 표시될 수도 있다.
도 20은 본 발명의 일 실시예에 따른 플레이트(4000) 상에 놓인 재료에 컷팅 가이드 라인이 조사되는 일례를 도시한 도면이다.
도 20을 참조하면, 모바일 디바이스(1000)는 프로젝터(3000)를 이용하여 플레이트(4000) 상에 놓인 재료(30) 상에 컷팅 가이드 라인(40)을 조사할 수 있다. 모바일 디바이스(1000)는 재료(30)를 컷팅하는 조리 단계에서, 사용자가 손쉽게 재료를 컷팅할 수 있도록 재료(30) 상에 컷팅 가이드 라인(40)을 조사할 수 있다. 또한, 사용자는 컷팅 가이드 라인(40)을 따라 재료를 절단할 수 있다.
모바일 디바이스(1000)는 재료(30)의 형상 및 플레이트(4000) 상에서 재료(30)가 놓인 위치에 기초하여, 컷팅 가이드 라인이 조사될 위치, 컷팅 가이드 라인의 간격, 개수 및 방향을 결정할 수 있다.
도 21은 본 발명의 일 실시예에 따른 플레이트(4000) 상에 음식의 조리에 관한 코멘트가 조사되는 일례를 도시한 도면이다.
도 21(a)를 참조하면, 모바일 디바이스(1000)는 음식의 조리와 관련된 다른 사용자의 코멘트를 수집할 수 있으며, 코멘트가 수집되었음을 사용자에게 알리기 위하여, 아이콘(90)을 플레이트(4000) 상에 조사할 수 있다. 또한, 모바일 디바이스(1000)는 코멘트가 수집되었음을 사용자에게 알리기 위하여, 소정의 알림음을 출력할 수 있다.
또한, 사용자에 의해 아이콘(90)이 선택되면, 도 21(b)에서와 같이, 모바일 디바이스(1000)는 수집된 코멘트를 플레이트(4000) 상의 말풍선(92) 내에 조사할 수 있다. 말풍선(92) 내에는, 코멘트를 제공한 사용자의 이메일 주소, 사진이 표시될 수 있다. 또한, 예를 들어, 코멘트는, 텍스트, 사진, 비디오 및 오디오일 수 있다.
따라서, 사용자는 플레이트(4000) 상에 조사된 다른 사용자의 코멘트를 참고하여 음식을 조리할 수 있다.
도 22는 본 발명의 일 실시예에 따른 모바일 디바이스(1000)의 블록도이다.
이동 통신부(1001)는 3G/4G와 같은 셀룰러 네트워크를 통해 기지국과의 호 설정, 데이터 통신 등을 수행한다. 서브 통신부(1002)는 블루투스나 NFC 등 근거리 통신을 위한 기능을 수행한다. 방송부(1003)는 DMB 방송 신호를 수신한다. 이동 통신부(1001) 및 서브 통신부(1002) 중 적어도 하나는, 가전 기기(5000) 및 서버(6000)와 데이터를 송수신할 수 있다.
카메라부(1004)는 사진이나 동영상을 촬영하기 위한 렌즈 및 광학 소자들을 포함한다.
센서부(1005)는 모바일 디바이스(1000)의 움직임을 감지하는 중력 센서, 빛의 밝기를 감지하는 조도 센서, 사람의 근접도를 감지하는 근접 센서, 사람의 움직임을 감지하는 모션 센서 등을 포함할 수 있다.
GPS 수신부(1006)는 인공 위성으로부터 GPS 신호를 수신한다. 이러한 GPS 신호를 이용하여 다양한 서비스가 사용자에게 제공될 수 있다.
입출력부(1010)은 외부 기기나 사람과의 인터페이스를 제공하며, 버튼(1011), 마이크(1012), 스피커(1013), 진동 모터(1014), 커넥터(1015), 키패드(1016)을 포함한다. 커넥터(1015)는 카메라(2000) 및 프로젝터(3000)와 연결되며, 카메라(2000) 및 프로젝터와 데이터를 송수신한다.
터치 스크린(1018)은 사용자의 터치 입력을 수신한다. 터치 스크린 컨트롤러(1017)는 터치 스크린(1018)을 통해 입력된 터치 입력을 제어부(1050)에 전달한다. 전원 공급부(1019)는 모바일 디바이스(1000)에 필요한 전력을 공급하기 위해 배터리 또는 외부 전원 소스와 연결된다.
제어부(1050)는 메모리(1060)에 저장된 프로그램들을 실행함으로써 본 발명에 따라 조리 정보를 플레이트(4000) 상에 조사한다.
메모리(1060)에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있는데, 이동 통신 모듈(1061), Wi-Fi 모듈(1062), 블루투스 모듈(1063), DMB 모듈(1062), 카메라 모듈(1065), 센서 모듈(1066), GPS 모듈(1067), 동영상 재생 모듈(1068), 오디오 재생 모듈(1069), 전원 모듈(1070), 터치 스크린 모듈(1071), UI 모듈(1072) 및 어플리케이션 모듈(1073) 중 적어도 하나를 포함할 수 있다.
각 모듈들의 기능은 그 명칭으로부터 당업자가 직관적으로 추론할 수 있을 것이므로 여기서는 어플리케이션 모듈(1073)에 대해서만 설명하기로 한다. 어플리케이션 모듈(1073)은 모바일 디바이스(1000)가 플레이트(4000) 상에 놓인 재료를 확인하고, 사용자에게 음식의 추천 목록을 제공하고, 음식의 조리에 관련된 다양한 정보를 제공할 수 있도록 한다.
구체적으로, 어플리케이션 모듈(1073)은 음식의 조리에 관련된 조리 정보를 획득하고, 획득된 조리 정보를 프로젝터(3000)를 이용하여 플레이트(4000)에 조사한다. 어플리케이션 모듈(1073)은 플레이트(4000) 상에 놓인 재료의 이미지를 카메라(2000)로부터 수신할 수 있으며, 수신된 재료 이미지 및 사용자 정보에 기초하여 사용자에게 음식의 추천 목록을 제공할 수 있다. 조리 정보 및 음식의 추천 목록은 애플리케이션 모듈(1073)에 의해 생성될 수 있으나, 이에 제한되지 않는다. 애플리케이션 모듈(1073)은 조리 정보 및 음식의 추천 목록을 서버(6000)로부터 수신할 수도 있다.
또한, 어플리케이션 모듈(1073)은 사용자 입력에 기초하여 소정의 음식을 선택할 수 있으며, 선택된 음식에 관련된 조리 정보를 프로젝터(3000)를 이용하여 플레이트(4000)에 조사할 수 있다.
또한, 어플리케이션 모듈(1073)은 가전 기기(5000)에 수납된 재료의 식별 값을 가전 기기(5000)로부터 수집할 수 있다. 또한, 모바일 디바이스(1000)는, 수집된 재료 식별 값에 기초하여, 음식을 조리하기 위하여 구매해야 할 재료를 확인할 수 있다. 또한, 모바일 디바이스(1000)는 구매해야 할 재료에 관련된 쇼핑 정보를 사용자에게 제공할 수 있다.
또한, 어플리케이션 모듈(1073)은 현재의 조리 단계에서 이용되는 가전 기기(5000)의 동작에 관한 정보를 가전 기기(5000)로부터 수신할 수 있다. 어플리케이션 모듈(1073)은 가전 기기(5000)의 동작에 관한 정보에 기초하여, 현재의 조리 단계에 관련된 조리 상황을 사용자에게 알릴 수 있다.
또한, 어플리케이션 모듈(1073)은 플레이트(4000)에 놓인 재료 또는 음식을 인식하고, 인식된 재료 또는 음식에 관련된 영양 정보를 사용자에게 제공할 수 있다.
도 23은 본 발명의 일 실시예에 따른 서버(6000)의 블록도이다.
도 23에 도시된 바와 같이, 본 발명의 일 실시예에 따른 서버(6000)는 통신부(6100), DB(6200) 및 제어부(6300)를 포함한다.
통신부(6100)는 네트워크(7000)를 통하여 모바일 디바이스(1000)와 데이터를 송수신한다. 또한, 가전 기기(5000), 카메라(2000) 및 프로젝터(3000)에 소정의 통신 기능이 구비된 경우에, 통신부(6100)는 가전 기기(5000), 카메라(2000) 및 프로젝터(3000)와 데이터를 송수신할 수도 있다.
DB(6200)는, 서버(6000)가 플레이트(4000)에 놓인 재료를 인식하고, 음식의 추천 목록을 생성하고, 음식에 관한 조리 정보, 쇼핑 정보 및 영양 정보를 생성하는데 필요한 각종의 정보를 저장한다.
제어부(6300)는 플레이트(4000) 상에 놓인 재료에 관한 정보, 음식의 추천 목록 및 음식의 조리에 관한 정보 중 적어도 하나를, 모바일 디바이스(1000)에게 제공한다. 제어부(6300)는 모바일 디바이스(1000)로부터 재료의 이미지를 수신하고, 수신된 재료의 이미지를 분석하여 재료의 이름, 종류 및 중량을 확인할 수 있다. 또한, 제어부(6300)는 모바일 디바이스(1000)로부터 사용자 정보를 수신하고, 수신된 사용자 정보를 이용하여 소정의 음식을 추천할 수 있다. 또한, 제어부(6300)는 음식의 조리에 필요한 재료에 관한 정보, 및 음식의 조리를 위한 세부 조리 단계에 관한 정보를 모바일 디바이스(1000)에게 제공할 수 있다. 또한, 제어부(6300)는 음식에 관한 쇼핑 정보, 영양 정보를 모바일 디바이스(1000)에게 제공할 수 있다.
본 발명의 일 실시예는 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

Claims (23)

  1. 모바일 디바이스가 음식을 조리하기 위한 정보를 제공하는 방법에 있어서,
    플레이트(plate) 상에 놓인 재료의 이미지를 카메라로부터 수신하는 단계;
    상기 재료의 이미지에 기초하여, 상기 재료를 인식하는 단계;
    상기 모바일 디바이스의 사용자에 관한 사용자 정보에 기초하여, 상기 재료와 관련된 음식의 추천 목록을 획득하는 단계;
    상기 추천 목록에서 선택된 음식에 관한 조리 정보를 획득하는 단계; 및
    상기 획득된 조리 정보를 상기 모바일 디바이스와 연결된 프로젝터(projector)에게 제공하는 단계;
    를 포함하며,
    상기 제공된 조리 정보는, 상기 프로젝터를 통하여 상기 재료가 놓인 상기 플레이트 상에 조사되는 것인, 방법.
  2. 제 1 항에 있어서,
    상기 재료를 인식하는 단계는, 상기 촬영된 재료의 이미지를 서버에게 제공하고, 상기 서버로부터 상기 재료의 종류 및 상기 재료의 무게에 관한 정보를 수신하는 것인, 방법.
  3. 제 1 항에 있어서,
    상기 음식의 추천 목록을 획득하는 단계는, 상기 사용자 정보를 서버에게 제공하고, 상기 촬영된 이미지 및 상기 제공된 사용자 정보에 기초하여 상기 서버에 의해 추천된 상기 음식의 추천 목록을 상기 서버로부터 수신하는 것인, 방법.
  4. 제 3 항에 있어서,
    상기 음식의 추천 목록은, 상기 사용자의 몸무게, 상기 사용자의 성별, 상기 사용자의 선호 음식, 상기 사용자의 건강 상태 중 적어도 하나에 기초하여 추천된 것인, 방법.
  5. 제 1 항에 있어서,
    상기 조리 정보는, 상기 선택된 음식을 조리하는데 이용되는 재료들의 종류 및 중량에 관한 정보, 및 상기 음식을 조리하기 위한 세부 조리 단계에 관한 정보를 포함하는 것인, 방법.
  6. 제 5 항에 있어서,
    상기 조리 정보를 상기 프로젝터에게 제공하는 단계는, 상기 재료들의 종류 및 중량에 관한 정보를 상기 프로젝터에게 먼저 제공하고, 상기 세부 조리 단계에 관한 정보를 상기 프로젝트에게 순차적으로 제공하는 것인, 방법.
  7. 제 1 항에 있어서,
    상기 플레이트 상에 놓인 상기 재료의 양이 변경됨에 따라, 상기 양이 변경된 재료의 중량에 기초하여, 상기 조리 정보를 변경하는 단계;
    를 더 포함하며,
    상기 변경된 조리 정보가 상기 프로젝터에게 제공되는 것인, 방법.
  8. 제 1 항에 있어서,
    상기 선택된 음식을 조리하는데 이용되는 재료들이 상기 모바일 디바이스와 연결된 냉장고에 수납되어 있는지를 확인하는 단계; 및
    상기 선택된 음식을 조리하는데 이용되는 재료들 중에서 상기 냉장고에 수납되어 있지 않은 재료에 대한 쇼핑 정보를 획득하는 단계;
    를 더 포함하는 것인, 방법.
  9. 제 8 항에 있어서,
    상기 쇼핑 정보는 상기 모바일 디바이스의 화면 및 상기 프로젝터 중 적어도 하나를 통하여 상기 사용자에게 제공되는 것인, 방법.
  10. 제 1 항에 있어서,
    상기 모바일 디바이스는 크래들(cradle) 장치에 장착됨으로써, 상기 카메라 및 상기 프로젝터와 연결되는 것인, 방법.
  11. 적어도 하나의 프로그램이 저장되는 메모리; 및
    상기 적어도 하나의 프로그램을 실행함으로써 음식을 조리하기 위한 정보를 제공하는 프로세서를 포함하고,
    상기 적어도 하나의 프로그램은,
    플레이트(plate) 상에 놓인 재료의 이미지를 카메라로부터 수신하는 단계;
    상기 재료의 이미지에 기초하여, 상기 재료를 인식하는 단계;
    상기 모바일 디바이스의 사용자에 관한 사용자 정보에 기초하여, 상기 인식된 재료와 관련된 음식의 추천 목록을 획득하는 단계;
    상기 추천 목록에서 선택된 음식에 관한 조리 정보를 획득하는 단계; 및
    상기 획득된 조리 정보를 상기 모바일 디바이스와 연결된 프로젝터(projector)에게 제공하는 단계;
    를 실행하는 명령어들을 포함하며,
    상기 제공된 조리 정보는, 상기 프로젝터를 통하여 상기 재료가 놓인 상기 플레이트 상에 조사되는 것인, 모바일 디바이스.
  12. 제 11 항에 있어서,
    상기 재료를 인식하는 단계는, 상기 촬영된 재료의 이미지를 서버에게 제공하고, 상기 서버로부터 상기 재료의 이름 및 상기 재료의 무게에 관한 정보를 수신하는 것인, 모바일 디바이스.
  13. 제 11 항에 있어서,
    상기 음식의 추천 목록을 획득하는 단계는, 상기 사용자 정보를 서버에게 제공하고, 상기 촬영된 이미지 및 상기 제공된 사용자 정보에 기초하여 상기 서버에 의해 추천된 상기 음식의 추천 목록을 상기 서버로부터 수신하는 것인, 모바일 디바이스.
  14. 제 13 항에 있어서,
    상기 음식의 추천 목록은, 상기 사용자의 몸무게, 상기 사용자의 성별, 상기 사용자의 선호 음식, 상기 사용자의 건강 상태 중 적어도 하나에 기초하여 추천된 것인, 모바일 디바이스.
  15. 제 11 항에 있어서,
    상기 조리 정보는, 상기 선택된 음식을 조리하는데 이용되는 재료들의 이름 및 중량에 관한 정보, 및 상기 음식을 조리하기 위한 세부 조리 단계에 관한 정보를 포함하는 것인, 모바일 디바이스.
  16. 제 15 항에 있어서,
    상기 조리 정보를 상기 프로젝터에게 제공하는 단계는, 상기 재료들의 이름 및 중량에 관한 정보를 상기 프로젝터에게 먼저 제공하고, 상기 세부 조리 단계에 관한 정보를 상기 프로젝트에게 순차적으로 제공하는 것인, 모바일 디바이스.
  17. 제 11 항에 있어서,
    상기 플레이트 상에 놓인 상기 재료의 양이 변경됨에 따라, 상기 양이 변경된 재료의 중량에 기초하여, 상기 조리 정보를 변경하는 단계;
    를 더 포함하며,
    상기 변경된 조리 정보가 상기 프로젝터에게 제공되는 것인, 모바일 디바이스.
  18. 제 11 항에 있어서,
    상기 선택된 음식을 조리하는데 이용되는 재료들이 상기 모바일 디바이스와 연결된 냉장고에 수납되어 있는지를 확인하는 단계; 및
    상기 선택된 음식을 조리하는데 이용되는 재료들 중에서 상기 냉장고에 수납되어 있지 않은 재료에 대한 쇼핑 정보를 획득하는 단계;
    를 더 포함하는 것인, 모바일 디바이스.
  19. 제 18 항에 있어서,
    상기 쇼핑 정보는 상기 모바일 디바이스의 화면 및 상기 프로젝터 중 적어도 하나를 통하여 상기 사용자에게 제공되는 것인, 모바일 디바이스.
  20. 제 11 항에 있어서,
    상기 모바일 디바이스는 크래들(cradle) 장치에 장착됨으로써, 상기 카메라 및 상기 프로젝터와 연결되는 것인, 모바일 디바이스.
  21. 서버가 음식을 조리하기 위한 정보를 제공하는 방법에 있어서,
    플레이트(plate) 상에 놓인 재료의 이미지를 모바일 디바이스로부터 수신하는 단계;
    상기 수신된 재료의 이미지에 기초하여, 상기 재료를 인식하는 단계;
    상기 모바일 디바이스의 사용자에 관한 사용자 정보를 상기 모바일 디바이스로부터 수신하는 단계;
    상기 사용자 정보에 기초하여, 상기 재료와 관련된 음식의 조리 정보를 생성하는 단계; 및
    상기 생성된 조리 정보를 상기 모바일 디바이스에게 제공하는 단계;
    를 포함하며,
    상기 재료의 이미지는 상기 모바일 디바이스와 연결된 카메라에 의해 생성되고, 상기 카메라로부터 상기 모바일 디바이스에게 제공된 것이며,
    상기 모바일 디바이스에게 제공된 조리 정보는, 상기 모바일 디바이스와 연결된 프로젝터를 통하여 상기 플레이트 상에 조사되는 것인, 방법.
  22. 모바일 디바이스가 음식을 조리하기 위한 정보를 제공하는 방법에 있어서,
    플레이트(plate) 상에 놓인 재료의 이미지를 카메라로부터 수신하는 단계;
    상기 재료의 이미지에 기초하여, 상기 재료를 인식하는 단계; 및
    상기 인식된 재료에 관련된 음식의 조리 정보 를 상기 모바일 디바이스와 연결된 프로젝터(projector)에게 제공하는 단계;
    를 포함하며,
    상기 제공된 조리 정보는, 상기 프로젝터를 통하여 상기 재료가 놓인 상기 플레이트 상에 조사되는 것인, 방법.
  23. 제 22 항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.
KR1020130053390A 2013-05-10 2013-05-10 음식의 조리 정보를 제공하는 시스템 및 방법 KR20140133337A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020130053390A KR20140133337A (ko) 2013-05-10 2013-05-10 음식의 조리 정보를 제공하는 시스템 및 방법
EP14155110.1A EP2801947A3 (en) 2013-05-10 2014-02-13 Method and system for providing cooking information about food
US14/180,500 US9269133B2 (en) 2013-05-10 2014-02-14 Method and system for providing cooking information about food

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130053390A KR20140133337A (ko) 2013-05-10 2013-05-10 음식의 조리 정보를 제공하는 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR20140133337A true KR20140133337A (ko) 2014-11-19

Family

ID=50114273

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130053390A KR20140133337A (ko) 2013-05-10 2013-05-10 음식의 조리 정보를 제공하는 시스템 및 방법

Country Status (3)

Country Link
US (1) US9269133B2 (ko)
EP (1) EP2801947A3 (ko)
KR (1) KR20140133337A (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017116195A1 (ko) * 2015-12-30 2017-07-06 삼성전자 주식회사 육류 숙성 장치, 그 육류 숙성 방법, 육류 숙성 시스템 및 냉장고
KR20180110754A (ko) * 2017-03-30 2018-10-11 한국전자통신연구원 음식 적합도에 기초한 요리 정보 제공 방법 및 장치
US10110395B2 (en) 2015-04-27 2018-10-23 Xiaomi Inc. Control method and control device for smart home device
JP2020510273A (ja) * 2017-03-17 2020-04-02 マイヤー インテレクチュアル プロパティーズ リミテッド 調理システム
CN111345699A (zh) * 2018-12-20 2020-06-30 九阳股份有限公司 一种烹饪设备的控制方法和烹饪设备
US11954626B2 (en) 2018-04-13 2024-04-09 Samsung Electronics Co., Ltd. Refrigerator and method for displaying user interface on refrigerator, user terminal, and method for performing function in user terminal

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ITTO20120896A1 (it) 2012-10-15 2014-04-16 Indesit Co Spa Piano cottura a induzione
US10605464B2 (en) 2012-10-15 2020-03-31 Whirlpool Corporation Induction cooktop
USD737319S1 (en) * 2013-06-09 2015-08-25 Apple Inc. Display screen or portion thereof with graphical user interface
EP2930918A1 (en) * 2014-04-07 2015-10-14 Indesit Company S.p.A. Oven comprising a camera
USD762693S1 (en) 2014-09-03 2016-08-02 Apple Inc. Display screen or portion thereof with graphical user interface
CN107535024B (zh) 2015-05-05 2020-11-27 俊生活公司 连接的食品制备系统及其使用方法
KR102362654B1 (ko) 2015-07-03 2022-02-15 삼성전자주식회사 오븐
CN105159103A (zh) * 2015-07-31 2015-12-16 小米科技有限责任公司 调整模式的方法及装置
US10027866B2 (en) 2015-08-05 2018-07-17 Whirlpool Corporation Refrigerators having internal content cameras, and methods of operating the same
CN105278378B (zh) * 2015-10-29 2018-02-02 小米科技有限责任公司 信息提示方法和装置
US10832302B2 (en) * 2015-10-30 2020-11-10 Forq, Inc. Method for digital recipe library and food image recognition services
KR102393928B1 (ko) * 2015-11-10 2022-05-04 삼성전자주식회사 응답 메시지를 추천하는 사용자 단말 장치 및 그 방법
CN105678579A (zh) * 2016-01-06 2016-06-15 北京京东尚科信息技术有限公司 基于优惠券的商品推荐方法和系统
US11016634B2 (en) * 2016-09-01 2021-05-25 Samsung Electronics Co., Ltd. Refrigerator storage system having a display
US10303947B2 (en) * 2017-01-27 2019-05-28 Panasonic Intellectual Property Management Co., Ltd. Information processing apparatus and information processing method
CN108536274A (zh) * 2017-03-03 2018-09-14 台湾樱花股份有限公司 智能型料理装置及智能型料理方法
US11351673B2 (en) 2017-03-06 2022-06-07 Miso Robotics, Inc. Robotic sled-enhanced food preparation system and related methods
WO2018165038A1 (en) 2017-03-06 2018-09-13 Miso Robotics, Inc. Augmented reality-enhanced food preparation system and related methods
EP3379475A1 (en) * 2017-03-23 2018-09-26 Panasonic Intellectual Property Management Co., Ltd. Information presentation apparatus and information presentation method
JP6898803B2 (ja) * 2017-03-28 2021-07-07 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 表示装置、表示方法及びプログラム
EP3432682A1 (en) 2017-07-18 2019-01-23 Whirlpool Corporation Method for operating an induction cooking hob and cooking hob using such method
US10832590B2 (en) * 2017-09-13 2020-11-10 At&T Intellectual Property I, L.P. Monitoring food intake
US10993292B2 (en) 2017-10-23 2021-04-27 Whirlpool Corporation System and method for tuning an induction circuit
WO2019127650A1 (zh) * 2017-12-30 2019-07-04 刘雯媛 智能烤箱
US10942932B2 (en) 2018-01-22 2021-03-09 Everything Food, Inc. System and method for grading and scoring food
US11140751B2 (en) 2018-04-23 2021-10-05 Whirlpool Corporation System and method for controlling quasi-resonant induction heating devices
CN108920595A (zh) * 2018-06-27 2018-11-30 佛山市云米电器科技有限公司 一种通过扫描进行蒸烤设备菜谱推荐的方法及系统
US11167421B2 (en) 2018-08-10 2021-11-09 Miso Robotics, Inc. Robotic kitchen assistant including universal utensil gripping assembly
CN110969459A (zh) * 2018-09-29 2020-04-07 京东方科技集团股份有限公司 优惠信息生成方法
US20220036076A1 (en) * 2018-10-01 2022-02-03 Sony Corporation Information processing apparatus, information processing method, and recording medium
US11577401B2 (en) 2018-11-07 2023-02-14 Miso Robotics, Inc. Modular robotic food preparation system and related methods
USD954719S1 (en) 2019-01-17 2022-06-14 Bruin Biometrics, Llc Display screen or portion thereof with a graphical user interface
USD948544S1 (en) * 2019-01-17 2022-04-12 Bruin Biometrics, Llc Display screen or portion thereof with graphical user interface
USD903125S1 (en) 2019-02-11 2020-11-24 Bruin Biometrics, Llc Disposable sensor attachment design
CN110234040B (zh) * 2019-05-10 2022-08-09 九阳股份有限公司 一种烹饪设备的食材图像获取方法以及烹饪设备
US11556940B2 (en) * 2019-11-19 2023-01-17 International Business Machines Corporation Taste profile system
WO2021184003A1 (en) * 2020-03-13 2021-09-16 June Life, Inc. Method and system for sensor maintenance
WO2021195622A1 (en) 2020-03-27 2021-09-30 June Life, Inc. System and method for classification of ambiguous objects
USD954270S1 (en) 2020-04-03 2022-06-07 Bruin Biometrics, Llc Medical device with housing for a barcode scanner module
US20210375155A1 (en) * 2020-06-02 2021-12-02 Sarah Beth S. Brust Automated cooking assistant
KR20220005239A (ko) * 2020-07-06 2022-01-13 삼성전자주식회사 전자 장치 및 이의 제어 방법
WO2022076015A1 (en) * 2020-10-06 2022-04-14 Electrolux Home Products, Inc. Assisted cooking
KR20220128216A (ko) * 2021-03-12 2022-09-20 삼성전자주식회사 전자 도마, 무선 전력 전송 장치 및 무선 전력 전송 장치를 이용한 조리 관리 방법
WO2022236227A1 (en) 2021-05-01 2022-11-10 Miso Robotics, Inc. Automated bin system for accepting food items in robotic kitchen workspace and related methods

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8224078B2 (en) 2000-11-06 2012-07-17 Nant Holdings Ip, Llc Image capture and identification system and process
KR20110003705A (ko) 2009-07-06 2011-01-13 엘지전자 주식회사 이동 단말기에서의 정보 표시 방법 및 이를 이용한 이동 단말기
US20110184972A1 (en) * 2009-12-23 2011-07-28 Cbs Interactive Inc. System and method for navigating a product catalog
US8418919B1 (en) * 2011-01-04 2013-04-16 Intellectual Ventures Fund 79 Llc Apparatus and method for mobile checkout
CN103339646B (zh) * 2011-02-04 2017-06-23 乐天株式会社 信息提供装置
US9129302B2 (en) * 2011-03-17 2015-09-08 Sears Brands, L.L.C. Methods and systems for coupon service applications
KR20120126157A (ko) 2011-05-11 2012-11-21 주식회사 로보쓰리 증강현실을 이용한 음식정보 제공방법 및 음식정보 제공시스템
US20140095479A1 (en) * 2012-09-28 2014-04-03 Sherry S. Chang Device, method, and system for recipe recommendation and recipe ingredient management

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10110395B2 (en) 2015-04-27 2018-10-23 Xiaomi Inc. Control method and control device for smart home device
WO2017116195A1 (ko) * 2015-12-30 2017-07-06 삼성전자 주식회사 육류 숙성 장치, 그 육류 숙성 방법, 육류 숙성 시스템 및 냉장고
US11596159B2 (en) 2015-12-30 2023-03-07 Samsung Electronics Co., Ltd. Meat-aging apparatus, meat-aging method thereof, and meat-aging system and refrigerator
JP2020510273A (ja) * 2017-03-17 2020-04-02 マイヤー インテレクチュアル プロパティーズ リミテッド 調理システム
KR20180110754A (ko) * 2017-03-30 2018-10-11 한국전자통신연구원 음식 적합도에 기초한 요리 정보 제공 방법 및 장치
US11954626B2 (en) 2018-04-13 2024-04-09 Samsung Electronics Co., Ltd. Refrigerator and method for displaying user interface on refrigerator, user terminal, and method for performing function in user terminal
CN111345699A (zh) * 2018-12-20 2020-06-30 九阳股份有限公司 一种烹饪设备的控制方法和烹饪设备
CN111345699B (zh) * 2018-12-20 2022-06-28 九阳股份有限公司 一种烹饪设备的控制方法和烹饪设备

Also Published As

Publication number Publication date
EP2801947A3 (en) 2015-07-29
US9269133B2 (en) 2016-02-23
EP2801947A2 (en) 2014-11-12
US20140334691A1 (en) 2014-11-13

Similar Documents

Publication Publication Date Title
KR20140133337A (ko) 음식의 조리 정보를 제공하는 시스템 및 방법
RU2635933C2 (ru) Способ, устройство и электронное устройство для нагревания бака индукционного оборудования тепловой обработки продуктов
JP6421184B2 (ja) 情報生成方法、情報生成装置、コンピュータプログラム及びコンピュータ読み取り可能な記憶媒体
KR101777068B1 (ko) 스마트 홈 디바이스의 제어 방법 및 장치, 프로그램 및 기록매체
CN104205137B (zh) 向与产品相关的装置提供控制信息的系统和方法
CN103984847A (zh) 一种饮食推荐方法及相关装置
CN106647532B (zh) 烹饪设备的推荐方法和装置
CN105511277A (zh) 推荐饮品的方法及装置
CN106444567B (zh) 食物烹饪系统、方法及装置
KR20170031517A (ko) 이동 단말기 및 그의 동작 방법
CN105116762A (zh) 烹饪控制方法及装置、电子设备
CN105159989A (zh) 信息推荐方法、服务器及智能终端
CN105278378A (zh) 信息提示方法和装置
CN105825443A (zh) 推送、获取菜品信息的方法及装置
CN110889573A (zh) 一种设备选型方法及其装置
CN108009288A (zh) 食谱推送方法及装置
CN107464158A (zh) 菜单生成方法、装置和设备
KR20170054704A (ko) 사용자 맞춤형 식단 코칭 방법 및 이를 이용하는 이동 단말기
KR101948306B1 (ko) 심리 상태에 따른 레시피 추천 방법 및 장치
US20170195129A1 (en) Method and device to control secondary devices
KR102055266B1 (ko) O2o 기반 음식점 이용관리 시스템 및 이용관리방법
JP5926326B2 (ja) 情報提供システム、投稿者端末、閲覧者端末、および情報公開装置
CN105515940A (zh) 信息交互方法及装置
JP2017021650A (ja) 調理レシピの作成方法、及び、プログラム
CN107479444B (zh) 保温方法及装置

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid