KR20230108090A - 전자 장치 및 그 제어 방법 - Google Patents

전자 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR20230108090A
KR20230108090A KR1020220003454A KR20220003454A KR20230108090A KR 20230108090 A KR20230108090 A KR 20230108090A KR 1020220003454 A KR1020220003454 A KR 1020220003454A KR 20220003454 A KR20220003454 A KR 20220003454A KR 20230108090 A KR20230108090 A KR 20230108090A
Authority
KR
South Korea
Prior art keywords
menu
electronic device
information
weight
menus
Prior art date
Application number
KR1020220003454A
Other languages
English (en)
Inventor
장우성
김상아
김재웅
안준억
이윤경
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020220003454A priority Critical patent/KR20230108090A/ko
Priority to PCT/KR2022/014342 priority patent/WO2023132438A1/ko
Priority to CN202280071928.1A priority patent/CN118176478A/zh
Priority to EP22918975.8A priority patent/EP4369162A1/en
Priority to US17/984,076 priority patent/US20230221834A1/en
Publication of KR20230108090A publication Critical patent/KR20230108090A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Biophysics (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Biomedical Technology (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 전자 장치는 디스플레이, 조작 인터페이스, 제1 뎁스의 제1 메뉴 및 제1 메뉴에 종속된 제2 뎁스의 제2 메뉴를 포함하는 메뉴 선택 이력을 저장하는 메모리, 조작 인터페이스를 통해 적어도 하나의 메뉴를 선택하는 사용자 입력이 수신되면, 사용자 입력에 기초하여 가이드 정보의 제공이 필요한지 여부를 식별하고, 가이드 정보의 제공이 필요한 것으로 식별되면, 선택된 적어도 하나의 메뉴에 대한 정보, 전자 장치의 현재 컨텍스트(context) 정보 및 메모리에 저장된 메뉴 선택 이력에 기초하여 추천 메뉴를 포함하는 가이드 정보를 표시하도록 디스플레이를 제어하는 프로세서를 포함한다.

Description

전자 장치 및 그 제어 방법{ELECTRONIC APPARATUS AND CONTROLLING METHOD THEREOF}
본 개시는 전자 장치 및 그 제어방법에 관한 것으로, 더욱 상세하게는 메뉴를 선택하는 사용자 입력에 기초하여 추천 메뉴를 제공하는 전자 장치 및 그 제어방법에 대한 것이다.
사용자가 다양한 메뉴 중에서 특정 메뉴를 선택하고자 탐색할 수 있다. 예를 들어, 전자 장치에 포함되는 버튼, 다이얼 또는 터치 스크린 등을 통하여 사용자가 특정 메뉴를 탐색할 수 있다.
여기서, 전자 장치에서 제공하는 메뉴가 많은 경우, 사용자가 자신이 원하는 메뉴를 찾는데 어려움이 있을 수 있다. 예를 들어, 피자를 조리하기 위한 메뉴를 찾는 경우 사용자가 어떤 카테고리의 메뉴를 선택해야 하는지 알기 어려울 수 있다.
또한, 특정 메뉴를 선택하는 과정에서 많은 사용자 입력이 필요하다면, 사용자가 불편함을 느낄 수 있다. 예를 들어, 피자를 조리하기 위한 메뉴를 자주 이용하는 사용자는 제1 뎁스의 메뉴, 제2 뎁스의 메뉴, 제3 뎁스의 메뉴를 최종적으로 선택해야 한다고 가정한다. 피자를 조리하기 위한 메뉴를 자주 이용하는 사용자는 총 3번의 메뉴를 반복적으로 선택하고 최종 시작 버튼을 또 입력해야 할 수 있다. 사용자가 반복적으로 해당 메뉴를 이용하는 경우, 4번의 입력에 시간이 오래 걸린다고 느낄 수 있다.
본 개시는 상술한 문제를 개선하기 위해 고안된 것으로, 본 개시의 목적은 가이드 정보의 제공이 필요하다고 식별되면, 사용자 입력, 컨텍스트 정보 및 메뉴 선택 이력에 기초하여 추천 메뉴를 포함하는 가이드 정보를 제공하는 전자 장치 및 그의 제어 방법을 제공함에 있다.
상술한 목적을 달성하기 위한 본 실시 예에 따른 전자 장치는 디스플레이, 조작 인터페이스, 제1 뎁스의 제1 메뉴 및 상기 제1 메뉴에 종속된 제2 뎁스의 제2 메뉴를 포함하는 메뉴 선택 이력을 저장하는 메모리, 상기 조작 인터페이스를 통해 적어도 하나의 메뉴를 선택하는 사용자 입력이 수신되면, 상기 사용자 입력에 기초하여 가이드 정보의 제공이 필요한지 여부를 식별하고, 상기 가이드 정보의 제공이 필요한 것으로 식별되면, 상기 선택된 적어도 하나의 메뉴에 대한 정보, 상기 전자 장치의 현재 컨텍스트(context) 정보 및 상기 메모리에 저장된 상기 메뉴 선택 이력에 기초하여 추천 메뉴를 포함하는 상기 가이드 정보를 표시하도록 상기 디스플레이를 제어하는 프로세서를 포함한다.
한편, 상기 프로세서는 특정 뎁스의 메뉴가 선택된 후 임계 시간 동안 메뉴를 선택하는 추가 사용자 입력이 수신되지 않는 이벤트, 사용자 입력에 따라 메뉴가 변경되는 속도가 임계 속도 이상인 이벤트 또는 특정 뎁스의 메뉴가 선택된 후 상기 메뉴 선택이 취소되는 사용자 입력이 수신되는 이벤트 중 적어도 하나의 이벤트가 식별되면, 상기 가이드 정보의 제공이 필요한 것으로 식별할 수 있다.
한편, 상기 컨텍스트 정보는 상기 전자 장치 내부의 온도 정보, 조리 대상의 온도 정보, 특정 기능의 실행 여부에 대한 정보, 상기 전자 장치 내부의 이미지 정보 및 일시 정보 중 적어도 하나를 포함할 수 있다.
한편, 상기 메모리는 복수의 메뉴를 저장하고, 상기 프로세서는 상기 적어도 하나의 메뉴에 대한 정보, 상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 상기 메모리에 저장된 복수의 메뉴 각각에 대응되는 가중치를 획득하고, 상기 복수의 메뉴 각각에 대응되는 가중치에 기초하여 상기 추천 메뉴를 식별할 수 있다.
한편, 상기 프로세서는 상기 적어도 하나의 메뉴에 대한 정보에 기초하여 선택된 메뉴를 식별하고, 상기 복수의 메뉴 중 상기 선택된 메뉴와 동일한 메뉴에 제1 서브 가중치를 할당하고, 상기 복수의 메뉴 중 상기 선택된 메뉴와 유사한 메뉴에 제2 서브 가중치를 할당하고, 상기 제1 서브 가중치 및 상기 제2 서브 가중치를 합산하여 상기 복수의 메뉴 각각에 대응되는 가중치를 획득할 수 있다.
한편, 상기 프로세서는 상기 복수의 메뉴 중 상기 컨텍스트 정보에 대응되는 메뉴에 제3 서브 가중치를 할당하고, 상기 복수의 메뉴 중 상기 메뉴 선택 이력에 대응되는 메뉴에 제4 서브 가중치를 할당하고, 상기 제1 서브 가중치, 상기 제2 서브 가중치, 상기 제3 서브 가중치 및 상기 제4 서브 가중치를 합산하여 상기 복수의 메뉴 각각에 대응되는 가중치를 획득할 수 있다.
한편, 상기 프로세서는 상기 가이드 정보의 제공이 필요한 것으로 식별되면, 상기 적어도 하나의 메뉴에 대한 정보, 상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 상기 추천 메뉴를 식별하고, 상기 추천 메뉴가 표시되는 위치에 기초하여 상기 추천 메뉴를 식별하기 위한 아이콘을 표시하도록 상기 디스플레이를 제어할 수 있다.
한편, 상기 프로세서는 상기 가이드 정보의 제공이 필요한 것으로 식별되면, 학습된 신경망 모델에 상기 전자 장치의 상기 적어도 하나의 메뉴에 대한 정보 및 상기 컨텍스트 정보를 입력하여 상기 추천 메뉴를 획득하고, 상기 신경망 모델은 상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 학습될 수 있다.
한편, 상기 전자 장치는 조리물을 가열하는 히터를 포함하는 조리 장치이고, 상기 프로세서는 상기 가이드 정보에 포함된 메뉴를 선택하는 사용자 입력이 수신되면, 상기 선택된 메뉴에 대응되는 기능을 수행하고, 상기 선택된 메뉴에 대응되는 기능은 상기 선택된 메뉴의 조리 과정을 포함하는 텍스트를 표시하는 기능, 상기 선택된 메뉴의 조리 과정을 포함하는 이미지를 표시하는 기능, 상기 선택된 메뉴의 조리 과정을 수행하기 위해 상기 히터의 스케쥴을 설정하는 기능 중 적어도 하나를 포함할 수 있다.
한편, 상기 전자 장치는 상기 조리물의 온도를 센싱하기 위한 접촉식 온도 센서를 포함하고, 상기 프로세서는 상기 가이드 정보의 제공이 필요한 것으로 식별되면, 상기 접촉식 온도 센서를 통해 상기 조리물의 온도를 상기 컨텍스트 정보로서 획득하고, 상기 적어도 하나의 메뉴에 대한 정보, 상기 조리물의 온도를 포함하는 상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 상기 추천 메뉴를 식별할 수 있다.
본 실시 예에 따른 전자 장치의 제어 방법은 제1 뎁스의 제1 메뉴 및 상기 제1 메뉴에 종속된 제2 뎁스의 제2 메뉴를 포함하는 메뉴 선택 이력을 저장하는 단계, 어도 하나의 메뉴를 선택하는 사용자 입력이 수신되면, 상기 사용자 입력에 기초하여 가이드 정보의 제공이 필요한지 여부를 식별하는 단계 및 상기 가이드 정보의 제공이 필요한 것으로 식별되면, 상기 선택된 적어도 하나의 메뉴에 대한 정보, 상기 전자 장치의 현재 컨텍스트(context) 정보 및 상기 저장된 상기 메뉴 선택 이력에 기초하여 추천 메뉴를 포함하는 상기 가이드 정보를 표시하는 단계를 포함한다.
한편, 상기 가이드 정보의 제공이 필요한지 여부를 식별하는 단계는 특정 뎁스의 메뉴가 선택된 후 임계 시간 동안 메뉴를 선택하는 추가 사용자 입력이 수신되지 않는 이벤트, 사용자 입력에 따라 메뉴가 변경되는 속도가 임계 속도 이상인 이벤트 또는 특정 뎁스의 메뉴가 선택된 후 상기 메뉴 선택이 취소되는 사용자 입력이 수신되는 이벤트 중 적어도 하나의 이벤트가 식별되면, 상기 가이드 정보의 제공이 필요한 것으로 식별할 수 있다.
한편, 상기 컨텍스트 정보는 상기 전자 장치 내부의 온도 정보, 조리 대상의 온도 정보, 특정 기능의 실행 여부에 대한 정보, 상기 전자 장치 내부의 이미지 정보 및 일시 정보 중 적어도 하나를 포함할 수 있다.
한편, 상기 제어 방법은 상기 적어도 하나의 메뉴에 대한 정보, 상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 상기 전자 장치에 저장된 복수의 메뉴 각각에 대응되는 가중치를 획득하는 단계 및 상기 복수의 메뉴 각각에 대응되는 가중치에 기초하여 상기 추천 메뉴를 식별하는 단계를 더 포함할 수 있다.
한편, 상기 복수의 메뉴 각각에 대응되는 가중치를 획득하는 단계는 상기 적어도 하나의 메뉴에 대한 정보에 기초하여 선택된 메뉴를 식별하고, 상기 복수의 메뉴 중 상기 선택된 메뉴와 동일한 메뉴에 제1 서브 가중치를 할당하고, 상기 복수의 메뉴 중 상기 선택된 메뉴와 유사한 메뉴에 제2 서브 가중치를 할당하고, 상기 제1 서브 가중치 및 상기 제2 서브 가중치를 합산하여 상기 복수의 메뉴 각각에 대응되는 가중치를 획득할 수 있다.
한편, 상기 복수의 메뉴 각각에 대응되는 가중치를 획득하는 단계는 상기 복수의 메뉴 중 상기 컨텍스트 정보에 대응되는 메뉴에 제3 서브 가중치를 할당하고, 상기 복수의 메뉴 중 상기 메뉴 선택 이력에 대응되는 메뉴에 제4 서브 가중치를 할당하고, 상기 제1 서브 가중치, 상기 제2 서브 가중치, 상기 제3 서브 가중치 및 상기 제4 서브 가중치를 합산하여 상기 복수의 메뉴 각각에 대응되는 가중치를 획득할 수 있다.
한편, 상기 제어 방법은 상기 가이드 정보의 제공이 필요한 것으로 식별되면, 상기 적어도 하나의 메뉴에 대한 정보, 상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 상기 추천 메뉴를 식별하는 단계 및 상기 추천 메뉴가 표시되는 위치에 기초하여 상기 추천 메뉴를 식별하기 위한 아이콘을 표시하는 단계를 더 포함할 수 있다.
한편, 상기 제어 방법은 상기 가이드 정보의 제공이 필요한 것으로 식별되면, 학습된 신경망 모델에 상기 전자 장치의 상기 적어도 하나의 메뉴에 대한 정보 및 상기 컨텍스트 정보를 입력하여 상기 추천 메뉴를 획득하는 단계를 더 포함하고, 상기 신경망 모델은 상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 학습될 수 있다.
한편, 상기 전자 장치는 조리물을 가열하는 히터를 포함하는 조리 장치이고, 상기 제어 방법은 상기 가이드 정보에 포함된 메뉴를 선택하는 사용자 입력이 수신되면, 상기 선택된 메뉴에 대응되는 기능을 수행하는 단계를 더 포함하고, 상기 선택된 메뉴에 대응되는 기능은 상기 선택된 메뉴의 조리 과정을 포함하는 텍스트를 표시하는 기능, 상기 선택된 메뉴의 조리 과정을 포함하는 이미지를 표시하는 기능, 상기 선택된 메뉴의 조리 과정을 수행하기 위해 상기 히터의 스케쥴을 설정하는 기능 중 적어도 하나를 포함할 수 있다.
한편, 상기 전자 장치는 상기 조리물의 온도를 센싱하기 위한 접촉식 온도 센서를 포함하고, 상기 제어 방법은 상기 가이드 정보의 제공이 필요한 것으로 식별되면, 상기 접촉식 온도 센서를 통해 상기 조리물의 온도를 상기 컨텍스트 정보로서 획득하는 단계 및 상기 적어도 하나의 메뉴에 대한 정보, 상기 조리물의 온도를 포함하는 상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 상기 추천 메뉴를 식별하는 단계를 더 포함할 수 있다.
도 1은 전자 장치의 구체적인 구성을 설명하기 위한 사시도이다.
도 2는 전자 장치 및 서버와의 통신 연결을 설명하기 위한 도면이다.
도 3은 본 개시의 일 실시 예에 따른 전자 장치를 도시한 블록도이다.
도 4는 도 3의 전자 장치의 구체적인 구성을 설명하기 위한 블록도이다.
도 5는 사용자 입력에 기초하여 가이드 정보를 제공하는 동작을 설명하기 위한 흐름도이다.
도 6은 일 실시 예의 기 설정된 이벤트를 설명하기 위한 흐름도이다.
도 7은 다른 실시 예의 기 설정된 이벤트를 설명하기 위한 흐름도이다.
도 8은 메뉴의 변경 속도를 계산하는 과정을 설명하기 위한 표이다.
도 9는 다양한 실시 예에 따른 메뉴의 변경 속도를 설명하기 위한 도면이다.
도 10은 또 다른 실시 예의 기 설정된 이벤트를 설명하기 위한 흐름도이다.
도 11은 컨텍스트 정보를 획득하는 동작을 설명하기 위한 도면이다.
도 12는 추천 메뉴를 식별하는 인공 지능 모델을 획득하는 동작을 설명하기 위한 도면이다.
도 13은 상이한 뎁스의 메뉴를 설명하기 위한 도면이다.
도 14는 특정 메뉴가 선택되었을 때 표시되는 화면을 설명하기 위한 도면이다.
도 15는 일 실시 예에 따라, 기 설정된 이벤트에 기초하여 가이드 정보를 제공하는 동작을 설명하기 위한 도면이다.
도 16은 다른 실시 예에 따라, 기 설정된 이벤트에 기초하여 가이드 정보를 제공하는 동작을 설명하기 위한 도면이다.
도 17은 또 다른 실시 예에 따라, 기 설정된 이벤트에 기초하여 가이드 정보를 제공하는 동작을 설명하기 위한 도면이다.
도 18은 추천 메뉴를 표시하는 동작을 설명하기 위한 도면이다.
도 19는 추천 메뉴를 생성하는 전자 장치의 동작을 설명하기 위한 블록도이다.
도 20은 추천 메뉴를 식별하는 동작을 설명하기 위한 흐름도이다.
도 21은 조리물 온도에 기초하여 추천 메뉴를 식별하는 동작을 설명하기 위한 흐름도이다.
도 22는 일 실시 예에 따라, 전자 장치에 포함된 복수의 모듈에 의하여 가이드 정보를 제공하는 동작을 설명하기 위한 흐름도이다.
도 23은 다른 실시 예에 따라, 전자 장치에 포함된 복수의 모듈에 의하여 가이드 정보를 제공하는 동작을 설명하기 위한 흐름도이다.
도 24는 가이드 정보가 제공된 후 피드백 정보를 저장하는 동작을 설명하기 위한 흐름도이다.
도 25는 서버를 이용하여 추천 메뉴를 식별하는 동작을 설명하기 위한 흐름도이다.
도 26은 복수의 요리 각각에 대응되는 가중치 정보를 설명하기 위한 표이다.
도 27은 가중치 정보에 기초하여 추천 메뉴를 식별하는 동작을 설명하기 위한 도면이다.
도 28은 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 도면이다.
이하에서는 첨부 도면을 참조하여 본 개시를 상세히 설명한다.
본 개시의 실시 예에서 사용되는 용어는 본 개시에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 개시의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 개시에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 개시의 전반에 걸친 내용을 토대로 정의되어야 한다.
본 명세서에서, "가진다," "가질 수 있다," "포함한다," 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
A 또는/및 B 중 적어도 하나라는 표현은 "A" 또는 "B" 또는 "A 및 B" 중 어느 하나를 나타내는 것으로 이해되어야 한다.
본 명세서에서 사용된 "제1," "제2," "첫째," 또는 "둘째,"등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다.
어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 어떤 구성요소가 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "구성되다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 개시에서 "모듈" 혹은 "부"는 적어도 하나의 기능이나 동작을 수행하며, 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다. 또한, 복수의 "모듈" 혹은 복수의 "부"는 특정한 하드웨어로 구현될 필요가 있는 "모듈" 혹은 "부"를 제외하고는 적어도 하나의 모듈로 일체화되어 적어도 하나의 프로세서(미도시)로 구현될 수 있다.
본 명세서에서, 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
이하 첨부된 도면들을 참조하여 본 개시의 일 실시 예를 보다 상세하게 설명한다.
도 1은 전자 장치(100)의 구체적인 구성을 설명하기 위한 사시도이다.
도 1을 참조하면, 전자 장치(100)는 일 예일뿐이고, 본 개시의 다양한 실시 예에 따르면 조리 장치는 다양한 형태로 구현될 수 있음은 물론이다.
도 1에 도시된 바와 같이, 전자 장치(100)는 외관을 형성하는 본체(10)를 포함한다.
또한, 전자 장치(100)는 일측을 향해 개방된 조리실(20)을 구비한다. 여기서, 조리실(20)은 조리물(또는 음식물)을 수용하는 공간(즉, 수용 공간)을 의미할 수 있다. 본체(10)의 조리실(20)은 조리물이 조리되는 조리실(20)일 수 있으며, 조리실(20)은 전자 장치(100)의 전방을 향해 개방될 수 있다.
조리실(20)은 박스 형상으로 형성되며, 조리물의 출납을 위해 전면이 개방된다. 이를 위해, 본체(10)의 전면은 조리실(20)과 연결되는 개구를 구비한다.
이 경우, 조리실(20)의 전면은 본체(10)에 연결된 도어(21)에 의해 개폐될 수 있다. 이를 위해, 도어(21)는 본체(10)에 대해 회전 가능하도록 본체(10)의 하부에 힌지 결합될 수 있다. 또한, 도어(21)의 전면 상부에는 사용자가 파지할 수 있는 도어 핸들(23)이 마련되며, 사용자는 도어 핸들(23)을 파지하여 조리실(20)을 개폐할 수 있다.
또한, 조리실(20)에는 조리물을 가열시키기 위한 히터가 마련될 수 있다. 이 경우, 히터는 전기 저항체를 포함하는 전기 히터일 수 있다. 다만, 히터는 전기 히터로 한정되는 것은 아니고 가스를 연소시켜 열을 발생시키는 가스 히터일 수도 있다.
한편, 본체(10)의 상부에는 컨트롤 패널(30)이 배치된다. 컨트롤 패널(30)은 전자 장치(100)의 각종 동작 정보를 표시하고 전자 장치(100)의 동작을 제어하기 위한 사용자 명령을 입력받는 디스플레이(31)를 포함할 수 있다. 또한, 컨트롤 패널(30)은 전자 장치(100)의 동작을 제어하기 위한 다양한 사용자 명령을 입력받는 버튼(32)을 포함할 수 있다.
한편, 본 개시의 일 실시 예에 따르면, 전자 장치(100)는 조리실에 투입된 조리물의 크기 및 조리 상태를 고려하여, 조리물에 대한 조리를 수행할 수 있다.
구체적으로, 전자 장치(100)는 사용자가 컨트롤 패널(30)을 통해 선택한 조리물의 종류에 따라 조리물에 대한 조리 시간을 결정할 수 있다. 이때, 전자 장치(100)는 조리물의 크기를 판단하고, 판단된 크기에 따라 조리 시간을 결정할 수 있다. 예를 들어, 동일한 종류의 조리물이라도, 조리물의 크기가 작을수록 상대적으로 짧게 조리 시간을 결정하고, 조리물의 크기가 클수록 상대적으로 길게 조리 시간을 결정할 수 있다.
그리고, 전자 장치(100)는 조리물에 대한 조리가 진행되는 동안에 조리물의 조리 상태를 판단하고, 조리 상태에 기초하여 조리의 진행을 제어할 수 있다.
구체적으로, 전자 장치(100)는 조리물이 익은 정도에 따라 조리물에 대한 조리가 완료된 것으로 판단되면, 설정된 조리 시간이 종료되기 전이라도 조리를 종료할 수 있다. 예를 들어, 전자 장치(100)는 조리물이 익은 정도를 판단하고, 조리물의 익은 정도에 따라 조리물에 대한 조리가 완료된 것으로 판단되면, 조리 시간이 종료되기 전이라도 조리를 종료할 수 있다.
이와 같이, 본 개시의 다양한 실시 예에 따르면, 조리물의 종류만을 고려하여 조리 시간을 결정하는 것이 아니라, 동일한 종류의 조리물이라도 조리물의 크기에 따라 서로 다른 조리 시간이 결정될 수 있으며, 조리가 수행되는 동안에 조리물의 조리 상태에 따라 조리가 종료되는 시간이 결정될 수 있다. 이에 따라, 사용자는 조리물의 크기 등의 차이로 인한 정확한 조리법을 모르는 경우라도, 자신이 조리하고자 하는 조리물의 종류만을 선택하면, 조리 과정에 대한 모니터링 없이도 최적으로 조리물을 조리할 수 있게 된다.
도 2는 전자 장치(100) 및 서버(200)와의 통신 연결을 설명하기 위한 도면이다.
도 2를 참조하면, 전자 장치(100)는 서버(200)와 통신을 수행할 수 있다. 구체적으로, 전자 장치(100)는 추천 메뉴를 식별하는데 필요한 정보를 서버(200)에 전송할 수 있다. 여기서, 추천 메뉴를 식별하는데 필요한 정보는 사용자 입력과 관련된 정보, 전자 장치(100)의 컨텍스트와 관련된 정보(또는 컨텍스트 정보) 또는 메뉴 선택 이력 중 적어도 하나를 포함할 수 있다. 여기서, 사용자 입력은 사용자가 선택한 메뉴 및 선택한 메뉴의 순서를 포함할 수 있다. 그리고, 서버(200)는 전자 장치(100)로부터 수신된 정보에 기초하여 추천 메뉴를 식별할 수 있으며, 추천 메뉴를 전자 장치(100)에 전송할 수 있다. 여기서, 전자 장치(100)는 서버(200)와의 통신을 위해 통신 인터페이스(미도시)를 추가적으로 포함할 수 있다.
통신 인터페이스(미도시)는 다양한 유형의 통신 방식에 따라 다양한 유형의 외부 장치와 통신을 수행하는 구성이다. 통신 인터페이스(미도시)는 무선 통신 모듈 또는 유선 통신 모듈을 포함할 수 있다. 여기서, 각 통신 모듈은 적어도 하나의 하드웨어 칩 형태로 구현될 수 있다.
여기서, 무선 통신 모듈은 무선으로 외부 장치와 통신하는 모듈일 수 있다. 예를 들어, 무선 통신 모듈은 와이파이 모듈, 블루투스 모듈, 적외선 통신 모듈 또는 기타 통신 모듈 중 적어도 하나의 모듈을 포함할 수 있다.
여기서, 유선 통신 모듈은 유선으로 외부 장치와 통신하는 모듈일 수 있다. 예를 들어, 유선 통신 모듈은 LAN(Local Area Network) 모듈, 이더넷 모듈, 페어 케이블, 동축 케이블, 광섬유 케이블 또는 UWB(Ultra Wide-Band) 모듈 중 적어도 하나를 포함할 수 있다.
서버(200)를 통해 추천 메뉴를 식별하는 구체적인 동작은 도 24에서 기재한다.
도 3은 본 개시의 일 실시 예에 따른 전자 장치(100)를 도시한 블록도이다.
도 3을 참조하면, 전자 장치(100)는 디스플레이(110), 조작 인터페이스(120), 메모리(130) 및 프로세서(140)를 포함할 수 있다.
본 명세서의 다양한 실시 예들에 따른 전자 장치(100)는 디스플레이(110) 및 조작 인터페이스(120)를 포함하는 장치일 수 있다.
한편, 본 명세서의 다양한 실시 예들에 따른 전자 장치(100)는, 예를 들면, 스마트폰, 태블릿 PC, 이동 전화기, 데스크탑 PC, 랩탑 PC, PDA, PMP(portable multimedia player) 중 적어도 하나를 포함할 수 있다. 어떤 실시 예들에서, 전자 장치(100)는, 예를 들면, 텔레비전, DVD(digital video disk) 플레이어, 미디어 박스(예: 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM)중 적어도 하나를 포함할 수 있다.
디스플레이(110)는 LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diodes) 디스플레이, PDP(Plasma Display Panel) 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 디스플레이(110)내에는 a-si TFT(amorphous silicon thin film transistor), LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로, 백라이트 유닛 등도 함께 포함될 수 있다. 한편, 디스플레이(110)는 터치 센서와 결합된 터치 스크린, 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display, three-dimensional dispaly) 등으로 구현될 수 있다. 또한, 본 개시의 일 실시 예에 따른, 디스플레이(110)는 영상을 출력하는 디스플레이 패널뿐만 아니라, 디스플레이 패널을 하우징하는 베젤을 포함할 수 있다. 특히, 본 개시의 일 실시 예에 따른, 베젤은 사용자 인터렉션을 감지하기 위한 터치 센서(미도시)를 포함할 수 있다.
조작 인터페이스(120)는 버튼, 터치 패드, 마우스 및 키보드와 같은 장치로 구현되거나, 상술한 디스플레이 기능 및 조작 입력 기능도 함께 수행 가능한 터치 스크린으로도 구현될 수 있다. 여기서, 버튼은 전자 장치(100)의 본체 외관의 전면부나 측면부, 배면부 등의 임의의 영역에 형성된 기계적 버튼, 터치 패드, 휠 등과 같은 다양한 유형의 버튼이 될 수 있다.
메모리(130)는 프로세서(140)에 포함된 롬(ROM)(예를 들어, EEPROM(electrically erasable programmable read-only memory)), 램(RAM) 등의 내부 메모리로 구현되거나, 프로세서(140)와 별도의 메모리로 구현될 수도 있다. 이 경우, 메모리(130)는 데이터 저장 용도에 따라 전자 장치(100)에 임베디드된 메모리 형태로 구현되거나, 전자 장치(100)에 탈부착이 가능한 메모리 형태로 구현될 수도 있다. 예를 들어, 전자 장치(100)의 구동을 위한 데이터의 경우 전자 장치(100)에 임베디드된 메모리에 저장되고, 전자 장치(100)의 확장 기능을 위한 데이터의 경우 전자 장치(100)에 탈부착이 가능한 메모리에 저장될 수 있다.
한편, 전자 장치(100)에 임베디드된 메모리의 경우 휘발성 메모리(예: DRAM(dynamic RAM), SRAM(static RAM), 또는 SDRAM(synchronous dynamic RAM) 등), 비휘발성 메모리(non-volatile Memory)(예: OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, 플래시 메모리(예: NAND flash 또는 NOR flash 등), 하드 드라이브, 또는 솔리드 스테이트 드라이브(solid state drive(SSD)) 중 적어도 하나로 구현되고, 전자 장치(100)에 탈부착이 가능한 메모리의 경우 메모리 카드(예를 들어, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital), MMC(multi-media card) 등), USB 포트에 연결 가능한 외부 메모리(예를 들어, USB 메모리) 등과 같은 형태로 구현될 수 있다.
프로세서(140)는 전자 장치(100)의 전반적인 제어 동작을 수행할 수 있다. 구체적으로, 프로세서(140)는 전자 장치(100)의 전반적인 동작을 제어하는 기능을 한다.
프로세서(140)는 디지털 신호를 처리하는 디지털 시그널 프로세서(digital signal processor(DSP), 마이크로 프로세서(microprocessor), TCON(Time controller)으로 구현될 수 있다. 다만, 이에 한정되는 것은 아니며, 중앙처리장치(central processing unit(CPU)), MCU(Micro Controller Unit), MPU(micro processing unit), 컨트롤러(controller), 어플리케이션 프로세서(application processor(AP)), GPU(graphics-processing unit) 또는 커뮤니케이션 프로세서(communication processor(CP)), ARM(advanced reduced instruction set computer (RISC) machines) 프로세서 중 하나 또는 그 이상을 포함하거나, 해당 용어로 정의될 수 있다. 또한, 프로세서(140)는 프로세싱 알고리즘이 내장된 SoC(System on Chip), LSI(large scale integration)로 구현될 수도 있고, FPGA(Field Programmable gate array) 형태로 구현될 수도 있다. 또한, 프로세서(140)는 메모리(130)에 저장된 컴퓨터 실행가능 명령어(computer executable instructions)를 실행함으로써 다양한 기능을 수행할 수 있다.
전자 장치(100)는 제1 뎁스의 제1 메뉴 및 제1 메뉴에 종속된 제2 뎁스의 제2 메뉴를 포함하는 메뉴 선택 이력을 메모리(130)에 저장할 수 있다.
전자 장치(100)조작 인터페이스(120)를 통해 적어도 하나의 메뉴를 선택하는 사용자 입력이 수신되면, 사용자 입력에 기초하여 가이드 정보의 제공이 필요한지 여부를 식별하고, 가이드 정보의 제공이 필요한 것으로 식별되면, 선택된 적어도 하나의 메뉴에 대한 정보, 전자 장치(100)의 현재 컨텍스트(context) 정보 및 메모리(130)에 저장된 메뉴 선택 이력에 기초하여 추천 메뉴를 포함하는 가이드 정보를 표시하도록 디스플레이(110)를 제어하는 프로세서(140)를 포함할 수 있다.
여기서, 프로세서(140)는 조작 인터페이스(120)를 통해 사용자 입력을 수신할 수 있다. 구체적으로, 사용자 입력은 적어도 하나의 메뉴를 선택하는 사용자 입력일 수 있다. 여기서, 메뉴를 선택하는 동작은 메뉴를 활성화시키는 동작, 메뉴를 상위 메뉴 또는 하위 메뉴로 이동시키는 동작 중 적어도 하나를 포함할 수 있다. 예를 들어, 프로세서(140)는 도 14의 A 카테고리를 선택하고 #01을 선택하는 사용자 입력을 수신할 수 있다.
여기서, 메뉴는 다양한 뎁스로 구성될 수 있다. 메뉴는 제1 뎁스의 제1 메뉴 및 제2 뎁스의 제2 메뉴로 구성될 수 있다. 여기서, 제1 메뉴는 제2 메뉴의 상위 메뉴일 수 있다. 또한, 제2 메뉴는 제1 메뉴의 하위 메뉴일 수 있다. 제1 메뉴를 선택하는 경우, 프로세서(140)는 디스플레이(110)에 제1 메뉴에 종속된 제2 메뉴를 표시할 수 있다. 메뉴의 구조와 관련된 설명은 도 13에서 기재한다.
여기서, 프로세서(140)는 조작 인터페이스(120)를 통해 획득한 사용자 입력에 기초하여 가이드 정보의 제공이 필요한지 여부를 식별할 수 있다. 가이드 정보의 제공이 필요한지 여부는 기 설정된 이벤트가 식별되는지 여부에 기초하여 결정될 수 있다. 구체적으로, 사용자 입력에 기초하여 기 설정된 이벤트가 식별되면, 프로세서(140)는 가이드 정보의 제공이 필요하다고 식별할 수 있다.
여기서, 기 설정된 이벤트는 특정 뎁스의 메뉴가 선택된 후 임계 시간 동안 메뉴를 선택하는 추가 사용자 입력이 수신되지 않는 이벤트, 사용자 입력에 따라 메뉴가 변경되는 속도가 임계 속도 이상인 이벤트 또는 특정 뎁스의 메뉴가 선택된 후 메뉴 선택이 취소되는 사용자 입력이 수신되는 이벤트 중 적어도 하나를 포함할 수 있다.
특정 뎁스의 메뉴가 선택된 후 임계 시간 동안 메뉴를 선택하는 추가 사용자 입력이 수신되지 않는 이벤트는 사용자의 선택이 감지되지 않는 이벤트를 의미할 수 있다. 사용자가 특정 메뉴를 선택하지 않고 멈추는 상황에서, 추가 사용자 입력이 수신되지 않을 수 있다. 따라서, 임계 시간 동안 추가 사용자 입력이 수신되지 않는 이벤트가 식별되면, 프로세서(140)는 가이드 정보의 제공이 필요하다고 식별할 수 있다.
사용자 입력에 따라 메뉴가 변경되는 속도가 임계 속도 이상인 이벤트는 디스플레이(110)에 표시되는 메뉴가 빠르게 변경되는 이벤트를 의미할 수 있다.
일 실시 예에 따라, 변경되는 메뉴는 상이한 뎁스일 수 있다. 프로세서(140)는 조작 인터페이스(120)를 통해 상이한 뎁스를 갖는 복수의 메뉴를 변경하는(또는 이동시키는) 사용자 입력을 수신할 수 있다. 그리고, 프로세서(140)는 복수의 메뉴가 변경되는(또는 이동되는) 속도를 획득할 수 있다. 그리고, 획득된 속도가 임계 속도 이상이면, 프로세서(140)는 가이드 정보의 제공이 필요하다고 식별할 수 있다.
다른 실시 예에 따라, 변경되는 메뉴는 동일한 뎁스일 수 있다. 프로세서(140)는 조작 인터페이스(120)를 통해 동일한 뎁스를 갖는 복수의 메뉴를 이동시키는 사용자 입력을 수신할 수 있다. 그리고, 프로세서(140)는 복수의 메뉴가 변경되는(또는 이동되는) 속도를 획득할 수 있다. 그리고, 획득된 속도가 임계 속도 이상이면, 프로세서(140)는 가이드 정보의 제공이 필요하다고 식별할 수 있다.
특정 뎁스의 메뉴가 선택된 후 메뉴 선택이 취소되는 사용자 입력이 수신되는 이벤트는 사용자가 자신의 선택을 되돌리는 이벤트를 의미할 수 있다. 메뉴 선택을 취소하는 사용자 입력이 수신되면, 프로세서(140)는 가이드 정보의 제공이 필요하다고 식별할 수 있다.
기 설정된 이벤트가 식별되면, 프로세서(140)는 컨텍스트 정보를 획득할 수 있다. 여기서, 컨텍스트 정보는 전자 장치(100)에서 획득되는 다양한 정보를 의미할 수 있다. 여기서, 컨텍스트 정보는 센서부(150)를 통해 획득되는 센싱 데이터, 카메라(160)를 통해 획득되는 이미지 데이터 또는 현재 전자 장치(100)의 상태 정보를 포함할 수 있다. 여기서, 전자 장치(100)의 상태 정보는 전자 장치(100)가 어떤 기능을 수행하고 있는지 여부를 나타내는 정보일 수 있다.
컨텍스트 정보가 획득되면, 프로세서(140)는 사용자 입력, 컨텍스트 정보 및 메모리(130)에 저장된 메뉴 선택 이력에 기초하여 추천 메뉴를 식별할 수 있다. 그리고, 프로세서(140)는 식별된 추천 메뉴를 포함하는 가이드 정보를 생성할 수 있다. 여기서, 가이드 정보는 가이드 이미지 데이터 또는 가이드 오디오 데이터 중 적어도 하나를 포함할 수 있다. 그리고, 프로세서(140)는 추천 메뉴를 포함하는 가이드 정보를 사용자에게 제공할 수 있다. 여기서, 사용자에게 제공하는 동작은 가이드 이미지 데이터를 디스플레이(110)를 통해 표시하거나 가이드 오디오 데이터를 스피커(170)를 통해 출력하는 동작 중 적어도 하나를 포함할 수 있다.
한편, 프로세서(140)는 특정 뎁스의 메뉴가 선택된 후 임계 시간 동안 메뉴를 선택하는 추가 사용자 입력이 수신되지 않는 이벤트, 사용자 입력에 따라 메뉴가 변경되는 속도가 임계 속도 이상인 이벤트 또는 특정 뎁스의 메뉴가 선택된 후 메뉴 선택이 취소되는 사용자 입력이 수신되는 이벤트 중 적어도 하나의 이벤트가 식별되면, 가이드 정보의 제공이 필요한 것으로 식별할 수 있다.
여기서, 특정 뎁스의 메뉴가 선택된 후 임계 시간 동안 메뉴를 선택하는 추가 사용자 입력이 수신되지 않는 이벤트와 관련된 설명은 도 6에서 기재한다.
여기서, 사용자 입력에 따라 메뉴가 변경되는 속도가 임계 속도 이상인 이벤트는 도 7 내지 도9에서 기재한다.
여기서, 특정 뎁스의 메뉴가 선택된 후 메뉴 선택이 취소되는 사용자 입력이 수신되는 이벤트는 도 10에서 기재한다.
한편, 전자 장치(100)의 현재 컨텍스트 정보는 전자 장치(100) 내부의 온도 정보, 조리 대상의 온도 정보, 특정 기능의 실행 여부에 대한 정보, 전자 장치(100) 내부의 이미지 정보 및 일시 정보 중 적어도 하나를 포함할 수 있다.
여기서, 전자 장치(100) 내부의 온도 정보는 조리실의 온도 정보를 의미할 수 있다. 여기서, 조리 대상의 온도 정보는 조리물의 온도 정보를 의미할 수 있다. 여기서, 특정 기능의 실행 여부에 대한 정보는 전자 장치(100)에서 특정 기능이 현재 실행되고 있는 상태(on 상태)인지 실행되고 있지 않은 상태(off 상태)인지를 나타내는 정보를 의미할 수 있다. 여기서, 전자 장치(100) 내부의 이미지 정보는 조리실을 촬상한 이미지를 의미할 수 있다. 여기서, 일시 정보는 시간 정보 또는 날짜 정보 중 적어도 하나를 포함할 수 있다.
컨텍스트 정보 중 온도와 관련된 정보는 센서부(150)를 통해 획득될 수 있다. 여기서, 센서부(150)를 통해 컨텍스트 정보를 획득하는 동작은 도 11의 실시 예(1110)에서 기재한다.
컨텍스트 정보 중 이미지와 관련된 정보는 카메라(160)를 통해 획득될 수 있다. 여기서, 카메라(160)를 통해 컨텍스트 정보를 획득하는 동작은 도 11의 실시 예(1120)에서 기재한다.
한편, 프로세서(140)는 후보 메뉴를 결정하고, 결정된 후보 메뉴에서 추천 메뉴를 결정할 수 있다.
구체적으로, 프로세서(140)는 메뉴 선택 이력에 포함된 정보 중 선택된 적어도 하나의 메뉴와 관련된 후보 메뉴를 식별하고, 후보 메뉴 및 전자 장치(100)의 현재 컨텍스트 정보에 기초하여 추천 메뉴를 식별할 수 있다.
여기서, 메뉴 선택 이력에 포함된 정보는 기 설정된 기간 동안 사용자가 선택한 메뉴에 대한 정보가 포함될 수 있다. 여기서, 선택된 적어도 하나의 메뉴는 현재 사용자가 선택한 메뉴를 의미할 수 있다. 여기서, 후보 메뉴는 현재 사용자가 선택한 메뉴에 종속되는 메뉴를 의미할 수 있다. 그리고, 프로세서(140)는 후보 메뉴 중 획득된 컨텍스트 정보에 기초하여 추천 메뉴를 식별할 수 있다.
예를 들어, 사용자가 도 13의 A 메뉴를 선택하였다고 가정한다. 또한, 메뉴 선택 이력에 A 메뉴에서 #01, #03, #05가 선택되고, B 메뉴에서 #11, #13, #15가 선택되고, C 메뉴에서 #21, #01, #11이 선택되었다고 가정한다. 여기서, 메뉴 선택 이력에 포함된 정보는 #01, #03, #05, #11, #13, #15, #21일 수 있다. 여기서, 선택된 적어도 하나의 메뉴는 A 메뉴일 수 있다. 여기서, 후보 메뉴는 A 메뉴의 종속되는 메뉴인 #01, #03, #05일 수 있다. 여기서, 프로세서(140)는 컨텍스트 정보에 기초하여 #01, #03, #05 중 적어도 하나의 메뉴를 추천 메뉴로 식별할 수 있다.
한편, 프로세서(140)는 복수의 메뉴 각각에 대응되는 가중치에 기초하여 추천 메뉴를 식별할 수 있다.
한편, 전자 장치(100)는 복수의 메뉴를 메모리(130)에 저장할 수 있다. 또한, 프로세서(140)는 적어도 하나의 메뉴에 대한 정보, 컨텍스트 정보 및 메뉴 선택 이력에 기초하여 메모리(130)에 저장된 복수의 메뉴 각각에 대응되는 가중치를 획득하고, 복수의 메뉴 각각에 대응되는 가중치에 기초하여 추천 메뉴를 식별할 수 있다.
여기서, 복수의 메뉴는 추천 메뉴로 제공될 수 있는 적어도 하나의 메뉴를 의미할 수 있다. 기 설정된 이벤트가 식별되면, 프로세서(140)는 메모리(130)에 저장된 복수의 메뉴를 획득하고, 복수의 메뉴 각각에 대응되는 가중치를 획득할 수 있다. 그리고, 프로세서(140)는 가중치에 기초하여 복수의 메뉴 중 추천 메뉴를 식별할 수 있다. 여기서, 프로세서(140)는 사용자 입력(적어도 하나의 메뉴에 대한 정보), 컨텍스트 정보 및 메뉴 선택 이력에 기초하여 메뉴에 대한 가중치를 획득할 수 있다.
구체적으로, 프로세서(140)는 사용자 입력에 기초하여 특정 메뉴에 대하여 제1 서브 가중치를 획득하고, 컨텍스트 정보에 기초하여 특정 메뉴에 대한 제2 서브 가중치를 획득하고, 메뉴 선택 이력에 기초하여 특정 메뉴에 대한 제3 서브 가중치를 획득할 수 있다. 그리고, 프로세서(140)는 제1 서브 가중치, 제2 서브 가중치 및 제3 서브 가중치를 합산하여 특정 메뉴에 대한 가중치(또는 합산 가중치)를 획득할 수 있다. 그리고, 프로세서(140)는 복수의 메뉴 각각에 대한 가중치에 기초하여 추천 메뉴를 식별할 수 있다. 예를 들어, 복수의 메뉴 각각에 대한 가중치 중 가장 높은 가중치를 갖는 메뉴를 추천 메뉴로 식별할 수 있다.
한편, 프로세서(140)는 적어도 하나의 메뉴에 대한 정보에 기초하여 선택된 메뉴를 식별하고, 복수의 메뉴 중 선택된 메뉴와 동일한 메뉴에 제1 서브 가중치를 할당하고, 복수의 메뉴 중 선택된 메뉴와 유사한 메뉴에 제2 서브 가중치를 할당하고, 제1 서브 가중치 및 제2 서브 가중치를 합산하여 복수의 메뉴 각각에 대응되는 가중치를 획득할 수 있다.
여기서, 프로세서(140)는 사용자 입력(적어도 하나의 메뉴에 대한 정보)에 기초하여 사용자에 의해 현재 선택된 메뉴를 식별할 수 있다. 여기서, 프로세서(140)는 선택된 메뉴에 기초하여 복수의 메뉴 각각에 대하여 서브 가중치를 할당할 수 있다. 구체적으로, 프로세서(140)는 선택된 메뉴와 동일한 메뉴에 제1 서브 가중치를 할당할 수 있다. 또한, 프로세서(140)는 선택된 메뉴와 유사한 메뉴에 제2 서브 가중치를 할당할 수 있다. 또한, 프로세서(140)는 선택된 메뉴와 동일 및 유사하지 않은 메뉴에 서브 가중치를 할당하지 않을 수 있다. 여기서, 동일한 메뉴는 도 26의 표(2610)에서 카테고리에 해당하는 메뉴를 의미할 수 있다. 여기서, 유사한 메뉴는 도 26의 표(2610)에서 연관 카테고리에 해당하는 메뉴를 의미할 수 있다. 여기서, 특정 메뉴와 유사한 메뉴는 메모리(130)에 저장될 수 있다.
그리고, 프로세서(140)는 제1 서브 가중치 및 제2 서브 가중치를 합산하여 복수의 메뉴 각각에 대응되는 가중치를 획득할 수 있다.
예를 들어, 도 27의 표(2710)를 참조하면, 사용자가 A 메뉴를 선택한 후 기 설정된 이벤트가 식별되었다고 가정한다. 여기서, 선택된 메뉴는 A 메뉴일 수 있다. 프로세서(140)는 복수의 메뉴(#01, #02, #03, … , #11, #12, #13, … , #21, #22, #23) 중에서 선택된 A 메뉴와 동일한 메뉴에 해당하는 #01, #02, #03 등에 제1 서브 가중치(60)를 할당할 수 있다. 또한, 프로세서(140)는 복수의 메뉴 중에서 선택된 A 메뉴와 유사한 메뉴(연관 카테고리)에 해당하는 #11, #21 등에 제2 서브 가중치(30)를 할당할 수 있다. 그리고, 프로세서(140)는 선택된 A 메뉴와 동일 및 유사하지 않은 메뉴에 대하여 서브 가중치를 할당하지 않을 수 있다.
한편, 프로세서(140)는 복수의 메뉴 중 컨텍스트 정보에 대응되는 메뉴에 제3 서브 가중치를 할당하고, 복수의 메뉴 중 메뉴 선택 이력에 대응되는 메뉴에 제4 서브 가중치를 할당하고, 제1 서브 가중치, 제2 서브 가중치, 제3 서브 가중치 및 제4 서브 가중치를 합산하여 복수의 메뉴 각각에 대응되는 가중치를 획득할 수 있다.
여기서, 프로세서(140)는 컨텍스트 정보에 기초하여 복수의 메뉴 각각에 대하여 제3 서브 가중치를 할당할 수 있다. 여기서, 프로세서(140)는 컨텍스트 정보를 획득할 수 있으며, 획득된 컨텍스트 정보에 대응되는 메뉴에 제3 서브 가중치를 할당할 수 있다.
예를 들어, 도 27의 표(2710)를 참조하면, 기 설정된 이벤트가 식별되고, 컨텍스트 정보가 저녁을 포함한다고 가정한다. 프로세서(140)는 복수의 메뉴 중에서 저녁에 대응되는 메뉴인 #03, #13, #23 등에 제3 서브 가중치를 할당할 수 있다.
여기서, 프로세서(140)는 메뉴 선택 이력에 기초하여 복수의 메뉴 각각에 대하여 제4 서브 가중치를 할당 할 수 있다. 여기서, 프로세서(140)는 메뉴 선택 이력을 획득할 수 있으며, 메뉴 선택 이력에 포함된 메뉴에 제4 서브 가중치를 할당할 수 있다.
예를 들어, 예를 들어, 도 27의 표(2710)를 참조하면, 기 설정된 이벤트가 식별되고, 메뉴 선택 이력에 #03, #11, #12, #13이 포함된다고 가정한다. 프로세서(140)는 복수의 메뉴 중 메뉴 선택 이력에 포함된 메뉴인 #03, #11, #12, #13에 제4 서브 가중치(40)를 할당할 수 있다.
가중치와 관련된 구체적인 동작은 도 26 및 도 27에서 기재한다.
한편, 프로세서(140)는 가이드 정보의 제공이 필요한 것으로 식별되면, 선택된 적어도 하나의 메뉴에 대한 정보, 전자 장치(100)의 현재 컨텍스트 정보, 및 메모리(130)에 저장된 메뉴 선택 이력에 기초하여 추천 메뉴를 식별하고, 추천 메뉴가 표시되는 위치에 기초하여 추천 메뉴를 식별하기 위한 아이콘을 표시하도록 디스플레이(110)를 제어할 수 있다.
한편, 아이콘을 표시하는 동작은 도 17에서 기재한다.
한편, 프로세서(140)는 가이드 정보의 제공이 필요한 것으로 식별되면, 학습된 신경망 모델에 전자 장치(100)의 선택된 적어도 하나의 메뉴에 대한 정보 및 현재 컨텍스트 정보를 입력하여 추천 메뉴를 획득할 수 있고, 신경망 모델은 전자 장치(100)의 현재 컨텍스트 정보 및 메뉴 선택 이력에 기초하여 학습될 수 있다.
한편, 신경망 모델은 인공 지능 모델로 기재될 수 있다. 이와 관련된 구체적인 동작은 도12에서 기재한다.
한편, 전자 장치(100)는 조리물을 가열하는 히터를 포함하는 조리 장치이고, 프로세서(140)는 가이드 정보에 포함된 메뉴를 선택하는 사용자 입력이 수신되면, 선택된 메뉴에 대응되는 기능을 수행하고, 선택된 메뉴에 대응되는 기능은 선택된 메뉴의 조리 과정을 포함하는 텍스트를 표시하는 기능, 선택된 메뉴의 조리 과정을 포함하는 이미지를 표시하는 기능, 선택된 메뉴의 조리 과정을 수행하기 위해 히터의 스케쥴을 설정하는 기능 중 적어도 하나를 포함할 수 있다.
여기서, 전자 장치(100)는 조리 장치로 구현될 수 있다. 여기서, 조리 장치는 조리물을 조리하는 장치를 의미할 수 있으며, 조리물을 가열하는 히터를 포함할 수 있다. 여기서, 프로세서(140)는 추천 메뉴를 포함하는 가이드 정보를 제공할 수 있으며, 추천 메뉴는 조리물과 관련된 메뉴일 수 있다. 사용자가 추천 메뉴 중 하나의 메뉴를 선택하였다고 가정한다. 여기서, 프로세서(140)는 사용자에 의해 선택된 메뉴(이하 선택된 메뉴)에 대응되는 기능을 수행할 수 있다. 예를 들어, 사용자에 의해 피자 메뉴가 선택되면, 피자 메뉴에 대응되는 기능을 수행할 수 있다. 구체적으로, 프로세서(140)는 피자 조리 과정과 관련된 텍스트를 표시하는 기능을 수행하거나, 피자 메뉴의 조리 과정과 관련된 이미지를 표시하는 기능을 수행하거나, 피자 메뉴의 조리 과정을 수행하기 위한 히터의 스케쥴을 설정하는 기능 중 적어도 하나를 수행할 수 있다. 여기서, 히터의 스케쥴은 어느 시간 동안 어느 정도의 세기로 히터가 열 에너지를 공급하는지를 나타내는 작업 스케쥴을 의미할 수 있다.
한편, 전자 장치(100)는 조리물의 온도를 센싱하기 위한 접촉식 온도 센서(152)를 포함하고, 프로세서(140)는 가이드 정보의 제공이 필요한 것으로 식별되면, 접촉식 온도 센서(152)를 통해 조리물의 온도를 전자 장치(100)의 현재 컨텍스트 정보로서 획득하고, 선택된 적어도 하나의 메뉴에 대한 정보, 조리물의 온도를 포함하는 전자 장치(100)의 현재 컨텍스트 정보 및 메모리(130)에 저장된 메뉴 선택 이력에 기초하여 추천 메뉴를 식별할 수 있다.
접촉식 온도 센서를 이용하여 컨텍스트 정보를 획득하는 동작은 도 11의 실시 예(1110) 및 도 23에서 구체적으로 기재한다.
전자 장치(100)는 메뉴를 선택하는 사용자 입력을 분석하여 현재 사용자에게 추천 메뉴를 제공해야 하는 것인지 여부를 결정할 수 있다. 사용자가 자신이 원하는 메뉴를 찾지 못하는 경우 전자 장치(100)가 자동으로 추천 메뉴를 제공하는 경우, 편의성이 높아질 수 있다. 전자 장치(100)는 사용자에게 추천 메뉴를 제공해야 하는 것인지 여부를 기 설정된 이벤트로 판단할 수 있다. 여기서, 기 설정된 이벤트는 사용자의 설정에 따라 변경될 수 있다. 기 설정된 이벤트에 기초하여 추천 메뉴가 제공되는 경우 추천 메뉴를 결정하는 동작이 중요할 수 있다. 사용자에게 적합한 메뉴가 추천되어야 사용자의 만족감이 높기 때문이다. 전자 장치(100)는 사용자 입력(사용자가 현재 선택한 메뉴), 컨텍스트 정보 및 메뉴 선택 이력을 고려하여 추천 메뉴를 식별할 수 있다. 전자 장치(100)는 현재 선택된 메뉴 이외에도 컨텍스트 정보 및 메뉴 선택 이력을 추가로 고려하므로 추천 메뉴를 결정하는 정확도가 높아질 수 있다. 또한, 추천 메뉴를 제공하는 다양한 방식에 따라, 사용자는 기존의 메뉴 선택을 방해 받지 않을 수 있다.
한편, 이상에서는 전자 장치(100)를 구성하는 간단한 구성에 대해서만 도시하고 설명하였지만, 구현 시에는 다양한 구성이 추가로 구비될 수 있다. 이에 대해서는 도 4를 참조하여 이하에서 설명한다.
도 4는 도 3의 전자 장치(100)의 구체적인 구성을 설명하기 위한 블록도이다.
도 4를 참조하면, 전자 장치(100)는 디스플레이(110), 조작 인터페이스(120), 메모리(130), 프로세서(140), 센서부(150), 카메라(160) 또는 스피커(170) 중 적어도 하나를 포함할 수 있다.
한편, 디스플레이(110), 조작 인터페이스(120), 메모리(130) 및 프로세서(140)의 동작 중에서 앞서 설명한 것과 동일한 동작에 대해서는 중복 설명은 생략한다.
센서부(150)는 적어도 하나의 센서를 통해 다양한 정보를 센싱할 수 있다. 여기서, 센서부(150)는 비접촉식 온도 센서(151) 또는 접촉식 온도 센서(152) 중 적어도 하나를 포함할 수 있다. 비접촉식 온도 센서(151)는 조리실 내부의 온도를 센싱할 수 있다. 또한, 접촉식 온도 센서(152)는 조리물의 표면 온도 또는 조리물 안의 온도를 센싱할 수 있다. 여기서, 접촉식 온도 센서(152)는 온도 프로브로 구현될 수 있다. 또한, 센서부(150)는 습도 센서를 포함할 수 있다.
카메라(160)는 피사체를 촬상하여 촬상 영상을 생성하기 위한 구성이며, 여기서 촬상 영상은 동영상과 정지 영상 모두를 포함하는 개념이다. 카메라(160)는 적어도 하나의 외부 기기에 대한 이미지를 획득할 수 있으며, 카메라, 렌즈, 적외선 센서 등으로 구현될 수 있다.
카메라(160)는 렌즈와 이미지 센서를 포함할 수 있다. 렌즈의 종류에는 일반적인 범용 렌즈, 광각 렌즈, 줌 렌즈 등이 있으며, 전자 장치(100)의 종류, 특성, 사용 환경 등에 따라 결정될 수 있다. 이미지 센서로는 상보성 금속 산화물 반도체(Complementary Metal Oxide Semiconductor: CMOS)와 전하결합소자(Charge Coupled Device: CCD) 등이 사용될 수 있다.
스피커(170)는 각종 오디오 데이터뿐만 아니라 각종 알림 음이나 음성 메시지 등을 출력하는 구성요소일 수 있다.
도 5는 사용자 입력에 기초하여 가이드 정보를 제공하는 동작을 설명하기 위한 흐름도이다.
도 5를 참조하면, 전자 장치(100)는 메뉴를 선택하는 사용자 입력을 수신할 수 있다 (S505). 그리고, 전자 장치(100)는 사용자 입력에 기초하여 기 설정된 이벤트를 식별할 수 있다 (S510). 구체적으로, 전자 장치(100)는 사용자 입력에 기초하여 기 설정된 이벤트가 발생하였는지 여부를 식별할 수 있다. 여기서, 사용자 입력은 사용자가 선택한 메뉴의 순서를 의미할 수 있다. 여기서, 기 설정된 이벤트는 가이드 정보의 제공이 필요하다고 판단되는 이벤트를 의미할 수 있다. 기 설정된 이벤트와 관련된 설명은 도 6 내지 도 9에서 기재한다.
기 설정된 이벤트가 식별되지 않으면 (S510-N), 전자 장치(100)는 반복하여 사용자 입력을 수신하고 기 설정된 이벤트의 발생 여부를 식별할 수 있다.
기 설정된 이벤트가 식별되면 (S510-Y), 전자 장치(100)는 추천 메뉴를 포함하는 가이드 정보를 제공할 수 있다 (S515). 구체적으로, 전자 장치(100)는 사용자 입력에 대응되는 추천 메뉴를 식별할 수 있고, 식별된 추천 메뉴를 포함하는 가이드 정보를 생성할 수 있다. 그리고, 전자 장치(100)는 추천 메뉴를 포함하는 가이드 정보를 제공할 수 있다. 여기서, 가이드 정보를 제공하는 동작은 전자 장치(100)의 디스플레이(110)를 통해 가이드 이미지가 표시되거나 전자 장치(100)의 스피커(170)를 통해 가이드 오디오가 출력되는 동작을 포함할 수 있다.
도 6은 일 실시 예의 기 설정된 이벤트를 설명하기 위한 흐름도이다.
도 6을 참조하면, 기 설정된 이벤트는 임계 시간 동안 추가 사용자 입력이 수신되지 않는 이벤트를 의미할 수 있다.
여기서, 전자 장치(100)는 제1 메뉴를 선택하는 사용자 입력을 수신할 수 있다 (S605). 그리고, 전자 장치(100)는 사용자가 제1 메뉴를 선택하는 시간을 획득할 수 있다 (S610). 그리고, 전자 장치(100)는 사용자가 제1 메뉴를 선택한 시간부터 임계 시간 동안 추가 사용자 입력이 수신되었는지 여부를 식별할 수 있다 (S615).
사용자가 제1 메뉴를 선택한 시간부터 임계 시간 안에 추가 사용자 입력이 수신되면, 전자 장치(100)는 반복적으로, S605, S610 및 S615 단계를 수행할 수 있다.
사용자가 제1 메뉴를 선택한 시간부터 임계 시간 안에 추가 사용자 입력이 수신되지 않으면, 전자 장치(100)는 추천 메뉴를 포함하는 가이드 정보를 제공할 수 있다 (S620). 가이드 정보를 제공하는 동작은 도 5의 S515에 대응될 수 있으므로 중복 설명을 생략한다.
도 7은 다른 실시 예의 기 설정된 이벤트를 설명하기 위한 흐름도이다.
도 7을 참조하면, 기 설정된 이벤트는 메뉴의 변경 속도가 임계값 이상인 이벤트를 의미할 수 있다.
여기서, 전자 장치(100)는 복수의 메뉴를 선택하는 사용자 입력을 수신할 수 있다 (S705). 한편, 구현 예에 따라, 복수의 메뉴는 모두 동일한 뎁스를 갖는 메뉴일 수 있다. 그리고, 전자 장치(100)는 메뉴의 변경 속도를 획득할 수 있다 (S710). 구체적으로, 전자 장치(100)는 사용자에 의해 선택된 복수의 메뉴가 변경되는 속도를 획득할 수 있다. 여기서, 메뉴의 변경 속도는 사용자가 제1 메뉴를 선택한 시간과 사용자가 제2 메뉴를 선택한 시간의 차이에 기초하여 산출될 수 있다. 여기서, 변경 속도는 사용자가 제1 메뉴를 선택한 시간과 사용자가 제2 메뉴를 선택한 시간의 차이의 역수를 의미할 수 있다.
변경 속도가 크다는 것은 사용자가 제1 메뉴를 선택한 시간과 사용자가 제2 메뉴를 선택한 시간의 차이가 작다는 것을 의미할 수 있다. 사용자가 복수의 메뉴를 빠르게 선택하는 경우, 메뉴의 변경 속도가 클 수 있다.
변경 속도가 작다는 것은 사용자가 제1 메뉴를 선택한 시간과 사용자가 제2 메뉴를 선택한 시간의 차이가 크다는 것을 의미할 수 있다. 사용자가 복수의 메뉴를 천천히 선택하는 경우, 메뉴의 변경 속도가 작을 수 있다. 변경 속도와 관련된 구체적인 계산 과정은 도 8에서 기재한다.
한편, 메뉴의 변경 속도가 임계값 미만이면 (S715-N), 전자 장치(100)는 S705, S710 및 S715 단계를 반복할 수 있다.
한편, 메뉴의 변경 속도가 임계값 이상이면 (S715-Y), 전자 장치(100)는 추천 메뉴를 포함하는 가이드 정보를 제공할 수 있다 (S720). 가이드 정보를 제공하는 동작은 도 5의 S515에 대응될 수 있으므로 중복 설명을 생략한다.
한편, 도 7에서 메뉴의 변경 속도는 사용자 입력의 시간 차이, 사용자 입력의 평균 시간 차이, 메뉴의 변경 속도 또는 메뉴의 평균 변경 속도 등으로 대체되어 기재될 수 있다. 또한, 메뉴의 변경 속도는 사용자 입력의 수신 속도 등으로 대체되어 기재될 수 있다.
도 8은 메뉴의 변경 속도를 계산하는 과정을 설명하기 위한 표이다.
도 8의 표(810)를 참조하면, 메뉴의 변경 속도가 사용자 입력이 수신된 시간에 기초하여 산출될 수 있다. 제1 사용자 입력 내지 제5 사용자 입력은 메뉴를 선택하는 사용자의 입력을 의미할 수 있다. 여기서, 제1 사용자 입력이 14:00:01(시간:분:초)에 수신되고, 제2 사용자 입력이 14:00:05에 수신되고, 제3 사용자 입력이 14:00:15에 수신되고, 제4 사용자 입력이 14:00:16에 수신되고, 제5 사용자 입력이 14:00:17에 수신되었다고 가정한다.
여기서, 전자 장치(100)는 제2 사용자 입력이 입력된 시간에서 제1 사용자 입력과 제2 사용자 입력의 수신 시간의 차이(4초)를 산출할 수 있다. 또한, 전자 장치(100)는 평균 시간 차이(4초)를 산출할 수 있다. 또한, 전자 장치(100)는 제1 사용자 입력에 의하여 선택된 제1 메뉴와 제2 사용자 입력에 의하여 선택된 제2 메뉴의 변경 속도(0.25)를 산출할 수 있다. 여기서, 변경 속도(0.25)는 시간 차이(4초)의 역수일 수 있다. 또한, 전자 장치(100)는 평균 변경 속도(0.25)를 산출할 수 있다.
여기서, 전자 장치(100)는 제3 사용자 입력이 입력된 시간에서 제2 사용자 입력과 제3 사용자 입력의 수신 시간의 차이(10초)를 산출할 수 있다. 또한, 전자 장치(100)는 평균 시간 차이(7초)를 산출할 수 있다. 또한, 전자 장치(100)는 제2 사용자 입력에 의하여 선택된 제2 메뉴와 제3 사용자 입력에 의하여 선택된 제3 메뉴의 변경 속도(0.1)를 산출할 수 있다. 여기서, 변경 속도(0.1)는 시간 차이(10초)의 역수일 수 있다. 또한, 전자 장치(100)는 평균 변경 속도(0.18)를 산출할 수 있다.
여기서, 전자 장치(100)는 제4 사용자 입력이 입력된 시간에서 제3 사용자 입력과 제4 사용자 입력의 수신 시간의 차이(1초)를 산출할 수 있다. 또한, 전자 장치(100)는 평균 시간 차이(5초)를 산출할 수 있다. 또한, 전자 장치(100)는 제3 사용자 입력에 의하여 선택된 제3 메뉴와 제4 사용자 입력에 의하여 선택된 제4 메뉴의 변경 속도(1)를 산출할 수 있다. 여기서, 변경 속도(1)는 시간 차이(1초)의 역수일 수 있다. 또한, 전자 장치(100)는 평균 변경 속도(0.45)를 산출할 수 있다.
여기서, 전자 장치(100)는 제5 사용자 입력이 입력된 시간에서 제4 사용자 입력과 제5 사용자 입력의 수신 시간의 차이(1초)를 산출할 수 있다. 또한, 전자 장치(100)는 평균 시간 차이(4초)를 산출할 수 있다. 또한, 전자 장치(100)는 제4 사용자 입력에 의하여 선택된 제4 메뉴와 제5 사용자 입력에 의하여 선택된 제5 메뉴의 변경 속도(1)를 산출할 수 있다. 여기서, 변경 속도(1)는 시간 차이(1초)의 역수일 수 있다. 또한, 전자 장치(100)는 평균 변경 속도(0.59)를 산출할 수 있다.
전자 장치(100)는 시간 차이, 평균 시간 차이, 변경 속도 또는 평균 변경 속도 중 적어도 하나에 기초하여 기 설정된 이벤트의 발생을 식별할 수 있다. 바로 직전의 사용자 입력에 기초하여 기 설정된 이벤트를 판단하는 경우, 전자 장치(100)는 시간 차이 또는 변경 속도 중 적어도 하나에 기초하여 기 설정된 이벤트의 발생을 식별할 수 있다. 다른 구현 예에 따라, 임계 시간 동안 입력된 평균적인 사용자 입력을 모두 고려하여 기 설정된 이벤트를 판단하는 경우, 전자 장치(100)는 평균 시간 차이 또는 평균 변경 속도 중 적어도 하나에 기초하여 기 설정된 이벤트의 발생을 식별할 수 있다.
도 9는 다양한 실시 예에 따른 메뉴의 변경 속도를 설명하기 위한 도면이다.
도 9를 참조하면, 전자 장치(100)는 다양한 실시 예에 따라 메뉴를 선택할 수 있다.
실시 예(910)를 참조하면, 전자 장치(100)의 조작 인터페이스(120)는 다이얼(911)을 포함할 수 있다. 여기서, 다이얼(911)은 회전형 조작 인터페이스일 수 있다. 전자 장치(100)는 다이얼(911)을 회전시키는 사용자 입력에 따라 메뉴를 선택할 수 있다. 예를 들어, 다이얼(911)을 회전시키는 사용자 입력이 수신되면, 전자 장치(100)는 현재 선택 가능한 메뉴를 변경할 수 있다. 여기서, 전자 장치(100)는 다이얼(911)이 회전되는 속도를 획득할 수 있다. 그리고, 전자 장치(100)는 다이얼(911)의 회전 속도에 기초하여 메뉴의 변경 속도를 식별할 수 있다. 여기서, 다이얼(911)은 손잡이()로 기재될 수 있다.
실시 예(920)를 참조하면, 전자 장치(100)는 스크롤 UI(921)를 디스플레이(110)에 표시할 수 있다. 여기서, 스크롤 UI(921)는 표시되는 메뉴를 변경하는데 이용되는 UI일 수 있다. 전자 장치(100)는 스크롤 UI(921)를 통해 수신되는 사용자 입력에 기초하여 선택 가능한 메뉴를 변경할 수 있다. 예를 들어, 사용자가 스크롤 UI(921)를 아래로 드래그하거나, 스크롤 UI(921)의 아래 부분을 터치하는 경우, 전자 장치(100)는 #01, #02, #03을 포함하는 화면이 아닌 #04, #05, #06을 포함하는 화면을 표시할 수 있다. 여기서, 전자 장치(100)는 스크롤 UI(921)를 통해 메뉴가 변경되는 속도를 식별할 수 있다.
실시 예(930)를 참조하면, 전자 장치(100)는 메뉴 이동 UI(931, 932)를 디스플레이(110)에 표시할 수 있다. 여기서, 메뉴 이동 UI(931)는 제1 방향(예를 들어, 상측 방향)으로 선택 가능한 메뉴를 변경하기 위한 UI일 수 있다. 여기서, 메뉴 이동 UI(932)는 제2 방향(예를 들어, 아래 방향)으로 선택 가능한 메뉴를 변경하기 위한 UI일 수 있다. 예를 들어, 메뉴 이동 UI(932)가 1회 터치하는 사용자 입력이 수신되면, 전자 장치(100)는 #01, #02, #03을 포함하는 화면이 아닌 #02, #03, #04를 포함하는 화면을 표시할 수 있다. 여기서, 전자 장치(100)는 메뉴 이동 UI(931, 932)를 통해 메뉴가 변경되는 속도를 식별할 수 있다.
실시 예(940)를 참조하면, 전자 장치(100)는 스와이프(swipe) 입력(941)에 기초하여 상이한 메뉴를 디스플레이(110)에 표시할 수 있다. 스와이프 입력(941)은 상, 하, 좌, 우 방향으로 입력될 수 있다. 여기서, 상측 방향의 스와이프 입력이 수신되면, 전자 장치(100)는 상위 메뉴를 표시할 수 있다. 여기서, 하측 방향의 스와이프 입력이 수신되면, 전자 장치(100)는 하위 메뉴를 표시할 수 있다. 여기서, 우측 방향의 스와이프 입력이 수신되면, 전자 장치(100)는 현재 표시되는 메뉴의 다음 메뉴를 표시할 수 있다. 여기서, 좌측 방향의 스와이프 입력이 수신되면, 전자 장치(100)는 현재 표시되는 메뉴의 이전 메뉴를 표시할 수 있다. 여기서, 전자 장치(100)는 스와이프 입력(941)의 속도에 기초하여 메뉴가 변경되는 속도를 획득할 수 있다. 예를 들어, 스와이프 입력이 짧은 시간에 수신되면, 전자 장치(100)는 메뉴가 변경되는 속도가 빠르다고 판단할 수 있다. 반대로, 스와이프 입력이 긴 시간에 수신되면, 전자 장치(100)는 메뉴가 변경되는 속도가 느리다고 판단할 수 있다.
도 10은 또 다른 실시 예의 기 설정된 이벤트를 설명하기 위한 흐름도이다.
도 10을 참조하면, 기 설정된 이벤트는 선택된 메뉴를 취소하는 사용자 입력이 수신되는 이벤트를 의미할 수 있다.
전자 장치(100)는 제1 메뉴를 선택하는 사용자 입력을 수신할 수 있다 (S1005). 그리고, 전자 장치(100)는 제1 메뉴를 취소하는 사용자 입력의 수신 여부를 식별할 수 있다 (S1010). 한편, 구현 예에 따라, 전자 장치(100)는 제1 메뉴를 선택하는 사용자 입력이 수신된 이후 임계 시간 이내에 제1 메뉴를 취소하는 사용자 입력의 수신 여부를 식별할 수 있다.
여기서, 사용자가 선택한 제1 메뉴를 취소하는 사용자 입력이 수신되지 않으면 (S1010-N), 전자 장치(100)는 S1005 및 S1010 단계를 반복할 수 있다.
여기서, 사용자가 선택한 제1 메뉴를 취소하는 사용자 입력이 수신되면 (S1010-Y), 전자 장치(100)는 추천 메뉴를 포함하는 가이드 정보를 제공할 수 있다 (S1015). 가이드 정보를 제공하는 동작은 도 5의 S515에 대응될 수 있으므로 중복 설명을 생략한다.
도 11은 컨텍스트 정보를 획득하는 동작을 설명하기 위한 도면이다.
도 11을 참조하면, 전자 장치(100)는 다양한 실시 예에 따라 컨텍스트 정보를 획득할 수 있다. 도 11에서는 전자 장치(100)의 조리실안에 조리물이 존재하는 실시 예를 가정한다. 조리물은 용기 안에 있을 수 있으며, 용기는 받침대 위에 놓여질 수 있다.
실시 예(1110)를 참조하면, 전자 장치(100)는 센서부(150)를 통해 온도를 센싱할 수 있다. 여기서, 센서부(150)는 비접촉식 온도 센서(151) 또는 접촉식 온도 센서(152) 중 적어도 하나를 포함할 수 있다. 비접촉식 온도 센서(151)는 조리실 내부의 온도를 센싱할 수 있다. 또한, 접촉식 온도 센서(152)는 조리물의 표면 온도 또는 조리물 안의 온도를 센싱할 수 있다. 여기서, 접촉식 온도 센서(152)는 온도 프로브로 구현될 수 있다.
한편, 도 11의 비접촉식 온도 센서(151) 또는 접촉식 온도 센서(152)는 돌출된 형태로 기재되어 있지만, 실제 구현 시 센서를 보호하기 위하여 조리실의 벽면 또는 조리실의 상판 내부에 배치되는 형태로 구현될 수 있다.
실시 예(1120)를 참조하면, 전자 장치(100)의 카메라(160)는 받침대, 용기 또는 조리물 중 적어도 하나를 촬상할 수 있다.
카메라(160)의 종류에 따라 시야각이 상이할 수 있으나, 카메라(160)는 조리실 내부의 전체 영역을 모두 촬상할 수 있도록 배치될 수 있다.
일 실시 예에 따라, 도11에서 개시한 바와 같이 카메라(160)는 조리실의 벽면에 부착되고, 일정한 각도를 기준으로 하방으로 기울어진 상태로 배치될 수 있다. 예를 들어, 카메라(160)는 조리실의 벽면에 부착된 상태에서 하방 45도로 기울어진 상태로 배치될 수 있다.
다른 실시 예에 따라, 카메라(160)는 조리실의 상판(또는 천장)에 부착되고, 일정한 각도를 기준으로 하방을 향해 배치될 수 있다. 예를 들어, 카메라(160)는 조리실의 상판에 부착된 상태에서 하방을 향해 배치될 수 있다.
한편, 도 11의 카메라(160)는 돌출된 형태로 기재되어 있지만, 실제 구현 시 카메라 렌즈를 보호하기 위하여 조리실의 벽면 또는 조리실의 상판 내부에 배치되는 형태로 구현될 수 있다.
도 12는 추천 메뉴를 식별하는 인공 지능 모델을 획득하는 동작을 설명하기 위한 도면이다.
도 12를 참조하면, 전자 장치(100)는 추천 메뉴를 식별하는 인공 지능 모델(1210)을 생성할 수 있다. 구체적으로, 전자 장치(100)는 학습 데이터에 기초하여 인공 지능 모델(1200)을 학습할 수 있다. 여기서, 학습 데이터는 컨텍스트 정보, 메뉴 선택 이력 및 메뉴 선택 결과일 수 있다. 전자 장치(100)는 컨텍스트 정보 및 메뉴 선택 이력에 기초하여 메뉴 선택 결과가 도출될 수 있도록 인공 지능 모델(1200)을 학습할 수 있다.
예를 들어, 전자 장치(100)가 메뉴 선택 이력을 저장하고 있는 상태에서, 전자 장치(100)는 특정 컨텍스트 정보가 획득되는 상황에서 최종적으로 어떠한 메뉴가 선택되었는지 분석할 수 있다. 이러한 분석 결과에 기초하여, 전자 장치(100)는 사용자 입력, 컨텍스트 정보 및 메뉴 선택 이력을 입력 받아 추천 메뉴를 식별하는 인공 지능 모델(1210)을 생성할 수 있다.
여기서, 인공 지능 모델(1200)은 학습 수행 과정에서 이용되는 모델이고, 인공 지능 모델(1210)은 학습이 완료된 모델을 의미할 수 있다.
전자 장치(100)는 인공 지능 모델(1210)을 메모리(130)에 저장할 수 있다. 그리고, 전자 장치(100)는 사용자 입력, 컨텍스트 정보 및 메뉴 선택 이력을 인공 지능 모델(1210)에 입력하여 사용자 입력에 대응되는 추천 메뉴를 식별할 수 있다. 여기서, 인공 지능 모델(1210)의 입력 데이터는 사용자 입력, 컨텍스트 정보 및 메뉴 선택 이력이고, 인공 지능 모델(1210)의 출력 데이터는 사용자 입력에 대응되는 추천 메뉴일 수 있다.
한편, 인공 지능 모델(1200) 및 인공 지능 모델(1210)은 신경망 모델로 기재될 수 있다.
도 13은 상이한 뎁스의 메뉴를 설명하기 위한 도면이다.
도 13을 참조하면, 전자 장치(100)는 상이한 뎁스의 메뉴를 저장할 수 있다. 여기서, 전자 장치(100)는 제1 뎁스의 메뉴(1310) 및 제2 뎁스의 메뉴(1320)를 포함할 수 있다. 여기서, 제1 뎁스의 메뉴(1310)는 제2 뎁스의 메뉴(1320)의 상위 메뉴일 수 있다. 여기서, 제2 뎁스의 메뉴(1320)는 제1 뎁스의 메뉴(1310)의 하위 메뉴일 수 있다. 뎁스의 숫자가 낮을수록 상위 메뉴일 수 있다.
예를 들어, A 메뉴에는 #01, #02, #03, #04, #05, #06의 하위 메뉴가 존재할 수 있다. 또한, B 메뉴에는 #11, #12, #13, #14, #15, #16의 하위 메뉴가 존재할 수 있다. 또한, C 메뉴에는 #21, #22, #01, #02, #11, #12의 하위 메뉴가 존재할 수 있다.
여기서, C 메뉴의 하위 메뉴인 #01, #02는 A 메뉴의 하위 메뉴일 수 있다. 또한, C 메뉴의 하위 메뉴인 #11, #12는 A 메뉴의 하위 메뉴일 수 있다. 즉, 일부 메뉴가 중복되어 존재할 수 있다.
도 14는 특정 메뉴가 선택되었을 때 표시되는 화면을 설명하기 위한 도면이다.
도 14를 참조하면, 전자 장치(100)는 메뉴와 관련된 화면(1400)을 디스플레이(110)에 표시할 수 있다. 여기서, 화면(1400)은 메뉴와 관련된 정보를 표시하기 위한 제1 영역(1410), 메뉴를 선택(또는 이동)하기 위한 UI를 포함하는 제2 영역(1420) 또는 선택된(또는 이동된) 메뉴를 확인하거나 취소하기 위한 UI를 포함하는 제3 영역(1430) 중 적어도 하나를 포함할 수 있다.
여기서, 제1 영역(1410)은 적어도 하나의 메뉴를 표시하는 영역(1411) 또는 현재 선택된(또는 활성화된) 메뉴와 관련된 정보를 표시하는 영역(1412) 중 적어도 하나를 포함할 수 있다. 여기서, 현재 선택된(또는 활성화된) 메뉴와 관련된 정보는 특정 메뉴와 관련된 요약 정보를 의미할 수 있다. 여기서, 요약 정보는 특정 메뉴에 대응되는 썸네일 이미지 또는 특정 메뉴에 대응되는 요약 텍스트 중 적어도 하나를 포함할 수 있다. 도 14의 영역(1412)은 현재 선택된(또는 활성화된) 메뉴인 #01과 관련된 요약 정보가 표시되는 영역일 수 있다.
여기서, 제2 영역(1420)은 선택된(또는 활성화된) 메뉴를 이동시키기 위한 UI를 포함할 수 있다. 여기서, 선택된(또는 활성화된) 메뉴를 이동시키기 위한 UI는 상, 하, 좌, 우로 메뉴를 이동시키는 UI일 수 있다.
여기서, 제3 영역(1430)은 현재 선택된 (또는 활성화된) 메뉴를 확인하는 UI 또는 현재 선택된(또는 활성화된) 메뉴를 취소하는 UI 중 적어도 하나를 포함할 수 있다. 여기서, 현재 선택된 (또는 활성화된) 메뉴를 확인하는 UI를 통해 사용자 입력이 수신되면, 전자 장치(100)는 현재 선택된(또는 활성화된) 메뉴의 하위 메뉴를 표시할 수 있다. 즉, 전자 장치(100)는 선택된(또는 활성화된) 메뉴의 세부 정보를 표시할 수 있다. 또한, 현재 선택된(또는 활성화된) 메뉴를 취소하는 UI를 통해 사용자 입력이 수신되면, 전자 장치(100)는 현재 선택된(또는 활성화된) 메뉴의 상위 메뉴를 표시할 수 있다.
도 15는 일 실시 예에 따라, 기 설정된 이벤트에 기초하여 가이드 정보를 제공하는 동작을 설명하기 위한 도면이다.
도 15를 참조하면, 전자 장치(100)는 추천 메뉴를 제공하는 화면(1500)을 디스플레이(110)에 표시할 수 있다.
여기서, 화면(1500)은 적어도 하나의 메뉴를 표시하는 영역(1511) 또는 현재 선택된(또는 활성화된) 메뉴와 관련된 정보를 표시하는 영역(1512) 중 적어도 하나를 포함할 수 있다. 여기서, 영역(1511)은 도 14의 영역(1411)에 대응될 수 있고, 영역(1512)은 도 14의 영역(1412)에 대응될 수 있다.
가이드 정보의 제공이 필요하다고 판단되면, 전자 장치(100)는 영역(1512)에 추천 메뉴를 포함하는 가이드 정보(1501)를 표시할 수 있다. 여기서, 가이드 정보(1501)가 표시됨에 따라 기존에 표시되었던 내용이 보이지 않을 수 있다.
도 16은 다른 실시 예에 따라, 기 설정된 이벤트에 기초하여 가이드 정보를 제공하는 동작을 설명하기 위한 도면이다.
도 16을 참조하면, 전자 장치(100)는 추천 메뉴를 제공하는 화면(1600)을 디스플레이(110)에 표시할 수 있다.
여기서, 화면(1600)은 적어도 하나의 메뉴를 표시하는 영역(1611) 또는 현재 선택된(또는 활성화된) 메뉴와 관련된 정보를 표시하는 영역(1612) 중 적어도 하나를 포함할 수 있다. 여기서, 영역(1611)은 도 14의 영역(1411)에 대응될 수 있고, 영역(1612)은 도 14의 영역(1412)에 대응될 수 있다.
가이드 정보의 제공이 필요하다고 판단되면, 전자 장치(100)는 영역(1612)에 추천 메뉴를 포함하는 가이드 정보(1501)를 표시할 수 있다. 여기서, 가이드 정보(1601)는 기존에 표시되었던 내용 위에 중첩되게 표시될 수 있다. 따라서, 사용자는 기존에 표시된 내용과 별개로 추천 메뉴가 제공되고 있음을 직관적으로 파악할 수 있다.
도 17은 또 다른 실시 예에 따라, 기 설정된 이벤트에 기초하여 가이드 정보를 제공하는 동작을 설명하기 위한 도면이다.
도 17을 참조하면, 전자 장치(100)는 추천 메뉴를 제공하는 화면(1700)을 디스플레이(110)에 표시할 수 있다.
여기서, 화면(1700)은 적어도 하나의 메뉴를 표시하는 영역(1711) 또는 현재 선택된(또는 활성화된) 메뉴와 관련된 정보를 표시하는 영역(1712) 중 적어도 하나를 포함할 수 있다. 여기서, 영역(1711)은 도 14의 영역(1411)에 대응될 수 있고, 영역(1712)은 도 14의 영역(1412)에 대응될 수 있다.
가이드 정보의 제공이 필요하다고 판단되면, 전자 장치(100)는 영역(1711)에 추천 메뉴가 표시된 위치에 기초하여 아이콘(1701)을 추가로 표시할 수 있다.
예를 들어, 추천 메뉴가 #03이라고 가정한다. 전자 장치(100)는 추천 메뉴인 #03이 표시되는 위치와 인접한 위치에 아이콘(1701)을 표시할 수 있다. 사용자는 아이콘(1701)을 통해 추천 메뉴를 직관적으로 파악할 수 있다.
도 18은 추천 메뉴를 표시하는 동작을 설명하기 위한 도면이다.
도 18을 참조하면, 전자 장치(100)는 추천 메뉴를 제공하는 화면(1810)을 디스플레이(110)에 표시할 수 있다. 여기서, 화면(1810)은 도 17의 화면(1700)에 대응될 수 있다.
화면(1810)이 디스플레이(110)에 표시된 상태에서, 사용자에 의해 아래 방향의 스와이프 입력(1811)이 수신되었다고 가정한다. 전자 장치(100)는 스와이프 입력(1811)에 기초하여 현재 활성화된 메뉴(#01)를 변경할 수 있다. 여기서, 전자 장치(100)는 스와이프 입력(1811)을 통해 활성화 되었던 메뉴(#01)와 가장 인접한 추천 메뉴(#03)를 식별할 수 있다.
그리고, 전자 장치(100)는 추천 메뉴(#03)를 포함하는 화면(1820)을 디스플레이(110)에 표시할 수 있다. 여기서, 전자 장치(100)는 추천 메뉴(#03)를 포함하는 화면(1820)을 표시하기 전에 중간에 위치하는 메뉴(#02)를 표시할 수 있다.
일반적인 실시 예에서, 스와이프 입력(1811)은 활성화된 메뉴를 변경하는 입력에 해당할 수 있으므로, 전자 장치(100)는 #01, #02, #03, #04, #05, #06 순서로 메뉴를 선택(또는 활성화)할 수 있다. 여기서 각각의 메뉴가 표시되는 시간은 스와이프 입력(1811)의 입력 시간에 따라 결정될 수 있다. 스와이프 입력(1811)의 입력 시간이 짧으면 각각의 메뉴가 표시되는 시간도 짧을 수 있다.
본 개시의 일 실시 예에서, 전자 장치(100)는 스와이프 입력(1811)에 기초하여 복수의 메뉴를 순서대로 표시하는 도중 추천 메뉴(#03)를 고정적으로 표시할 수 있다. 즉, #01, #02, #03, #04, #05, #06가 순서대로 표시되어야 하는 상황에서 추천 메뉴(#03)가 식별되면, 전자 장치(100)는 추천 메뉴(#03)를 고정적으로 표시하고 추천 메뉴(#03)의 다음 메뉴(#04, #05, #06)를 표시하지 않을 수 있다.
본 개시의 다른 실시 예에서, 전자 장치(100)는 스와이프 입력(1811)에 기초하여 적어도 하나의 메뉴를 순서대로 표시하고, 추천 메뉴(#03)를 다른 메뉴보다 더 오랜 시간 동안 표시할 수 있다. 즉, #01, #02, #03, #04, #05, #06가 순서대로 표시되어야 하는 상황에서 추천 메뉴(#03)가 중간에 식별되면, 전자 장치(100)는 추천 메뉴(#03)의 이전 메뉴(#01, #02)를 제1 시간(예를 들어, 0.2초) 동안 표시하고, 추천 메뉴(#03)를 제2 시간(예를 들어, 1초) 동안 표시하고, 추천 메뉴(#03)의 다음 메뉴(#04, #05, #06)를 제1 시간(예를 들어, 0.2초) 동안 표시할 수 있다. 여기서, 제2 시간은 제1 시간보다 클 수 있다.
도 19는 추천 메뉴를 생성하는 전자 장치(100)의 동작을 설명하기 위한 블록도이다.
도 19를 참조하면, 전자 장치(100)는 조작 인터페이스(120), 메모리(130) 및 프로세서(140), 센서부(150) 를 포함할 수 있다.
여기서, 프로세서(140)는 제어 모듈(141), 입력 정보 판단 모듈(142), 컨텍스트 정보 획득 모듈(143) 또는 추천 메뉴 식별 모듈(144) 중 적어도 하나를 포함할 수 있다. 여기서, 추천 메뉴 식별 모듈(144)은 패턴 유사도 계산 모듈(144-1) 및 추천 메뉴 결정 모듈(144-2_을 포함할 수 있다.
여기서, 메모리(130)는 메뉴 구조 정보(131) 및 메뉴 선택 이력(132)을 저장할 수 있다. 여기서, 메뉴 구조 정보(131)는 상위 또는 하위 메뉴의 구조를 의미할 수 있다. 메뉴 구조 정보(131)와 관련된 설명은 도 13에서 기재한다.
여기서, 전자 장치(100)는 조작 인터페이스(120)를 통해 사용자 입력을 수신할 수 있다. 전자 장치(100)는 조작 인터페이스(120)를 통해 수신된 사용자 입력을 제어 모듈(141)에 전송할 수 있다. 그리고, 제어 모듈(141)은 사용자 입력을 입력 정보 판단 모듈(142)에 전송할 수 있다.
여기서, 입력 정보 판단 모듈(142)은 사용자 입력에 기초하여 기 설정된 이벤트가 발생하였는지 여부를 식별할 수 있다. 기 설정된 이벤트가 발생된 것으로 식별되면, 입력 정보 판단 모듈(142)은 이벤트 알림을 제어 모듈(141)에 전송할 수 있다.
여기서, 제어 모듈(141)은 입력 정보 판단 모듈(142)로부터 이벤트 알림을 수신할 수 있다. 이벤트 알림이 수신되면, 제어 모듈(141)은 센서부(150)에 컨텍스트 정보를 요청할 수 있다. 그리고, 센서부(150)를 통해 획득한 컨텍스트 정보가 컨텍스트 정보 획득 모듈(143)에 저장될 수 있다. 또한, 이벤트 알림이 수신되면, 제어 모듈(141)은 메모리(130)에 메뉴 구조 정보(131) 및 메뉴 선택 이력(132)을 요청할 수 있다.
이벤트 알림이 수신되면, 추천 메뉴 식별 모듈(144)은 조작 인터페이스(120)로부터 획득된 사용자 입력, 센서부(150)를 통해 획득한 컨텍스트 정보 및 메모리(130)를 통해 획득한 메뉴 구조 정보(131) 및 메뉴 선택 이력(132)을 획득할 수 있다. 그리고, 추천 메뉴 식별 모듈(144)은 패턴 유사도 계산 모듈(144-1)을 이용하여 메뉴 선택 이력(132)에 저장된 복수의 패턴 각각에 대하여 패턴 유사도를 계산할 수 있다. 여기서, 패턴 유사도는 메뉴 선택 이력(132)에 저장된 특정 패턴 과 사용자 입력이 얼마나 유사한지를 나타내는 값을 의미할 수 있다. 그리고, 패턴 유사도 계산 모듈(144-1)에 의하여 계산된 패턴 유사도가 추천 메뉴 결정 모듈(144-2)에 전송될 수 있다. 여기서, 패턴 유사도는 가중치(또는 합산 가중치)로 기재될 수 있다.
여기서, 추천 메뉴 결정 모듈(144-2)은 패턴 유사도에 기초하여 사용자 입력에 대응되는 적어도 하나의 추천 메뉴를 식별(또는 결정)할 수 있다.
제어 모듈(141), 입력 정보 판단 모듈(142), 컨텍스트 정보 획득 모듈(143), 추천 메뉴 식별 모듈(144) 등의 구체적인 동작은 도 22 내지 도 24에서 기재한다.
한편, 도 19에서는 컨텍스트 정보 획득 모듈(143)을 기재하였지만, 구현 예에 따라 컨텍스트 정보 획득 모듈(143)이 생략될 수 있다. 컨텍스트 정보 획득 모듈(143)이 생략되는 경우, 추천 메뉴 식별 모듈(144)은 직접적으로 센서부(150)를 통해 컨텍스트 정보를 획득할 수 있다.
도 20은 추천 메뉴를 식별하는 동작을 설명하기 위한 흐름도이다.
도 20을 참조하면, 전자 장치(100)는 메뉴를 선택하는 사용자 입력을 수신할 수 있다 (S2005). 그리고, 전자 장치(100)는 기 설정된 이벤트를 식별할 수 있다 (S2010). 기 설정된 이벤트가 식별되지 않으면 (S2010-N), 전자 장치(100)는 S2005, S2010 단계를 반복할 수 있다.
기 설정된 이벤트가 식별되면 (S2010-Y), 전자 장치(100)는 컨텍스트 정보를 획득할 수 있다 (S2015). 그리고, 전자 장치(100)는 메뉴 선택 이력을 획득할 수 있다 (S2020). 그리고, 전자 장치(100)는 사용자 입력, 컨텍스트 정보 및 메뉴 선택 이력에 기초하여 추천 메뉴를 식별할 수 있다 (S2025). 여기서, 전자 장치(100)는 메뉴 구조 정보를 추가적으로 고려하여 추천 메뉴를 식별할 수 있다. 그리고, 전자 장치(100)는 추천 메뉴를 포함하는 가이드 정보를 제공할 수 있다 (S2030). 가이드 정보를 제공하는 동작은 도 5의 S515에 대응될 수 있으므로 중복 설명을 생략한다.
도 21은 조리물 온도에 기초하여 추천 메뉴를 식별하는 동작을 설명하기 위한 흐름도이다.
도 21을 참조하면, S2105, S2110 단계는 도 20의 S2005, S2010 단계에 대응될 수 있으므로 중복 설명을 생략한다.
여기서, 기 설정된 이벤트가 식별되면 (S2110-Y), 전자 장치(100)는 조리물 온도를 센싱할 수 있다 (S2115). 구체적으로, 전자 장치(100)는 접촉식 온도 센서(152)를 통해 조리물 온도를 센싱할 수 있다. 그리고, 전자 장치(100)는 센싱된 조리물 온도를 컨텍스트 정보로서 획득할 수 있다 (S2120). 여기서, 컨텍스트 정보는 조리물 온도 이외에 다양한 정보가 추가적으로 포함될 수 있다. 그리고, 전자 장치(100)는 메뉴 선택 이력을 획득할 수 있다 (S2125). 그리고, 전자 장치(100)는 사용자 입력, 조리물 온도를 포함하는 컨텍스트 정보 및 메뉴 선택 이력에 기초하여 추천 메뉴를 식별할 수 있다 (S2130). 그리고, 전자 장치(100)는 추천 메뉴를 포함하는 가이드 정보를 제공할 수 있다 (S2135). 가이드 정보를 제공하는 동작은 도 5의 S515에 대응될 수 있으므로 중복 설명을 생략한다.
도 22는 일 실시 예에 따라, 전자 장치(100)에 포함된 복수의 모듈에 의하여 가이드 정보를 제공하는 동작을 설명하기 위한 흐름도이다.
도 22를 참조하면, 조작 인터페이스(120)는 제1 사용자 입력을 수신할 수 있다 (S2201). 그리고, 조작 인터페이스(120)는 수신된 제1 사용자 입력을 제어 모듈(141)에 전송할 수 있다 (S2202). 그리고, 제어 모듈(141)는 조작 인터페이스(120)로부터 수신한 제1 사용자 입력을 입력 정보 판단 모듈(142)에 전송할 수 있다 (S2203).
입력 정보 판단 모듈(142)은 제어 모듈(141)로부터 제1 사용자 입력을 수신할 수 있다. 그리고, 입력 정보 판단 모듈(142)은 제1 사용자 입력에 기초하여 기 설정된 이벤트를 식별할 수 있다 (S2204). 제1 사용자 입력에 기초하여 기 설정된 이벤트가 식별되면, 입력 정보 판단 모듈(142)은 이벤트 알림을 제어 모듈(141)에 전송할 수 있다 (S2205). 그리고, 입력 정보 판단 모듈(142)은 제1 사용자 입력을 추천 메뉴 식별 모듈(144)에 전송할 수 있다 (S2210).
일 실시 예에 따라, S2210 단계에서 전송되는 제1 사용자 입력은 S2202 단계에서 전송된 사용자 입력일 수 있다. 즉, 입력 정보 판단 모듈(142)은 수신된 제1 사용자 입력과 관련된 모든 정보를 추천 메뉴 식별 모듈(144)에 전송할 수 있다.
다른 실시 예에 따라, 입력 정보 판단 모듈(142)은 수신된 제1 사용자 입력 중 일부 정보만을 추천 메뉴 식별 모듈(144)에 전송할 수 있다. 여기서, 일부 정보는 추천 메뉴에 이용되는 메뉴와 관련된 정보를 의미할 수 있다.
제어 모듈(141)은 입력 정보 판단 모듈(142)로부터 이벤트 알림을 수신할 수 있다.
이벤트 알림이 수신되면, 제어 모듈(141)은 컨텍스트 정보를 컨텍스트 정보 획득 모듈(143)에 요청할 수 있다 (S2220). 구체적으로, 제어 모듈(141)은 컨텍스트 정보를 요청하기 위한 제어 신호를 컨텍스트 정보 획득 모듈(143)에 전송할 수 있다. 그리고, 컨텍스트 정보 획득 모듈(143)은 센서부(150)에 제어 신호를 전송할 수 있으며, 센서부(150)로부터 컨텍스트 정보를 수신할 수 있다. 그리고, 컨텍스트 정보 획득 모듈(143)은 컨텍스트 정보를 추천 메뉴 식별 모듈(144)에 전송할 수 있다 (S2221).
이벤트 알림이 수신되면, 제어 모듈(141)은 메뉴 선택 이력을 메모리(130)에 요청할 수 있다 (S2230). 구체적으로, 제어 모듈(141)은 메뉴 선택 이력을 요청하기 위한 제어 신호를 메모리(130)에 전송할 수 있다. 여기서, 메모리(130)는 제어 모듈(141)로부터 메뉴 선택 이력의 요청을 수신할 수 있다. 그리고, 메모리(130)는 메뉴 선택 이력을 추천 메뉴 식별 모듈(144)에 전송할 수 있다 (S2231).
추천 메뉴 식별 모듈(144)은 S2210 단계를 통해 획득한 제1 사용자 입력, S2221 단계를 통해 획득한 컨텍스트 정보 및 S2231 단계를 통해 획득한 메뉴 선택 이력에 기초하여 추천 메뉴를 식별할 수 있다 (S2240). 그리고, 추천 메뉴 식별 모듈(144)은 식별된 추천 메뉴를 제어 모듈(141)에 전송할 수 있다 (S2241).
제어 모듈(141)은 추천 메뉴 식별 모듈(144)로부터 추천 메뉴를 수신할 수 있다. 그리고, 제어 모듈(141)은 추천 메뉴를 포함하는 가이드 정보를 제공할 수 있다 (S2242).
한편, 도 22에서는 컨텍스트 정보 및 메뉴 선택 이력이 제어 모듈(141)을 거치지 않고 바로 추천 메뉴 식별 모듈(144)에 전송되는 동작을 기재하였다. 다른 구현 예에 따라, 컨텍스트 정보 및 메뉴 선택 이력이 제어 모듈(141)을 거쳐 추천 메뉴 식별 모듈(144)에 전송될 수 있다. 이와 관련된 설명은 도 23에서 기재한다.
도 23은 다른 실시 예에 따라, 전자 장치(100)에 포함된 복수의 모듈에 의하여 가이드 정보를 제공하는 동작을 설명하기 위한 흐름도이다.
도 23을 참조하면, S2301, S2302, S2303, S2304, S2305, S2341, S2342 단계는 도 22의 S2201, S2202, S2203, S2204, S2205, S2241, S2242 단계에 대응될 수 있으므로 중복 설명을 생략한다.
여기서, 이벤트 알림이 수신되면, 제어 모듈(141)은 제1 사용자 입력을 추천 메뉴 식별 모듈(144)에 전송할 수 있다 (S2310). 도 22와 달리, 제1 사용자 입력이 제어 모듈(141)을 거쳐 추천 메뉴 식별 모듈(144)에 전송될 수 있다.
여기서, 이벤트 알림이 수신되면, 제어 모듈(141)은 컨텍스트 정보 획득 모듈(143)에 컨텍스트 정보를 요청할 수 있다 (S2320). 그리고, 컨텍스트 정보 획득 모듈(143)은 센서부(150)를 통해 컨텍스트 정보를 획득할 수 있다. 그리고, 컨텍스트 정보 획득 모듈(143)은 컨텍스트 정보를 제어 모듈(141)에 전송할 수 있다 (S2321). 그리고, 제어 모듈(141)은 컨텍스트 정보 획득 모듈(143)로부터 획득한 컨텍스트 정보를 추천 메뉴 식별 모듈(144)에 전송할 수 있다 (S2322).
여기서, 이벤트 알림이 수신되면, 제어 모듈(141)은 메모리(130)에 메뉴 선택 이력을 요청할 수 있다 (S2330). 그리고, 메모리(130)는 메뉴 선택 이력을 다시 제어 모듈(141)에 전송할 수 있다 (S2331). 그리고, 제어 모듈(141)은 메뉴 선택 이력을 추천 메뉴 식별 모듈(144)에 전송할 수 있다 (S2332).
추천 메뉴 식별 모듈(144)은 S2310 단계를 통해 획득한 제1 사용자 입력, S2322 단계를 통해 획득한 컨텍스트 정보 및 S2332 단계를 통해 획득한 메뉴 선택 이력에 기초하여 추천 메뉴를 식별할 수 있다 (S2340). 그리고, 추천 메뉴 식별 모듈(144)은 추천 메뉴를 제어 모듈(141)에 전송할 수 있다 (S2341). 그리고, 제어 모듈(141)은 추천 메뉴를 포함하는 가이드 정보를 제공할 수 있다 (S2342).
도 24는 가이드 정보가 제공된 후 피드백 정보를 저장하는 동작을 설명하기 위한 흐름도이다.
도 24를 참조하면, 제어 모듈(141)은 추천 메뉴를 포함하는 가이드 정보를 제공할 수 있다 (S2442). S2442 단계는 도 22의 S2242 단계 또는 도 23의 S2342 단계에 대응될 수 있다. 즉, 도 24의 동작은 가이드 정보를 제공하는 동작 이후의 동작을 기재한다.
추천 메뉴를 포함하는 가이드 정보가 제공된 이후, 조작 인터페이스(120)는 추천 메뉴를 선택하는 제2 사용자 입력을 수신할 수 있다 (S2450). 그리고, 조작 인터페이스(120)는 제2 사용자 입력을 제어 모듈(141)에 전송할 수 있다 (S2451).
여기서, 전자 장치(100)는 조작 인터페이스(120)를 통해 제2 사용자 입력을 수신할 수 있다. 그리고, 제어 모듈(141)은 제2 사용자 입력에 기초하여 사용자가 어느 추천 메뉴를 선택하였는지 분석할 수 있다. 그리고, 제어 모듈(141)은 제2 사용자 입력에 기초하여 피드백 정보를 생성할 수 있다 (S2460). 여기서, 피드백 정보는 추천 메뉴의 선택 여부와 관련된 정보를 포함할 수 있다. 제어 모듈(141)은 피드백 정보를 메모리(130)에 전송할 수 있다 (S2461). 그리고, 메모리(130)는 제어 모듈(141)로부터 수신한 피드백 정보를 저장할 수 있다 (S2462).
제어 모듈(141)는 피드백 정보에 기초하여 사용자가 선호하는 메뉴를 식별할 수 있고, 추천 메뉴를 식별하는 동작에 피드백 정보를 추가적으로 이용할 수 있다.
도 25는 서버(200)를 이용하여 추천 메뉴를 식별하는 동작을 설명하기 위한 흐름도이다.
도 25를 참조하면, 전자 장치(100)는 서버(200)를 통해 추천 메뉴를 획득할 수 있다. 서버(200)는 메뉴 구조 정보 및 메뉴 선택 이력을 저장할 수 있다 (S2505).
여기서, 전자 장치(100)는 사용자 입력을 수신할 수 있다 (S2510). 사용자 입력이 수신되면, 전자 장치(100)는 사용자 입력을 서버에 전송할 수 있다 (S2515).
여기서, 서버(200)는 전자 장치(100)로부터 사용자 입력을 수신할 수 있다. 그리고, 서버(200)는 사용자 입력에 기초하여 기 설정된 이벤트를 식별할 수 있다 (S2520). 기 설정된 이벤트가 식별되면, 서버(200)는 이벤트 알림을 전자 장치(100)에 전송할 수 있다 (S2525).
여기서, 전자 장치(100)는 서버(200)로부터 이벤트 알림을 수신할 수 있다. 그리고, 이벤트 알림이 수신되면, 전자 장치(100)는 컨텍스트 정보를 획득할 수 있다 (S2530). 그리고, 전자 장치(100)는 컨텍스트 정보를 서버(200)에 전송할 수 있다 (S2535).
여기서, 서버(200)는 전자 장치(100)로부터 컨텍스트 정보를 수신할 수 있다. 그리고, 서버(200)는 S2515 단계에서 획득한 사용자 입력, S2535 단계에서 획득한 컨텍스트 정보 및 S2505 단계에서 획득한 메뉴 구조 정보 및 메뉴 선택 이력에 기초하여 추천 메뉴를 식별할 수 있다 (S2540). 그리고, 서버(200)는 추천 메뉴를 전자 장치(100)에 전송할 수 있다 (S2545).
여기서, 전자 장치(100)는 추천 메뉴를 서버(200)로부터 수신할 수 있다. 그리고, 전자 장치(100)는 추천 메뉴를 포함하는 가이드 정보를 제공할 수 있다 (S2550).
도 26은 복수의 요리 각각에 대응되는 가중치 정보를 설명하기 위한 표이다.
도 26을 참조하면, 표(2610)는 메뉴에 대한 가중치 정보를 포함할 수 있다. 여기서, 메뉴는 요리 식별 정보로 구분될 수 있다. 가중치 정보는 복수의 항목에 대응되는 가중치를 포함할 수 있다. 여기서, 복수의 항목은 카테고리, 연관 카테고리, (조리실) 내부 온도, 프로브 온도, 기능 1의 수행 여부, 기능 2의 수행 여부, 시간, 날짜 또는 선택 이력 중 적어도 하나를 포함할 수 있다.
전자 장치(100)는 사용자 입력에 기초하여 현재 선택된(또는 활성화된) 메뉴를 획득할 수 있다. 그리고, 전자 장치(100)는 현재 선택된 메뉴에 대응되는 카테고리에 가중치를 부여할 수 있다. 또한, 전자 장치(100)는 현재 선택된 메뉴에 대응되는 연관 카테고리에 가중치를 부여할 수 있다.
전자 장치(100)는 컨텍스트 정보를 획득할 수 있다. 여기서, 컨텍스트 정보는 (조리실의) 내부 온도, (조리물의) 프로브 온도, 기능 1의 수행 여부, 기능 2의 수행 여부, 현재 시간 또는 현재 날짜 중 적어도 하나를 포함할 수 있다. 여기서, 전자 장치(100)는 컨텍스트 정보에 대응되는 가중치를 부여할 수 있다.
전자 장치(100)는 메뉴 선택 이력을 획득할 수 있다. 여기서, 메뉴 선택 이력은 사용자가 어떠한 메뉴를 선택하였는지를 나타내는 정보를 포함할 수 있다. 여기서, 전자 장치(100)는 사용자가 선택한 이력이 있는 메뉴에 가중치를 부여할 수 있다.
예를 들어, #01은 A 메뉴에 포함되므로, A 메뉴가 선택되었을 때 전자 장치(100)는 카테고리에 대응되는 가중치를 부여할 수 있다. 또한, #01은 연관 카테고리가 B 메뉴에 해당하므로, B 메뉴가 선택되었을 때 전자 장치(100)는 연관 카테고리에 대응되는 가중치를 부여할 수 있다. 또한, #01은 조리실의 온도가 임계 온도 이상인 상황에서 동작하는 메뉴일 수 있다. 따라서, 조리실의 온도가 임계 온도 이상이면, 전자 장치(100)는 내부 온도에 대응되는 가중치를 부여할 수 있다. 또한, #01은 기능 1이 수행되어야 하는 메뉴일 수 있다. 따라서, 기능 1이 수행된 상태이면, 전자 장치(100)는 기능 1에 대응되는 가중치를 부여할 수 있다. 또한, #01은 아침 시간에 주로 이용되는 메뉴일 수 있다. 따라서, 현재 시간이 아침이면, 전자 장치(100)는 시간에 대응되는 가중치를 부여할 수 있다. 또한, #01은 평일에 주로 이용되는 메뉴일 수 있다. 따라서, 현재 날짜가 평일이면, 전자 장치(100)는 날짜에 대응되는 가중치를 부여할 수 있다. #02 내지 #23과 관련된 가중치 부여 방법은 #01과 유사한 방식이 적용될 수 있으므로, 설명을 생략한다.
한편, 복수의 항목 각각에 대응되는 가중치가 상이할 수 있다. 예를 들어, 전자 장치(100)는 카테고리는 60, 연관 카테고리는 30, 내부 온도는 5, 프로브 온도는 5, 기능 1에는 5, 기능 2에는 5, 시간에는 5, 날짜에는 5, 선택 이력에는 40의 가중치를 부여할 수 있다.
한편, 복수의 항목 각각에 가중치를 부여하는 계산하는 과정은 도 27에서 기재한다.
도 27은 가중치 정보에 기초하여 추천 메뉴를 식별하는 동작을 설명하기 위한 도면이다.
도 27을 참조하면, 표(2710)는 복수의 메뉴에 대응되는 가중치 결과를 포함할 수 있다. 전자 장치(100)는 사용자 입력 정보(2701), 컨텍스트 정보(2702) 및 메뉴 선택 이력(2703)을 획득할 수 있다. 여기서, 사용자 입력 정보(2701)는 사용자가 A 카테고리를 선택한 정보를 포함할 수 있다. 여기서, 사용자가 A 카테고리를 선택한 후 기 설정된 이벤트가 식별되었다고 가정한다.
또한, 컨텍스트 정보(2702)는 내부 온도 미식별, 프로브 온도 식별, 기능1의 수행, 기능2의 미수행, 저녁, 주말, 크리스마스인 것으로 가정한다. 내부 온도 미식별은 조리실 내부가 가열되지 않은 상태를 의미할 수 있다. 내부 온도가 제1 임계 온도 미만이면, 전자 장치(100)는 “내부 온도 미식별”로 판단할 수 있다. 또한, 프로브 온도 식별은 조리물이 가열되지 않은 상태를 의미할 수 있다. 프로브 온도가 제2 임계 온도 이상이면, 전자 장치(100)는 “프로브 온도 식별”로 판단할 수 있다.
또한, 메뉴 선택 이력(2703)은 사용자가 #03, #11, #12, #13을 선택한 이력을 포함한다고 가정한다.
여기서, 전자 장치(100)는 사용자 입력 정보(2701)에 기초하여 현재 선택된 메뉴가 A인것으로 판단할 수 있다. 따라서, 전자 장치(100)는 #01, #02, #03 에 카테고리에 대응되는 가중치(60)를 부여할 수 있다. 또한, 전자 장치(100)는 #11, #21에 30의 연관 카테고리에 대응되는 가중치(30)를 부여할 수 있다.
여기서, 전자 장치(100)는 컨텍스트 정보(2702)에 기초하여 가중치를 부여할 수 있다. 내부 온도가 식별되지 않았으므로, 전자 장치(100)는 내부 온도에 대응되는 가중치(5)를 부여하지 않을 수 있다. 또한, 프로브 온도가 식별되었으므로, 전자 장치(100)는 #21, #22, #23에 프로브 온도에 대응되는 가중치(5)를 부여할 수 있다. 또한, 기능 1이 수행되었으므로, 전자 장치(100)는 #01, #03, #11, #13, #21, #23에 기능 1에 대한 가중치(5)를 부여할 수 있다. 또한, 기능 2가 수행되지 않았으므로, 전자 장치(100)는 기능 2에 대한 가중치(5)를 부여하지 않을 수 있다. 또한, 현재 시간이 저녁이므로, #03, #13, #23에 시간에 대응되는 가중치(50)를 부여할 수 있다. 또한, 현재 날짜가 주말이므로, #02, #03, #12, #13, #22, #23에 날짜에 대응되는 가중치(5)를 부여할 수 있다. 여기서, 현재 날짜가 크리스마스이므로 전자 장치(100)는 주말 가중치와 별개로 특정 공휴일에 대한 가중치(5)를 추가적으로 부여할 수 있다. 전자 장치(100)는 #03, #13, #23에 크리스마스에 대응되는 가중치(5)를 추가적으로 부여할 수 있다.
여기서, 전자 장치(100)는 메뉴 선택 이력(2703)에 기초하여 가중치를 부여할 수 있다. 메뉴 선택 이력(2703)은 사용자가 #03, #11, #12, #13를 선택하였음을 나타낼 수 있다. 따라서, 전자 장치(100)는 #03, #11, #12, #13에 선택 이력에 대응되는 가중치(40)를 부여할 수 있다.
전자 장치(100)는 상술한 방식에 따라 복수의 메뉴 각각에 대응되는 가중치를 산출할 수 있다. 그리고, 전자 장치(100)는 산출된 가중치에 기초하여 추천 메뉴를 식별할 수 있다.
일 예로, 전자 장치(100)는 가장 큰 가중치의 메뉴(#03)를 추천 메뉴로 식별할 수 있다.
다른 예로, 전자 장치(100)는 가중치가 큰 순서로 임계 개수(예를 들어 4개)의 메뉴를 추천 메뉴(#03, #11, #01, #02)로 식별할 수 있다. 여기서, 임계 개수가 3개이면, #01 및 #02가 동일 순위가 된다. 순위가 동일한 메뉴가 있는 경우, 전자 장치(100)는 우선 순위 정보에 따라 추천 메뉴를 식별할 수 있다. 카테고리, 선택 이력, 연관 카테고리, 내부 온도, 프로브 온도, 기능1의 수행 여부, 기능 2의 수행 여부, 시간, 날짜 순서로 우선 순위가 높을 수 있다. 따라서, 표(2710)에서 #01의 우선 순위가 더 높을 수 있다. 따라서, 3개의 추천 메뉴를 식별하는 경우, 전자 장치(100)는 #03, #11, #01을 추천 메뉴로 식별할 수 있다.
도 28은 본 개시의 일 실시 예에 따른 전자 장치(100)의 제어 방법을 설명하기 위한 도면이다.
도 28을 참조하면, 전자 장치(100)의 제어 방법은 제1 뎁스의 제1 메뉴 및 제1 메뉴에 종속된 제2 뎁스의 제2 메뉴를 포함하는 메뉴 선택 이력을 저장하는 단계 (S2805), 어도 하나의 메뉴를 선택하는 사용자 입력이 수신되면, 사용자 입력에 기초하여 가이드 정보의 제공이 필요한지 여부를 식별하는 단계 (S2810)및 가이드 정보의 제공이 필요한 것으로 식별되면, 선택된 적어도 하나의 메뉴에 대한 정보, 전자 장치(100)의 현재 컨텍스트(context) 정보 및 저장된 메뉴 선택 이력에 기초하여 추천 메뉴를 포함하는 가이드 정보를 표시하는 단계 (S2815)를 포함한다.
한편, 가이드 정보의 제공이 필요한지 여부를 식별하는 단계 (S2810)는 특정 뎁스의 메뉴가 선택된 후 임계 시간 동안 메뉴를 선택하는 추가 사용자 입력이 수신되지 않는 이벤트, 사용자 입력에 따라 메뉴가 변경되는 속도가 임계 속도 이상인 이벤트 또는 특정 뎁스의 메뉴가 선택된 후 메뉴 선택이 취소되는 사용자 입력이 수신되는 이벤트 중 적어도 하나의 이벤트가 식별되면, 가이드 정보의 제공이 필요한 것으로 식별할 수 있다.
한편, 컨텍스트 정보는 전자 장치(100) 내부의 온도 정보, 조리 대상의 온도 정보, 특정 기능의 실행 여부에 대한 정보, 전자 장치(100) 내부의 이미지 정보 및 일시 정보 중 적어도 하나를 포함할 수 있다.
한편, 제어 방법은 적어도 하나의 메뉴에 대한 정보, 컨텍스트 정보 및 메뉴 선택 이력에 기초하여 전자 장치(100)에 저장된 복수의 메뉴 각각에 대응되는 가중치를 획득하는 단계 및 복수의 메뉴 각각에 대응되는 가중치에 기초하여 추천 메뉴를 식별하는 단계를 더 포함할 수 있다.
한편, 복수의 메뉴 각각에 대응되는 가중치를 획득하는 단계는 적어도 하나의 메뉴에 대한 정보에 기초하여 선택된 메뉴를 식별하고, 복수의 메뉴 중 선택된 메뉴와 동일한 메뉴에 제1 서브 가중치를 할당하고, 복수의 메뉴 중 선택된 메뉴와 유사한 메뉴에 제2 서브 가중치를 할당하고, 제1 서브 가중치 및 제2 서브 가중치를 합산하여 복수의 메뉴 각각에 대응되는 가중치를 획득할 수 있다.
한편, 복수의 메뉴 각각에 대응되는 가중치를 획득하는 단계는 복수의 메뉴 중 컨텍스트 정보에 대응되는 메뉴에 제3 서브 가중치를 할당하고, 복수의 메뉴 중 메뉴 선택 이력에 대응되는 메뉴에 제4 서브 가중치를 할당하고, 제1 서브 가중치, 제2 서브 가중치, 제3 서브 가중치 및 제4 서브 가중치를 합산하여 복수의 메뉴 각각에 대응되는 가중치를 획득할 수 있다.
한편, 제어 방법은 가이드 정보의 제공이 필요한 것으로 식별되면, 적어도 하나의 메뉴에 대한 정보, 컨텍스트 정보 및 메뉴 선택 이력에 기초하여 추천 메뉴를 식별하는 단계 및 추천 메뉴가 표시되는 위치에 기초하여 추천 메뉴를 식별하기 위한 아이콘을 표시하는 단계를 더 포함할 수 있다.
한편, 제어 방법은 가이드 정보의 제공이 필요한 것으로 식별되면, 학습된 신경망 모델에 전자 장치(100)의 적어도 하나의 메뉴에 대한 정보 및 컨텍스트 정보를 입력하여 추천 메뉴를 획득하는 단계를 더 포함하고, 신경망 모델은 컨텍스트 정보 및 메뉴 선택 이력에 기초하여 학습될 수 있다.
한편, 전자 장치(100)는 조리물을 가열하는 히터를 포함하는 조리 장치이고, 제어 방법은 가이드 정보에 포함된 메뉴를 선택하는 사용자 입력이 수신되면, 선택된 메뉴에 대응되는 기능을 수행하는 단계를 더 포함하고, 선택된 메뉴에 대응되는 기능은 선택된 메뉴의 조리 과정을 포함하는 텍스트를 표시하는 기능, 선택된 메뉴의 조리 과정을 포함하는 이미지를 표시하는 기능, 선택된 메뉴의 조리 과정을 수행하기 위해 히터의 스케쥴을 설정하는 기능 중 적어도 하나를 포함할 수 있다.
한편, 전자 장치(100)는 조리물의 온도를 센싱하기 위한 접촉식 온도 센서(152)를 포함하고, 제어 방법은 가이드 정보의 제공이 필요한 것으로 식별되면, 접촉식 온도 센서(152)를 통해 조리물의 온도를 컨텍스트 정보로서 획득하는 단계 및 적어도 하나의 메뉴에 대한 정보, 조리물의 온도를 포함하는 컨텍스트 정보 및 메뉴 선택 이력에 기초하여 추천 메뉴를 식별하는 단계를 더 포함할 수 있다.
한편, 도 28과 같은 전자 장치의 제어 방법은 도 3 또는 도 4의 구성을 가지는 전자 장치 상에서 실행될 수 있으며, 그 밖의 구성을 가지는 전자 장치 상에서도 실행될 수 있다.
한편, 상술한 본 개시의 다양한 실시 예들에 따른 방법들은, 기존 전자 장치에 설치 가능한 어플리케이션 형태로 구현될 수 있다.
또한, 상술한 본 개시의 다양한 실시 예들에 따른 방법들은, 기존 전자 장치에 대한 소프트웨어 업그레이드, 또는 하드웨어 업그레이드 만으로도 구현될 수 있다.
또한, 상술한 본 개시의 다양한 실시 예들은 전자 장치에 구비된 임베디드 서버, 또는 전자 장치 및 디스플레이 장치 중 적어도 하나의 외부 서버를 통해 수행되는 것도 가능하다.
한편, 본 개시의 일시 예에 따르면, 이상에서 설명된 다양한 실시 예들은 기기(machine)(예: 컴퓨터)로 읽을 수 있는 저장 매체(machine-readable storage media)에 저장된 명령어를 포함하는 소프트웨어로 구현될 수 있다. 기기는, 저장 매체로부터 저장된 명령어를 호출하고, 호출된 명령어에 따라 동작이 가능한 장치로서, 개시된 실시 예들에 따른 전자 장치를 포함할 수 있다. 명령이 프로세서에 의해 실행될 경우, 프로세서가 직접, 또는 프로세서의 제어 하에 다른 구성요소들을 이용하여 명령에 해당하는 기능을 수행할 수 있다. 명령은 컴파일러 또는 인터프리터에 의해 생성 또는 실행되는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장 매체는, 비일시적(non-transitory) 저장 매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장 매체가 신호(signal)를 포함하지 않으며 실재(tangible)한다는 것을 의미할 뿐 데이터가 저장 매체에 반영구적 또는 임시적으로 저장됨을 구분하지 않는다.
또한, 본 개시의 일 실시 예에 따르면, 이상에서 설명된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 온라인으로 배포될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
또한, 상술한 다양한 실시 예들에 따른 구성 요소(예: 모듈 또는 프로그램) 각각은 단수 또는 복수의 개체로 구성될 수 있으며, 전술한 해당 서브 구성 요소들 중 일부 서브 구성 요소가 생략되거나, 또는 다른 서브 구성 요소가 다양한 실시 예에 더 포함될 수 있다. 대체적으로 또는 추가적으로, 일부 구성 요소들(예: 모듈 또는 프로그램)은 하나의 개체로 통합되어, 통합되기 이전의 각각의 해당 구성 요소에 의해 수행되는 기능을 동일 또는 유사하게 수행할 수 있다. 다양한 실시 예들에 따른, 모듈, 프로그램 또는 다른 구성 요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱하게 실행되거나, 적어도 일부 동작이 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
이상에서는 본 개시의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 개시는 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 개시의 요지를 벗어남이 없이 당해 개시에 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형 실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 개시의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100: 전자 장치
110: 디스플레이
120: 조작 인터페이스
130: 메모리
140: 프로세서
150: 센서부

Claims (20)

  1. 전자 장치에 있어서,
    디스플레이;
    조작 인터페이스;
    제1 뎁스의 제1 메뉴 및 상기 제1 메뉴에 종속된 제2 뎁스의 제2 메뉴를 포함하는 메뉴 선택 이력을 저장하는 메모리;
    상기 조작 인터페이스를 통해 적어도 하나의 메뉴를 선택하는 사용자 입력이 수신되면, 상기 사용자 입력에 기초하여 가이드 정보의 제공이 필요한지 여부를 식별하고,
    상기 가이드 정보의 제공이 필요한 것으로 식별되면, 상기 선택된 적어도 하나의 메뉴에 대한 정보, 상기 전자 장치의 현재 컨텍스트(context) 정보 및 상기 메모리에 저장된 상기 메뉴 선택 이력에 기초하여 추천 메뉴를 포함하는 상기 가이드 정보를 표시하도록 상기 디스플레이를 제어하는 프로세서;를 포함하는, 전자 장치.
  2. 제1항에 있어서,
    상기 프로세서는,
    특정 뎁스의 메뉴가 선택된 후 임계 시간 동안 메뉴를 선택하는 추가 사용자 입력이 수신되지 않는 이벤트, 사용자 입력에 따라 메뉴가 변경되는 속도가 임계 속도 이상인 이벤트 또는 특정 뎁스의 메뉴가 선택된 후 상기 메뉴 선택이 취소되는 사용자 입력이 수신되는 이벤트 중 적어도 하나의 이벤트가 식별되면, 상기 가이드 정보의 제공이 필요한 것으로 식별하는, 전자 장치.
  3. 제1항에 있어서,
    상기 컨텍스트 정보는,
    상기 전자 장치 내부의 온도 정보, 조리 대상의 온도 정보, 특정 기능의 실행 여부에 대한 정보, 상기 전자 장치 내부의 이미지 정보 및 일시 정보 중 적어도 하나를 포함하는, 전자 장치.
  4. 제1항에 있어서,
    상기 메모리는,
    복수의 메뉴를 저장하고,
    상기 프로세서는,
    상기 적어도 하나의 메뉴에 대한 정보, 상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 상기 메모리에 저장된 복수의 메뉴 각각에 대응되는 가중치를 획득하고,
    상기 복수의 메뉴 각각에 대응되는 가중치에 기초하여 상기 추천 메뉴를 식별하는, 전자 장치.
  5. 제4항에 있어서,
    상기 프로세서는,
    상기 적어도 하나의 메뉴에 대한 정보에 기초하여 선택된 메뉴를 식별하고,
    상기 복수의 메뉴 중 상기 선택된 메뉴와 동일한 메뉴에 제1 서브 가중치를 할당하고,
    상기 복수의 메뉴 중 상기 선택된 메뉴와 유사한 메뉴에 제2 서브 가중치를 할당하고,
    상기 제1 서브 가중치 및 상기 제2 서브 가중치를 합산하여 상기 복수의 메뉴 각각에 대응되는 가중치를 획득하는, 전자 장치.
  6. 제5항에 있어서,
    상기 프로세서는,
    상기 복수의 메뉴 중 상기 컨텍스트 정보에 대응되는 메뉴에 제3 서브 가중치를 할당하고,
    상기 복수의 메뉴 중 상기 메뉴 선택 이력에 대응되는 메뉴에 제4 서브 가중치를 할당하고,
    상기 제1 서브 가중치, 상기 제2 서브 가중치, 상기 제3 서브 가중치 및 상기 제4 서브 가중치를 합산하여 상기 복수의 메뉴 각각에 대응되는 가중치를 획득하는, 전자 장치.
  7. 제1항에 있어서,
    상기 프로세서는,
    상기 가이드 정보의 제공이 필요한 것으로 식별되면, 상기 적어도 하나의 메뉴에 대한 정보, 상기 컨텍스트 정보, 및 상기 메뉴 선택 이력에 기초하여 상기 추천 메뉴를 식별하고,
    상기 추천 메뉴가 표시되는 위치에 기초하여 상기 추천 메뉴를 식별하기 위한 아이콘을 표시하도록 상기 디스플레이를 제어하는, 전자 장치.
  8. 제1항에 있어서,
    상기 프로세서는,
    상기 가이드 정보의 제공이 필요한 것으로 식별되면, 학습된 신경망 모델에 상기 전자 장치의 상기 적어도 하나의 메뉴에 대한 정보 및 상기 컨텍스트 정보를 입력하여 상기 추천 메뉴를 획득하고,
    상기 신경망 모델은,
    상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 학습되는, 전자 장치.
  9. 제1항에 있어서,
    상기 전자 장치는,
    조리물을 가열하는 히터를 포함하는 조리 장치이고,
    상기 프로세서는,
    상기 가이드 정보에 포함된 메뉴를 선택하는 사용자 입력이 수신되면, 상기 선택된 메뉴에 대응되는 기능을 수행하고,
    상기 선택된 메뉴에 대응되는 기능은,
    상기 선택된 메뉴의 조리 과정을 포함하는 텍스트를 표시하는 기능, 상기 선택된 메뉴의 조리 과정을 포함하는 이미지를 표시하는 기능, 상기 선택된 메뉴의 조리 과정을 수행하기 위해 상기 히터의 스케쥴을 설정하는 기능 중 적어도 하나를 포함하는, 전자 장치.
  10. 제9항에 있어서,
    상기 전자 장치는,
    상기 조리물의 온도를 센싱하기 위한 접촉식 온도 센서;를 포함하고,
    상기 프로세서는,
    상기 가이드 정보의 제공이 필요한 것으로 식별되면, 상기 접촉식 온도 센서를 통해 상기 조리물의 온도를 상기 컨텍스트 정보로서 획득하고,
    상기 적어도 하나의 메뉴에 대한 정보, 상기 조리물의 온도를 포함하는 상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 상기 추천 메뉴를 식별하는, 전자 장치.
  11. 전자 장치의 제어 방법에 있어서,
    제1 뎁스의 제1 메뉴 및 상기 제1 메뉴에 종속된 제2 뎁스의 제2 메뉴를 포함하는 메뉴 선택 이력을 저장하는 단계;
    어도 하나의 메뉴를 선택하는 사용자 입력이 수신되면, 상기 사용자 입력에 기초하여 가이드 정보의 제공이 필요한지 여부를 식별하는 단계; 및
    상기 가이드 정보의 제공이 필요한 것으로 식별되면, 상기 선택된 적어도 하나의 메뉴에 대한 정보, 상기 전자 장치의 현재 컨텍스트(context) 정보 및 상기 저장된 상기 메뉴 선택 이력에 기초하여 추천 메뉴를 포함하는 상기 가이드 정보를 표시하는 단계;를 포함하는, 제어 방법.
  12. 제11항에 있어서,
    상기 가이드 정보의 제공이 필요한지 여부를 식별하는 단계는,
    특정 뎁스의 메뉴가 선택된 후 임계 시간 동안 메뉴를 선택하는 추가 사용자 입력이 수신되지 않는 이벤트, 사용자 입력에 따라 메뉴가 변경되는 속도가 임계 속도 이상인 이벤트 또는 특정 뎁스의 메뉴가 선택된 후 상기 메뉴 선택이 취소되는 사용자 입력이 수신되는 이벤트 중 적어도 하나의 이벤트가 식별되면, 상기 가이드 정보의 제공이 필요한 것으로 식별하는, 제어 방법.
  13. 제11항에 있어서,
    상기 컨텍스트 정보는,
    상기 전자 장치 내부의 온도 정보, 조리 대상의 온도 정보, 특정 기능의 실행 여부에 대한 정보, 상기 전자 장치 내부의 이미지 정보 및 일시 정보 중 적어도 하나를 포함하는, 제어 방법.
  14. 제11항에 있어서,
    상기 제어 방법은,
    상기 적어도 하나의 메뉴에 대한 정보, 상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 상기 전자 장치에 저장된 복수의 메뉴 각각에 대응되는 가중치를 획득하는 단계; 및
    상기 복수의 메뉴 각각에 대응되는 가중치에 기초하여 상기 추천 메뉴를 식별하는 단계;를 더 포함하는, 제어 방법.
  15. 제14항에 있어서,
    상기 복수의 메뉴 각각에 대응되는 가중치를 획득하는 단계는,
    상기 적어도 하나의 메뉴에 대한 정보에 기초하여 선택된 메뉴를 식별하고,
    상기 복수의 메뉴 중 상기 선택된 메뉴와 동일한 메뉴에 제1 서브 가중치를 할당하고,
    상기 복수의 메뉴 중 상기 선택된 메뉴와 유사한 메뉴에 제2 서브 가중치를 할당하고,
    상기 제1 서브 가중치 및 상기 제2 서브 가중치를 합산하여 상기 복수의 메뉴 각각에 대응되는 가중치를 획득하는, 제어 방법.
  16. 제15항에 있어서,
    상기 복수의 메뉴 각각에 대응되는 가중치를 획득하는 단계는,
    상기 복수의 메뉴 중 상기 컨텍스트 정보에 대응되는 메뉴에 제3 서브 가중치를 할당하고,
    상기 복수의 메뉴 중 상기 메뉴 선택 이력에 대응되는 메뉴에 제4 서브 가중치를 할당하고,
    상기 제1 서브 가중치, 상기 제2 서브 가중치, 상기 제3 서브 가중치 및 상기 제4 서브 가중치를 합산하여 상기 복수의 메뉴 각각에 대응되는 가중치를 획득하는, 제어 방법.
  17. 제11항에 있어서,
    상기 제어 방법은,
    상기 가이드 정보의 제공이 필요한 것으로 식별되면, 상기 적어도 하나의 메뉴에 대한 정보, 상기 컨텍스트 정보, 및 상기 메뉴 선택 이력에 기초하여 상기 추천 메뉴를 식별하는 단계; 및
    상기 추천 메뉴가 표시되는 위치에 기초하여 상기 추천 메뉴를 식별하기 위한 아이콘을 표시하는 단계;를 더 포함하는, 제어 방법.
  18. 제11항에 있어서,
    상기 제어 방법은,
    상기 가이드 정보의 제공이 필요한 것으로 식별되면, 학습된 신경망 모델에 상기 전자 장치의 상기 적어도 하나의 메뉴에 대한 정보 및 상기 컨텍스트 정보를 입력하여 상기 추천 메뉴를 획득하는 단계;를 더 포함하고,
    상기 신경망 모델은,
    상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 학습되는, 제어 방법.
  19. 제11항에 있어서,
    상기 전자 장치는,
    조리물을 가열하는 히터를 포함하는 조리 장치이고,
    상기 제어 방법은,
    상기 가이드 정보에 포함된 메뉴를 선택하는 사용자 입력이 수신되면, 상기 선택된 메뉴에 대응되는 기능을 수행하는 단계;를 더 포함하고,
    상기 선택된 메뉴에 대응되는 기능은,
    상기 선택된 메뉴의 조리 과정을 포함하는 텍스트를 표시하는 기능, 상기 선택된 메뉴의 조리 과정을 포함하는 이미지를 표시하는 기능, 상기 선택된 메뉴의 조리 과정을 수행하기 위해 상기 히터의 스케쥴을 설정하는 기능 중 적어도 하나를 포함하는, 제어 방법.
  20. 제19항에 있어서,
    상기 전자 장치는,
    상기 조리물의 온도를 센싱하기 위한 접촉식 온도 센서;를 포함하고,
    상기 제어 방법은,
    상기 가이드 정보의 제공이 필요한 것으로 식별되면, 상기 접촉식 온도 센서를 통해 상기 조리물의 온도를 상기 컨텍스트 정보로서 획득하는 단계; 및
    상기 적어도 하나의 메뉴에 대한 정보, 상기 조리물의 온도를 포함하는 상기 컨텍스트 정보 및 상기 메뉴 선택 이력에 기초하여 상기 추천 메뉴를 식별하는 단계;를 더 포함하는, 제어 방법.

KR1020220003454A 2022-01-10 2022-01-10 전자 장치 및 그 제어 방법 KR20230108090A (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020220003454A KR20230108090A (ko) 2022-01-10 2022-01-10 전자 장치 및 그 제어 방법
PCT/KR2022/014342 WO2023132438A1 (ko) 2022-01-10 2022-09-26 전자 장치 및 그 제어 방법
CN202280071928.1A CN118176478A (zh) 2022-01-10 2022-09-26 电子装置及其控制方法
EP22918975.8A EP4369162A1 (en) 2022-01-10 2022-09-26 Electronic apparatus and controlling method thereof
US17/984,076 US20230221834A1 (en) 2022-01-10 2022-11-09 Electronic apparatus and controlling method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220003454A KR20230108090A (ko) 2022-01-10 2022-01-10 전자 장치 및 그 제어 방법

Publications (1)

Publication Number Publication Date
KR20230108090A true KR20230108090A (ko) 2023-07-18

Family

ID=87073886

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220003454A KR20230108090A (ko) 2022-01-10 2022-01-10 전자 장치 및 그 제어 방법

Country Status (2)

Country Link
KR (1) KR20230108090A (ko)
WO (1) WO2023132438A1 (ko)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101562792B1 (ko) * 2009-06-10 2015-10-23 삼성전자주식회사 목표 예측 인터페이스 제공 장치 및 그 방법
KR20190064042A (ko) * 2017-11-30 2019-06-10 삼성에스디에스 주식회사 상황 인식 기반 추천 방법 및 그 장치
WO2020018592A1 (en) * 2018-07-17 2020-01-23 Methodical Mind, Llc. Graphical user interface system
KR20200104592A (ko) * 2019-02-27 2020-09-04 주식회사 포트럭테이블 큐레이션엔진을 이용한 추천음식콘텐츠 미디어 제공시스템
KR102242648B1 (ko) * 2019-11-06 2021-04-21 (주)코로닉스 인공지능 복합조리시스템

Also Published As

Publication number Publication date
WO2023132438A1 (ko) 2023-07-13

Similar Documents

Publication Publication Date Title
CN112771472B (zh) 提供实时产品交互协助的系统和方法
EP3198376B1 (en) Image display method performed by device including switchable mirror and the device
KR102411124B1 (ko) 전자 장치 및 전자 장치에서 외부 장치를 이용한 태스크 수행 방법
US10248189B2 (en) Presentation of virtual reality object based on one or more conditions
US20160093081A1 (en) Image display method performed by device including switchable mirror and the device
AU2013360585B2 (en) Information search method and device and computer readable recording medium thereof
CN108354587A (zh) 个性化皮肤诊断和皮肤护理
JP6272502B2 (ja) 携帯型デバイス上のユーザ操作モードを識別する方法及び携帯型デバイス
CN107402687A (zh) 场境任务快捷方式
CN110546630A (zh) 用于提供信息的方法和支持该方法的电子装置
US11226734B1 (en) Triggering multiple actions from a single gesture
CN105009036A (zh) 管理用户装置的传感信息
CN109324659A (zh) 用于检测多屏幕设备的面向用户的屏幕的方法和装置
CN108268194A (zh) 应用app频道菜单的显示方法、装置和移动终端
WO2016061326A1 (en) Suggesting activities
CN109634489A (zh) 发表评论的方法、装置、设备及可读存储介质
TWI467415B (zh) 姿勢輸入系統中推論導航意圖的方法
CN106204185A (zh) 移动终端及其控制方法
TW201543269A (zh) 用於電子裝置之操控噪音為基的姿勢控制
CN105446619A (zh) 用于识别物体的装置和方法
US9483658B2 (en) Display device
CN107908343A (zh) 一种信息展示方法及装置
CN108292479A (zh) 壳体以及系统
KR20230108090A (ko) 전자 장치 및 그 제어 방법
US20090183074A1 (en) Sound Display Devices