WO2019045228A1 - 조리기기 및 조리 시스템 - Google Patents

조리기기 및 조리 시스템 Download PDF

Info

Publication number
WO2019045228A1
WO2019045228A1 PCT/KR2018/005824 KR2018005824W WO2019045228A1 WO 2019045228 A1 WO2019045228 A1 WO 2019045228A1 KR 2018005824 W KR2018005824 W KR 2018005824W WO 2019045228 A1 WO2019045228 A1 WO 2019045228A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
cooking
user
server
unit
Prior art date
Application number
PCT/KR2018/005824
Other languages
English (en)
French (fr)
Inventor
신우철
조남국
천은진
전설희
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to EP18852406.0A priority Critical patent/EP3660659A4/en
Priority to US16/643,783 priority patent/US11501771B2/en
Publication of WO2019045228A1 publication Critical patent/WO2019045228A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C7/00—Stoves or ranges heated by electric energy
    • F24C7/08—Arrangement or mounting of control or safety devices
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C7/00—Stoves or ranges heated by electric energy
    • F24C7/08—Arrangement or mounting of control or safety devices
    • F24C7/082—Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination
    • F24C7/085—Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination on baking ovens
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0706—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
    • G06F11/0736—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment in functional embedded systems, i.e. in a data processing system designed as a combination of hardware and software dedicated to performing a certain function
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/903—Querying
    • G06F16/9035—Filtering based on additional data, e.g. user or group profiles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/12—Hotels or restaurants
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/28—Constructional details of speech recognition systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H04L67/30—Profiles
    • H04L67/306—User profiles
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B1/00—Details of electric heating devices
    • H05B1/02—Automatic switching arrangements specially adapted to apparatus ; Control of heating devices
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B6/00—Heating by electric, magnetic or electromagnetic fields
    • H05B6/64—Heating using microwaves
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B6/00—Heating by electric, magnetic or electromagnetic fields
    • H05B6/64—Heating using microwaves
    • H05B6/6447—Method of operation or details of the microwave heating apparatus related to the use of detectors or sensors
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/221—Announcement of recognition results
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Definitions

  • the present invention relates to a cooking apparatus and a cooking system for cooking food using voice.
  • a cooking device is a device that heats and cooks food, and is largely divided into a method of generating heat for heating food using electricity and a method of generating heat for heating food by burning gas.
  • Such a cooking apparatus can be classified into a gas range, an oven, and an electric range.
  • Such a cooking device includes an input unit for inputting a command for cooking food, and further includes a display unit for displaying operation information.
  • the user sets the cooking temperature and cooking time for cooking the food by directly pressing a plurality of setting buttons provided on the input unit of the cooking device, or selects one of a plurality of menu buttons I chose one menu.
  • the cooking temperature and the cooking time set by the user are important factors for determining the taste of the food. If the set cooking temperature is too low or too high, or if the set cooking time is too short or long, have.
  • Another aspect provides a cooking apparatus and a cooking system for recommending at least one of menu and recipe information based on previously stored user information and performing cooking of food based on cooking information corresponding to recipe information.
  • Another aspect provides a cooking apparatus and a cooking system which output error information of a cooking device provided from a server and action information on an error.
  • a cooking apparatus comprising: a communication unit for performing communication with a server for performing speech recognition and storing cooking information for each menu; A heating unit for generating heat for heating the food; A sound input unit for receiving a user's voice; And a control unit for controlling the communication unit to transmit the voice data corresponding to the received voice to the server, receiving the cooking information transmitted from the server, and controlling the operation of the heating unit based on the received cooking information; And a sound output unit for outputting the voice data transmitted from the server by voice.
  • the cooking device further includes an input unit for receiving a command for performing a voice recognition mode, and the control unit includes activating operations of the sound input unit and the sound output unit when a voice recognition mode execution command is received.
  • the cooking apparatus further includes a circulation unit for circulating the heat generated by the heating unit, and the control unit includes controlling the operation of the circulation unit based on the cooking information.
  • the cooking device further includes an input unit for receiving a setting instruction of user information, and the control unit activates the operation of the sound input unit when receiving the setting instruction of the user information, and responds to the sound received at the operation of the sound input unit And transmitting the voice data to the server as user information.
  • the user information of the cooking appliance includes at least one of the identification information of the user, the schedule information of the user, the religion information of the user, and the address information of the user.
  • the cooking apparatus further includes a display unit for displaying the received cooking information, and the control unit controls the display unit to display the received recipe information when the recipe information is received from the server.
  • a cooking apparatus comprising: a door for opening and closing a cooking chamber; An opening / closing detector for detecting an opening / closing state of the door; And a control unit for controlling the sound output unit to output a buzzer corresponding to the start of cooking if it is determined that the door is closed and food is received in the cooking chamber .
  • a cooking system comprising: a cooking device for inputting and outputting a voice, transmitting voice data corresponding to the voice, and cooking food in the cooking chamber; And a cooking device, and when voice data is received from the cooking device, acquiring the user's request information, query information, and reaction information corresponding to the received voice data, and based on at least one of the request information and the reaction information, A server for acquiring the information, transmitting the obtained cooking information to the cooking device, and transmitting response information corresponding to the query information to the cooking device.
  • the cooking information of the cooking system includes the cooking temperature and the cooking time of the cooking appliance.
  • a server of a cooking system comprising: a first conversion unit for converting received voice data into text data; A natural language recognition unit for performing natural language recognition on the converted text data, acquiring user's request information, reaction information and query information based on natural language recognition, and generating response information corresponding to the acquired query information; A data portal unit for transmitting the obtained request information to a recipe providing server and receiving recipe information from a recipe providing server; And a second conversion unit for converting the generated response information into voice data and transmitting the converted voice data to the cooking device.
  • the server of the cooking system further includes an error counterpart which obtains countermeasure information corresponding to the error information of the cooking device and transmits the obtained countermeasure information to the cooking device.
  • a server of a cooking system comprising: an information storage unit for storing user information; And a control unit for acquiring optimum recipe information from a plurality of recipe information based on the request information and the user information, and transmitting the obtained optimum recipe information to the cooking device.
  • the user information of the cooking system includes at least one of the identification information of the user, the schedule information of the user, the religion information of the user, and the address information of the user.
  • a cooking system comprising: a cooking device for inputting and outputting sounds, transmitting sound data corresponding to sounds, and cooking food in the cooking chamber; And a control unit that performs communication with the cooking device, performs voice recognition based on the received voice data when the voice data is received from the cooking device, transmits the response information corresponding to the voice recognition to the cooking device, A first server for acquiring a menu required by the user and transmitting the cooking time and the cooking temperature of the obtained menu to the cooking appliance; And a second server for storing at least one recipe information for the plurality of menus, communicating with the first server, and transmitting at least one recipe information to the first server.
  • the first server of the cooking system stores at least one of user identification information, user's schedule information, user's religion information, user's address information, and preference information as user information, 2 < / RTI > servers.
  • a second server of a cooking system comprising: a plurality of recipe information obtaining means for obtaining a plurality of recipe information for a menu requested by a user, acquiring optimal recipe information from a plurality of recipe information based on user information, And sending the information to the first server.
  • a first server of the cooking system comprises transmitting optimal recipe information to the cooking appliance.
  • a cooking apparatus of a cooking system comprising: a detecting unit for detecting an operation state of a plurality of loads; And an error determination unit for determining whether the error state is an error state based on the detection information of the detection unit and for transmitting the error information to the first server when the error state is determined.
  • a first server of the cooking system includes obtaining action information corresponding to the received error information when the error information is received and transmitting the obtained action information to the cooking device.
  • a first server of a cooking system includes acquiring preference information of a user based on a cooking history of the cooking appliance, and the preference information includes at least one of menu name, cooking amount, baking degree, moisture content, And texture.
  • a cooking apparatus of a cooking system comprising: a sound input unit for receiving a voice signal for a voice of a user; A voice storage unit for storing the received voice signal; A preprocessor for removing noise by preprocessing the stored speech signal; And a sound output unit for outputting the voice data transmitted from the first server by voice.
  • a cooking apparatus of a cooking system comprising: converting information on incommunicability into voice data and outputting the voice data by voice when it is determined that communication with the first server is impossible;
  • the present invention analyzes a voice based on a natural language uttered by a user in a server (i.e., a cloud) to acquire user's request information, acquires cooking information of the food based on the obtained request information and predetermined user information, By controlling the operation of the cooking appliance based on the information, it is possible to provide delicious and good food to the user.
  • a server i.e., a cloud
  • the present invention can improve convenience and satisfaction of the user with respect to the cooking device.
  • the present invention can acquire user's preference information for each menu through the history and provide a user-customized menu and recipe based on the acquired preference information for each menu.
  • the present invention can minimize the buttons in the cooking appliance by acquiring the user's request information through voice recognition, thereby reducing the manufacturing cost of the cooking appliance, and the convenience and ease of operation of the user due to the simplification of the buttons Can be improved.
  • the present invention inputs the operation command of the cooking device by voice, the user can easily use the cooking device even if the user has difficulty in sight.
  • the error information and the action information of the cooking device are received from the server and outputted as a voice, the user can easily recognize the error and can take measures against the error.
  • the error information is processed by the server according to the present invention, the error can be quickly and conveniently performed.
  • FIG. 1 is an illustration of a cooking system including a cooking device according to an embodiment.
  • FIG. 2 is an external view of a cooking apparatus according to an embodiment.
  • FIG. 3 is an illustration of a cooking chamber of the cooking appliance shown in Fig. 2;
  • FIG. 4 is a side view of the cooking apparatus shown in Fig.
  • FIG. 5 is a control configuration diagram of the cooking apparatus according to the embodiment.
  • FIG. 6 is a control configuration diagram of a first server 300 that performs communication with a cooking device according to an embodiment.
  • FIG. 7 is a diagram illustrating an example of information transmission / reception of a cooking system including a cooking device according to an embodiment.
  • 8A and 8B are flowcharts showing the cooking operation control of the cooking apparatus according to the embodiment.
  • 9 to 12 are diagrams for explaining conversation with the user for controlling the cooking operation of the cooking appliance according to the embodiment.
  • FIG 13 is an error control flowchart of the cooking apparatus according to the embodiment.
  • FIG. 14 is an exemplary diagram illustrating a dialogue with a user regarding an error occurrence of a cooking device according to an embodiment.
  • connection when a part is referred to as being "connected" to another part, it includes not only the case directly connected but also the case where the connection is indirectly connected, and the indirect connection includes connection through the wireless communication network do.
  • first, second, etc. are used to distinguish one element from another, and the elements are not limited by the above-mentioned terms.
  • FIG. 1 is an illustration of a cooking system including a cooking device according to one embodiment.
  • the cooking system 1 includes a cooking appliance 100, an access point (AP) 200, a first server 300, and a second server 400.
  • AP access point
  • the cooking apparatus 100 is a home appliance that is used in a groove and performs a cooking operation for cooking food based on cooking information transmitted from a first server 300 at a remote place.
  • the cooking information may include a cooking time and a cooking temperature.
  • the cooking apparatus 100 transmits the user's request information corresponding to the voice input by the user to the first server 300, and when the cooking information is received from the first server 300, And controls the operation of various loads based on the information to cook the food in the cooking chamber.
  • the request information may include a menu name, and may include a cooking amount, a cooking method, a number of people, and may include preference information such as degree of baking, moisture content, taste, taste level and the like.
  • the cooking appliance 100 transmits the query information of the user corresponding to the voice inputted by the user to the first server 300, and when the response information is received from the first server 300, It is also possible to output a voice.
  • the cooking apparatus 100 receives the voice of the user and outputs the voice according to the command of the first server. That is, the cooking appliance 100 performs only the function of inputting and outputting voice, and performing the voice recognition based on the voice input to the cooking device is performed by the first server. Also, the first server generates response information corresponding to speech recognition and transmits the response information to the cooking appliance so that a response voice is output from the cooking appliance.
  • An access point (AP) 200 is a device capable of using the Internet. It is connected to the Internet line in the home and transmits a wired signal or a wireless signal, so that a plurality of home appliances share one Internet line and access the Internet simultaneously .
  • the router (AP) 200 has an internet IP address assigned from an Internet service provider and plays a role of allowing a plurality of home appliances to share one IP address to access the Internet.
  • the router 200 stores a unique IP address of each home appliance in the home to connect to the Internet.
  • the router 200 automatically allocates a unique IP address (virtual IP address or private IP address) to the cooking appliance 100 so that the cooking appliance 100 can be connected to the Internet do.
  • a unique IP address virtual IP address or private IP address
  • the router 200 performs communication with the cooking device 100 and the first server 300.
  • the router 200 can transmit various kinds of information of the cooking appliance 100 to the first server 300, and can transmit various information of the first server 300 to the cooking appliance 100.
  • the cooking system may further include a terminal (not shown) for performing communication between the cooking apparatus 100 and the first server 300. That is, the cooking apparatus 100 is connected to the Internet through a communication network of a subscribed communication company using a terminal, not a router, and performs communication with the first server 300.
  • the terminal may be implemented as a computer or a portable terminal that can access the cooking device through the network.
  • the computer includes, for example, a notebook computer, a desktop computer, a laptop PC, a tablet PC, a slate PC, and the like, each of which is equipped with a WEB Browser.
  • PDS Personal Digital Assistant
  • IMT International Mobile Telecommunication
  • PDS Personal Digital Assistant
  • CDMA Code Division Multiple Access
  • W-CDMA W-CDMA
  • WiBro Wireless Broadband Internet
  • a wireless communication device and a wearable device such as a watch, a ring, a bracelet, a bracelet, a necklace, a pair of glasses, a contact lens, or a head-mounted-device (HMD).
  • HMD head-mounted-device
  • the first server 300 is a device for storing, integrating and outputting various kinds of information of a cooking appliance.
  • the first server 300 stores request information and user information of the cooking appliance corresponding to the voice data received via the Internet, Acquires cooking information based on at least one of the user information, and outputs the obtained cooking information.
  • the first server 300 may store user information and identification information of cooking utensils per user.
  • the user information includes basic information such as the user's ID, sex, and name, living environment information such as address and religion of the user, and schedule information such as the user's birthday and anniversary.
  • the user information may include preference information such as taste, texture and the like preferred by the user, may further include user's allergy information, and may further include user's gender information and user's job information.
  • the first server 300 may be connected to the router 200 in the home via the Internet.
  • the first server 300 analyzes the voice data from the cooking device 100 to acquire the user's request information and query information, transmits the cooking information corresponding to the obtained request information to the cooking device, When the query information is acquired, it is also possible to transmit the response information corresponding to the acquired query information to the cooking device.
  • the first server 300 may generate the user's preference information based on the history of the cooking device and store the generated preference information.
  • the first server 300 can transmit the recommendation menu to the cooking device based on at least one of the request information and the user information.
  • the first server 300 acquires the optimum recipe information based on the recommendation menu, and extracts the cooking information from the obtained recipe information It is also possible to transmit acquired cooking information to the cooking device.
  • the first server 300 may communicate with the second server 400 via the Internet and may receive recipe information corresponding to a menu from the second server 400.
  • the second server 400 communicates with the first server 300 through the Internet, acquires recipe information corresponding to the request of the first server 300, and transmits the obtained recipe information to the first server 300 send.
  • the second server 400 stores a plurality of menus, and stores at least one recipe information for each menu.
  • the recipe information may include a menu, a material, a cooking time, a cooking temperature, and the like.
  • the recipe information may further include a level of taste for each taste such as spicy, sweet, sour, bitter, salty taste.
  • the second server 400 may periodically update the menu-specific recipe information.
  • FIG. 2 is an external view of the cooking apparatus according to the embodiment
  • FIG. 3 is an illustration of a cooking chamber of the cooking apparatus shown in FIG. 2
  • FIG. 4 is a side view of the cooking apparatus shown in FIG.
  • the cooking apparatus 100 includes a main body 100a that forms an outer appearance.
  • a cooking chamber 100b for forming a cooking cavity is formed inside the main body 100a.
  • the cooking chamber 100b may be formed in a box shape, and may include an opening formed in the front surface thereof for receiving and discharging food.
  • a tray capable of placing food can be detachably mounted in the cooking chamber.
  • the door of the cooking chamber may be provided with a door 120 for opening and closing the cooking chamber 100b.
  • the door 110 may be hinged to the main body 100a so as to be rotatable with respect to the main body 100a.
  • the door 110 may be provided with a handle 111 held by a user and may further include a sight window for visually checking the inside of the cooking chamber 100b from the outside of the cooking chamber 100b in a state that the door 110 is closed have.
  • the cooked food is heated by the heat generated by the heating unit 140 .
  • the cooking apparatus 100 includes a user interface 120 for receiving operation information and outputting operation information.
  • the user interface 120 includes an input unit 121 that receives operation information of a cooking device operated by a user and a display unit 122 that outputs operation information of the cooking device.
  • the input unit 121 of the user interface may include a first button for receiving the cooking start and cooking stop commands and a second button for receiving the voice recognition mode.
  • the first button and the second button may be provided as physical buttons or touch buttons, and receive on and off commands according to the number of inputs.
  • the input unit 121 of the user interface may further include a button for receiving a cooking pause command.
  • the input unit 121 and the display unit 122 of the user interface may be provided with a touch screen in which the touch panel and the display panel are integrated.
  • the input unit 121 of the user interface may be provided as a dial type.
  • the cooking apparatus is provided in the main body 100a and further includes a dialog interface 130 for conducting a conversation with a user.
  • the conversation interface 130 includes a sound input unit 131 for receiving the user's voice and a sound output unit 132 for outputting the guide information and the response information by voice.
  • the sound input unit 131 may include a microphone or a microphone array
  • the sound output unit 132 may include a speaker
  • the sound input unit 131 and the sound output unit 132 may be spaced apart from each other by a predetermined distance to reduce signal interference. That is, the sound input unit 131 and the sound output unit 132 are spaced apart from each other, so that the output of the speaker can be prevented from interfering with the microphone.
  • the cooking apparatus 100 includes a heating unit 140 disposed adjacent to the upper side of the cooking chamber 100b and generating heat to generate heat into the cooking chamber 100b, And a circulation unit 150 for circulating the air.
  • the heating unit 140 may be a heater.
  • the heating unit 140 may include a plurality of heaters.
  • the cooking device may further include a magnetron (not shown) that generates electromagnetic waves to generate heat by rotation of water molecules in the food and a steam unit (not shown) that generates steam at a predetermined temperature or higher.
  • a magnetron not shown
  • a steam unit not shown
  • the circulation unit 150 circulates the air inside the cooking chamber when the food is cooked.
  • the circulation unit 150 includes a circulation fan 151 disposed on the back surface of the cooking chamber 100b to circulate air in the cooking chamber 100b and a circulation motor 152 for driving the circulation fan 151 .
  • a plurality of circulating fans 151 may be provided, and a plurality of circulating fans 151 may be disposed vertically in the cooking chamber.
  • the circulation unit 150 can selectively rotate at least one circulation fan among the plurality of circulation fans according to the position where the food is placed.
  • the plurality of circulating fans may be a centrifugal fan or a turbo fan which sucks air from the upper side and discharges the air in the radial direction.
  • the main body 100a of the cooking apparatus 100 further includes an electric field chamber 100c disposed adjacent to the cooking chamber 100b and having a space independent from the cooking chamber 100b and provided with various electric parts (not shown) such as a circuit board do.
  • the electric room 100c is provided with an exhaust duct 161 and air in the cooking chamber 100b sucked and sucked in air from the cooking chamber 100b and air in the electric room 100c to the front of the main body 100a
  • the cooling unit 160 may be disposed.
  • the cooling unit 160 may include a cooling fan 162 and a cooling motor 163 for driving the cooling fan 162.
  • FIG. 5 is a control configuration diagram of the cooking apparatus according to the embodiment.
  • the cooking apparatus 1 includes a user interface 120, a dialog interface 130, a plurality of loads 140, 150 and 163, a detection unit 170, a first control unit 180 and a first communication unit 190 .
  • the user interface 120 includes an input unit 121 that receives operation information of a cooking device operated by a user and a display unit 122 that outputs operation information of the cooking device.
  • the operation information includes a cooking mode and cooking information.
  • the cooking information includes a cooking temperature and a cooking time, and the cooking time includes a total cooking time, and may further include at least one of a cooking start time, a cooking time, a remaining time, and a cooking end time.
  • the total cooking time may include the preheating time of the cooking appliance, the main cooking time, and the cooling time.
  • the operation information is information on the current operation state of the cooking apparatus, and may further include information such as preheating, main cooking, and cooling.
  • the input unit 121 receives a power-on command, a power-off command, a voice recognition mode on command, and a voice recognition mode off command of the cooking appliance.
  • the input unit 121 can receive an action command for an error occurrence of the cooking appliance, and can also receive an AS application command.
  • the display unit 122 displays performance information of a voice recognition mode, a cooking mode, and cooking information.
  • the display unit 122 can display action information on error information, display a menu being cooked, or display recipe information.
  • the recipe information may include a menu name, material information, preparation information of pre-cooking food, and cooking information.
  • the cooking information may include a cooking temperature and a cooking time.
  • the conversation interface 130 performs a conversation with the user.
  • the conversation interface 130 includes a sound input unit 131 for receiving the user's voice and a sound output unit 132 for outputting the guide information and the response information by voice.
  • the sound input unit 131 may include a microphone or a microphone array
  • the sound output unit 132 may include a speaker
  • the sound output unit 132 can output, as a sound, cooking start information, cooking completion information, error information, action information, recipe information, and the like.
  • the plurality of loads 140, 150, and 163 are supplied with power from a power source unit (not shown), and convert the supplied power into energy for cooking food.
  • the plurality of loads includes a heating unit 140 for generating heat for heating the food, and further includes a circulation unit 150 for circulating heat inside the cooking chamber. After the cooking is completed, the inside of the cooking chamber is cooled And a cooling unit 160 for cooling the water.
  • the heating unit 140 may be a heater, a magnetron, or a steam unit.
  • the circulation unit 150 may include a circulation fan and a circulation motor
  • the cooling unit 160 may include a cooling fan and a motor 163 for cooling.
  • the plurality of loads may include at least one of a heater, a magnetron, a steam part, a cooling motor, and a circulation motor.
  • the detection unit 170 detects information on the cooking state of the cooking apparatus.
  • the detecting unit 170 may include an open / close detecting unit that detects the open / closed state of the door of the cooking device, and an object detecting unit that detects the presence of the object in the cooking chamber to determine whether or not the food is received in the cooking chamber.
  • the open / close detection unit may include a contact type sensor or a non-contact type sensor.
  • the opening / closing detecting portion may be a push type (for example, a limit switch, a micro switch, or the like).
  • the opening / closing detection unit may be an optical sensor or a proximity sensor.
  • the detecting unit 170 may further include a cooking chamber temperature detecting unit for detecting the temperature of the cooking chamber and a temperature detecting unit for detecting the temperature of the food.
  • the temperature detecting unit and the food temperature detecting unit of the cooking chamber may include, but are not limited to, a RTD thermometer, a thermistor thermometer, a thermocouple thermometer, or an IC thermometer.
  • the first control unit 180 receives signals from the input unit 121 and the sound input unit 131 and generates a first communication unit and a plurality of loads 140, 150, and 163, a sound output unit 132, And controls the operation of the display unit 122.
  • the first control unit 180 includes a signal receiving unit 181, an audio storage unit 182, a preprocessing unit 183, an error determination unit 184, and an operation control unit 185.
  • the signal receiving unit 181 receives signals corresponding to the power on command, the power off command, the voice recognition mode on command, and the voice recognition mode off command input to the input unit 121, And transmits it to the control unit 185.
  • the signal receiving unit 181 may receive a signal corresponding to a setting command of user information through the input unit 121.
  • the signal receiving unit 181 transmits a voice signal corresponding to the user's voice input to the sound input unit 131 to the voice storage unit 182.
  • the voice storage unit 182 stores the voice signal and transmits the stored voice signal to the preprocessing unit 183.
  • the voice storage unit 182 may be a nonvolatile memory device such as a cache, a read only memory (ROM), a programmable ROM (PROM), an erasable programmable ROM (EPROM), an electrically erasable programmable ROM (EEPROM) But is not limited to, a volatile memory device such as a RAM (Random Access Memory) or a storage medium such as a hard disk drive (HDD) and a CD-ROM.
  • ROM read only memory
  • PROM programmable ROM
  • EPROM erasable programmable ROM
  • EEPROM electrically erasable programmable ROM
  • the voice storage unit may be a memory implemented as a separate chip from the above-described processor in association with the first control unit, and may be implemented as a single chip with the processor
  • the preprocessing unit 183 processes the voice signal to remove noise in the voice signal and transmits voice data corresponding to the voice signal from which noise has been removed to the first communication unit 190.
  • the error determination unit 184 determines whether the cooking appliance is in an error state based on the detection information detected through the detection unit 170 before the cooking operation of the cooking appliance and during the cooking operation. Communication unit 190, and transmits the normal state information to the operation control unit 185 when the normal state is determined.
  • the error state may include a door open state, a food undeclared state, a cooking chamber overheated state, a circulating fan non-operating state, a cooling fan non-operating state, and the like.
  • the operation control unit 185 activates the operation of various constituent units.
  • the sound control unit 185 controls the sound input unit 131 and the sound output unit 132 of the voice recognition mode, and deactivates the operations of the sound input unit 131 and the sound output unit 132 when a signal corresponding to the off command of the voice recognition mode is received.
  • the operation control unit 185 can conduct a conversation for cooking with the first server 300 if the voice data corresponding to the received voice is a trigger voice.
  • the operation control unit 185 determines whether the food is received in the cooking chamber based on the detection information of the detection unit 170. If it is determined that the food is received, the operation control unit 185 determines whether the door is closed. And controls the operation of a plurality of loads based on the cooking information received through the first communication unit 190.
  • the operation control unit 185 may transmit operation performance information corresponding to the cooking information to the first server. That is, the operation control unit 185 informs the first server that the cooking operation is performed based on the cooking information provided by the first server.
  • the operation control unit 185 activates the sound input unit 131 when receiving a signal corresponding to the user information setting command and transmits the voice data corresponding to the received voice to the first server 300, May be transmitted together.
  • the operation control unit 185 controls the operation of the heating unit 140 and controls the operation of the circulation unit based on the cooking information received through the first communication unit 190. When it is determined that the cooking is completed, And controls the operation.
  • the operation control unit 185 controls the ON operation of the heating unit so that the temperature of the cooking chamber detected by the cooking chamber temperature detecting unit (not shown) reaches the received cooking temperature, and controls the ON operation of the heating unit based on the temperature of the cooking chamber 100b detected by the cooking chamber temperature detecting unit Off operation of the heating unit 140 so that the cooking chamber 100b maintains the preset cooking temperature and counts the elapsed time during the cooking and controls the heating operation of the heating unit when the counted elapsed time reaches the cooking time .
  • the operation control unit 185 controls the operation of the circulation unit during the cooking so that the heat inside the cooking chamber moves. That is, the operation control unit 185 controls the circulation motor 152 to uniformly deliver the high-temperature air generated by the heating unit 140 to the inside of the cooking chamber 110.
  • the operation control unit 185 controls the driving of the cooling motor 163 during the cooking operation so that the electric field chamber can be cooled, thereby protecting the electric components provided in the electric field chamber.
  • the operation control unit 185 operates the cooling motor of the cooling unit to lower the temperature inside the cooking chamber.
  • the operation control unit 185 can determine whether the cooking chamber is in an overheated state or not and detect whether the cooling fan or the circulation fan is in the error state or the steady state based on the detection information of the detection unit 170 during the cooking operation.
  • the operation control unit 185 controls the operation of the sound output unit 132 to output a voice based on the received voice data when the voice data is received through the first communication unit.
  • the voice data may be voice data corresponding to the response information, voice data corresponding to the action information, voice data corresponding to the guidance information, and voice data corresponding to the recipe information.
  • the first control unit 180 controls the first communication unit to communicate with the first server, and transmits the identification information of the cooking device to the first server.
  • the first control unit 180 periodically checks the Internet connection state and may output the communication impossibility information through the display unit 122 or the sound output unit 132 when it is determined that the Internet connection is impossible.
  • the first control unit 180 may further include a conversion unit (not shown, TTS) for converting the text data into voice data.
  • TTS conversion unit
  • the first control unit 180 converts the incommunicable information into voice data using the conversion unit, And controls the sound output section to output.
  • the first control unit includes a memory (not shown) for storing data for a program reproducing the algorithm or algorithm for controlling the operation of the components in the cooking apparatus, and a processor (not shown) for performing the above- Not shown).
  • the memory and the processor may be implemented as separate chips. Alternatively, the memory and the processor may be implemented on a single chip.
  • the first controller 180 may be a CPU, an MCU, or a processor.
  • the first control unit 180 controls a control program for controlling the cooking appliance 100 and a graphical user interface (GUI) associated with an application downloaded from a server or provided by a manufacturer, images for providing a GUI, Databases or related data.
  • GUI graphical user interface
  • the first communication unit 190 communicates with the first server 300 through the router 200 and transmits the voice data to the first server 300 based on the command of the first control unit, 300 to the operation control unit 185 of the first control unit 180.
  • the operation control unit 185 of the first control unit 180 receives the received voice data.
  • the first communication unit 190 transmits the received cooking information to the operation control unit 185 of the first control unit 180 when the cooking information is received from the first server 300.
  • the first communication unit 190 may include one or more components that enable communication with an external first server, and may include at least one of a short-range communication module, a wired communication module, and a wireless communication module .
  • the short-range communication module uses a wireless communication network, such as a Bluetooth module, an infrared communication module, an RFID (Radio Frequency Identification) communication module, a WLAN (Wireless Local Access Network) communication module, an NFC communication module, and a Zigbee communication module, And may include various short range communication modules for transmitting and receiving.
  • a wireless communication network such as a Bluetooth module, an infrared communication module, an RFID (Radio Frequency Identification) communication module, a WLAN (Wireless Local Access Network) communication module, an NFC communication module, and a Zigbee communication module, And may include various short range communication modules for transmitting and receiving.
  • the wired communication module may include various wired communication modules such as a local area network (LAN) module, a wide area network (WAN) module or a value added network (VAN) , A high definition multimedia interface (HDMI), a digital visual interface (DVI), a recommended standard 232 (RS-232), a power line communication, or a plain old telephone service (POTS).
  • LAN local area network
  • WAN wide area network
  • VAN value added network
  • HDMI high definition multimedia interface
  • DVI digital visual interface
  • RS-232 recommended standard 232
  • POTS plain old telephone service
  • the wireless communication module may be a GSM (Global System for Mobile Communication), a CDMA (Code Division Multiple Access), a WCDMA (Wideband Code Division Multiple Access) ), Time Division Multiple Access (TDMA), Long Term Evolution (LTE), and the like.
  • GSM Global System for Mobile Communication
  • CDMA Code Division Multiple Access
  • WCDMA Wideband Code Division Multiple Access
  • TDMA Time Division Multiple Access
  • LTE Long Term Evolution
  • FIG. 6 is a control configuration diagram of a first server 300 that performs communication with a cooking device according to an embodiment.
  • the first server 300 includes a second communication unit 310 and a second control unit 320.
  • the first server 300 may further include an input unit (not shown) and a display unit (not shown).
  • the second communication unit 310 communicates with the early device 100 through the router 200.
  • the second communication unit 310 transmits and receives voice data between the cooking device 100 and the first server 300 and transmits the cooking information to the cooking device 100 according to a command from the second control unit.
  • the second communication unit 310 also communicates with the second server 400 providing the recipe.
  • the second communication unit 310 transmits the request information of the user to the second server and transmits the received recipe information to the second control unit when the recipe information is received from the second server.
  • the second communication unit 310 may transmit the user information together with the request information.
  • the second communication unit 310 communicates with the early device 100 through a terminal (not shown).
  • the second communication unit 310 can receive the user information from the terminal and receive the identification information of the cooking device.
  • the second control unit 320 acquires the user's request information and query information based on the received voice data, acquires the cooking information corresponding to the request information when the request information is acquired, and transmits the obtained cooking information to the cooking device 2 communication unit, generates response information corresponding to the inquiry information, and controls the second communication unit to transmit the generated response information to the cooking appliance.
  • the second control unit 320 can acquire the user's request information from the conversation information with the user until the cooking start instruction is input from the user.
  • the conversation information may include response information of the first server and response information of the user to the response of the first server.
  • the second control unit can obtain the request information of the user from the response information and the response information corresponding to the response information.
  • the second control unit 320 may acquire recipe information corresponding to the request information and control the second communication unit to transmit the obtained recipe information to the cooking appliance.
  • the recipe information may include a menu name, material information, preparation information of pre-cooking food, and cooking information.
  • the cooking information may include a cooking temperature and a cooking time.
  • the second control unit 320 acquires the optimum recipe information from a plurality of recipes based on the user's request information received from the cooking device and the previously stored user information, and transmits the obtained recipe information to the cooking device.
  • the second controller 320 transmits the cooking temperature and the cooking time for pizza to the cooking appliance as cooking information.
  • the second controller 320 transmits the cooking temperature and the cooking time for cooking the vegetable pizza to the cooking appliance as the cooking information.
  • the second control unit 320 transmits 'recipe information of vegetable pizza' to the cooking appliance, If the information is 'start cooking', the cooking temperature and cooking time of the vegetable pizza are transmitted to the cooking device as cooking information.
  • the second control unit 320 transmits 'recipe information of one-person vegetable pizza' to the cooking device . And if the user's request information is 'cooking start', the cooking temperature and the cooking time of the single-serving vegetable pizza are transmitted as cooking information to the cooking appliance.
  • the second control unit 320 determines 'recipe information excluding beef' And sends the obtained recipe information to the cooking device. If the user's request information is 'start cooking', the cooking temperature and cooking time of the single-person pizza are transmitted to the cooking device as cooking information.
  • the second controller 320 transmits the menu name (cake bread) of the food to be eaten on the birthday to the cooking device, The cooking temperature and the cooking time for baking the bread for cakes are transmitted as cooking information to the cooking appliance.
  • the second control unit 320 transmits 'crisp cookies' to the cooking device under a recommended menu name if the request information of the user is 'menu provided' and the preference information in the user information is 'crunchy cookie'.
  • the second control unit 320 may use 'turkey cooking' send.
  • the second control unit 320 may set 'recipe information of pungent taste pizza' And transmits the acquired and obtained recipe information to the cooking device.
  • the second control unit 320 may acquire the action information corresponding to the received error information and control the second communication unit to transmit the obtained action information to the cooking device.
  • the second control unit 320 stores the menu name, recipe information, and cooking information of the cooked food in the cooking history, and generates user's preference information based on the stored menu name, recipe information, cooking information, and request information And stores the generated preference information.
  • the second control unit 320 includes a first conversion unit 321, a natural language recognition unit 322, an information storage unit 323, a data portal unit 324, an error handling unit 325 and a second conversion unit 326, . ≪ / RTI >
  • the first conversion unit 321 converts the received voice data into text data and transmits the converted text data to the natural language recognizing unit 322.
  • the first conversion unit 321 includes Automatic Speech Recognition (ASR) for automatically recognizing speech.
  • ASR Automatic Speech Recognition
  • the Natural Language Understanding (NLU) 322 converts the text data into a computer language, acquires the request information requested by the user based on the converted computer language, and transmits the obtained request information to the data portal unit 324 .
  • the natural language recognizing unit 322 performs a voice recognition mode to conduct a conversation with the user.
  • the natural language recognition unit 322 may acquire user information from the information storage unit 323 and transmit the acquired user information to the data portal unit 324 together with the request information.
  • the natural language recognition unit 322 requests the second server to provide the recipe information.
  • the natural language recognition unit 322 receives the recipe information from the data portal unit 324 and transmits the received recipe information to the cooking device.
  • the natural language recognition unit 322 may acquire cooking information from the recipe information and transmit only the obtained cooking information to the cooking device.
  • the natural language recognition unit 322 acquires the optimum recipe information from among the plurality of recipes based on the user information and the request information, and transmits the obtained optimum recipe information to the cooking device It is also possible.
  • the natural language recognition unit 322 generates response information corresponding to the query information and transmits the generated response information to the second conversion unit 326 when it is determined that the received voice data is query information.
  • the information storage unit 323 stores user information.
  • the user information may be information transmitted from the cooking device, information transmitted from the terminal, and information stored in a predetermined site or application (i.e., an app or an application).
  • the user information includes basic information such as the user's ID, sex, and name, living environment information such as address and religion of the user, and schedule information such as the user's birthday and anniversary.
  • the user information may include preference information such as a preference of the user, a taste level of taste, a user's allergy information, and may further include user's gender information, user's occupation information and medical history information have.
  • the data portal unit 324 may interwork with the terminal and receive user information stored in the terminal.
  • the data portal unit 324 transmits the request information to the second server 400 and transmits the user information to the second server 400.
  • the data portal unit 324 may transmit at least one recipe information transmitted from the second server 400 to the natural language recognition unit 322.
  • the data portal unit 324 may be provided in the second communication unit 310.
  • the error counter 325 stores the action information corresponding to the plurality of error information, confirms the action information corresponding to the received error information, and transmits the confirmed action information to the cooking device.
  • the second conversion unit 326 converts the response data recognized by the natural language recognition unit into voice data and transmits the converted voice data to the cooking device.
  • the second conversion unit 326 may convert the recipe information into voice data and transmit the converted voice data to the cooking device.
  • the second conversion unit 326 includes a text to speech (TTS) unit.
  • TTS text to speech
  • the second server 400 may store recipe information for a plurality of menus, and may store at least one recipe information for each menu.
  • the second server 400 obtains the menu corresponding to the request information among the plurality of menus and transmits the obtained menu name to the first server.
  • the second server 400 may transmit a plurality of recipe information corresponding to the request information to the first server.
  • the second server 400 obtains optimal recipe information corresponding to the request information among a plurality of recipes and transmits the obtained optimum recipe information to the first server 300.
  • the second server 400 acquires the optimum recipe information corresponding to the request information and the user information among the plurality of recipes and transmits the obtained optimum recipe information to the first server 300.
  • At least one component may be added or deleted corresponding to the performance of the components of the cooking device and the first server shown in Figs. 5 and 6. Fig. It will be readily understood by those skilled in the art that the mutual position of the components can be changed corresponding to the performance or structure of the system.
  • each of the components shown in FIGS. 5 and 6 denotes software and / or hardware components such as a Field Programmable Gate Array (FPGA) and an Application Specific Integrated Circuit (ASIC).
  • FPGA Field Programmable Gate Array
  • ASIC Application Specific Integrated Circuit
  • FIG. 7 is a diagram illustrating an example of information transmission / reception of a cooking system including a cooking device according to an embodiment.
  • the cooking appliance supplies power to various components when the power on command is received.
  • the cooking apparatus performs a voice recognition mode when the voice recognition mode of the input unit is selected (501). At this time, the cooking device activates the sound input unit, the sound output unit, and the first communication unit.
  • the cooking apparatus can activate the sound input unit, the sound output unit, and the first communication unit when the power is turned on, and perform the voice recognition mode when it is determined that the trigger voice is received.
  • the cooking apparatus When the voice signal is received (502) through the sound input unit, the cooking apparatus performs a pre-processing (503) of the received voice signal to remove noise from the voice signal and transmits voice data corresponding to the voice signal from which the noise is removed to the first server (504).
  • the first server 300 converts the received voice data into text data 505, converts the converted text data into a computer language, and recognizes a natural language based on the converted computer language 506 )do.
  • the first server 300 checks whether the recognized natural language is a language including a user's request or a query containing a user's query.
  • the first server 300 acquires (507) the user's query information based on the recognized natural language, and generates response information corresponding to the acquired query information 508).
  • the response information may be a computer language. Accordingly, the first server converts the response information from the computer language into text data and converts the converted text data into voice data.
  • the first server 300 converts the generated response information into voice data, and transmits the converted voice data to the cooking device (510).
  • the cooking device outputs (511) a response voice corresponding to the received voice data through a speaker which is a sound output portion.
  • the first server 300 acquires 512 the user's request information based on the recognized natural language, and transmits the obtained request information to the second server 400 (513) the recipe information.
  • the second server 400 confirms the menu name among the received request information, acquires at least one recipe information of the confirmed menu (514), and transmits at least one recipe information of the obtained menu to the first server (300).
  • the second server may acquire at least one of the menu name, the cooking amount, the number of persons, and the preference information from the request information, and obtain the recipe information corresponding to the acquired at least one information.
  • the first server 300 receives (515) at least one recipe information.
  • the first server 300 acquires optimal recipe information among the plural recipe information based on the user information (516) and acquires the cooking information based on the obtained optimum recipe information (517 ) And transmits the obtained cooking information to the cooking appliance (518).
  • the first server 300 may acquire optimal recipe information among a plurality of recipe information based on at least one of the address, the religion, and the schedule of the user.
  • the cooking appliance displays the recipe information through the display unit (122), detects the opening / closing state of the door and the state of acceptance of the food (520), and based on the door open / An error is detected (521).
  • the cooking apparatus can output the error information through the display unit or the sound output unit when it is determined that the food is not contained in the cooking chamber or the door is opened.
  • the cooking appliance proceeds to the cooking of the food based on the cooking information (522). If it is determined that the cooking of the food is completed, .
  • the notification informing completion of the cooking includes displaying the notification information through the display unit 122 or outputting the notification information through the sound output unit 132 as a sound.
  • the first server may transmit both the request information and the user information to the second server 400.
  • the second server may acquire the optimum recipe information for the menu requested by the user based on the request information and the user information, and may transmit the obtained optimum recipe information to the first server 300.
  • Figs. 8A and 8B are flowcharts showing the cooking operation control of the cooking apparatus according to the embodiment, and will be described with reference to Figs. 9 to 12.
  • Fig. 8A and 8B are flowcharts showing the cooking operation control of the cooking apparatus according to the embodiment, and will be described with reference to Figs. 9 to 12.
  • Fig. 8A and 8B are flowcharts showing the cooking operation control of the cooking apparatus according to the embodiment, and will be described with reference to Figs. 9 to 12.
  • 9 to 12 are diagrams for explaining conversation with the user for controlling the cooking operation of the cooking appliance according to the embodiment.
  • the cooking appliance When the speech recognition mode is on (601), the cooking appliance enters the speech recognition mode (602).
  • entering the voice recognition mode may include activating the sound input unit, the sound output unit, and the first communication unit.
  • the cooking device stores (604) the received voice signal, preprocesses the stored voice signal (605), and stores the voice data corresponding to the preprocessed voice signal To the first server 300 (606).
  • performing the preprocessing of the speech signal includes removing noise in the speech signal.
  • the first server 300 starts the voice recognition mode when it is determined that the voice received by the cooking device is the trigger voice. That is, the first server 300 can start a conversation with the user through the cooking device.
  • the cooking device transmits voice data corresponding to the voice signal received at the sound input unit to the first server, and outputs the voice data transmitted from the first server through the sound output unit to perform voice communication with the user.
  • the cooking device determines (607) whether cooking information has been received from the first server.
  • the cooking device determines that the voice data is received (608) from the first server, it outputs (609) a voice corresponding to the voice data received through the sound output section.
  • the cooking device When the cooking device receives a voice signal corresponding to the output voice, the cooking device again transmits the voice data corresponding to the received voice signal to the first server.
  • the cooking apparatus can conduct a conversation with the user until the cooking information is received from the first server. Also, the cooking device can perform a conversation with the user until a cooking start command is input from the user.
  • conducting the conversation between the cooking appliance and the user includes performing only input and output of voice in the cooking appliance.
  • Such a cooking device can output a response voice based on the speech recognition result of the first server.
  • the first server can acquire the cooking information based on the conversation information with the user, and can transmit the obtained cooking information to the cooking device.
  • the cooking apparatus When it is determined that the cooking information has been received from the first server, the cooking apparatus performs the preheating of the cooking chamber by controlling the heating unit based on the received cooking information (610).
  • the cooking apparatus displays the recipe information through the display unit 122 when it is determined that recipe information is received from the first server. It is also possible for the cooking appliance to output the recipe information through the sound output unit 132 by voice.
  • the preheating time When it is determined that the preheating time has elapsed based on the cooking information, the preheating is completed (611), the food is detected in the cooking chamber, and when the food is detected (612) And determines whether the door is closed (613).
  • the cooking apparatus judges that there is an error state if it is judged that there is no food in the cooking chamber or the door is opened. That is, if there is no food in the cooking chamber, the cooking appliance outputs an error notification (614) indicating the acceptance of the food. If it is determined that the door is open, the cooking appliance outputs an error notification (614) indicating that the door is closed.
  • the cooking appliance informs the cooking information for cooking the food (615), and controls the cooking temperature and the cooking time based on the cooking information (616) Cooked.
  • the notification of the cooking information includes displaying the cooking temperature and the cooking time through the display unit.
  • the cooking time may be the remaining time excluding the preheating time in the total cooking time.
  • the remaining time may include the cooking time and the cooling time.
  • the cooking appliance judges whether the cooking is completed based on the cooking time (617). If it is determined that the cooking of the food is completed, the cooking appliance outputs notification information informing completion of the cooking of the food (618).
  • the notification information informing of completion of cooking includes displaying the cooking completion information through the display unit, or outputting the cooking completion information as a sound through the sound output unit.
  • the cooking device receives the request information for the user's voice and the cooking information for each menu corresponding to the user information stored in advance, or the recipe information for each menu An example of outputting the received and received information will be described.
  • the cooking device when the user utters a voice of a query together with a trigger voice ('oven'), the cooking device performs a voice recognition mode using the first server, And outputs a response voice corresponding to the query voice.
  • the cooking device can output a response voice ('turkey dish') corresponding to certain information ('Thanksgiving Day') among the user information according to the command of the first server.
  • the cooking appliance When the user utters the voice of the cooking amount ('one horse') together with the response voice ('yes') to accept the response voice, the cooking appliance transmits the uttered voice data to the first server. Then, the cooking device receives the cooking information (i.e., the cooking time and cooking temperature) for cooking one turkey from the first server, outputs the received cooking information, and sends a guidance voice ('prepare turkey') to the user Output.
  • the cooking information i.e., the cooking time and cooking temperature
  • the cooking appliance performs cooking of one turkey based on the received cooking information, and outputs the voice of cooking completion when the cooking of the turkey is completed.
  • the cooking appliance executes the voice recognition mode using the first server, And outputs a response voice based on the response voice.
  • the cooking device can output a response voice ('moist cookie, crunchy cookie') inquiring preference information of the user information according to the command of the first server.
  • a response voice 'moist cookie, crunchy cookie'
  • the cooking appliance When the user utters a reaction voice ('moist cookie') of the response voice, the cooking appliance transmits the voice data to the first server. Thereafter, the cooking device receives the recipe information for cooking the moist cookies from the first server, displays the received recipe information, and outputs a guidance voice ('recipe for making a moist cookie') to the user.
  • a reaction voice 'moist cookie'
  • the cooking device receives the recipe information for cooking the moist cookies from the first server, displays the received recipe information, and outputs a guidance voice ('recipe for making a moist cookie') to the user.
  • the cooking appliance performs cooking for baking the moist cookie based on the received cooking information, and outputs the voice for cooking completion when the cookie is completed.
  • the cooking appliance when the user utters the request voice ('pizza') together with the trigger voice ('oven door'), the cooking appliance performs the voice recognition mode using the first server, And outputs a response voice based on the response voice.
  • the cooking device can output a response voice ('scene') to the preference information of the user information and a response voice ('vegetable pizza') to the religious information among the user information according to the command of the first server.
  • the cooking appliance transmits the uttered voice data to the first server. Thereafter, the cooking appliance receives recipe information for cooking the thin vegetable pizza from the first server, displays the received recipe information, and also outputs the guidance voice ('recipe of thin vegetable pizza') to the user.
  • the cooking appliance performs cooking for baking the thin vegetable pizza based on the received cooking information, and outputs the voice for cooking completion when the baking of the thin vegetable pizza is completed.
  • the cooking appliance when the user utters a query voice ('what to eat today') together with a trigger voice ('oven child'), the cooking appliance performs a voice recognition mode using the first server And outputs a response voice corresponding to the query voice of the user based on the command of the one server.
  • the cooking device can output a query voice as a response voice to inquire about the material possessed by the user in response to an instruction from the first server.
  • the cooking appliance When the user utters a response voice ('squid, butter') to the response voice, the cooking appliance transmits the uttered voice data to the first server. Thereafter, the cooking device obtains a recommendation menu that can be made from squid and butter from the first server, and outputs a response voice ('butter grilled squid') asking for the obtained recommendation menu.
  • the cooking appliance transmits the uttered voice data to the first server. Thereafter, the cooking device receives the recipe information and the guide information of the butter grilled squid from the first server, outputs the received recipe information, and outputs the guide voice ('if it is placed at the top of the oven') to the user based on the guide information .
  • the cooking appliance performs the baking of the buttery squid based on the received cooking information, and outputs the voice of the cooking completion when the baking is completed.
  • the first server may provide the recipe information of the cookie excluding the peanut in response to the cookie recipe information request.
  • the first server can provide recipe information of the cookies in which the amount of sugar is minimized or the sugar is removed in response to the recipe information request of the cookie.
  • the first server stores job information called a monk as user information, it can acquire and provide only recipe information excluding meat among recipe information per menu.
  • Fig. 13 is a flow chart of a corresponding control procedure of an error of the cooking apparatus according to the embodiment.
  • the cooking apparatus checks (621) the detection information detected through the detection unit during the cooking operation.
  • the detection information is confirmed when the cooking instrument includes detecting the temperature inside the cooking chamber during the cooking operation and checking the detected temperature and detecting the number of revolutions of the circulating motor and checking the detected number of revolutions And detecting the number of revolutions of the cooling motor and confirming the detected number of revolutions.
  • the next cooking appliance transmits the detection information to the first server (622).
  • the first server judges whether there is an error in the heating unit, the circulation unit, and the cooling unit based on the temperature detected in the cooking chamber, the number of rotations of the circulation motor and the number of rotations of the cooling motor, And the maintenance of cooking can be determined.
  • the cooking device determines whether a cooking stop command has been received from the first server (623). If it is determined that the cooking stop command has not been received, it is determined that the danger level is low and the cooking of the food is maintained and the cooking of the food is completed (624).
  • the cooking appliance determines that the cooking pot is high and stops the cooking (625), and outputs the cooking stop information through the display unit or the sound output unit.
  • the cooking appliance receives (626) action information from the first server and outputs (627) the received action information.
  • outputting the action information includes displaying the character information through the display unit or outputting it as a voice through the sound output unit.
  • the first server transmits only the action information if it is determined that the error state of the cooking appliance can be treated by the user, and transmits the AS application request information to the action information if it is determined that the user can not perform the action.
  • the cooking appliance transmits the AS application information to the first server (629).
  • the first server requests the AS center for the cooking device to the AS center and transmits information about the result of the application to the cooking device.
  • the cooking appliance displays the received AS application completion information (630).
  • the cooking device can output the AS application completion information through the sound output unit.
  • the cooking appliance can transmit error information to the first server and receive only the action information from the first server.
  • FIG. 14 is an exemplary diagram illustrating a dialog between a cooking device and a user according to an embodiment.
  • FIG. 14 is an exemplary diagram illustrating a dialog between a cooking device and a user according to an embodiment.
  • the cooking appliance detects whether the door is in the closed state or in the state where the food is accommodated before starting the cooking operation based on the received cooking information, To the first server.
  • the first server generates response information corresponding to the detected information, converts the generated response information into voice data, and transmits the voice data to the cooking device.
  • the cooking appliance outputs the received response data by voice. For example, if it is determined that the door is in the open state, the cooking appliance outputs a voice informing that the door is closed with a response voice.
  • the cooking appliance When the user utters the reaction voice ("closed"), the cooking appliance performs cooking based on the cooking information, determines whether or not an error is generated based on the detection information of the detection section during the cooking operation, 1 server.
  • the first server may transmit the action information corresponding to the error information to the cooking device, and may transmit the voice data corresponding to the error information and the voice data corresponding to the action information to the cooking device.
  • the cooker will output a response voice ('Temperature is too high, I will stop cooking').
  • the cooking appliance stops the cooking operation and outputs a response voice ('heater failure, AS application') for action against the error in accordance with the command of the first server.
  • the cooking appliance When the user utters a reaction voice ('request'), the cooking appliance transmits the voice data to the first server and outputs a response voice to the received application completion information when the application completion information is received from the first server.
  • the disclosed embodiments may be embodied in the form of a recording medium storing instructions executable by a computer.
  • the instructions may be stored in the form of program code and, when executed by a processor, may generate a program module to perform the operations of the disclosed embodiments.
  • the recording medium may be embodied as a computer-readable recording medium.
  • the computer-readable recording medium includes all kinds of recording media in which instructions that can be decoded by a computer are stored.
  • it may be a ROM (Read Only Memory), a RAM (Random Access Memory), a magnetic tape, a magnetic disk, a flash memory, an optical data storage device, or the like.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Health & Medical Sciences (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Primary Health Care (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Electromagnetism (AREA)
  • Human Resources & Organizations (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • Economics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Data Mining & Analysis (AREA)
  • Electric Ovens (AREA)

Abstract

본 발명의 조리 시스템은, 음성을 입력 및 출력하고, 음성에 대응하는 음성 데이터를 전송하고, 조리실의 음식물을 조리하는 조리기기; 및 조리기기와 통신을 수행하고, 조리기기로부터 음성 데이터가 수신되면 수신된 음성 데이터에 기초하여 음성 인식을 수행하고, 음성 인식에 대응하는 응답 정보를 조리기기에 전송하고, 수신된 음성 데이터에 기초하여 사용자가 요구하는 메뉴를 획득하고 획득된 메뉴의 조리 시간 및 조리 온도를 조리기기에 전송하는 제1서버; 및 복수의 메뉴에 대한 적어도 하나의 레시피 정보를 저장하고, 제1서버와 통신을 수행하고, 제1서버에 적어도 하나의 레시피 정보를 전송하는 제2서버를 포함한다.

Description

조리기기 및 조리 시스템
본 발명은 음성을 이용하여 음식물을 조리하기 위한 조리기기 및 조리 시스템에 관한 것이다.
일반적으로 조리기기는 음식물을 가열하여 조리하는 기기로, 전기를 이용하여 음식물을 가열하기 위한 열을 발생시키는 방식과, 가스를 연소시킴으로써 음식물을 가열하기 위한 열을 발생시키는 방식으로 크게 나누어진다.
이러한 조리기기는 가스 레인지, 오븐 및 전기 레인지 등으로 구분될 수 있다.
이와 같은 조리기기는 음식물 조리를 위한 명령을 입력받는 입력부를 포함하고, 동작 정보를 표시하는 표시부를 더 포함한다.
이러한 조리기기를 이용하여 음식물을 조리하기 위해서, 사용자는 조리기기의 입력부에 마련된 복수 개의 설정 버튼들을 직접 눌러 음식물을 조리하기 위한 조리 온도 및 조리 시간을 설정하거나, 입력부에 마련된 복수 개의 메뉴 버튼 중 어느 하나의 메뉴를 선택하였다.
여기서 사용자에 의해 설정된 조리 온도 및 조리 시간은, 음식물의 맛을 결정하는 중요한 요인으로, 설정된 조리 온도가 너무 낮거나 높은 경우, 또는 설정된 조리 시간이 너무 짧거나 길 경우, 음식물이 설익거나 타버릴 수 있다.
이와 같이 조리기기는 사용자에 의한 조리 온도 및 조리 시간의 설정에 있어, 다소 어렵고, 불편한 문제가 있었다.
또한 조리기기는 메뉴별 조리 시간 및 조리 온도가 미리 정해져 있기 때문에 동일 메뉴에 대해 음식물의 재료가 달라지면 조리 질이 달라지는 문제가 있었다.
일 측면은 음성 신호가 입력되면 입력된 음성 신호에 대응하는 음성 데이터를 서버에 전송하고, 서버로부터 수신된 조리 정보에 기초하여 음식물의 조리를 수행하는 조리기기, 조리 시스템 및 조리기기의 제어 방법을 제공한다.
다른 측면은 미리 저장된 사용자 정보에 기초하여 메뉴 및 레시피 정보 중 적어도 하나를 추천하고, 레시피 정보에 대응하는 조리 정보에 기초하여 음식물의 조리를 수행하는 조리기기 및 조리 시스템을 제공한다.
또 다른 측면은 서버로부터 제공된 조리기기의 에러 정보 및 에러에 대한 조치 정보를 출력하는 조리기기 및 조리 시스템을 제공한다.
일 측면에 따른 조리기기는 음성 인식을 수행하고 메뉴별 조리 정보를 저장하는 서버와 통신을 수행하는 통신부; 음식물을 가열하기 위한 열이 발생되도록 하는 가열부; 사용자의 음성을 수신하는 사운드 입력부; 및 수신된 음성에 대응하는 음성 데이터를 서버에 전송하도록 통신부를 제어하고, 서버로부터 전송된 조리 정보를 수신하고 수신된 조리 정보에 기초하여 가열부의 동작을 제어하는 제어부; 및 서버로부터 전송된 음성 데이터를 음성으로 출력하는 사운드 출력부를 포함한다.
일 측면에 따른 조리기기는 음성 인식 모드의 수행 명령을 수신하는 입력부를 더 포함하고, 제어부는 음성 인식 모드의 수행 명령이 수신되면 사운드 입력부와 사운드 출력부의 동작을 활성화시키는 것을 포함한다.
일 측면에 따른 조리기기는 가열부에 의해 발생된 열을 순환시키는 순환부를 더 포함하고, 제어부는 조리 정보에 기초하여 순환부의 동작을 제어하는 것을 포함한다.
일 측면에 따른 조리기기는 사용자 정보의 설정 명령을 수신하는 입력부를 더 포함하고, 제어부는 사용자 정보의 설정 명령이 수신되면 사운드 입력부의 동작을 활성화시키고, 사운드 입력부의 동작 시에 수신된 음성에 대응하는 음성 데이터를 사용자 정보로 서버에 전송하도록 통신부를 제어하는 것을 포함한다.
일 측면에 따른 조리기기의 사용자 정보는, 사용자의 식별 정보, 사용자의 일정 정보, 사용자의 종교 정보, 사용자의 주소 정보 중 적어도 하나를 포함한다.
일 측면에 따른 조리기기는 수신된 조리 정보를 표시하는 표시부를 더 포함하고, 제어부는 서버로부터 레시피 정보가 수신되면 수신된 레시피 정보를 표시하도록 표시부를 제어하는 것을 포함한다.
일 측면에 따른 조리기기는 조리실을 개폐하는 도어; 도어의 개폐 상태를 검출하는 개폐 검출부; 및 조리실 내 음식물의 수용 여부를 검출하는 물체 검출부를 더 포함하고, 제어부는 도어가 폐쇄 상태이고, 조리실 내에 음식물이 수용되어 있다고 판단되면 조리 시작에 대응하는 알림음을 출력하도록 사운드 출력부를 제어하는 것을 포함한다.
다른 측면에 따른 조리 시스템은 음성을 입력 및 출력하고, 음성에 대응하는 음성 데이터를 전송하고, 조리실의 음식물을 조리하는 조리기기; 및 조리기기와 통신을 수행하고, 조리기기로부터 음성 데이터가 수신되면 수신된 음성 데이터에 대응하는 사용자의 요구 정보, 질의 정보 및 반응 정보를 획득하고, 요구 정보 및 반응 정보 중 적어도 하나에 기초하여 조리 정보를 획득하고 획득된 조리 정보를 조리기기에 전송하고, 질의 정보에 대응하는 응답 정보를 조리기기에 전송하는 서버를 포함한다.
다른 측면에 따른 조리 시스템의 조리 정보는, 조리기기의 조리 온도 및 조리 시간을 포함한다.
다른 측면에 따른 조리 시스템의 서버는, 수신된 음성 데이터를 텍스트 데이터로 변환하는 제1변환부; 변환된 텍스트 데이터에 대한 자연어 인식을 수행하고 자연어 인식에 기초하여 사용자의 요구 정보, 반응 정보 및 질의 정보를 획득하고 획득된 질의 정보에 대응하는 응답 정보를 생성하는 자연어 인식부; 획득된 요구 정보를 레시피 제공용 서버에 전송하고 레시피 제공용 서버로부터 레시피 정보를 수신하는 데이터 포털부; 및 생성된 응답 정보를 음성 데이터로 변환하고 변환된 음성 데이터를 조리기기에 전송하는 제2변환부를 포함한다.
다른 측면에 따른 조리 시스템의 서버는, 조리기기의 에러 정보에 대응하는 조치 정보를 획득하고 획득된 조치 정보를 조리기기에 전송하는 에러 대응부를 더 포함한다.
다른 측면에 따른 조리 시스템의 서버는, 용자 정보를 저장하는 정보 저장부; 요구 정보 및 사용자 정보에 기초하여 복수 개의 레시피 정보 중 최적의 레시피 정보를 획득하고, 획득된 최적의 레시피 정보를 조리기기에 전송하는 제어부를 포함한다.
다른 측면에 따른 조리 시스템의 사용자 정보는, 사용자의 식별 정보, 사용자의 일정 정보, 사용자의 종교 정보, 사용자의 주소 정보 중 적어도 하나를 포함한다.
또 다른 측면에 따른 조리 시스템은, 음성을 입력 및 출력하고, 음성에 대응하는 음성 데이터를 전송하고, 조리실의 음식물을 조리하는 조리기기; 및 조리기기와 통신을 수행하고, 조리기기로부터 음성 데이터가 수신되면 수신된 음성 데이터에 기초하여 음성 인식을 수행하고, 음성 인식에 대응하는 응답 정보를 조리기기에 전송하고, 수신된 음성 데이터에 기초하여 사용자가 요구하는 메뉴를 획득하고 획득된 메뉴의 조리 시간 및 조리 온도를 조리기기에 전송하는 제1서버; 및 복수의 메뉴에 대한 적어도 하나의 레시피 정보를 저장하고, 제1서버와 통신을 수행하고, 제1서버에 적어도 하나의 레시피 정보를 전송하는 제2서버를 포함한다.
또 다른 측면에 따른 조리 시스템의 제1서버는, 사용자의 식별 정보, 사용자의 일정 정보, 사용자의 종교 정보, 사용자의 주소 정보 및 선호 정보 중 적어도 하나를 사용자 정보로 저장하고, 저장된 사용자 정보를 제2 서버에 전송하는 것을 포함한다.
또 다른 측면에 따른 조리 시스템의 제2서버는, 사용자가 요구하는 메뉴에 대한 복수 개의 레시피 정보를 확인하고, 사용자 정보에 기초하여 복수 개의 레시피 정보 중 최적의 레시피 정보를 획득하고 획득된 최적의 레시피 정보를 제1서버에 전송하는 것을 포함한다.
또 다른 측면에 따른 조리 시스템의 제1서버는, 최적의 레시피 정보를 조리기기에 전송하는 것을 포함한다.
또 다른 측면에 따른 조리 시스템의 조리기기는, 복수 개의 부하의 동작 상태를 검출하는 검출부; 검출부의 검출 정보에 기초하여 에러 상태인지를 판단하고 에러 상태라고 판단되면 에러 정보를 제1서버에 전송하는 에러 판단부를 포함한다.
또 다른 측면에 따른 조리 시스템의 제1서버는, 에러 정보가 수신되면 수신된 에러 정보에 대응하는 조치 정보를 획득하고 획득된 조치 정보를 조리기기에 전송하는 것을 포함한다.
또 다른 측면에 따른 조리 시스템의 제1서버는, 조리 기기의 조리 히스토리에 기초하여 사용자의 선호 정보를 획득하는 것을 포함하고, 선호 정보는, 메뉴명, 조리 량, 굽기 정도, 수분 함량, 맛별 레벨 및 식감 중 적어도 하나를 포함한다.
또 다른 측면에 따른 조리 시스템의 조리기기는, 사용자의 음성에 대한 음성 신호를 수신하는 사운드 입력부; 수신된 음성 신호를 저장하는 음성 저장부; 저장된 음성 신호를 전처리하여 노이즈를 제거하는 전처리부; 제1서버에서 전송된 음성 데이터를 음성으로 출력하는 사운드 출력부를 포함한다.
또 다른 측면에 따른 조리 시스템의 조리기기는, 제1서버와의 통신이 불가능하다고 판단되면 통신 불가능에 대한 정보를 음성 데이터로 변환하고 변환된 음성 데이터를 음성으로 출력하는 것을 포함한다.
본 발명은 사용자가 발화한 자연어 기반의 음성을 서버(즉 클라우드)에서 분석하여 사용자의 요구 정보를 획득하고, 획득된 요구 정보와 미리 설정된 사용자 정보에 기초하여 음식물의 조리 정보를 획득하고 획득된 조리 정보에 기초하여 조리기기의 동작을 제어함으로써 맛있고 질 좋은 음식을 사용자에게 제공할 수 있다.
이에 따라 본 발명은 조리기기에 대한 사용자의 편리성 및 만족도를 향상시킬 수 있다.
또한 본 발명은 히스토리를 통해 사용자의 메뉴별 선호 정보를 획득하고, 획득된 메뉴별 선호 정보에 기초하여 사용자 맞춤형 메뉴 및 레시피를 제공할 수 있다.
또한 본 발명은 음성 인식을 통해 사용자의 요구 정보를 획득함으로써 조리기기 내 버튼을 최소화할 수 있고 이에 따른 조리 기기의 제조 단가를 줄일 수 있으며, 버튼의 단순화에 따른 사용자의 조작의 편리성 및 용이성을 향상시킬 수 있다.
또한 본 발명은 조리 기기의 동작 명령을 음성으로 입력하기 때문에 시력이 불편한 사용자도 조리 기기를 편리하게 사용할 수 있다.
또한 본 발명은 조리기기의 에러 정보 및 조치 정보를 서버로부터 제공받아 음성으로 출력해주기 때문에 사용자가 용이하게 에러를 인식할 수 있고, 에러에 대한 조치를 수행할 수 있다.
또한 본 발명은 에러 정보를 서버에서 처리해주기 때문에 에러에 대한 조치를 신속하고 편리하게 수행할 수 있다.
도 1은 실시 예에 따른 조리기기를 포함하는 조리 시스템의 예시도이다.
도 2는 실시 예에 따른 조리기기의 외관 예시도이다.
도 3은 도 2에 도시된 조리기기의 조리실의 예시도이다.
도 4는 도 2에 도시된 조리기기의 측면도이다.
도 5는 실시 예에 따른 조리기기의 제어 구성도이다.
도 6은 실시 예에 따른 조리기기와 통신을 수행하는 제1서버(300)의 제어 구성도이다.
도 7은 실시 예에 따른 조리기기를 포함하는 조리 시스템의 정보 송수신 예시도이다.
도 8a 및 도 8b는 실시 예에 따른 조리기기의 조리 동작 제어 순서도이다.
도 9 내지 도 12는 실시 예에 따른 조리기기의 조리 동작 제어를 위한 사용자와의 대화 예시도이다.
도 13은 실시 예에 따른 조리기기의 에러 제어 순서도이다.
도 14는 실시 예에 따른 조리기기의 에러 발생에 대한 사용자와의 대화 예시도이다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐 아니라, 간접적으로 연결되어 있는 경우를 포함하고, 간접적인 연결은 무선 통신망을 통해 연결되는 것을 포함한다.
또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
제 1, 제 2 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위해 사용되는 것으로, 구성요소가 전술된 용어들에 의해 제한되는 것은 아니다.
단수의 표현은 문맥상 명백하게 예외가 있지 않는 한, 복수의 표현을 포함한다.
이하에서는 첨부도면을 참조하여 본 발명에 대해 상세히 설명한다.
도 1은 일 실시 예에 따른 조리기기를 포함하는 조리 시스템의 예시도이다.
조리 시스템(1)은 조리기기(100), 공유기(AP: Access Point, 200), 제1서버(300) 및 제2서버(400)를 포함한다.
조리기기(100)는 홈 내에서 사용되고 원격지의 제1서버(300)로부터 전송된 조리 정보에 기초하여 음식물을 조리하기 위한 조리 동작을 수행하는 가전기기이다.
여기서 조리 정보는, 조리 시간과 조리 온도를 포함할 수 있다.
좀 더 구체적으로, 조리기기(100)는 사용자에 의해 입력된 음성에 대응하는 사용자의 요구 정보를 제1서버(300)에 전송하고, 제1서버(300)로부터 조리 정보가 수신되면 수신된 조리 정보에 기초하여 각종 부하의 동작을 제어함으로써 조리실 내의 음식물을 조리한다.
요구 정보는 메뉴명을 포함할 수 있고, 조리 량, 조리 방법, 인원수를 포함할 수 있으며, 굽기 정도, 수분 함량, 맛, 맛별 레벨 등의 선호 정보를 포함할 수 있다.
또한 조리기기(100)는 사용자에 의해 입력된 음성에 대응하는 사용자의 질의 정보를 제1서버(300)에 전송하고, 제1서버(300)로부터 응답 정보가 수신되면 수신된 응답 정보에 대응하는 음성을 출력하는 것도 가능하다.
이와 같이 조리기기(100)는 사용자의 음성을 입력받고 제1서버의 명령에 따라 음성을 출력한다. 즉 조리기기(100)는 음성을 입출력하는 기능만을 수행하고, 조리기기에 입력된 음성에 기초하여 음성인식을 수행하는 것은 제1서버에서 수행한다. 또한 제1서버는 음성 인식에 대응하는 응답 정보를 생성하여 조리기기에 전송함으로써 조리기기에서 응답 음성이 출력되도록 한다.
공유기(AP: Access Point, 200)는 인터넷을 이용할 수 있는 기기로, 홈 내의 인터넷 라인에 연결되어 유선 신호 또는 무선 신호를 송출하면서, 복수의 가전기기가 하나의 인터넷 라인을 공유해 동시에 인터넷 접근이 가능하게 하는 네트워크 기기이다.
공유기(AP, 200)는 인터넷 서비스 업체로부터 할당된 인터넷 IP 주소를 가지며, 하나의 IP 주소를 복수의 가전기기가 공유해서 인터넷에 접속할 수 있도록 하는 역할을 수행한다.
공유기(200)는 인터넷에 연결하기 위해서 홈 내의 각 가전기기의 고유의 IP주소를 저장한다.
즉 공유기(200)는 조리기기(100)가 연결되면, 조리 기기(100)에 고유한 IP 주소(가상 IP 주소 혹은 사설 IP주소)를 자동 할당함으로써 조리기기(100)가 인터넷에 접속될 수 있도록 한다.
공유기(200)는 조리기기(100) 및 제1서버(300)와의 통신을 수행한다.
즉 공유기(200)는 조리기기(100)의 각종 정보를 제1서버(300)에 전송할 수 있도록 하고, 제1서버(300)의 각종 정보를 조리기기(100)에 전송할 수 있도록 한다.
조리 시스템은 조리기기(100)와 제1서버(300) 간의 통신이 수행하도록 하는 단말기(미도시)를 더 포함하는 것도 가능하다. 즉 조리기기(100)는 공유기가 아닌 단말기를 이용하여 가입된 통신사의 통신망을 통해 인터넷에 접속되어 제1서버(300)와의 통신을 수행한다.
단말기는 네트워크를 통해 조리기기에 접속할 수 있는 컴퓨터나 휴대용 단말기로 구현될 수 있다.
여기서, 컴퓨터는 예를 들어, 웹 브라우저(WEB Browser)가 탑재된 노트북, 데스크톱(desktop), 랩톱(laptop), 태블릿 PC, 슬레이트 PC 등을 포함하고, 휴대용 단말기는 예를 들어, 휴대성과 이동성이 보장되는 무선 통신 장치로서, PCS(Personal Communication System), GSM(Global System for Mobile communications), PDC(Personal Digital Cellular), PHS(Personal Handyphone System), PDA(Personal Digital Assistant), IMT(International Mobile Telecommunication)-2000, CDMA(Code Division Multiple Access)-2000, W-CDMA(W-Code Division Multiple Access), WiBro(Wireless Broadband Internet) 단말, 스마트 폰(Smart Phone) 등과 같은 모든 종류의 핸드헬드(Handheld) 기반의 무선 통신 장치와 시계, 반지, 팔찌, 발찌, 목걸이, 안경, 콘택트 렌즈, 또는 머리 착용형 장치(head-mounted-device(HMD) 등과 같은 웨어러블 장치를 포함할 수 있다.
제1서버(300)는 조리기기의 각종 정보들을 저장, 통합 및 출력하는 장치로, 인터넷을 통해 수신되는 음성 데이터에 대응하는 조리기기의 요구 정보와 사용자 정보를 저장하고, 조리기기의 요구 정보와 사용자 정보 중 적어도 하나에 기초하여 조리 정보를 획득하고 획득된 조리 정보를 출력한다.
제1서버(300)는 사용자 정보, 사용자별 조리기기의 식별 정보를 저장할 수 있다.
여기서 사용자 정보는, 사용자의 아이디, 성별, 이름 등의 기본 정보와, 사용자의 주소, 종교 등의 생활 환경 정보와, 사용자의 생일, 기념일 등의 일정 정보를 포함한다.
아울러 사용자 정보는 사용자가 선호하는 맛, 식감 등의 선호 정보를 포함할 수 있고, 사용자의 알레르기 정보를 더 포함할 수 있으며, 사용자의 성별 정보, 사용자의 직업 정보를 더 포함할 수 있다.
제1서버(300)는 인터넷을 통해 홈 내의 공유기(200)에 접속될 수 있다.
제1서버(300)는 조리기기(100)로부터 음성 데이터를 분석하여 사용자의 요구 정보와 질의 정보를 획득하고, 획득된 요구 정보에 대응하는 조리 정보를 조리기기에 전송하며, 수신된 음성 데이터에서 질의 정보가 획득되면 획득된 질의 정보에 대응하는 응답 정보를 조리기기에 전송하는 것도 가능하다.
제1서버(300)는 조리기기의 히스토리에 기초하여 사용자의 선호 정보를 생성하고 생성된 선호 정보를 저장하는 것도 가능하다.
제1서버(300)는 요구 정보 및 사용자 정보 중 적어도 하나에 기초하여 추천 메뉴를 조리기기에 전송하는 것도 가능하고, 추천 메뉴에 기초하여 최적의 레시피 정보를 획득하고 획득된 레시피 정보로부터 조리 정보를 획득하고 획득된 조리 정보를 조리기기에 전송하는 것도 가능하다.
제1서버(300)는 인터넷을 통해 제2서버(400)와 통신을 수행하고, 제2서버(400)로부터 어느 하나의 메뉴에 대응하는 레시피 정보를 제공받을 수 있다.
제2서버(400)는 인터넷을 통해 제1서버(300)와 통신을 수행하고, 제1서버(300)의 요청에 대응하는 레시피 정보를 획득하고 획득된 레시피 정보를 제1서버(300)에 전송한다.
제2서버(400)는 복수 개의 메뉴를 저장하고, 메뉴별로 적어도 하나의 레시피 정보를 저장한다.
여기서 레시피 정보는, 메뉴, 재료, 조리 시간, 조리 온도 등을 포함할 수 있다. 아울러 레시피 정보는 매운맛, 단맛, 신맛, 쓴맛, 짠맛 등 각 맛에 대한 맛의 레벨을 더 포함할 수 있다.
제2서버(400)는 주기적으로 메뉴별 레시피 정보를 업데이트 할 수 있다.
이러한 조리 시스템에 마련된 조리기기의 구성을 도 2 내지 4를 참조하여 구체적으로 설명한다.
도 2는 실시 예에 따른 조리기기의 외관 예시도이고, 도 3은 도 2에 도시된 조리기기의 조리실의 예시도이며, 도 4는 도 2에 도시된 조리기기의 측면도이다.
도 2에 도시된 바와 같이 조리기기(100)는 외관을 형성하는 본체(100a)를 포함한다.
본체(100a)의 내부에는 조리 공간을 형성하는 조리실(100b)이 형성되어 있다.
도 3에 도시된 바와 같이, 조리실(100b)은 박스 형상으로 형성될 수 있고, 전면에 형성되어 음식물이 출납되는 개구를 포함할 수 있다.
그리고 조리실 내부에는 음식물을 올려 놓을 수 있는 트레이가 분리 가능하게 장착될 수 있다.
조리실의 개구에는 조리실(100b)이 개폐되도록 하는 도어(120)가 마련될 수 있다. 여기서 도어(110)는 본체(100a)에 대해 회전 가능하도록 본체(100a)에 힌지 결합될 수 있다.
도어(110)에는 사용자에 의해 파지되는 핸들(111)이 마련될 수 있고, 도어(110)가 폐쇄된 상태에서 조리실(100b)의 외부에서 내부를 시각적으로 확인할 수 있도록 하는 투시 창이 더 마련될 수도 있다.
이러한 조리기기는 조리실(100b)에 음식물이 수용된 후 조리실(100b)이 도어(110)에 의해 밀폐되면 가열부(140)에 의해 발생된 열(즉 건열)을 이용하여 밀폐된 음식물이 익도록 한다.
조리기기(100)는 조작 정보를 수신하고, 동작 정보를 출력하는 사용자 인터페이스(120)를 포함한다.
사용자 인터페이스(120)는 사용자에 의해 조작된 조리기기의 조작 정보를 입력받는 입력부(121)와, 조리기기의 동작 정보를 출력하는 표시부(122)를 포함한다.
사용자 인터페이스의 입력부(121)는 조리 시작과 조리 정지 명령을 입력받기 위한 제1버튼과, 음성 인식 모드를 입력받기 위한 제2버튼을 포함할 수 있다.
제1버튼과 제2버튼은 물리적 버튼 또는 터치 버튼으로 마련될 수 있고, 입력 횟수에 따라 온 및 오프 명령을 입력받는다.
사용자 인터페이스의 입력부(121)는 조리 일시 정지 명령을 입력받기 위한 버튼을 더 포함할 수 있다.
또한 사용자 인터페이스의 입력부(121)와 표시부(122)는, 터치 패널과 디스플레이 패널이 일체화된 터치 스크린으로 마련될 수 있다.
아울러 사용자 인터페이스의 입력부(121)는 다이얼 타입으로 마련될 수 있다.
조리기기는 본체(100a)에 마련되고 사용자와 대화를 수행하기 위한 대화 인터페이스(130)를 더 포함한다.
대화 인터페이스(130)는 사용자의 음성을 수신하는 사운드 입력부(131)와, 안내 정보 및 응답 정보를 음성으로 출력하는 사운드 출력부(132)를 포함한다.
여기서 사운드 입력부(131)는 마이크로 폰 또는 마이크로폰 어레이를 포함할 수 있고, 사운드 출력부(132)는 스피커를 포함할 수 있다.
사운드 입력부(131)와 사운드 출력부(132)는 신호 간섭을 줄이기 위해 본체에 서로 일정 거리로 이격되어 설치될 수 있다. 즉 사운드 입력부(131)와 사운드 출력부(132)를 이격 설치함으로써 스피커의 출력이 마이크에 간섭을 일으키지 않도록 할 수 있다.
도 4에 도시된 바와 같이 조리기기(100)는 조리실(100b)의 상측과 인접하게 배치되고 열을 발생시켜 조리실(100b) 내로 열을 제공하는 가열부(140)와, 조리실(100b) 내부의 공기가 순환되도록 하는 순환부(150)를 더 포함한다.
여기서 가열부(140)는 히터일 수 있다. 그리고 가열부(140)는 복수 개의 히터를 포함할 수 있다.
아울러 조리기기는 전자파를 발생시켜 음식물 내부의 물 분자의 회전에 의해 열이 발생되도록 하는 마그네트론(미도시) 및 일정 온도 이상의 스팀을 발생시키는 스팀부(미도시)를 더 포함할 수 있다.
순환부(150)는 음식물 조리 시, 조리실 내부의 공기가 순환되도록 한다.
이러한 순환부(150)는 조리실(100b)의 배면에 배치되어 조리실(100b)의 공기를 대류시키는 순환팬(151)과, 순환팬(151)을 구동시키기 위한 순환용 모터(152)를 포함한다.
순환팬(151)은 복수 개로 마련될 수 있고, 복수 개의 순환팬(151)은 조리실 내에 상하로 배치될 수 있다.
순환부(150)는 음식물이 놓인 위치에 따라 복수의 순환팬 중 적어도 하나의 순환팬을 선택적으로 회전시킬 수 있다.
복수의 순환팬은 공기를 상측에서 흡입하여 반경 방향으로 토출하는 원심팬 또는 터보팬일 수 있다.
또한 조리기기는 순환용 모터(152)의 회전력을 제어함으로써 조리실 내부에서 순환하는 공기의 유속을 제어하는 것도 가능하다.
조리기기(100)의 본체(100a)는 조리실(100b)과 인접하게 배치되고 조리실(100b)과 독립된 공간을 가지며 회로 기판 등의 각종 전장부품(미도시)이 마련된 전장실(100c)을 더 포함한다.
이러한 전장실(100c)에는 배기 덕트(161)와, 조리실(100b)의 공기를 흡입하고 흡입된 조리실(100b)의 공기와 전장실(100c)의 공기가 본체(100a)의 전방으로 배기되도록 하는 냉각부(160)가 배치될 수 있다. 이 냉각부(160)는 냉각팬(162)과, 냉각팬(162)을 구동시키기 위한 냉각용 모터(163)를 포함할 수 있다.
도 5는 실시 예에 따른 조리기기의 제어 구성도이다.
조리기기(1)는 사용자 인터페이스(120), 대화 인터페이스(130), 복수의 부하(140, 150, 163), 검출부(170), 제1제어부(180) 및 제1통신부(190)를 포함한다.
사용자 인터페이스(120)는 사용자에 의해 조작된 조리기기의 조작 정보를 입력받는 입력부(121)와, 조리기기의 동작 정보를 출력하는 표시부(122)를 포함한다.
여기서 동작 정보는, 조리 모드, 조리 정보를 포함한다.
그리고 조리 정보는 조리 온도, 조리 시간을 포함하고, 조리 시간은 총 조리 시간을 포함하고, 조리 시작 시간, 조리 경과 시간, 남은 시간, 조리 종료 시간 중 적어도 하나를 더 포함할 수 있다.
총 조리 시간은 조리 기기의 예열 시간, 본 조리 시간 및 냉각 시간을 포함할 수 있다.
또한 동작정보는 조리기기의 현재 동작 상태에 대한 정보로, 예열, 본 조리, 냉각 등의 정보를 더 포함할 수 있다.
입력부(121)는 조리기기의 전원 온 명령, 전원 오프 명령, 음성 인식 모드의 온 명령, 음성 인식 모드의 오프 명령을 수신한다.
입력부(121)는 조리기기의 에러 발생에 대한 조치 명령을 수신하는 것도 가능하고, AS신청 명령을 수신하는 것도 가능하다.
표시부(122)는 음성 인식 모드의 수행 정보, 조리 모드, 조리 정보를 표시한다.
표시부(122)는 에러 정보에 대한 조치 정보를 표시하는 것도 가능하고, 조리 중인 메뉴를 표시하는 것도 가능하며, 레시피 정보를 표시하는 것도 가능하다.
여기서 레시피 정보는 메뉴명, 재료 정보, 조리 전 음식물의 준비 정보, 조리 정보를 포함할 수 있다. 여기서 조리 정보는 조리 온도 및 조리 시간을 포함할 수 있다.
대화 인터페이스(130)는 사용자와의 대화를 수행한다.
대화 인터페이스(130)는 사용자의 음성을 수신하는 사운드 입력부(131)와, 안내 정보 및 응답 정보를 음성으로 출력하는 사운드 출력부(132)를 포함한다.
여기서 사운드 입력부(131)는 마이크로 폰 또는 마이크로폰 어레이를 포함할 수 있고, 사운드 출력부(132)는 스피커를 포함할 수 있다.
사운드 출력부(132)는 조리 개시 정보, 조리 완료 정보, 에러 정보, 조치 정보, 레시피 정보 등을 사운드로 출력할 수 있다.
복수의 부하(140, 150, 163)는 전원부(미도시)로부터 전력을 공급받고, 공급된 전력을 음식물을 조리하기 위한 에너지로 변환한다.
이러한 복수의 부하는 음식물을 가열하기 위한 열이 발생되도록 하는 가열부(140)를 포함하고, 조리실 내부의 열을 순환시키는 순환부(150)를 더 포함하며, 조리가 완료된 후 조리실 내부를 냉각시키기 위한 냉각부(160)를 더 포함한다.
여기서 가열부(140)는, 히터일 수도 있고, 마그네트론일 수 있으며, 스팀부일 수도 있다.
순환부(150)는 순환팬 및 순환용 모터를 포함할 수 있고, 냉각부(160)는 냉각팬 및 냉각용 모터(163)를 포함할 수 있다.
즉 복수의 부하는 히터, 마그네트론, 스팀부, 냉각용 모터 및 순환용 모터 중 적어도 하나를 포함할 수 있다.
검출부(170)는 조리기기의 조리 가능 상태에 대한 정보를 검출한다.
이러한 검출부(170)는 조리기기의 도어의 개폐 상태를 검출하는 개폐 검출부와, 조리기기 내 조리실 내부의 음식물의 수용 여부를 판단하기 위해 조리실 내 물체의 존재를 검출하는 물체 검출부를 포함할 수 있다.
개폐 검출부는 접촉식 센서 또는 비 접촉식 센서를 포함할 수 있다.
접촉식 센서인 경우, 개폐 검출부는 푸시 타입(예를 들어, 리미트 스위치, 또는 마이크로 스위치 등)일 수 있다.
비 접촉식 센서인 경우, 개폐 검출부는 광 센서 또는 근접 센서 등 일 수 있다.
검출부(170)는 조리실의 온도를 검출하는 조리실 온도 검출부와, 음식물의 온도를 검출하는 음식물의 온도 검출부를 더 포함하는 것도 가능하다.
조리실의 온도 검출부와 음식물 온도 검출부는 측온 저항체 온도계, 서미스터 온도계, 열전대 온도계, 또는 IC 온도계 중 하나의 포함할 수 있으나, 이에 한정되는 것이 아니다.
제1제어부(180)는 입력부(121)와 사운드 입력부(131)의 신호를 수신하고 수신된 신호에 기초하여 제1통신부 및 복수 개의 부하(140, 150, 163), 사운드 출력부(132) 및 표시부(122)의 동작을 제어한다.
이러한 제1제어부(180)는 신호 수신부(181), 음성 저장부(182), 전처리부(183), 에러 판단부(184) 및 동작 제어부(185)를 포함한다.
신호 수신부(181)는 입력부(121)에 입력된 조리기기의 전원 온 명령, 전원 오프 명령, 음성 인식 모드의 온 명령, 음성 인식 모드의 오프 명령에 각각 대응하는 신호를 수신하고 수신된 신호를 동작 제어부(185)에 전송한다.
신호 수신부(181)는 입력부(121)를 통해 사용자 정보의 설정 명령에 대응하는 신호를 수신하는 것도 가능하다.
신호 수신부(181)는 사운드 입력부(131)에 입력된 사용자의 음성에 대응하는 음성 신호를 음성 저장부(182)에 전송한다.
음성 저장부(182)는 음성 신호를 저장하고 저장된 음성 신호를 전처리부(183)에 전송한다.
음성 저장부(182)는 캐쉬, ROM(Read Only Memory), PROM(Programmable ROM), EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM) 및 플래쉬 메모리(Flash memory)와 같은 비휘발성 메모리 소자 또는 RAM(Random Access Memory)과 같은 휘발성 메모리 소자 또는 하드디스크 드라이브(HDD, Hard Disk Drive), CD-ROM과 같은 저장 매체 중 적어도 하나로 구현될 수 있으나 이에 한정되지는 않는다.
음성 저장부는 제1제어부와 관련하여 전술한 프로세서와 별개의 칩으로 구현된 메모리일 수 있고, 프로세서와 단일 칩으로 구현될 수도 있다
전처리부(183)는 음성 신호를 신호 처리하여 음성 신호 내의 노이즈를 제거하고 노이즈가 제거된 음성 신호에 대응하는 음성 데이터를 제1통신부(190)에 전송한다.
에러 판단부(184)는 조리 기기의 조리 개시 전 및 조리 동작 중에 검출부(170)를 통해 검출된 검출 정보에 기초하여 조리기기가 에러 상태인지를 판단하고, 에러 상태라고 판단되면 에러 정보를 제1통신부(190)로 전송하고, 정상 상태라고 판단되면 정상 상태 정보를 동작 제어부(185)에 전송한다.
에러 상태는, 도어 개방 상태, 음식물 미 수용 상태, 조리실 과열 상태, 순환팬 비동작 상태, 냉각팬 비동작 상태 등을 포함할 수 있다.
동작 제어부(185)는 조리기기의 전원 온 명령에 대응하는 신호가 수신되면 각종 구성부의 동작을 활성화시키고, 음성 인식 모드의 온 명령에 대응하는 신호가 수신되면 사운드 입력부(131) 및 사운드 출력부(132)의 동작을 활성화시키며, 음성 인식 모드의 오프 명령에 대응하는 신호가 수신되면 사운드 입력부(131) 및 사운드 출력부(132)의 동작을 비활성화시킨다.
동작 제어부(185)는 수신된 음성에 대응하는 음성 데이터가 트리거 음성이면 제1서버(300)와 조리를 위한 대화를 수행하는 것도 가능하다.
동작 제어부(185)는 조리 개시 명령이 수신되면 검출부(170)의 검출 정보에 기초하여 조리실의 내부에 음식물이 수용되어 있는지 판단하고, 음식물이 수용되어 있다고 판단되면 도어가 폐쇄 상태인지 판단하며, 도어가 폐쇄 상태라고 판단되면 제1통신부(190)를 통해 수신된 조리 정보에 기초하여 복수 부하의 동작을 제어한다.
동작 제어부(185)는 조리 정보에 대응하는 동작 수행 정보를 제1서버에 전송하는 것도 가능하다. 즉, 동작 제어부(185)는 제1서버에서 제공한 조리 정보에 기초하여 조리 동작을 수행하고 있음을 제1서버에 알린다.
동작 제어부(185)는 사용자 정보의 설정 명령에 대응하는 신호가 수신되면 사운드 입력부(131)를 활성화시키고, 수신된 음성에 대응하는 음성 데이터를 제1서버(300)에 전송하되 사용자 정보의 설정 명령을 함께 전송하도록 하는 것도 가능하다.
동작 제어부(185)는 제1통신부(190)를 통해 수신된 조리 정보에 기초하여 가열부(140)의 동작을 제어하고 순환부의 동작의 제어하며, 조리가 완료되었다고 판단되면 냉각부(160)의 동작을 제어한다.
즉 동작 제어부(185)는 조리실 온도 검출부(미도시)에서 검출된 조리실의 온도가 수신된 조리 온도에 도달하도록 가열부의 온 동작을 제어하고, 조리실 온도 검출부에서 검출된 조리실(100b)의 온도에 기초하여 조리실(100b)이 설정된 조리 온도를 유지하도록 가열부(140)의 온, 오프 동작을 제어하며, 조리 중 경과 시간을 카운트하고 카운트된 경과 시간이 조리 시간에 도달하면 가열부의 오프 동작을 제어한다.
동작 제어부(185)는 조리 중 순환부의 동작을 제어하여 조리실 내부의 열이 이동하도록 한다. 즉 동작 제어부(185)는 순환용 모터(152)를 제어하여 가열부(140)에 의해 생성되는 고온의 공기를 조리실(110) 내부에 균일하게 전달되도록 한다.
동작 제어부(185)는 조리 동작 중 냉각용 모터(163)의 구동을 제어하여 전장실이 냉각될 수 있도록 함으로써, 전장실에 마련된 전장품을 보호한다.
그리고 동작 제어부(185)는 조리가 완료되면 냉각부의 냉각용 모터를 동작시켜 조리실 내부의 온도가 낮아지도록 한다.
동작 제어부(185)는 조리 동작 중 검출부(170)의 검출 정보에 조리실이 과열 상태인지를 판단하는 것도 가능하고, 냉각용 팬이나 순환용 팬이 에러 상태인지, 정상 상태인지 판단하는 것도 가능하다.
동작 제어부(185)는 제1통신부를 통해 음성 데이터가 수신되면 수신된 음성 데이터에 기초하여 음성을 출력하도록 사운드 출력부(132)의 동작을 제어한다.
여기서 음성 데이터는, 응답 정보에 대응하는 음성 데이터, 조치 정보에 대응하는 음성 데이터, 안내 정보에 대응하는 음성 데이터일 수 있고 레시피 정보에 대응하는 음성 데이터일 수 있다.
아울러 제1제어부(180)는 입력부(121)를 통해 등록 명령이 입력되면 제1통신부를 제어하여 제1서버와의 통신을 수행하도록 하고, 조리기기의 식별 정보를 제1서버에 전송하도록 한다.
제1제어부(180)는 주기적으로 인터넷 연결 상태를 체크하고, 인터넷의 연결 불가능 상태라고 판단되면 통신 불가능 정보를 표시부(122) 또는 사운드 출력부(132)를 통해 출력하도록 하는 것도 가능하다.
제1제어부(180)는 텍스트 데이터를 음성 데이터로 변환하는 변환부(미도시, TTS)를 더 포함할 수 있고, 변환부를 이용하여 통신 불가능 정보를 음성 데이터로 변환하고 변환된 음성 데이터를 음성으로 출력하도록 사운드 출력부를 제어한다.
제1제어부는 조리기기 내 구성요소들의 동작을 제어하기 위한 알고리즘 또는알고리즘을 재현한 프로그램에 대한 데이터를 저장하는 메모리(미도시), 및 메모리에 저장된 데이터를 이용하여 전술한 동작을 수행하는 프로세서(미도시)로 구현될 수 있다. 이때, 메모리와 프로세서는 각각 별개의 칩으로 구현될 수 있다. 또는, 메모리와 프로세서는 단일 칩으로 구현될 수도 있다.
제1제어부(180)는 CPU, MCU 또는 프로세서(Processor)일 수 있다.
제1제어부(180)는 조리기기(100)의 제어를 위한 제어 프로그램과 제조사에서 제공되거나 서버로부터 다운로드 받은 어플리케이션과 관련된 GUI(graphical user interface), GUI를 제공하기 위한 이미지들, 사용자 정보, 문서, 데이터베이스들 또는 관련 데이터들을 저장할 수 있다.
제1통신부(190)는 공유기(200)를 통해 제1서버(300)와 통신을 수행하고, 제1제어부의 명령에 기초하여 음성 데이터를 제1서버(300)에 전송하고, 제1서버(300)로부터 음성데이터가 수신되면 수신된 음성 데이터를 제1제어부(180)의 동작 제어부(185)에 전송한다.
제1통신부(190)는 제1서버(300)로부터 조리 정보가 수신되면 수신된 조리 정보를 제1제어부(180)의 동작 제어부(185)에 전송한다.
제1통신부(190)는 외부의 제1서버와 통신을 가능하게 하는 하나 이상의 구성 요소를 포함할 수 있으며, 예를 들어 근거리 통신 모듈, 유선 통신 모듈 및 무선 통신 모듈 중 적어도 하나를 포함할 수 있다.
근거리 통신 모듈은 블루투스 모듈, 적외선 통신 모듈, RFID(Radio Frequency Identification) 통신 모듈, WLAN(Wireless Local Access Network) 통신 모듈, NFC 통신 모듈, 직비(Zigbee) 통신 모듈 등 근거리에서 무선 통신망을 이용하여 신호를 송수신하는 다양한 근거리 통신 모듈을 포함할 수 있다.
유선 통신 모듈은 지역 통신(Local Area Network; LAN) 모듈, 광역 통신(Wide Area Network; WAN) 모듈 또는 부가가치 통신(Value Added Network; VAN) 모듈 등 다양한 유선 통신 모듈뿐만 아니라, USB(Universal Serial Bus), HDMI(High Definition Multimedia Interface), DVI(Digital Visual Interface), RS-232(recommended standard232), 전력선 통신, 또는 POTS(plain old telephone service) 등 다양한 케이블 통신 모듈을 포함할 수 있다.
무선 통신 모듈은 와이파이(Wifi) 모듈, 와이브로(Wireless broadband) 모듈 외에도, GSM(global System for Mobile Communication), CDMA(Code Division Multiple Access), WCDMA(Wideband Code Division Multiple Access), UMTS(universal mobile telecommunications system), TDMA(Time Division Multiple Access), LTE(Long Term Evolution) 등 다양한 무선 통신 방식을 지원하는 무선 통신 모듈을 포함할 수 있다.
도 6은 실시 예에 따른 조리기기와 통신을 수행하는 제1서버(300)의 제어 구성도이다.
제1서버(300)는 제2통신부(310)와 제2제어부(320)를 포함한다. 아울러, 제1서버(300)는 입력부(미도시)와 표시부(미도시)를 더 포함할 수 있다.
제2통신부(310)는 공유기(200)를 통해 조기기기(100)와 통신을 수행한다.
제2통신부(310)는 조리기기(100)와 제1서버(300) 간의 음성 데이터를 송수신하고, 제2제어부의 명령에 따라 조리 정보를 조리기기(100)에 전송한다.
또한 제2통신부(310)는 레시피를 제공하는 제2서버(400)와 통신을 수행한다.
즉 제2통신부(310)는 사용자의 요구 정보를 제2서버에 전송하고, 제2서버로부터 레시피 정보가 수신되면 수신된 레시피 정보를 제2제어부에 전송한다.
제2통신부(310)는 사용자의 요구 정보 전송 시 사용자 정보를 함께 전송하는 것도 가능하다.
제2통신부(310)는 단말기(미도시)를 통해 조기기기(100)와 통신을 수행한다.
제2통신부(310)는 단말기로부터 사용자 정보를 수신하는 것도 가능하고, 조리기기의 식별 정보를 수신하는 것도 가능하다.
제2제어부(320)는 수신된 음성 데이터에 기초하여 사용자의 요구 정보와 질의 정보를 획득하고 요구 정보가 획득되면 요구 정보에 대응하는 조리 정보를 획득하고 획득된 조리 정보를 조리기기에 전송하도록 제2통신부를 제어하고, 질의 정보에 대응하는 응답 정보를 생성하고 생성된 응답 정보를 조리기기에 전송하도록 제2통신부를 제어한다.
제2제어부(320)는 사용자로부터 조리 개시 명령이 입력되기 전까지 사용자와의 대화 정보로부터 사용자의 요구 정보를 획득할 수 있다.
여기서 대화 정보는 제1서버의 응답 정보와, 제1서버의 응답에 대한 사용자의 반응 정보를 포함할 수 있다.
즉 제 2제어부는 응답 정보와, 응답 정보에 대응하는 반응 정보로부터 사용자의 요구 정보를 획득할 수 있다.
제2제어부(320)는 요구 정보에 대응하는 레시피 정보를 획득하고 획득된 레시피 정보를 조리기기에 전송하도록 제2통신부를 제어하는 것도 가능하다.
레시피 정보는 메뉴명, 재료 정보, 조리 전 음식물의 준비 정보, 조리 정보를 포함할 수 있다. 여기서 조리 정보는 조리 온도 및 조리 시간을 포함할 수 있다.
제2제어부(320)는 조리 기기로부터 수신된 사용자의 요구 정보 및 미리 저장된 사용자 정보에 기초하여 복수 개의 레시피 중 최적의 레시피 정보를 획득하고 획득된 레시피 정보를 조리기기에 전송한다.
일 예로, 제2제어부(320)는 사용자의 요구 정보가 '피자 굽기'이면 피자를 굽기 위한 조리 온도와 조리 시간을 조리 정보로 조리기기에 전송한다.
다른 예로, 제2제어부(320)는 사용자의 요구 정보가 '피자 굽기'이고 사용자 정보 중의 종교 정보가 '불교'이면 야채 피자를 굽기 위한 조리 온도와 조리 시간을 조리 정보로 조리기기에 전송한다.
또 다른 예로, 제2제어부(320)는 사용자의 요구 정보가 '피자의 레시피 제공'이고 사용자 정보 중의 종교 정보가 '불교'이면 '야채 피자의 레시피 정보'를 조리기기에 전송하고, 사용자의 요구 정보가 '조리 개시'이면 야채 피자의 조리 온도와 조리 시간을 조리 정보로 조리기기에 전송한다.
또 다른 예로, 제2제어부(320)는 사용자의 요구 정보가 '일인용 피자의 레시피 제공'이고 사용자 정보 중의 종교 정보가 '불교'이면 '일인용 야채 피자의 레시피 정보'를 조리기기에 전송하고, 사용자의 요구 정보가 '조리 개시'이면 일인용 야채 피자의 조리 온도와 조리 시간을 조리 정보로 조리기기에 전송한다.
또 다른 예로, 제2제어부(320)는 사용자의 요구 정보가 '일인용 피자의 레시피 제공'이고 사용자 정보 중의 종교 정보가 '힌두교'이면 일인용 피자의 레시피 정보 중 '소고기가 제외된 레시피 정보'를 획득하고 획득된 레시피 정보를 조리기기에 전송하고, 사용자의 요구 정보가 '조리 개시'이면 일인용 피자의 조리 온도와 조리 시간을 조리 정보로 조리기기에 전송한다.
또 다른 예로, 제2제어부(320)는 사용자의 요구 정보가 '메뉴 제공'이고 사용자 정보 중의 일정 정보가 '생일'이면 생일에 먹는 음식물의 메뉴명(케익용 빵)을 조리기기에 전송하고, 사용자의 요구 정보가 '조리 개시'이면 케익용 빵을 굽기 위한 조리 온도와 조리 시간을 조리 정보로 조리기기에 전송한다.
또 다른 예로, 제2제어부(320)는 사용자의 요구 정보가 '메뉴 제공'이고 사용자 정보 중의 선호 정보가 '바삭바삭한 쿠키'이면 '바삭바삭한 쿠키'를 추천 메뉴명으로 조리기기에 전송한다.
또 다른 예로, 제2제어부(320)는 사용자의 요구 정보가 '메뉴 제공'이고 사용자 정보 중의 주소 정보가 '미국'이고 일정 정보가 '추수감사절'이면 '칠면조 요리'를 추천 메뉴명으로 조리기기에 전송한다.
또 다른 예로, 제2제어부(320)는 사용자의 요구 정보가 '피자의 레시피 제공'이고 사용자 정보 중의 맛별 레벨 정보가 '매운 맛 5레벨 중 4레벨'이면 '매운 맛 피자의 레세피 정보'를 획득하고 획득된 레시피 정보를 조리기기에 전송한다.
제2제어부(320)는 수신된 에러 정보에 대응하는 조치 정보를 획득하고 획득된 조치 정보를 조리기기에 전송하도록 제2통신부를 제어하는 것도 가능하다.
제2제어부(320)는 조리기기를 이용하여 조리를 수행한 메뉴명, 레시피 정보, 조리 정보를 조리 히스토리로 저장하고 저장된 메뉴명, 레시피 정보, 조리 정보 및 요구 정보에 기초하여 사용자의 선호 정보를 생성하며 생성된 선호 정보를 저장한다.
제2제어부(320)는 제1변환부(321), 자연어 인식부(322), 정보 저장부(323), 데이터 포털부(324), 에러 대응부(325) 및 제2변환부(326)를 포함할 수 있다.
제1변환부(321)는 수신된 음성 데이터를 텍스트 데이터로 변환하고, 변환된 텍스트 데이터를 자연어 인식부(322)에 전송한다.
제1변환부(321)는 자동으로 음성을 인식하는 자동 음성 인식부(ASR: Automatic Speech Recognition)를 포함한다.
자연어 인식부(NLU: Natural Language Understanding, 322)는 텍스트 데이터를 컴퓨터용 언어로 변환하고, 변환된 컴퓨터용 언어에 기초하여 사용자가 요구하는 요구 정보를 획득하고 획득된 요구 정보를 데이터 포털부(324)에 전송한다.
자연어 인식부(322)는 수신된 음성 데이터가 트리거 음성이라고 판단되면 음성 인식 모드를 수행하여 사용자와의 대화를 수행하도록 한다.
자연어 인식부(322)는 정보 저장부(323)로부터 사용자 정보를 획득하고 획득된 사용자 정보를 요구 정보와 함께 데이터 포털부(324)에 전송하는 것도 가능하다.
즉 자연어 인식부(322)는 제2서버로 레시피 정보의 제공을 요청한다.
자연어 인식부(322)는 데이터 포털부(324)부터 레시피 정보가 수신되면 수신된 레시피 정보를 조리기기에 전송한다.
자연어 인식부(322)는 레시피 정보로부터 조리 정보를 획득하고 획득된 조리 정보만을 조리기기에 전송하는 것도 가능하다.
자연어 인식부(322)는 제2서버로부터 복수 개의 레시피 정보가 수신되면 사용자 정보 및 요구 정보에 기초하여 복수 개의 레시피 중 최적의 레시피 정보를 획득하고, 획득된 최적의 레시피 정보를 조리기기에 전송하는 것도 가능하다.
자연어 인식부(322)는 수신된 음성 데이터가 질의 정보라고 판단되면 질의 정보에 대응하는 응답 정보를 생성하고 생성된 응답 정보를 제2변환부(326)에 전송한다.
정보 저장부(323)는 사용자 정보를 저장한다.
사용자 정보는 조리기기로부터 전송된 정보이거나, 단말기로부터 전송된 정보일 수 있고, 미리 정해진 사이트나 애플리케이션(즉 앱, 어플)에 저장된 정보일 수 있다.
여기서 사용자 정보는, 사용자의 아이디, 성별, 이름 등의 기본 정보와, 사용자의 주소, 종교 등의 생활 환경 정보와, 사용자의 생일, 기념일 등의 일정 정보를 포함한다.
사용자 정보는 사용자가 선호하는 맛, 맛별 레벨 식감 등의 선호 정보를 포함할 수 있고, 사용자의 알레르기 정보를 더 포함할 수 있으며, 사용자의 성별 정보, 사용자의 직업 정보 및 병력 정보를 더 포함할 수 있다.
데이터 포털부(324)는 단말기와 연동을 수행하고 단말기에 저장된 사용자 정보를 수신하는 것도 가능하다.
데이터 포털부(324)는 요구 정보를 제2서버(400)에 전송하고, 사용자 정보를 제2서버(400)에 전송한다.
데이터 포털부(324)는 제2서버(400)에서 전송된 적어도 하나의 레시피 정보를 자연어 인식부(322)에 전송하는 것도 가능하다.
데이터 포털부(324)는 제2통신부(310)에 마련될 수도 있다.
에러 대응부(325)는 복수 개의 에러 정보에 대응하는 조치 정보를 저장하고, 수신된 에러 정보에 대응하는 조치 정보를 확인하고 확인된 조치 정보를 조리기기에 전송한다.
제2변환부(326)는 자연어 인식부에서 인식된 응답 데이터를 음성 데이터로 변환하고 변환된 음성 데이터를 조리기기에 전송한다.
제2변환부(326)는 레시피 정보를 음성 데이터로 변환하고 변환된 음성 데이터를 조리기기에 전송하는 것도 가능하다.
제2변환부(326)는 문자 음성 자동 변환부(TTS: Text To Speech)를 포함한다.
제2서버(400)는 복수 개의 메뉴에 대한 레시피 정보를 저장하되, 각 메뉴에 대한 적어도 하나의 레시피 정보를 저장할 수 있다.
제2서버(400)는 복수 개의 메뉴 중 요구 정보에 대응하는 메뉴를 획득하고 획득된 메뉴명을 제1서버에 전송한다.
제2서버(400)는 요구 정보에 대응하는 복수 개의 레시피 정보를 제1서버에 전송하는 것도 가능하다.
제2서버(400)는 복수 개의 레시피 중 요구 정보에 대응하는 최적의 레시피 정보를 획득하고 획득된 최적의 레시피 정보를 제1서버(300)에 전송한다.
제2서버(400)는 복수 개의 레시피 중 요구 정보와 사용자 정보에 대응하는 최적의 레시피 정보를 획득하고 획득된 최적의 레시피 정보를 제1서버(300)에 전송한다.
도 5 및 도 6에 도시된 조리기기 및 제1서버의 구성 요소들의 성능에 대응하여 적어도 하나의 구성요소가 추가되거나 삭제될 수 있다. 또한, 구성 요소들의 상호 위치는 시스템의 성능 또는 구조에 대응하여 변경될 수 있다는 것은 당해 기술 분야에서 통상의 지식을 가진 자에게 용이하게 이해될 것이다.
한편, 도 5 및 도 6 에서 도시된 각각의 구성요소는 소프트웨어 및/또는 Field Programmable Gate Array(FPGA) 및 주문형 반도체(ASIC, Application Specific Integrated Circuit)와 같은 하드웨어 구성요소를 의미한다.
도 7은 실시 예에 따른 조리기기를 포함하는 조리 시스템의 정보 송수신 예시도이다.
조리 기기는 전원의 온 명령이 수신되면 각종 구성부에 전력을 공급한다.
조리기기는 입력부의 음성 인식 모드가 선택(501)되면 음성 인식 모드를 수행한다. 이때 조리기기는 사운드 입력부, 사운드 출력부 및 제1통신부를 활성화시킨다.
아울러 조리기기는 전원이 온 되면 사운드 입력부, 사운드 출력부 및 제1통신부를 활성화시키고, 트리거 음성이 수신되었다고 판단되면 음성 인식 모드를 수행하는 것도 가능하다.
조리기기는 사운드 입력부를 통해 음성 신호가 수신(502)되면 수신된 음성 신호의 전처리를 수행(503)하여 음성 신호 중 노이즈를 제거하고 노이즈가 제거된 음성 신호에 대응하는 음성 데이터를 제1서버에 전송(504)한다.
제1서버(300)는 음성 데이터가 수신되면 수신된 음성 데이터를 텍스트 데이터로 변환(505)하고 변환된 텍스트 데이터를 컴퓨터용 언어로 변환하고, 변환된 컴퓨터용 언어에 기초하여 자연어를 인식(506)한다.
제1서버(300)는 인식된 자연어가 사용자의 요구가 포함된 언어인지 사용자의 질의가 포함된 언어인지 확인한다.
제1서버(300)는 인식된 자연어가 사용자의 질의가 포함된 언어라고 판단되면 인식된 자연어에 기초하여 사용자의 질의 정보를 획득(507)하고, 획득된 질의 정보에 대응하는 응답 정보를 생성(508)한다. 이때 응답 정보는 컴퓨터용 언어일 수 있다. 이에 따라 제1서버는 응답 정보를 컴퓨터용 언어에서 텍스트 데이터로 변환하고 변환된 텍스트 데이터를 음성 데이터로 변환한다.
즉 제1서버(300)는 생성된 응답 정보를 음성 데이터로 변환하고, 변환된 음성 데이터를 조리기기에 전송(510)한다.
이때 조리기기는 음성 데이터가 수신되면 수신된 음성 데이터에 대응하는 응답 음성을 사운드 출력부인 스피커를 통해 출력(511)한다.
제1서버(300)는 인식된 자연어가 사용자의 요구가 포함된 언어라고 판단되면 인식된 자연어에 기초하여 사용자의 요구 정보를 획득(512)하고, 획득된 요구 정보를 제2서버(400)에 전송함으로써 레시피 정보를 요청(513)한다.
제2서버(400)는 요구 정보가 수신되면 수신된 요구 정보 중 메뉴명을 확인하고 확인된 메뉴의 적어도 하나의 레시피 정보를 획득(514)하고, 획득된 메뉴의 적어도 하나의 레시피 정보를 제1서버(300)에 전송한다.
예를 들어 제2서버는 요구 정보로부터 메뉴명, 조리량, 인원수, 선호 정보 중 적어도 하나를 획득하고, 획득된 적어도 하나의 정보에 대응하는 레시피 정보를 획득할 수 있다.
제1서버(300)는 적어도 하나의 레시피 정보를 수신(515)한다.
제1서버(300)는 수신된 레시피 정보가 복수 개이면 사용자 정보에 기초하여 복수 개의 레시피 정보 중 최적의 레시피 정보를 획득(516)하고 획득된 최적의 레시피 정보에 기초하여 조리 정보를 획득(517)하며 획득된 조리 정보를 조리기기에 전송(518)한다.
제1서버(300)는 사용자의 주소, 종교, 일정 중 적어도 하나에 기초하여 복수 개의 레시피 정보 중 최적의 레시피 정보를 획득할 수 있다.
조리기기는 조리 정보가 수신(519)되면 레시피 정보를 표시부(122)를 통해 표시하고, 도어의 개폐 상태 및 음식물의 수용 상태를 검출(520)하고 도어의 개폐 상태 및 음식물의 수용 상태에 기초하여 에러를 검출(521)한다.
조리기기는 조리실에 음식물이 수용되어 있지 않거나, 도어가 개방되었다고 판단되면 에러 정보를 표시부 또는 사운드 출력부를 통해 출력할 수 있다.
조리기기는 조리실에 음식물이 수용되어 있고 도어가 폐쇄되었다고 판단되면 조리 정보에 기초하여 음식물의 조리를 진행(522)하고, 음식물의 조리가 완료되었다고 판단되면 조리 완료를 알리는 알림(523)을 수행한다.
조리 완료를 알리는 알림은, 표시부(122)를 통해 알림 정보를 표시하거나 사운드 출력부(132)를 통해 알림 정보를 사운드로 출력하는 것을 포함한다.
아울러 제1서버는 요구 정보와 사용자 정보를 모두 제2서버(400)에 전송하는 것도 가능하다. 이때 제2서버는 요구 정보와 사용자 정보에 기초하여 사용자가 요구한 메뉴에 대한 최적의 레시피 정보를 획득하고 획득된 최적의 레시피 정보를 제1서버(300)에 전송할 수 있다.
이러한 조리 시스템 내 조리기기의 제어 구성을 도 8a 및 도 8b를 참조하여 구체적으로 설명한다.
도 8a 및 도 8b는 실시 예에 따른 조리기기의 조리 동작 제어 순서도로, 도 9 내지 도 12를 참조하여 설명한다.
도 9 내지 도 12는 실시 예에 따른 조리기기의 조리 동작 제어를 위한 사용자와의 대화 예시도이다.
조리기기는 음성 인식 모드가 온(601)되면 음성 인식 모드로 진입(602)한다.
여기서 음성 인식 모드로 진입하는 것은, 사운드 입력부, 사운드 출력부 및 제1통신부를 활성화시키는 것을 포함할 수 있다.
조리기기는 사운드 입력부(131)를 통해 음성이 수신(603)되면 수신된 음성 신호를 저장(604)하고, 저장된 음성 신호의 전처리를 수행(605)하고 전처리가 수행된 음성 신호에 대응하는 음성 데이터를 제1서버(300)에 전송(606)한다.
여기서 음성 신호의 전처리를 수행하는 것은, 음성 신호 중의 노이즈를 제거하는 것을 포함한다.
이때 제1서버(300)는 조리기기에 수신된 음성이 트리거 음성이라고 판단되면 음성 인식 모드를 시작한다. 즉 제1서버(300)는 조리기기를 통해 사용자와의 대화를 시작할 수 있다.
즉 조리기기는 사운드 입력부에 수신된 음성 신호에 대응하는 음성 데이터를 제1서버로 전송하고, 제1서버로부터 전송된 음성 데이터를 사운드 출력부를 통해 음성으로 출력함으로써 사용자와의 대화를 수행한다.
조리기기는 제1서버로부터 조리 정보가 수신되었는지 판단(607)한다.
조리기기는 제1서버로부터 음성 데이터가 수신(608)되었다고 판단되면 사운드 출력부를 통해 수신된 음성 데이터에 대응하는 음성을 출력(609)한다.
조리기기는 출력된 음성에 대응하는 음성 신호가 수신되면 수신된 음성 신호에 대응하는 음성 데이터를 다시 제1서버에 전송한다.
이와 같이 조리기기는 제1서버로부터 조리 정보가 수신될 때까지 사용자와의 대화를 수행할 수 있다. 또한 조리기기는 사용자로부터 조리 개시 명령이 입력될 때까지 사용자와의 대화를 수행할 수 있다.
여기서 조리기기와 사용자가 대화를 수행하는 것은, 조리기기에서 음성의 입출력만을 수행하는 것을 포함한다. 이러한 조리기기는 제1서버의 음성 인식 결과에 기초하여 응답 음성을 출력할 수 있다.
아울러 제1서버는 사용자와의 대화 정보에 기초하여 조리 정보를 획득할 수 있고 획득된 조리 정보를 조리기기에 전송할 수 있다.
조리기기는 제1서버로부터 조리 정보가 수신되었다고 판단되면 수신된 조리 정보에 기초하여 가열부를 제어함으로써 조리실의 예열을 수행(610)한다.
조리기기는 제1서버로부터 레시피 정보가 수신되었다고 판단되면 레시피 정보를 표시부(122)를 통해 표시한다. 또한 조리기기는 레시피 정보를 사운드 출력부(132)를 통해 음성으로 출력하는 것도 가능하다.
조리기기는 조리 정보에 기초하여 예열 시간이 경과하였다고 판단되면 예열을 완료(611)하고, 조리실 내부에 음식물이 검출되었는지 음식물을 검출하고, 음식물이 검출되었다고 판단(612)되면 도어의 개폐 상태를 검출하여 도어가 폐쇄되었는지 판단(613)한다.
조리기기는 조리실 내부에 음식물이 없거나 도어가 개방 상태라고 판단되면 에러 상태라고 판단한다. 즉 조리기기는 조리실 내부에 음식물이 없으면 음식물의 수용을 알리는 에러 알림을 출력(614)한다. 그리고 조리기기는 도어가 개방 상태라고 판단되면 도어 폐쇄를 알리는 에러 알림을 출력(614)한다.
조리기기는 조리실 내부에 음식물이 존재하고 도어가 폐쇄 상태라고 판단되면 음식물을 조리하기 위한 조리 정보를 알리고(615), 조리 정보에 기초하여 조리 온도 및 조리 시간을 제어(616)함으로써 조리실 내의 음식물이 조리되도록 한다.
여기서 조리 정보를 알리는 것은, 표시부를 통해 조리 온도 및 조리 시간을 표시하는 것을 포함한다. 여기서 조리 시간은 총 조리 시간 중 예열 시간을 제외한 남은 시간일 수 있다. 그리고 남은 시간은 본 조리 시간과 냉각 시간을 포함할 수 있다.
조리기기는 조리 시간에 기초하여 조리 완료 여부를 판단(617)하고 음식물의 조리가 완료되었다고 판단되면 음식물의 조리 완료를 알리는 알림 정보를 출력(618)한다.
여기서 조리 완료는 알리는 알림 정보는 표시부를 통해 조리 완료 정보를 표시하거나, 사운드 출력부를 통해 조리 완료 정보를 사운드로 출력하는 것을 포함한다.
도 9 내지 도 12는 실시 예에 따른 조리기기와 사용자와의 대화 예시도로, 조리기기는 사용자의 음성에 대한 요구 정보와 미리 저장된 사용자 정보에 대응하는 메뉴별 조리 정보를 수신하거나 메뉴별 레시피 정보를 수신하고 수신된 정보를 출력하는 예에 대해 설명한다.
도 9에 도시된 바와 같이, 사용자가 트리거 음성('오븐아')과 함께 질의 음성을 발화하면, 조리기기는 제1서버를 이용한 음성 인식 모드를 수행하면서 제1서버의 명령에 기초하여 사용자의 질의 음성에 대응하는 응답 음성을 출력한다.
이때 조리기기는 제1서버의 명령에 따라 사용자 정보 중 일정 정보('추수감사절')에 대응하는 응답 음성('칠면조 요리')을 출력할 수 있다.
사용자가 응답 음성에 승낙하는 반응 음성('응')과 함께 조리 량('한 마리')의 요구 음성을 발화하면, 조리기기는 발화된 음성 데이터를 제1서버에 전송한다. 이후 조리기기는 제1서버로부터 칠면조 한 마리를 조리하기 위한 조리 정보(즉 조리 시간 및 조리 온도)를 수신하고 수신된 조리 정보를 출력함과 함께 사용자에게 안내 음성('칠면조를 준비해주세요')을 출력한다.
이후 사용자가 조리 개시 명령의 음성을 발화하면, 조리기기는 수신된 조리 정보에 기초하여 칠면조 한 마리의 조리를 수행하고, 칠면조의 조리가 완료되면 조리 완료에 대한 음성을 출력한다.
도 10에 도시된 바와 같이, 사용자가 트리거 음성('오븐아')과 함께 요구 음성('쿠키')을 발화하면, 조리기기는 제1서버를 이용한 음성 인식 모드를 수행하면서 제1서버의 명령에 기초하여 응답 음성을 출력한다.
이때 조리기기는 제1서버의 명령에 따라 사용자 정보 중 선호 정보를 질의하는 응답 음성('촉촉한 쿠키, 바삭바삭한 쿠키')을 출력할 수 있다.
사용자가 응답 음성의 반응 음성('촉촉한 쿠키')을 발화하면, 조리기기는 발화된 음성 데이터를 제1서버에 전송한다. 이후 조리기기는 제1서버로부터 촉촉한 쿠키를 조리하기 위한 레시피 정보를 수신하고 수신된 레시피 정보를 표시함과 함께 사용자에게 안내 음성('촉촉한 쿠키를 만들기 위한 레시피')을 출력한다.
이후 사용자가 조리 개시 명령의 음성을 발화하면, 조리기기는 수신된 조리 정보에 기초하여 촉촉한 쿠키를 굽기 위한 조리를 수행하고, 쿠키가 완료되면 조리 완료에 대한 음성을 출력한다.
도 11에 도시된 바와 같이, 사용자가 트리거 음성('오븐아')과 함께 요구 음성('피자')을 발화하면, 조리기기는 제1서버를 이용한 음성 인식 모드를 수행하면서 제1서버의 명령에 기초하여 응답 음성을 출력한다.
이때 조리기기는 제1서버의 명령에 따라 사용자 정보 중 선호 정보에 대한 응답 음성('씬)과 함께 사용자 정보 중 종교 정보에 대한 응답 음성('야채 피자')을 출력할 수 있다.
사용자가 응답 음성의 반응 음성('응')을 발화하면, 조리기기는 발화된 음성 데이터를 제1서버에 전송한다. 이후 조리기기는 제1서버로부터 씬 야채 피자를 조리하기 위한 레시피 정보를 수신하고 수신된 레시피 정보를 표시하고, 또한 사용자에게 안내 음성('씬 야채 피자의 레시피')을 출력한다.
이후 사용자가 조리 개시 명령의 음성을 발화하면, 조리기기는 수신된 조리 정보에 기초하여 씬 야채 피자를 굽기 위한 조리를 수행하고, 씬 야채 피자의 굽기가 완료되면 조리 완료에 대한 음성을 출력한다.
도 12에 도시된 바와 같이, 사용자가 트리거 음성('오븐아')과 함께 질의 음성('오늘은 뭘 먹을까?')을 발화하면, 조리기기는 제1서버를 이용한 음성 인식 모드를 수행하면서 제1서버의 명령에 기초하여 사용자의 질의 음성에 대응하는 응답 음성을 출력한다.
이때 조리기기는 제1서버의 명령에 따라 사용자가 가진 재료를 묻는 질의 음성을 응답 음성으로 출력할 수 있다.
사용자가 응답 음성에 대한 반응 음성('오징어, 버터')을 발화하면, 조리기기는 발화된 음성 데이터를 제1서버에 전송한다. 이후 조리기기는 제1서버로부터 오징어와 버터를 이용하여 만들 수 있는 추천 메뉴를 획득하고 획득된 추천 메뉴에 대한 의견을 묻는 응답 음성('버터구이 오징어')을 출력한다.
이후 사용자가 응답 음성에 대한 반응 음성('응')을 발화하면, 조리기기는 발화된 음성 데이터를 제1서버에 전송한다. 이후 조리 기기는 제1서버로부터 버터 구이 오징어의 레시피 정보 및 안내 정보를 수신하고 수신된 레시피 정보를 출력하며, 안내 정보에 기초하여 사용자에게 안내 음성('오븐 상단에 놓으시면 좋아요')을 출력한다.
이후 사용자가 조리 개시 명령의 음성을 발화하면, 조리기기는 수신된 조리 정보에 기초하여 버터 구이 오징어를 굽기를 수행하고, 굽기가 완료되면 조리 완료에 대한 음성을 출력한다.
이 외에도, 제1서버는 사용자 정보로 땅콩에 대한 알레르기 정보가 저장되어 있으면, 쿠키의 레시피 정보 요청에 대응하여 땅콩이 제외된 쿠키의 레시피 정보를 제공할 수 있다.
그리고 제1서버는 사용자 정보로 당뇨에 대한 병력 정보가 저장되어 있으면 쿠키의 레시피 정보 요청에 대응하여 설탕의 양의 최소화 또는 설탕이 제거된 쿠키의 레시피 정보를 제공할 수 있다.
그리고 제1서버는 사용자 정보로 승려라는 직업 정보가 저장되어 있으면, 메뉴별 레시피 정보 중 육류가 제외된 레시피 정보만을 획득하여 제공할 수 있다.
도 13은 실시 예에 따른 조리기기의 에러의 대응 제어 순서도이다.
조리기기는 조리 동작 중 검출부를 통해 검출된 검출 정보를 확인(621)한다.
여기서 검출 정보를 확인하는 것은, 조리기기는 조리 동작 중 조리실의 내부의 온도를 검출하고 검출된 온도를 확인하는 것을 포함하고, 순환용 모터의 회전수를 검출하고 검출된 회전수를 확인하는 것을 포함하며, 냉각용 모터의 회전수를 검출하고 검출된 회전수를 확인하는 것을 포함한다.
다음 조리기기는 검출 정보를 제1서버에 전송(622)한다.
이때 제1서버는 수신된 검출 정보인 조리실 내부의 온도, 순환용 모터의 회전수 및 냉각용 모터의 회전수에 기초하여 가열부, 순환부 및 냉각부의 에러 여부를 판단하고 판단 결과에 따라 조리 정지 및 조리 유지를 결정할 수 있다.
조리기기는 제1서버로부터 조리 정지 명령이 수신되었는지 판단(623)하고 조리 정지 명령이 수신되지 않았다고 판단되면 위험 레벨이 낮다고 판단하여 음식물의 조리를 유지시키고 음식물의 조리를 완료(624)한다.
반면 조리기기는 조리 정지 명령이 수신되었다고 판단되면 위험 레벨이 높다고 판단하여 조리를 정지(625)시키고 표시부 또는 사운드 출력부를 통해 조리 정지 정보를 출력함으로써 사용자가 조리가 정지됨을 인지할 수 있도록 한다.
조리기기는 제1서버로부터 조치 정보를 수신(626)하고 수신된 조치 정보를 출력(627)한다.
여기서 조치 정보를 출력하는 것은, 표시부를 통해 문자로 표시하거나 사운드 출력부를 통해 음성으로 출력하는 것을 포함한다.
제1서버는 조리기기의 에러 상태가 사용자에 의해 조치 가능한 상태라고 판단되면 조치 정보만을 전송하고, 사용자에 의해 조치 불가능한 상태라고 판단되면 조치 정보로 AS 신청 요청 정보를 전송한다.
조리기기는 입력부 또는 사운드 입력부를 통해 AS 신청 명령이 수신(628)되면AS 신청 정보를 제1서버에 전송(629)한다. 이때 제1서버는 조리기기에 대한AS를 AS 센터에 신청하고 신청 결과에 대한 정보를 조리기기에 전송한다.
조리기기는 제1서버로부터 AS 신청 완료 정보가 수신되면 수신된 AS 신청 완료 정보를 표시(630)한다.
아울러 조리기기는 AS 신청 완료 정보를 사운드 출력부를 통해 출력하는 것도 가능하다.
아울러 에러 여부의 판단은 조리기기에서 수행하는 것도 가능하다. 이때 조리기기는 제1서버에 에러 정보를 전송하고 제1서버로부터 조치 정보만을 수신할 수 있다.
도 14는 실시 예에 따른 조리기기와 사용자와의 대화 예시도이다.
도 14에 도시된 바와 같이, 조리 개시 명령의 음성을 발화하면, 조리기기는 수신된 조리 정보에 기초하여 조리 동작을 시작하기 전에 도어가 폐쇄 상태인지 음식물이 수용되어 있는 상태인지 검출하고 검출 정보를 제1서버에 전송한다.
이때 제1서버는 검출 정보에 대응하는 응답 정보를 생성하고 생성된 응답 정보를 음성데이터로 변환하여 조리기기에 전송한다.
조리기기는 수신된 응답 데이터를 음성으로 출력한다. 예를 들어, 도어가 개방된 상태라고 판단되면 조리기기는 응답 음성으로 도어 폐쇄를 알리는 음성을 출력한다.
사용자가 반응 음성('닫았어')을 발화하면 조리기기는 조리 정보에 기초하여 조리를 수행하고, 조리 동작 중 검출부의 검출 정보에 기초하여 에러 여부를 판단하고, 에러라고 판단되면 에러 정보를 제1서버에 전송한다.
이때 제1서버는 에러 정보에 대응하는 조치 정보를 조리기기에 전송하되, 에러 정보에 대응하는 음성 데이터와 조치 정보에 대응하는 음성 데이터를 조리기기에 전송할 수 있다.
조리기기는 응답 음성('온도가 너무 높아요, 조리를 정지할께요')를 출력한다.
사용자가 반응 음성('정지해줘')를 발화하면, 조리기기는 조리 동작을 정지하고 제1서버의 명령에 따라 에러에 대한 조치를 위한 응답 음성('히터 고장, AS 신청')을 출력한다.
사용자가 반응 음성('신청해줘')를 발화하면, 조리기기는 음성 데이터를 제1서버에 전송하고, 제1서버로부터 신청 완료 정보가 수신되면 수신된 신청 완료 정보에 대한 응답 음성을 출력한다.
한편, 개시된 실시예들은 컴퓨터에 의해 실행 가능한 명령어를 저장하는 기록매체의 형태로 구현될 수 있다. 명령어는 프로그램 코드의 형태로 저장될 수 있으며, 프로세서에 의해 실행되었을 때, 프로그램 모듈을 생성하여 개시된 실시예들의 동작을 수행할 수 있다. 기록매체는 컴퓨터로 읽을 수 있는 기록매체로 구현될 수 있다.
컴퓨터가 읽을 수 있는 기록매체로는 컴퓨터에 의하여 해독될 수 있는 명령어가 저장된 모든 종류의 기록 매체를 포함한다. 예를 들어, ROM(Read Only Memory), RAM(Random Access Memory), 자기 테이프, 자기 디스크, 플래쉬 메모리, 광 데이터 저장장치 등이 있을 수 있다.

Claims (15)

  1. 음성 인식을 수행하고 메뉴별 조리 정보를 저장하는 서버와 통신을 수행하는 통신부;
    음식물을 가열하기 위한 열이 발생되도록 하는 가열부;
    사용자의 음성을 수신하는 사운드 입력부; 및
    상기 수신된 음성에 대응하는 음성 데이터를 상기 서버에 전송하도록 상기 통신부를 제어하고, 상기 서버로부터 전송된 조리 정보를 수신하고 상기 수신된 조리 정보에 기초하여 상기 가열부의 동작을 제어하는 제어부; 및
    상기 서버로부터 전송된 음성 데이터를 음성으로 출력하는 사운드 출력부를 포함하는 조리기기.
  2. 제1항에 있어서,
    음성 인식 모드의 수행 명령을 수신하는 입력부를 더 포함하고,
    상기 제어부는, 상기 음성 인식 모드의 수행 명령이 수신되면 상기 사운드 입력부와 상기 사운드 출력부의 동작을 활성화시키는 것을 포함하는 조리기기.
  3. 제1항에 있어서,
    상기 가열부에 의해 발생된 열을 순환시키는 순환부를 더 포함하고,
    상기 제어부는, 상기 조리 정보에 기초하여 상기 순환부의 동작을 제어하는 것을 포함하는 조리기기.
  4. 제1항에 있어서,
    사용자 정보의 설정 명령을 수신하는 입력부를 더 포함하고,
    상기 제어부는, 상기 사용자 정보의 설정 명령이 수신되면 상기 사운드 입력부의 동작을 활성화시키고, 상기 사운드 입력부의 동작 시에 수신된 음성에 대응하는 음성 데이터를 상기 사용자 정보로 상기 서버에 전송하도록 상기 통신부를 제어하는 것을 포함하는 조리기기.
  5. 제4항에 있어서, 상기 사용자 정보는,
    사용자의 식별 정보, 상기 사용자의 일정 정보, 상기 사용자의 종교 정보, 상기 사용자의 주소 정보 중 적어도 하나를 포함하는 조리기기.
  6. 제1항에 있어서,
    상기 수신된 조리 정보를 표시하는 표시부를 더 포함하고,
    상기 제어부는, 상기 서버로부터 레시피 정보가 수신되면 수신된 레시피 정보를 표시하도록 상기 표시부를 제어하는 것을 포함하는 조리기기.
  7. 제1항에 있어서,
    조리실을 개폐하는 도어;
    상기 도어의 개폐 상태를 검출하는 개폐 검출부; 및
    상기 조리실 내 음식물의 수용 여부를 검출하는 물체 검출부를 더 포함하고,
    상기 제어부는, 상기 도어가 폐쇄 상태이고, 상기 조리실 내에 음식물이 수용되어 있다고 판단되면 조리 시작에 대응하는 알림음을 출력하도록 상기 사운드 출력부를 제어하는 것을 포함하는 조리기기.
  8. 음성을 입력 및 출력하고, 상기 음성에 대응하는 음성 데이터를 전송하고, 조리실의 음식물을 조리하는 조리기기; 및
    상기 조리기기와 통신을 수행하고, 상기 조리기기로부터 음성 데이터가 수신되면 수신된 음성 데이터에 대응하는 사용자의 요구 정보, 질의 정보 및 반응 정보를 획득하고, 상기 요구 정보 및 반응 정보 중 적어도 하나에 기초하여 조리 정보를 획득하고 획득된 조리 정보를 상기 조리기기에 전송하고, 상기 질의 정보에 대응하는 응답 정보를 상기 조리기기에 전송하는 서버를 포함하는 조리 시스템.
  9. 제8항에 있어서, 상기 조리 정보는,
    상기 조리기기의 조리 온도 및 조리 시간을 포함하는 조리 시스템.
  10. 제8항에 있어서, 상기 서버는,
    상기 수신된 음성 데이터를 텍스트 데이터로 변환하는 제1변환부;
    상기 변환된 텍스트 데이터에 대한 자연어 인식을 수행하고 상기 자연어 인식에 기초하여 사용자의 요구 정보, 반응 정보 및 질의 정보를 획득하고 획득된 질의 정보에 대응하는 응답 정보를 생성하는 자연어 인식부;
    상기 획득된 요구 정보를 레시피 제공용 서버에 전송하고 상기 레시피 제공용 서버로부터 상기 레시피 정보를 수신하는 데이터 포털부; 및
    상기 생성된 응답 정보를 음성 데이터로 변환하고 변환된 음성 데이터를 상기 조리기기에 전송하는 제2변환부를 포함하는 조리 시스템.
  11. 제10항에 있어서, 상기 서버는,
    상기 조리기기의 에러 정보에 대응하는 조치 정보를 획득하고 상기 획득된 조치 정보를 상기 조리기기에 전송하는 에러 대응부를 더 포함하는 조리 시스템.
  12. 제8항에 있어서, 상기 서버는,
    사용자 정보를 저장하는 정보 저장부;
    상기 요구 정보 및 상기 사용자 정보에 기초하여 복수 개의 레시피 정보 중 최적의 레시피 정보를 획득하고, 상기 획득된 최적의 레시피 정보를 상기 조리기기에 전송하는 제어부를 포함하는 조리 시스템.
  13. 제12항에 있어서, 상기 사용자 정보는,
    사용자의 식별 정보, 상기 사용자의 일정 정보, 상기 사용자의 종교 정보, 상기 사용자의 주소 정보 중 적어도 하나를 포함하는 조리 시스템.
  14. 제8항에 있어서, 상기 서버는,
    상기 수신된 음성 데이터에 기초하여 사용자가 요구하는 메뉴를 획득하고 상기 획득된 메뉴의 조리 시간 및 조리 온도를 상기 조리기기에 전송하는 제1서버; 및
    복수의 메뉴에 대한 적어도 하나의 레시피 정보를 저장하고, 상기 제1서버와 통신을 수행하고, 상기 제1서버에 적어도 하나의 레시피 정보를 전송하는 제2서버를 포함하는 조리 시스템.
  15. 제14항에 있어서, 상기 제1서버는,
    상기 조리 기기의 조리 히스토리에 기초하여 상기 사용자의 선호 정보를 획득하는 것을 포함하고,
    상기 사용자의 식별 정보, 상기 사용자의 일정 정보, 상기 사용자의 종교 정보, 상기 사용자의 주소 정보 및 선호 정보 중 적어도 하나를 사용자 정보로 저장하고, 상기 저장된 사용자 정보를 상기 제2 서버에 전송하고,
    상기 선호 정보는, 메뉴명, 조리 량, 굽기 정도, 수분 함량, 맛별 레벨 및 식감 중 적어도 하나를 포함하는 조리 시스템.
PCT/KR2018/005824 2017-08-31 2018-05-23 조리기기 및 조리 시스템 WO2019045228A1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
EP18852406.0A EP3660659A4 (en) 2017-08-31 2018-05-23 COOKING DEVICE AND SYSTEM
US16/643,783 US11501771B2 (en) 2017-08-31 2018-05-23 Cooking apparatus and cooking system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2017-0110771 2017-08-31
KR1020170110771A KR102435186B1 (ko) 2017-08-31 2017-08-31 조리기기 및 조리 시스템

Publications (1)

Publication Number Publication Date
WO2019045228A1 true WO2019045228A1 (ko) 2019-03-07

Family

ID=65525816

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2018/005824 WO2019045228A1 (ko) 2017-08-31 2018-05-23 조리기기 및 조리 시스템

Country Status (4)

Country Link
US (1) US11501771B2 (ko)
EP (1) EP3660659A4 (ko)
KR (1) KR102435186B1 (ko)
WO (1) WO2019045228A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110008055A (zh) * 2019-03-13 2019-07-12 佛山市赛米控电子科技有限公司 一种数字菜谱生成方法及炒菜机、装置、存储介质
CN111696542A (zh) * 2019-03-13 2020-09-22 青岛海尔电冰箱有限公司 自冰箱内向外移除食材的语音数据交互方法及交互系统
WO2021008120A1 (zh) * 2019-07-12 2021-01-21 深圳技术大学 云语音控制炒菜机器人的方法及装置

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111722543B (zh) * 2019-03-20 2022-09-20 佛山市顺德区美的电热电器制造有限公司 一种烘焙控制方法、装置及系统
KR102667036B1 (ko) * 2019-07-19 2024-05-17 엘지전자 주식회사 피가열체의 상태를 추정하기 위한 가열 장치 및 방법
KR20210095424A (ko) * 2020-01-23 2021-08-02 삼성전자주식회사 조리 기기 및 그 제어 방법
KR20210095419A (ko) * 2020-01-23 2021-08-02 삼성전자주식회사 조리 기기 및 그 제어 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070114991A (ko) * 2006-05-30 2007-12-05 주식회사 대우일렉트로닉스 음성인식 전자레인지
KR20080066161A (ko) * 2007-01-11 2008-07-16 엘지전자 주식회사 조리 가이드 시스템 및 방법
JP2015050766A (ja) * 2013-09-03 2015-03-16 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 機器制御方法、音声機器制御システム及び調理機器
KR101647666B1 (ko) * 2015-09-25 2016-08-11 주식회사 올넷전자 스마트폰과 연동되어지는 음성인식수단 및 공기오염감지수단을 구비한 인덕션렌지
JP2017054169A (ja) * 2015-09-07 2017-03-16 シャープ株式会社 システム、指示装置、管理装置、および調理装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5811324A (ja) 1981-07-14 1983-01-22 Matsushita Electric Ind Co Ltd 調理用オ−ブン
US6584439B1 (en) 1999-05-21 2003-06-24 Winbond Electronics Corporation Method and apparatus for controlling voice controlled devices
DE10006240A1 (de) * 2000-02-11 2001-08-16 Bsh Bosch Siemens Hausgeraete Elektrogerät mit Spracheingabeeinheit und Verfahren zur Spracheingabe
DE10208466A1 (de) * 2002-02-27 2004-01-29 BSH Bosch und Siemens Hausgeräte GmbH Elektrisches Haushaltsgerät
DE10208468A1 (de) * 2002-02-27 2003-09-04 Bsh Bosch Siemens Hausgeraete Elektrisches Gerät, insbesondere Dunstabzugshaube
US9316400B2 (en) * 2013-09-03 2016-04-19 Panasonic Intellctual Property Corporation of America Appliance control method, speech-based appliance control system, and cooking appliance
US10304314B2 (en) * 2013-10-31 2019-05-28 Kali Care, Inc. Method of and apparatus for targeted interactive health status notification and confirmation
US11156366B2 (en) * 2015-09-10 2021-10-26 Brava Home, Inc. Dynamic heat adjustment of a spectral power distribution configurable cooking instrument
KR102480312B1 (ko) 2015-12-29 2022-12-23 삼성전자주식회사 단말기, 그와 통신하는 조리기기 및 조리기기의 제어 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070114991A (ko) * 2006-05-30 2007-12-05 주식회사 대우일렉트로닉스 음성인식 전자레인지
KR20080066161A (ko) * 2007-01-11 2008-07-16 엘지전자 주식회사 조리 가이드 시스템 및 방법
JP2015050766A (ja) * 2013-09-03 2015-03-16 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 機器制御方法、音声機器制御システム及び調理機器
JP2017054169A (ja) * 2015-09-07 2017-03-16 シャープ株式会社 システム、指示装置、管理装置、および調理装置
KR101647666B1 (ko) * 2015-09-25 2016-08-11 주식회사 올넷전자 스마트폰과 연동되어지는 음성인식수단 및 공기오염감지수단을 구비한 인덕션렌지

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3660659A4 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110008055A (zh) * 2019-03-13 2019-07-12 佛山市赛米控电子科技有限公司 一种数字菜谱生成方法及炒菜机、装置、存储介质
CN111696542A (zh) * 2019-03-13 2020-09-22 青岛海尔电冰箱有限公司 自冰箱内向外移除食材的语音数据交互方法及交互系统
CN111696542B (zh) * 2019-03-13 2022-09-20 青岛海尔电冰箱有限公司 自冰箱内向外移除食材的语音数据交互方法及交互系统
WO2021008120A1 (zh) * 2019-07-12 2021-01-21 深圳技术大学 云语音控制炒菜机器人的方法及装置

Also Published As

Publication number Publication date
KR102435186B1 (ko) 2022-08-24
EP3660659A1 (en) 2020-06-03
US11501771B2 (en) 2022-11-15
US20200234702A1 (en) 2020-07-23
KR20190024114A (ko) 2019-03-08
EP3660659A4 (en) 2020-08-12

Similar Documents

Publication Publication Date Title
WO2019045228A1 (ko) 조리기기 및 조리 시스템
WO2017116099A1 (ko) 단말기, 그와 통신하는 조리기기 및 조리기기의 제어 방법
WO2015088141A1 (en) Smart home appliances, operating method of thereof, and voice recognition system using the smart home appliances
AU2016346866B2 (en) Cooking apparatus, cooking apparatus controlling system, and method of controlling cooking apparatus
WO2020246844A1 (en) Device control method, conflict processing method, corresponding apparatus and electronic device
WO2015037963A1 (en) Home appliance and mobile terminal
WO2017082603A1 (ko) 오븐 및 오븐의 도어 개폐 방법
WO2017007186A1 (ko) 오븐
EP3230655A1 (en) Cooking appliance and method for controlling the same
AU2015340213B2 (en) Method for controlling operation of electronic device and electronic device using the same
WO2016017945A1 (en) Mobile device and method of pairing the same with electronic device
WO2017146402A1 (en) Server and method of controlling user environment by server
WO2017010760A1 (en) Hub apparatus and method for providing service thereof
WO2016122118A1 (en) Gas detection apparatus, cooking apparatus, and method of controlling the apparatuses
WO2016122188A1 (en) Cooking appliance and method for controlling the same
EP3237805A1 (en) Gas detection apparatus, cooking apparatus, and method of controlling the apparatuses
WO2017142266A1 (en) Electronic device including light emitting device and operating method thereof
WO2018048098A1 (en) Portable camera and controlling method therefor
WO2020027559A1 (en) Electronic apparatus and control method thereof
WO2017007188A1 (ko) 오븐
WO2017095208A1 (en) Method and apparatus for managing device using at least one sensor
WO2019203421A1 (ko) 디스플레이 장치 및 디스플레이 장치의 제어 방법
WO2017080403A1 (zh) 投影设备控制方法、投影设备及智能终端
WO2020197250A1 (ko) 사용자의 측두근을 모니터링하는 안경 및 컴퓨터 프로그램
EP3320655A1 (en) Hub apparatus and method for providing service thereof

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18852406

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2018852406

Country of ref document: EP

Effective date: 20200227