WO2018096885A1 - 加熱調理器、加熱調理器の制御方法、および加熱調理システム - Google Patents

加熱調理器、加熱調理器の制御方法、および加熱調理システム Download PDF

Info

Publication number
WO2018096885A1
WO2018096885A1 PCT/JP2017/039496 JP2017039496W WO2018096885A1 WO 2018096885 A1 WO2018096885 A1 WO 2018096885A1 JP 2017039496 W JP2017039496 W JP 2017039496W WO 2018096885 A1 WO2018096885 A1 WO 2018096885A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
unit
heating
state
chamber
Prior art date
Application number
PCT/JP2017/039496
Other languages
English (en)
French (fr)
Inventor
巌徹 松井
今井　博久
直哉 谷口
磨理子 竹之内
穂 高倉
Original Assignee
パナソニックＩｐマネジメント株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニックＩｐマネジメント株式会社 filed Critical パナソニックＩｐマネジメント株式会社
Priority to JP2018552483A priority Critical patent/JP6934607B2/ja
Publication of WO2018096885A1 publication Critical patent/WO2018096885A1/ja

Links

Images

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C7/00—Stoves or ranges heated by electric energy
    • F24C7/04—Stoves or ranges heated by electric energy with heat radiated directly from the heating element
    • F24C7/046—Ranges
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C15/00—Details
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C7/00—Stoves or ranges heated by electric energy
    • F24C7/02—Stoves or ranges heated by electric energy using microwaves

Definitions

  • the present disclosure relates to a heating cooker and heating cooker in which a camera is mounted in a heating chamber, and the state in the chamber can be detected even if the state in the chamber changes due to at least one of secular change and usage status, etc.
  • the present invention relates to a control method and a cooking system.
  • microwave oven As an example of a cooking device.
  • the microwave oven performs cooking by pressing a button for starting heating after the user inputs a time for heating and the like.
  • a service is provided in which lunch boxes or prepared dishes are sold in containers, and the purchased food is cooked and cooked using a microwave oven.
  • Patent Document 1 a camera is mounted on a heating cooker, the interior is imaged with the camera before cooking, and the similarity between the captured image and a pre-registered interior image is calculated.
  • Patent Document 1 a technique for determining that the interior is empty if the degree of similarity is predetermined.
  • Patent Document 1 dirt on the bottom surface of the cabinet due to boiled juice or sauce, subtle displacement of the camera position due to opening / closing operation of the cabinet door, and use of the inside / outside environment such as external light and lighting, etc. Since the situation changes, it is difficult to accurately determine the internal state only by the similarity of the difference images, and there is a possibility of erroneous determination that the internal state is empty.
  • the present disclosure provides a heating cooker, a heating cooker control method, and a heating cooking system that can accurately detect that the inside of the heating chamber is empty.
  • a heating cooker of the present disclosure includes a heating chamber, a heating unit that heats a heating object in the heating chamber, an imaging unit that performs imaging in the heating chamber, and an image storage unit that stores a reference image in the heating chamber. It has.
  • the internal state analysis unit for analyzing the internal state of the heating chamber and the reference image stored in the image storage unit based on the internal state are compared with the image captured by the imaging unit,
  • the image comparison determination part which determines the mounting state of the heating target object in the inside, and the control part which controls the heating by a heating part based on a mounting state are provided.
  • the control method of the heating cooker according to the present disclosure includes a heating chamber, a heating unit that heats an object to be heated in the heating chamber, a photographing unit that performs imaging in the heating chamber, and a control unit that controls heating by the heating unit.
  • the control method of a heating cooker provided with these.
  • photography part based on the in-chamber state are compared, A step of determining the placement state of the heating object inside, and a step of controlling heating by the heating unit based on the placement state.
  • the cooking system is a cooking system that includes a cooking device and an information processing device.
  • the heating cooker includes a heating chamber, a heating unit that heats the object to be heated in the heating chamber, an imaging unit that performs imaging in the heating chamber, and an in-chamber state analysis that analyzes the in-chamber state in the heating chamber.
  • the first control unit that controls heating by the heating unit, the image captured by the imaging unit, and the internal state analyzed by the internal state analysis unit based on the mounting state in the heating unit And a first communication unit that receives the mounting state.
  • the information processing apparatus includes a second communication unit that receives an image in the heating chamber and a state in the chamber, an image storage unit that stores a reference image in the heating chamber, and an in-chamber state received by the second communication unit.
  • the image comparison determination unit that compares the reference image stored in the image storage unit with the image received by the second communication unit and determines the mounting state in the heating chamber, and the image comparison determination unit And a second control unit that controls to transmit the placed state using the second communication unit.
  • FIG. 1 is a front view illustrating an appearance of a heating cooker according to the first embodiment of the present disclosure.
  • FIG. 2 is a functional block diagram of the heating cooker according to the first embodiment of the present disclosure.
  • FIG. 3 is a diagram illustrating an example of an image obtained by photographing the interior (in-compartment sky image) according to the first embodiment of the present disclosure.
  • FIG. 4A is a diagram illustrating another example of an image obtained by photographing the interior in the first embodiment of the present disclosure.
  • FIG. 4B is a diagram illustrating another example of an image obtained by photographing the interior in the first embodiment of the present disclosure.
  • FIG. 1 is a front view illustrating an appearance of a heating cooker according to the first embodiment of the present disclosure.
  • FIG. 2 is a functional block diagram of the heating cooker according to the first embodiment of the present disclosure.
  • FIG. 3 is a diagram illustrating an example of an image obtained by photographing the interior (in-compartment sky image) according to the first embodiment of the present disclosure.
  • FIG. 5 is a diagram illustrating an example of a table related to the in-compartment state analyzed by the in-compartment state analysis unit according to the first embodiment of the present disclosure.
  • FIG. 6 is a diagram illustrating an example of a table used for the comparison determination of the image comparison determination unit according to the first embodiment of the present disclosure.
  • FIG. 7 is a flowchart regarding the determination process of the in-compartment state according to the first embodiment of the present disclosure.
  • FIG. 8 is a functional block diagram of a heating cooker according to the second embodiment of the present disclosure.
  • FIG. 9 is a diagram illustrating an example of a table related to the in-compartment state analyzed by the in-compartment state analysis unit according to the second embodiment of the present disclosure.
  • FIG. 9 is a diagram illustrating an example of a table related to the in-compartment state analyzed by the in-compartment state analysis unit according to the second embodiment of the present disclosure.
  • FIG. 10 is a flowchart illustrating the in-compartment image registration process according to the second embodiment of the present disclosure.
  • FIG. 11 is a functional block diagram of a heating cooker according to the third embodiment of the present disclosure.
  • FIG. 12 is a diagram illustrating an example in which marks, characters, and the like are written on the bottom surface of the cooking device according to the third embodiment of the present disclosure.
  • FIG. 13A is a diagram illustrating an example of an image obtained by photographing the interior in the third embodiment of the present disclosure.
  • FIG. 13B is a diagram illustrating an example of an image obtained by photographing the interior in the third embodiment of the present disclosure.
  • FIG. 14 is a functional block diagram illustrating a configuration of a heating cooking system according to the fourth embodiment of the present disclosure.
  • FIG. 15 is a sequence diagram illustrating a process of the heating cooking system according to the third embodiment of the present disclosure.
  • the heating cooker according to the first aspect of the present disclosure stores a heating chamber, a heating unit that heats an object to be heated in the heating chamber, an imaging unit that performs imaging in the heating chamber, and a reference image in the heating chamber.
  • An image storage unit An image storage unit.
  • the internal state analysis unit for analyzing the internal state of the heating chamber and the reference image stored in the image storage unit based on the internal state are compared with the image captured by the imaging unit,
  • the image comparison determination part which determines the mounting state of the heating target object in the inside, and the control part which controls the heating by a heating part based on a mounting state are provided.
  • the in-chamber state intended by the user can be accurately grasped from the image taken by the camera.
  • the second aspect of the present disclosure is the heating cooker according to the first aspect, in which the image comparison determination unit is photographed by the internal image that is the reference image stored in the image storage unit and the photographing unit. A difference comparison with the image is performed, and if it is equal to or less than a predetermined threshold range, it is determined that the mounting state is an empty state.
  • the image comparison determination unit determines the placement state using a different predetermined threshold range depending on a difference in the internal state.
  • the fourth aspect of the present disclosure is any one of the heating cookers from the first aspect to the third aspect, and the image comparison determination unit determines that the placement state is an empty state.
  • the image photographed by the photographing unit is stored in the image storage unit.
  • the photographed image determined to be in an empty state can be registered as a reference image for the next comparison, and the internal state has changed due to at least one of secular change and usage status, etc.
  • it can be accurately grasped from the image taken by the camera that the interior is empty.
  • a fifth aspect of the present disclosure is the heating cooker disclosed in any one of the first aspect to the fourth aspect, and the internal state analysis unit is photographed in the photographing unit according to the internal state.
  • the stored image is stored in the image storage unit as a reference image.
  • the state-determined image As a result, by registering the state-determined image as a reference image for the next comparison, even if the internal state has changed due to at least one of secular change and usage status, the image is taken by the camera. From the obtained image, it can be accurately grasped that the interior is empty.
  • the sixth aspect of the present disclosure is the heating cooker disclosed in any one of the first aspect to the fifth aspect, and further includes an operation setting unit.
  • an instruction is received from the operation setting unit, an image photographed by the photographing unit is stored in the image storage unit.
  • a user or the like can register a reference image to be compared next time, and even if the internal state changes due to at least one of secular change and usage status, the image captured by the camera can be used. It is possible to accurately grasp the state in the cabinet intended by the user.
  • the seventh aspect of the present disclosure is the heating cooker disclosed in the sixth aspect, and further includes a display unit.
  • a display unit When receiving an instruction from the operation setting unit, an image photographed by the photographing unit is displayed on the display unit.
  • the image can be confirmed, and the state in the warehouse can be grasped using the image intended by the user.
  • An eighth aspect of the present disclosure is the heating cooker according to any one of the first to seventh aspects, in which predetermined characters and marks in the reference image stored in the image storage unit are stored.
  • An image reading analysis unit that reads and analyzes at least one of them is further provided.
  • the image comparison / determination unit is based on the internal state, and is a reference in an image at a position where at least one of a predetermined character and a mark is read by the image reading / analysis unit and an image photographed by the photographing unit. The difference between the position in the image and the image at the same position is compared, and when at least a predetermined number of predetermined characters and marks are recognized, it is determined that the placement state is empty.
  • the empty state in the internal state is detected using at least one of the specific characters and marks. It is possible to accurately grasp that the interior is empty from the image captured by the camera.
  • a ninth aspect of the present disclosure includes a heating chamber, a heating unit that heats a heating target in the heating chamber, an imaging unit that performs imaging in the heating chamber, and a control unit that controls heating by the heating unit. It is a control method of the heating cooker which has. And the step which memorize
  • the in-chamber state intended by the user can be accurately grasped from the image taken by the camera.
  • the tenth aspect of the present disclosure further includes a step of reading and analyzing at least one of predetermined characters and marks in the reference image in the control method for the heating cooker according to the ninth aspect. Then, in the step of determining the placement state in the heating chamber, based on the state in the chamber, an image of a position where at least one of the predetermined characters and marks read in the reading and analyzing step exists, and a photographing unit When the difference between the captured image and the image at the same position as the reference image is compared and at least a predetermined number of predetermined characters and / or marks are recognized, the interior is empty. Determine that there is.
  • the empty state in the internal state is detected using at least one of the specific characters and marks. It is possible to accurately grasp that the interior is empty from the image taken by the camera.
  • the eleventh aspect of the present disclosure is a cooking system including a cooking device and an information processing device.
  • the cooking device includes a heating chamber, a heating unit that heats an object to be heated in the heating chamber, an imaging unit that performs imaging in the heating chamber, and an in-chamber state analysis unit that analyzes the in-chamber state in the heating chamber.
  • the first control unit that controls heating by the heating unit based on the mounting state in the heating chamber, the image captured by the imaging unit, and the internal state analyzed by the internal state analysis unit are transmitted, And a first communication unit that receives the mounting state.
  • the information processing apparatus includes a second communication unit that receives an image in the heating chamber and a state in the chamber, an image storage unit that stores a reference image in the heating chamber, and a chamber that is received by the second communication unit. Based on the internal state, the image comparison determination unit that compares the image stored in the image storage unit with the image received by the second communication unit and determines the placement state in the heating chamber, and the image comparison determination unit And a second control unit that controls to transmit the determined mounting state using the second communication unit.
  • the in-chamber state intended by the user can be accurately grasped from the image taken by the camera.
  • the information processing apparatus reads and analyzes at least one of predetermined characters and marks in the reference image stored in the image storage unit.
  • An image reading analysis unit is further provided.
  • the image comparison / determination unit is based on the internal state, and is a reference in an image at a position where at least one of a predetermined character and a mark is read by the image reading / analysis unit and an image photographed by the photographing unit. The difference between the image position and the image at the same position is compared, and if at least a predetermined number of predetermined characters and marks are recognized, it is determined that the placement state is empty.
  • the empty state in the storage is detected using at least one of specific characters and marks. It is possible to accurately grasp that the interior is empty from the image taken by the camera.
  • FIG. 1 is a front view illustrating an appearance of a heating cooker 100 according to the first embodiment of the present disclosure.
  • the heating cooker 100 includes a door panel 101, a heating information display unit 102, and a menu selection unit 103.
  • the heating cooker interior 104 is provided with an illumination 105 on the interior side surface and a camera 106 on the interior upper surface.
  • a control circuit (which may also be used as a control unit 202 to be described later) takes a picture with the camera 106 while controlling the brightness of the illumination 105, so that the cooking state of the food 107 in the heating cooker 104 and The heating control information related to the food 107 can be detected as image information.
  • the illumination 105 is arranged on the left side surface of the cooking device 100 toward the cooking device interior 104 and illuminates the entire interior from the interior side surface.
  • the lighting 105 is arranged on the inner side surface of the warehouse, but the present disclosure is not limited to this, and the interior upper side, the upper center of the interior, the bottom surface of the interior, etc. As long as it can illuminate the whole, it may be placed in another location. Further, instead of arranging only one illumination 105 in the warehouse, a plurality of them may be arranged at the same position or at different positions.
  • the camera 106 is installed in the upper part of the heating cooker 100 and photographs the entire interior from the upper part.
  • the camera 106 is arranged on the left side of the upper part of the warehouse.
  • the camera 106 is arranged at the approximate center (including the center) of the upper part of the warehouse. Also good.
  • FIG. 2 is a functional block diagram of the heating cooker 100 according to the first embodiment of the present disclosure.
  • the heating cooker 100 includes a heating unit 201, a control unit 202, a photographing unit 203, an in-chamber state analysis unit 204, an image storage unit 205, and an image comparison determination unit 206.
  • the heating unit 201 is made of, for example, a magnetron, and heats the food 107 placed in the cooking device 100.
  • Control unit 202 controls heating unit 201 based on the state of heating cooker 100.
  • the photographing unit 203 includes, for example, a CMOS (Complementary Metal Oxide Semiconductor) image sensor or a CCD (Charge Coupled Device) image sensor and an optical member such as a lens, and performs photographing inside the cooking device 100.
  • the photographing unit 203 includes the camera 106 in FIG.
  • the in-compartment state analysis unit 204 analyzes the in-compartment state including at least one of the open / closed state of the door and the presence or absence of heating. Information regarding the internal state is stored in a nonvolatile memory such as a flash memory, and the internal state analysis unit 204 sends the internal state information to the image comparison determination unit 206 in response to a change in the internal state. Tell.
  • the image comparison / determination unit 206 is based on the in-compartment state analyzed by the in-compartment state analysis unit 204, and the image captured by the photographing unit 203 and the image stored in the image storage unit 205 (hereinafter referred to as a reference image). , And how to process is determined by the image difference value. The determined result is transmitted from the image comparison determination unit 206 to the control unit 202.
  • the cooking device 100 includes a peripheral circuit such as a microcomputer and a memory (not shown).
  • the functions of the control unit 202, the internal state analysis unit 204, the image storage unit 205, and the image comparison / determination unit 206 are realized by a microcomputer, software that operates on the microcomputer, a memory, and the like.
  • the control unit 202 may include an arithmetic processing unit and a storage unit that stores a control program.
  • Examples of the arithmetic processing unit include an MPU (Micro Processing Unit) and a CPU (Central Processing Unit).
  • a memory is exemplified as the storage unit. The control program recorded in the storage unit is executed by the arithmetic processing unit.
  • control unit 202 the functions of the control unit 202, the in-compartment state analysis unit 204, the image storage unit 205, and the image comparison determination unit 206 may be configured by hard logic. If configured with hard logic, it is effective in improving the processing speed.
  • control unit 202, the in-compartment state analysis unit 204, the image storage unit 205, and the image comparison / determination unit 206 may be configured by one semiconductor chip or may be physically configured by a plurality of semiconductor chips. . When configured by a plurality of semiconductor chips, each control described later can be realized by a separate semiconductor chip.
  • FIG. 3 is a diagram illustrating an example of an image obtained by photographing the interior in the first embodiment of the present disclosure.
  • an example of an image in which the inside of the warehouse is “empty” (an empty image inside the warehouse) is shown.
  • the “empty” reference image as shown in the example of the in-compartment image 301 is stored in the memory of the image storage unit 205.
  • 4A and 4B are diagrams each illustrating another example of an image obtained by photographing the interior in the first embodiment of the present disclosure.
  • FIG. 4A shows the case where the inside of the cabinet is empty, but there is dirt or foreign matter
  • FIG. 4B shows the case where there is an object to be heated (food 107 such as a lunch box).
  • 2 shows an example of images (inside images 401 and 402) obtained by photographing the inside of the inside.
  • FIG. 5 is a diagram illustrating an example of a table relating to the in-compartment state analyzed by the in-compartment state analysis unit 204 according to the first embodiment of the present disclosure.
  • the chamber state / operation table 501 describes state transitions regarding at least one of various controls and operations in the chamber of the heating cooker 100. For example, when the power is turned on, “power OFF ⁇ ON” is defined as the ID “ST001”. When the power is turned off, “power ON ⁇ OFF” is defined as the ID “ST002”.
  • ID “ST003” is defined as “internal door closed ⁇ open”
  • ST004 is defined as “internal door open ⁇ closed”.
  • start heating start is defined as ID “ST005”
  • duration heating is defined as “ST006”.
  • FIG. 6 is a diagram illustrating an example of a table used for the comparison determination of the image comparison determination unit 206 according to the first embodiment of the present disclosure.
  • an image difference threshold range for performing comparison determination is defined for each in-chamber state shown in FIG. 5.
  • the image difference threshold value range for detecting that the internal state is empty is greater than 0, It must be 20 or less (ST004-1).
  • the image difference value needs to be a value greater than 20 and 100 or less (ST004-2).
  • the state where the non-heated object is placed refers to a state where a small object that is not suitable for heating by the heating cooker 100, such as mayonnaise, is placed in the cabinet.
  • the state where the heating object is placed refers to a state where an object to be heated by the heating cooker 100, for example, a food item 107 such as a lunch box is placed in the cabinet.
  • the image difference threshold range for detecting that the interior is empty when the interior state is “start heating start” of “ST005” the image difference value is greater than 0 and less than or equal to 25. (ST005-1).
  • a method of counting when the luminance difference in each pixel exceeds a predetermined numerical value is used as the image difference value when the images are compared.
  • the present disclosure is not limited to this example, and any method may be used as long as the image difference is known.
  • the image similarity or the color difference of each pixel may be used.
  • both the lower limit value and the upper limit value are described as the image difference threshold range, but may be defined by only one of the numerical values.
  • the cooking device 100 can set different image difference threshold ranges according to the state in the refrigerator.
  • the brightness of the image captured by the image capturing unit 203 differs depending on whether or not external light such as Asahi is inserted, but different image difference threshold ranges can be set in each case.
  • the state in the cabinet can be grasped with higher accuracy.
  • FIG. 7 is a flowchart relating to the determination process of the internal state according to the first embodiment of the present disclosure.
  • control unit 202 grasps the open / closed state of the door panel 101, the power ON / OFF operation using the menu selection unit 103 and the heating start operation by the user, and the information is stored in the internal state analysis unit. 204 is input.
  • the internal state analysis unit 204 analyzes the internal state based on information from the control unit 202 (S701).
  • the control unit 202 confirms whether or not it is in a state in which the internal image shooting is possible based on the internal state analysis result (S702). If the control unit 202 is not ready for photographing, the control unit 202 ends the processing (S702, NO). For example, in a state where the door panel 101 is opened and the interior lighting is OFF, the control unit 202 determines that it is not in a state in which an image can be captured.
  • the photographing unit 203 photographs the internal image (S703).
  • the image comparison determination unit 206 uses the internal state information table 601 analyzed by the internal state analysis unit 204 to store the image captured by the image capturing unit 203 and the image storage unit 205. A comparison with the internal image (reference image) is performed (S704).
  • the image comparison determination unit 206 confirms the image difference threshold range in the corresponding internal state from the internal state information table 601 and determines which threshold range the difference value of the comparison image is in (S705). .
  • the image comparison determination unit 206 detects that it is “empty state in warehouse” (S706).
  • the image comparison determination unit 206 detects that it is “heating non-object placement state” (S707).
  • the image comparison determination unit 206 detects that it is the “heating object placement state” (S708).
  • the control unit 202 displays a message “cannot be heated” on the heating information display unit 102 when the mounting state in the storage is “empty state in the storage” and “heating non-object mounting state”. Then, control is performed so that heating is not started even when the user performs an operation to start heating using the menu selection unit 103.
  • control unit 202 starts heating when the user performs a heating start operation using the menu selection unit 103.
  • the detection detection of the mounting state is described in three patterns of “empty state in chamber”, “heating non-object mounting state”, and “heating target mounting state”.
  • the present disclosure is not limited to this example.
  • detection with only one pattern of “empty state in the cabinet” may be used.
  • the detection detection of the mounting state is not limited to the above three mounting states. If the determination result can be used for a plurality of detections and other detections, the determination is performed according to the state in the warehouse. The types to be performed may be increased or decreased.
  • FIG. 8 is a functional block diagram of the heating cooker 800 according to the second embodiment of the present disclosure.
  • the heating cooker 800 includes a heating unit 801, a control unit 802, a photographing unit 803, an in-chamber state analysis unit 804, an image storage unit 805, an image comparison determination unit 806, and an operation setting unit 807. is doing.
  • the circuit configuration of the heating cooker 800 according to the second embodiment has the same basic structure as the circuit configuration of the heating cooker 100 according to the first embodiment.
  • the difference is that the image captured by the image capturing unit 803 is used as a reference image in accordance with the point that the operation setting unit 807 for capturing the internal image is added to the configuration and the analysis result of the internal state analysis unit 804. It is a point to register. For this reason, a description of portions common to the first embodiment is omitted.
  • the operation setting unit 807 includes the menu selection unit 103 in FIG.
  • FIG. 9 is a diagram illustrating an example of a table related to the in-compartment state analyzed by the in-compartment state analysis unit 804 according to the second embodiment of the present disclosure.
  • the in-chamber state / operation table 901 describes respective state transitions regarding at least one of various controls and operations in the stove of the heating cooker 800.
  • the ID “ST101” is “immediately after the door“ closed ⁇ open ””
  • the ID “ST112” is “just before the interior lighting“ ON ⁇ OFF ””
  • the ID “ST116” is “After pressing the empty image registration button” is described as an example.
  • the present disclosure is not limited to these examples, and any state may be used as long as it is suitable as a shooting timing.
  • FIG. 10 is a flowchart illustrating the in-chamber image registration process according to the second embodiment of the present disclosure.
  • the internal state analysis unit 804 analyzes the internal state (S1001).
  • the control unit 802 confirms whether or not it is in a state in which the in-compartment image capturing is possible based on the analysis result of the in-compartment state by the in-compartment state analysis unit 804, and if it is not in a state in which the image capturing is not possible (S1002, NO), the process is terminated. For example, the control unit 802 determines that image capturing is not possible when the door panel 101 is opened and when the interior lighting is OFF.
  • the imaging unit 803 captures an internal image (S1003).
  • control unit 802 confirms whether or not the captured image satisfies the standard as the reference image. If the standard as the reference image is not satisfied (S1004, NO), the process ends.
  • the image comparison / determination unit 806 stores the captured image as the reference image in the image storage unit 805 (S1005).
  • step S1003 when shooting is performed according to an instruction from the operation setting unit 807, step S1004 may be omitted, and the shot image may be stored in the image storage unit 805 as a reference image.
  • condition that the image in the warehouse becomes the reference image may be a case where the image difference value is equal to or less than a predetermined threshold in comparison with the reference image registered in advance.
  • the image difference value may be a predetermined threshold value or less.
  • FIG. 11 is a functional block diagram of a heating cooker 1100 according to the third embodiment of the present disclosure.
  • the heating cooker 1100 includes a heating unit 1101, a control unit 1102, a photographing unit 1103, an image reading analysis unit 1104, an interior state analysis unit 1105, an image storage unit 1106, an image comparison determination unit 1107, and An operation setting unit 1108 is included.
  • the basic configuration of the circuit configuration of the heating cooker 1100 of the third embodiment is the same as the circuit configuration of the heating cooker 800 of the second embodiment.
  • the difference is that the image taken by the photographing unit 1103 is image-analyzed by the image reading / analyzing unit 1104, and as a result, the read information is transmitted to the image comparison / determination unit 1107. For this reason, description of parts common to the second embodiment is omitted.
  • FIG. 12 is a diagram illustrating an example in which marks, characters, and the like are written on the bottom surface of the cooking device 1100 according to the third embodiment of the present disclosure.
  • a mark “+” is written at a predetermined position on the bottom surface of the interior in order to clearly understand that the image is an empty interior.
  • FIG. 13A and FIG. 13B are diagrams each illustrating an example of an image obtained by photographing the interior in the third embodiment of the present disclosure.
  • FIG. 13A shows an empty state in which at least one of dirt and foreign matter exists in the chamber
  • FIG. 13B shows an empty state in which at least one of dirt and foreign matter exists in the chamber
  • FIG. 13B In the case where foods 107) such as the above exist, examples of images (inside images 1301, 1302) obtained by photographing the inside of the inside are shown.
  • step S 703 the mark portion is analyzed by the image reading analysis unit 1104 from the reference image stored in the image storage unit 1106, and an image photographed by the photographing unit 1103 for the mark portion and the image storage unit 1106. Is compared with the reference image stored in. As a result, it is possible to quickly and accurately determine the “sky image state” and other states.
  • the portion analyzed by the image reading analysis unit 1104 at least one of the mark and the character is illustrated, but the present disclosure is not limited to these, and the number and the barcode, the shape and the special May be at least one of the following symbols.
  • the present disclosure may be implemented as a cooking system 2000 in which the cooking device 1400 is configured to be connectable to a network, and the cooking device 1400 is controlled by a portable terminal or a server (an example of the information processing device 1450) on the network. Is possible.
  • FIG. 14 is a functional block diagram illustrating a configuration of the heating cooking system 2000 according to the fourth embodiment of the present disclosure.
  • the cooking system 2000 includes a cooking device 1400 and an information processing device 1450.
  • the cooking device 1400 includes a heating unit 1401, a photographing unit 1402, an in-chamber state analysis unit 1403, a control unit 1404 (first control unit), and a communication unit 1405 (first communication unit).
  • the information processing apparatus 1450 includes an image comparison determination unit 1451, an image storage unit 1452, a control unit 1453 (second control unit), and a communication unit 1454 (second communication unit).
  • the communication unit 1405 that communicates with the information processing apparatus 1450 via the network is different from the circuit configuration of the heating cooker 100 of the first embodiment in the circuit configuration of the heating cooker 1400 of the present embodiment.
  • the added point is that the image comparison determination unit 806 and the image storage unit 805 are not provided.
  • description of portions common to the first embodiment is omitted.
  • the information processing apparatus 1450 is an apparatus selected from a mobile terminal, a personal computer, a server, and the like.
  • the information processing apparatus 1450 includes a peripheral circuit such as a microcomputer and a memory (not shown).
  • the functions of the image comparison / determination unit 1451, the image storage unit 1452, and the control unit 1453 are realized by a microcomputer, software that operates on the microcomputer, a memory, and the like.
  • the communication unit 1405 and the communication unit 1454 are configured by hardware corresponding to a method selected from a wired LAN, a wireless LAN (Wi-Fi), a carrier line (3G, 4G, LTE, or the like).
  • a wired LAN a wireless LAN (Wi-Fi)
  • Wi-Fi wireless LAN
  • a carrier line 3G, 4G, LTE, or the like.
  • FIG. 15 is a sequence diagram illustrating processing of the cooking system 2000 according to the third embodiment of the present disclosure.
  • the control unit 1404 of the heating cooker 1400 grasps the open / closed state of the door panel 101, the power ON / OFF operation using the menu selection unit 103, the heating start operation, and the like by the user, and the information is the in-compartment state.
  • the data is input to the analysis unit 1403.
  • the internal state analysis unit 1403 analyzes the internal state based on information from the control unit 1404 (S2001).
  • the control unit 1404 transmits the internal state analyzed by the internal state analysis unit 1403 to the information processing apparatus 1450 using the communication unit 1405 (S2002).
  • the imaging unit 1402 captures an image inside the cabinet (S2003).
  • the control unit 1404 transmits the captured image to the information processing apparatus 1450 using the communication unit 1405 (S2004).
  • the information processing apparatus 1450 receives the image and the internal state by the communication unit 1454.
  • the image comparison / determination unit 1451 compares the image received by the communication unit 1454 with the internal image (reference image) stored in the image storage unit 1452 (S2005).
  • the image comparison determination unit 1451 confirms the image difference threshold range in the in-compartment state received by the communication unit 1454, confirms which threshold range the difference value of the comparison image is in, and determines the placement state ( S2006). This process is common to steps S705 to S708 in FIG.
  • the control unit 1453 transmits the placement state determined by the image comparison determination unit 1451 to the heating cooker 1400 using the communication unit 1454 (S2007).
  • the cooking device 1400 receives the placement state at the communication unit 1405.
  • the control unit 1404 controls heating by the heating unit 1401 based on the received mounting state (S2008). For example, when the placement state in the storage is “empty state in storage” and “heating non-object placement state”, the control unit 1404 displays a message “cannot be heated” on the heating information display unit 102. Then, control is performed so that heating is not started even when the user performs an operation to start heating using the menu selection unit 103. When the placement state in the warehouse is the “heating object placement state”, the control unit 1404 starts heating when the user performs an operation of starting heating using the menu selection unit 103.
  • the heating cooker 1400 can perform image comparison.
  • the processing load accompanying the determination process can be reduced.
  • the heating cooker 1400 demonstrated the form which has the in-chamber state analysis part 1403 in this Embodiment
  • the in-chamber state analysis part 1403 does not exist in the heating cooker 1400, but is provided in the information processing apparatus 1450. Form may be sufficient.
  • the control unit 1404 transmits information necessary for analyzing the internal state to the information processing device 1450 using the communication unit 1405, and the internal state analysis unit 1403 of the information processing device 1450 receives the received information. Use to analyze the internal state.
  • the configuration of the heating cooker 1400 can be further simplified.
  • the reference image stored in the image storage unit 1452 based on the image sent from the heating cooker 1400. May be updated.
  • the information processing apparatus 1450 may be configured to include an image reading analysis unit in addition to the above configuration.
  • the image comparison / determination unit 1451 of the information processing apparatus 1450 analyzes, for example, the mark portion from the image stored in the image storage unit 1452 by the image reading analysis unit, and the mark unit 1402 captures the mark portion. By comparing the recorded image with the image stored in the image storage unit 1452, the “empty image state” and other states are determined.
  • the cooking device can be implemented not only as a convenience store and business equipment such as a person skilled in the art, but also as a domestic cooking device.
  • an image in the heating chamber may be displayed on the display unit of the heating cooker.
  • the structure which connected the heating cooker to the network it is good also as a structure by which the image in a heating chamber is displayed on the display part of the information processing apparatus connected to the network.
  • At least one of characters, barcodes, shapes, and the like read and analyzed by the cooking device may be displayed on the display unit of the cooking device. Further, when a configuration in which the heating cooker is connected to a network is implemented, at least one of characters, barcodes, shapes, and the like read and analyzed on the display unit of the information processing device connected to the network May be displayed.
  • the heating cooker of embodiment mentioned above has a control part, an interior state analysis part, an image memory
  • a semiconductor element for example, a microprocessor
  • the heating cooker, the heating cooker control method, and the heating cooking system of the present disclosure are equipped with a camera in the heating cabinet, and the state of the cooking chamber is in accordance with at least one of secular change and usage status, etc. Even if it changes, it is useful as a cooking device, a cooking device control method, a cooking system, etc. that can detect the state in the refrigerator.

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Electric Ovens (AREA)
  • Electric Stoves And Ranges (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)

Abstract

加熱調理器（１００）であって、加熱庫と、加熱庫内の加熱対象物を加熱する加熱部（２０１）と、加熱庫内の撮影を行う撮影部（２０３）と、加熱庫内の基準画像を記憶する画像記憶部（２０５）とを備えている。また、加熱庫内の庫内状態を解析する庫内状態解析部（２０４）と、庫内状態に基づき、画像記憶部（２０５）に記憶されている基準画像と撮影部（２０３）で撮影された画像とを比較し、加熱庫内における加熱対象物の載置状態を判定する画像比較判定部（２０６）と、載置状態に基づき、加熱部（２０１）による加熱を制御する制御部（２０２）と、を備えている。

Description

加熱調理器、加熱調理器の制御方法、および加熱調理システム
　本開示は、加熱庫内にカメラを搭載し、経年変化および利用状況のうち少なくともいずれか等により庫内状態が変化しても、庫内の状態を検知可能な、加熱調理器、加熱調理器の制御方法、および加熱調理システムに関する。
　加熱調理器の一例として電子レンジがある。電子レンジは、使用者が、加熱を行う時間等を入力した後に、加熱を開始するためのボタンを押下することにより、加熱調理を行う。特に、コンビニエンスストアおよびスーパーマーケット等の販売店では、弁当または総菜等を容器に入れて販売し、購入された食品を、電子レンジを使って加熱調理して提供するサービスが行われる。
　しかしながら、このような電子レンジでは、使用者が、都度、加熱時間等を入力するのが面倒であるという問題がある。そのため、店が混雑してくると、加熱庫内の中に対象となる加熱対象物が入っていなくても、使用者が操作開始ボタンを押下してしまうケースが発生する。この場合、庫内が空焚きの状態で加熱制御がなされてしまう。
　このため、空焚きを防止するための技術が数多く提案されている。例えば、特許文献１には、加熱調理器にカメラを搭載し、調理前にカメラで庫内を撮影し、撮影された画像と事前に登録してある庫内空画像との類似度を算出して、所定の類似度であれば、庫内が空状態であると判別を行う技術が記載されている。
　しかしながら、特許文献１に記載の技術では、煮汁またはソース等による庫内底面の汚れ、庫内扉の開閉操作によるカメラ位置の微妙なずれ、ならびに、外光および照明等の庫内外環境等の利用状況が変化するので、差分画像の類似度だけでは正確に庫内状態を判定することが難しく、庫内が空状態であるという判定を誤る可能性がある。
特開２０１５－１３７８１２号公報
　本開示は、加熱庫内が空状態であることを精度良く検知できる、加熱調理器、加熱調理器の制御方法、および加熱調理システムを提供するものである。
　本開示の加熱調理器は、加熱庫と、加熱庫内の加熱対象物を加熱する加熱部と、加熱庫内の撮影を行う撮影部と、加熱庫内の基準画像を記憶する画像記憶部とを備えている。また、加熱庫内の庫内状態を解析する庫内状態解析部と、庫内状態に基づき、画像記憶部に記憶されている基準画像と撮影部で撮影された画像とを比較し、加熱庫内における加熱対象物の載置状態を判定する画像比較判定部と、載置状態に基づき、加熱部による加熱を制御する制御部と、を備えている。
　本開示の加熱調理器の制御方法は、加熱庫と、加熱庫内の加熱対象物を加熱する加熱部と、加熱庫内の撮影を行う撮影部と、加熱部による加熱を制御する制御部と、を備える加熱調理器の制御方法である。そして、加熱庫内の基準画像を記憶するステップと、加熱庫内の庫内状態を解析するステップと、庫内状態に基づき、基準画像と撮影部で撮影された画像とを比較し、加熱庫内における加熱対象物の載置状態を判定するステップと、載置状態に基づき、加熱部による加熱を制御するステップと、を備えている。
　本開示の加熱調理システムは、加熱調理器と情報処理装置とを備えた加熱調理システムである。そして、加熱調理器は、加熱庫と、加熱庫内の加熱対象物を加熱する加熱部と、加熱庫内の撮影を行う撮影部と、加熱庫内の庫内状態を解析する庫内状態解析部と、加熱庫内の載置状態に基づき、加熱部による加熱を制御する第１の制御部と、撮影部で撮影された画像と庫内状態解析部で解析された庫内状態とを送信し、載置状態を受信する第１の通信部と、を有している。情報処理装置は、加熱庫内の画像と庫内状態とを受信する第２の通信部と、加熱庫内の基準画像を記憶する画像記憶部と、第２の通信部で受信した庫内状態に基づき、画像記憶部に記憶されている基準画像と第２の通信部で受信した画像とを比較し、加熱庫内の載置状態を判定する画像比較判定部と、画像比較判定部で判定された載置状態を第２の通信部を用いて送信するよう制御する第２の制御部と、を有している。
　上述した構成および方法によれば、加熱庫内が空状態であることを精度良く検知することができる。
図１は、本開示の第１の実施の形態における加熱調理器の外観を示す正面図である。 図２は、本開示の第１の実施の形態における加熱調理器の機能ブロック図である。 図３は、本開示の第１の実施の形態における、庫内を撮影した画像の一例（庫内空画像）を示す図である。 図４Ａは、本開示の第１の実施の形態における、庫内を撮影した画像の他の一例を示す図である。 図４Ｂは、本開示の第１の実施の形態における、庫内を撮影した画像の他の一例を示す図である。 図５は、本開示の第１の実施の形態における、庫内状態解析部で解析される、庫内状態に関するテーブルの一例を示す図である。 図６は、本開示の第１の実施の形態における、画像比較判定部の比較判定に利用されるテーブルの一例を示す図である。 図７は、本開示の第１の実施の形態における、庫内状態の判定処理に関するフローチャートである。 図８は、本開示の第２の実施の形態における、加熱調理器の機能ブロック図である。 図９は、本開示の第２の実施の形態における、庫内状態解析部で解析される、庫内状態に関するテーブルの一例を示す図である。 図１０は、本開示の第２の実施の形態における、庫内画像登録処理を示すフローチャートである。 図１１は、本開示の第３の実施の形態における加熱調理器の機能ブロック図である。 図１２は、本開示の第３の実施の形態における、加熱調理器の庫内の底面にマークおよび文字等が記載されている一例を示す図である。 図１３Ａは、本開示の第３の実施の形態における、庫内を撮影した画像の一例を示す図である。 図１３Ｂは、本開示の第３の実施の形態における、庫内を撮影した画像の一例を示す図である。 図１４は、本開示の第４の実施の形態における、加熱調理システムの構成を示す機能ブロック図である。 図１５は、本開示の第３の実施の形態における、加熱調理システムの処理を示すシーケンス図である。
　（本開示の取り得る形態の一例）
　本開示の第１の態様の加熱調理器は、加熱庫と、加熱庫内の加熱対象物を加熱する加熱部と、加熱庫内の撮影を行う撮影部と、加熱庫内の基準画像を記憶する画像記憶部とを備えている。また、加熱庫内の庫内状態を解析する庫内状態解析部と、庫内状態に基づき、画像記憶部に記憶されている基準画像と撮影部で撮影された画像とを比較し、加熱庫内における加熱対象物の載置状態を判定する画像比較判定部と、載置状態に基づき、加熱部による加熱を制御する制御部と、を備えている。
　これにより、経年変化および利用状況のうち少なくともいずれか等で庫内状態が変化していても、カメラで撮影した画像から、ユーザの意図する庫内の状態を精度良く把握することができる。
　本開示の第２の態様は、第１の態様の加熱調理器であって、画像比較判定部は、画像記憶部に記憶されている基準画像である庫内空画像と、撮影部で撮影された画像との差分比較を行い、所定の閾値範囲以下であれば、載置状態が空の状態であると判別する。
　これにより、経年変化および利用状況の少なくともいずれか等で庫内状態が変化していても、カメラで撮影された画像から、庫内が空の状態であることを精度良く把握することができる。
　本開示の第３の態様は、第２の態様において、画像比較判定部は、庫内状態の違いにより、異なる所定の閾値範囲を用いて載置状態の判定を行う。
　このような構成により、さらに、庫内状態の違いにより、異なる閾値を用いて適切に載置状態を判定することができる。
　本開示の第４の態様は、第１の態様から第３の態様までのいずれかの加熱調理器であって、画像比較判定部は、載置状態が空の状態であると判定した場合に、撮影部で撮影された画像が画像記憶部に記憶される。
　これにより、空の状態であると判別された撮影画像を、次に比較する際の基準画像として登録することができ、経年変化および利用状況のうち少なくともいずれか等で庫内状態が変化していても、カメラで撮影された画像から、庫内が空の状態であることを精度良く把握することができる。
　本開示の第５の態様は、第１の態様から第４の態様のいずれかに開示の加熱調理器であって、庫内状態解析部は、庫内状態に応じて、撮影部において撮影された画像を、基準画像として画像記憶部に記憶する。
　これにより、状態判別された画像を、次に比較する際の基準画像として登録することで、経年変化および利用状況のうち、少なくともいずれか等で庫内状態が変化していても、カメラで撮影した画像から、庫内が空の状態であることを精度良く把握することができる。
　本開示の第６の態様は、第１の態様から第５の態様までのいずれかに開示の加熱調理器であって、操作設定部をさらに備える。操作設定部で指示を受けた際に、撮影部において撮影された画像が画像記憶部に記憶される。
　これにより、ユーザ等が、次に比較する際の基準画像を登録することができ、経年変化および利用状況のうち少なくともいずれか等で庫内状態が変化していても、カメラで撮影した画像から、ユーザの意図する庫内の状態を、精度良く把握することができる。
　本開示の第７の態様は、第６の態様に開示の加熱調理器であって、表示部をさらに備える。操作設定部で指示を受けた際に、撮影部において撮影された画像が表示部に表示される。
　これにより、比較を行うための基準画像を登録する際に、その画像を確認することができ、よりユーザの意図する画像を用いて庫内の状態を把握することができる。
　本開示の第８の態様は、第１の態様から第７の態様までのいずれかの態様の加熱調理器であって、画像記憶部に記憶された基準画像内の、所定の文字およびマークのうち少なくともいずれかを読取り解析する画像読取解析部をさらに備える。画像比較判定部は、庫内状態に基づき、画像読取解析部で読取られた、所定の文字およびマークのうち少なくともいずれかが存在する位置の画像と、撮影部により撮影された画像内における、基準画像内の位置と同じ位置の画像との差分比較を行い、所定の文字およびマークのうち少なくともいずれかを少なくとも所定数認識した場合に、載置状態が空の状態であると判別する。
　これにより、経年変化および利用状況のうち、少なくともいずれか等で庫内状態が変化していても、特定の文字およびマークのうち少なくともいずれかを用いて、庫内の空の状態の検知を行うことができ、カメラで撮影した画像から、庫内が空の状態であることを精度良く把握することができる。
　本開示の第９の態様は、加熱庫と、加熱庫内の加熱対象物を加熱する加熱部と、加熱庫内の撮影を行う撮影部と、加熱部による加熱を制御する制御部と、を有する加熱調理器の制御方法である。そして、加熱庫内の基準画像を記憶するステップと、加熱庫内の庫内状態を解析するステップと、庫内状態に基づき、基準画像と撮影部で撮影された画像とを比較し、加熱庫内における加熱対象物の載置状態を判定するステップと、載置状態に基づき、加熱部による加熱を制御するステップと、備えている。
　これにより、経年変化および利用状況のうち少なくともいずれか等で庫内状態が変化していても、カメラで撮影した画像から、ユーザの意図する庫内の状態を精度良く把握することができる。
　本開示の第１０の態様は、第９の態様の加熱調理器の制御方法において、基準画像内の、所定の文字およびマークのうち少なくともいずれかを読取り解析するステップをさらに備えている。そして、加熱庫内の載置状態を判定するステップにおいて、庫内状態に基づき、読取り解析するステップで読取られた所定の文字およびマークのうち少なくともいずれかが存在する位置の画像と、撮影部により撮影された画像内における、基準画像内の位置と同じ位置の画像との差分比較を行い、所定の文字およびマークのうち少なくともいずれかを少なくとも所定数認識した場合に、庫内が空の状態であると判別する。
　これにより、経年変化および利用状況のうち、少なくともいずれか等で庫内状態が変化していても、特定の文字およびマークのうち、少なくともいずれかを用いて庫内の空の状態を検知することができ、カメラで撮影された画像から、庫内が空の状態であることを精度良く把握することができる。
　本開示の第１１の態様は、加熱調理器と情報処理装置とを備えた加熱調理システムである。加熱調理器は、加熱庫と、加熱庫内の加熱対象物を加熱する加熱部と、加熱庫内の撮影を行う撮影部と、加熱庫内の庫内状態を解析する庫内状態解析部と、加熱庫内の載置状態に基づき、加熱部による加熱を制御する第１の制御部と、撮影部で撮影された画像と庫内状態解析部で解析された庫内状態とを送信し、載置状態を受信する第１の通信部と、を有する。そして、情報処理装置は、加熱庫内の画像と庫内状態とを受信する第２の通信部と、加熱庫内の基準画像を記憶する画像記憶部と、第２の通信部で受信した庫内状態に基づき、画像記憶部に記憶されている画像と第２の通信部で受信した画像とを比較し、加熱庫内の載置状態を判定する画像比較判定部と、画像比較判定部で判定された載置状態を第２の通信部を用いて送信するよう制御する第２の制御部と、を有する。
　これにより、経年変化および利用状況のうち少なくともいずれか等で庫内状態が変化していても、カメラで撮影した画像から、ユーザの意図する庫内の状態を精度良く把握することができる。
　本開示の第１２の態様は、第１１の態様の加熱調理システムにおいて、情報処理装置は、画像記憶部に記憶された基準画像内の所定の文字およびマークのうち、少なくともいずれかを読取り解析する画像読取解析部をさらに備えている。画像比較判定部は、庫内状態に基づき、画像読取解析部で読取られた、所定の文字およびマークのうち少なくともいずれかが存在する位置の画像と、撮影部により撮影された画像内における、基準画像の位置と同じ位置の画像との差分比較を行い、所定の文字およびマークのうち、少なくともいずれかを少なくとも所定数認識した場合に、載置状態が空の状態であると判別する。
　これにより、経年変化および利用状況のうち少なくともいずれか等で庫内状態が変化していても、特定の文字およびマークのうち少なくともいずれかを用いて、庫内の空の状態の検知を行うことができ、カメラで撮影した画像から、庫内が空の状態であることを精度良く把握することができる。
　以下、適宜、図面を参照しながら、実施の形態を詳細に説明する。ただし、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明、および、実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。
　なお、添付図面および以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより請求の範囲に記載の主題を限定することは意図されていない。
　（第１の実施の形態）
　以下、図面を参照して、第１の実施の形態における加熱調理器１００について説明する。
　図１は、本開示の第１の実施の形態における加熱調理器１００の外観を示す正面図である。
　図１に示されるように、加熱調理器１００は、ドアパネル１０１、加熱情報表示部１０２およびメニュー選択部１０３を有している。
　さらに、加熱調理器庫内１０４には、庫内側面に照明１０５、庫内上面にカメラ１０６がそれぞれ具備されている。
　制御回路（後述する制御部２０２と兼用してもよい）が、照明１０５の明るさを制御しながらカメラ１０６により撮影を行うことで、加熱調理器庫内１０４にある食品１０７の調理状態、および、食品１０７に関連する加熱制御情報を、画像情報として検知することができる。
　照明１０５は、図１の例では、加熱調理器１００の加熱調理器庫内１０４の向かって左側の側面に配置されており、庫内側面から庫内全体の照明を行う。
　なお、本実施の形態では、照明１０５を庫内側面に配置しているが、本開示はこれに限定されず、庫内上部端側、庫内上面中央、または、庫内底面等、庫内全体を照明できる場所であれば他の場所に配置してもよい。また、庫内に照明１０５を一つのみ配置するのではなく、同じ位置または異なる位置に、複数個配置してもよい。
　カメラ１０６は、加熱調理器１００の庫内上部に据付されており、庫内上部から庫内全体の撮影を行う。なお、図１において、カメラ１０６は、庫内上部の、向かって左側に配置されているが、正確に食品１０７を撮影するために、庫内上部の略中央（中央を含む）に配置してもよい。
　図２は、本開示の第１の実施の形態における、加熱調理器１００の機能ブロック図である。
　図２に示されるように、加熱調理器１００は、加熱部２０１、制御部２０２、撮影部２０３、庫内状態解析部２０４、画像記憶部２０５、および画像比較判定部２０６を有している。
　加熱部２０１は、例えばマグネトロン等からなり、加熱調理器１００の庫内に置かれている食品１０７の加熱を行う。
　制御部２０２は、加熱調理器１００の状態に基づいて、加熱部２０１の制御を行う。
　撮影部２０３は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ　Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサ、または、ＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）イメージセンサ等と、レンズ等の光学部材とを有し、加熱調理器１００の庫内撮影を行う。撮影部２０３は、図１におけるカメラ１０６を含む。
　庫内状態解析部２０４は、扉の開閉状態および加熱の有無のうち、少なくともいずれか等を含む、庫内状態を解析する。庫内状態に関する情報は、例えばフラッシュメモリのような不揮発性メモリ上で保持され、庫内状態の変化に応じて、庫内状態解析部２０４は、画像比較判定部２０６へ庫内状態の情報を伝える。
　画像比較判定部２０６は、庫内状態解析部２０４で解析された庫内状態に基づき、撮影部２０３にて撮影された画像と画像記憶部２０５に保存された画像（以下、基準画像と記す）とを比較し、その画像差分値によって、どのように処理するかを判定する。判定された結果は、画像比較判定部２０６から制御部２０２へ伝えられる。
　加熱調理器１００は、図示しないマイクロコンピュータおよびメモリ等の周辺回路を備える。制御部２０２、庫内状態解析部２０４、画像記憶部２０５および画像比較判定部２０６それぞれの機能は、マイクロコンピュータ、その上で動作するソフトウェア、およびメモリ等により実現される。
　なお、このマイクロコンピュータおよび周辺回路は、本開示で示される制御を行うものであれば、どのような形態であってもよい。制御部２０２は、演算処理部と、制御プログラムを記憶する記憶部とで構成されていてもよい。演算処理部としては、ＭＰＵ（Ｍｉｃｒｏ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、およびＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）が例示される。記憶部としては、メモリが例示される。記憶部に記録されている制御プログラムが、演算処理部によって実行される。
　また、制御部２０２、庫内状態解析部２０４、画像記憶部２０５および画像比較判定部２０６の機能は、ハードロジックで構成されてもよい。ハードロジックで構成すれば、処理速度の向上に有効である。また、制御部２０２、庫内状態解析部２０４、画像記憶部２０５および画像比較判定部２０６は、一つの半導体チップで構成されてもよいし、物理的に複数の半導体チップで構成されてもよい。複数の半導体チップで構成した場合には、後述する各制御を、それぞれ別の半導体チップで実現することもできる。
　図３は、本開示の第１の実施の形態における、庫内を撮影した画像の一例を示す図である。
　この例では、庫内が「空状態」である画像（庫内空画像）の一例が示されている。なお、工場出荷時においては、庫内画像３０１の例で示されるような「空状態」の基準画像が、画像記憶部２０５のメモリ内に保存されている。
　図４Ａおよび図４Ｂは、それぞれ、本開示の第１の実施の形態における、庫内を撮影した画像の他の一例を示す図である。
　この例では、図４Ａは、庫内は空状態であるものの、汚れまたは異物等が存在する場合、図４Ｂは、庫内に加熱対象物（弁当等の食品１０７）が存在する場合における、それぞれの庫内を撮影した画像（庫内画像４０１，４０２）の一例を示している。
　図５は、本開示の第１の実施の形態における、庫内状態解析部２０４で解析される庫内状態に関するテーブルの一例を示す図である。
　庫内状態／操作テーブル５０１には、加熱調理器１００の庫内における、様々な制御および操作のうち少なくともいずれかに関する状態遷移が記載されている。例えば、電源投入の場合は、ＩＤ「ＳＴ００１」として、「電源ＯＦＦ→ＯＮ」が定義されている。電源を落とす場合は、ＩＤ「ＳＴ００２」として、「電源ＯＮ→ＯＦＦ」が定義されている。
　また、庫内扉の開閉時には、ＩＤ「ＳＴ００３」として「庫内扉　閉→開」が、「ＳＴ００４」として、「庫内扉　開→閉」が、それぞれ定義されている。
　また、ＩＤ「ＳＴ００５」として「加熱スタート開始」が、「ＳＴ００６」として、「加熱中」が、それぞれ定義されている。
　このように、庫内状態／操作テーブル５０１に基づいて、撮影のタイミング、および、加熱の状態等を把握することが可能となる。
　なお、テーブルの項目には「庫内状態/操作」と記載されているが、本開示はこれに限定されず、外光等の外部環境影響による状態変化、他製品とのノイズ干渉、および、ユーザによる操作等、庫内状態が変化する要因に関連する、全ての項目が定義され得る。
　図６は、本開示の第１の実施の形態における、画像比較判定部２０６の比較判定に利用されるテーブルの一例を示す図である。
　図６に示されるように、図５で示されたそれぞれの庫内状態毎に、比較判定を行うための画像差分閾値範囲が定義されている。
　例えば、庫内状態が「ＳＴ００４」の「庫内扉　開→閉」の場合に、庫内が空状態であると検知をするための画像差分閾値範囲としては、画像差分値が０より大きく、２０以下となっている必要がある（ＳＴ００４－１）。
　また、庫内に加熱非対象物が載置された状態であると検知するには、画像差分値が２０より大きい値で、かつ、１００以下となっている必要がある（ＳＴ００４－２）。ここで、加熱非対象物が載置された状態とは、加熱調理器１００による加熱に適さない小さな対象物、例えばマヨネーズ等が庫内に置かれた状態をいう。
　さらに、画像差分値が１００よりも大きい値となっている場合には、庫内に加熱対象物が載置された状態であるとして検知する（ＳＴ００４－３）。ここで、加熱対象物が載置された状態とは、加熱調理器１００で加熱すべき対象物、例えば、お弁当等の食品１０７が庫内に置かれた状態をいう。
　一方、庫内状態が「ＳＴ００５」の「加熱スタート開始」の場合の、庫内が空状態であるとして検知をするための画像差分閾値範囲としては、画像差分値が０より大きく２５以下となっている必要がある（ＳＴ００５－１）。
　なお、本実施の形態では、画像比較した際の画像差分値として、各画素における輝度差分が、所定の数値を超えた場合にカウントする方式を用いている。しかしながら、本開示はこの例に限定されず、画像差分が分かる方式であれば、どのような方式を利用してもよい。例えば、画像類似度、または各画素の色の差分を用いてもよい。また、図６には、画像差分閾値範囲として、下限値および上限値の両方を記載しているが、どちらか一方だけの数値で定義されてもよい。
　このように、本実施の形態の加熱調理器１００は、庫内状態に応じて、異なる画像差分閾値範囲を設定することが可能である。例えば、朝日等の外光が差し込んだ場合とそうでない場合とでは、撮影部２０３で撮影される画像の明るさが異なるが、それぞれの場合で、異なる画像差分閾値範囲を設定することができるため、庫内の状態を、より精度良く把握することができる。
　図７は、本開示の第１の実施の形態における、庫内状態の判定処理に関するフローチャートである。
　ここでは、図３、図４Ａおよび図４Ｂで示されたような、撮影部２０３で撮影された画像に対して、画像判定処理を行う例を説明する。
　図７において、制御部２０２は、ドアパネル１０１の開閉状態、ならびに、ユーザによるメニュー選択部１０３を用いた電源ＯＮ／ＯＦＦ操作および加熱開始操作等を把握しており、その情報が庫内状態解析部２０４に入力される。庫内状態解析部２０４は、制御部２０２からの情報に基づき、庫内状態を解析する（Ｓ７０１）。
　制御部２０２は、庫内状態解析結果に基づいて、庫内画像撮影が可能な状態であるかどうかを確認する（Ｓ７０２）。制御部２０２は、撮影が可能な状態でなければ、処理を終了する（Ｓ７０２，ＮＯ）。例えば、ドアパネル１０１が開けられた状態、および、庫内照明がＯＦＦの状態では、制御部２０２は、画像撮影が可能な状態でない、と判断する。
　一方、庫内撮影が可能な状態であるとき（Ｓ７０２，Ｙｅｓ）には、撮影部２０３は庫内画像を撮影する（Ｓ７０３）。
　次に、画像比較判定部２０６は、庫内状態解析部２０４にて解析された庫内状態情報テーブル６０１を用いて、撮影部２０３にて撮影された画像と、画像記憶部２０５に記憶されている庫内画像（基準画像）との比較を行う（Ｓ７０４）。
　画像比較判定部２０６は、庫内状態情報テーブル６０１の中から、該当する庫内状態における画像差分閾値範囲を確認し、比較画像の差分値が、どの閾値範囲にあるかを判定する（Ｓ７０５）。
　比較画像の差分値が「庫内空状態」の閾値範囲にある場合、画像比較判定部２０６は「庫内空状態」であると検知する（Ｓ７０６）。
　比較画像の差分値が「加熱非対象物載置状態」の閾値範囲にある場合、画像比較判定部２０６は「加熱非対象物載置状態」であると検知する（Ｓ７０７）。
　比較画像の差分値が「加熱対象物載置状態」の閾値範囲にある場合、画像比較判定部２０６は「加熱対象物載置状態」であると検知する（Ｓ７０８）。
　制御部２０２は、庫内の載置状態が、「庫内空状態」および「加熱非対象物載置状態」である場合には、加熱情報表示部１０２に「加熱できない」旨のメッセージを表示し、ユーザがメニュー選択部１０３を用いて加熱開始の操作を行っても、加熱を開始しないように制御する。
　また、庫内の載置状態が「加熱対象物載置状態」である場合、制御部２０２は、ユーザが、メニュー選択部１０３を用いた加熱開始の操作を行うことにより、加熱を開始する。
　なお、本実施の形態では、載置状態の判別検知を「庫内空状態」、「加熱非対象物載置状態」および「加熱対象物載置状態」の三つのパターンで記載しているが、本開示はこの例に限定されない。例えば、「庫内空状態」の一パターンだけでの検知でもよい。また、載置状態の判別検知は、上記三つの載置状態に限定されるものではなく、判別結果を、複数検知および他の検知に利用できるのであれば、庫内状態に応じて、判別を行う種類を増減させてもよい。
　（第２の実施の形態）
　次に、図面を参照して、本開示の第２の実施の形態における加熱調理器８００について説明する。
　図８は、本開示の第２の実施の形態における、加熱調理器８００の機能ブロック図である。
　図８に示されるように、加熱調理器８００は、加熱部８０１、制御部８０２、撮影部８０３、庫内状態解析部８０４、画像記憶部８０５、画像比較判定部８０６および操作設定部８０７を有している。
　なお、第２の実施の形態の加熱調理器８００の回路構成は、第１の実施の形態の加熱調理器１００の回路構成と、基本的な構造は共通している。異なる箇所は、庫内画像撮影を行うための操作設定部８０７が構成に追加された点と、庫内状態解析部８０４の解析結果に応じて、撮影部８０３で撮影された画像を基準画像として登録する点である。このため、第１の実施の形態と共通する部分については説明を省略する。なお、操作設定部８０７は、図１におけるメニュー選択部１０３を含む。
　図９は、本開示の第２の実施の形態における、庫内状態解析部８０４で解析される庫内状態に関するテーブルの一例を示す図である。
　庫内状態／操作テーブル９０１には、加熱調理器８００の庫内における様々な制御および操作のうち少なくともいずれかに関する、それぞれの状態遷移が記載されている。
　例えば「電源投入」の場合は、ＩＤ「ＳＴ１０１」として、「電源投入後１分後」が定義されている。なお、本実施の形態では、ＩＤ「ＳＴ１０３」として「庫内扉『閉→開』直後」が、ＩＤ「ＳＴ１１２」として「庫内照明「ＯＮ→ＯＦＦ」直前」が、ＩＤ「ＳＴ１１６」として「庫内空画像登録ボタン押下後」が、それぞれ一例として記載されている。しかしながら、本開示はこれらの例に限定されるものではなく、撮影タイミングとして適したものであれば、どの状態を利用してもよい。
　図１０は、本開示の第２の実施の形態における、庫内画像登録処理を示すフローチャートである。
　図１０において、制御部８０２からの情報に基づき、庫内状態解析部８０４は庫内状態の解析を行う（Ｓ１００１）。
　制御部８０２は、庫内状態解析部８０４による庫内状態の解析結果に基づいて、庫内画像撮影が可能な状態であるかどうかを確認し、画像撮影が可能な状態でなければ（Ｓ１００２，ＮＯ）、処理を終了する。例えば、制御部８０２は、ドアパネル１０１が開けられた状態、および、庫内照明がＯＦＦの状態では、画像撮影が可能な状態ではない、と判断する。
　一方、庫内撮影が可能な状態である場合（Ｓ１００２，ＹＥＳ）に、撮影部８０３は、庫内画像を撮影する（Ｓ１００３）。
　次に、制御部８０２は、撮影画像が基準画像としての基準を満たすかどうかを確認し、基準画像としての基準を満たしていなければ（Ｓ１００４，ＮＯ）、終了する。
　一方、撮影画像が基準画像としての基準を満たしている場合（Ｓ１００４，ＹＥＳ）、画像比較判定部８０６は、撮影画像を基準画像として、画像記憶部８０５に記憶する（Ｓ１００５）。
　なお、ステップＳ１００３において、操作設定部８０７からの指示で撮影をする場合等には、ステップＳ１００４を省略して、撮影された画像が基準画像として画像記憶部８０５に記憶されてもよい。
　また、庫内画像が基準画像となる条件は、予め登録されている基準画像との比較において、画像差分値が所定の閾値以下の場合であってもよく、また、工場出荷時における基準画像との比較において、画像差分値が所定の閾値以下の場合であってもよい。
　このように、基準画像を更新することによって、加熱調理器を長期間使用することによる不具合、具体的には、カメラの劣化、照明の劣化、内部の汚れ、湿度の変化、および輝度等の変化にも対応して、正確な載置状態を判定することができる。一方、同じ基準画像を用いて判定を行った場合には、上述した劣化等の理由で、正しい判定が行えなくなる可能性がある。
　また、上述した劣化等は、特に、一般的な加熱調理器よりも使用頻度の高い、業務用の加熱調理器において顕著である。
　（第３の実施の形態）
　次に、図面を参照して、第３の実施の形態における加熱調理器１１００を説明する。
　図１１は、本開示の第３の実施の形態における加熱調理器１１００の機能ブロック図である。
　図１１に示されるように、加熱調理器１１００は、加熱部１１０１、制御部１１０２、撮影部１１０３、画像読取解析部１１０４、庫内状態解析部１１０５、画像記憶部１１０６、画像比較判定部１１０７および操作設定部１１０８を有している。
　なお、第３の実施の形態の加熱調理器１１００の回路構成は、第２の実施の形態の加熱調理器８００の回路構成と、基本的な構造は共通している。異なる箇所は、撮影部１１０３が庫内を撮影した画像を、画像読取解析部１１０４で画像解析し、その結果、読み取られた情報を画像比較判定部１１０７へ伝える点である。このため、第２の実施の形態と共通する部分については説明を省略する。
　図１２は、本開示の第３の実施の形態における、加熱調理器１１００の庫内の底面に、マークおよび文字等が記載されている一例を示す図である。
　図１２の例においては、庫内空画像であることを明示的にわかりやくするために、「＋」のマークが庫内底面の所定の位置に記載されている。
　図１３Ａおよび図１３Ｂは、それぞれ、本開示の第３の実施の形態における、庫内を撮影した画像の一例を示す図である。
　庫内底面にマークが記載された加熱庫内において、図１３Ａは、庫内に汚れおよび異物のうち少なくともいずれか等が存在する空状態の場合、図１３Ｂは、庫内に加熱対象物（弁当等の食品１０７）が存在する場合、それぞれにおいて、庫内を撮影した画像（庫内画像１３０１，１３０２）の一例を示している。
　処理フローは、図７に記載されたフローと、ほぼ同じである。ただし、ステップＳ７０３において、画像記憶部１１０６に記憶されている基準画像から、マーク部分を画像読取解析部１１０４で解析し、マークの箇所について、撮影部１１０３にて撮影した画像と、画像記憶部１１０６に記憶されている基準画像との比較を行う。これにより、より素早く、かつ精度良く「空画像状態」、および、それ以外の状態を判別することが可能である。なお、画像読取解析部１１０４が解析する部分として、マークおよび文字のうち、少なくともいずれかを例示しているが、本開示はこれらに限られるものではなく、数字およびバーコード、ならびに、形状および特殊な記号のうち、少なくともいずれかであってもよい。
　（第４の実施の形態）
　次に、本開示の第４の実施の形態における、加熱調理システム２０００について説明する。
　加熱調理器１４００をネットワークと接続可能に構成し、ネットワーク上の携帯端末またはサーバ（それぞれ情報処理装置１４５０の一例）によって、加熱調理器１４００を制御する加熱調理システム２０００として本開示を実施することが可能である。
　図１４は、本開示の第４の実施の形態における、加熱調理システム２０００の構成を示す機能ブロック図である。
　加熱調理システム２０００は、加熱調理器１４００と情報処理装置１４５０とを含む。
　加熱調理器１４００は、加熱部１４０１、撮影部１４０２、庫内状態解析部１４０３、制御部１４０４（第１の制御部）および通信部１４０５（第１の通信部）を有している。
　情報処理装置１４５０は、画像比較判定部１４５１、画像記憶部１４５２、制御部１４５３（第２の制御部）および通信部１４５４（第２の通信部）を有している。
　本実施の形態の加熱調理器１４００の回路構成が、第１の実施の形態の加熱調理器１００の回路構成と異なる箇所は、ネットワークを介して、情報処理装置１４５０と通信を行う通信部１４０５が追加された点と、画像比較判定部８０６および画像記憶部８０５を有しない点である。本実施の形態において、第１の実施の形態と共通する部分については、説明を省略する。
　情報処理装置１４５０は、携帯端末、パソコン、およびサーバ等から選択される装置である。情報処理装置１４５０は、図示しないマイクロコンピュータおよびメモリ等の周辺回路を備える。画像比較判定部１４５１、画像記憶部１４５２および制御部１４５３の機能は、マイクロコンピュータ、その上で動作するソフトウェア、およびメモリ等により実現される。
　通信部１４０５および通信部１４５４は、有線ＬＡＮ、無線ＬＡＮ（Ｗｉ－Ｆｉ）、および、キャリア回線（３Ｇ、４Ｇ、ＬＴＥ等）等から選択される方式に対応したハードウェアで構成される。
　図１５は、本開示の第３の実施の形態における、加熱調理システム２０００の処理を示すシーケンス図である。
　加熱調理器１４００の制御部１４０４は、ドアパネル１０１の開閉状態、ならびに、ユーザによるメニュー選択部１０３を用いた電源ＯＮ／ＯＦＦ操作および加熱開始操作等を把握しており、その情報が、庫内状態解析部１４０３に入力される。
　庫内状態解析部１４０３は、制御部１４０４からの情報に基づき、庫内状態を解析する（Ｓ２００１）。
　制御部１４０４は、庫内状態解析部１４０３で解析された庫内状態を、通信部１４０５を用いて情報処理装置１４５０に送信する（Ｓ２００２）。
　撮影部１４０２は庫内画像を撮影する（Ｓ２００３）。
　制御部１４０４は、撮影した画像を、通信部１４０５を用いて、情報処理装置１４５０に送信する（Ｓ２００４）。
　情報処理装置１４５０は、通信部１４５４で、画像および庫内状態を受信する。
　画像比較判定部１４５１は、通信部１４５４で受信した画像と、画像記憶部１４５２に記憶されている庫内画像（基準画像）との比較を行う（Ｓ２００５）。
　画像比較判定部１４５１は、通信部１４５４で受信された庫内状態における画像差分閾値範囲を確認し、比較画像の差分値が、どの閾値範囲にあるかを確認し、載置状態を判別する（Ｓ２００６）。この処理は、図７のステップＳ７０５～ステップＳ７０８と共通する。
　制御部１４５３は、画像比較判定部１４５１で判別された載置状態を、通信部１４５４を用いて加熱調理器１４００に送信する（Ｓ２００７）。
　加熱調理器１４００は、通信部１４０５で載置状態を受信する。
　制御部１４０４は、受信した載置状態に基づいて、加熱部１４０１による加熱を制御する（Ｓ２００８）。例えば、庫内の載置状態が、「庫内空状態」および「加熱非対象物載置状態」である場合、制御部１４０４は、加熱情報表示部１０２に「加熱できない」旨のメッセージを表示し、ユーザがメニュー選択部１０３を用いて加熱開始の操作を行っても、加熱を開始しないように制御する。また、庫内の載置状態が、「加熱対象物載置状態」である場合、制御部１４０４は、ユーザがメニュー選択部１０３を用いて加熱開始の操作を行うことにより、加熱を開始する。
　第４の実施の形態における加熱調理システム２０００によれば、処理負荷の高い画像比較判定部１４５１を、加熱調理器１４００ではなく、情報処理装置１４５０に設けることにより、加熱調理器１４００は、画像比較判定処理に伴う処理負荷を低減できる。
　なお、本実施の形態では、加熱調理器１４００が庫内状態解析部１４０３を有する形態について説明したが、庫内状態解析部１４０３が加熱調理器１４００に存在せず、情報処理装置１４５０に設けられる形態であってもよい。この場合、制御部１４０４は、庫内状態の解析に必要な情報を、通信部１４０５を用いて情報処理装置１４５０に送信し、情報処理装置１４５０の庫内状態解析部１４０３が、受信した情報を用いて庫内状態を解析する。
　このような構成によれば、さらに加熱調理器１４００の構成を簡略化できる。
　また、第２の実施の形態に示したように、画像比較判定部１４５１において、画像の比較がなされた結果、加熱調理器１４００から送られた画像により、画像記憶部１４５２に記憶された基準画像が更新される構成としてもよい。
　また、情報処理装置１４５０は、上記の構成に加えて、画像読取解析部を備える構成であってもよい。この場合、情報処理装置１４５０の画像比較判定部１４５１は、画像記憶部１４５２に記憶されている画像から、例えばマーク部分を画像読取解析部で解析し、マークの箇所について、撮影部１４０２にて撮影された画像と画像記憶部１４５２に記憶されている画像との比較を行うことで、「空画像状態」、および、それ以外の状態を判別する。
　（その他の実施の形態）
　なお、本開示は、上述した各実施の形態に限られるものではなく、例えば以下に示すように変更することもできる。以下の変形例は、上述した各実施の形態についてのみ適用されるものではなく、異なる変形例同士を互いに組み合わせて実施することもできる。
　加熱調理器は、コンビニエンスストア、および、お弁当業者等の業務用機器として実施されるだけでなく、家庭用の加熱調理器として実施されることも可能である。
　また、加熱調理器の撮影部で加熱庫内を撮影する際に、加熱調理器の表示部に加熱庫内の画像が表示される構成としてもよい。また、加熱調理器をネットワークに接続した構成が実施される場合には、ネットワークに接続された情報処理装置の表示部に、加熱庫内の画像が表示される構成としてもよい。
　また、加熱調理器で読取解析された、文字、バーコード、および形状等のうち、少なくともいずれかを、加熱調理器の表示部に表示させる構成としてもよい。また、加熱調理器をネットワークに接続した構成が実施される場合には、ネットワークに接続された情報処理装置の表示部に、読取解析された、文字、バーコード、および形状等のうち、少なくともいずれかが表示される構成としてもよい。
　また、上述した実施の形態の加熱調理器は、制御部、庫内状態解析部、画像記憶部、画像比較判定部、および画像読取解析部を有しているが、これら複数のブロックを一つの半導体素子（例えば、マイクロプロセッサ）で実現することも可能である。この場合、一つの制御部で様々な処理を行えることが可能となるだけでなく、回路基板上に実装する半導体素子の数を低減させることが可能であるため、回路基板の大きさを小さくすることが可能である。
　また、これら複数のブロックの内、全てのブロックではなく、一部のブロックを一つの半導体素子で実現することも可能である。
　なお、上述の実施の形態は、本開示における技術を例示するためのものであるから、請求の範囲またはその均等の範囲において、種々の変更、置き換え、付加、および省略等を行うことができる。
　以上述べたように、本開示の加熱調理器、加熱調理器の制御方法および加熱調理システムは、加熱庫内にカメラを搭載し、経年変化および利用状況のうち少なくともいずれか等により庫内状態が変化しても、庫内の状態を検知可能な、加熱調理器、加熱調理器の制御方法、および加熱調理システム等として、有用である。
　１００，８００，１１００，１４００　　加熱調理器
　１０１　　ドアパネル
　１０２　　加熱情報表示部
　１０３　　メニュー選択部
　１０４　　加熱調理器庫内
　１０５　　照明
　１０６　　カメラ
　１０７　　食品
　２０１，８０１，１１０１，１４０１　　加熱部
　２０２，８０２，１１０２，１４０４，１４５３　　制御部
　２０３，８０３，１１０３，１４０２　　撮影部
　２０４，８０４，１１０５，１４０３　　庫内状態解析部
　２０５，８０５，１１０６，１４５２　　画像記憶部
　２０６，８０６，１１０７，１４５１　　画像比較判定部
　３０１，４０１，４０２，１３０１，１３０２　　庫内画像
　５０１，９０１　　庫内状態／操作テーブル
　６０１　　庫内状態情報テーブル
　８０７，１１０８　　操作設定部
　１１０４　　画像読取解析部
　１４０５，１４５４　　通信部
　１４５０　　情報処理装置
　２０００　　加熱調理システム

Claims (12)

  1. 加熱庫と、
    前記加熱庫内の加熱対象物を加熱する加熱部と、
    前記加熱庫内の撮影を行う撮影部と、
    前記加熱庫内の基準画像を記憶する画像記憶部と、
    前記加熱庫内の庫内状態を解析する庫内状態解析部と、
    前記庫内状態に基づき、前記画像記憶部に記憶されている前記基準画像と、前記撮影部で撮影された画像とを比較し、前記加熱庫内における前記加熱対象物の載置状態を判定する画像比較判定部と、
    前記載置状態に基づき、前記加熱部による加熱を制御する制御部と、
    を備えた加熱調理器。
  2. 前記画像比較判定部は、前記画像記憶部に記憶されている前記基準画像である庫内空画像と、前記撮影部で撮影された前記画像との差分比較を行い、所定の閾値範囲以下であれば、前記載置状態が空の状態であると判定する
    請求項１に記載の加熱調理器。
  3. 前記画像比較判定部は、前記庫内状態の違いにより、異なる前記所定の閾値範囲を用いて前記載置状態の判定を行う
    請求項２に記載の加熱調理器。
  4. 前記画像比較判定部は、前記載置状態が空の状態であると判定した場合に、前記撮影部で撮影された前記画像が前記画像記憶部に記憶される
    請求項１から請求項３までのいずれか１項に記載の加熱調理器。
  5. 前記庫内状態解析部は、前記庫内状態に応じて、前記撮影部において撮影された前記画像を、前記基準画像として前記画像記憶部に記憶する
    請求項１から請求項４までのいずれか１項に記載の加熱調理器。
  6. 操作設定部をさらに備え、
    前記操作設定部で指示を受けた際に、前記撮影部において撮影された前記画像が前記画像記憶部に記憶される
    請求項１から請求項５までのいずれか１項に記載の加熱調理器。
  7. 表示部をさらに備え、
    前記操作設定部で指示を受けた際に、前記撮影部において撮影された前記画像が前記表示部に表示される請求項６に記載の加熱調理器。
  8. 前記画像記憶部に記憶された前記基準画像内の、所定の文字およびマークのうち少なくともいずれかを読取り解析する画像読取解析部をさらに備え、
    前記画像比較判定部は、前記庫内状態に基づき、前記画像読取解析部で読取られた、前記所定の文字およびマークのうち少なくともいずれかが存在する位置の画像と、前記撮影部により撮影された前記画像内における、前記基準画像内の前記位置と同じ位置の画像との差分比較を行い、前記所定の文字およびマークのうち少なくともいずれかを少なくとも所定数認識した場合に、前記載置状態が空の状態であると判別する
    請求項１から請求項７に記載の加熱調理器。
  9. 加熱庫と、前記加熱庫内の加熱対象物を加熱する加熱部と、前記加熱庫内の撮影を行う撮影部と、前記加熱部による加熱を制御する制御部と、を有する加熱調理器の制御方法であって、
    前記加熱庫内の基準画像を記憶するステップと、
    前記加熱庫内の庫内状態を解析するステップと、
    前記庫内状態に基づき、前記基準画像と前記撮影部で撮影された画像とを比較し、前記加熱庫内における前記加熱対象物の載置状態を判定するステップと、
    前記載置状態に基づき、前記加熱部による加熱を制御するステップと、
    を備えた、加熱調理器の制御方法。
  10. 前記基準画像内の、所定の文字およびマークのうち少なくともいずれかを読取り解析するステップをさらに備え、
    前記加熱対象物の載置状態を判定するステップにおいて、前記庫内状態に基づき、前記読取り解析するステップで読取られた前記所定の文字およびマークのうち少なくともいずれかが存在する位置の画像と、前記撮影部により撮影された前記画像内における、前記基準画像内の前記位置と同じ位置の画像との差分比較を行い、前記所定の文字および前記マークのうち少なくともいずれかを少なくとも所定数認識した場合に、前記庫内が空の状態であると判別する
    請求項９に記載の加熱調理器の制御方法。
  11. 加熱調理器と情報処理装置とを備えた加熱調理システムであって、
    前記加熱調理器は、加熱庫と、前記加熱庫内の加熱対象物を加熱する加熱部と、前記加熱庫内の撮影を行う撮影部と、前記加熱庫内の庫内状態を解析する庫内状態解析部と、前記加熱庫内の載置状態に基づき、前記加熱部による加熱を制御する第１の制御部と、前記撮影部で撮影された前記画像と、前記庫内状態解析部で解析された前記庫内状態とを送信し、前記載置状態を受信する第１の通信部と、を有し、
    前記情報処理装置は、前記加熱庫内の前記画像と前記庫内状態とを受信する第２の通信部と、前記加熱庫内の基準画像を記憶する画像記憶部と、前記第２の通信部で受信した前記庫内状態に基づき、前記画像記憶部に記憶されている前記基準画像と前記第２の通信部で受信した前記画像とを比較し、前記加熱庫内の載置状態を判定する画像比較判定部と、前記画像比較判定部で判定された前記載置状態を前記第２の通信部を用いて送信するよう制御する第２の制御部と、を有する
    加熱調理システム。
  12. 前記情報処理装置は、前記画像記憶部に記憶された前記基準画像内の所定の文字およびマークのうち少なくともいずれかを読取り解析する画像読取解析部をさらに備え、
    前記画像比較判定部は、前記庫内状態に基づき、前記画像読取解析部で読取られた、前記所定の文字および前記マークのうち少なくともいずれかが存在する位置の画像と、前記撮影部により撮影された前記画像内における、前記基準画像の前記位置と同じ位置の画像との差分比較を行い、前記所定の文字および前記マークのうち少なくともいずれかを少なくとも所定数認識した場合に、前記載置状態が空の状態であると判別する、
    請求項１１に記載の加熱調理システム。
PCT/JP2017/039496 2016-11-28 2017-11-01 加熱調理器、加熱調理器の制御方法、および加熱調理システム WO2018096885A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018552483A JP6934607B2 (ja) 2016-11-28 2017-11-01 加熱調理器、加熱調理器の制御方法、および加熱調理システム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016229729 2016-11-28
JP2016-229729 2016-11-28

Publications (1)

Publication Number Publication Date
WO2018096885A1 true WO2018096885A1 (ja) 2018-05-31

Family

ID=62194944

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/039496 WO2018096885A1 (ja) 2016-11-28 2017-11-01 加熱調理器、加熱調理器の制御方法、および加熱調理システム

Country Status (2)

Country Link
JP (1) JP6934607B2 (ja)
WO (1) WO2018096885A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020241093A1 (ja) * 2019-05-24 2020-12-03 沖電気工業株式会社 画像処理装置、記憶媒体、及び画像処理方法
WO2024063296A1 (ko) * 2022-09-22 2024-03-28 삼성전자 주식회사 조리실의 밝기를 제어할 수 있는 오븐 및 오븐의 동작 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000337639A (ja) * 1999-05-26 2000-12-08 Sharp Corp 加熱調理器
JP2014077581A (ja) * 2012-10-10 2014-05-01 Panasonic Corp 制御プログラム、情報処理装置、情報処理端末、加熱調理器及び加熱調理システム
JP2015137812A (ja) * 2014-01-23 2015-07-30 パナソニックＩｐマネジメント株式会社 加熱調理器
WO2016056246A1 (ja) * 2014-10-10 2016-04-14 パナソニックＩｐマネジメント株式会社 加熱調理器

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000337639A (ja) * 1999-05-26 2000-12-08 Sharp Corp 加熱調理器
JP2014077581A (ja) * 2012-10-10 2014-05-01 Panasonic Corp 制御プログラム、情報処理装置、情報処理端末、加熱調理器及び加熱調理システム
JP2015137812A (ja) * 2014-01-23 2015-07-30 パナソニックＩｐマネジメント株式会社 加熱調理器
WO2016056246A1 (ja) * 2014-10-10 2016-04-14 パナソニックＩｐマネジメント株式会社 加熱調理器

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020241093A1 (ja) * 2019-05-24 2020-12-03 沖電気工業株式会社 画像処理装置、記憶媒体、及び画像処理方法
WO2024063296A1 (ko) * 2022-09-22 2024-03-28 삼성전자 주식회사 조리실의 밝기를 제어할 수 있는 오븐 및 오븐의 동작 방법

Also Published As

Publication number Publication date
JP6934607B2 (ja) 2021-09-15
JPWO2018096885A1 (ja) 2019-10-17

Similar Documents

Publication Publication Date Title
WO2016199378A1 (ja) 加熱調理器
US10716174B2 (en) Heating cooker, method for controlling heating cooker, and heating cooking system
JP6920594B2 (ja) 加熱調理器
CN109073232B (zh) 加热烹调器、加热烹调器的控制方法以及加热烹调系统
JP6906147B2 (ja) 加熱調理器および加熱調理器の制御方法
WO2017168473A1 (ja) 文字図形認識装置、文字図形認識方法、及び文字図形認識プログラム
WO2018096885A1 (ja) 加熱調理器、加熱調理器の制御方法、および加熱調理システム
JP7349609B2 (ja) 加熱調理器の制御方法
US10785456B1 (en) Methods for viewing and tracking stored items
EP3929489A1 (en) Heating cooker
US20230089725A1 (en) Cooking apparatus and controlling method thereof
JP7190632B2 (ja) 加熱調理器および加熱調理器の制御方法
WO2019159518A1 (ja) 加熱調理器および加熱調理システム
JPWO2017164050A1 (ja) 加熱調理器、加熱調理器の制御方法及び加熱調理システム
WO2020054609A1 (ja) 加熱調理器
US20220418055A1 (en) Heating cooker, control device, and control method
JPWO2018235703A1 (ja) 加熱調理器
WO2018079426A1 (ja) 加熱調理器および加熱調理器の制御方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17874927

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018552483

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17874927

Country of ref document: EP

Kind code of ref document: A1