JPWO2018100956A1 - Heating cooker and control method of heating cooker - Google Patents

Heating cooker and control method of heating cooker Download PDF

Info

Publication number
JPWO2018100956A1
JPWO2018100956A1 JP2018553726A JP2018553726A JPWO2018100956A1 JP WO2018100956 A1 JPWO2018100956 A1 JP WO2018100956A1 JP 2018553726 A JP2018553726 A JP 2018553726A JP 2018553726 A JP2018553726 A JP 2018553726A JP WO2018100956 A1 JPWO2018100956 A1 JP WO2018100956A1
Authority
JP
Japan
Prior art keywords
heating
door
unit
image
heating chamber
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018553726A
Other languages
Japanese (ja)
Other versions
JP6906147B2 (en
Inventor
直哉 谷口
直哉 谷口
今井 博久
博久 今井
巌徹 松井
巌徹 松井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of JPWO2018100956A1 publication Critical patent/JPWO2018100956A1/en
Application granted granted Critical
Publication of JP6906147B2 publication Critical patent/JP6906147B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24CDOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C7/00Stoves or ranges heated by electric energy
    • F24C7/02Stoves or ranges heated by electric energy using microwaves

Abstract

加熱調理器であって、加熱庫(12)と、加熱庫(12)内を撮影するカメラ(15)と、カメラ(15)で撮影された画像を記憶する記憶部(103)と、加熱庫(12)内に被加熱対象物を載置する際に、開閉されるドアと、ドアの開閉を検知する検知部(104)とを備えている。そして、記憶部(103)に記憶された画像から、被加熱対象物に関する加熱制御情報を取得する認識部(102)、を備えている。検知部(104)は、ドアが閉められる以前の所定のタイミング幅を検知するように構成され、認識部(102)は、記憶部(103)に記憶された画像の中から、所定のタイミング幅において撮影された画像を選択して加熱制御情報を取得するように構成されている。A heating cooker, a heating chamber (12), a camera (15) that captures an image of the inside of the heating chamber (12), a storage unit (103) that stores an image captured by the camera (15), and a heating chamber (12) When the object to be heated is placed in, a door that is opened and closed and a detection unit (104) that detects opening and closing of the door are provided. And the recognition part (102) which acquires the heating control information regarding a to-be-heated object from the image memorize | stored in the memory | storage part (103) is provided. The detection unit (104) is configured to detect a predetermined timing width before the door is closed, and the recognition unit (102) is configured to detect a predetermined timing width from the images stored in the storage unit (103). The heating control information is acquired by selecting an image taken in step S2.

Description

本開示は、食品を加熱する加熱調理器および加熱調理器の制御方法に関する。   The present disclosure relates to a heating cooker that heats food and a control method of the heating cooker.

加熱調理器の一例である電子レンジは、鍋およびフライパンを使うことなく、食品を容器に入れたままで加熱することができる。このため、コンビニエンスストア等の販売店では、電子レンジを用いて、弁当および惣菜といった食品を加熱して提供する場合もある。   A microwave oven, which is an example of a heating cooker, can heat a food item in a container without using a pan and a frying pan. For this reason, a store such as a convenience store sometimes uses a microwave oven to heat and provide food such as lunch boxes and side dishes.

通常、弁当および総菜には、電子レンジで加熱するのに最適な加熱時間が表示されている。販売店の店員は、その表示を見て、電子レンジで加熱時間を設定するのが一般的である。   Usually, a lunch box and a side dish display the optimum heating time for heating in a microwave oven. It is common for a salesclerk at a sales store to set the heating time with a microwave oven by looking at the display.

具体的には、店員は、電子レンジの操作部に配置された数字キーを操作することにより、加熱時間の設定を行うことができる。また、加熱時間およびワット数に対応する調理ボタンを複数備えた電子レンジを使用する場合、店員は、加熱する食品に対応するボタンを操作することで、その食品に適した加熱を行うことができる。   Specifically, the store clerk can set the heating time by operating the numeric keys arranged on the operation unit of the microwave oven. Moreover, when using the microwave oven provided with two or more cooking buttons corresponding to heating time and wattage, the salesclerk can perform the heating suitable for the foodstuff by operating the button corresponding to the foodstuff to heat. .

しかしながら、加熱時間を数字キーで設定するのは操作が煩わしいという問題がある。また、複数の操作ボタンそれぞれに異なる食品の加熱時間が割り当てられた電子レンジでは、店員が、複数のボタンそれぞれと食品との対応関係を憶える必要がある。よって、商品の種類が増えれば増えるだけ、店員がこの対応関係を憶える負担が増えるという問題がある。   However, there is a problem that the operation is troublesome to set the heating time with the numeric keys. Further, in a microwave oven in which different food heating times are assigned to a plurality of operation buttons, a store clerk needs to remember the correspondence between each of the plurality of buttons and the food. Therefore, there is a problem that as the number of products increases, the burden on the store clerk to remember this correspondence increases.

このような問題を解決するために、店員が、商品に添付されているバーコードの情報を読み取ると、バーコードに対応する加熱制御内容で商品を加熱する電子レンジを提供することが考えられる。   In order to solve such a problem, it is conceivable to provide a microwave oven that heats the product with the heating control content corresponding to the barcode when the store clerk reads the information on the barcode attached to the product.

または、電子レンジの加熱庫内を撮影するカメラを庫内天井面に備え、庫内に投入された商品の画像からバーコード部分を抽出し、そのバーコードを読み取ることで、コード情報から商品に対応した加熱制御内容を呼び出して、適切な加熱を行う技術も開示されている(例えば特許文献1)。   Alternatively, a camera that shoots the inside of the heating chamber of the microwave oven is provided on the ceiling of the chamber, and the barcode part is extracted from the image of the product placed in the chamber, and the barcode is read to convert the code information into the product. A technique for performing appropriate heating by calling the corresponding heating control content is also disclosed (for example, Patent Document 1).

このような電子レンジにおいて、認識を実施した対象の食品と、実際に調理を行う対象の食品とが同一のものであることを保証するためには、電子レンジのドアを閉めた後に、撮影と認識とを行う必要がある。また、ぶれのない安定した撮影画像を得るためにも、認識対象の食品の静止状態が保証される、ドアを閉めた後に、撮影と認識処理とを行うことが好ましい。   In such a microwave oven, in order to ensure that the food subject to recognition and the food subject to actual cooking are the same, it is necessary to shoot after closing the microwave door. It is necessary to perform recognition. Further, in order to obtain a stable photographed image without blurring, it is preferable to perform photographing and recognition processing after the door is closed, which guarantees the stationary state of the food to be recognized.

しかしながら、電子レンジのドアを閉める際に、ドア部と加熱庫筐体部との接触時の衝撃により、レンジ全体が振動する場合がある。この場合、振動が収まる前に撮影を開始すると、撮影画像にぶれが生じてしまう。認識に適した、ぶれのない撮影画像を得るためには、振動が収まるまで待った後に、撮影と認識処理とを開始すればよいが、時間的なロスを生じてしまう。   However, when the door of the microwave oven is closed, the entire range may vibrate due to an impact at the time of contact between the door portion and the heating cabinet case. In this case, if the photographing is started before the vibration is settled, the photographed image is blurred. To obtain a shake-free photographed image suitable for recognition, it is only necessary to start photographing and recognition processing after waiting for the vibration to stop, but this causes a time loss.

特開2001−349546号公報JP 2001-349546 A

本開示は、加熱庫内に弁当または総菜等の加熱対象となる被加熱対象物を入れ、ドアを閉めた際に、ドアと加熱庫の筐体との接触時の衝撃により振動が発生した場合にも、認識精度を高めることができ、また、振動が収まるまで、撮影および認識を開始できないといった時間的なロスを防ぐことができる、加熱調理器およびその制御方法を提供するものである。   In the present disclosure, when an object to be heated such as a lunch box or a prepared dish is placed in a heating chamber and the door is closed, vibration occurs due to an impact when the door contacts the casing of the heating chamber. In addition, the present invention provides a heating cooker and a control method thereof that can improve recognition accuracy and prevent time loss such that photographing and recognition cannot be started until vibration is reduced.

本開示の加熱調理器は、加熱庫と、加熱庫内を撮影する撮影部と、撮影部で撮影された画像を記憶する記憶部と、加熱庫内に被加熱対象物を載置する際に、開閉されるドアと、ドアの開閉を検知する検知部と、記憶部に記憶された画像から、被加熱対象物に関する加熱制御情報を取得する認識部と、を備えている。そして、検知部は、ドアが閉められる以前の所定のタイミング幅を検知するように構成され、認識部は、記憶部に記憶された画像の中から、所定のタイミング幅において撮影された画像を選択して加熱制御情報を取得するように構成されている。   The heating cooker of the present disclosure includes a heating chamber, an imaging unit that captures an image of the inside of the heating chamber, a storage unit that stores an image captured by the imaging unit, and an object to be heated placed in the heating chamber. A door that is opened and closed, a detection unit that detects opening and closing of the door, and a recognition unit that acquires heating control information related to the object to be heated from an image stored in the storage unit. The detection unit is configured to detect a predetermined timing width before the door is closed, and the recognition unit selects an image captured within the predetermined timing width from the images stored in the storage unit. And heating control information is obtained.

また、本開示の加熱調理器の制御方法は、加熱庫と、加熱庫内を撮影する撮影部と、加熱庫内に被加熱対象物を載置する際に、開閉されるドアと、ドアの開閉を検知する検知部と、を備える加熱調理器の制御方法である。そして、ドアが閉められる以前の所定のタイミング幅を検知し、撮影部で撮影された、加熱庫内の画像の中から、所定のタイミング幅において撮影された画像を選択して被加熱対象物に関する加熱制御情報を取得する加熱調理器の制御方法である。   Further, the control method of the heating cooker of the present disclosure includes a heating chamber, a photographing unit that images the inside of the heating chamber, a door that is opened and closed when placing an object to be heated in the heating chamber, It is a control method of a heating cooker provided with the detection part which detects opening and closing. Then, a predetermined timing width before the door is closed is detected, and an image photographed in the predetermined timing width is selected from images in the heating chamber photographed by the photographing unit, and the object to be heated is selected. It is a control method of the heating cooker which acquires heating control information.

本開示によれば、加熱庫内に弁当および総菜等の加熱対象となる被加熱対象物を入れ、ドアを閉めた際に、ドアと加熱庫の筐体との接触時の衝撃等により振動が発生した場合にも、振動が発生する以前に撮影した加熱庫内の撮影画像を用いて認識処理を行う。これにより、認識精度を高めることができ、また、振動が収まるまで撮影および認識を開始できないといった、時間的なロスを防ぐことができる。   According to the present disclosure, when an object to be heated such as a lunch box and a prepared dish is placed in a heating chamber and the door is closed, vibration is caused by an impact at the time of contact between the door and the casing of the heating chamber. Even if it occurs, recognition processing is performed using a captured image in the heating chamber that was captured before the vibration occurred. As a result, the recognition accuracy can be increased, and a time loss such that the photographing and recognition cannot be started until the vibration is stopped can be prevented.

図1は、本実施の形態に係る代表的な加熱調理器である電子レンジの外観を示す斜視図である。FIG. 1 is a perspective view showing the appearance of a microwave oven that is a typical cooking device according to the present embodiment. 図2は、本開示の第1の実施の形態に係る電子レンジの概略構成を示す図である。FIG. 2 is a diagram illustrating a schematic configuration of the microwave oven according to the first embodiment of the present disclosure. 図3は、本開示の第1の実施の形態における、食品に貼られるシールの一例を示す図である。FIG. 3 is a diagram illustrating an example of a sticker attached to food in the first embodiment of the present disclosure. 図4は、本開示の第1の実施の形態における、電子レンジの動作を示すフローチャートである。FIG. 4 is a flowchart illustrating the operation of the microwave oven according to the first embodiment of the present disclosure. 図5は、本開示の第2の実施の形態における、電子レンジ1の動作を示すフローチャートである。FIG. 5 is a flowchart illustrating an operation of the microwave oven 1 according to the second embodiment of the present disclosure. 図6は、本開示の他の実施の形態における、加熱調理システムの構成を示す図である。FIG. 6 is a diagram illustrating a configuration of a heat cooking system according to another embodiment of the present disclosure. 図7は、本開示の他の実施の形態における、加熱調理システムの他の構成を示す図である。FIG. 7 is a diagram illustrating another configuration of the cooking system according to another embodiment of the present disclosure. 図8は、本開示の他の実施の形態における、加熱調理システムのさらに他の構成を示す図である。FIG. 8 is a diagram illustrating still another configuration of the cooking system according to another embodiment of the present disclosure.

(本開示が取り得る態様の一例)
本開示の第1の態様の加熱調理器は、加熱庫と、加熱庫内を撮影する撮影部と、撮影部で撮影された画像を記憶する記憶部と、加熱庫内に被加熱対象物を載置する際に、開閉されるドアと、ドアの開閉を検知する検知部と、記憶部に記憶された画像から、被加熱対象物に関する加熱制御情報を取得する認識部と、を備えている。そして、検知部は、ドアが閉められる以前の所定のタイミング幅を検知するように構成され、認識部は、記憶部に記憶された画像の中から、所定のタイミング幅において撮影された画像を選択して加熱制御情報を取得するように構成されている。
(Example of aspects that the present disclosure can take)
The heating cooker according to the first aspect of the present disclosure includes a heating chamber, an imaging unit that images the inside of the heating chamber, a storage unit that stores an image captured by the imaging unit, and an object to be heated in the heating chamber. When placing, a door that is opened and closed, a detection unit that detects opening and closing of the door, and a recognition unit that acquires heating control information related to the object to be heated from an image stored in the storage unit. . The detection unit is configured to detect a predetermined timing width before the door is closed, and the recognition unit selects an image captured within the predetermined timing width from the images stored in the storage unit. And heating control information is obtained.

この構成により、ドアを閉めた際の衝撃による振動の影響を受ける以前の、ぶれのない画像を取得でき、その画像を用いて認識処理を行うので、認識精度を高めることができ、また振動が収まるまで、撮影および認識を開始できないといった、時間的なロスを防ぐことができる。   With this configuration, it is possible to acquire a blur-free image before being affected by the vibration caused by the impact when the door is closed, and to perform recognition processing using that image, so that the recognition accuracy can be improved and vibration is not generated. It is possible to prevent time loss such that shooting and recognition cannot be started until they are settled.

本開示の第2の態様は、第1の態様において、ドアが閉められたことを検知するスイッチと、ドアと加熱庫の筐体との距離が、所定の距離以下になったことを検知する近接センサと、をさらに備えている。そして、検知部は、近接センサによる検知のタイミング以降、かつ、スイッチによる検知のタイミング以前を、所定のタイミング幅とするように構成されている。   According to a second aspect of the present disclosure, in the first aspect, the switch that detects that the door is closed and the distance between the door and the casing of the heating chamber are detected to be equal to or less than a predetermined distance. And a proximity sensor. The detection unit is configured to have a predetermined timing width after the detection timing by the proximity sensor and before the detection timing by the switch.

この構成によれば、さらに、利用者がドアを閉める速度等の、操作上のばらつきに関わらず、ドアを閉める以前に撮影された画像の中から、ドアが加熱庫の筐体に対して所定の距離以下まで近づき、閉じかけた状態となったタイミング幅で撮影された画像を特定することができる。   In addition, according to this configuration, the door is predetermined with respect to the casing of the heating chamber from the images taken before the door is closed, regardless of operational variations such as the speed at which the user closes the door. It is possible to specify an image that has been photographed with a timing width that is close to a distance less than or equal to a distance close to the distance of.

本開示の第3の態様は、第1の態様において、検知部は、記憶部に記憶された、加熱庫内の時間的に連続した複数の画像に対して、複数の画像間の差分を計算することにより、加熱庫内の照度環境の変化が安定したタイミング幅を検知して、検知されたタイミング幅を、所定のタイミング幅とするように構成されている。   According to a third aspect of the present disclosure, in the first aspect, the detection unit calculates a difference between the plurality of images with respect to the plurality of temporally continuous images stored in the storage unit. By doing so, it is configured to detect a timing width in which a change in the illuminance environment in the heating chamber is stable, and to set the detected timing width as a predetermined timing width.

この構成によれば、さらに、加熱庫内の撮影画像の中から、外光の影響の少ない安定した画像を候補画像として選出することができる。   According to this configuration, a stable image with little influence of external light can be selected as a candidate image from among the captured images in the heating chamber.

本開示の第4の態様は、第1の態様から第3の態様までのいずれかの態様において、認識部は、記憶部に記憶された、異なるタイミングで撮影された複数の画像を用いて加熱制御情報を取得するように構成されている。   According to a fourth aspect of the present disclosure, in any aspect from the first aspect to the third aspect, the recognition unit is heated using a plurality of images that are stored in the storage unit and photographed at different timings. It is configured to obtain control information.

この構成によれば、さらに、認識部が複数の候補画像に対してそれぞれ認識処理を行い、認識結果の整合性を取るので、認識精度を高めることができる。また、認識部が、ある画像に対して認識に失敗した場合にも、別の候補画像を用いて認識を行うことでリカバリーを図ることができる。   According to this configuration, the recognition unit further performs recognition processing on each of the plurality of candidate images and takes the consistency of the recognition results, so that the recognition accuracy can be improved. Further, even when the recognition unit fails to recognize an image, recovery can be achieved by performing recognition using another candidate image.

本開示の第5の態様は、加熱庫と、加熱庫内を撮影する撮影部と、加熱庫内に被加熱対象物を載置する際に、開閉されるドアと、ドアの開閉を検知する検知部と、を備える加熱調理器の制御方法である。そして、ドアが閉められる以前の所定のタイミング幅を検知し、撮影部で撮影された、加熱庫内の画像の中から、所定のタイミング幅において撮影された画像を選択して被加熱対象物に関する加熱制御情報を取得する加熱調理器の制御方法である。   According to a fifth aspect of the present disclosure, a heating chamber, a photographing unit that captures an image of the inside of the heating chamber, a door that is opened and closed when an object to be heated is placed in the heating chamber, and the opening and closing of the door are detected. It is a control method of a heating cooker provided with a detection part. Then, a predetermined timing width before the door is closed is detected, and an image photographed in the predetermined timing width is selected from images in the heating chamber photographed by the photographing unit, and the object to be heated is selected. It is a control method of the heating cooker which acquires heating control information.

この方法により、ドアを閉めた際の衝撃による振動の影響を受ける以前の、ぶれのない画像を取得でき、その画像を用いて認識処理を行うので、認識精度を高めることができ、また振動が収まるまで、撮影および認識を開始できないといった、時間的なロスを防ぐことができる。   By this method, it is possible to acquire a blur-free image before it is affected by the vibration caused by the impact when the door is closed, and the recognition process is performed using the image. It is possible to prevent time loss such that shooting and recognition cannot be started until they are settled.

以下、適宜図面を参照しながら、本開示の実施の形態を詳細に説明する。ただし、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明、および、実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。   Hereinafter, embodiments of the present disclosure will be described in detail with reference to the drawings as appropriate. However, more detailed explanation than necessary may be omitted. For example, detailed descriptions of already well-known matters and redundant descriptions of substantially the same configuration may be omitted. This is to avoid the following description from becoming unnecessarily redundant and to facilitate understanding by those skilled in the art.

なお、添付図面および以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより、特許請求の範囲に記載の主題を限定することは意図されていない。   The accompanying drawings and the following description are provided to enable those skilled in the art to fully understand the present disclosure, and are not intended to limit the claimed subject matter.

(第1の実施の形態)
図1は、本実施の形態に係る代表的な加熱調理器である電子レンジ1の外観を示す斜視図である。
(First embodiment)
FIG. 1 is a perspective view showing an appearance of a microwave oven 1 that is a typical cooking device according to the present embodiment.

図1に示される電子レンジ1は、筐体2と、筐体2に開閉可能に軸支されたドア3と、を有している。   A microwave oven 1 shown in FIG. 1 includes a housing 2 and a door 3 that is pivotally supported by the housing 2 so as to be opened and closed.

ドア3は、使用者が筐体2の内部を見ることができるように、透明のガラス窓4を有している。さらに、使用者がドア3を掴みやすいように、ドア3は取っ手5を有している。   The door 3 has a transparent glass window 4 so that the user can see the inside of the housing 2. Furthermore, the door 3 has a handle 5 so that the user can easily grasp the door 3.

ドア3の隣には、操作表示部6が配置されている。操作表示部6は、液晶表示器7、時間設定ボタン群8、加熱開始ボタン9、取消ボタン10および一時停止ボタン11を備えている。   Next to the door 3, an operation display unit 6 is arranged. The operation display unit 6 includes a liquid crystal display 7, a time setting button group 8, a heating start button 9, a cancel button 10, and a pause button 11.

本実施の形態の電子レンジ1は、被加熱対象物である商品を撮影し、商品に表示されている加熱制御方法を認識して、その加熱制御方法で商品を加熱するものである。このため、液晶表示器7には、認識した加熱制御方法(例えば、加熱時間およびワット数等)が表示される。   The microwave oven 1 according to the present embodiment captures a product that is an object to be heated, recognizes a heating control method displayed on the product, and heats the product using the heating control method. For this reason, the recognized heating control method (for example, heating time and wattage) is displayed on the liquid crystal display 7.

しかし、電子レンジ1が、加熱制御方法を正確に認識できない場合、および、加熱時間が表示されていない商品を加熱する場合も有り得る。   However, there may be a case where the microwave oven 1 cannot correctly recognize the heating control method and a product for which the heating time is not displayed.

このため、本実施の形態の電子レンジ1は、時間設定ボタン群8を有している。   For this reason, the microwave oven 1 of the present embodiment has a time setting button group 8.

使用者は、時間設定ボタン群8の、数字ボタン、ならびに、分および秒のボタンを使用することにより、加熱時間を設定することができる。このとき、液晶表示器7は、設定された加熱時間等を表示する。   The user can set the heating time by using the numeric buttons and the minute and second buttons of the time setting button group 8. At this time, the liquid crystal display 7 displays the set heating time and the like.

加熱開始ボタン9は、使用者が、液晶表示器7により、加熱時間およびワット数等を確認した後、加熱を開始するためのボタンである。取消ボタン10は、加熱開始ボタン9を押下して、加熱を開始した後に加熱を停止するため、または、液晶表示器7に表示された加熱時間の設定を取り消すための、ボタンである。   The heating start button 9 is a button for the user to start heating after confirming the heating time, wattage, and the like with the liquid crystal display 7. The cancel button 10 is a button for pressing the heating start button 9 to stop heating after starting heating, or canceling the setting of the heating time displayed on the liquid crystal display 7.

一時停止ボタン11は、加熱途中で、加熱を一時的に停止させるためのボタンである。加熱を一時停止させた後に、使用者が、加熱開始ボタン9を再度押下することで、途中から残りの加熱を行うことが可能である。   The pause button 11 is a button for temporarily stopping heating during heating. After the heating is temporarily stopped, the user can press the heating start button 9 again to perform the remaining heating from the middle.

図2は、本開示の第1の実施の形態に係る電子レンジ1の概略構成を示す図である。   FIG. 2 is a diagram illustrating a schematic configuration of the microwave oven 1 according to the first embodiment of the present disclosure.

電子レンジ1は、食品14等を収納する加熱庫12内に、マイクロ波を出力する二つのマグネトロン13a,13bを備えている。加熱庫12は、筐体2の内部に設けられている。   The microwave oven 1 includes two magnetrons 13a and 13b that output microwaves in a heating chamber 12 that stores food 14 and the like. The heating cabinet 12 is provided inside the housing 2.

マグネトロン13aは、加熱庫12の天井側に配置されており、上部から、加熱庫12内にマイクロ波を出力する。一方、マグネトロン13bは、加熱庫12の底面側に配置されており、下部から、加熱庫12内にマイクロ波を出力する。   The magnetron 13a is disposed on the ceiling side of the heating chamber 12 and outputs a microwave into the heating chamber 12 from above. On the other hand, the magnetron 13 b is disposed on the bottom side of the heating chamber 12, and outputs a microwave into the heating chamber 12 from below.

加熱庫12の天井側には、カメラ15(撮影部の一例)が配置されている。カメラ15は、例えばCCD(Charge Coupled Device)のような撮像素子と、レンズ等の光学素子とからなり、加熱庫12内部の撮影を行う。   A camera 15 (an example of a photographing unit) is disposed on the ceiling side of the heating chamber 12. The camera 15 includes, for example, an image sensor such as a CCD (Charge Coupled Device) and an optical element such as a lens, and photographs the inside of the heating chamber 12.

カメラ15が加熱庫12内の食品を撮影する際には、食品を斜めから撮影するよりも、真上から撮影した方が、食品表面に記載されているバーコードおよび文字等を、正確に撮影することが可能である。   When the camera 15 captures food in the heating chamber 12, it is more accurate to capture the barcodes and characters on the food surface when the food is photographed from directly above than when the food is photographed obliquely. Is possible.

また、カメラ15にマイクロ波が当たると、カメラ15を破損させるため、食品を加熱する際には、カメラ15が加熱庫12内に露出しないように、カメラ15の前方に、開閉可能なシャッターを配置してもよい。また、食品を加熱する際には、カメラ15が加熱庫12内に露出しないように、カメラ15を移動(例えば、回転等)させる構成としてもよい。   In addition, when the microwave is applied to the camera 15, the camera 15 is damaged. When the food is heated, a shutter that can be opened and closed is provided in front of the camera 15 so that the camera 15 is not exposed in the heating chamber 12. You may arrange. Moreover, when heating food, it is good also as a structure which moves the camera 15 (for example, rotation etc.) so that the camera 15 may not be exposed in the heating chamber 12. FIG.

スイッチ16aは、ドア3の開閉を検出するためのスイッチである。スイッチ16aは、筐体2に設けられる。ドア3の取っ手5の裏面には突起部が設けられており、スイッチ16aは、この突起部が、筐体2の凹部に接触したことを検出する。なお、スイッチ16aは、上述した形態に限定されず、ドア3の開閉を検知できれば、どのような形態であってもよい。   The switch 16a is a switch for detecting opening and closing of the door 3. The switch 16 a is provided in the housing 2. A protrusion is provided on the back surface of the handle 5 of the door 3, and the switch 16 a detects that the protrusion has contacted the recess of the housing 2. The switch 16a is not limited to the above-described form, and any form may be used as long as the opening / closing of the door 3 can be detected.

近接センサ16bは、ドア3が加熱庫12の筐体2に対して所定の距離以内に近づいたこと、すなわち、ドア3が閉じかけた状態になっていることを検出するためのセンサである。   The proximity sensor 16b is a sensor for detecting that the door 3 has approached the housing 2 of the heating chamber 12 within a predetermined distance, that is, the door 3 is in a closed state.

制御部100は、電子レンジ1の各回路の制御を司り、例えばCPU(Central Processing Unit)のようなマイクロコンピュータからなる。   The control unit 100 controls each circuit of the microwave oven 1 and includes a microcomputer such as a CPU (Central Processing Unit), for example.

制御部100は、加熱制御部101、認識部102、記憶部103および検知部104を有している。   The control unit 100 includes a heating control unit 101, a recognition unit 102, a storage unit 103, and a detection unit 104.

換言すれば、制御部100は、加熱制御部101、認識部102、記憶部103および検知部104の機能を実行するということもできる。   In other words, the control unit 100 can also execute the functions of the heating control unit 101, the recognition unit 102, the storage unit 103, and the detection unit 104.

なお、本実施の形態では、加熱制御部101、認識部102、記憶部103および検知部104が、制御部100内に配置された構成としたが、これらの構成が別々の半導体素子で実現されてもよい。または、加熱制御部101、認識部102、記憶部103および検知部104の内、一部の構成が制御部100内に配置され、その他の構成が制御部100外部に配置される構成としてもよい。   In this embodiment, the heating control unit 101, the recognition unit 102, the storage unit 103, and the detection unit 104 are arranged in the control unit 100. However, these configurations are realized by separate semiconductor elements. May be. Alternatively, a part of the configuration of the heating control unit 101, the recognition unit 102, the storage unit 103, and the detection unit 104 may be arranged in the control unit 100, and the other configuration may be arranged outside the control unit 100. .

なお、この制御部100は、後述する制御を行うものであれば、どのような形態であってもよい。制御部100は、演算処理部と、制御プログラムを記憶する記憶部とで構成されていてもよい。演算処理部としては、MPU(Micro Processing Unit)、およびCPU(Central Processing Unit)が例示される。記憶部としては、メモリが例示される。記憶部に記録されている制御プログラムが、演算処理部によって実行される。この場合の記憶部は前述の記憶部103と共用でも別に設けられてもよい。   The control unit 100 may be in any form as long as it performs control to be described later. The control unit 100 may include an arithmetic processing unit and a storage unit that stores a control program. Examples of the arithmetic processing unit include an MPU (Micro Processing Unit) and a CPU (Central Processing Unit). A memory is exemplified as the storage unit. The control program recorded in the storage unit is executed by the arithmetic processing unit. In this case, the storage unit may be shared with or provided separately from the storage unit 103 described above.

また、制御部100は、ハードロジックで構成されてもよい。制御部100をハードロジックで構成すれば、処理速度の向上に有効である。制御部100は、一つの半導体チップで構成されてもよいし、物理的に複数の半導体チップで構成されてもよい。複数の半導体チップで構成した場合には、後述する各制御を、それぞれ別の半導体チップで実現することもできる。   Further, the control unit 100 may be configured with hard logic. If the control unit 100 is configured by hard logic, it is effective in improving the processing speed. The control unit 100 may be composed of one semiconductor chip or physically composed of a plurality of semiconductor chips. When configured by a plurality of semiconductor chips, each control described later can be realized by a separate semiconductor chip.

加熱制御部101は、マグネトロン13aおよびマグネトロン13bの制御を行う。これにより、被加熱対象物が加熱される。   The heating control unit 101 controls the magnetron 13a and the magnetron 13b. Thereby, a to-be-heated target object is heated.

認識部102は、カメラ15が撮影した画像から、食品等の物体の認識、ならびに、食品等に付されたバーコードおよび文字等の認識を行う。   The recognition unit 102 recognizes an object such as food and also recognizes a barcode and characters attached to the food from the image captured by the camera 15.

記憶部103は、カメラ15により撮影された画像を継続的に保存する。   The storage unit 103 continuously stores images taken by the camera 15.

検知部104は、スイッチ16aおよび近接センサ16bによりドア開閉の状態を検知する。また、検知部104は、カメラ15が撮影した加熱庫12内の撮影画像により、加熱庫12内の照度環境の状態を検知する場合もある。   The detection unit 104 detects the door open / close state by the switch 16a and the proximity sensor 16b. Moreover, the detection part 104 may detect the state of the illuminance environment in the heating chamber 12 from the captured image in the heating chamber 12 captured by the camera 15.

図3は、本開示の第1の実施の形態における、食品に貼られるシール17の一例を示す図である。   FIG. 3 is a diagram illustrating an example of the seal 17 attached to the food according to the first embodiment of the present disclosure.

加熱庫12に、弁当、おにぎり、および惣菜等の被加熱対象物である商品が入れられて、加熱される。それらの商品には、先ほど説明した、商品を調理するために必要な、加熱パワーと加熱時間等が表示されたシール17が貼付されている。   In the heating chamber 12, merchandise that is an object to be heated, such as a lunch box, a rice ball, and a side dish, is placed and heated. A sticker 17 displaying heating power, heating time, and the like necessary for cooking the product described above is affixed to those products.

なお、これらの、加熱パワーおよび加熱時間を含む、調理を行うための情報を、本実施の形態では加熱制御情報と称する。   In addition, the information for performing cooking including the heating power and the heating time is referred to as heating control information in the present embodiment.

シール17には、商品名18、加熱制御情報19、金額情報20、消費期限情報21、商品を特定するバーコード22、栄養情報23、および、お知らせ情報24、の各種情報が表示されている。本実施の形態では、これらの情報から加熱制御情報を抽出しやすいように、加熱制御情報19が、四角枠25で囲まれている。   On the seal 17, various information including a product name 18, heating control information 19, money amount information 20, expiry date information 21, a barcode 22 specifying the product, nutrition information 23, and notification information 24 is displayed. In the present embodiment, the heating control information 19 is surrounded by a square frame 25 so that the heating control information can be easily extracted from these pieces of information.

また、このシール17には、一般的な家庭用の電子レンジで加熱する時の目安の加熱時間として、例えば500Wで加熱する場合の加熱時間と、業務用として大パワーで短時間加熱する時の目安の加熱時間として、例えば1500Wで加熱する場合の加熱時間とが併記されている。   In addition, the seal 17 has a heating time when heating at 500 W, for example, as a standard heating time when heating in a general microwave oven for home use, and when heating at high power for a short time for business use. As a reference heating time, for example, the heating time when heating at 1500 W is also shown.

図3の例では、加熱制御情報19が、例えば「500W 2分00秒 1500W 0分40秒」と表示されている。   In the example of FIG. 3, the heating control information 19 is displayed as, for example, “500 W 2 minutes 00 seconds 1500 W 0 minutes 40 seconds”.

使用者が、ドア3を開けて食品を入れるとき、カメラ15が加熱庫12内の撮影を行っている。そして、認識部102が、カメラ15が撮影した画像から、この加熱制御情報19が表示されている個所を認識し、この加熱制御情報19の文字および数字を認識する。   When the user opens the door 3 and puts food, the camera 15 takes a picture inside the heating chamber 12. And the recognition part 102 recognizes the location where this heating control information 19 is displayed from the image image | photographed with the camera 15, and recognizes the character and number of this heating control information 19. FIG.

具体的には、認識部102は、まず、カメラ15が撮影した画像から、四角枠25を認識する。   Specifically, the recognition unit 102 first recognizes the square frame 25 from an image captured by the camera 15.

次に、認識部102は、この四角枠25で囲まれた中の英数字、具体的には、「500W200 1500W040」という文字列を認識する。   Next, the recognizing unit 102 recognizes an alphanumeric character enclosed by the square frame 25, specifically, a character string “500W200 1500W040”.

そして、予め定められた解析ルールに従い、認識部102は、「W」までの数字列、「W」の後の3桁の数字列、それに続く「W」までの数字列、および、「W」の後の3桁の数字列に分解して、「500」、「200」、「1500」、「040」とする。   Then, according to a predetermined analysis rule, the recognition unit 102 recognizes the numeric string up to “W”, the 3-digit numeric string after “W”, the subsequent numeric string up to “W”, and “W”. Are broken down into three digit numbers, resulting in “500”, “200”, “1500”, and “040”.

さらに、認識部102は、2番目の数字列と4番目の数字列について、最初の1桁の数字を「分」、後の2桁の数字を「秒」として認識する。また認識部102は、1番目の数字列の加熱パワーと、2番目の数字列の時間とが対応し、かつ、3番目の数字列の加熱パワーと、4番目の数字列の時間とが対応していると認識し、「500Wで2分」、「1500Wで40秒」という二通りの加熱制御情報を認識する。   Further, the recognition unit 102 recognizes the first one-digit number as “minute” and the subsequent two-digit number as “second” for the second number string and the fourth number string. The recognition unit 102 corresponds to the heating power of the first number string and the time of the second number string, and corresponds to the heating power of the third number string and the time of the fourth number string. And two kinds of heating control information “500W for 2 minutes” and “1500W for 40 seconds” are recognized.

図4は、本開示の第1の実施の形態における、電子レンジ1の動作を示すフローチャートである。   FIG. 4 is a flowchart illustrating the operation of the microwave oven 1 according to the first embodiment of the present disclosure.

図4において、まず、ステップS1において、検知部104は、スイッチ16aのオン(またはオフ)により、ドア3が開いたか否かを判定する。検知部104は、ドア3が開いたと判定すると(S1,Yes)、ステップS2へ処理を進める。検知部104は、ドア3が開くまでは、ステップS1を繰り返す(S1,NO)。   In FIG. 4, first, in step S <b> 1, the detection unit 104 determines whether the door 3 is opened by turning on (or turning off) the switch 16 a. When the detection unit 104 determines that the door 3 is opened (S1, Yes), the process proceeds to step S2. The detection unit 104 repeats step S1 until the door 3 is opened (S1, NO).

ステップS2において、制御部100は、カメラ15を制御することにより、加熱庫12内部の撮影を行い、撮影された画像を、継続的に記憶部103に記憶する。   In step S <b> 2, the control unit 100 controls the camera 15 to shoot the inside of the heating chamber 12 and continuously stores the captured images in the storage unit 103.

ステップS3において、検知部104は、スイッチ16aのオフ(またはオン)により、ドア3が閉まったか否かを判定する。検知部104は、ドア3が閉まったと判定すると(S3,Yes)、撮影を中断して、ステップS4へ処理を進める。検知部104は、ドア3が閉まるまでは、ステップS3を繰り返す(S3,NO)。ドア3が閉まるまで、カメラ15による加熱庫12内部の撮影は、継続的に行われている。   In step S3, the detection unit 104 determines whether the door 3 is closed by turning off (or turning on) the switch 16a. If the detection unit 104 determines that the door 3 is closed (S3, Yes), it interrupts shooting and proceeds to step S4. The detection unit 104 repeats step S3 until the door 3 is closed (S3, NO). Until the door 3 is closed, photographing inside the heating chamber 12 by the camera 15 is continuously performed.

ステップS4では、制御部100は、記憶部103に記憶された画像の中から、認識処理に適した候補画像を選出する。ここで、制御部100は、検知部104が検知した、ドア3が閉まるタイミング以前の200ミリ秒の時間内(所定のタイミング幅内)に撮影された加熱庫12内の撮影画像を、認識処理に適した候補画像として選出する。制御部100は、例えば、30フレーム/秒で撮影可能なカメラ15で撮影した場合には6フレーム分を、10フレーム/秒で撮影可能なカメラ15で撮影した場合には2フレーム分を、それぞれ候補画像として選出する。   In step S <b> 4, the control unit 100 selects a candidate image suitable for recognition processing from the images stored in the storage unit 103. Here, the control unit 100 recognizes a captured image in the heating chamber 12 that is captured within a time of 200 milliseconds (within a predetermined timing width) before the door 3 is closed, which is detected by the detection unit 104. Is selected as a suitable candidate image. For example, the control unit 100 captures 6 frames when captured by the camera 15 capable of capturing at 30 frames / second, and 2 frames when captured by the camera 15 capable of capturing at 10 frames / second, respectively. Select as a candidate image.

なお、候補画像の選出タイミング幅の時間は、上述した、ドア3が閉まる直前、例えばタイミング以前の200ミリ秒に限定されず、100〜300ミリ秒程度の値であってもよい。また、使用者によりドア3を閉める速度が変わってくるために、使用者に応じて、異なる時間を設定してもよい。   The time of the candidate image selection timing width is not limited to 200 milliseconds before the door 3 is closed, for example, before the timing, but may be a value of about 100 to 300 milliseconds. Moreover, since the speed at which the door 3 is closed varies depending on the user, a different time may be set according to the user.

この所定のタイミング幅は、ドア3が閉まる際の衝撃が発生する前で、かつ、外光の影響を受けにくいタイミング幅に設定することが望ましい。   This predetermined timing width is desirably set to a timing width that is less susceptible to the influence of external light before an impact occurs when the door 3 is closed.

本実施の形態の方法は、電子レンジ1の前面(透明ガラス窓4)が電磁波防止用のパンチングメタルで覆われているため、これが遮光部として機能し、ドア3を閉じた状態で加熱庫12内の照度が安定するので、有効である。   In the method of the present embodiment, since the front surface (transparent glass window 4) of the microwave oven 1 is covered with a punching metal for preventing electromagnetic waves, this functions as a light shielding portion, and the heating chamber 12 is closed with the door 3 closed. It is effective because the illuminance inside is stable.

ここで、ドア3が閉まる直前のタイミング幅を規定する別の手段として、検知部104が、近接センサ16b(例えば磁気センサ)を用いて、ドア3が加熱庫12の筐体に対して5cmの距離内に近づいたことを検知したタイミングから、検知部104がスイッチ16aによりドア3が閉まったと判定したタイミングまでに撮影された画像を、候補画像として選出してもよい。   Here, as another means for defining the timing width immediately before the door 3 is closed, the detection unit 104 uses a proximity sensor 16b (for example, a magnetic sensor), and the door 3 is 5 cm from the housing of the heating chamber 12. Images taken between the timing when the proximity of the distance is detected and the timing when the detection unit 104 determines that the door 3 is closed by the switch 16a may be selected as a candidate image.

このように、近接センサ16bおよびスイッチ16aを併用することで、より高い精度で、外光の影響が安定する所定のタイミング幅を決定することができるが、いずれかを有しない構成であっても、実用性に問題のない精度でタイミング幅を決定することができる。また、後述のように、近接センサ16bおよびスイッチ16aのいずれも有しない場合であっても、所定のタイミング幅を決定することが可能である。   As described above, by using the proximity sensor 16b and the switch 16a in combination, the predetermined timing width in which the influence of the external light is stabilized can be determined with higher accuracy. In addition, the timing width can be determined with an accuracy that is not problematic for practical use. Further, as described later, even when neither the proximity sensor 16b nor the switch 16a is provided, the predetermined timing width can be determined.

なお、ドア3と筐体との距離は、上述した5cmに限定されず、3〜7cm程度の値であってもよい。また、使用者によりドア3を閉める速度が変わるために、使用者に応じて、異なる距離を設定してもよい。   Note that the distance between the door 3 and the housing is not limited to 5 cm described above, and may be a value of about 3 to 7 cm. Moreover, since the speed which closes the door 3 changes with a user, according to a user, you may set a different distance.

また、検知部104が、カメラ15により連続的に撮影された加熱庫12内の複数の画像に対し、前後の画像の差分を計算し、加熱庫12内部の照度環境の変化が安定したタイミングを検出して、そのタイミングから、検知部104がスイッチ16aによりドア3が閉まったと判定したタイミングまでに撮影された画像を、安定した照度環境で撮影された画像として、候補画像として選出してもよい。この場合には、認識精度向上のための、候補画像の絞り込みを行うことができる。   Moreover, the detection part 104 calculates the difference of the image before and behind with respect to the several image in the heating chamber 12 continuously image | photographed with the camera 15, and the timing when the change of the illumination environment in the heating chamber 12 was stabilized was carried out. An image captured from that timing to a timing when the detection unit 104 determines that the door 3 is closed by the switch 16a may be selected as a candidate image as an image captured in a stable illuminance environment. . In this case, candidate images can be narrowed down to improve recognition accuracy.

ここで、照度環境の安定の判断は、ドア3が開いてからカメラ15が撮影した加熱庫12内の最大撮影輝度を基準として、ドア3を閉めた時点までの輝度変化量のうち、90%を超えた時点で、外光の影響が低下したとして、安定したと判断する。   Here, the stability of the illuminance environment is determined based on 90% of the amount of change in luminance from when the door 3 is opened to when the door 3 is closed with reference to the maximum photographing luminance in the heating chamber 12 taken by the camera 15. When the value exceeds the value, it is determined that the influence of external light has decreased, and thus it has been stabilized.

前述の各種方法により、認識に用いる候補画像を選出した後、ステップS5へと処理を進める。   After selecting candidate images to be used for recognition by the various methods described above, the process proceeds to step S5.

ステップS5では、制御部100は、カメラ15で撮影され、記憶部103に記憶された、一または複数の候補画像を用いて、文字列の認識を行い、加熱制御情報を認識し、ステップS6へ処理を進める。   In step S5, the control unit 100 recognizes a character string using one or a plurality of candidate images photographed by the camera 15 and stored in the storage unit 103, recognizes the heating control information, and proceeds to step S6. Proceed with the process.

ステップS6では、ステップS5で得られた、一枚の候補画像または複数の候補画像それぞれに対する認識結果、つまり加熱制御情報の整合性を確認し、最終的な加熱条件を出力する。   In step S6, the recognition result for one candidate image or a plurality of candidate images obtained in step S5, that is, the consistency of the heating control information is confirmed, and the final heating condition is output.

例えば、候補画像の2枚に対する認識結果が、「500W2分 1500W40秒」と「500W2分 1500W10秒」であった場合、認識結果が一致しないため、どちらかの加熱情報が誤っているものとして、加熱制御は行わずに処理を終了する(S6,NO)。一枚の候補画像で認識を行って認識結果が得られた場合、または、複数の候補画像に対する認識結果が一致した場合には、認識成功(整合性がある)とみなし(S6,YES)、ステップS7に処理を進める。   For example, if the recognition results for two candidate images are “500 W 2 minutes 1500 W 40 seconds” and “500 W 2 minutes 1500 W 10 seconds”, the recognition results do not match, so it is assumed that either heating information is incorrect. The process is terminated without performing the control (S6, NO). When the recognition result is obtained by performing recognition with one candidate image, or when the recognition results for a plurality of candidate images match, it is regarded as a recognition success (consistency) (S6, YES), The process proceeds to step S7.

このように、認識対象の候補画像が複数の場合、制御部100が、複数の候補画像に対する認識結果の整合性を確認することによって、誤った加熱制御情報に基づいた加熱が実施されることを防ぐことができる。なお、整合性を確認する際、複数の候補画像全てに対する認識結果の一致を確認してもよいし、全てではなく、所定数以上の認識結果の一致により、正しい認識結果と判断してもよい。   In this way, when there are a plurality of candidate images to be recognized, the control unit 100 confirms the consistency of the recognition results for the plurality of candidate images, so that heating based on incorrect heating control information is performed. Can be prevented. When checking the consistency, it may be confirmed that the recognition results match all of the plurality of candidate images, or may be determined to be a correct recognition result by matching not less than a predetermined number of recognition results. .

ステップS7において、制御部100は、認識部102が認識した加熱制御情報のうち、電子レンジ1の加熱パワーに適した、調理を行うための加熱時間(例えば、40秒)を液晶表示器7に表示させる。   In step S <b> 7, the control unit 100 sets the heating time for cooking (for example, 40 seconds) suitable for the heating power of the microwave oven 1 to the liquid crystal display 7 among the heating control information recognized by the recognition unit 102. Display.

ステップS8において、制御部100は、加熱開始ボタン9が押下されたか否かを判定する。加熱開始ボタン9が押下されたと判定すると(S8,YES)、ステップS9へ処理を進めて、加熱制御部101がマグネトロン13a,13bを制御して、被加熱対象物の加熱が開始される(S9)。制御部100は、加熱開始ボタン9が押下されるまでは、ステップS8を繰り返す(S8,NO)。   In step S8, the control unit 100 determines whether or not the heating start button 9 has been pressed. If it is determined that the heating start button 9 has been pressed (S8, YES), the process proceeds to step S9, and the heating control unit 101 controls the magnetrons 13a and 13b to start heating the object to be heated (S9). ). The control unit 100 repeats step S8 until the heating start button 9 is pressed (S8, NO).

このようにして、本開示の第1の実施の形態によれば、使用者が、商品の加熱時間を入力したり、商品に対応したボタンを選択したりすることなく、自動的に加熱時間を設定することが可能である。また、操作者がドア3を閉じた際に、ドア3と加熱庫12の筐体部等との衝突により振動が発生した場合にも、ドア3を閉じる以前に、予めカメラ15によって撮影された画像を用いて認識部102が認識を行う。これにより、振動が収まるまで撮影が開始できないといった、操作上の時間的なロスを防ぐことができる。   Thus, according to the first embodiment of the present disclosure, the user automatically sets the heating time without inputting the heating time of the product or selecting a button corresponding to the product. It is possible to set. In addition, when the operator closes the door 3 and vibration occurs due to a collision between the door 3 and the casing of the heating chamber 12 or the like, the image was previously taken by the camera 15 before the door 3 was closed. The recognition unit 102 performs recognition using the image. As a result, it is possible to prevent a time loss in operation such that shooting cannot be started until the vibration is stopped.

(第2の実施の形態)
次に、本開示の第2の実施の形態について、図5のフローチャートを用いて説明する。
(Second Embodiment)
Next, a second embodiment of the present disclosure will be described using the flowchart of FIG.

図5は、本開示の第2の実施の形態における、電子レンジ1の動作を示すフローチャートである。   FIG. 5 is a flowchart illustrating an operation of the microwave oven 1 according to the second embodiment of the present disclosure.

第1の実施の形態と第2の実施の形態とで異なるところは、第2の実施の形態においては、認識用に複数の候補画像が存在する場合に、一部の候補画像に対して認識処理を行い、残りの候補画像が、認識に失敗した場合のリカバリー用の候補画像として使用される点にある。   The difference between the first embodiment and the second embodiment is that, in the second embodiment, when there are a plurality of candidate images for recognition, some of the candidate images are recognized. Processing is performed, and the remaining candidate images are used as candidate images for recovery when recognition fails.

以下では、第1の実施の形態と異なる点のみについて説明を行い、同じ制御を行う点については説明を省略する。   In the following, only points different from the first embodiment will be described, and description of the same control will be omitted.

本実施の形態においては、ステップS5において、制御部100は、カメラ15で撮影され、記憶部103に記憶された複数の候補画像の内、第一候補となる一部の画像に対して、文字認識を行い、加熱制御情報を取得して、ステップS6へ処理を進める。なお、この際、一枚の画像に対して認識を行ってもよいし、第1の実施の形態のように、複数の画像それぞれに対して認識を行い、整合性を確認した結果を、ステップS5における認識結果としてもよい。   In the present embodiment, in step S5, the control unit 100 captures characters for some of the plurality of candidate images taken by the camera 15 and stored in the storage unit 103 as first candidates. Recognition is performed, heating control information is acquired, and the process proceeds to step S6. At this time, a single image may be recognized, or each of a plurality of images may be recognized and the consistency confirmed as in the first embodiment. It is good also as a recognition result in S5.

ステップS6において、制御部100は、ステップS5で実施された認識処理が成功したかどうかを判断する。成功した場合(S6,YES)には、ステップS7へ処理を進める。失敗した場合(S6,NO)には、ステップS10に処理を進める。   In step S6, the control unit 100 determines whether or not the recognition process performed in step S5 is successful. If successful (S6, YES), the process proceeds to step S7. If unsuccessful (S6, NO), the process proceeds to step S10.

ステップS10において、制御部100は、記憶部103に、認識用の別の候補画像が存在するかどうかを調べる。他の候補画像が存在する場合(S10,YES)、制御部100は、ステップS5に処理を戻す。ステップS5においては、別の候補画像を用いて、認識処理が行われる。一方、他の候補画像が存在しない場合(S10,NO)、制御部100は、食品の加熱をせずに処理を終了する。   In step S <b> 10, the control unit 100 checks whether another candidate image for recognition exists in the storage unit 103. When another candidate image exists (S10, YES), the control unit 100 returns the process to step S5. In step S5, recognition processing is performed using another candidate image. On the other hand, when there is no other candidate image (S10, NO), the control unit 100 ends the process without heating the food.

このように、第2の実施の形態では、認識部102が、記憶部103に記憶された複数の候補画像の一部を、認識失敗時のリカバリー用の画像として使用するため、一部の候補画像に対して認識が失敗した場合にも、認識の機会を増やしてリカバリーを図ることができる。このため、操作者の開始ボタンの押し直し等の、操作の手間を減らすことができる。   As described above, in the second embodiment, the recognition unit 102 uses a part of the plurality of candidate images stored in the storage unit 103 as a recovery image at the time of recognition failure. Even when recognition fails for an image, it is possible to increase the recognition opportunities and to perform recovery. For this reason, it is possible to reduce the trouble of operation such as re-pressing the start button of the operator.

(他の実施の形態)
上述した実施の形態においては、加熱調理器である電子レンジ1が、単独で、加熱制御情報の取得、認識処理を行う例を示したが、本開示はこの例に限定されない。
(Other embodiments)
In embodiment mentioned above, although the microwave oven 1 which is a heating cooker showed the example which acquires and recognizes heating control information independently, this indication is not limited to this example.

例えば、加熱調理器をネットワークと接続可能に構成し、ネットワーク上のサーバにより、加熱調理器を制御する加熱調理システムとして実施することも可能である。   For example, the cooking device can be configured to be connectable to a network, and can be implemented as a cooking system that controls the cooking device by a server on the network.

図6〜図8は、それぞれ、本開示の他の実施の形態における、加熱調理システム300〜302の構成を示す図である。   FIGS. 6-8 is a figure which shows the structure of the heating cooking systems 300-302 in other embodiment of this indication, respectively.

加熱調理システム300〜302においては、第1の実施の形態の電子レンジ1における、認識部102および記憶部103が行う処理の両方またはいずれかがサーバ200側で実行される。これにより、加熱調理器における認識処理等による処理負荷を軽減することができる。   In the heating and cooking system 300 to 302, both or either of the processes performed by the recognition unit 102 and the storage unit 103 in the microwave oven 1 according to the first embodiment are executed on the server 200 side. Thereby, the processing load by the recognition process etc. in a heating cooker can be reduced.

例えば、図6の構成においては、加熱調理システム300は、加熱調理器の一例である電子レンジ1と、サーバ200とを備えている。電子レンジ1の制御部100によって、加熱制御部101、検知部104およびカメラ15が制御されている。また、電子レンジ1は、サーバ200と通信可能な通信部109を有している。   For example, in the configuration of FIG. 6, the heating and cooking system 300 includes a microwave oven 1 that is an example of a heating cooker and a server 200. The heating control unit 101, the detection unit 104, and the camera 15 are controlled by the control unit 100 of the microwave oven 1. In addition, the microwave oven 1 includes a communication unit 109 that can communicate with the server 200.

サーバ200は、電子レンジ1と通信可能な通信部202を有しており、制御部201によって、認識部102および記憶部103が制御されている。   The server 200 includes a communication unit 202 that can communicate with the microwave oven 1, and the recognition unit 102 and the storage unit 103 are controlled by the control unit 201.

このような構成においては、カメラ15による商品の撮影が電子レンジ1にて行われ、加熱制御情報を抽出するための候補画像がサーバ200に送られる。サーバ200では、認識処理および整合性の確認等が行われ、その結果が電子レンジ1に返される。候補画像は、サーバ200側の記憶部103に記憶される。電子レンジ1では、整合性があると確認された加熱制御情報を用いて、商品の加熱調理が行われる。   In such a configuration, the product is photographed by the camera 15 in the microwave oven 1, and a candidate image for extracting the heating control information is sent to the server 200. In the server 200, recognition processing, consistency check, and the like are performed, and the result is returned to the microwave oven 1. Candidate images are stored in the storage unit 103 on the server 200 side. In the microwave oven 1, the product is cooked using the heating control information that is confirmed to be consistent.

次に、図7に示された構成の加熱調理システム301は、図6の加熱調理システム300の構成と比較して、記憶部103が電子レンジ側に搭載されている点が異なる。   Next, the cooking system 301 having the configuration shown in FIG. 7 is different from the cooking system 300 in FIG. 6 in that the storage unit 103 is mounted on the microwave oven side.

このような構成によれば、カメラ15による商品の撮影が電子レンジ1にて行われ、画像が電子レンジ1の記憶部103に記憶される。加熱制御情報を抽出するために抽出された候補画像がサーバ200に送られる。サーバ200では、認識処理および整合性の確認等が行われ、その結果が電子レンジ1に返される。電子レンジ1では、整合性があると確認された加熱制御情報を用いて、商品の加熱調理が行われる。   According to such a configuration, the product is photographed by the camera 15 in the microwave oven 1, and the image is stored in the storage unit 103 of the microwave oven 1. The extracted candidate images are sent to the server 200 to extract the heating control information. In the server 200, recognition processing, consistency check, and the like are performed, and the result is returned to the microwave oven 1. In the microwave oven 1, the product is cooked using the heating control information that is confirmed to be consistent.

また、図8の構成の加熱調理システム302は、図6の加熱調理システム300の構成と比較して、認識部102が電子レンジ側に搭載されている点が異なる。   8 is different from the configuration of the cooking system 300 in FIG. 6 in that the recognition unit 102 is mounted on the microwave oven side.

このような構成においては、カメラ15による商品の撮影が電子レンジ1にて行われ、サーバ200に送られる。候補画像は、サーバ200の記憶部103に記憶される。電子レンジ1側では、加熱制御情報を抽出するための候補画像(これは、サーバ200から送られた画像であってもよい)の認識処理および整合性の確認等が行われ、整合性があると確認された加熱制御情報を用いて、商品の加熱調理が行われる。   In such a configuration, the product 15 is photographed by the microwave oven 1 and sent to the server 200. Candidate images are stored in the storage unit 103 of the server 200. On the microwave oven 1 side, recognition processing of a candidate image for extracting heating control information (this may be an image sent from the server 200) and confirmation of consistency are performed, and there is consistency. The cooking of the product is performed using the heating control information confirmed as follows.

図8の構成のように、記憶部103をサーバ200側に有する構成とすれば、電子レンジ1側に大きな容量のメモリを用いる必要がなくなり、簡易な構成を実現することができる。   If the storage unit 103 is provided on the server 200 side as in the configuration of FIG. 8, it is not necessary to use a large capacity memory on the microwave oven 1 side, and a simple configuration can be realized.

なお、上述の実施の形態は、本開示における技術を例示するためのものであるから、特許請求の範囲またはその均等の範囲において、種々の変更、置き換え、付加、および省略等を行うことができる。   Note that the above-described embodiments are for illustrating the technique in the present disclosure, and therefore various modifications, replacements, additions, omissions, and the like can be made within the scope of the claims and the equivalents thereof. .

以上述べたように、本開示によれば、使用者は、商品を加熱庫内に入れるだけで、その商品に印刷されている加熱制御情報を読み取って、その通りに適切に加熱することができる。よって、設定の煩わしさがなく、販売店で使われる電子レンジの他、家庭用の電子レンジ、炊飯器およびIHクッキングヒータ等、調理器全般に適用でき、有用である。業務用の電子レンジは、明るく外光の影響の受けやすいイートインスペースに配置される可能性があり、本開示の内容が特に有効である。   As described above, according to the present disclosure, the user can read the heating control information printed on the product just by placing the product in the heating chamber, and appropriately heat the product accordingly. . Therefore, there is no troublesome setting, and in addition to a microwave oven used in a store, it can be applied to cooking appliances such as a microwave oven for home use, a rice cooker, and an IH cooking heater, and is useful. There is a possibility that the microwave oven for business use is disposed in an eat-in space that is bright and easily affected by outside light, and the content of the present disclosure is particularly effective.

1 電子レンジ
2 筐体
3 ドア
4 ガラス窓
5 取っ手
6 操作表示部
7 液晶表示器
8 時間設定ボタン群
9 加熱開始ボタン
10 取消ボタン
11 一時停止ボタン
12 加熱庫
13a,13b マグネトロン
14 食品
15 カメラ
16a スイッチ
16b 近接センサ
17 シール
18 商品名
19 加熱制御情報
20 金額情報
21 消費期限情報
22 バーコード
23 栄養情報
24 お知らせ情報
25 四角枠
100 制御部
101 加熱制御部
102 認識部
103 記憶部
104 検知部
109 通信部
200 サーバ
201 制御部
202 通信部
300,301,302 加熱調理システム
DESCRIPTION OF SYMBOLS 1 Microwave oven 2 Case 3 Door 4 Glass window 5 Handle 6 Operation display part 7 Liquid crystal display 8 Time setting button group 9 Heating start button 10 Cancel button 11 Pause button 12 Heating chamber 13a, 13b Magnetron 14 Food 15 Camera 16a Switch 16b Proximity sensor 17 Seal 18 Product name 19 Heating control information 20 Amount information 21 Expiration date information 22 Barcode 23 Nutrition information 24 Notification information 25 Square frame 100 Control unit 101 Heating control unit 102 Recognition unit 103 Storage unit 104 Detection unit 109 Communication unit 200 Server 201 Control Unit 202 Communication Unit 300, 301, 302 Cooking System

Claims (5)

加熱庫と、
前記加熱庫内を撮影する撮影部と、
前記撮影部で撮影された画像を記憶する記憶部と、
前記加熱庫内に被加熱対象物を載置する際に、開閉されるドアと、
前記ドアの開閉を検知する検知部と、
前記記憶部に記憶された画像から、前記被加熱対象物に関する加熱制御情報を取得する認識部と、を備え、
前記検知部は、前記ドアが閉められる以前の所定のタイミング幅を検知するように構成され、
前記認識部は、前記記憶部に記憶された前記画像の中から、前記所定のタイミング幅において撮影された画像を選択して前記加熱制御情報を取得するように構成された
加熱調理器。
A heating cabinet;
A photographing unit for photographing the inside of the heating chamber;
A storage unit for storing an image photographed by the photographing unit;
A door that is opened and closed when placing an object to be heated in the heating chamber;
A detector for detecting opening and closing of the door;
A recognition unit that obtains heating control information related to the object to be heated from the image stored in the storage unit,
The detection unit is configured to detect a predetermined timing width before the door is closed,
The cooking unit configured to acquire the heating control information by selecting an image photographed in the predetermined timing width from the images stored in the storage unit.
前記ドアが閉められたことを検知するスイッチと、
前記ドアと前記加熱庫の筐体との距離が、所定の距離以下になったことを検知する近接センサと、をさらに備え、
前記検知部は、前記近接センサによる検知のタイミング以降、かつ、前記スイッチによる検知のタイミング以前を、前記所定のタイミング幅とするように構成された
請求項1に記載の加熱調理器。
A switch for detecting that the door is closed;
A proximity sensor that detects that the distance between the door and the housing of the heating chamber is equal to or less than a predetermined distance;
The cooking device according to claim 1, wherein the detection unit is configured to use the predetermined timing width after the detection timing by the proximity sensor and before the detection timing by the switch.
前記検知部は、前記記憶部に記憶された、前記加熱庫内の時間的に連続した複数の前記画像に対して、前記複数の画像間の差分を計算することにより、前記加熱庫内の照度環境の変化が安定したタイミング幅を検知して、検知された前記タイミング幅を、前記所定のタイミング幅とするように構成された
請求項1に記載の加熱調理器。
The detection unit calculates the difference between the plurality of images with respect to the plurality of temporally continuous images stored in the storage unit, thereby calculating the illuminance in the heating chamber. The cooking device according to claim 1, wherein a timing width in which an environmental change is stable is detected, and the detected timing width is set as the predetermined timing width.
前記認識部は、前記記憶部に記憶された、異なるタイミングで撮影された複数の前記画像を用いて前記加熱制御情報を取得するように構成された
請求項1から請求項3までのいずれか1項に記載の加熱調理器。
The said recognition part is comprised so that the said heating control information may be acquired using the said several image image | photographed at the different timing memorize | stored in the said memory | storage part. The cooking device according to item.
加熱庫と、
前記加熱庫内を撮影する撮影部と、
前記加熱庫内に被加熱対象物を載置する際に、開閉されるドアと、
前記ドアの開閉を検知する検知部と、を備える加熱調理器の制御方法であって、
前記ドアが閉められる以前の所定のタイミング幅を検知し、
前記撮影部で撮影された、前記加熱庫内の画像の中から、前記所定のタイミング幅において撮影された画像を選択して前記被加熱対象物に関する加熱制御情報を取得する
加熱調理器の制御方法。
A heating cabinet;
A photographing unit for photographing the inside of the heating chamber;
A door that is opened and closed when placing an object to be heated in the heating chamber;
A detection unit that detects opening and closing of the door, and a control method of a heating cooker comprising:
Detect a predetermined timing width before the door is closed,
A method for controlling a heating cooker that acquires heating control information related to the object to be heated by selecting an image shot in the predetermined timing width from images taken in the heating chamber and shot by the shooting unit .
JP2018553726A 2016-11-29 2017-11-01 How to control a cooker and a cooker Active JP6906147B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016230889 2016-11-29
JP2016230889 2016-11-29
PCT/JP2017/039497 WO2018100956A1 (en) 2016-11-29 2017-11-01 Heating cooking device and heating cooking device control method

Publications (2)

Publication Number Publication Date
JPWO2018100956A1 true JPWO2018100956A1 (en) 2019-10-17
JP6906147B2 JP6906147B2 (en) 2021-07-21

Family

ID=62242123

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018553726A Active JP6906147B2 (en) 2016-11-29 2017-11-01 How to control a cooker and a cooker

Country Status (3)

Country Link
JP (1) JP6906147B2 (en)
CN (1) CN109964083B (en)
WO (1) WO2018100956A1 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220163213A1 (en) * 2019-04-05 2022-05-26 BSH Hausgeräte GmbH Household cooking appliance having a cooking chamber camera and method for operation
JP7357222B2 (en) * 2020-02-20 2023-10-06 パナソニックIpマネジメント株式会社 heating cooker
JP7345084B2 (en) * 2020-04-03 2023-09-15 パナソニックIpマネジメント株式会社 heating cooker
CN112879963B (en) * 2021-01-25 2022-09-06 青岛海尔空调器有限总公司 Food heating control method and device for microwave oven and microwave oven

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015059931A1 (en) * 2013-10-24 2015-04-30 パナソニックIpマネジメント株式会社 Heating cooking device, cooking system, calculating device, and cooking assistance method
WO2016143267A1 (en) * 2015-03-10 2016-09-15 パナソニックIpマネジメント株式会社 Heating device for cooking

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070005808A (en) * 2005-07-06 2007-01-10 삼성전자주식회사 Cooking apparatus, cooking system, cooking control method utilizing bar code
US9538880B2 (en) * 2012-05-09 2017-01-10 Convotherm Elektrogeraete Gmbh Optical quality control system
JP6439137B2 (en) * 2014-10-17 2018-12-19 パナソニックIpマネジメント株式会社 Heating cooker and control method thereof
US9644847B2 (en) * 2015-05-05 2017-05-09 June Life, Inc. Connected food preparation system and method of use

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015059931A1 (en) * 2013-10-24 2015-04-30 パナソニックIpマネジメント株式会社 Heating cooking device, cooking system, calculating device, and cooking assistance method
WO2016143267A1 (en) * 2015-03-10 2016-09-15 パナソニックIpマネジメント株式会社 Heating device for cooking

Also Published As

Publication number Publication date
WO2018100956A1 (en) 2018-06-07
JP6906147B2 (en) 2021-07-21
CN109964083B (en) 2020-08-04
CN109964083A (en) 2019-07-02

Similar Documents

Publication Publication Date Title
WO2018100956A1 (en) Heating cooking device and heating cooking device control method
CN109539334B (en) Heating cooker
WO2018012245A1 (en) Heating cooker
WO2017179460A1 (en) Heating cooker, method of controlling heating cooker, and heating cooking system
WO2017077695A1 (en) Cooking device
JP2023153397A (en) heating cooker
CN108700303B (en) Heating cooker
WO2018096885A1 (en) Heating cooker, method of controlling heating cooker, and heating cooking system
JP2016166724A (en) Heating cooker
WO2017164050A1 (en) Heat-cooking device, heat-cooking device control method, and heat-cooking system
JP6920591B2 (en) Cooker
WO2019159518A1 (en) Heating cooker and heating cooking system
WO2020054609A1 (en) Heat cooking device
JP7345084B2 (en) heating cooker
US20220418055A1 (en) Heating cooker, control device, and control method
JP7386391B2 (en) heating cooker
JP7213419B2 (en) heating cooker
WO2018079426A1 (en) Heating cooker and method for controlling heating cooker
JPWO2018235703A1 (en) Heating cooker

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210126

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210326

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210511

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210524

R151 Written notification of patent or utility model registration

Ref document number: 6906147

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151