CN108139078B - 加热烹调器、加热烹调器的控制方法以及加热烹调系统 - Google Patents

加热烹调器、加热烹调器的控制方法以及加热烹调系统 Download PDF

Info

Publication number
CN108139078B
CN108139078B CN201680060747.3A CN201680060747A CN108139078B CN 108139078 B CN108139078 B CN 108139078B CN 201680060747 A CN201680060747 A CN 201680060747A CN 108139078 B CN108139078 B CN 108139078B
Authority
CN
China
Prior art keywords
image
recognition
heating
heating chamber
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680060747.3A
Other languages
English (en)
Other versions
CN108139078A (zh
Inventor
松井严徹
今井博久
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of CN108139078A publication Critical patent/CN108139078A/zh
Application granted granted Critical
Publication of CN108139078B publication Critical patent/CN108139078B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B6/00—Heating by electric, magnetic or electromagnetic fields
    • H05B6/64—Heating using microwaves
    • H05B6/66—Circuits
    • H05B6/68—Circuits for monitoring or control
    • H05B6/687—Circuits for monitoring or control for cooking
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C7/00—Stoves or ranges heated by electric energy
    • F24C7/08—Arrangement or mounting of control or safety devices
    • F24C7/082—Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination
    • F24C7/085—Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination on baking ovens
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B6/00—Heating by electric, magnetic or electromagnetic fields
    • H05B6/64—Heating using microwaves
    • H05B6/6435—Aspects relating to the user interface of the microwave heating apparatus
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B6/00—Heating by electric, magnetic or electromagnetic fields
    • H05B6/64—Heating using microwaves
    • H05B6/6435—Aspects relating to the user interface of the microwave heating apparatus
    • H05B6/6441—Aspects relating to the user interface of the microwave heating apparatus allowing the input of coded operation instructions, e.g. bar code reader
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B6/00—Heating by electric, magnetic or electromagnetic fields
    • H05B6/64—Heating using microwaves
    • H05B6/6444—Aspects relating to lighting devices in the microwave cavity
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B6/00—Heating by electric, magnetic or electromagnetic fields
    • H05B6/64—Heating using microwaves
    • H05B6/6447—Method of operation or details of the microwave heating apparatus related to the use of detectors or sensors

Landscapes

  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Electric Ovens (AREA)
  • Electric Stoves And Ranges (AREA)
  • Image Processing (AREA)

Abstract

加热烹调器具有：摄像部(201)，其拍摄收纳被加热物的加热室内的图像；以及控制部(200)，其设定用于拍摄加热室内的图像的拍摄条件，对加热室内的图像进行图像识别。控制部(200)通过对加热室内的图像进行分析来确认加热室内的状态，并根据加热室内的状态来变更用于拍摄图像的拍摄条件。由此，在对加热室内的图像进行图像识别的加热烹调器(100a)中，能够提高图像识别的精度。

Description

加热烹调器、加热烹调器的控制方法以及加热烹调系统
技术领域
本文的公开涉及根据图像识别的结果来进行加热控制的加热烹调器、加热烹调器的控制方法以及加热烹调系统。
背景技术
通常，作为加热烹调器的一例的微波炉为了开始烹调而需要使用者输入加热时间等。
到目前为止，已经开发了用于自动设定加热时间等的多种技术。例如，在专利文献1中公开了通过对在烹调之前拍摄的被加热物的图像进行分析而选择烹调方法的技术。
现有技术文献
专利文献
专利文献1：日本实用新型注册第3036671号公报
发明内容
在以往的技术中，有可能因照明较暗等加热室内的状况而无法对拍摄到的图像进行字符识别等。
为了解决上述以往的问题，本文公开的一个方式的加热烹调器具有：加热室，其收纳被加热物；摄像部，其拍摄加热室内的图像；以及控制部，其设定用于拍摄加热室内的图像的拍摄条件，并对图像进行图像识别。控制部通过对加热室内的图像进行分析来确认加热室内的状态，根据加热室内的状态来变更用于拍摄图像的拍摄条件。
根据本方式，在对加热室内的图像进行图像识别的加热烹调器中，能够提高图像识别的精度。
附图说明
图1是实施方式1的加热烹调器的立体图。
图2是实施方式1的加热烹调器的结构框图。
图3是示出作为被加热物的便当的一例的图。
图4是示出粘贴于便当的食品标签的一例的图。
图5是示出用于摄像部的设定项目表的图。
图6是示出与项目“清晰度”相关的设定值表的图。
图7是示出与项目“对比度”相关的设定值表的图。
图8是示出用于照明装置的设定项目表的图。
图9是示出与项目“明亮度”相关的设定值表的图。
图10是示出实施方式1的加热烹调器的动作的流程图。
图11是实施方式2的加热烹调器的立体图。
图12是实施方式2的加热烹调器的立体图。
图13是示出照明数量为4个的情况下的各照明的打开/关闭模式的设定值表的图。
图14是示出所有的照明打开的情况下的各照明的明亮度模式的设定值表的图。
图15是示出实施方式3的加热烹调器的动作的流程图。
图16A是示出项目“清晰度”在打开状态下的微分图像的图。
图16B是示出项目“清晰度”在关闭状态下的微分图像的图。
图17是示出基于实施方式4的图像识别的流程图。
图18A是示出难以进行图像识别的图像的图。
图18B是示出能够进行图像识别的图像的图。
图19是示出拍摄到的图像中的设定变更用的分区的图。
图20是示出按照分区来设定照明的配置和明亮度的表的图。
图21是实施方式5的加热烹调器的立体图。
图22是示出实施方式5的加热烹调器的动作的流程图。
具体实施方式
本文公开的第1方式的加热烹调器具有：加热室，其收纳被加热物；摄像部，其拍摄加热室内的图像；以及控制部，其设定用于拍摄加热室内的图像的拍摄条件，并对图像进行图像识别。控制部通过对加热室内的图像进行分析来确认加热室内的状态，根据加热室内的状态来变更用于拍摄图像的拍摄条件。
根据本方式，在对加热室内的图像进行图像识别的加热烹调器中，能够提高图像识别的精度。
根据本文公开的第2方式的加热烹调器，在第1方式中，还具有进行加热室内的照明的照明装置。拍摄条件包含摄像部进行拍摄时的设定和照明装置进行照明用的设定。根据本方式，在对加热室内的图像进行图像识别的加热烹调器中，能够提高图像识别的精度。
根据本文公开的第3方式的加热烹调器，在第1方式中，控制部在加热室内的图像中确定图像识别的对象区域，对在变更了拍摄条件之后再次拍摄到的图像中的所述对象区域进行所述图像识别。
根据本方式，在对加热室内的图像进行图像识别的加热烹调器中，能够提高图像识别的精度。
根据本文公开的第4方式的加热烹调器，在第3方式中，变更后的拍摄条件是图像的清晰度，控制部将用于图像识别的图像在拍摄时的图像的清晰度设定为比用于确定对象区域的图像在拍摄时的图像的清晰度高。根据本方式，在对加热室内的图像进行图像识别的加热烹调器中，能够提高图像识别的精度。
根据本文公开的第5方式的加热烹调器，在第1方式中，控制部反复变更用于再次拍摄所述图像的拍摄条件，直到图像识别失败规定的次数为止。
根据本方式，在对加热室内的图像进行图像识别的加热烹调器中，能够提高图像识别的精度。
根据本文公开的第6方式的加热烹调器，在第1方式中，图像识别包含字符识别和物体识别。控制部设定与拍摄用于字符识别的图像时的拍摄条件不同的拍摄条件，以拍摄用于物体识别的图像。
根据本方式，在对加热室内的图像进行图像识别的加热烹调器中，能够提高图像识别的精度。
本文公开的第7方式的加热烹调器的控制方法具有如下的步骤：通过对收纳被加热物的加热室内的图像进行分析来确认加热室内的状态；根据加热室内的状态来变更用于拍摄图像的拍摄条件；以及对在变更后的拍摄条件下拍摄到的图像进行图像识别。
根据本方式，在对加热室内的图像进行图像识别的加热烹调器中，能够提高图像识别的精度。
本文公开的第8方式的加热烹调器的控制方法在第7方式中还具有如下步骤：在收纳被加热物的加热室内的图像中，确定图像识别的对象区域。在进行图像识别的步骤中，对在变更后的拍摄条件下拍摄到的图像中的对象区域进行图像识别。
根据本方式，在对加热室内的图像进行图像识别的加热烹调器中，能够提高图像识别的精度。
关于本文公开的第9方式的加热烹调器的控制方法，在第7方式的变更拍摄条件的步骤中，反复变更拍摄条件直到图像识别失败规定的次数为止。
根据本方式，在对加热室内的图像进行图像识别的加热烹调器中，能够提高图像识别的精度。
本文公开的第10方式的加热烹调器的控制方法在第7方式中，图像识别包含字符识别和物体识别。在变更拍摄条件的步骤中，设定与拍摄用于字符识别的图像时的拍摄条件不同的拍摄条件，以拍摄用于物体识别的图像。
根据本方式，在对加热室内的图像进行图像识别的加热烹调器中，能够提高图像识别的精度。
本文公开的第11方式是包含加热烹调器和信息处理装置的加热烹调系统。加热烹调器具有：加热室，其收纳被加热物；摄像部，其拍摄加热室内的图像；控制部，其设定用于拍摄图像的拍摄条件；以及通信部，其对摄像部拍摄到的图像和控制部设定的拍摄条件进行通信。信息处理装置具有：通信部，其对图像和拍摄条件进行通信；以及控制部，其通过对通信部接收到的图像进行分析，确认加热室内的状态，根据加热室内的状态来设定拍摄条件，并利用通信部来发送所设定的拍摄条件。
根据本方式，在对加热室内的图像进行图像识别的加热烹调系统中，能够提高图像识别的精度。
以下，参照附图对本文公开的实施方式进行说明。
(实施方式1)
图1是本文公开的实施方式1的加热烹调器100a的立体图。
如图1所示，加热烹调器100a具有收纳食品等被加热物107a的加热室101。加热室101设置有用于覆盖其前面开口的门104。加热室101具有设置在其前面开口的上方的显示部102和菜单选择部103。
显示部102显示加热时间等与加热烹调器100a的动作关联的信息。菜单选择部103具有包含启动按钮在内的多个按钮，该菜单选择部103是为了供使用者输入加热时间等设定内容而使用的。菜单选择部103也可以由触摸面板构成。
在设置于加热室101的侧壁的开口里设置有照明105，该照明105进行加热室101内的照明。在设置于加热室101的顶部的开口里设置有照相机106，该照相机106对加热室101内进行拍摄。
控制电路(未图示)控制照明105和照相机106，由此，加热烹调器100a能够以图像的形式获取针对被加热物107a的加热程度等信息。
如图1所示，照明105设置在加热室101的侧壁。但是，只要能够对加热室101的整体进行照明，则照明105也可以设置在其他部位(例如，加热室101的顶部)。照明105也可以包含多个照明装置。
照相机106被设置成靠近加热室101的顶部的左端。但是，只要能够对加热室101的整体进行拍摄，则照相机106也可以设置在其他部位(例如，加热室101的侧壁)。当照相机106被设置在顶部的中央时，能够从正上方拍摄被加热物107a。照相机106也可以包含多个摄像部。
图2是实施方式1的加热烹调器100a的结构框图。
如图2所示，加热烹调器100a具有控制部200、摄像部201、拍摄设定部202、拍摄信息管理部203、照明装置205、照明设定部206、照明信息管理部207、加热部209、加热设定部210、加热信息管理部211以及仓内状态管理部214。
控制部200包含拍摄控制部204、照明控制部208、加热控制部212、仓内状态控制部213、状态分析部215、图像处理部216以及识别部217。
在本实施方式中，由微型计算机构成控制部200。本文的公开并不限定于此，但如果使用可编程的微型计算机，则能够容易地变更处理内容，能够提高设计的自由度。
为了提高处理速度，也可以利用逻辑电路来构成控制部200所包含的构成要素。也可以在物理上由一个或多个元件构成这些构成要素。在由多个元件构成这些构成要素的情况下，也可以使各构成要素分别与一个元件对应。在该情况下，可认为这些元件与一个构成要素对应。
摄像部201与图1所示的照相机106对应，该摄像部201包含CMOS图像传感器、CCD图像传感器等摄像元件以及镜头等光学元件，是用于对加热室101内进行拍摄的器件。
拍摄设定部202包含在菜单选择部103中，用于进行拍摄的设定。拍摄信息管理部203包含用于保存拍摄设定部202的设定内容的非易失性存储器。
拍摄控制部204根据保存在拍摄信息管理部203中的设定内容，对摄像部201进行控制。拍摄信息管理部203保存摄像部201拍摄到的图像。
照明装置205与图1所示的照明105对应，该照明装置205是LED等用于进行加热室101内的照明的发光元件。
照明设定部206包含在菜单选择部103中，用于进行照明的设定。照明信息管理部207包含用于保存照明设定部206的设定内容的非易失性存储器。照明控制部208根据保存在照明信息管理部207中的设定内容，对照明装置205进行控制。
加热部209由磁控管等构成，对被加热物107a进行加热。加热设定部210包含在菜单选择部103中，用于进行加热的设定。
加热信息管理部211包含用于保存加热设定部210的设定内容的非易失性存储器。加热控制部212根据保存在加热信息管理部211中的设定内容，对加热部209进行控制。
仓内状态控制部213根据门104是否打开、加热部209是否正在工作等仓内状态，对拍摄控制部204和照明控制部208进行控制，将所需的信息传递到加热控制部212。
仓内状态管理部214包含用于保存与加热室101内的状态(以下，称为仓内状态)相关的信息的非易失性存储器，根据仓内状态的变化而将与仓内状态相关的信息传递到仓内状态控制部213。仓内状态包含在加热室101内是否存在被加热物107a、门104是否关闭等信息。
状态分析部215根据仓内状态管理部214的信息对仓内状态进行分析，判定是否处于能够实施图像识别的状态等。能够实施图像识别的状态是指在加热室101内存在被加热物107a且门104关闭的状态。另外，假设图像识别包含字符识别、条形码识别以及物体识别。
在仓内状态为能够实施图像识别的状态的情况下，图像处理部216对摄像部201拍摄到的图像进行分析，确定可能包含与加热信息关联的字符的区域。以下，将该确定出的区域称为用于字符识别等图像识别的对象区域。
识别部217对对象区域进行图像识别。在识别部217正常实施了图像识别的情况下，加热控制部212根据由图像识别获得的信息来控制加热部209。
在这样构成的加热烹调器100a中，在被加热物107a为便当的情况下(参照图3)，便当内的食材被选定为对象区域301。也可以根据图像识别的方法，将便当整体选定为对象区域302。
图4示出了粘贴在图3所示的便当上的食品标签400。如图4所示，食品标签400包含作为图像识别对象的字符和条形码。在食品标签400中确定对象区域401，对对象区域401进行字符识别或条形码识别，确定加热时间。
图5示出了被拍摄信息管理部203(参照图2)管理的、用于摄像部201的设定项目表501。如图5所示，设定项目表501包含用于硬件(Hardware)控制的项目和用于软件(Software)控制的项目。
在用于硬件控制的项目中包含摄像部201(参照图2)的位置、方向、焦点(Focus)等。在用于软件控制的项目中包含清晰度(Sharpness)、噪声去除(Noise Reduction)、对比度(Contrast)、增益(Gain)等与图像处理相关的项目。
图6是与设定项目表501中的项目“清晰度”相关的设定值表601。
如图6所示，关于项目“清晰度”，可以设定为与关闭状态对应的“0x00”和与打开状态对应的“0x01”。
图7是与设定项目表501中的项目“对比度”相关的设定值表701。
如图7所示，关于项目“对比度”，可以设定为与“增大(大幅)”、“增大(稍许)”、“通常”、“减小(稍许)”、“减小(大幅)”这五个状态分别对应的“0x20”、“0x10”、“0x00”、“0x01”、“0x02”中的任意一个。
在上述的例子中，关于项目“清晰度”，设定值表601具有两个候选。但是，设定值表601例如也可以具有四个状态(最大、中间、最小、关闭)。对比度也并不限定于上述的例子。
与设定项目表501同样，设定值表601、701被拍摄信息管理部203(参照图2)管理。具体来说，如图2所示，作为摄像部201进行拍摄时或图像处理部216和识别部217进行图像处理时所需的信息，拍摄信息管理部203对这些表进行管理。
如图5所示，在设定项目表501中，用于硬件控制的项目被设定为固定值。用于软件控制的项目“清晰度”、“噪声去除”、“对比度”、“增益”被分别设定为打开(0x01)、打开(0x01)、通常(0x00)、通常(0x00)。
图8示出了被照明信息管理部207(参照图2)管理的、用于照明装置205的设定项目表801。
如图8所示，设定项目表801包含用于硬件控制的项目和用于软件控制的项目。在用于硬件控制的项目中包含照明装置205(参照图2)的物理位置、方向等。在用于软件控制的项目中包含明亮度、颜色等。
图9是与设定项目表801中的项目“明亮度”相关的设定值表901。
项目“明亮度(勒克斯(Lux))”被设定为“0”、“50”、“100”、“200”、“500”、“1000”这六个状态中的任意一个状态。这六个状态分别与“0x0000”、“0x0032”、“0x0064”、“0x00C8”、“0x01F4”、“0x03E8”对应。
在上述的例子中，项目“明亮度”的设定值表901具有六个状态。但是，设定值表901所包含的状态的数量也可以为六个以外。设定值表901也可以不包含预先设定的状态，由使用者对设定值表901设定任意的状态或数值。
与设定项目表801同样，设定值表901被照明信息管理部207(参照图2)管理。具体来说，如图2所示，作为照明装置205进行照明时或图像处理部216和识别部217进行图像识别时所需的信息，照明信息管理部207对这些表进行管理。
如图8所示，在设定项目表801中，用于硬件控制的项目被设定为固定值。用于软件控制的项目“明亮度(勒克斯)”、“颜色”被分别设定为200勒克斯(0x00C8)、白色(0x00)。
图10是示出加热烹调器100a的动作的流程图。在图10所示的处理中，在拍摄到的图像中确定食品标签400(参照图3、图4)来作为用于字符识别的对象区域。
如图10所示，在步骤S1001中，状态分析部215确认仓内状态。为了确认在加热室101内是否存在被加热物107a，拍摄加热室101内的图像，利用状态分析部215对该图像进行分析。
在步骤S1002中，当状态分析部215判定为仓内状态不是能够实施图像识别的状态时，处理返回到步骤S1001。当状态分析部215判定为仓内状态是能够实施图像识别的状态时，在步骤S1003中，在拍摄控制部204根据需要变更了拍摄条件之后，利用摄像部201拍摄加热室101内的图像。
在步骤S1004中，图像处理部216在该图像中确定对象区域。在步骤S1005中，识别部217对所确定的对象区域进行字符识别。
在步骤S1006中，当识别部217判断为没有正常实施对象区域的确定以及字符识别中的任意一项时，在步骤S1007中，仓内状态控制部213催促使用者通过手动来输入烹调设定。当状态分析部215识别出经由菜单选择部103的输入时，根据该输入来变更烹调设定。
在步骤S1006中，当识别部217判断为正常实施了字符识别时，自动进行与该结果对应的烹调设定的输入。
当在步骤S1006或S1007中结束了烹调设定的输入时，在步骤S1008中，仓内状态控制部213通过点亮启动按钮等来催促使用者开始烹调。当状态分析部215识别出启动按钮的按下时，加热控制部212对加热部209进行控制，以开始与设定对应的烹调。
在步骤S1009中，仓内状态控制部213继续确认仓内状态直到被加热物107a成为规定的状态。当被加热物107a成为期望的状态时，加热控制部212结束烹调。
在上述的例子中，进行针对食品标签400的字符识别。也可以将字符识别替换成被加热物107a的物体识别、被加热物107a的局部的食材识别或食品标签400中的条形码识别。
具有代表性的是，作为字符识别对象的信息是加热时间、加热瓦特数。作为字符识别对象的信息也可以是保质期、便当的种类、商品名、卡路里、价格等食品标签400所记载的字符。
在本实施方式中，当门104关闭时进行字符识别。也可以在门104打开时或按下启动按钮时进行字符识别。
在本实施方式中，为了对象区域的确定和图像识别，也可以变更照明用的设定项目表。加热烹调器100a也可以构成为：在进行加热室101内的拍摄时，显示部102显示加热室101内的图像。
以下，将用于摄像部201的设定(设定项目表501)和用于照明装置205的设定(设定项目表801)统称为拍摄条件。
(实施方式2)
对本文公开的实施方式2的加热烹调器100b进行说明。图11、图12是加热烹调器100b的立体图。图11示出了在加热室101内的中央载置有被加热物107a的状态。图12示出了在加热室101内的后壁附近载置有被加热物107a的状态。
加热烹调器100b具有与实施方式1的加热烹调器100a大致相同的结构(参照图2～图10)。加热烹调器100b与加热烹调器100a的不同之处是照明的数量和位置以及照明的控制方法。在本实施方式中，对与实施方式1共同的部分省略说明。
如图11、图12所示，加热烹调器100b具有四个照明。具体来说，在加热室101内的左侧壁配置有照明105a和照明105c，在加热室101内的右侧壁配置有照明105b、照明105d。照明105a、105b靠近加热室101的后壁，照明105c、105d远离加热室101的后壁。
本实施方式的照明的控制方法基本上与图10所示的处理相同。具体来说，在步骤S1001中，在点亮所有照明之后，拍摄加热室101内的图像。被加热物107a在图11所示的情况下显现在图像的大致中央，在图12所示的情况下显现在图像的左端。状态分析部215对图像进行分析而掌握被加热物107a的位置。
在步骤S1003中，在图11的情况下，继续点亮所有照明。在图12的情况下，继续点亮照明105a、105b，熄灭照明105c、105d。在照明被调整之后拍摄图像。
图13是示出照明的数量为4个的情况下的各照明的打开/关闭模式的设定值表1301。如图13所示，由于四个照明是打开或关闭的，所以设定值表1301具有16种模式。
图14是示出四个照明全部打开的情况下的各照明的明亮度(勒克斯)模式的设定值表1401。由于四个照明分别具有五个等级的明亮度(参照图9)，所以如图14所示，设定值表1401具有625种模式。
根据本实施方式，按照被加热物107a的位置来控制照明，由此，能够防止光晕的产生。其结果是，能够提高图像识别的精度。
(实施方式3)
对本文公开的实施方式3的加热烹调器100c进行说明。
加热烹调器100c具有与实施方式1的加热烹调器100a同样的结构(参照图1～图10)。这里省略与结构相关的说明。
在本实施方式中，与实施方式1同样，从拍摄到的图像确定食品标签400(参照图3、图4)来作为用于字符识别的对象区域。
使用图15对本实施方式的加热烹调器100c的动作进行说明。图15是示出加热烹调器100c的动作的流程图。
该流程图具有步骤S1501～S1504来代替图10中的步骤S1003～S1005，除此之外，具有与图10相同的步骤。这里，对步骤S1501～S1504进行说明。
在步骤S1002中，当状态分析部215判定为仓内状态是能够实施图像识别的状态时，在步骤S1501中，拍摄控制部204使图5所示的设定项目表501中的项目“清晰度”为关闭状态，拍摄加热室101内的图像。
在步骤S1502中，图像处理部216从拍摄到的图像中，确定可能包含与加热信息关联的字符的对象区域。
图16A是针对项目“清晰度”在打开状态下拍摄到的图像的微分图像1601。图16B是针对项目“清晰度”在关闭状态下拍摄到的图像的微分图像1602。
如图16A、图16B所示，微分图像1602具有轮廓比微分图像1601更清晰的字符和线。即，当将项目“清晰度”设定为关闭状态时，能够更容易地判别边缘。其结果是，能够更高精度地确定对象区域。
在步骤S1503中，拍摄控制部204使项目“清晰度”为打开状态，再次拍摄加热室101内的图像。
在步骤S1005中，对在步骤S1503中拍摄到的图像的、在步骤S1502中确定的对象区域进行字符识别。使用将项目“清晰度”设定为打开状态而拍摄到的图像，由此，能够进行精度更高的字符识别。
在本实施方式中，为了对象区域的确定，项目“清晰度”被设定为关闭状态，为了字符识别，项目“清晰度”被设定为打开状态。但是，本实施方式并不限定于此。
为了对象区域的确定和字符识别，也可以使用噪声去除、对比度、白平衡(Whitebalance)等其他软件处理。也可以对多个软件处理进行组合。除了软件处理之外，也可以至少使用一个硬件处理。
为了缩短处理时间，也可以在步骤S1501、S1503的任意步骤中省略设定的变更。
(实施方式4)
对本文公开的实施方式4的加热烹调器100d进行说明。
加热烹调器100d具有与实施方式1的加热烹调器100a同样的结构(参照图1～图10)。这里省略与结构相关的说明。
在本实施方式中，从食品标签400(参照图3、图4)中提取用于字符识别的对象区域。
图17是示出加热烹调器100d的动作的流程图。除了图10所示的步骤之外，该流程图还具有步骤S1701、S1702。这里，对步骤S1701、S1702进行说明。
在步骤S1006中，当识别部217判断为没有正常实施对象区域的确定以及字符识别中的任意一项时，在步骤S1701中，识别部217判断字符识别是否失败了规定的次数。
在步骤S1702中，仓内状态控制部213根据字符识别的失败原因来变更拍摄条件，直到字符识别失败规定的次数为止。
在步骤S1003中，根据变更后的设定来进行加热室101内的拍摄。在步骤S1006中，当识别部217判断为字符识别失败了规定的次数时，处理进入到上述的步骤S1007。
在本实施方式中，在步骤S1006中识别部217判断为没有正常实施对象区域的确定以及字符识别中的任意一项时，变更拍摄条件。但是，也可以是，当图像处理部216在对象区域的确定中失败的情况下、以及识别部217在字符识别中失败的情况下，每次都变更拍摄条件而再次进行拍摄。
使用具体的事例进行说明。图18A和图18B是加热室101内的被加热物107a的图像。
根据被加热物107a的位置和拍摄时的状况，有时被加热物107a没有落在拍摄视角内或食品标签400因照明的反射而不易被看到。根据摄像部201的位置和照明装置205的位置，未必能够对加热室101内的所有空间适当地控制焦点或光圈。
图18A是因光的反射而难以读取记载在食品标签400上的字符的图像。在该情况下，即使能够确定对象区域，也很可能无法进行字符识别。
为了解决该问题，根据本实施方式，状态分析部215掌握对象区域处于图像的哪一部分，并根据其部位来变更拍摄条件。
图19示出了拍摄到的图像中的设定变更用的分区。例如，在对象区域位于中央的分区以外的情况下，由于照度不足、失焦等理由，很可能无法进行对象区域中的字符识别。根据本实施方式，按照图19所示的每个分区来变更拍摄条件。
图20示出了为了防止光晕的产生而按照每个分区来设定照明的配置和明亮度的表。
在图18A所示的图像的情况下，状态分析部215根据图20所示的表，将照明的配置变更为“SL05－07”，将明亮度变更为400勒克斯。图18B是重新拍摄的图像。根据本实施方式，如图18B所示，清楚地拍摄到对象区域的字符。其结果是，更可靠地进行字符识别。
(实施方式5)
对本文公开的实施方式5的加热烹调器进行说明。图21是加热烹调器100e的立体图。图21示出了在加热室101内的中央载置有被加热物107b的状态。如图21所示，与被加热物107a不同，在被加热物107b上没有粘贴食品标签400。
加热烹调器100e具有与实施方式1的加热烹调器100a同样的结构(参照图1～图10)。这里省略与结构相关的说明。
图22是示出加热烹调器100e的动作的流程图。在图22所示的处理中，对被加热物107b进行物体识别。
如图22所示，在步骤S2101中，仓内状态控制部213选择字符识别来作为识别模式。仓内状态管理部214管理识别模式。
在步骤S2102中，状态分析部215(参照图2)确认加热烹调器100e的仓内状态。在步骤S2103中，当状态分析部215判定为门104未关闭时，处理返回到步骤S2102。
在步骤S2103中，当状态分析部215判定为门104关闭时，在步骤S2104中，状态分析部215根据识别模式来判定使用字符识别和物体识别中的哪个。
首次，识别模式被设定为字符识别，所以在步骤S2105中，仓内状态控制部213将拍摄条件变更为字符识别用，拍摄控制部204利用摄像部201拍摄加热室101内的图像。
在步骤S2106中，图像处理部216确定用于物体识别的对象区域。在步骤S2107中，识别部217对对象区域进行字符识别。
在步骤S2108中，当识别部217判定为正常实施了字符识别时，自动进行与其结果对应的烹调设定的输入。在步骤S2108中，当识别部217判断为没有正常实施对象区域的确定以及字符识别中的任意一项时，在步骤S2109中，选择物体识别来作为识别模式。处理返回到步骤S2102。
在步骤S2102中，状态分析部215确认加热烹调器100e的仓内状态。在步骤S2103中，当状态分析部215判定为门104关闭时，在步骤S2104中，状态分析部215确认识别模式。处理进入到步骤S2110。
此次，识别模式被设定为物体识别，所以在步骤S2110中，仓内状态控制部213将拍摄条件变更为物体识别用，拍摄控制部204利用摄像部201拍摄加热室101内的图像。
在步骤S2111中，图像处理部216确定用于物体识别的对象区域。在步骤S2112中，识别部217对对象区域进行物体识别。
在步骤S2113中，当识别部217判断为没有正常实施对象区域的确定以及物体识别中的任意一项时，在步骤S2114中，仓内状态控制部213催促使用者进行手动的设定输入。当状态分析部215识别出经由菜单选择部103的输入时，进行与该输入对应的设定。
在步骤S2113中，当识别部217判断为正常实施了物体识别时，自动进行与其结果对应的烹调设定的输入。
当在步骤S2113或S2114中结束烹调设定的输入时，在步骤S2115中，仓内状态控制部213通过点亮启动按钮等来催促使用者开始烹调。当状态分析部215识别出启动按钮的按下时，加热控制部212对加热部209进行控制，以开始与设定对应的烹调。
在步骤S2116中，仓内状态控制部213继续确认仓内状态直到被加热物107b成为规定的状态。当被加热物107b成为期望的状态时，加热控制部212结束烹调。
如以上那样，在本实施方式中，由于在字符识别的情况和物体识别的情况下利用不同的设定来进行拍摄，所以能够进行高精度的图像识别。
(实施方式6)
对本文公开的实施方式6的加热烹调系统进行说明。
本实施方式包含加热烹调器100f，该加热烹调器100f具有与实施方式1的加热烹调器100a同样的结构(参照图1～图10)。
加热烹调器100f与加热烹调器100a的不同之处在于：为了经由网络与便携终端或外部服务器等信息处理装置连接而设置有通信部，控制部200不具有状态分析部215、图像处理部216、识别部217的功能。
在本实施方式中，信息处理装置实施状态分析部215、图像处理部216、识别部217的功能。
因此，信息处理装置具有通信部和控制部。信息处理装置的通信部从加热烹调器100f的通信部接收加热室101内的图像。信息处理装置的控制部通过对接收到的图像进行分析，确认加热室101内的状态。信息处理装置的控制部根据加热室101内的状态来设定拍摄条件。信息处理装置的通信部将所设定的拍摄条件发送到加热烹调器100f的通信部。
根据本实施方式，通过外部的信息处理装置来进行图像识别。即，通过加热烹调器100f和信息处理装置来构成加热烹调系统。
在本加热烹调系统中，也可以构成为信息处理装置不仅实施状态分析部215、图像处理部216、识别部217的功能，还实施控制部200所包含的其他构成要素的功能。
设置于便携终端的显示部也可以构成为显示加热室内的图像。设置于便携终端的显示部也可以构成为显示由便携终端或外部服务器识别出的物体的形状、字符以及条形码。设置于加热烹调器的显示部也可以构成为显示识别出的物体的形状、字符以及条形码。
产业上的可利用性
本文的公开也可以在便利店、餐饮公司等的商业用的加热烹调器以及家庭用的加热烹调器中使用。
标号说明
100a、100b、100c、100d、100e、100f：加热烹调器；101：加热室；102：显示部；103：菜单选择部；104：门；105、105a、105b、105c、105d：照明；106：照相机；107a、107b：被加热物；200：控制部；201：摄像部；202：拍摄设定部；203：拍摄信息管理部；204：拍摄控制部；205：照明装置；206：照明设定部；207：照明信息管理部；208：照明控制部；209：加热部；210：加热设定部；211：加热信息管理部；212：加热控制部；213：仓内状态控制部；214：仓内状态管理部；215：状态分析部；216：图像处理部；217：识别部；301、302、401：对象区域；400：食品标签。

Claims (9)

1.一种加热烹调器，该加热烹调器具有：
加热室，其收纳被加热物；
摄像部，其拍摄所述加热室内的图像；以及
控制部，其设定用于拍摄所述图像的拍摄条件，对所述图像进行图像识别，
所述控制部通过对所述图像进行分析来确认所述加热室内的状态，并根据所述加热室内的状态来变更所述拍摄条件，
所述控制部在所述图像中确定所述图像识别的对象区域，对在变更后的拍摄条件下再次拍摄到的所述图像中的所述对象区域进行所述图像识别。
2.根据权利要求1所述的加热烹调器，其中，
该加热烹调器还具有照明装置，该照明装置进行所述加热室内的照明，
所述拍摄条件包含用于所述摄像部的设定和用于所述照明装置的设定。
3.根据权利要求1或2所述的加热烹调器，其中，
所述变更后的拍摄条件是所述图像的清晰度，所述控制部将用于所述图像识别的所述图像在拍摄时的所述图像的清晰度设定为比用于确定所述对象区域的所述图像在拍摄时的所述图像的清晰度高。
4.根据权利要求1所述的加热烹调器，其中，
所述控制部反复变更所述拍摄条件并再次拍摄所述图像，直到所述图像识别失败规定的次数为止。
5.根据权利要求1所述的加热烹调器，其中，
所述图像识别包含字符识别和物体识别，
所述控制部设定与拍摄用于所述字符识别的所述图像时的所述拍摄条件不同的所述拍摄条件，以拍摄用于所述物体识别的所述图像。
6.一种加热烹调器的控制方法，该加热烹调器的控制方法具有如下的步骤：
通过对收纳被加热物的加热室内的图像进行分析来确认所述加热室内的状态；
根据所述加热室内的状态来变更用于拍摄所述图像的拍摄条件；
对在变更后的拍摄条件下拍摄到的所述图像进行图像识别；以及
在收纳被加热物的加热室内的图像中确定图像识别的对象区域，
在进行所述图像识别的步骤中，对在变更后的所述拍摄条件下拍摄到的所述图像中的所述对象区域进行所述图像识别。
7.根据权利要求6所述的加热烹调器的控制方法，其中，
在变更所述拍摄条件的步骤中，反复变更所述拍摄条件直到所述图像识别失败规定的次数为止。
8.根据权利要求6所述的加热烹调器的控制方法，其中，
所述图像识别包含字符识别和物体识别，
在变更所述拍摄条件的步骤中，设定与拍摄用于所述字符识别的所述图像时的所述拍摄条件不同的所述拍摄条件，以拍摄用于所述物体识别的所述图像。
9.一种加热烹调系统，该加热烹调系统包含加热烹调器和信息处理装置，其中，
所述加热烹调器具有：
加热室，其收纳被加热物；
摄像部，其拍摄所述加热室内的图像；
控制部，其设定用于拍摄所述图像的拍摄条件；以及
通信部，其对所述摄像部拍摄到的图像和所述控制部设定的拍摄条件进行通信，
所述信息处理装置具有：
通信部，其对所述图像和所述拍摄条件进行通信；以及
控制部，其通过对所述通信部接收到的所述图像进行分析，确认所述加热室内的状态，根据所述加热室内的状态来设定所述拍摄条件，并利用所述通信部来发送所设定的所述拍摄条件，针对所述图像进行图像识别，在所述图像中确定所述图像识别的对象区域，对在变更后的拍摄条件下再次拍摄到的所述图像中的所述对象区域进行所述图像识别。
CN201680060747.3A 2015-11-27 2016-11-18 加热烹调器、加热烹调器的控制方法以及加热烹调系统 Active CN108139078B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015-231284 2015-11-27
JP2015231284 2015-11-27
PCT/JP2016/004918 WO2017090244A1 (ja) 2015-11-27 2016-11-18 加熱調理器、加熱調理器の制御方法、および、加熱調理システム

Publications (2)

Publication Number Publication Date
CN108139078A CN108139078A (zh) 2018-06-08
CN108139078B true CN108139078B (zh) 2020-02-14

Family

ID=58763441

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680060747.3A Active CN108139078B (zh) 2015-11-27 2016-11-18 加热烹调器、加热烹调器的控制方法以及加热烹调系统

Country Status (4)

Country Link
US (1) US10716174B2 (zh)
JP (1) JP6830184B2 (zh)
CN (1) CN108139078B (zh)
WO (1) WO2017090244A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7126050B2 (ja) * 2017-06-23 2022-08-26 パナソニックＩｐマネジメント株式会社 加熱調理器および加熱調理器の制御方法
CN109780584A (zh) * 2017-11-15 2019-05-21 阿里巴巴集团控股有限公司 加热设备及其控制方法和使用方法
CN110013174A (zh) * 2018-01-10 2019-07-16 财团法人食品工业发展研究所 智能型多功能烹调设备
JP7108820B2 (ja) * 2018-04-27 2022-07-29 パナソニックＩｐマネジメント株式会社 加熱調理器
US20220151037A1 (en) * 2019-02-22 2022-05-12 Panasonic Intellectual Property Management Co., Ltd. Heating cooker
JP7213419B2 (ja) * 2019-03-22 2023-01-27 パナソニックＩｐマネジメント株式会社 加熱調理器
JP7316949B2 (ja) * 2020-01-17 2023-07-28 リンナイ株式会社 調理システム
US20210243855A1 (en) * 2020-02-04 2021-08-05 Tia S. Burress Automated Cooking Device
TW202132727A (zh) * 2020-02-26 2021-09-01 日商夏普股份有限公司 加熱烹調器
JP7345084B2 (ja) * 2020-04-03 2023-09-15 パナソニックＩｐマネジメント株式会社 加熱調理器

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005197996A (ja) * 2004-01-07 2005-07-21 Fuji Photo Film Co Ltd デジタルカメラの制御方法及び装置
CN101116375A (zh) * 2005-11-16 2008-01-30 松下电器产业株式会社 加热烹调器
CN103095987A (zh) * 2011-11-04 2013-05-08 索尼公司 成像控制设备、成像装置及用于成像控制设备的控制方法
CN103221984A (zh) * 2010-11-19 2013-07-24 株式会社尼康 引导装置、检测装置以及姿势状态判定装置
JP2014077581A (ja) * 2012-10-10 2014-05-01 Panasonic Corp 制御プログラム、情報処理装置、情報処理端末、加熱調理器及び加熱調理システム
WO2014086486A2 (en) * 2012-12-04 2014-06-12 Ingo Stork Genannt Wersborg Heat treatment monitoring system

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3036671U (ja) 1996-10-09 1997-05-02 株式会社ジャムコ 加熱調理器
JP2005179996A (ja) * 2003-12-18 2005-07-07 Nissan Shatai Co Ltd ドアチェッカ
JP6579301B2 (ja) * 2014-10-10 2019-09-25 パナソニックＩｐマネジメント株式会社 加熱調理器

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005197996A (ja) * 2004-01-07 2005-07-21 Fuji Photo Film Co Ltd デジタルカメラの制御方法及び装置
CN101116375A (zh) * 2005-11-16 2008-01-30 松下电器产业株式会社 加热烹调器
CN100556218C (zh) * 2005-11-16 2009-10-28 松下电器产业株式会社 加热烹调器
CN103221984A (zh) * 2010-11-19 2013-07-24 株式会社尼康 引导装置、检测装置以及姿势状态判定装置
CN103095987A (zh) * 2011-11-04 2013-05-08 索尼公司 成像控制设备、成像装置及用于成像控制设备的控制方法
JP2014077581A (ja) * 2012-10-10 2014-05-01 Panasonic Corp 制御プログラム、情報処理装置、情報処理端末、加熱調理器及び加熱調理システム
WO2014086486A2 (en) * 2012-12-04 2014-06-12 Ingo Stork Genannt Wersborg Heat treatment monitoring system

Also Published As

Publication number Publication date
CN108139078A (zh) 2018-06-08
US10716174B2 (en) 2020-07-14
JP6830184B2 (ja) 2021-02-17
US20180279425A1 (en) 2018-09-27
JPWO2017090244A1 (ja) 2018-09-20
WO2017090244A1 (ja) 2017-06-01

Similar Documents

Publication Publication Date Title
CN108139078B (zh) 加热烹调器、加热烹调器的控制方法以及加热烹调系统
CN107426557B (zh) 智能照明装置
EP2879470B1 (en) Control method of mobile device
EP2638325B1 (en) A cooking device, and a procedure for cooking food
US9197273B2 (en) Case for mobile communication device with flash and camera controls
CN108604046B (zh) 摄影支持装置及其工作方法
CN109964083B (zh) 加热烹调器以及加热烹调器的控制方法
JP2006145142A (ja) 電子レンジ
WO2018096885A1 (ja) 加熱調理器、加熱調理器の制御方法、および加熱調理システム
JPWO2018225666A1 (ja) 加熱調理器および加熱調理器の制御方法
CN102665046B (zh) 摄像设备、照相机系统和照明设备
JPWO2018235702A1 (ja) 加熱調理器および加熱調理器の制御方法
WO2018069986A1 (ja) 冷蔵庫
TWI779533B (zh) 加熱調理器
JP2014197162A (ja) 撮像装置
JP4517928B2 (ja) 写真撮影編集方法およびその装置
JP2019121608A (ja) 端末機器および灯具制御システム
CN218772502U (zh) 存储介质及发光设备
WO2020195253A1 (ja) 加熱調理器
KR200343956Y1 (ko) 팬틸트 카메라를 구비한 키오스크 장치
JP2021174504A (ja) 顔認識装置及び顔認識方法
CN117177414A (zh) 一种发光设备的控制方法及发光设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant