CN105009165A - 信息处理装置和存储介质 - Google Patents

信息处理装置和存储介质 Download PDF

Info

Publication number
CN105009165A
CN105009165A CN201380073632.4A CN201380073632A CN105009165A CN 105009165 A CN105009165 A CN 105009165A CN 201380073632 A CN201380073632 A CN 201380073632A CN 105009165 A CN105009165 A CN 105009165A
Authority
CN
China
Prior art keywords
cooking
index
unit
signal conditioning
conditioning package
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380073632.4A
Other languages
English (en)
Inventor
佐古曜一郎
花谷博幸
镰田恭则
甲贺有希
大沼智也
竹原充
中村隆俊
林和则
今孝安
丹下明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN105009165A publication Critical patent/CN105009165A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H70/00ICT specially adapted for the handling or processing of medical references
    • G16H70/20ICT specially adapted for the handling or processing of medical references relating to practices or guidelines
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/0092Nutrition
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/02Electrically-operated educational appliances with visual presentation of the material to be studied, e.g. using film strip
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/60ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to nutrition control, e.g. diets

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Primary Health Care (AREA)
  • Medical Informatics (AREA)
  • Epidemiology (AREA)
  • Business, Economics & Management (AREA)
  • Nutrition Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Educational Technology (AREA)
  • Educational Administration (AREA)
  • Physics & Mathematics (AREA)
  • Bioethics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

[问题]为了提供一种能够计算烹调处理中的指标的信息处理装置和存储介质。[解决方案]一种信息处理装置包括:估计单元,基于传感器检测的信号来估计要烹调的配料或在烹调中使用的调料的至少一个的用量;指标计算单元,根据估计单元的估计结果来计算指定烹调指标;以及通知控制单元,控制以便通知指标计算单元计算的烹调指标。

Description

信息处理装置和存储介质
技术领域
本公开涉及一种信息处理装置和存储介质。
背景技术
近来,提出了辅助饮食生活方式管理的装置。
此外,以下专利文献1公开了一种减少用于记录膳食内容的用户工作负担以实现高效管理的技术。具体地,如果食物图像与时间和日期信息一起从个人客户端被发送到中心服务器,则中心服务器处的建议者(专家)对食物的图像进行分析,并且输入和发送建议。
另外,以下专利文献2公开了一种减少记忆食物成分所需的长时间和努力的导航系统,其包括营养数据存储单元(例如,附于食物产品的包装容器的IC标签)、营养数据读取单元(例如,IC标签读取器)和数据输出单元。
引用列表
专利文献
专利文献1:JP 2010-33326A
专利文献2:JP 2006-195943A
发明内容
技术问题
然而,对于上述专利文献1,由于基于已准备好的菜肴的捕获图像来进行分析,因此难以识别在烹调处理中使用了什么种类的配料以及使用了多少。
另外,专利文献2同样没有讨论烹调处理期间的卡路里或营养成分的  计算。
因此,本公开提出了一种新的且改进的能够计算烹调处理期间的指标的信息处理装置和存储介质。
问题的解决方案
根据本公开,提供了一种信息处理装置,包括:估计单元,被配置成基于传感器检测的信号,估计要烹调的配料和在烹调中使用的调料中的至少一个的用量;指标计算单元,被配置成根据估计单元的估计结果来计算指定烹调指标;以及通知控制单元,被配置成执行控制以发出指标计算单元计算的烹调指标的通知。
根据本公开,提供了一种其中存储有程序的存储介质,该程序使得计算机用作:估计单元,被配置成基于传感器检测的信号,估计要烹调的配料和在烹调中使用的调料中的至少一个的用量;指标计算单元,被配置成根据估计单元的估计结果来计算指定烹调指标;以及通知控制单元,被配置成执行控制以发出指标计算单元计算的烹调指标的通知。
本发明的有利效果
根据如上所述的本公开,变得可以计算烹调处理期间的指标。
附图说明
图1是用于说明根据本公开的实施例的烹调指标显示的概况的图。
图2是示出根据本实施例的HMD的示例性内部配置的框图。
图3是用于说明根据本实施例的用量估计单元的使用配料/调料量估计方法的图。
图4是示出根据本实施例的烹调指标显示处理的流程图。
图5A是示出在添加配料的情况下的烹调指标的示例屏幕显示的图。
图5B是示出在添加调料的情况下的烹调指标的示例屏幕显示的图。
图6是示出根据本实施例的警告显示的示例屏幕显示的图。
图7是示出根据本实施例的比较结果通知的示例屏幕显示的图。
图8是示出在吃和喝时当使用烹调指标来呈现饮食指标的主控制器的功能配置的框图。
图9是示出在吃和喝时当使用烹调指标向用户通知饮食指标时的操作处理的流程图。
具体实施方式
在下文中,将参照附图详细描述本公开的优选实施例。注意,在该说明书和附图中,具有基本上相同的功能和结构的元件以相同的附图标记来指示,并且省略重复说明。
在下文中,将按以下顺序进行描述。
1.根据本公开的实施例的烹调指标显示的概况
2.HMD的基本配置和操作处理
2-1.HMD的基本配置 
2-2.HMD的操作处理 
3.屏幕显示示例 
3-1.指标显示
3-2.基于比较结果的显示
4.补充注释
5.结论
《1.根据本公开的实施例的烹调指标显示的概述》
首先,将参照图1对根据本公开的实施例的烹调指标显示进行概述。
图1是概述根据本公开的实施例的烹调指标显示的图。如图1所示,用户8正佩戴眼镜型的头戴型显示器(HMD)1。HMD 1包括具有从例如头的任一侧开始围绕头的后部包裹半周的框架结构的佩戴单元,并且通过被放在任一耳朵的耳廓上而由用户8佩戴,如图1所示。
另外,HMD 1被配置成使得在佩戴状态下,用于左眼和右眼的一对显示单元2被放置在紧挨在用户8的任一眼睛的前方,或者换言之,放置在普通眼镜的透镜所处的位置。以图像捕获透镜3a捕获的真实空间的捕获图像例如显示在显示单元2上。显示单元2也可以是透明的,并且通过  使得HMD 1将显示单元2置于透视状态,或者换言之,置于透明或半透明状态,即使用户如眼镜一样连续佩戴HMD 1也不会损害日常活动。
另外,如图1所示,在HMD 1中,图像捕获透镜3a被放置成面向前,以便捕获在用户8佩戴的状态下用户看向的方向作为拍摄方向。此外,提供照明的光发射器4a设置在图像捕获透镜3a的图像捕获方向上。光发射器4a由例如发光二极管(LED)形成。
另外,虽然在图1中仅在左眼侧示出,但是设置了在佩戴状态可插入到用户的右耳道和左耳道的一对耳机扬声器5a。另外,获取外部声音的麦克风6a和6b被放置于用于右眼的显示单元2的右侧以及用于左眼的显示单元2的左侧。
注意,图1所示的HMD 1的外观是示例,并且可想到用户可佩带HMD 1的多种结构。HMD 1被形成为眼镜型或头戴型的佩带单元就足够,并且至少对于本实施例,显示单元2设置为靠近用户眼睛前方就足够。另外,除了显示单元2成对被设置为与任一眼睛对应之外,设置与一侧的眼睛对应的单个显示单元2的配置也是可接受的。
另外,虽然在图1所示的示例中图像捕获透镜3a和提供照明的光发射器4a在右眼侧被放置成面向前,但是图像捕获透镜3a和光发射器4a也可被放置在左眼侧或者放置在两侧。
设置单个耳机扬声器5a以仅在一个耳朵中佩戴而不是设置为左右立体声扬声器也是可接受的。同样,麦克风可以是麦克风6a或6b之一。
此外,没有配备麦克风6a和6b或耳机扬声器5a的配置也是可想到的。没有设置光发射器4a的配置也是可想到的。
以上如此描述了图1所示的HMD 1的外部配置。在本说明书中,HMD 1用作进行烹调指标显示的信息处理装置的示例,但是根据本公开的信息处理装置不限于HMD 1。例如,信息处理装置也可以是智能电话、移动电话、个人数字助理(PDA)、个人计算机(PC)、平板装置等。
这里,如之前讨论的,对于以上专利文献1,难以基于已准备好的菜肴的捕获图像来分析在烹调处理中使用何种配料以及使用了多少。另外,如果可以在烹调处理期间实时地计算指示配料和调料的卡路里和质量的烹调指标并且将其包括在对用户的通知中,则从烹调阶段开始的饮食生活方式支持将是可能的。
具体地,在由于生活方式相关疾病等的问题而需要饮食生活方式改进  的情况下,卡路里、脂肪、糖、嘌呤、胆固醇等的摄入和数值成为问题,但是存在与对于改进饮食生活方式优选和不优选的食物物质有关的大量信息,这变为用户的负担。另外,如在用户在吃饭或烹调时可能忘记或者不期望的食物物质可能是不优选的情况下,用户难以连续摄入优选的食物物质。
因此,关注于上述情形导致根据本公开的实施例的HMD 1(信息处理装置)的创建。根据本公开的实施例的HMD 1能够计算烹调处理期间的指标。
具体地,根据本实施例的HMD 1(信息处理装置)利用图像捕获透镜3a捕获烹调状态,估计在捕获的图像中的使用配料或使用调料的量,基于估计结果而计算每种配料或调料的烹调指标,并且实时地向用户通知所计算的烹调指标。在该说明书中,例如,烹调指标是例如配料或调料的质量或卡路里值(卡路里)的值。另外,质量或卡路里值的值也可以是包括在配料或调料中的各种营养成分的质量或卡路里值的值。各种营养成分可以是例如维他命、脂肪、蛋白质、碳水化合物、钙、镁、膳食纤维、钾、铁、维生素A、食盐、糖、嘌呤、胆固醇或酒精。另外,可不仅基于所捕获的图像还基于从气味传感器或各种浓度传感器(诸如食盐传感器或糖传感器)检测的结果来估计使用配料和使用调料的量。各种浓度传感器设置在诸如量匙或量杯的烹调用具中,并且所检测的测量数据被传送到HMD1。
例如,在图1所示的示例中,HMD 1利用图像捕获透镜3a捕获用户8的烹调处理,并且通过图像分析,识别诸如食盐容器、量匙(茶匙/大汤匙)和煎锅的烹调用具(对象)。烹调用具可不仅通过对捕获图像的分析还通过读取设置在烹调用具上的IC标签、标记、二维码等来识别。随后,HMD 1识别用户8利用量匙从食盐容器舀食盐以及将食盐添加到(或者打算添加到)煎锅的动作,计算食盐的质量作为烹调指标并向用户通知所计算的指标,或者累积和合计添加到菜肴的食盐量以及向用户通知累积食盐量。
对于向用户通知烹调指标的方法,显示单元2的显示通知或耳机扬声器5a的音频通知是可能的。例如,如图1所示,HMD 1通过在显示单元2上显示指示每种配料和调料的卡路里值和质量的烹调指标显示30来通知用户8。通过显示在每次添加配料或调料时实时合计的烹调指标显示30,HMD 1能够向用户8通知烹调处理期间的烹调指标。此时,HMD 1  可显示叠加在捕获图像P上的烹调指标显示30,或者将显示单元2设置为半透明,并且在实际空间的场景可见的状态下显示烹调指标显示30。
另外,HMD 1还可将烹调指标与指定值进行比较,并且在烹调指标接近指定值时向用户呈现警告通知。指定值指的是限制指标,并且具体地是优先健康的指定值或者优先用户口味偏好的指定值。另外,HMD 1还可将烹调指标与烹调完成时的指定值进行比较,并且根据比较结果而将警告通知呈现给用户。
以上如此概述了根据本实施例的烹调指标显示。接下来,将参照图2至图4描述根据本实施例的呈现烹调指标显示的HMD 1的基本配置和操作处理。
《2.HMD的基本配置和操作处理》
<2-1.HMD的基本配置>
图2是示出根据本实施例的HMD 1的示例性内部配置的图。如图2所示,根据本实施例的HMD 1包括显示单元2、图像捕获单元3、照明单元4、音频输出单元5、音频输入单元6、主控制器10、图像捕获控制器11、图像捕获信号处理器12、捕获图像分析器13、照明控制器14、音频信号处理器15、显示控制器17、音频控制器18、通信单元21和存储单元22。
(主控制器10)
主控制器10由配备有例如中央处理单元(CPU)、只读存储器(ROM)、随机存取存储器(RAM)、非易失性存储器和接口单元的微型计算机构成,并且控制HMD 1的各个部件。
如图2所示,根据本实施例的主控制器10用作用量估计单元10a、烹调方法识别单元10b、指标计算单元10c、指标比较单元10d和通知控制单元10e。
用量估计单元10a基于传感器检测的信号而估计要烹调的配料和在烹调中使用的调料中的至少一个的用量,并且将估计结果提供到指标计算单元10c。传感器检测的信号指的是例如诸如图像捕获传感器(图像捕获单元3)捕获的捕获图像、各种浓度传感器检测的数值和气味传感器检测的气味数据的信息。
如之前所讨论的,各种浓度传感器(诸如食盐浓度传感器、糖浓度传  感器、离子浓度传感器和pH传感器)设置在诸如量匙或量杯的烹调用具中,并且所检测的测量数据被传送到HMD 1。
另外,气味传感器设置在HMD 1中或者外部(诸如在烹调用具中或厨房中),并且检测配料或调料中的气味成分。这里,气味传感器可使用例如多种类型的金属氧化物半导体传感器元件来配置。通常,金属氧化物半导体处于低导电率的状态,其中,空气中存在的氧被吸附在晶粒的表面上,并且该氧俘获晶体中的作为载体的电子。在该状态下,如果气味成分附于金属氧化物半导体的表面,则气味成分的氧化带走表面上吸附的氧,并且导电性增加。由于导电性的改变根据金属氧化物半导体和要添加的催化剂的类型和颗粒大小的差别而不同,因此通过利用该特性来识别气味成分。
在基于捕获图像进行估计的情况下,用量估计单元10a通过使用稍后讨论的捕获图像分析器13的分析结果而估计所使用的配料和调料的量。例如,用量估计单元10a能够基于字符识别或者通过读取附于保存配料或调料的容器或袋子的标签上的条形码或标记来识别配料/调料,并且估计所识别的使用配料/调料的量。此时,稍后将参照图3描述用量估计单元10a的配料/调料量估计方法。
图3是用于说明用量估计单元10a的使用配料/调料量估计方法的图。如图3所示,当从捕获图像P1提取到第一配料obj1、第二配料obj2和调料容器obj3时,用量估计单元10a对每个对象的字符区域R1、R2和R3进行字符识别,并且进行配料/调料识别和用量估计。在图3所示的示例中,第一配料obj1可被识别为“猪肝”,第二配料obj2为“韭菜”,并且调料容器obj3为“食盐”。另外,在图3所示的示例中,用量估计单元10a可从第一配料obj1的字符区域R1识别字符“净重:100g”,并且估计所使用的猪肝的量。
另外,用量估计单元10a也能够参考捕获图像的分析结果,并且基于所分析的配料/调料的诸如颜色、形状和大小的特征,识别配料/调料以及估计所识别的所使用配料/调料的量。在该情况下,用量估计单元10a还可使用存储在存储单元22(将诸如颜色、形状和大小的特征与配料/调料相关联的数据库)中的用量估计数据。
此外,用量估计单元10a还能够将来自捕获图像分析器13的捕获图像分析结果、气味传感器检测的气味数据和各种测量数据进行组合,以全面地估计所使用的配料/调料的量。
烹调方法识别单元10b确定烹调处理期间的烹调方法(诸如爆炒、烤、煮、炸、蒸、未加工或拌),并且将确定结果提供到指标计算单元10c。具体地,烹调方法识别单元10b可基于图像捕获传感器(图像捕获单元3)获取的捕获图像以及诸如红外传感器(热成像传感器)、温度传感器和湿度传感器的传感器检测的测量数据来识别烹调方法。例如,烹调方法识别单元10b还可根据从捕获图像识别的烹调用具(诸如煎锅、罐、天妇罗锅或蒸锅)来识别烹调方法。另外,烹调方法识别单元10b还可结合各种测量数据(诸如温度数据和湿度数据)来识别烹调方法。在该情况下,烹调方法识别单元10b还可使用存储在存储单元22(将烹调用具、温度数据等与烹调方法相关联的数据库)中的烹调方法识别数据。
指标计算单元10c根据用量估计单元10a估计的所使用配料/调料的量而计算指定烹调指标。另外,指标计算单元10c还能够根据烹调方法识别单元10b识别的烹调方法而对所计算的烹调指标进行转换。指标计算单元10c将所计算/转换的烹调指标提供到指标比较单元10d和通知控制单元10e。另外,所计算/转换的烹调指标累积在存储单元22中。
指标计算单元10c还可通过使用存储在存储单元22(将配料/调料量与烹调指标相关联的数据库)中的指标计算数据来计算烹调指标。例如,指标计算单元10c计算一茶匙食盐为“精制食食盐6g”,并且一撮食盐(用三根手指(拇指、食指和中指)拾取的量)为“精制食食盐1g”。
另外,由于根据营养成分在一些情况下烹调指标(卡路里和质量)根据烹调方法而改变,因此指标计算单元10c还可根据烹调方法识别单元10b识别的烹调方法对所计算的指标进行转换。例如,指标计算单元10c使用存储在存储单元22(将烹调方法与各个烹调指标的改变相关联的数据库)中的烹调指标转换数据对烹调指标进行转换。
另外,指标计算单元10c还能够对所计算/转换的烹调指标和累积在存储单元22中的烹调指标进行合计。
指标比较单元10d将从指标计算单元10c提供的烹调指标与指定值进行比较,并且将比较结果提供到通知控制单元10e。具体地,指标比较单元10d将烹调指标与优先健康的限制指标进行比较,并且判断烹调指标是否接近限制指标(在基于限制指标的指定范围内)。优先健康的限制指标指的是关于从健康角度一般可接受的烹调指标的摄入的上限值,或者替选地,指的是关于基于关于用户8的信息比如医疗信息(包括疾病历史和药物历史)、健康信息(包括当前身体状况信息)、遗传信息和体质信息(包  括过敏信息)可接受的烹调指标的摄入的上限值。关于用户8的信息比如医疗信息和健康信息可从存储单元22提取,或者经由通信单元21从指定服务器获取。另外,关于用户8的当前身体状况信息可利用设置在HMD1上的检测生物信息(诸如血压、体温、脉搏或脑电波)的各种生物传感器来检测,或者利用与HMD 1分离的并且用户拥有的生物信息检测装置(未示出)来检测。
另一方面,根据用户8的偏好,优先健康的限制指标不一定是最优的,因此指标比较单元10d还可将烹调指标与优先用户8的偏好的限制指标进行比较,并且判断烹调指标是否接近限制指标(在基于限制指标的指定范围内)。
另外,当可获取烹调完成时的限制指标(上限值)时,指标比较单元10d还可将烹调指标与烹调完成时的限制指标(上限值)进行比较。例如,为了避免当添加芝士、干腌火腿或调味汁以完成烹调时食盐含量将超过上限值的情形,HMD 1在烹调处理期间向用户通知烹调完成时的限制指标(上限值)与当前烹调指标(累积菜肴指标)之间的比较结果。因此,用户8能够避免在烹调时添加过多的食盐。注意,可基于当前正烹调的菜肴的菜谱数据或者用户8指定的菜肴名称来获取烹调完成时的限制指标(上限值)。
通知控制单元10e施加控制以向用户8通知从指标计算单元10c提供的烹调指标和从指标比较单元10d提供的比较结果。对用户8的通知可以是显示通知或音频通知。在显示通知的情况下,通知控制单元10e生成指示烹调指标的图像数据(例如,图1所示的烹调指标显示30)并且将其输出到显示控制器17,而在音频通知的情况下,通知控制单元10e生成使得烹调指标成为声音的音频信号并且将其输出到音频控制器18。
另外,通知控制单元10e基于从指标比较单元10d提供的比较结果而施加控制,以在烹调指标接近限制指标(在基于限制指标的指定范围内)时呈现警告通知。对用户8的警告通知可以是显示通知、音频通知、振动通知等。在显示通知的情况下,通知控制单元10e生成指示警告的图像数据(例如,图6所示的警告显示35)并且将其输出到显示控制器17,而在音频通知的情况下,通知控制单元10e生成警报声音并且将其输出到音频控制器18。另外,在振动通知的情况下,通知控制单元10e生成用于驱动振动单元的控制信号并且将其输出到设置在HMD 1中的振动单元(未示出)。
(图像捕获单元)
图像捕获单元3包括由图像捕获透镜3a、光圈、缩放透镜、聚焦透镜等构成的透镜子系统、使得透镜子系统进行聚焦操作和缩放操作的驱动子系统、通过对利用透镜子系统获得的捕获光的光电转换而生成图像捕获信号的固态图像传感器阵列等。固态图像传感器阵列可例如由电荷耦合器件(CCD)传感器阵列或互补金属氧化物半导体(CMOS)传感器阵列来实现。
(图像捕获控制器)
图像捕获控制器11基于来自主控制器10的指令而控制图像捕获单元3和图像捕获信号处理器12的操作。例如,图像捕获控制器11控制图像捕获单元3和图像捕获信号处理器12的操作的接通/关断。图像捕获控制器11还被配置成施加控制(电机控制),该控制使得图像捕获单元3执行诸如自动对焦、自动曝光调整、光圈调整和缩放的操作。图像捕获控制器11还配备有定时发生器,并且利用定时发生器针对固态图像传感器以及图像捕获信号处理器12的采样保持/AGC电路和视频A/D转换器生成的定时信号而控制信号处理操作。另外,该定时控制实现了对图像捕获帧速率的可变控制。
此外,图像捕获控制器11控制固态图像传感器和图像捕获信号处理器12中的图像捕获灵敏度和信号处理。例如,作为图像捕获灵敏度控制,图像捕获控制器11能够进行对从固态图像传感器读出的信号的增益控制,设置黑水平,控制用于在数字数据阶段的图像捕获信号处理的各种系数,控制抖动校正处理的校正幅值等。
(图像捕获信号处理器)
图像捕获信号处理器12配备有采样保持/自动增益控制(AGC)电路和视频模拟/数字(A/D)转换器,该采样保持/自动增益控制(AGC)电路对由图像捕获单元3的固态图像传感器获得的信号施加增益控制和波形整形。因此,图像捕获信号处理器12获得图像捕获信号作为数字数据。图像捕获信号处理器12还对图像捕获信号进行白平衡处理、亮度处理、色度信号处理、抖动校正处理等。
(捕获图像分析器)
捕获图像分析器13是用于获取外部信息的配置的示例。具体地,捕获图像分析器13对由图像捕获单元3捕获的并且经图像捕获信号处理器  12处理的图像数据(捕获图像)进行分析,并且获得关于包括在图像数据中的图像的信息。
具体地,捕获图像分析器13例如对图像数据进行诸如点检测、线/边缘检测和区域分割的分析,并且将分析结果输出到主控制器10的用量估计单元10a和烹调方法识别单元10b。
(照明单元、照明控制器)
照明单元4包括图1所示的光发射器4a和使得光发射器4a(例如,LED)发光的光发射电路。照明控制器14根据主控制器10的控制使得照明单元4执行发光操作。通过如图1所示将照明单元4中的光发射器4a附接为在前方提供照明的单元,照明单元4在用户的视线方向上进行照明操作。
(音频输入单元、音频信号处理器)
音频输入单元6包括图1所示的麦克风6a和6b以及麦克放大单元和A/D转换器,该麦克放大单元和A/D转换器对麦克风6a和6b获得的音频信号进行放大和处理,并且将音频数据输出到音频信号处理器15。音频信号处理器15对音频输入单元6获得的音频数据执行诸如去噪和源分离的处理。然后将处理后的音频数据提供到主控制器10。为根据本实施例的HMD 1配备音频输入单元6和音频信号处理器15实现了例如来自用户的话音输入。
(显示控制器)
显示控制器17根据来自主控制器10的控制而进行驱动控制,以在显示单元2上显示从通知控制单元10e提供的图像数据。显示控制器17可由用于实现被实现为例如液晶显示器的显示单元2中的显示的像素驱动电路构成。显示控制器17还能够控制显示单元2的每个像素的透明度,并且使得显示单元2处于透视状态(透明状态或半透明状态)。另外,显示控制器17可包括例如诸如视频处理器、数字信号处理器和D/A转换器的部件,并且可对图像数据进行亮度水平调整、颜色校正、对比度调整、锐度(边缘增强)调整等以进行显示。
(显示单元)
显示单元2在显示控制器17的控制下显示图像数据。具体地,根据本实施例的显示单元2呈现烹调指标显示、警告显示等。
(音频控制器)
音频控制器18根据来自主控制器10的控制而施加控制,以从音频输出单元5输出从通知控制单元10e提供的音频信号数据。另外,音频控制器18对要输出的音频信号数据进行音量调整、声音质量调整、音响效果等。
(音频输出单元)
音频输出单元5包括图1所示的一对耳机扬声器5a和用于耳机扬声器5a的放大电路。另外,音频输出单元5可被配置为所谓的骨传导扬声器。音频输出单元5根据来自音频控制器18的控制而输出(回放)音频信号数据。
(存储单元)
存储单元22是针对指定记录介质记录或回放数据的构件。存储单元22由例如硬盘驱动器(HDD)来实现。显然,诸如闪存或其它固态存储器、容纳固态存储器的存储卡、光盘、磁光盘和全息存储器的各种介质可被想到作为记录介质,并且将存储单元22配置为能够根据所实现的记录介质执行记录和回放就足够。
另外,根据本实施例的存储单元22存储数据,诸如用量估计单元10a使用的用量估计数据、烹调方法识别单元10b使用的烹调方法识别数据以及指标计算单元10c使用的指标计算数据和指标转换数据。另外,存储单元22存储关于用户8的信息,诸如医疗信息、健康信息、遗传信息和体质信息。
此外,存储单元22存储指标计算单元10c计算/转换的烹调指标。以此方式,通过累积在烹调处理期间计算的烹调指标,HMD 1能够生成对于完成的菜肴的更准确的烹调指标。完成的菜肴及其烹调指标(监视结果)彼此相关联地存储在存储单元22中。
(通信单元)
通信单元21将数据发送到外部装备以及从外部装备接收数据。通信单元21根据诸如无线局域网(LAN)、Wi-Fi(无线保真,注册商标)、红外通信或蓝牙(注册商标)的方案而直接或经由网络接入点与外部装备无线地通信。
根据本实施例的通信单元21接收来自设置有例如浓度传感器的烹调  用具的测量数据。
以上如此详细描述了根据本实施例的HMD 1的内部配置。注意,尽管音频输出单元5、音频输入单元6、音频信号处理器15和音频控制器18被示出为音频相关配置,但是不需要严格地设置所有上述单元。另外,虽然通信单元21被示出为HMD 1的配置的一部分,但是不需要严格地设置通信单元21。
根据以上配置,在烹调处理期间,根据本实施例的HMD 1能够估计要烹调的配料或者在烹调中使用的调料的量,基于估计结果计算配料或调料的烹调指标,并且实时地向用户通知所计算的烹调指标。另外,通过累积在烹调处理期间计算的烹调指标,HMD 1能够生成对于完成的菜肴的更准确的烹调指标。接下来,将描述根据本实施例的HMD 1的操作处理。
<2-2.HMD的操作处理>
如上所述,根据本实施例的HMD 1由用户8佩戴,并且在用户8烹调时实时地向用户通知烹调指标。在下文中将参照图4具体描述由这样的HMD 1进行的烹调指标通知。
图4是示出根据本实施例的HMD 1的烹调指标显示处理的流程图。如图4所示,首先,在步骤S103中,HMD 1利用图像捕获单元3开始对烹调处理进行成像。
接下来,在步骤S106中,HMD 1的用量估计单元10a基于图像捕获单元3捕获的烹调处理的捕获图像,估计要烹调的配料或在烹调中使用的调料的量。
随后,在步骤S109中,指标计算单元10c根据用量估计单元10a估计的所使用配料或调料的量,生成配料或调料的烹调指标A。
接下来,在步骤S112中,如果烹调方法识别单元10b识别了烹调方法,则指标计算单元10c根据烹调方法来转换所计算的烹调指标A。
随后,在步骤S115中,通知控制单元10e指示显示控制器17在显示单元2上显示从指标计算单元10c提供的烹调指标(烹调指标A的当前值)。替选地,如果指标比较单元10d将烹调指标A与指定限制指标(上限值)进行比较,则通知控制单元10e可指示显示控制器17在显示单元2上显示比较结果(烹调指标A的当前值相对于上限值的比率,P%)。
接下来,在步骤S118中,通知控制单元10e判断以上P%(烹调指  标A的当前值相对于上限值的比率)是否是90%或更大。
在低于90%的情况下(S118/否),在步骤S121中,通知控制单元10e施加控制以正常显示P%。
另一方面,在90%或更大的情况下(S118/是),在步骤S124中,通知控制单元10e判断P%是否是100+a(阿尔法)%或更大。换言之,通知控制单元10e判断烹调指标A的当前值是否超过上限值+a(阿尔法)。
在低于100+a%的情况下(S124/否),在步骤S130中,通知控制单元10e指示显示控制器17或音频控制器18从显示单元2产生警告显示或者从音频输出单元5产生警告通告。因此,当烹调指标A的当前值在90%与100+a%之间时,HMD1能够警告用户。
另一方面,在100+a%或更大的情况下(S124/是),在步骤S127中,通知控制器10e指示显示控制器17或音频控制器18从显示单元2产生停止显示或者从音频输出单元5产生停止通告。
停止通知(禁止通知)具有比警告通知更高的警报水平。例如,通知控制单元10e可使得显示单元2以大字母显示“不要添加”,或者使得音频输出单元5输出警告声音,直到用户停止添加配料或调料为止(直到从图像捕获单元3的视角移除配料或调料为止)。另外,如果动了调料容器的盖子,则通知控制单元10e还可将来自HMD 1的命令传送到调料容器以使得盖子关闭,从而自动关闭调料容器的盖子,并且禁止调料被添加到菜肴。
随后,在步骤S133中,主控制器10判断是否添加了配料或调料。例如,如果基于图像捕获透镜3a捕获的捕获图像提取到用户打算将配料或调料添加到诸如煎锅的烹调用具的动作,则判断添加了配料或调料。
如果添加了配料或调料(S133/是),则在步骤S106中,用量估计单元10a估计添加的配料或调料的量,并且在以下的步骤S109中,指标计算单元10c生成配料或调料的烹调指标A。此时,指标计算单元10c通过将当前计算的烹调指标的总值与从烹调开始的累积(总)烹调指标相加来生成烹调指标A的当前值。此后,从S112至S133重复以上处理。
如果没有添加配料或调料(S133/否),则判断烹调完成,并且烹调指标通知处理结束。
以上如此具体描述了根据本实施例的烹调指标显示处理。
《3.屏幕显示示例》
接下来,将参照图5至图7描述根据本实施例的烹调指标的屏幕显示示例。如上所述,根据本实施例的HMD 1能够在烹调处理期间实时地显示配料和调料的烹调指标,从而支持用户8的饮食生活方式。
<3-1.指标显示>
图5A是示出在添加配料的情况下的烹调指标的示例屏幕显示的图。图5A示出了当基于对于捕获图像P3的图像分析结果而将从图3所示的捕获图像P1提取和识别的第一配料obj1(猪肝)添加到作为从捕获图像P3提取的对象的煎锅obj5时显示的烹调指标显示31。根据本实施例的HMD 1从烹调开始连续地捕获烹调处理(即,捕获一系列烹调操作),并且存储从捕获图像提取的诸如配料、调料容器和烹调用具的各个对象的诸如颜色、形状和大小的特征,从而实现了跟踪。因此,HMD 1能够连续地观察用户8在烹调处理期间添加(加入)了什么配料和调料。
图5A所示的烹调指标显示31包括用于第一配料obj1(猪肝)的卡路里显示和营养成分显示。通过从图3所示的捕获图像P1对标签进行字符识别而将第一成分obj1估计为“猪肝,100g”。因此,指标计算单元10c能够计算指示“猪肝,100g”的卡路里和营养成分的烹调指标。
随后,随着烹调进行并且将其它配料添加到煎锅,指标计算单元10c针对每种配料计算烹调指标,并且对所计算的菜肴指标进行合计。
接下来,将参照图5B描述对于调料的烹调指标的显示。图5B是示出在添加调料的情况下的烹调指标的示例屏幕显示的图。如图5B的上部所示,在烹调处理期间,如果在用户8利用量匙从例如食盐的调料容器舀食盐时捕获图像,则用量估计单元10a基于对于所捕获的捕获图像P5的图像分析结果而识别调料容器obj3和量匙obj7。由于调料容器obj3是从图3所示的捕获图像P1已提取和识别的“食盐”调料容器obj3,因此用量估计单元10a能够根据用量匙obj7舀了多少而估计所使用的食盐的量。注意,调料的用量估计不限于这样的图像分析,并且如果量匙设置有例如食盐浓度传感器,则用量估计单元10a还可基于从量匙传送的估计数据而估计所使用的食盐的量。
接下来,如果基于对于图5B的下部所示的捕获图像P6的图像分析结果而提取到打算将利用量匙obj7所舀的食盐添加到煎锅obj5的动作,则指标计算单元10c计算所添加的调料(这里为“食盐”)的烹调指标。 
随后,通知控制单元10e指示显示控制器17在显示单元2上显示包括所计算的烹调指标的显示的烹调指标显示33。
如上所述,根据本实施例的HMD 1能够连续地观察烹调处理,计算要烹调的配料和在烹调中使用的调料的烹调指标,并且通知用户8。注意,HMD 1的通知不限于所计算的烹调指标的通知,并且也可以是基于所计算的烹调指标与指定值的比较结果的警告通知或比较结果通知。在下文中,作为示例,将参照图6和图7描述基于烹调指标与指定值的比较结果的屏幕显示。
<3-2.基于比较结果的显示>
(3-2-1.警告显示)
图6是示出根据本实施例的警告显示的示例图像显示的图。基于对于图6所示的捕获图像P7的图像分析结果,指标计算单元10c计算指示利用量匙obj7添加到煎锅obj5的食盐的量的烹调指标,并且将所计算的烹调指标提供到指标比较单元10d。此时,指标计算单元10c还可通过将指示所添加的食盐量的烹调指标与指示在烹调处理期间累计的使用食盐的总量的烹调指标相加来计算累积烹调指标。
随后,指标比较单元10d将指标计算单元10c计算的烹调指标与指定值进行比较。例如,如之前描述的,指定值与其进行比较的是优先健康的指定上限值或者优先口味偏好的指定上限值。
随后,基于从指标比较单元10d提供的比较结果,如果指标计算单元10c计算的指示食盐量的烹调指标接近指定值,则通知控制单元10e使得显示单元2显示指示警告“食盐量超过限制!”的警告显示35,如图6所示。这里,例如,接近指定值指的是烹调指标指示的食盐量是相对于上限值从90%至100+a%的比率。
另外,如果烹调指标接近然后超过指定值,并且具体地达到等于或大于相对于上限值的100+a%的比率,则通知控制单元10e还可使得显示单元2显示指示警告“不允许更多食盐”的禁止显示。
(3-2-2.比较结果显示)
如上所述,当指定烹调指标接近指定值时,通知控制单元10e能够呈现警告显示以及警告用户8。然而,预期如下一些情况:其中,虽然可向用户通知食盐含量或糖含量超过上限值,但是对于完成的菜肴不添加配料是不期望的,诸如当最后添加重要的配料以完成烹调时。因此,根据本  实施例的HMD 1的指标比较单元10d还能够将指标计算单元10c计算的烹调指标与烹调完成时的限制指标(上限值)进行比较,并且通过利用通知控制单元10e向用户8通知比较结果,能够呈现考虑了完成时的上限值的通知。在下文中,将参照图7描述这种比较结果通知的示例。
图7是示出根据本实施例的比较结果通知的示例屏幕显示的图。如图7所示,基于指标比较单元10d的比较结果,通知控制单元10e指示显示控制器17使得显示单元2显示指示当前烹调指标相对于烹调完成时的上限值的比率的条形显示37。在图7所示的示例中,条形显示37被重叠在捕获图像P9上,但是显示控制器17还可控制显示单元2的透明度并且呈现条形显示37的AR显示。
因此,用户8能够掌握烹调指标的当前比率,并且确认在烹调时不添加过多的特定调料或配料。注意,在图7所示的示例中,条形显示37重叠在捕获图像P9上,但是显示控制器17还可控制显示单元2的透明度并且呈现条形显示37的AR显示。
《4.补充注释》
如之前所述,在烹调处理期间,根据本实施例的HMD 1能够计算要烹调的配料和在烹调中使用的调料的烹调指标,并且实时地向用户8通知所计算的烹调指标。另外,通过连续地累积所计算的烹调指标,HMD1能够生成对于完成的菜肴的更准确烹调指标。此时,将作为补充注释描述以此方式生成的烹调指标的使用示例。
用于菜肴的烹调指标用于例如在吃和喝时向用户通知菜肴的卡路里和营养成分。通过在吃和喝时向用户通知菜肴的卡路里和营养成分,用户能够直观地掌握摄取的卡路里和营养成分。
吃和喝时的卡路里和营养成分的这种通知还可由HMD 1的通知控制单元10e来进行。具体地,通过包括图8所示的主控制器10’,HMD 1能够使用在烹调处理期间生成的烹调指标以在吃和喝时向用户8通知菜肴的烹调指标。
<4-1.主控制器的功能配置>
如图8所示,主控制器10’用作菜肴确定单元10f、烹调指标获取单元10g、饮食指标计算单元10h、饮食指标比较单元10i和通知控制单元10e。菜肴确定单元10f基于图像捕获单元3捕获的要享用的菜肴的捕获图像的分析结果(诸如菜肴的颜色、形状和大小的特征)而确定菜肴和菜  肴的数量。菜肴确定单元10f的菜肴确定方法不仅可基于捕获图像分析结果,而且可以是基于附于盛菜肴的盘子的IC标签、标记等的扫描结果的确定方法。
烹调指标获取单元10g获取菜肴确定单元10f确定的菜肴的烹调指标。此时,假设如下情况:其中,在烹调处理期间图2所示的指标计算单元10c计算的烹调指标累积在存储单元22中并且与完成菜肴的图像和菜肴的名称相关联地存储在数据库中。因此,烹调指标获取单元10g能够从存储单元22获取烹调指标。
饮食指标计算单元10h计算用户8享用的食物和饮料的指标。具体地,饮食指标计算单元10h基于图像捕获单元3捕获的捕获图像的分析结果,计算用户8享用的食物或饮料的部分的指标。所享用的食物或饮料的指标指的是指示摄入卡路里(换言之)以及摄入的营养成分的质量的指标。
饮食指标比较单元10i将饮食指标计算单元10h计算的饮食指标与指定值进行比较。指定值指的是例如一天中摄入的卡路里的上限值、一天中的营养成分摄入的上限值等。
通知控制单元10e指示显示控制器17或音频控制器18向用户8通知饮食指标计算单元10h计算的饮食指标和来自饮食指标比较单元10i的比较结果。 
以上如此具体描述了HMD 1的主控制器10’的功能配置。接下来,将参照图9描述基于菜肴的烹调指标在吃和喝时向用户通知菜肴的卡路里和营养成分的情况的操作处理。
<4-2.饮食指标通知处理>
图9是示出在吃和喝时当使用烹调指标向用户通知饮食指标时的操作处理的流程图。如图9所示,首先,在步骤S203中,HMD 1开始利用图像捕获单元3捕获饮食的图像。这里,假设饮食指标AE是用户8消耗的量。饮食指标AE指示摄入卡路里或摄入的营养成分的质量。
接下来,在步骤S206中,HMD 1的主控制器10’识别在吃和喝开始时饮食指标AE=0。
接下来,在步骤S209中,主控制器10’的菜肴确定单元10f基于图像捕获单元3捕获的捕获图像的分析结果而确定菜肴的数量,并且烹调指标获取单元10g获取每个菜肴的烹调指标A。菜肴确定单元10f还可在确定菜肴的数量时将编号分配给每个菜肴。另外,在从1到5编号的五个菜肴  的情况下,例如,烹调指标获取单元10g分别针对每个菜肴获取烹调指标A1至A5。
接下来,在步骤S212中,饮食指标计算单元10h基于对图像捕获单元3捕获的捕获图像的分析结果,指定用户8当前正享用的菜肴的编号i,并且将相应菜肴的烹调指标Ai合计作为摄入饮食指标AEi。换言之,饮食指标计算单元10h计算饮食指标AE(当前值)为等于AEi(刚刚享用的饮食指标)。另外,当摄入饮食指标AEi是附加饮食时,饮食指标计算单元10h计算饮食指标AE(当前值)为等于AE(饮食指标的先前总和)加上AEi(刚刚享用的饮食指标)。
接下来,在步骤S215中,主控制器10的通知控制单元10e指示显示控制器17在显示单元2上显示饮食指标计算单元10h计算的饮食指标AE的当前值。替选地,如果饮食指标比较单元10i对当前饮食指标AE与指定值(摄入上限值)进行比较,则通知控制单元10e可指示显示控制器17在显示单元2上显示比较结果(饮食指标AE的当前值相对于上限值的比率;Q%)。摄入上限值是例如一天中摄入的卡路里的上限值、一周中摄入的卡路里的上限值或者一天中的胆固醇的上限值等。这样的上限值还可基于用户的医疗信息和健康信息来设置。
接下来,在步骤S218中,通知控制单元10e判断以上Q%(饮食指标AE的当前值相对于摄入上限值的比率)是否是90%或更大。
在低于90%的情况下(S218/否),则在步骤S221中,通知控制单元10e施加控制以正常显示Q%。
另一方面,在等于90%或更大的情况下(S218/是),在步骤S224中,通知控制单元10e判断Q%是否是100+a(阿尔法)%或更大。换言之,通知控制单元10e判断饮食指标AE的当前值是否超过摄入上限值+a(阿尔法)。
在低于100+a%的情况下(S224/否),在步骤S230中,通知控制器10e指示显示控制器17或音频控制器18从显示单元2产生警告显示或者从音频输出单元5产生警告通告。因此,在饮食指标AE的当前值在90%与100+a%之间的情况下,HMD 1向用户发出警告。
另一方面,在100+a%或更大的情况下(S224/是),在步骤S227中,通知控制单元10e指示显示控制器17或音频控制器18从显示单元2产生停止显示或从音频输出单元5产生停止通告。
停止通知(禁止通知)具有高于警告通知的警报水平。例如,通知控制单元10e可使得显示单元2以大字母显示“停止吃”,或者使得音频输出单元5输出警告声音直到用户停止吃为止。
随后,在步骤S233中,主控制器10’判断是否存在附加饮食。例如,如果基于图像捕获透镜3a捕获的捕获图像而提取到用户打算继续吃或喝的动作,则判断存在附加饮食。
如果存在附加饮食(S233/是),则在步骤S212中,饮食指标计算单元10h基于正附加享用的菜肴i的烹调指标Ai而计算饮食指标AE(当前值)为等于AE(饮食指标的先前总量)加上AEi(刚刚享用的饮食指标)。此后,从S215至S233重复以上处理。
如果不存在附加饮食(S233/否),则判断吃和喝结束,并且饮食指标通知处理结束。
《5.结论》
如上所述,采用根据本实施例的HMD 1,可以计算烹调处理期间的指标,并且在烹调的同时实时地向用户通知烹调指标。另外,烹调指标可根据用于菜肴的烹调方法而进行转换。
另外,HMD 1能够基于从将当前烹调指标与指定值进行比较得到的比较结果而呈现警告通知或禁止通知,并且向用户通知烹调指标的当前值相对于指定值的比率等。
此外,由于HMD 1连续观察烹调处理,计算要烹调的配料和在烹调中使用的调料的烹调指标,并且累积所计算的烹调指标,因此HMD 1能够生成对于完成的菜肴的更准确的烹调指标。
以上如此参照附图详细描述了本技术的优选实施例。然而,本公开不限于这样的示例。对本公开的领域的技术人员来说清楚的是,在权利要求阐述的技术思想的范围内可进行各种修改或变更,并且应理解,这样的修改或变更显然属于本公开的技术范围。
例如,可以创建用于使得诸如置于HMD 1中的CPU、ROM和RAM的硬件呈现先前讨论的HMD 1的功能的计算机程序。还提供了使得存储这样的计算机程序的计算机可读存储介质。
另外,在上述各个实施例中,虽然HMD 1用作信息处理装置的示例,但是根据本实施例的信息处理装置不限于HMD 1,并且也可以是由例如  智能电话和眼镜型显示器形成的显示控制系统。智能电话(信息处理装置)可以以有线或无线方式连接到眼镜型显示器,并且能够传送和接收数据。
这里,与图1所示的HMD 1类似,眼镜型显示器包括具有框架结构的佩戴单元,该框架结构从头的任一侧开始围绕头的后部包裹半周,并且通过放置在任一耳朵的耳廓上而由用户佩戴。另外,眼镜型显示器被配置成使得在佩戴状态下,用于左眼和右眼的一对显示单元被放置在紧挨在用户的任一眼睛的前方,或者换言之,放置在普通眼镜的透镜所处的位置。通过控制显示单元2的液晶面板的透明度,HMD 1能够设置透视状态,或者换言之,设置透明或半透明状态,因此,即使用户如眼镜一样连续佩戴HMD 1也不会损害日常活动。
另外,与图1所示的HMD 1类似,眼镜型显示器设置有用于在佩戴状态下捕获用户的注视方向的图像捕获透镜。眼镜型显示器将捕获图像传送到智能电话(信息处理装置)。
智能电话(信息处理装置)包括与主控制器10类似的功能,并且根据捕获图像而估计要烹调的配料和所使用的调料的量,并且生成指示所估计的烹调指标的烹调指标显示图像。另外,智能电话(信息处理装置)将所生成的烹调指标显示图像传送到眼镜型显示器,并且烹调指标显示图像显示在眼镜型显示器的显示单元上。
对于眼镜型装置还可想到如下应用,该眼镜型装置虽然形状与眼镜型显示器类似,但是不包括显示功能。在该情况下,由设置在眼镜型装置上的捕获佩戴者的(用户的)注视方向的摄像装置来捕获烹调处理,并且将捕获图像传送到智能电话(信息处理装置)。随后,智能电话(信息处理装置)基于显示在智能电话的显示器上的捕获图像中所示的烹调处理而生成指示烹调指标的烹调指标显示图像。
此外,虽然上述实施例描述了用量估计单元10a确定所使用的配料和调料的量以及烹调方法识别单元10b基于来自HMD 1的捕获图像分析器13的捕获图像分析结果来识别烹调方法,但是也可在云中进行捕获图像分析处理。HMD 1经由通信单元21将烹调处理的捕获图像发送到云,接收在云(例如,分析服务器上)中分析的结果,并且基于该结果,利用用量估计单元10a和烹调方法识别单元10b进行用量估计和烹调方法识别。
另外,本技术也可如下进行配置。
(1)一种信息处理装置,包括:
估计单元,被配置成基于传感器检测的信号来估计要烹调的配料和在烹调中使用的调料中的至少一个的用量;
指标计算单元,被配置成根据所述估计单元的估计结果来计算指定烹调指标;以及
通知控制单元,被配置成执行控制以发出所述指标计算单元计算的烹调指标的通知。
(2)根据(1)所述的信息处理装置,还包括:
烹调方法识别单元,被配置成识别烹调方法,
其中,所述指标计算单元根据所述烹调方法识别单元识别的烹调方法而转换所计算的烹调指标。
(3)根据(1)或(2)所述的信息处理装置,还包括:
显示单元,被配置成根据所述通知控制单元的控制来显示所述烹调指标。
(4)根据(1)至(3)中任一项所述的信息处理装置,其中,
所述指标计算单元累积所计算的烹调指标。
(5)根据(1)至(4)中任一项所述的信息处理装置,其中,
当所述指标计算单元计算的烹调指标接近指定值时,所述通知控制单元执行控制以将警告通知呈现给用户。
(6)根据(5)所述的信息处理装置,其中,
所述指定值是限制指标,以及
将累积的菜肴指标与多个限制指标进行比较。
(7)根据(6)所述的信息处理装置,其中,
所述多个限制指标包括优先健康的指定值和优先口味的指定值。
(8)根据(4)所述的信息处理装置,其中,
所述通知控制单元根据所述指标计算单元累积的烹调指标与当烹调完成时的指定值的比较结果而向用户呈现警告通知。
(9)根据(1)至(8)中任一项所述的信息处理装置,其中,
所述烹调指标是所述要烹调的配料或所述调料的质量的值或卡路里  值。
(10)根据(9)所述的信息处理装置,其中,
所述质量的值或卡路里值是每种营养成分的质量的值或卡路里值。
(11)根据(1)至(10)中任一项所述的信息处理装置,其中,
所述传感器是浓度传感器、成像传感器或气味传感器。
(12)根据(1)至(11)中任一项所述的信息处理装置,其中,
所述信息处理装置是头戴型或眼镜型头戴显示器。
(13)根据(1)至(12)中任一项所述的信息处理装置,其中,
所述信息处理装置是智能电话、移动电话、平板电脑、个人计算机、数字摄像装置或数字摄像放像机。
(14)一种其中存储有程序的存储介质,所述程序使得计算机用作:
估计单元,被配置成基于传感器检测的信号来估计要烹调的配料和在烹调中使用的调料中的至少一个的用量;
指标计算单元,被配置成根据所述估计单元的估计结果来计算指定烹调指标;以及
通知控制单元,被配置成执行控制以发出所述指标计算单元计算的烹调指标的通知。
附图标记列表 
1 头戴型显示器(HMD)
2 显示单元
3 图像捕获单元 
3a 图像捕获透镜 
4 照明单元
4a 光发射器
5 音频输出单元 
6 音频输入单元 
10、10’ 主控制器
10a 用量估计单元 
10b 烹调方法识别单元
10c 指标计算单元 
10d 指标比较单元 
10e 通知控制单元 
10f 菜肴确定单元 
10g 烹调指标获取单元
10h 饮食指标计算单元
10i 饮食指标比较单元
11 图像捕获控制器
12 图像捕获信号处理器
13 捕获图像分析器
14 照明控制器 
15 音频信号处理器
16 输出数据处理器
17 显示控制器 
18 音频控制器 
21 通信单元
22 存储单元

Claims (14)

1.一种信息处理装置,包括:
估计单元,被配置成基于传感器检测的信号来估计烹调对象的配料和在烹调中使用的调料中的至少一个的用量;
指标计算单元,被配置成根据所述估计单元的估计结果来计算指定烹调指标;以及
通知控制单元,被配置成执行控制以发出所述指标计算单元计算的烹调指标的通知。
2.根据权利要求1所述的信息处理装置,还包括:
烹调方法识别单元,被配置成识别烹调方法,
其中,所述指标计算单元根据所述烹调方法识别单元识别的烹调方法来转换所计算的烹调指标。
3.根据权利要求1所述的信息处理装置,还包括:
显示单元,被配置成根据所述通知控制单元的控制来显示所述烹调指标。
4.根据权利要求1所述的信息处理装置,其中,
所述指标计算单元累积所计算的烹调指标。
5.根据权利要求1所述的信息处理装置,其中,
当所述指标计算单元计算的烹调指标接近指定值时,所述通知控制单元执行控制以将警告通知呈现给用户。
6.根据权利要求5所述的信息处理装置,其中,
所述指定值是限制指标,以及
将累积的菜肴指标与多个限制指标进行比较。
7.根据权利要求6所述的信息处理装置,其中,
所述多个限制指标包括优先健康的指定值和优先口味的指定值。
8.根据权利要求4所述的信息处理装置,其中,
所述通知控制单元根据所述指标计算单元累积的烹调指标与当烹调完成时的指定值的比较结果来向用户呈现警告通知。
9.根据权利要求1所述的信息处理装置,其中,
所述烹调指标是所述烹调对象的配料或所述调料的质量的值或卡路里值。
10.根据权利要求9所述的信息处理装置,其中,
所述质量的值或卡路里值是每种营养成分的质量的值或卡路里值。
11.根据权利要求1所述的信息处理装置,其中,
所述传感器是浓度传感器、成像传感器或气味传感器。
12.根据权利要求1所述的信息处理装置,其中,
所述信息处理装置是头戴型或眼镜型头戴显示器。
13.根据权利要求1所述的信息处理装置,其中,
所述信息处理装置是智能电话、移动电话、平板电脑、个人计算机、数字摄像装置或数字摄像放像机。
14.一种其中存储有程序的存储介质,所述程序使得计算机用作:
估计单元,被配置成基于传感器检测的信号来估计烹调对象的配料和在烹调中使用的调料中的至少一个的用量;
指标计算单元,被配置成根据所述估计单元的估计结果来计算指定烹调指标;以及
通知控制单元,被配置成执行控制以发出所述指标计算单元计算的烹调指标的通知。
CN201380073632.4A 2013-02-28 2013-12-11 信息处理装置和存储介质 Pending CN105009165A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013039356 2013-02-28
JP2013-039356 2013-02-28
PCT/JP2013/083229 WO2014132521A1 (ja) 2013-02-28 2013-12-11 情報処理装置および記憶媒体

Publications (1)

Publication Number Publication Date
CN105009165A true CN105009165A (zh) 2015-10-28

Family

ID=51427807

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380073632.4A Pending CN105009165A (zh) 2013-02-28 2013-12-11 信息处理装置和存储介质

Country Status (5)

Country Link
US (1) US20160005329A1 (zh)
EP (1) EP2963612B1 (zh)
JP (1) JP6299744B2 (zh)
CN (1) CN105009165A (zh)
WO (1) WO2014132521A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108668120A (zh) * 2017-03-28 2018-10-16 松下电器(美国)知识产权公司 显示装置、显示方法以及程序

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6197366B2 (ja) 2013-05-23 2017-09-20 ソニー株式会社 情報処理装置及び記憶媒体
US9633504B2 (en) 2013-11-22 2017-04-25 Michael J Kline System, method, and apparatus for purchasing, dispensing, or sampling of products
US9527716B2 (en) 2013-11-22 2016-12-27 Michael J. Kline System, method, and apparatus for purchasing, dispensing, or sampling of products
US9701530B2 (en) 2013-11-22 2017-07-11 Michael J. Kline System, method, and apparatus for purchasing, dispensing, or sampling of products
JP6437257B2 (ja) * 2014-09-19 2018-12-12 株式会社日立ソリューションズ 作業工程学習支援システム
US10657780B1 (en) 2015-01-29 2020-05-19 Transparensee Llc System, method, and apparatus for mixing, blending, dispensing, monitoring, and labeling products
JP2016139356A (ja) * 2015-01-29 2016-08-04 日本電信電話株式会社 調理支援装置、調理支援方法、及び調理支援プログラム
JP6994185B2 (ja) * 2015-12-25 2022-01-14 Funfam株式会社 映像表示機能付き食器システム及び食事関連資材の一つとしての食器
JP7299292B2 (ja) * 2016-04-19 2023-06-27 マクセル株式会社 作業支援装置
JP6610416B2 (ja) * 2016-04-28 2019-11-27 京セラドキュメントソリューションズ株式会社 調理レシピ提供システム
US10303947B2 (en) * 2017-01-27 2019-05-28 Panasonic Intellectual Property Management Co., Ltd. Information processing apparatus and information processing method
EP3379475A1 (en) * 2017-03-23 2018-09-26 Panasonic Intellectual Property Management Co., Ltd. Information presentation apparatus and information presentation method
JP6831740B2 (ja) * 2017-04-10 2021-02-17 大和ハウス工業株式会社 食生活推定システム
JP6306785B1 (ja) * 2017-07-24 2018-04-04 クックパッド株式会社 情報処理システム、情報処理方法及び情報処理プログラム
CN108509593A (zh) * 2018-03-30 2018-09-07 联想(北京)有限公司 一种显示方法及电子设备、存储介质
CN112771560A (zh) * 2018-10-12 2021-05-07 索尼公司 信息处理设备、信息处理系统和信息处理方法以及程序
JP7013403B2 (ja) 2019-02-20 2022-01-31 Kddi株式会社 食材又は調味料の使用量を推定する情報装置、プログラム及び方法
CN109978351A (zh) * 2019-03-14 2019-07-05 刘强 一种基于图像采集处理的菜品评估系统
JP6692960B1 (ja) * 2019-03-29 2020-05-13 株式会社エヌ・ティ・ティ・データ 調理支援システム
JP7316831B2 (ja) * 2019-04-19 2023-07-28 株式会社Lixil 支援装置及び支援プログラム
CN112006569A (zh) * 2019-05-28 2020-12-01 佛山市南海弘宙木业有限公司 一种智能厨房
KR102200619B1 (ko) * 2019-10-11 2021-01-11 한국생산기술연구원 스마트 음식물 분석 시스템 및, 이를 이용한 분석 방법
WO2021162012A1 (ja) * 2020-02-13 2021-08-19 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 調理支援方法、調理支援装置、およびプログラム
CN117616248A (zh) * 2021-07-09 2024-02-27 麦克赛尔株式会社 增强现实显示装置和增强现实显示系统
US11838144B2 (en) * 2022-01-13 2023-12-05 Whirlpool Corporation Assisted cooking calibration optimizer

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1728154A (zh) * 2004-07-30 2006-02-01 美国强生公司 一种测量及控制个体食物摄入量的方法和装置
US20120179665A1 (en) * 2011-01-07 2012-07-12 Access Business Group International Llc Health monitoring system

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020133378A1 (en) * 2000-10-13 2002-09-19 Mault James R. System and method of integrated calorie management
JP2006195943A (ja) 2005-01-14 2006-07-27 Eetekku:Kk ナビゲーションシステム
US20080178749A1 (en) * 2007-01-25 2008-07-31 Stutman Peter S Remotely controlled system and method for the preparation of a user-defined food product or beverage
US8419433B2 (en) * 2008-04-15 2013-04-16 International Business Machines Corporation Monitoring recipe preparation using interactive cooking device
JP2010033326A (ja) 2008-07-29 2010-02-12 Nec Corp 食事・健康管理システム、方法及びプログラム
JP2011058782A (ja) * 2009-09-14 2011-03-24 Keio Gijuku 調理システム、この調理システムに用いられる調理器具、及び、調理システムセット
JP2011107768A (ja) * 2009-11-12 2011-06-02 Sharp Corp 食行動改善支援システム
JP5193988B2 (ja) * 2009-12-03 2013-05-08 東芝テック株式会社 調理補助端末及びプログラム
JP5560845B2 (ja) * 2010-03-30 2014-07-30 ソニー株式会社 情報処理装置、画像出力方法及びプログラム
US20110318717A1 (en) * 2010-06-23 2011-12-29 Laurent Adamowicz Personalized Food Identification and Nutrition Guidance System
WO2012115297A1 (en) * 2011-02-25 2012-08-30 Lg Electronics Inc. Analysis of food items captured in digital images
JP5843382B2 (ja) * 2011-05-10 2016-01-13 シャープ株式会社 食事管理装置および食事管理システム
US20130004923A1 (en) * 2011-06-10 2013-01-03 Aliphcom Nutrition management method and apparatus for a wellness application using data from a data-capable band
JP6069826B2 (ja) * 2011-11-25 2017-02-01 ソニー株式会社 画像処理装置、プログラム、画像処理方法及び端末装置
US20140095479A1 (en) * 2012-09-28 2014-04-03 Sherry S. Chang Device, method, and system for recipe recommendation and recipe ingredient management
US9189021B2 (en) * 2012-11-29 2015-11-17 Microsoft Technology Licensing, Llc Wearable food nutrition feedback system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1728154A (zh) * 2004-07-30 2006-02-01 美国强生公司 一种测量及控制个体食物摄入量的方法和装置
US20120179665A1 (en) * 2011-01-07 2012-07-12 Access Business Group International Llc Health monitoring system

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
PEI-YU CHI ET AL: "Enabling Calorie-Aware Cooking in a Smart Kitchen", 《THIRD INTERNATIONAL CONFERENCE,PERSUASIVE 2008 OULU,FINLAND,JUNE 2008》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108668120A (zh) * 2017-03-28 2018-10-16 松下电器(美国)知识产权公司 显示装置、显示方法以及程序
CN108668120B (zh) * 2017-03-28 2022-03-08 松下电器(美国)知识产权公司 显示装置、显示方法以及记录介质

Also Published As

Publication number Publication date
EP2963612B1 (en) 2020-06-24
WO2014132521A1 (ja) 2014-09-04
EP2963612A1 (en) 2016-01-06
US20160005329A1 (en) 2016-01-07
EP2963612A4 (en) 2016-10-12
JP6299744B2 (ja) 2018-03-28
JPWO2014132521A1 (ja) 2017-02-02

Similar Documents

Publication Publication Date Title
CN105009165A (zh) 信息处理装置和存储介质
CN105009128B (zh) 信息处理装置及存储介质
US10803315B2 (en) Electronic device and method for processing information associated with food
US20140315161A1 (en) Information processing apparatus and storage medium
US9881517B2 (en) Information processing device and storage medium
US9364106B1 (en) Apparatus and method for identifying, measuring and analyzing food nutritional values and consumer eating behaviors
CN104871236B (zh) 显示控制设备和方法
US20160148536A1 (en) Tracking Nutritional Information about Consumed Food with a Wearable Device
US20160143582A1 (en) Wearable Food Consumption Monitor
KR102209741B1 (ko) 음식과 관련된 정보를 처리하기 위한 전자 장치 및 방법
US20150313539A1 (en) Willpower Glasses (TM) -- A Wearable Food Consumption Monitor
JP7032072B2 (ja) 情報処理装置、情報処理方法、及びプログラム
CN106372401A (zh) 一种健康饮食管理方法及管理系统
WO2015160581A1 (en) Systems and methods for measuring calorie intake
US10772559B2 (en) Wearable food consumption monitor
US20190080629A1 (en) Monitoring food intake
KR20140103738A (ko) 섭취 영양소 연산 및 평가 방법
US11462006B2 (en) Systems and methods for monitoring consumption
JP2007122311A (ja) 栄養解析装置
JP2016162124A (ja) 調理法決定方法及び調理法決定装置
EP4296667A1 (en) Juice freshness monitoring method and system
WO2023247289A1 (en) Juice freshness monitoring method and system
JP2023146790A (ja) 情報処理装置、情報処理方法、及びプログラム
CN113367541A (zh) 一种交互式儿童智能餐盘及其管理系统
JP2020042401A (ja) 画像処理装置及び画像処理プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20151028