CN109345624A - 一种自动识别食物热量的估算方法及系统 - Google Patents

一种自动识别食物热量的估算方法及系统 Download PDF

Info

Publication number
CN109345624A
CN109345624A CN201811169452.7A CN201811169452A CN109345624A CN 109345624 A CN109345624 A CN 109345624A CN 201811169452 A CN201811169452 A CN 201811169452A CN 109345624 A CN109345624 A CN 109345624A
Authority
CN
China
Prior art keywords
food
information
model
target food
voxelization
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811169452.7A
Other languages
English (en)
Inventor
李宇欣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Health Technology Co Ltd
Original Assignee
Beijing Health Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Health Technology Co Ltd filed Critical Beijing Health Technology Co Ltd
Priority to CN201811169452.7A priority Critical patent/CN109345624A/zh
Publication of CN109345624A publication Critical patent/CN109345624A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

本发明提供一种自动识别食物热量的估算方法,包括:获取目标食物的深度信息,并根据所述深度信息建立该目标食物的三维模型,其中,所述深度信息包括:尺寸信息、形状信息、距离信息和点云数据信息;将所述三维模型体素化生成设定规格的体素化模型,并根据所述体素化模型计算目标食物的体积;获取目标食物的食物名称,并根据预设的食物名称与密度对应表查询得到目标食物的密度;根据所述体积和所述密度,计算得到目标食物的质量,并查询预设的热量表得到该目标食物的热量。本发明能解决现有人们对摄入食物需要手动计算热量,缺少自动识别食物热量的问题,能提高人们对食物热量计算的准确性和便捷性。

Description

一种自动识别食物热量的估算方法及系统
技术领域
本发明涉及计算机技术领域,尤其涉及一种自动识别食物热量的估算方法及系统。
背景技术
随着社会的发展,人们的饮食越来越丰盛,对于食物热量的摄取增加也来越多,热量摄入过剩,则会在体内贮存为脂肪,脂肪在体内的异常堆积,会导致肥胖和机体不必要的负担,并可成为心血管疾病、某些癌症、糖尿病等流行性疾病的危险因素。加上科技的发达使人们户外劳动的减少,这种吃多动少的生活型态,让许多人的身材越来越呈现肥胖的趋向。
尽管现在有些应用程式提供每日摄取热量等计算方法,以让使用者了解每日进食状况。但是,因为操作方面通常较为复杂,且能够持续每日不断手动纪录的使用者非常少,因而使得使用者在身材控制上的成效并不是那么的显著。因此,如何发展一种自动热量计算以解决手动纪录上的不便等问题,以让使用者能更加准确地了解每日热量摄取量,实为目前各界极欲解决的技术问题。
发明内容
本发明提供一种自动识别食物热量的估算方法及系统,解决现有人们对摄入食物需要手动计算热量,缺少自动识别食物热量的问题,能提高人们对食物热量计算的准确性和便捷性。
为实现以上目的,本发明提供以下技术方案:
一种自动识别食物热量的估算方法,包括:
获取目标食物的深度信息,并根据所述深度信息建立该目标食物的三维模型,其中,所述深度信息包括:尺寸信息、形状信息、距离信息和点云数据信息;
将所述三维模型体素化生成设定规格的体素化模型,并根据所述体素化模型计算目标食物的体积;
获取目标食物的食物名称,并根据预设的食物名称与密度对应表查询得到目标食物的密度;
根据所述体积和所述密度,计算得到目标食物的质量,并查询预设的热量表得到该目标食物的热量。
优选的,所述获取目标食物的深度信息,并根据所述深度信息建立该目标食物的三维模型,包括:
通过对目标食物进行图像识别以得到目标食物的特征点;
根据所述特征点形成所述点云数据信息和所述距离信息;
根据所述点云数据信息和所述距离信息生成三维模型。
优选的,所述获取目标食物的深度信息,并根据所述深度信息建立该目标食物的三维模型,还包括:
获取目标食物的尺寸信息和形状信息;
根据所述尺寸信息、所述形状信息、所述点云数据信息和所述距离信息生成三维模型。
优选的,所述根据所述体素化模型计算目标食物的体积,包括:
将所述体素化模型分割成卡片模型,并统计卡片模型对应的格子数;
根据预设的格子的对应体积和所述格子数,计算得到目标食物的体积。
优选的,所述将所述三维模型体素化生成设定规格的体素化模型,包括:
将所述三维模型通过2D-CNN编码网络、3D卷积LSTM网络和3D解码神经网络进地体素化,并生成32*32*32大小的体素化模型。
本发明还提供一种自动识别食物热量的估算系统,包括:
建模单元,用于获取目标食物的深度信息,并根据所述深度信息建立该目标食物的三维模型,其中,所述深度信息包括:尺寸信息、形状信息、距离信息和点云数据信息;
体素化单元,用于将所述三维模型体素化生成设定规格的体素化模型;
体积计算单元,用于根据所述体素化模型计算目标食物的体积;
密度获取单元,用于获取目标食物的食物名称,并根据预设的食物名称与密度对应表查询得到目标食物的密度;
热量计算单元,用于根据所述体积和所述密度,计算得到目标食物的质量,并查询预设的热量表得到该目标食物的热量。
优选的,所述建模单元包括:
特征提取单元,用于通过对目标食物进行图像识别以得到目标食物的特征点;
深度信息生成单元,用于根据所述特征点形成所述点云数据信息和所述距离信息;
第一模型生成单元,用于根据所述点云数据信息和所述距离信息生成三维模型。
优选的,所述建模单元还包括:第二模型生成单元;
所述深度信息生成单元还用于获取目标食物的尺寸信息和形状信息;
所述第二模型生成单元,用于根据所述尺寸信息、所述形状信息、所述点云数据信息和所述距离信息生成三维模型。
优选的,所述体积计算单元还用于将所述体素化模型分割成卡片模型,并统计卡片模型对应的格子数,并根据预设的格子的对应体积和所述格子数,计算得到目标食物的体积。
优选的,所述体素化单元还用于将所述三维模型通过2D-CNN编码网络、3D卷积LSTM网络和3D解码神经网络进地体素化,并生成32*32*32大小的体素化模型。
本发明提供一种自动识别食物热量的估算方法及系统,通过获取目标食物的深度信息以建立该目标食物的三维模型,并根据三维模型计算出该目标食物的体积,通过查表得到该目标食物的密度和单位热量值,进而计算得到该目标食物的质量和热量。解决现有人们对摄入食物需要手动计算热量,缺少自动识别食物热量的问题,能提高人们对食物热量计算的准确性和便捷性。
附图说明
为了更清楚地说明本发明的具体实施例,下面将对实施例中所需要使用的附图作简单地介绍。
图1:是本发明提供的一种自动识别食物热量的估算方法流程图。
具体实施方式
为了使本技术领域的人员更好地理解本发明实施例的方案,下面结合附图和实施方式对本发明实施例作进一步的详细说明。
针对当前人们对摄入食物的热量需要手动计算,缺少根据食物自动计算热量的问题。本发明提供一种自动识别食物热量的估算方法及系统,通过获取目标食物的深度信息以建立该目标食物的三维模型,并根据三维模型计算出该目标食物的体积,通过查表得到该目标食物的密度和单位热量值,进而计算得到该目标食物的质量和热量。解决现有人们对摄入食物需要手动计算热量,缺少自动识别食物热量的问题,能提高人们对食物热量计算的准确性和便捷性。
如图1所示,一种自动识别食物热量的估算方法,包括:
S1:获取目标食物的深度信息,并根据所述深度信息建立该目标食物的三维模型,其中,所述深度信息包括:尺寸信息、形状信息、距离信息和点云数据信息;
S2:将所述三维模型体素化生成设定规格的体素化模型,并根据所述体素化模型计算目标食物的体积;
S3:获取目标食物的食物名称,并根据预设的食物名称与密度对应表查询得到目标食物的密度;
S4:根据所述体积和所述密度,计算得到目标食物的质量,并查询预设的热量表得到该目标食物的热量。
在实际应用中,第一步,采集训练数据集。准备一个转盘和深度摄像头(IntelRealsense SR300),将目标食物与参照卡片放置在转盘中央,旋转一周,利用摄像头生成当前时刻的点云数据,最后进行点云融合,生成三维模型。第二步,训练模型。一个或多个角度拍摄彩色图片作为输入,深度摄像头生成的三维模型转化为体素化模型作为输出。第三步,计算体积。分割出卡片模型,统计卡片长度方向的格子数,根据实卡片长度,计算出一个格子的真实长度,假定一个卡片的厚度为一个格子厚度,计算出一个格子的真实体积,然后统计食物的格子数,计算出真实食物的体积。第四步,计算热量。结合食物名称根据密度表换算出给定食物的质量,并查询热量表换算出食物的热量。通过自动识别食物热量能够提高人们更好控制食物的摄入和热量计算,进而提高热量计算的准确性和便捷性。
所述获取目标食物的深度信息,并根据所述深度信息建立该目标食物的三维模型,包括:
S11:通过对目标食物进行图像识别以得到目标食物的特征点;
S12:根据所述特征点形成所述点云数据信息和所述距离信息;
S13:根据所述点云数据信息和所述距离信息生成三维模型。
具体地,基于图像的三维重建,较好的算法包括VisualSFM,OpenMVG,经典的Bundler,MVE。使用SIFT、SURF、FAST提取每张相片的特征点,并计算各个特征点的描述子,然后对特征点进行匹配,并使用相机的内外参数估计每个特征点的空间位置。然后将所有照片的特征点匹配到一个三维点云中。
所述获取目标食物的深度信息,并根据所述深度信息建立该目标食物的三维模型,还包括:
S14:获取目标食物的尺寸信息和形状信息;
S15:根据所述尺寸信息、所述形状信息、所述点云数据信息和所述距离信息生成三维模型。
所述根据所述体素化模型计算目标食物的体积,包括:
S21:将所述体素化模型分割成卡片模型,并统计卡片模型对应的格子数;
S22:根据预设的格子的对应体积和所述格子数,计算得到目标食物的体积。
所述将所述三维模型体素化生成设定规格的体素化模型,包括:将所述三维模型通过2D-CNN编码网络、3D卷积LSTM网络和3D解码神经网络进地体素化,并生成32*32*32大小的体素化模型。
可见,本发明提供一种自动识别食物热量的估算方法,通过获取目标食物的深度信息以建立该目标食物的三维模型,并根据三维模型计算出该目标食物的体积,通过查表得到该目标食物的密度和单位热量值,进而计算得到该目标食物的质量和热量。解决现有人们对摄入食物需要手动计算热量,缺少自动识别食物热量的问题,能提高人们对食物热量计算的准确性和便捷性。
本发明还提供一种自动识别食物热量的估算系统,包括:建模单元,用于获取目标食物的深度信息,并根据所述深度信息建立该目标食物的三维模型,其中,所述深度信息包括:尺寸信息、形状信息、距离信息和点云数据信息。体素化单元,用于将所述三维模型体素化生成设定规格的体素化模型。体积计算单元,用于根据所述体素化模型计算目标食物的体积。密度获取单元,用于获取目标食物的食物名称,并根据预设的食物名称与密度对应表查询得到目标食物的密度。热量计算单元,用于根据所述体积和所述密度,计算得到目标食物的质量,并查询预设的热量表得到该目标食物的热量。
进一步,所述建模单元包括:特征提取单元,用于通过对目标食物进行图像识别以得到目标食物的特征点。深度信息生成单元,用于根据所述特征点形成所述点云数据信息和所述距离信息。第一模型生成单元,用于根据所述点云数据信息和所述距离信息生成三维模型。
更进一步,所述建模单元还包括:第二模型生成单元;所述深度信息生成单元还用于获取目标食物的尺寸信息和形状信息;所述第二模型生成单元,用于根据所述尺寸信息、所述形状信息、所述点云数据信息和所述距离信息生成三维模型。
所述体积计算单元还用于将所述体素化模型分割成卡片模型,并统计卡片模型对应的格子数,并根据预设的格子的对应体积和所述格子数,计算得到目标食物的体积。
所述体素化单元还用于将所述三维模型通过2D-CNN编码网络、3D卷积LSTM网络和3D解码神经网络进地体素化,并生成32*32*32大小的体素化模型。
可见,本发明提供一种自动识别食物热量的估算系统,通过建模单元获取目标食物的深度信息以建立该目标食物的三维模型,并由体积计算单元根据三维模型计算出该目标食物的体积,通过密度获取单元查表得到该目标食物的密度,进而由热时计算单元计算得到该目标食物的质量和热量。解决现有人们对摄入食物需要手动计算热量,缺少自动识别食物热量的问题,能提高人们对食物热量计算的准确性和便捷性。
以上依据图示所示的实施例详细说明了本发明的构造、特征及作用效果,以上所述仅为本发明的较佳实施例,但本发明不以图面所示限定实施范围,凡是依照本发明的构想所作的改变,或修改为等同变化的等效实施例,仍未超出说明书与图示所涵盖的精神时,均应在本发明的保护范围内。

Claims (10)

1.一种自动识别食物热量的估算方法,其特征在于,包括:
获取目标食物的深度信息,并根据所述深度信息建立该目标食物的三维模型,其中,所述深度信息包括:尺寸信息、形状信息、距离信息和点云数据信息;
将所述三维模型体素化生成设定规格的体素化模型,并根据所述体素化模型计算目标食物的体积;
获取目标食物的食物名称,并根据预设的食物名称与密度对应表查询得到目标食物的密度;
根据所述体积和所述密度,计算得到目标食物的质量,并查询预设的热量表得到该目标食物的热量。
2.根据权利要求1所述的自动识别食物热量的估算方法,其特征在于,所述获取目标食物的深度信息,并根据所述深度信息建立该目标食物的三维模型,包括:
通过对目标食物进行图像识别以得到目标食物的特征点;
根据所述特征点形成所述点云数据信息和所述距离信息;
根据所述点云数据信息和所述距离信息生成三维模型。
3.根据权利要求2所述的自动识别食物热量的估算方法,其特征在于,所述获取目标食物的深度信息,并根据所述深度信息建立该目标食物的三维模型,还包括:
获取目标食物的尺寸信息和形状信息;
根据所述尺寸信息、所述形状信息、所述点云数据信息和所述距离信息生成三维模型。
4.根据权利要求3所述的自动识别食物热量的估算方法,其特征在于,所述根据所述体素化模型计算目标食物的体积,包括:
将所述体素化模型分割成卡片模型,并统计卡片模型对应的格子数;
根据预设的格子的对应体积和所述格子数,计算得到目标食物的体积。
5.根据权利要求4所述的自动识别食物热量的估算方法,其特征在于,所述将所述三维模型体素化生成设定规格的体素化模型,包括:
将所述三维模型通过2D-CNN编码网络、3D卷积LSTM网络和3D解码神经网络进地体素化,并生成32*32*32大小的体素化模型。
6.一种自动识别食物热量的估算系统,其特征在于,包括:
建模单元,用于获取目标食物的深度信息,并根据所述深度信息建立该目标食物的三维模型,其中,所述深度信息包括:尺寸信息、形状信息、距离信息和点云数据信息;
体素化单元,用于将所述三维模型体素化生成设定规格的体素化模型;
体积计算单元,用于根据所述体素化模型计算目标食物的体积;
密度获取单元,用于获取目标食物的食物名称,并根据预设的食物名称与密度对应表查询得到目标食物的密度;
热量计算单元,用于根据所述体积和所述密度,计算得到目标食物的质量,并查询预设的热量表得到该目标食物的热量。
7.根据权利要求6所述的自动识别食物热量的估算系统,其特征在于,所述建模单元包括:
特征提取单元,用于通过对目标食物进行图像识别以得到目标食物的特征点;
深度信息生成单元,用于根据所述特征点形成所述点云数据信息和所述距离信息;
第一模型生成单元,用于根据所述点云数据信息和所述距离信息生成三维模型。
8.根据权利要求7所述的自动识别食物热量的估算系统,其特征在于,所述建模单元还包括:第二模型生成单元;
所述深度信息生成单元还用于获取目标食物的尺寸信息和形状信息;
所述第二模型生成单元,用于根据所述尺寸信息、所述形状信息、所述点云数据信息和所述距离信息生成三维模型。
9.根据权利要求8所述的自动识别食物热量的估算系统,其特征在于,所述体积计算单元还用于将所述体素化模型分割成卡片模型,并统计卡片模型对应的格子数,并根据预设的格子的对应体积和所述格子数,计算得到目标食物的体积。
10.根据权利要求9所述的自动识别食物热量的估算系统,其特征在于,所述体素化单元还用于将所述三维模型通过2D-CNN编码网络、3D卷积LSTM网络和3D解码神经网络进地体素化,并生成32*32*32大小的体素化模型。
CN201811169452.7A 2018-10-08 2018-10-08 一种自动识别食物热量的估算方法及系统 Pending CN109345624A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811169452.7A CN109345624A (zh) 2018-10-08 2018-10-08 一种自动识别食物热量的估算方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811169452.7A CN109345624A (zh) 2018-10-08 2018-10-08 一种自动识别食物热量的估算方法及系统

Publications (1)

Publication Number Publication Date
CN109345624A true CN109345624A (zh) 2019-02-15

Family

ID=65308296

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811169452.7A Pending CN109345624A (zh) 2018-10-08 2018-10-08 一种自动识别食物热量的估算方法及系统

Country Status (1)

Country Link
CN (1) CN109345624A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110287207A (zh) * 2019-06-30 2019-09-27 北京健康有益科技有限公司 一种基于密度表的食物质量估测方法
CN110751620A (zh) * 2019-08-28 2020-02-04 宁波海上鲜信息技术有限公司 估算体积和重量的方法、电子设备及计算机可读存储介质
CN114066208A (zh) * 2021-11-11 2022-02-18 深圳市乐福衡器有限公司 一种食物质量的评价方法、系统、智能终端和存储介质
CN117773952A (zh) * 2024-02-23 2024-03-29 浙江强脑科技有限公司 仿生手控制方法、存储介质、控制装置和仿生手

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150332448A1 (en) * 2012-12-27 2015-11-19 Nuctech Company Limited Object detection methods, display methods and apparatuses
US20160150213A1 (en) * 2014-11-21 2016-05-26 Christopher M. MUTTI Imaging system for object recognition and assessment
CN106959309A (zh) * 2017-03-24 2017-07-18 中国农业科学院农业信息研究所 一种剩余食物的监测系统
CN107493390A (zh) * 2017-09-01 2017-12-19 陕西科技大学 一种移动设备自动识别热量摄入和消耗的方法、系统
US20180149583A1 (en) * 2015-07-29 2018-05-31 Do Yeon PI Method and apparatus for providing food information

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150332448A1 (en) * 2012-12-27 2015-11-19 Nuctech Company Limited Object detection methods, display methods and apparatuses
US20160150213A1 (en) * 2014-11-21 2016-05-26 Christopher M. MUTTI Imaging system for object recognition and assessment
US20180149583A1 (en) * 2015-07-29 2018-05-31 Do Yeon PI Method and apparatus for providing food information
CN106959309A (zh) * 2017-03-24 2017-07-18 中国农业科学院农业信息研究所 一种剩余食物的监测系统
CN107493390A (zh) * 2017-09-01 2017-12-19 陕西科技大学 一种移动设备自动识别热量摄入和消耗的方法、系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110287207A (zh) * 2019-06-30 2019-09-27 北京健康有益科技有限公司 一种基于密度表的食物质量估测方法
CN110751620A (zh) * 2019-08-28 2020-02-04 宁波海上鲜信息技术有限公司 估算体积和重量的方法、电子设备及计算机可读存储介质
CN110751620B (zh) * 2019-08-28 2021-03-16 宁波海上鲜信息技术有限公司 估算体积和重量的方法、电子设备及计算机可读存储介质
CN114066208A (zh) * 2021-11-11 2022-02-18 深圳市乐福衡器有限公司 一种食物质量的评价方法、系统、智能终端和存储介质
CN117773952A (zh) * 2024-02-23 2024-03-29 浙江强脑科技有限公司 仿生手控制方法、存储介质、控制装置和仿生手

Similar Documents

Publication Publication Date Title
CN109345624A (zh) 一种自动识别食物热量的估算方法及系统
US11538216B2 (en) Dynamically estimating light-source-specific parameters for digital images using a neural network
CN114514562B (zh) 预测性个性化三维身体模型
WO2020156148A1 (zh) Smpl参数预测模型的训练方法、计算机设备及存储介质
EP3381017B1 (en) Face reconstruction from a learned embedding
CN108597582B (zh) 一种用于执行Faster R-CNN神经网络运算的方法和装置
EP3165105A1 (en) Method for virtually selecting clothing
US20190014431A1 (en) Method for generating a customized/personalized head related transfer function
CN109219835A (zh) 三维打印的定制可穿戴物件的生成
WO2015123647A1 (en) Object ingestion through canonical shapes, systems and methods
CN109509535A (zh) 食物体积的获取方法、食物热量的获取方法、电子设备
CN108875813A (zh) 一种基于几何图像的三维网格模型检索方法
CN106846484A (zh) 一种基于双视图三维重建的食物体积估计方法
Olson et al. Experimental three-dimensional printing of a lower Palaeolithic handaxe: an assessment of the technology and analytical value
CN112053428A (zh) 一种识别食物所含营养信息的方法及装置
CN108492301A (zh) 一种场景分割方法、终端及存储介质
Kaashki et al. Deep learning-based automated extraction of anthropometric measurements from a single 3-D scan
EP4143787A1 (en) Photometric-based 3d object modeling
CN107610121B (zh) 一种肝脏统计形状模型初始位姿设定方法
US20230096013A1 (en) Body dimensions from two-dimensional body images
CN108537329B (zh) 一种利用Volume R-CNN神经网络进行运算的方法和装置
Liu et al. Automated binocular vision measurement of food dimensions and volume for dietary evaluation
US11580693B1 (en) Two-dimensional image collection for three-dimensional body composition modeling
Zhao et al. Localization and completion for 3D object interactions
CN112163988B (zh) 红外图像的生成方法、装置、计算机设备和可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190215