CN115335835A - 学习装置、生鲜品的收纳装置和程序 - Google Patents

学习装置、生鲜品的收纳装置和程序 Download PDF

Info

Publication number
CN115335835A
CN115335835A CN202180022760.0A CN202180022760A CN115335835A CN 115335835 A CN115335835 A CN 115335835A CN 202180022760 A CN202180022760 A CN 202180022760A CN 115335835 A CN115335835 A CN 115335835A
Authority
CN
China
Prior art keywords
environment
freshness
storage
learning
reward
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180022760.0A
Other languages
English (en)
Inventor
丹埜昭一
佐藤喜一郎
松井秀德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Daikin Industries Ltd
Original Assignee
Daikin Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daikin Industries Ltd filed Critical Daikin Industries Ltd
Publication of CN115335835A publication Critical patent/CN115335835A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D11/00Self-contained movable devices, e.g. domestic refrigerators
    • F25D11/003Transport containers
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00Arrangement or mounting of control or safety devices
    • F25D29/003Arrangement or mounting of control or safety devices for movable devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/217Validation; Performance evaluation; Active pattern learning techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2700/00Means for sensing or measuring; Sensors therefor
    • F25D2700/12Sensors measuring the inside temperature
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N33/00Investigating or analysing materials by specific methods not covered by groups G01N1/00 - G01N31/00
    • G01N33/02Food

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Software Systems (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Medical Informatics (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Thermal Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)
  • Devices That Are Associated With Refrigeration Equipment (AREA)
  • Food Preservation Except Freezing, Refrigeration, And Drying (AREA)
  • Manipulator (AREA)

Abstract

使用基于新鲜度传感器的生鲜品的新鲜度的信息对生鲜品的环境的控制条件执行强化学习,自动地控制生鲜品的环境。具有:新鲜度判断部(520),其取得收纳库内收纳的生鲜品的新鲜度的信息;以及分析部(530),其通过强化学习对针对由新鲜度判断部(520)取得的生鲜品的新鲜度的收纳库内的库内环境执行学习,决定在该学习中使用的报酬。分析部(530)根据基于由新鲜度判断部(520)取得的新鲜度决定出的针对该新鲜度的库内环境下的固定期间的新鲜度降低情况,来决定报酬。而且,分析部(530)基于所决定的报酬对针对新鲜度的库内环境执行学习。

Description

学习装置、生鲜品的收纳装置和程序
技术领域
本文公开涉及学习装置、生鲜品的收纳装置和程序。
背景技术
在专利文献1中公开了如下内容:对基于过去的保存实绩的最佳保存条件进行规则化,根据经知识化的保存知识库和与气体代谢量有关的环境计测信息,结合希望出货时期推断活化气体的产生量而产生活化气体,由此对该内部环境进行控制。此外,记载了如下内容:在活化气体的产生量的推断中,利用使用了作为机器学习的方法的回归分析的软件处理。
现有技术文献
专利文献
专利文献1:日本特开2019-41601号公报
发明内容
发明要解决的课题
生鲜品的新鲜度的控制例如需要按照每个生鲜品而不同,或者根据生鲜品收纳于集装箱时的初始的新鲜度而发生变化。因此,即使统一地以相同的控制条件对环境进行控制,也难以进行适当的新鲜度管理。
本公开的目的在于使用基于新鲜度传感器的生鲜品的新鲜度的信息对生鲜品的环境的控制条件进行强化学习,对生鲜品的环境自动地进行控制。
用于解决课题的手段
本文公开的学习装置是一种生鲜品的库内环境的学习装置,其具有:新鲜度信息取得单元,其取得库内收纳的生鲜品的新鲜度的信息;学习单元,其对针对由所述新鲜度信息取得单元取得的生鲜品的新鲜度的所述库内的库内环境执行学习;以及报酬决定单元,其决定所述学习单元使用的报酬,所述报酬决定单元根据基于由所述新鲜度信息取得单元取得的新鲜度决定出的针对该新鲜度的库内环境下的固定期间的新鲜度降低情况,来决定报酬,所述学习单元基于所述报酬决定单元决定出的报酬对针对所述新鲜度的库内环境执行学习。
由此,能够使用生鲜品的新鲜度的信息对生鲜品的环境的控制条件执行强化学习,自动地控制生鲜品的环境。
在此,也可以是,在所述固定期间的前后的库内环境固定的情况下,所述报酬决定单元根据该固定期间的开始时刻的库内环境来决定所述报酬。
由此,能够学习如在固定期间的范围内设为固定的库内环境的环境控制。
此外,也可以是,在所述固定期间的前后的库内环境不同的情况下,所述报酬决定单元基于该固定期间内的特定时刻的库内环境来决定所述报酬。
由此,当在固定期间内,库内环境发生变化的情况下,能够学习基于特定时刻的库内环境的环境控制。
此外,也可以是,在所述固定期间的前后的库内环境不同的情况下,所述报酬决定单元基于该固定期间的开始时刻的库内环境和结束时刻的库内环境来决定所述报酬。
由此,当在固定期间内,库内环境发生变化的情况下,能够学习基于该固定期间的开始时和结束时的库内环境的环境控制。
此外,也可以是,在所述固定期间的前后的库内环境不同的情况下,所述报酬决定单元求出表示该固定期间内的多个时刻的库内环境的环境信息的值的代表值,基于该代表值来决定所述报酬。
由此,能够学习与固定期间内的库内环境的变化相应的环境控制。
此外,本文公开的收纳装置是一种生鲜品的收纳装置,其具有:收纳库,其收纳生鲜品;调整单元,其调整所述收纳库的库内的至少包含温度的库内环境;环境信息取得单元,其取得所述库内的至少包含温度的环境信息;新鲜度测定单元,其测定所述库内收纳的生鲜品的新鲜度;学习单元,其对针对由所述新鲜度测定单元测定出的生鲜品的新鲜度的所述库内的库内环境执行学习;以及报酬决定单元,其决定所述学习单元使用的报酬,所述调整单元基于由所述新鲜度测定单元测定出的新鲜度、所述环境信息取得单元所取得的所述环境信息和所述学习单元的学习结果来进行动作,使得所述收纳库的库内环境为针对该新鲜度的库内环境,所述报酬决定单元基于由所述调整单元调整后的库内环境下的固定期间的新鲜度降低情况来决定报酬,所述学习单元基于所述报酬决定单元决定出的报酬对针对所述新鲜度的库内环境执行学习。
由此,能够使用从收纳库得到的生鲜品的新鲜度的信息对库内环境的控制条件执行强化学习,自动地控制生鲜品的环境。
在此,也可以是,所述学习单元以如下方式对针对该新鲜度的库内环境执行学习:使得相对于由所述新鲜度测定单元测定出的生鲜品的新鲜度,由所述报酬决定单元决定的报酬最大,所述调整单元调整所述收纳库的库内环境,使得由所述环境信息取得单元取得的所述环境信息成为由所述学习单元学习到的针对所述新鲜度的库内环境。
由此,能够学习针对生鲜品的新鲜度的降低优化后的库内环境的控制。
此外,也可以是,在所述固定期间的前后的库内环境不同的情况下,所述报酬决定单元基于该固定期间内的一个或多个时刻的库内环境来决定所述报酬。
由此,能够学习与固定期间内的库内环境的变化相应的环境控制。
此外,也可以是,在所述固定期间内的一个或多个时刻的库内环境中,包含该固定期间的结束时刻的库内环境。
由此,能够学习设想了经过固定期间时的库内环境的环境控制。
此外,本文公开的程序使计算机实现以下功能:取得库内收纳的生鲜品的新鲜度的信息的功能;对针对所取得的生鲜品的新鲜度的所述库内的库内环境执行学习的功能;以及决定在所述学习中使用的报酬的功能,在所述决定报酬的功能中,根据基于在所述取得新鲜度的信息的功能中所取得的生鲜品的新鲜度决定出的针对该新鲜度的库内环境下的固定期间的新鲜度降低情况来决定报酬,在所述学习功能中,基于在所述决定报酬的功能中决定出的报酬对针对所述新鲜度的库内环境执行学习。
根据安装了该程序的计算机,能够使用生鲜品的新鲜度的信息对生鲜品的环境的控制条件执行强化学习,自动地控制生鲜品的环境。
附图说明
图1是示出应用本实施方式的生鲜品管理系统的整体结构的图。
图2是示出信息处理装置的功能结构例的图。
图3是示出信息处理装置的硬件结构例的图。
图4是示出由环境调整装置调整后的固定期间的库内环境(库内温度)的一例的图。
图5是示出由环境调整装置调整后的固定期间的库内环境(库内温度)的另一例的图。
图6是示出由环境调整装置调整后的固定期间的库内环境(库内温度)的又一例的图。
图7是示出由环境调整装置调整后的固定期间的库内环境(库内温度)的又一例的图。
具体实施方式
下面,参照附图对实施方式详细地进行说明。
<系统结构>
图1是示出应用本实施方式的生鲜品管理系统的整体结构的图。本实施方式的生鲜品管理系统具有收纳库100、环境检测装置200、环境调整装置300、新鲜度检测装置400和信息处理装置500。
收纳库100是收纳并保管生鲜品的装置。收纳库100具有用于搬入作为收纳物的生鲜品的搬入口(未图示)。收纳库100构成为通过关闭搬入口来对内部的空间进行密封,并与外部环境隔离。收纳库100的内部也可以被划分为多个房间。收纳库100例如是用于生鲜品的搬运的集装箱。作为收纳库100,能够设想在冷藏环境下收纳生鲜品的收纳库、在冷冻环境下收纳生鲜品的收纳库、在常温环境下收纳收纳物的收纳库等。收纳库100是收纳装置的一例。
环境检测装置200是设置于收纳库100的内部并检测收纳库100内的环境(库内环境)的装置。环境检测装置200取得表示收纳库100的内部空间的状态的数据(以下,称为“环境数据”)。具体而言,取得表示温度、湿度、气压、充满内部空间的气体的成分等的数据。因此,作为环境检测装置200,可以使用温度传感器、湿度传感器、气压传感器、各种气体成分的传感器等。在收纳库100的内部被划分为多个房间的情况下,也可以构成为按照每个房间单独取得环境数据。环境检测装置200是环境信息取得单元的一例。
环境调整装置300是设置于收纳库100并对收纳库100的库内环境进行控制的装置。由环境调整装置300控制的库内环境的要素对应于由环境检测装置200检测的库内环境的要素。因此,环境调整装置300对温度、湿度、气压、充满内部空间的气体的成分等进行控制而调整库内环境。在收纳库100的内部被划分为多个房间的情况下,能够按照每个房间设定不同的环境。环境调整装置300是调整单元的一例。
新鲜度检测装置400检测收纳库100中收纳的生鲜品的新鲜度。生鲜品的新鲜度能够通过各种指标来评价。具体而言,使用“外观(颜色、光泽)”、“香气”、“味道”、“物性(硬度)”、“水分量”、“成分(糖、酸)”等作为新鲜度指标。此外,关于肉、鱼类,通常使用与这些生鲜品中包含的成分的比率有关的“K值”这样的指标作为表示新鲜度的指标。因此,使用能够根据收纳的生鲜品的种类而取得与这些各种指标有关的数据(以下,称为“新鲜度数据”)的新鲜度传感器,作为新鲜度检测装置400。
信息处理装置500是对由环境检测装置200和新鲜度检测装置400取得的数据进行处理,根据得到的结果对环境调整装置300的动作进行控制的装置。信息处理装置500例如通过个人计算机、智能手机、设置于收纳库100的嵌入式计算机等来实现。信息处理装置500可以与收纳库100一体地设置,也可以与收纳库100分开设置,也可以构成为使用通信线路来从环境检测装置200和新鲜度检测装置400取得数据。在图1所示的结构例中,示出了与收纳库100一体地设置的信息处理装置500。在与收纳库100分开设置信息处理装置500的情况下,用于收发数据的通信线路可以是有线线路,也可以是无线线路。
<信息处理装置500的结构>
图2是示出信息处理装置500的功能结构例的图。信息处理装置500具有数据取得部510、新鲜度判断部520、分析部530和控制部540。
数据取得部510从环境检测装置200和新鲜度检测装置400取得数据。数据的取得例如是定期地进行的。更详细而言,从环境检测装置200按照每个固定期间定期地发送环境数据,被信息处理装置500的数据取得部510取得。此外,从新鲜度检测装置400按照每个固定期间定期地发送新鲜度数据,被信息处理装置500的数据取得部510取得。从环境检测装置200取得的环境数据被发送给分析部530。从新鲜度检测装置400取得的新鲜度数据被发送给新鲜度判断部520。
新鲜度判断部520根据由新鲜度检测装置400得到的新鲜度数据,判断收纳库100中收纳的生鲜品的新鲜度。由此,能够得到生鲜品的新鲜度的信息。如上所述,生鲜品的新鲜度是根据各种新鲜度指标来判断的。因此,新鲜度判断部520通过根据收纳库100中收纳的生鲜品的种类和能够由新鲜度检测装置400得到的新鲜度数据的种类而确定出的方法,判定新鲜度。在新鲜度的判定中,例如可以使用对海鲜、肉类进行的使用K值的方法等现有的判定方法。新鲜度判断部520是新鲜度信息取得单元的一例。此外,新鲜度检测装置400和信息处理装置500的新鲜度判断部520是新鲜度测定单元的一例。
分析部530对由数据取得部510取得的库内环境的信息(环境数据)和由新鲜度判断部520判断出的生鲜品的新鲜度信息进行分析,求出适当的库内环境。适当的库内环境根据收纳库100中收纳的生鲜品的种类、状态而不同。当然,适当的库内环境根据生鲜品的种类而不同,但即使是相同种类的生鲜品,适当的库内环境有时也根据该生鲜品的状态而不同。例如,关于番茄,对于完熟番茄和绿熟番茄,被认为适当的温度、湿度的范围不同。此外,完熟番茄的乙烯生成量较多,乙烯敏感性较低,与此相对,绿熟番茄的乙烯生成量较少,乙烯敏感性较高。因此,适当的气体成分也不同。此外,关于马铃薯也是,在未熟的状态和成熟的状态下,被认为适当的温度的范围不同。并且,即使是相同种类的生鲜品,若当前的新鲜度不同,则适当的库内环境也不同。例如,如果是新鲜度较高的状态,则与新鲜度较低的状态相比,能够选择设想了长期储藏的库内环境。这样,分析部530需要考虑作为对象的生鲜品的各种因素来确定库内环境。
在本实施方式中,分析部530使用通过强化学习而得到的学习模型来选择由环境调整装置300调整的库内环境。分析部530所使用的学习模型是将库内环境的信息和新鲜度信息设为“状态s”、将用于对环境调整装置300的动作进行控制的控制条件设为“行为a”、关于经过固定期间后的新鲜度的降低程度设定“报酬r”并进行强化学习而得到的模型。“报酬r”被设定为新鲜度的降低程度越小,“报酬r”的值越大。由此,根据该学习模型,基于由环境检测装置200、新鲜度检测装置400和新鲜度判断部520得到的“状态s”对“行为a”进行优化,使得在由“行为a”控制的库内环境中经过固定时间后的新鲜度的降低最小(“报酬r”成为最大)。
此外,分析部530也可以通过收纳库100中安装的信息处理装置500实际上对环境调整装置300进行控制,从而一边调整库内环境,一边进行生鲜品的新鲜度管理,使用该结果来推进强化学习。具体而言,也可以根据实际上调整后的库内环境的信息和从环境调整装置300的控制开始起经过固定时间后的生鲜品的新鲜度的降低状态,对上述的学习模型进行更新(变更“报酬r”的设定)。分析部530是学习单元和报酬决定单元的一例。
控制部540通过生成针对环境调整装置300的控制命令并向环境调整装置300发送所生成的控制命令,对环境调整装置300的动作进行控制。控制部540对环境调整装置300进行控制,使得成为由分析部530选择出的库内环境。换言之,控制部540对环境调整装置300进行控制,使得由环境检测装置200取得的环境信息成为在分析部530中学习到的针对生鲜品的新鲜度的库内环境(由学习模型选择的库内环境)。库内环境的控制例如是通过按照温度、湿度、气压、气体的成分等每个环境要素对当前的库内环境与由分析部530选择出的库内环境进行比较并按照每个这些环境要素来单独进行的。当着眼于库内温度作为一例时,如果当前的库内温度与由分析部530选择出的库内温度相同,则控制部540对环境调整装置300进行控制,使得维持当前的库内温度。此外,在当前的库内温度与由分析部530选择出的库内温度不同的情况下,控制部540对环境调整装置300进行控制,使得库内温度成为后者的温度。
图3是示出信息处理装置500的硬件结构例的图。信息处理装置500通过计算机来实现。实现信息处理装置500的计算机具有作为运算单元的CPU(Central ProcessingUnit:中央处理器)501、作为存储单元的RAM(Random Access Memory:随机存取存储器)502、ROM(Read Only Memory:只读存储器)503和存储装置504。RAM 502是主存储装置(mainmemory),作为CPU 501进行运算处理时的工作存储器来使用。在ROM 503保持有程序、预先准备的设定值等数据,CPU 501能够从ROM 503直接读入程序、数据而执行处理。存储装置504是程序、数据的保存单元。在存储装置504存储有程序,CPU 501将存储装置504中存储的程序读入主存储装置中并执行。此外,在存储装置504存储保存有CPU 501的处理结果。此外,在存储装置504存储有基于上述的强化学习的学习模型,用于库内环境的选择。例如可使用磁盘装置、SSD(Solid State Drive:固态硬盘)等,作为存储装置504。
在通过图3所示的计算机实现信息处理装置500的情况下,参照图2所说明的数据取得部510、新鲜度判断部520、分析部530和控制部540的各功能通过CPU 501执行程序来实现。CPU 501执行程序而实现上述的各功能的信息处理装置500是学习装置的一例。
<库内环境的调整的学习例>
如上所述,信息处理装置500的分析部530使用通过强化学习而得到的学习模型来选择由环境调整装置300调整的库内环境。作为学习模型,对使用将库内环境的信息和新鲜度信息设为“状态s”、将库内环境的控制信息设为“行为a”、关于经过固定期间后的新鲜度的降低程度设定“报酬r”并进行强化学习而得到的模型的情况进行了叙述,进一步说明该“状态s”、“行为a”、“报酬r”。
环境调整装置300对库内环境的调整是在固定期间(例如,6小时、12小时、1天、3天、1周等)的范围内进行的。因此,关于作为“状态s”的库内环境,考虑该固定期间内的库内环境。关于“行为a”,该固定期间内的环境调整装置300的动作成为对象。“报酬r”是根据该固定期间的开始时刻的新鲜度与结束时刻的新鲜度的差分来决定的。
进一步考察固定期间内的库内环境。当在固定期间内进行了环境调整装置300对库内环境的调整时,在该固定期间的开始时刻和结束时刻,库内环境有时根据调整的方法而不同。此外,该固定期间内的环境调整装置300的动作有时也动态地发生变化。在该情况下,即使开始时刻的库内环境相同,也设想生鲜品的新鲜度降低的程度根据结束时刻、中途的库内环境而不同。因此,不仅考虑固定期间的开始时刻,还考虑结束时刻、中途的库内环境而确定“状态s”。此外,关于作为“行为a”的环境调整装置300的控制,即使固定环境的开始时刻的库内环境相同,也能够设定将该固定期间的结束时、中途的库内环境设为不同环境的多个“行为a”。以下,对几个例子进行具体说明。另外,在以下的例子中,着眼于库内温度作为库内环境的一个具体例。
图4是示出由环境调整装置300调整后的固定期间的库内环境(库内温度)的一例的图。在图4所示的例子中,在从开始时刻t0到结束时刻tn的期间t(0-n)内,由环境调整装置300调整为库内温度固定为温度(t0)。在该情况下,由于在整个期间t(0-n)内,库内温度固定,因此强化学习中的“状态s”为温度(t0)。此外,对作为“行为a”的环境调整装置300的动作进行控制,使得该温度(t0)的“状态s”持续固定期间t(0-n)。然后,根据时刻t0时的生鲜品的新鲜度与时刻tn时的生鲜品的新鲜度的差分来设定“报酬r”。
图5是示出由环境调整装置300调整后的固定期间的库内环境(库内温度)的另一例的图。在图5所示的例子中,在从开始时刻t0到结束时刻tn的期间t(0-n)内,由环境调整装置300调整为库内温度从温度(t0)变化为温度(tn)。另外,在该例子中,温度的变化被调整为相对于经过时间固定地变化。在该情况下,由于期间t(0-n)的开始时刻t0的温度(t0)与结束时刻tn的温度(tn)不同,因此无法单纯地将开始时刻的温度(t0)设为“状态s”。因此,将期间t(0-n)内的特定时刻的温度设定为“状态s”。例如考虑将时刻t0与时刻tn的中间的时刻t1的温度(t1)设为“状态s”。这意味着,将“行为a”设为对环境调整装置300的动作进行控制使得库内温度在时刻t0为温度(t0)、库内温度在经过期间t(0-n)之后为温度(tn),将“状态s”等同为在整个期间t(0~n)内为库内温度(t1)。然后,根据时刻t0的新鲜度与时刻tn的新鲜度的差分来设定“报酬r”。在此,在图5所示的例子中,温度的时间变化的程度固定,因此,
期间t(0-1)=期间t(0-n)/2,
温度(t1)=温度(t0)+(温度(tn)-温度(t0))/2。
图6是示出由环境调整装置300调整后的固定期间的库内环境(库内温度)的又一例的图。在图6所示的例子中,在从开始时刻t0到结束时刻tn的期间t(0-n)内,由环境调整装置300调整为库内温度从温度(t0)变化为温度(tn)。另外,在该例子中,温度的变化被调整为相对于经过时间固定地变化。在该情况下,由于期间t(0-n)的开始时刻t0的温度(t0)与结束时刻tn的温度(tn)不同,因此无法单纯地将开始时刻的温度(t0)设为“状态s”。以上,与参考图5所说明的例子相同,但在该例子中,将期间t(0-n)的开始时刻t0的温度(t0)和结束时刻tn的温度(tn)双方设定为“状态s”。“行为a”是如实现这样的温度变化的环境调整装置300的动作控制。然后,根据时刻t0的新鲜度与时刻tn的新鲜度的差分来设定“报酬r”。
图7是示出由环境调整装置300调整后的固定期间的库内环境(库内温度)的又一例的图。在图7所示的例子中,在从开始时刻t0到结束时刻tn的期间t(0-n)内,由环境调整装置300调整为库内温度从温度(t0)变化为温度(tn)。另外,在图7中,温度的变化相对于经过时间固定地变化,但在该例子中,未特别规定温度变化的方式。例如也可以在期间t(0-n)的前半部分中,使温度急剧地发生变化,在后半部分中,使温度缓慢地发生变化。此外,也可以阶段性地多次使温度发生变化。在图7所示的例子中,在期间t(0-n)内设定一个或多个时刻,根据各时刻的温度来设定“状态s”。例如也可以将对各时刻的温度进行统计性处理而得到的代表值设定为“状态s”。能够选择平均值、中央值等作为代表值,但也可以根据期间t(0-n)内的温度变化的方式来设定代表值。
在图7所示的例子中,在开始时刻t0与结束时刻tn之间设定时刻t1~时刻t3这3个时刻,得到温度(t0)、温度(t1)、温度(t2)、温度(t3)、温度(tn)这5个温度。这些时刻和温度可以根据期间t(0-n)内的温度变化的方式来设定。而且,将该5个温度的代表值(例如平均值)设为“状态s”。此外,将在期间t(0-n)内实现上述的温度变化的环境调整装置300的动作控制设为“行为a”。然后,根据时刻t0的新鲜度与时刻tn的新鲜度的差分来设定“报酬r”。另外,在该例子中,由于环境调整装置300以从当前的库内环境起经过了期间t(0-n)时(时刻tn)的库内环境为目标进行控制,因此在得到库内环境的时刻中,也可以必然包含时刻tn。
另外,在参照图4至图7所说明的例子中,说明了作为库内环境之一对库内温度进行控制的情况,但针对湿度、气体成分等能够由环境检测装置200检测并由环境调整装置300调整的库内环境的各要素,也能够同样地进行分析。此外,也可以根据生鲜品的种类、状态、分析时的生鲜品的新鲜度等来对库内环境的各要素进行加权,或者附加条件。例如,由于被设为能够储藏于收纳库100的期间根据生鲜品的种类的不同而不同,因此在上述的分析例中示出的期间t(0-n)也被设定为不同的期间。
以上,对实施方式进行了说明,但本文公开的技术范围不限于上述实施方式。例如,在上述的实施方式中,将信息处理装置500作为实现对由环境检测装置200和新鲜度检测装置400取得的数据进行处理的功能、根据处理结果来对环境调整装置300的动作进行控制的功能、根据取得数据来实施强化学习的功能的各个功能的装置进行了说明,但也可以通过单独的硬件实现这些功能。负责学习功能的装置也作为使用由多个收纳库100的环境检测装置200和新鲜度检测装置400取得并收集到的数据进行学习的学习装置来实现。
此外,在上述的实施方式中,示出了如下情况:信息处理装置500的分析部530进行学习,使得根据生鲜品的种类、状态来得到适当的库内环境。因此,在对生鲜品的新鲜度进行管理时,用户在信息处理装置500中确定作为管理对象的生鲜品,使用与所确定的生鲜品对应的学习模型来进行新鲜度管理。与此相对,也可以在信息处理装置500中,设置确定作为新鲜度管理的对象的生鲜品的种类的单元。由此,在对生鲜品的新鲜度进行管理时,信息处理装置500能够识别作为管理对象的生鲜品,使用对应的学习模型来进行新鲜度管理。生鲜品的识别例如也可以通过使用了拍摄生鲜品而得到的图像的图像分析来进行。此外,不脱离本文公开的技术构思的范围的各种变更和替代结构包含于本文公开中。
这里,上述说明的各实施方式能够如以下那样理解。本文公开的学习装置具有:新鲜度判断部520,其取得库内收纳的生鲜品的新鲜度的信息;以及分析部530,其对针对由新鲜度判断部520取得的生鲜品的新鲜度的库内的库内环境执行学习,并且决定在该学习中使用的报酬。分析部530是如下的生鲜品的库内环境的学习装置:根据基于由新鲜度判断部520取得的新鲜度决定出的针对新鲜度的库内环境下的固定期间的新鲜度降低情况来决定报酬,基于所决定的报酬对针对新鲜度的库内环境执行学习。
由此,能够使用生鲜品的新鲜度的信息对生鲜品的环境的控制条件进行强化学习,自动地控制生鲜品的环境。
在此,在固定期间的前后的库内环境固定的情况下,分析部530也可以基于该固定期间的开始时刻的库内环境来决定报酬。
由此,能够学习如在固定期间内设为固定的库内环境那样的环境控制。
此外,在固定期间的前后的库内环境不同的情况下,分析部530也可以基于该固定期间内的特定时刻的库内环境来决定报酬。
由此,当在固定期间内,库内环境发生变化的情况下,能够学习基于特定时刻的库内环境的环境控制。
此外,在固定期间的前后的库内环境不同的情况下,分析部530也可以基于该固定期间的开始时刻的库内环境和结束时刻的库内环境来决定报酬。
由此,当在固定期间内,库内环境发生变化的情况下,能够学习基于该固定期间的开始时刻和结束时刻的库内环境的环境控制。
此外,在固定期间的前后的库内环境不同的情况下,分析部530也可以求出表示该固定期间内的多个时刻的库内环境的环境信息的值的代表值,基于该代表值来决定报酬。
由此,能够学习与固定期间内的库内环境的变化相应的环境控制。
此外,上述中所说明的实施方式能够如下那样理解。本文公开的收纳装置具有:收纳库100,其收纳生鲜品;环境调整装置300,其调整收纳库100的库内的至少包含温度的库内环境;环境检测装置200,其取得库内的至少包含温度的环境信息;新鲜度检测装置400和新鲜度判断部520,它们测定库内收纳的生鲜品的新鲜度;以及分析部530,其对针对由新鲜度检测装置400和新鲜度判断部520测定的生鲜品的新鲜度的库内的库内环境执行学习,决定报酬。环境调整装置300基于由新鲜度检测装置400和新鲜度判断部520测定的新鲜度、环境检测装置200所取得的环境信息和分析部530的学习结果进行动作,使得收纳库100的库内环境为针对该新鲜度的库内环境。分析部530是根据由环境调整装置300调整后的库内环境下的固定期间的新鲜度降低情况来决定报酬并基于所决定的报酬对针对新鲜度的库内环境执行学习的生鲜品的收纳装置。
由此,能够使用从收纳库100得到的生鲜品的新鲜度的信息对库内环境的控制条件执行强化学习,自动地控制生鲜品的环境。
在此,也可以是,分析部530以如下方式对针对新鲜度的库内环境执行学习:使得相对于由新鲜度检测装置400和新鲜度判断部520测定的生鲜品的新鲜度,由分析部530决定的报酬最大,环境调整装置300调整收纳库100的库内环境,使得由环境检测装置200取得的环境信息成为由分析部530学习到的针对新鲜度的库内环境。
由此,能够学习针对生鲜品的新鲜度的降低优化后的库内环境的控制。
此外,也可以是,在固定期间的前后的库内环境不同的情况下,分析部530基于该固定期间内的一个或多个时刻的库内环境来决定报酬。
由此,能够学习与固定期间内的库内环境的变化相应的环境控制。
此外,也可以是,在固定期间内的一个或多个时刻的库内环境中,包含该固定期间的结束时刻的库内环境。
由此,能够学习设想了经过固定期间时的库内环境的环境控制。
此外,本文公开的程序使计算机实现以下功能:取得库内收纳的生鲜品的新鲜度的信息的功能;对针对所取得的生鲜品的新鲜度的库内的库内环境执行学习的功能;以及决定在学习中使用的报酬的功能,在决定报酬的功能中,根据基于在取得新鲜度的信息的功能中所取得的生鲜品的新鲜度决定出的针对该新鲜度的库内环境下的固定期间的新鲜度降低情况来决定报酬,在学习功能中,基于在决定报酬的功能中决定出的报酬对针对新鲜度的库内环境执行学习。
根据安装了该程序的计算机,能够使用生鲜品的新鲜度的信息对生鲜品的环境的控制条件执行强化学习,自动地控制生鲜品的环境。
标号说明
100:收纳库;200:环境检测装置;300:环境调整装置;400:新鲜度检测装置;500:信息处理装置;510:数据取得部;520:新鲜度判断部;530:分析部;540:控制部。

Claims (10)

1.一种生鲜品的库内环境的学习装置,其具有:
新鲜度信息取得单元,其取得库内收纳的生鲜品的新鲜度的信息;
学习单元,其对针对由所述新鲜度信息取得单元取得的生鲜品的新鲜度的所述库内的库内环境执行学习;以及
报酬决定单元,其决定所述学习单元所使用的报酬,
所述报酬决定单元根据基于由所述新鲜度信息取得单元取得的新鲜度决定出的针对该新鲜度的库内环境下的固定期间的新鲜度降低情况,来决定报酬,
所述学习单元基于所述报酬决定单元决定出的报酬对针对所述新鲜度的库内环境执行学习。
2.根据权利要求1所述的生鲜品的库内环境的学习装置,其特征在于,
在所述固定期间的前后的库内环境固定的情况下,所述报酬决定单元基于该固定期间的开始时刻的库内环境来决定所述报酬。
3.根据权利要求1所述的生鲜品的库内环境的学习装置,其特征在于,
在所述固定期间的前后的库内环境不同的情况下,所述报酬决定单元基于该固定期间内的特定时刻的库内环境来决定所述报酬。
4.根据权利要求1所述的生鲜品的库内环境的学习装置,其特征在于,
在所述固定期间的前后的库内环境不同的情况下,所述报酬决定单元基于该固定期间的开始时刻的库内环境和结束时刻的库内环境来决定所述报酬。
5.根据权利要求1所述的生鲜品的库内环境的学习装置,其特征在于,
在所述固定期间的前后的库内环境不同的情况下,所述报酬决定单元求出表示该固定期间内的多个时刻的库内环境的环境信息的值的代表值,基于该代表值来决定所述报酬。
6.一种生鲜品的收纳装置,其具有:
收纳库,其收纳生鲜品;
调整单元,其调整所述收纳库的库内的至少包含温度的库内环境;
环境信息取得单元,其取得所述库内的至少包含温度的环境信息;
新鲜度测定单元,其测定所述库内收纳的生鲜品的新鲜度;
学习单元,其对针对由所述新鲜度测定单元测定出的生鲜品的新鲜度的所述库内的库内环境执行学习;以及
报酬决定单元,其决定所述学习单元所使用的报酬,
所述调整单元基于由所述新鲜度测定单元测定出的新鲜度、所述环境信息取得单元所取得的所述环境信息和所述学习单元的学习结果进行动作,使得所述收纳库的库内环境为针对该新鲜度的库内环境,
所述报酬决定单元基于由所述调整单元调整后的库内环境下的固定期间的新鲜度降低情况来决定报酬,
所述学习单元基于所述报酬决定单元决定出的报酬对针对所述新鲜度的库内环境执行学习。
7.根据权利要求6所述的生鲜品的收纳装置,其特征在于,
所述学习单元以使得对于由所述新鲜度测定单元测定出的生鲜品的新鲜度,由所述报酬决定单元决定的报酬最大的方式,对针对该新鲜度的库内环境执行学习,
所述调整单元调整所述收纳库的库内环境,使得由所述环境信息取得单元取得的所述环境信息成为由所述学习单元学习到的针对所述新鲜度的库内环境。
8.根据权利要求7所述的生鲜品的收纳装置,其特征在于,
在所述固定期间的前后的库内环境不同的情况下,所述报酬决定单元基于该固定期间内的一个或多个时刻的库内环境来决定所述报酬。
9.根据权利要求8所述的生鲜品的收纳装置,其特征在于,
在所述固定期间内的一个或多个时刻的库内环境中,包含该固定期间的结束时刻的库内环境。
10.一种程序,其使计算机实现以下功能:
取得库内收纳的生鲜品的新鲜度的信息的功能;
对针对所取得的生鲜品的新鲜度的所述库内的库内环境执行学习的功能;以及
决定在所述学习中使用的报酬的功能,
在决定所述报酬的功能中,根据基于在取得所述新鲜度的信息的功能中取得的生鲜品的新鲜度决定出的针对该新鲜度的库内环境下的固定期间的新鲜度降低情况来决定报酬,
在执行所述学习的功能中,基于在决定所述报酬的功能中决定出的报酬对针对所述新鲜度的库内环境执行学习。
CN202180022760.0A 2020-03-31 2021-03-30 学习装置、生鲜品的收纳装置和程序 Pending CN115335835A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2020065240A JP6915718B1 (ja) 2020-03-31 2020-03-31 学習装置、生鮮品の収容装置およびプログラム
JP2020-065240 2020-03-31
PCT/JP2021/013482 WO2021200915A1 (ja) 2020-03-31 2021-03-30 学習装置、生鮮品の収容装置およびプログラム

Publications (1)

Publication Number Publication Date
CN115335835A true CN115335835A (zh) 2022-11-11

Family

ID=77057542

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180022760.0A Pending CN115335835A (zh) 2020-03-31 2021-03-30 学习装置、生鲜品的收纳装置和程序

Country Status (5)

Country Link
US (1) US20230138886A1 (zh)
EP (1) EP4130621A4 (zh)
JP (1) JP6915718B1 (zh)
CN (1) CN115335835A (zh)
WO (1) WO2021200915A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113803937B (zh) * 2021-09-26 2022-11-11 珠海格力电器股份有限公司 一种冰箱气味检测结构及冰箱
JP7406143B2 (ja) * 2021-09-30 2023-12-27 ダイキン工業株式会社 ガス量推定装置、ガス処理装置、輸送用コンテナ、ガス量推定方法、及びプログラム

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012003743A (ja) * 2010-05-19 2012-01-05 Hitachi Ltd 流通履歴管理方法
CN206637919U (zh) * 2016-11-17 2017-11-14 天津捷盛东辉保鲜科技有限公司 保鲜芯智能监控系统
CN108224894A (zh) * 2018-01-08 2018-06-29 合肥美的智能科技有限公司 基于深度学习的食材新鲜度识别方法、装置、冰箱和介质
CN207645014U (zh) * 2017-11-30 2018-07-24 陈浩能 保鲜设备、冷链运输装置及冷链系统
CN108399514A (zh) * 2017-02-08 2018-08-14 北京京东尚科信息技术有限公司 可监控新鲜度的生鲜配送提示方法和装置
CN108662843A (zh) * 2017-03-27 2018-10-16 青岛海尔智能技术研发有限公司 冰箱内食物的检测系统与冰箱
CN108662842A (zh) * 2017-03-27 2018-10-16 青岛海尔智能技术研发有限公司 冰箱内食物的检测系统与冰箱
CN109154469A (zh) * 2016-03-18 2019-01-04 开利公司 在整个冷链配送系统中对易腐物品参数的自动化和预测性监控
JP2019041601A (ja) * 2017-08-30 2019-03-22 株式会社ケーイーコーポレーション 青果物の最適鮮度制御方法及び当該方法を実施する最適鮮度制御システム
CN110503314A (zh) * 2019-08-02 2019-11-26 Oppo广东移动通信有限公司 一种新鲜度评估方法及装置、存储介质
CN110657836A (zh) * 2019-09-17 2020-01-07 江苏大学 一种生鲜运输智能物流箱的监控系统及其监控方法
CN110674736A (zh) * 2019-09-23 2020-01-10 珠海格力电器股份有限公司 一种识别食材新鲜度的方法、装置、服务器及存储介质

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3485440B1 (en) * 2016-07-18 2023-04-19 Carrier Corporation Cold chain in-transit exchange of perishable goods
EP3488395A1 (en) * 2016-07-22 2019-05-29 Carrier Corporation Cold chain intelligence for consumer mobile devices
KR102628210B1 (ko) * 2017-01-26 2024-01-24 삼성전자주식회사 식품 관리를 위한 전자 장치 및 이의 제어 방법
KR102551358B1 (ko) * 2018-09-21 2023-07-04 삼성전자주식회사 냉장고 내 객체의 상태와 관련된 정보를 제공하는 방법 및 시스템
KR20190102141A (ko) * 2019-07-22 2019-09-03 엘지전자 주식회사 와인 냉장고에 탑재된 인공 지능 장치
KR102225439B1 (ko) * 2019-08-06 2021-03-09 엘지전자 주식회사 지능형 냉장 장치 및 이를 제어하기 위한 방법

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012003743A (ja) * 2010-05-19 2012-01-05 Hitachi Ltd 流通履歴管理方法
CN109154469A (zh) * 2016-03-18 2019-01-04 开利公司 在整个冷链配送系统中对易腐物品参数的自动化和预测性监控
CN206637919U (zh) * 2016-11-17 2017-11-14 天津捷盛东辉保鲜科技有限公司 保鲜芯智能监控系统
CN108399514A (zh) * 2017-02-08 2018-08-14 北京京东尚科信息技术有限公司 可监控新鲜度的生鲜配送提示方法和装置
CN108662843A (zh) * 2017-03-27 2018-10-16 青岛海尔智能技术研发有限公司 冰箱内食物的检测系统与冰箱
CN108662842A (zh) * 2017-03-27 2018-10-16 青岛海尔智能技术研发有限公司 冰箱内食物的检测系统与冰箱
JP2019041601A (ja) * 2017-08-30 2019-03-22 株式会社ケーイーコーポレーション 青果物の最適鮮度制御方法及び当該方法を実施する最適鮮度制御システム
CN207645014U (zh) * 2017-11-30 2018-07-24 陈浩能 保鲜设备、冷链运输装置及冷链系统
CN108224894A (zh) * 2018-01-08 2018-06-29 合肥美的智能科技有限公司 基于深度学习的食材新鲜度识别方法、装置、冰箱和介质
CN110503314A (zh) * 2019-08-02 2019-11-26 Oppo广东移动通信有限公司 一种新鲜度评估方法及装置、存储介质
CN110657836A (zh) * 2019-09-17 2020-01-07 江苏大学 一种生鲜运输智能物流箱的监控系统及其监控方法
CN110674736A (zh) * 2019-09-23 2020-01-10 珠海格力电器股份有限公司 一种识别食材新鲜度的方法、装置、服务器及存储介质

Also Published As

Publication number Publication date
EP4130621A4 (en) 2023-09-06
US20230138886A1 (en) 2023-05-04
JP6915718B1 (ja) 2021-08-04
JP2021162254A (ja) 2021-10-11
EP4130621A1 (en) 2023-02-08
WO2021200915A1 (ja) 2021-10-07

Similar Documents

Publication Publication Date Title
US11181515B2 (en) Scent-based spoilage sensing refrigerator
CN115335835A (zh) 学习装置、生鲜品的收纳装置和程序
Kim et al. Freshness Gauge based cold storage management: A method for adjusting temperature and humidity levels for food quality
KR101205303B1 (ko) 스마트 냉장고에서 식품 품질지수를 이용한 식품의 신선도 정보 제공 방법 및 시스템
JP7534116B2 (ja) 保管容器、冷蔵庫及び熟成度推定装置
CN101238862A (zh) 考虑气味特征情况下执行食品处理设备的工作程序的方法
CN108431530B (zh) 响应于特定货物负载控制制冷单元
WO2007052208A1 (en) A refrigerator
CN110608574A (zh) 一种冰箱及其保鲜控制方法
US11737470B2 (en) Respiration ranking in controlled atmosphere rooms
JP7524025B2 (ja) 情報処理システム、及び品質推定方法
TWI653586B (zh) 食用時期計算方法、食用時期計算系統以及記錄介質
WO2017097683A1 (en) A system and method for determining the freshness of a food item, and a configuration method
US20240133604A1 (en) Method for controlling refrigerator operation and refrigerator
de la Cruz Quiroz et al. Residential refrigerator performance based on microbial indicators of ground beef preservation assessed using predictive microbiology tools
Ahmad et al. Application of support vector classification algorithms for the prediction of quality level of frozen shrimps (Litopenaeus vannamei) suitable for sensor-based time-temperature monitoring
KR102235853B1 (ko) 식품상태 감시장치 및 그 시스템과 식품상태 감시방법
Geczi et al. Cold chain interruption by consumers significantly reduces shelf life of vacuum-packed pork ham slices
CN113218143B (zh) 冰箱内的乙烯释放方法、冰箱及存储介质
KR102213588B1 (ko) 김치냉장고 및 이의 제어방법
KR20060038254A (ko) 휴대 단말기의 신선도 판정 방법 및 장치
WO2021200904A1 (ja) 出力装置、情報処理システムおよびプログラム
JP2023092302A (ja) 冷蔵庫、食べ頃提示システム、および、食べ頃提示方法
Von Gersdorff et al. Development Of Sustainable Drying Strategies For Beef Drying
CN117010782A (zh) 货物存储方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20221111