CN111381511A

CN111381511A - 时差反应减少系统以及时差反应减少方法

Info

Publication number: CN111381511A
Application number: CN201911348791.6A
Authority: CN
Inventors: 薮龟顺平; 山内健太郎; 藤原由利; 川瀬由布; 原田和树
Original assignee: Panasonic Intellectual Property Management Co Ltd
Current assignee: Panasonic Intellectual Property Management Co Ltd
Priority date: 2018-12-27
Filing date: 2019-12-24
Publication date: 2020-07-07
Anticipated expiration: 2039-12-24
Also published as: CN111381511B; JP2020103494A

Abstract

时差反应减少系统(10)具备：第1获得部(110)，获得包括用户的计划信息的输入信息；决定部(120)，按照控制内容决定规则，根据输入信息，决定用于减少用户的时差反应的控制内容，该控制内容也是包括对光进行输出的设备的环境控制设备(400)的控制内容；控制部(130)，根据决定的控制内容，执行环境控制设备(400)的控制；第2获得部(150)，获得示出用户针对被执行的控制的评价的评价信息；以及更新部(180)，通过将基于评价信息的值作为报酬来利用的机器学习，来更新控制内容决定规则。

Description

时差反应减少系统以及时差反应减少方法

技术领域

本发明涉及时差反应减少系统以及时差反应减少方法。

背景技术

在乘坐飞机等移动体移动到具有几个小时以上的时差的地区时，人会因在生物节律与环境之间产生的偏差而陷入身心不佳的状态。这种身心不佳的状态被称为时差反应。作为消除时差反应的技术，专利文献1中公开了一种时差反应消除装置，无需使用者输入时差，并且能够时常方便地进行恰当的处理。

(现有技术文献)

(专利文献)

专利文献1日本特开平10-68787号公报

发明内容

本发明提供一种能够有效地减少用户的时差反应的时差反应减少系统以及时差反应减少方法。

本发明的一个形态所涉及的时差反应减少系统具备：第1获得部，获得包括用户的计划信息的输入信息；决定部，按照控制内容决定规则，根据所述输入信息，决定用于减少所述用户的时差反应的控制内容，该控制内容也是包括对光进行输出的设备的环境控制设备的控制内容；控制部，根据决定的所述控制内容，执行所述环境控制设备的控制；第2获得部，获得评价信息，该评价信息示出所述用户针对被执行的所述控制的评价；以及更新部，通过将基于所述评价信息的值作为报酬来利用的机器学习，来更新所述控制内容决定规则。

本发明的一个形态所涉及的时差反应减少方法包括：第1获得步骤，获得包括用户的计划信息的输入信息；决定步骤，按照控制内容决定规则，根据所述输入信息，来决定用于减少所述用户的时差反应的控制内容，该控制内容也是包括对光进行输出的设备的环境控制设备的控制内容；控制步骤，根据被决定的所述控制内容，来执行所述环境控制设备的控制；第2获得步骤，获得评价信息，该评价信息示出所述用户针对被执行的所述控制的评价；以及更新步骤，通过将基于所述评价信息的值作为报酬来利用的机器学习，来更新所述控制内容决定规则。

另外，这些概括性的或具体的形态可以由系统、方法、集成电路、计算机程序或计算机可读取的CD-ROM等记录介质来实现，也可以由系统、集成电路、计算机程序以及记录介质的任意的组合来实现。

本发明的一个形态所涉及的时差反应减少系统以及时差反应减少方法能够有效地减少用户的时差反应。

附图说明

图1是示出实施方式1所涉及的时差反应减少系统的功能构成的方框图。

图2是用于说明睡眠控制以及觉醒控制的概要的图。

图3示出了在移动体内使用的环境控制设备的一个例子。

图4是实施方式1所涉及的控制装置的睡眠控制时的工作的流程图。

图5示出了能够作为输入信息来使用的计划信息。

图6是用于说明睡眠控制的控制参数的第一图。

图7是用于说明睡眠控制的控制参数的第二图。

图8是用于说明睡眠控制中的发光色的变更的色度图。

图9是报酬的算出工作的流程图。

图10示出了能够用于报酬的算出的项目。

图11是用于说明觉醒控制的控制参数的图。

图12示出了能够作为输入信息来使用的其他的信息。

图13是示出实施方式2所涉及的时差反应减少系统的功能构成的方框图。

具体实施方式

以下参照附图对实施方式进行说明。另外，以下将要说明的实施方式均为概括的或具体的例子。以下的实施方式所示的数值、形状、材料、构成要素、构成要素的配置位置、连接方式、步骤、以及、步骤的顺序等均为一个例子，其主旨并非是对本发明进行限定。并且，对于以下的实施方式的构成要素之中没有记载在独立技术方案中的构成要素，作为任意的构成要素来说明。

另外，各个图为模式图，并非是严谨的图示。并且，在各个图中，对于实质上相同的构成赋予相同的符号，并有省略或简化重复说明的情况。

并且，在本说明书中，数值以及数值的范围并非仅是严格的表现，其含义中也包括实质上同等的范围，例如包括百分之几左右的差异。

(实施方式1)

[概要]

以下对实施方式1所涉及的时差反应减少系统进行说明。图1是示出实施方式1所涉及的时差反应减少系统的功能构成的方框图。实施方式1所涉及的时差反应减少系统10是用于减少用户的时差反应的系统。时差反应减少系统10例如被用于飞机等移动体的内部。时差反应减少系统10利用对照明设备等光进行输出的设备，在移动体内进行使用户入睡的睡眠控制。并且，时差反应减少系统10利用对照明设备等光进行输出的设备，在移动体内进行使用户觉醒的觉醒控制。图2是用于说明睡眠控制以及觉醒控制的概要的图。

如图2所示，睡眠控制例如是在睡眠导入期间，一边使照明设备发出的光的亮度晃动，一边逐渐地使亮度降低的控制(以下也记作光的晃动控制)。另外，觉醒控制例如从觉醒控制期间的开始时刻直到对象期间的结束时刻，使照明设备发出的光的亮度逐渐增加的控制。另外在本说明书中，“睡眠”这一用语的含义中包括假寐。假寐是指短时间的睡眠，例如是在工作的中途暂时停止该工作而进行的睡眠，是比白天活动的人在夜间进行的长时间的睡眠(以下也记作真正睡眠)浅的睡眠。

时差反应减少系统10根据表示用户的计划的计划信息，来决定睡眠控制以及觉醒控制的至少一方的控制内容。例如，移动体到达目的地之后，用户立即将要进行的予定是工作的情况下，则可以考虑在移动体的到达时刻使用户的头脑清醒，使用户完全觉醒较好。并且，在移动体到达目的地之后，用户立即将要进行的予定是休息(假寐等)的情况下，则可以考虑在移动体的到达时刻最好使用户在某种程度上感到睡意。也就是说，睡眠控制以及觉醒控制的恰当的控制内容按照用户的计划而不同。

于是，时差反应减少系统10具有预先通过机器学习而构筑的学习器100a。通过将计划信息作为输入信息添加到学习器100a，从而学习器100a输出最佳思考的控制内容。据此，时差反应减少系统10能够以用户到达目的地之后能够舒适地行动的方式，来决定睡眠控制以及觉醒控制的至少一方的控制内容。即，时差反应减少系统10能够有效地减少用户的时差反应。

如图1所示，时差反应减少系统10具体而言具备：控制装置100、传感器200、输入装置300、以及环境控制设备400。以下对这些装置进行详细说明。

[传感器]

传感器200是对用于输出评价信息或输入信息的对象物进行检测的装置。传感器200例如对用户的身心的状态进行检测，将对检测出的用户的身心的状态进行直接或间接地表示的生理指标信息输出到控制装置100。这种传感器200例如是心率监测仪、相机、体温计、脑电波检测仪、唾液传感器、发汗传感器、呼吸传感器、体动传感器、血流传感器等。这种传感器200的每一个可以是与用户接触的接触型的传感器，也可以是非接触型的传感器。

并且也可以是如下这样的传感器，传感器200例如对用户的行动进行检测，将对检测出的用户的行动进行直接或间接表示的行动指标信息输出到控制装置100。这种传感器200例如是被设置在用户的座位上的压力传感器，对用户离开座位的频度以及工作状态等进行检测。传感器200可以是对用户的会話数量或状态进行检测的声音识别系统，也可以是对用户的睡眠时间、睡眠的质量、或容易发困的时间段进行检测的生命体征传感器(具体而言是睡眠监测仪或脑电波检测仪等)。用户的睡眠时间、睡眠的质量、或容易发困的时间段可以通过智能手机等便携式终端的应用的执行来检测，也可以由专用的穿戴式终端来检测。

并且，传感器200也可以是对用户的周围的环境信息进行检测，并将检测出的环境信息输出到控制装置100的传感器。这种传感器200例如是日照量传感器、受光量传感器、温度传感器、湿度传感器、气味传感器、麦克风、CO₂浓度传感器等。另外，时差反应减少系统10所具备的传感器200的数量没有特殊的限定。

[输入装置]

输入装置300是用户接口装置，接受用户为了将信息输入给控制装置100的操作。输入装置300例如根据用户的操作，将用户的计划信息输出到控制装置100。

并且，输入装置300根据用户的操作，将针对睡眠控制或觉醒控制的用户的评价信息输出到控制装置100。评价信息用于机器学习中的报酬的算出。输入装置300能够根据用户的操作，将主观指标信息以及用户信息输出到控制装置100。

输入装置300例如是智能手机或平板电脑终端等便携式终端，还可以是智能手表等穿戴式设备。并且，输入装置300也可以是麦克风、机械式按钮、键盘、或鼠标等。另外，时差反应减少系统10所具备的输入装置300的数量没有特殊的限定。

[环境控制设备]

环境控制设备400是对用户的周围的环境(光环境、空气环境、或温度环境等)进行控制的设备，是在睡眠控制或觉醒控制中，由控制装置100控制的设备。环境控制设备400具体而言是输出照明设备等的光的设备(即，通过光从而给用户带来刺激的设备)。

在时差反应减少系统10被用于飞机等移动体的情况下，环境控制设备400可以作为按照每个座位来设置的照明设备来实现。图3示出了在移动体内使用的环境控制设备400(按座位设置的照明设备)的一个例子。

另外，环境控制设备400也可以包括照明设备以外的其他的设备。除了光的刺激以外，环境控制设备400还可以包括通过影像、声音、香味、振动、温度湿度、气流、以及触感等来刺激用户的设备。具体而言，环境控制设备400还可以包括空调设备、空气净化器、换气扇、电风扇或地暖等。并且，环境控制设备400也可以包括遮光设备(例如百叶窗以及窗帘等)的开闭设备，所述遮光设备开闭自如地覆盖在窗户上。并且，环境控制设备400也可以包括影像设备、音响设备或影像音响设备。并且，环境控制设备400还可以包括芳香器。另外，环境控制设备400也可以包括按摩器。

[控制装置]

接着，对控制装置100进行说明。控制装置100将行动指标信息作为输入信息来获得，根据获得的输入信息，来决定睡眠控制或觉醒控制中的环境控制设备400的控制内容。并且，控制装置100按照决定的控制内容，将用于对环境控制设备400进行控制的控制信号输出到环境控制设备400。控制装置100例如可以由微型计算机来实现，也可以由处理器等来实现。

控制装置100具体而言具备：第1获得部110、决定部120、控制部130、第2获得部150、报酬算出部160、报酬条件设定部170、更新部180、以及存储部190。这些构成要素中的除控制部130以外的构成要素，构成学习器100a。报酬算出部160、报酬条件设定部170、更新部180、以及存储部190构成学习部100b。

第1获得部110获得包括用户的计划信息的输入信息。

决定部120按照控制内容决定规则，根据输入信息来决定用于减少用户的时差反应的控制内容。决定部120具体而言对如下的控制内容的至少一方进行决定，即：在睡眠控制中被控制的环境控制设备400的控制内容、以及在觉醒控制中被控制的环境控制设备400的控制内容。控制内容决定规则被存储在存储部190。

控制部130根据由决定部120决定的控制内容，对环境控制设备400进行控制。具体而言，控制部130将与控制内容对应的控制信号输出到环境控制设备400。

第2获得部150获得评价信息，该评价信息表示针对睡眠控制或觉醒控制的用户的评价。评价信息包括表示针对由控制部130执行的控制的评价的信息，例如包括在觉醒控制后由用户经由输入装置300而输入的信息。第2获得部150虽然将由输入装置300输出的信息作为评价信息来获得，也可以将由传感器200输出的信息作为评价信息来获得。

报酬算出部160根据由第2获得部150获得的评价信息，来算出报酬。关于算出报酬的详细处理待后述。

报酬条件设定部170对报酬算出部160中的报酬的算出的条件进行设定。如后述那样，条件例如是加权系数。条件可以被预先存储在存储部190，在条件固定的情况下，也可以不设置报酬条件设定部170。

更新部180通过将基于第2获得部150获得的评价信息的值作为报酬来使用的机器学习，来更新控制内容决定规则。

存储部190是存储控制内容决定规则、时差反应减少系统10的利用履历信息、由输入装置300输出的用户的计划信息等的存储装置。存储部190例如由半导体存储器来实现。

[睡眠控制时的工作]

接着，对控制装置100的睡眠控制时的工作进行说明。图4是控制装置100的睡眠控制时的工作的流程图。

首先，第1获得部110获得包括用户的计划信息的输入信息(S110)。图5示出了能够作为输入信息来使用的计划信息。如图5所示，计划信息中包括：用户的出发日的工作计划、用户在目的地的工作计划、用户搭乘的移动体的起飞/着陆予定时刻、用户搭乘的移动体的飞行时间、用户搭乘的移动体的转乘信息、飞行的季节、飞行的时间段、用户每天的平均起床时间、用户每天的平均睡眠时间等。

第1获得部110将这些计划信息中的至少一个作为输入信息来获得。第1获得部110例如从传感器200获得计划信息，也可以从输入装置300获得计划信息，也可以获得被存储在存储部190的计划信息。

接着，决定部120按照被存储在存储部190的控制内容决定规则，根据输入信息，决定用于减少用户的时差反应的睡眠控制的控制内容，即决定包括输出光的设备的环境控制设备400的控制内容(S120)。

控制内容决定规则例如由决定控制内容的价值的行动价值函数来表示。行动价值函数是价值函数的一个例子。决定部120例如利用行动价值函数，根据输入信息，将推测为报酬最高的控制内容(例如，针对时差反应的减少效果能够得到最大限的报酬的控制内容)，决定为针对该输入信息的控制内容。

在时差反应减少系统10被用于移动体的情况下，控制内容决定规则由多个用户共享。不过，决定部120也可以按照用户而不同的控制内容决定规则，来算出针对控制内容的该用户的报酬。

在睡眠控制的控制内容中包括图6以及图7所示的控制参数。图6以及图7是用于说明睡眠控制的控制参数的图。图6以及图7的纵轴表示照明设备发出的光的亮度，图6以及图7的横轴表示时间。

另外，以下主要对放松期间、睡眠导入期间、以及睡眠期间之中的睡眠导入期间的控制内容(换而言之，光的晃动控制的控制内容)进行说明。

如图6所示，睡眠控制的控制参数中包括：睡眠导入期间的全体长度、最大亮度以及最小亮度、提高亮度的上升所需时间、维持最大亮度的时间、降低亮度的下降所需时间、维持最小亮度的时间、周期、示出提高亮度时的变化的方式(例如倾斜)的上升曲线、以及示出降低亮度时的变化的方式(例如倾斜)的下降曲线。另外，最大亮度以及最小亮度意味着，使亮度进行周期性变化时的亮度的最大值以及最小值。

并且，最大亮度、最小亮度、各种时间、以及各种曲线的至少一个也可以随着时间的经过而发生变化。图7示出了最大亮度随着时间的经过而发生变化的例子。

如图7所示，睡眠控制的控制参数中还可以包括：使最大亮度开始变化的变化开始时间、使最大亮度的变化结束的变化结束期间、示出最大亮度的变化的方式的变化曲线、以及示出变化后的最大亮度的变化目标值。

另外，在睡眠控制中，也有取代亮度而使发光色(照明设备发出的光的色度)变更的情况，或者除了亮度以外还使发光色变更的情况。在对发光色进行变更的情况下，在睡眠控制的控制参数中除了与上述的亮度有关的控制参数以外，还可以包括与发光色有关的控制参数。图8是用于说明睡眠控制中的发光色的变更的色度图。

例如图8所示，在使发光色从色度图上的b点变化到a点的情况下，在睡眠控制的控制参数中包括：a点的色度以及b点的色度、到达a点的色度的时间、维持a点的色度的时间、到达b点的色度的时间、维持b点的色度的时间、周期、到达a点的色度的曲线的形状、以及到达b点的色度的曲线的形状。

并且，在这种情况下也是同样，a点的色度、b点的色度、各种期间、以及各种曲线的至少一个可以随着时间的经过而变化。例如，在a点的色度随着时间的经过来变化的情况下，在睡眠控制的控制参数中可以包括：使a点的色度开始变化的变化开始时间、使a点的色度的变化结束的变化结束期间、示出a点的色度的变化的方式的变化曲线、以及示出变化后的a点的色度的变化目标值。

在步骤S120之后，控制部130根据决定的控制内容，执行环境控制设备400的控制(即睡眠控制)(S130)。具体而言，控制部130将与控制内容对应的控制信号输出到环境控制设备400。

接着，第2获得部150获得示出针对在步骤S130执行的睡眠控制的用户的评价的评价信息(S140)。第2获得部150虽然是将由输入装置300输出的信息作为评价信息来获得，也可以将由传感器200输出的信息作为评价信息来获得。

接着，报酬算出部160根据在步骤S140获得的评价信息，来算出报酬(S150)。关于报酬的算出工作的详细待后述。另外，步骤S150的评价信息的获得虽然是在睡眠控制之后执行的，不过也可以在睡眠控制中执行。

接着，更新部180利用由报酬算出部160算出的报酬，通过机器学习来更新控制内容决定规则(S160)。更新部180通过基于报酬算出部160所算出的报酬的强化学习，来学习适于用户的控制内容(即该用户中的能够得到最多的报酬的控制内容)的决定。如以上所述，在实施方式1中，更新部180通过更新行动价值函数，来更新控制内容决定规则。

以下对行动价值函数的更新方法进行说明。作为强化学习的代表的方法有已知的Q学习和TD学习等。以下，以Q学习为例进行说明。Q学习是在输入信息所示的用户的状态s下，学习对控制内容a进行选择的价值Q(s、a)的方法，在某状态s时，将价值Q(s、a)最高的控制内容a作为最佳的控制内容来选择。学习器100a(更新部180)在某状态s下选择各种控制内容a，并对此时的控制内容a给予报酬。据此，学习器100a选择更好的控制内容，即进行正确的价值Q(s、a)的学习。这种价值Q(s、a)的更新式例如能够由式1来表示。

(数式1)

在此，s_t表示时刻t中的状态，a_t表示时刻t中的控制内容。通过控制内容a_t，状态变化为s_t+1。r_t+1表示通过该状态的变化而得到的报酬。并且，带有max的项是，在状态s_t+1下，将γ与此时知道的Q值最高的控制内容a_t+1被选择的情况下的Q值相乘的结果。在此，γ是0＜γ≤1的参数，被称为贴现率。并且，α是学习系数，在0＜α≤1的范围。

另外，上述的方法是强化学习的方法的一个例子。在强化学习中可以采用已知的任意的方法，例如，利用了神经网络的方法、在强化学习中组合深度学习的方法等。

[报酬的算出工作]

接着，对上述步骤S150的报酬的算出工作的详细进行说明。图9是报酬的算出工作的流程图。

首先，报酬算出部160决定针对睡眠的质量的个别报酬Fa(S210)。报酬算出部160例如将示出由输入装置300输出的用户的主观评价结果的主观指标信息作为评价信息，来决定个别报酬Fa，也可以将由作为传感器200而使用的体动传感器检测的睡眠中的用户的体动(具体而言，体动数或体动大小)作为评价信息，来决定个别报酬Fa。在这种情况下，主观指标信息所示的睡眠的质量越高，则个别报酬Fa的值就越大，体动数越少(或体动的大小越小)，则个别报酬Fa的值越大。

接着，报酬算出部160决定针对到入睡为止的时间的个别报酬Fb(S220)。报酬算出部160例如将作为传感器200而使用的体动传感器所检测出的用户的体动作为评价信息，将从睡眠导入期间的开始时刻直到体动数成为比规定值小的时刻为止的时间，确定为到入睡为止的时间。并且，报酬算出部160虽然决定个别报酬Fb，但是也可以根据作为传感器200而使用的脑电波检测仪所检测的用户的脑波，来确定用户的入睡时刻(即到入睡为止的时间)。在这种情况下，到入睡为止的时间越短，个别报酬Fb的值就越大。

接着，报酬算出部160决定针对用户的觉醒后的身体状况的个别报酬Fc(S230)。报酬算出部160例如将由输入装置300输出的用户的主观指标信息作为评价信息，来决定个别报酬Fc。在这种情况下，主观指标信息所示的觉醒后的身体状况越好，个别报酬Fc的值就越大。

接着，报酬算出部160决定针对用户的体内节律的个别报酬Fd(S240)。报酬算出部160例如通过作为传感器200而使用的心率监测仪所检测的心拍数(或心拍变动的频率成分)，来估计用户的自律神经的活动(交感神经以及副交感神经的哪一个占优势)，对由估计出的自律神经的活动而决定的生物节律是否符合目的地的时刻(时间周期)进行判断。在这种情况下，生物节律越符合目的地的时刻(生物节律与目的地的时刻的偏差越小)，个别报酬Fd的值就越大。

于是，报酬算出部160根据在步骤S210～S240决定的个别报酬Fa～Fd，决定针对控制内容的报酬F(S250)。此时，报酬算出部160可以通过对个别报酬Fa～Fd进行加权并相加，来算出报酬F。例如，报酬算出部160可以根据式2来算出报酬F。

F＝w1×Fa+w2×Fb+w3×Fc+w4×Fd··(式2)

w1～w4是由报酬条件设定部170设定的项目的每一个的权重，是报酬条件的一个例子。即，报酬条件设定部170对报酬算出部160进行加权加法时的权重w1～w4进行设定。

以上对报酬的算出工作进行了说明，这种报酬的算出工作为一个例子。例如，用于决定个别报酬的项目(睡眠的质量、到入睡为止的时间、觉醒后的身体状况、以及体内节律)为一个例子，报酬可以通过针对至少一个项目决定个别报酬来算出。并且，在报酬的算出中，也可以针对其他的项目来决定个别报酬。图10示出了能够用于报酬的算出的项目。

另外，个别报酬可以根据睡眠控制中或睡眠控制后的用户的状态来进行绝对性的决定，也可以根据入睡前以及觉醒后的用户的状态的变化来进行相对性的决定。

[觉醒控制时的工作]

接着，对控制装置100的觉醒控制时的工作进行说明。关于觉醒控制时的工作的流程图，与图4的睡眠控制时的工作的流程图几乎相同。即，在图4的流程图的说明中，“睡眠控制”的用语可以恰当地替换成“觉醒控制”。在觉醒控制的控制内容中包括图11所示的控制参数。图11是用于说明觉醒控制的控制参数的图。图11的纵轴表示照明设备发出的光的亮度，图11的横轴表示时间。

觉醒控制是指，从觉醒控制期间的开始时刻直到觉醒控制期间的结束时刻，逐渐地使照明设备发出的光的亮度增加之后，使其固定的控制。据此，时差反应减少系统10能够使用户舒适地觉醒。作为由决定部120决定的控制参数可以举例示出：(a)觉醒控制期间的长度、(b)最大亮度、(c)到达最大亮度为止的所需时间、(d)维持最大亮度的时间、以及(e)到达最大亮度为止的亮度的曲线的形状。曲线的形状包括：直线状、向上的凸状、向下的凸状等形状。

另外，在觉醒控制中也可以取代亮度，或者除了亮度以外还使发光色(照明设备发出的光的色度)变更。在发光色被变更的情况下，图11的纵轴可以替换为发光色。

例如，在使上述的图6中的色度图上的b点的色度变化到a点的情况下，作为由决定部120决定的控制参数可以举例示出：(a)觉醒控制期间的长度、(b)a点的色度、(c)色度从b点到达a点的所需时间、(d)维持a点的色度的时间、以及(e)到达a点的色度为止的色度的曲线的形状。曲线的形状中包括：直线状、朝上的凸状、以及朝下的凸状等形状。

并且，在觉醒控制中，除了照明设备以外，还可对空调设备进行控制。将空调设备作为控制对象的觉醒控制是指，从觉醒控制期间的开始时刻到觉醒控制期间的结束时刻，在使空调设备发出的气流的强度逐渐增强之后，控制成固定。即，图11的纵轴替代成气流的强度。

在这种情况下，作为由决定部120决定的控制参数可以举例示出：(a)觉醒控制期间的长度、(b)最大气流、(c)到达最大气流的所需时间、(d)最大气流的维持时间、以及(e)到达最大气流的气流的强度的曲线的形状。在曲线的形状中包括直线状、朝上的凸状、朝下的凸状等形状。

在进行觉醒控制的情况也是同样，第2获得部150获得评价信息，报酬算出部160根据获得的评价信息，算出报酬，所述评价信息示出针对觉醒控制的用户的评价。这种情况下的报酬例如是通过针对图10所示的多个项目之中的至少一个项目决定个别报酬而算出的。

另外，在睡眠控制以及觉醒控制成为一组而被执行的情况下，可以将合计的控制时间(入睡导入期间以及觉醒控制期间合起来的期间)作为控制内容来决定。并且，在睡眠控制以及觉醒控制成为一组被执行的情况下，报酬可以针对睡眠控制以及觉醒控制这一组来算出，也可以针对睡眠控制以及觉醒控制分别算出。

[其他的输入信息1]

输入信息并非受限于计划信息。图12示出了能够作为输入信息来使用的其他的信息。

第1获得部110也可以将示出用户的身心的状态的生理指标信息作为输入信息来获得。生理指标信息中包括：心拍(脉波)、眨眼/视线、眼球运动、瞳孔变动、皮肤温度(末梢、鼻子、额头)、表情(感情)、脑波、唾液、头部的动作、发汗(通常发汗/精神性发汗)、呼吸、体动、血流(脑/末梢)等。另外，在作为生理指标信息而使用的心拍中不仅包括心拍数，而且还包括心拍变动的频率成分LF、HF、HF/LF等。生理指标信息例如可以从传感器200获得，也可以从输入装置300获得。

并且，第1获得部110也可以将示出用户的行动的行动指标信息作为输入信息来获得。在行动指标信息中包括：药物的摄取履历、从搭乘开始经过的时间、出发日的前一天以及出发日当天的饮食履历、过去(包括出发日前一天)的睡眠时间、睡眠的质量、起床/就寝时刻、离席频度、容易发困的时间段数据、工作状态、会话数量、会话状态等。行动指标信息例如可以从传感器200获得，也可以从输入装置300获得。

并且，第1获得部110将主观指标信息作为输入信息来获得。主观指标信息中包括：睡意、干劲、身体状况/身体疲劳、集中力、行为活动、紧张/放松程度、急躁程度、易怒、悲伤、精神压力等。主观指标信息可以包括示出这些项目随着时间发生变化的信息(时间信息)。主观指标信息例如从输入装置300获得。

并且，第1获得部110可以将时差反应减少系统10的利用履历信息作为输入信息来获得。利用履历信息中包括：用户的过去的时差反应减少系统10的利用时间、利用时刻、星期、时机、输入信息、输出信息、报酬等。利用履历信息例如从存储部190获得。即，时差反应减少系统10的利用履历信息被存储在存储部190。

并且，第1获得部110可以将环境信息作为输入信息来获得。环境信息中包括：天气(日照量)、受光量(即光环境信息)、机内环境信息、出发地环境信息、目的地环境信息、机外的环境信息(气流信息)等。环境信息例如可以从传感器200获得，也可以从输入装置300获得。

并且，第1获得部110可以将用户信息作为输入信息来获得。用户信息中包括：性別、年龄、人种、出身、职业、体质(光过敏等)、病历(包括失眠症等)等。用户信息例如从输入装置300获得。

[其他的输入信息2]

并且，为了对觉醒控制中的环境控制设备400的控制内容进行决定，而可以将睡眠控制的控制参数(即控制内容)作为输入信息来使用。即，为了对觉醒控制中的控制内容进行决定，第1获得部110可以将睡眠控制中的控制参数作为输入信息来获得。具体而言，第1获得部110可以将以后要进行的觉醒控制之前(例如将要进行控制之前)的睡眠导入期间(或睡眠期间)中进行的睡眠控制中的控制参数，作为输入信息来获得。

相反，为了决定睡眠控制中的环境控制设备的控制内容，而可以将觉醒控制的控制参数(即控制内容)用作输入信息。即，为了对睡眠控制中的控制内容进行决定，第1获得部110可以将觉醒控制中的控制参数作为输入信息来获得。具体而言，第1获得部110可以将以后要进行的睡眠控制之前(例如、直前)的觉醒控制期间中进行的觉醒控制中的控制参数，作为输入信息来获得。

[变形例1]

第2获得部150能够在执行睡眠控制时获得评价信息。这样，报酬算出部160能够根据获得的评价信息，算出在进行睡眠控制时(即睡眠控制的执行中)的报酬，更新部180能够根据在睡眠控制的执行中算出的报酬，来更新控制内容决定规则(行动价值函数)。这样，决定部120能够在进行睡眠控制时对控制内容进行变更(即，重新决定控制内容)。

这样，通过在睡眠控制的执行中对控制内容重新决定，从而，时差反应减少系统10能够针对此时的用户的状态决定更加恰当的控制内容，从而能够有效地使用户入睡。同样，在觉醒控制的执行中也能够对控制内容重新决定。

[变形例2]

存储部190可以存储由决定部120过去决定的控制内容。据此，时差反应减少系统10在由于某种原因而不能获得输入信息，从而控制内容不能决定的情况下，能够将被存储在存储部190的控制内容来代用。另外，被存储在存储部190的控制内容，可以作为上述的利用履历信息的一部分来存储，也可以被单独存储。存储部190例如可以将控制内容，与为了决定该控制内容而使用的输入信息对应起来存储，也可以不将控制内容与为了决定该控制内容而使用的输入信息对应起来存储。

[效果等]

如以上说明所示，时差反应减少系统10具备：第1获得部110，获得包括用户的计划信息的输入信息；决定部120，按照控制内容决定规则，根据输入信息来决定用于减少用户的时差反应的控制内容，该控制内容也是包括对光进行输出的设备的环境控制设备400的控制内容；控制部130，根据被决定的控制内容，执行环境控制设备400的控制；第2获得部150，获得评价信息，该评价信息示出用户针对被执行的控制的评价；以及更新部180，通过将基于评价信息的值作为报酬来利用的机器学习，来更新控制内容决定规则。

这种时差反应减少系统10能够根据与计划信息以及评价信息相关联而进行了学习的控制内容决定规则，来决定控制内容。因此，时差反应减少系统10能够有效地减少用户的时差反应。

并且，例如控制内容决定规则包括用于决定控制内容的价值的价值函数，更新部180对价值函数进行更新。

这种时差反应减少系统10能够根据与行动指标信息以及评价信息相关联而进行了学习的价值函数，来决定控制内容。

并且，例如，时差反应减少系统10进一步具备：报酬算出部160，根据评价信息，算出报酬；报酬条件设定部170，设定报酬算出部160进行报酬的算出时的条件。

这种时差反应减少系统10能够按照由报酬条件设定部170设定的条件，来算出报酬。例如，若按照用户的嗜好来设定条件，则能够容易地决定依照了用户的嗜好的控制内容。

并且，例如，时差反应减少系统10还具备存储部190，存储由决定部120决定的控制内容。

这种时差反应减少系统10通过读出被存储在存储部190的控制内容(例如上次的控制内容)，从而即使在没能获得输入信息而不能决定控制内容的情况下，也能够进行用于减少用户的时差反应的控制。

并且，例如，更新部180根据在以上述的控制内容来对环境控制设备400进行控制时由第2获得部150获得的评价信息，来更新控制内容决定规则。决定部120进一步，按照在对环境控制设备400进行控制时被更新的控制内容决定规则，而在进行控制时重新决定针对输入信息的控制内容。

这种时差反应减少系统10能够按照控制中的用户的状态，来更新控制内容决定规则，从而能够变更控制内容。即，时差反应减少系统10通过在控制中进行学习，从而能够针对此时的用户的状态决定更恰当的控制内容，这样能够更加有效地减少用户的时差反应。

并且，例如，在输入信息中还包括如下信息中的至少一个，这些信息是指：用户的生理指标信息、用户的行动指标信息、时差反应减少系统10的利用履历信息、以及环境信息。

这样的时差反应减少系统10能够根据评价信息与生理指标信息、行动指标信息、利用履历信息、以及环境信息的至少一个相关联而进行了学习的控制内容决定规则，来决定控制内容。

并且，例如在环境控制设备400还包括对光进行输出的设备以外其他的设备。决定部120对包括上述的其他的设备的环境控制设备400的控制内容进行决定。

这种时差反应减少系统10能够分别利用对光进行输出的设备以及这种设备以外的设备，来进行用于使用户觉醒的控制。

并且，例如，控制部130能够利用环境控制设备400，来执行使用户入睡的睡眠控制。决定部120决定睡眠控制中的控制参数，以此作为控制内容。

这种时差反应减少系统10通过决定睡眠控制中的控制参数，从而能够减少用户的时差反应。

并且，例如，控制部130能够利用环境控制设备400，执行用于使用户觉醒的觉醒控制。决定部120决定觉醒控制中的控制参数，以此作为控制内容。

这种时差反应减少系统10能够通过对觉醒控制中的控制参数进行决定，来减少用户的时差反应。

并且，时差反应减少系统10等的计算机执行的时差反应减少方法包括：第1获得步骤(S110)，获得包括用户的计划信息的输入信息；决定步骤(S120)，按照控制内容决定规则，根据输入信息，决定用于减少用户的时差反应的控制内容，该控制内容也是包括对光进行输出的设备的环境控制设备400的控制内容；控制步骤(S130)，根据被决定的控制内容，来执行环境控制设备400的控制；第2获得步骤(S140)，获得评价信息，该评价信息示出用户针对被执行的控制的评价；以及更新步骤(S160)，通过将基于评价信息的值作为报酬来使用的机器学习，来更新控制内容决定规则。

这种时差反应减少系统10能够根据与行动指标信息以及评价信息相关联而进行了学习的控制内容决定规则，来决定控制内容。因此，时差反应减少系统10能够有效地减少用户的时差反应。

(实施方式2)

[构成]

在实施方式2中，针对时差反应减少系统的其他的构成，参照图13来进行说明。图13是示出实施方式2所涉及的时差反应减少系统的功能构成的方框图。

如图13所示，实施方式2所涉及的时差反应减少系统10b具备：多个个别时差反应减少系统10c、以及以能够与多个个别时差反应减少系统10c的每一个进行通信的方式来连接的服务器装置500。

多个个别时差反应减少系统10c的每一个例如与实施方式1的时差反应减少系统10的构成相同，在图13中，对于第1获得部110以及存储部190以外的构成省略图示。时差反应减少系统10b所具备的多个个别时差反应减少系统10c的数量没有特殊的限制。

服务器装置500从多个个别时差反应减少系统10c的每一个，获得第1获得部110所获得的输入信息、以及被存储在存储部190的学习结果(例如，控制内容、报酬、以及被更新的行动价值函数)的至少一方，并进行集中管理。服务器装置500将获得的信息存放到存储部510。据此，能够共享多个个别时差反应减少系统10c的每一个的学习结果等。

另外，多个个别时差反应减少系统10c所分别具备的多个控制装置100中的至少一个控制装置100可以作为服务器装置来发挥作用。即时差反应减少系统10b和个别时差反应减少系统10c可以不必另外具备服务器装置500。在这种情况下，多个个别时差反应减少系统10c的每一个以彼此能够通信的方式来连接，且相互间至少对输入信息、评价信息以及学习结果中的一方进行通信。于是，更新部180根据从其他的个别时差反应减少系统10c获得的输入信息以及学习结果的至少一方，来更新行动价值函数。

[效果等]

如以上说明所示，时差反应减少系统10b具备多个个别时差反应减少系统10c，多个个别时差反应减少系统10c的每一个具有：第1获得部110、决定部120、控制部130、第2获得部150、以及更新部180。多个个别时差反应减少系统10c的每一个以相互能够通信的方式来连接，且相互间至少针对输入信息以及学习结果的一方进行通信。于是，更新部180根据从其他的个别时差反应减少系统10c获得的输入信息以及学习结果的至少一方，来更新控制内容决定规则。

在这种时差反应减少系统10b中，更新部180能够根据其他的个别时差反应减少系统10c获得的输入信息等，来更新自身装置的行动价值函数。因此，能够提高自身装置中的学习的精确度，得到更恰当的行动价值函数。

并且，时差反应减少系统10b具备：多个个别时差反应减少系统10c、以及以能够与多个个别时差反应减少系统10c的每一个进行通信的方式而连接的服务器装置500。

这种时差反应减少系统10b能够对输入信息、评价信息、以及学习结果的至少一方进行集中管理。并且，在服务器装置500具备学习部的情况下，能够根据从多个个别时差反应减少系统10c的每一个获得的输入信息以及评价信息等，通过机器学习来更新行动价值函数。因此，能够提高学习的精确度，从而得到更恰当的行动价值函数。另外，在这种情况下，服务器装置500也可以具备比控制装置100能够进行快速的处理的处理器等。

(其他的实施方式)

以上虽然对实施方式进行了说明，但是，本发明并非受上述的实施方式所限。

例如在上述的实施方式中，时差反应减少系统可以将多个模式的控制内容作为给用户的推荐模式来决定，用户可以利用输入装置从多个模式的控制内容中选择一个。在这种情况下，时差反应减少系统执行被选择的控制内容的控制。

并且，在上述的实施方式中，对睡眠控制或觉醒控制中的控制参数被决定为控制内容的例子进行了说明。然而，控制内容并非受睡眠控制或觉醒控制中的控制参数所限。例如，作为控制内容，可以将通常时的照明设备的发光参数作为控制参数来决定。

并且，时差反应减少系统并非必需要进行睡眠控制以及觉醒控制这双方。时差反应减少系统也可以进行睡眠控制以及觉醒控制的至少一方。并且，时差反应减少系统也可以进行用于减少用户的时差反应的其他的控制。

并且，时差反应减少系统也可以在飞机以外的移动体中使用，也可以在机场等空港等移动体的内部以外的场所使用。

并且，在上述的实施方式中，时差反应减少系统虽然由多个装置来实现，不过也可以作为单一的装置来实现。在时差反应减少系统由多个装置来实现的情况下，在上述的实施方式中说明的构成要素可以通过任意的分配方式分配到多个装置中。并且，时差反应减少系统也可以作为客户端服务器系统来实现。

并且，在上述的实施方式中，对于装置间的通信方法没有特殊的限定。在装置间进行的通信例如可以是，特定的小电力无线、利用ZigBee(注册商标)、Bluetooth(注册商标)、或Wi-Fi(注册商标)等通信规格的无线通信，也可以是有线通信。并且，在装置间的通信中也可以存在没有进行图示的中继装置。

并且，在上述的实施方式中，特定的处理部所进行的处理也可以由其他的处理部来执行。并且，多个处理的顺序可以变更，也可以并行执行。

并且，在上述的实施方式中，各构成要素可以通过执行适于各构成要素的软件程序来实现。各构成要素也可以通过CPU或处理器等程序执行部读出被记录在硬盘或半导体存储器等记录介质中的软件程序并执行来实现。

并且，各构成要素可以由硬件来实现。例如，各构成要素可以是电路(或集成电路)。这些电路可以是全体作为一个电路来构成，也可以分别作为电路来构成。并且，这些电路可以分别是通用的电路，也可以是专用的电路。

并且，本发明的概括性的或具体的形态可以作为系统、装置、方法、集成电路、计算机程序或计算机可读取的CD-ROM等记录介质来实现。并且可以通过系统、装置、方法、集成电路、计算机程序以及记录介质的任意的组合来实现。例如，本发明可以作为上述的实施方式所涉及的控制装置来实现。并且，本发明可以作为用于使计算机执行上述的实施方式所涉及的时差反应减少方法的程序来实现，也可以作为记录了这些程序的计算机可读取的非暂时性的记录介质来实现。

另外，针对各实施方式执行本领域技术人员所能够想到的各种变形而得到的形态、或者在不脱离本发明的主旨的范围内对各实施方式中的构成要素以及功能进行任意地组合而实现的形态均包括在本发明内。

符号说明

10、10b 时差反应减少系统

10c 个别时差反应减少系统

110 第1获得部

120 决定部

130 控制部

150 第2获得部

160 报酬算出部

170 报酬条件设定部

180 更新部

190 存储部

400 环境控制设备

500 服务器装置

Claims

1.一种时差反应减少系统，具备：

第1获得部，获得包括用户的计划信息的输入信息；

决定部，按照控制内容决定规则，根据所述输入信息，决定用于减少所述用户的时差反应的控制内容，该控制内容也是包括对光进行输出的设备的环境控制设备的控制内容；

控制部，根据决定的所述控制内容，执行所述环境控制设备的控制；

第2获得部，获得评价信息，该评价信息示出所述用户针对被执行的所述控制的评价；以及

更新部，通过将基于所述评价信息的值作为报酬来利用的机器学习，来更新所述控制内容决定规则。

2.如权利要求1所述的时差反应减少系统，

所述控制内容决定规则包括用于决定所述控制内容的价值的价值函数，

所述更新部对所述价值函数进行更新。

3.如权利要求1或2所述的时差反应减少系统，

该时差反应减少系统进一步具备：

报酬算出部，根据所述评价信息，算出所述报酬；以及

报酬条件设定部，对所述报酬算出部进行所述报酬的算出时的条件进行设定。

4.如权利要求1所述的时差反应减少系统，

该时差反应减少系统进一步具备存储部，存储由所述决定部决定的所述控制内容。

5.如权利要求1所述的时差反应减少系统，

所述更新部，根据在以所述控制内容来对所述环境控制设备进行控制时由所述第2获得部获得的所述评价信息，来更新所述控制内容决定规则，

所述决定部，进一步，按照在对所述环境控制设备进行控制时被更新的所述控制内容决定规则，在所述控制中重新决定针对所述输入信息的控制内容。

6.如权利要求1所述的时差反应减少系统，

所述输入信息进一步包括如下信息中的至少一个，这些信息是指，所述用户的生理指标信息、所述用户的行动指标信息、所述时差反应减少系统的利用履历信息、以及环境信息。

7.如权利要求1所述的时差反应减少系统，

所述环境控制设备进一步包括对所述光进行输出的设备以外的其他的设备，

所述决定部，对包括所述其他的设备的所述环境控制设备的所述控制内容进行决定。

8.如权利要求1所述的时差反应减少系统，

所述控制部能够利用所述环境控制设备，来执行用于使所述用户入睡的睡眠控制，

所述决定部，决定所述睡眠控制中的控制参数，以此作为所述控制内容。

9.如权利要求1所述的时差反应减少系统，

所述控制部能够利用所述环境控制设备，来执行用于使所述用户觉醒的觉醒控制，

所述决定部，决定所述觉醒控制中的控制参数，以此作为所述控制内容。

10.如权利要求1所述的时差反应减少系统，

该时差反应减少系统具备多个个别时差反应减少系统，该多个个别时差反应减少系统的每一个具有：所述第1获得部、所述决定部、所述控制部、所述第2获得部、以及所述更新部，

多个个别时差反应减少系统的每一个以相互能够通信的方式来连接，且相互间对所述输入信息以及学习结果的至少一方进行通信，

所述更新部，根据从其他的个别时差反应减少系统获得的所述输入信息以及所述学习结果的至少一方，来更新所述控制内容决定规则。

11.如权利要求10所述的时差反应减少系统，

该时差反应减少系统具备：

所述多个个别时差反应减少系统；以及

服务器装置，与所述多个个别时差反应减少系统的每一个以能够通信的方式来连接。

12.一种时差反应减少方法，包括：

第1获得步骤，获得包括用户的计划信息的输入信息；

决定步骤，按照控制内容决定规则，根据所述输入信息，来决定用于减少所述用户的时差反应的控制内容，该控制内容也是包括对光进行输出的设备的环境控制设备的控制内容；

控制步骤，根据被决定的所述控制内容，来执行所述环境控制设备的控制；

第2获得步骤，获得评价信息，该评价信息示出所述用户针对被执行的所述控制的评价；以及

更新步骤，通过将基于所述评价信息的值作为报酬来利用的机器学习，来更新所述控制内容决定规则。