CN112052349A - 内容选择方法、内容选择装置以及记录介质 - Google Patents

内容选择方法、内容选择装置以及记录介质 Download PDF

Info

Publication number
CN112052349A
CN112052349A CN202010497320.8A CN202010497320A CN112052349A CN 112052349 A CN112052349 A CN 112052349A CN 202010497320 A CN202010497320 A CN 202010497320A CN 112052349 A CN112052349 A CN 112052349A
Authority
CN
China
Prior art keywords
emotional state
user
image
images
emotion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010497320.8A
Other languages
English (en)
Other versions
CN112052349B (zh
Inventor
吹野美和
竹内宏树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of CN112052349A publication Critical patent/CN112052349A/zh
Application granted granted Critical
Publication of CN112052349B publication Critical patent/CN112052349B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53—Querying
    • G06F16/535—Filtering based on additional data, e.g. user or group profiles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/011—Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns

Abstract

本发明提供的内容选择方法，让计算机，获取与至少一个情绪的强度相对应的多个图像；使显示器可选择地显示所述多个图像；将所述多个图像之中与用户选择的图像相对应的所述至少一个情绪的强度作为表示所述用户当前的情绪状态的当前情绪状态而获取；获取表示所述用户作为目标的情绪状态的目标情绪状态；决定用于使所述当前情绪状态变化为所述目标情绪状态的内容；输出所述内容。

Description

内容选择方法、内容选择装置以及记录介质
技术领域
本发明涉及一种选择用于使用户的情绪状态发生变化的内容的技术。
背景技术
一直以来，存在将用于使情绪状态发生变化的内容提供给用户的内容提供方法。
例如，日本专利公开公报特开2018-195043号公报公开的内容提供方法，获取表示用户作为目标的情绪状态的目标情绪状态值，获取用户的生命体征数据，基于生命体征数据计算表示用户当前的情绪状态的当前情绪状态值，计算目标情绪状态值和当前情绪状态值之间的差值，根据差值决定用于使情绪状态发生变化的内容，将所决定的内容提供给用户。
而且，例如，日本专利公开公报特开2011-170690号公报公开的信息处理装置，基于从图像数据中提取的图像信息，对包含多个图像数据的每个图像数据组解析主题性，基于主题性选择与主题性相关联而存储的规定的处理和图像数据组的组合。
然而，在上述以往技术中，用户难以凭感觉选择自身的情绪状态，并且，难以从用户选择的图像中方便地确定用户当前的情绪状态，需要进一步改进。
发明内容
本发明是为了解决上述问题而做出的发明，其目的在于提供一种用户可以凭感觉选择自身的情绪状态并可以从用户选择的图像中方便地确定用户当前的情绪状态的技术。
本发明涉及的内容选择方法，让计算机，获取与至少一个情绪的强度相对应的多个图像；使显示器可选择地显示所述多个图像；将所述多个图像之中与用户选择的图像相对应的所述至少一个情绪的强度作为表示所述用户当前的情绪状态的当前情绪状态而获取；获取表示所述用户作为目标的情绪状态的目标情绪状态；决定用于使所述当前情绪状态变化为所述目标情绪状态的内容；输出所述内容。
附图说明
图1是表示本发明的一实施方式涉及的内容提供系统的构成的一个例子的示意图。
图2是表示本发明的一实施方式涉及的终端装置的构成的一个例子的方框图。
图3是表示本发明的一实施方式涉及的服务器的构成的一个例子的方框图。
图4是表示本实施方式的图像数据库的一个例子的示意图。
图5是表示在本实施方式对于图像进行的问卷调查的一个例子的示意图。
图6是表示在本实施方式向用户提示的图像的一个例子的示意图。
图7是表示在本实施方式将多个情绪的强度相互对应的图像的一个例子的示意图。
图8是表示本发明的一实施方式涉及的内容提供装置的构成的一个例子的方框图。
图9是表示本发明的一实施方式涉及的扬声器装置的构成的一个例子的方框图。
图10是用于说明本实施方式的终端装置以及服务器的动作的流程图。
图11是表示在本实施方式将用户ID与多个图像的显示位置相互对应的显示位置数据库的一个例子的示意图。
图12是表示在本实施方式显示在终端装置的显示部的多个图像的显示位置的一个例子的示意图。
图13是表示在本实施方式显示在终端装置的显示部的多个图像的显示位置的第一变形例的示意图。
图14是表示在本实施方式显示在终端装置的显示部的多个图像的显示位置的第二变形例的示意图。
图15是表示在本实施方式显示在终端装置的显示部的多个图像的显示位置的第三变形例的示意图。
图16是表示在本实施方式显示在终端装置的显示部的多个图像的显示位置的第四变形例的示意图。
图17是表示在本实施方式显示在终端装置的显示部的第一图像选择画面的一个例子的示意图。
图18是表示在本实施方式显示在终端装置的显示部的第二图像选择画面的一个例子的示意图。
图19是表示在本实施方式显示在终端装置的显示部的图像选择画面的一个例子的示意图。
图20是表示在本实施方式在输入表示用户作为目标的情绪状态的坐标点之前显示在终端装置的显示部的坐标选择画面的一个例子的示意图。
图21是表示在本实施方式在输入表示用户作为目标的情绪状态的坐标点之后显示在终端装置的显示部上的坐标选择画面的一个例子的示意图。
图22是用于说明本实施方式的内容提供装置以及扬声器装置的动作的流程图。
图23是表示在本实施方式在开始输出音乐内容时所显示的内容提示画面的一个例子的示意图。
图24是表示在本实施方式在输出音乐内容过程中所显示的内容提示画面的一个例子的示意图。
图25是表示本实施方式对于音乐内容进行的问卷调查的一个例子的示意图。
图26是用于说明在本实施方式对觉醒度进行校正的示意图。
图27是用于说明在本实施方式决定与用户的生命体征信息对应的音乐内容的示意图。
图28是表示在本实施方式通过递归图(Recurrence Plot)制作的多个图像的一个例子的示意图。
图29是表示本发明的实施方式的变形例涉及的终端装置的构成的一个例子的方框图。
具体实施方式
(本发明的基础知识)
在上述的日本专利公开公报特开2018-195043号公报公开的技术中，虽然基于生命体征数据计算表示用户当前的情绪状态的当前情绪状态值，但是，并没有向用户提示表示多个情绪状态的多个图像，也没有从多个图像之中选择表示用户当前的情绪状态的图像。
而且，在上述的日本专利公开公报特开2011-170690号公报公开的技术中，基于从图像数据中提取的图像信息对包含多个图像数据的每个图像数据组解析主题性。主题性被显示在基于表示规定的评价基准的多个特征轴的特征量空间上。作为特征轴，列举有“静态-动态”、“可爱-帅气”以及“理性-感性”3个轴。各个特征轴的特征量用数值来表示。
如此，日本专利公开公报特开2011-170690号公报公开的技术，虽然图像数据组的主题性被显示在基于表示规定的评价基准的多个特征轴的特征量空间上，但是，并没有向用户提示表示多个情绪状态的多个图像，也没有从多个图像之中选择表示用户当前的情绪状态的图像。
为此，在上述的任意一个以往技术中，用户都不能凭感觉选择自身的情绪状态，无法通过用户的视觉来确定当前的情绪状态。
为了解决上述问题，本发明的一方面涉及的内容选择方法，让计算机，获取与至少一个情绪的强度相对应的多个图像；使显示器可选择地显示所述多个图像；将所述多个图像之中与用户选择的图像相对应的所述至少一个情绪的强度作为表示所述用户当前的情绪状态的当前情绪状态而获取；获取表示所述用户作为目标的情绪状态的目标情绪状态；决定用于使所述当前情绪状态变化为所述目标情绪状态的内容；输出所述内容。
根据该构成，因为将被显示在显示器上的多个图像之中与用户选择的图像相对应的至少一个情绪的强度作为表示用户当前的情绪状态的当前情绪状态而获取，用户可以凭感觉选择自身的情绪状态并可以从用户选择的图像中方便地确定用户当前的情绪状态。
而且，在所述的内容选择方法，还获取用于识别所述用户的用户识别信息；在获取所述多个图像时，获取预先与所述用户识别信息相对应的所述多个图像。
根据该构成，因为获取用于识别用户的用户识别信息还获取预先与用户识别信息相对应的多个图像，对于多个图像，可以针对每个用户对应不同的情绪的强度，能获取更准确的用户的情绪的强度。
而且，在所述的内容选择方法，还在获取所述当前情绪状态之后，使所述显示器可选择地显示所述多个图像；在获取所述目标情绪状态时，将所述多个图像之中与用户选择的图像相对应的所述至少一个情绪的强度作为所述目标情绪状态而获取。
根据该构成，因为还在获取了当前情绪状态之后，将被显示在显示器上的多个图像之中与用户选择的图像相对应的至少一个情绪的强度作为目标情绪状态而获取，对于目标情绪状态，用户也可以凭感觉从多个图像中进行选择，并可以从用户选择的图像中方便地确定用户作为目标的情绪状态。
而且，在所述的内容选择方法，还可以是，所述当前情绪状态，用以纵轴以及横轴来表示两个情绪的强度的坐标平面上的坐标值来表示，在获取了所述当前情绪状态之后，还使所述显示器显示表示所述当前情绪状态的坐标点以及所述坐标平面，在获取所述目标情绪状态时，将表示所述用户在所述坐标平面上选择的所述目标情绪状态的坐标点的坐标值作为所述目标情绪状态而获取。
根据该构成，当前情绪状态用以纵轴以及横轴来表示两个情绪的强度的坐标平面上的坐标值来表示。在获取了当前情绪状态之后，还使显示器显示表示当前情绪状态的坐标点以及坐标平面，在获取所述目标情绪状态时，将表示用户在坐标平面上选择的目标情绪状态的坐标点的坐标值作为目标情绪状态而获取。因此，用户可以方便地在坐标平面上选择作为目标的情绪状态。
而且，在所述的内容选择方法，还可以是，在显示所述多个图像时，显示与第一情绪的强度相对应的多个图像，还测量从显示所述多个图像起到所述用户选择了所述图像为止的选择时间，在所测量的所述选择时间在规定时间以下的情况下，还可选择地显示与第一情绪的强度不同的第二情绪强度相对应的多个图像。
根据该构成，还测量从显示与第一情绪的强度相对应的多个图像起到用户选择了图像为止的选择时间。而且，在所测量的选择时间在规定时间以下的情况下，还可选择地显示与第一情绪的强度不同的第二情绪强度相对应的多个图像。
因此，在用户习惯了选择与自身的情绪相对应的图像而选择时间被缩短的情况下，还进一步详细地显示用于获取用户的情绪的多个图像，能获取更准确的用户的情绪强度。
而且，在所述的内容选择方法，还可以是，还存储获取的所述当前情绪状态的履历，在上一次获取的所述当前情绪状态的所述情绪的强度与再上一次获取的所述当前情绪状态的所述情绪的强度之间的差值在阈值以上的情况下，还提高所述情绪的强度的优先度，在显示所述多个图像时，依次显示与所述优先度较高的所述情绪的强度相对应的所述多个图像。
根据该构成，因为在上一次获取的当前情绪状态的情绪的强度与再上一次获取的当前情绪状态的情绪的强度相比变化很大时，优先获取该情绪的强度，可以优先获取变化比较大的情绪的强度。
而且，在所述的内容选择方法，还可以基于当前的时刻和所选择的所述图像的特征量，校正获取的所述当前情绪状态。
根据该构成，因为基于当前的时刻和所选择的图像的特征量校正获取的当前情绪状态，例如，在根据时间段的不同观察到的图像有所不同的情况下，可以校正该看上去的不同。
而且，在所述的内容选择方法，还可以获取所述用户的生命体征信息，并基于获取的所述生命体征信息校正获取的所述当前情绪状态。
根据该构成，因为获取用户的生命体征信息，并基于获取的生命体征信息校正获取的当前情绪状态，例如，在根据用户的身体的状态的不同观察到的图像有所不同的情况下，可以校正该看上去的不同。
本发明的另一方面涉及的内容选择装置具备：获取与至少一个情绪的强度相对应的多个图像的图像获取部；使显示器可选择地显示所述多个图像的显示控制部；将所述多个图像之中与用户选择的图像相对应的所述至少一个情绪的强度作为表示所述用户当前的情绪状态的当前情绪状态而获取的当前情绪状态获取部；获取表示所述用户作为目标的情绪状态的目标情绪状态的目标情绪状态获取部；决定用于使所述当前情绪状态变化为所述目标情绪状态的内容的内容决定部；以及，输出所述内容的输出部。
根据该构成，因为将被显示在显示器上的多个图像之中与用户选择的图像相对应的至少一个情绪的强度作为表示用户当前的情绪状态的当前情绪状态而获取，用户可以凭感觉选择自身的情绪状态并可以从用户选择的图像中方便地确定用户当前的情绪状态。
本发明的另一方面涉及记录了内容选择程序的非暂时性的计算机可读取的记录介质，其中，所述内容选择程序使计算机具备以下功能：获取与至少一个情绪的强度相对应的多个图像；使显示器可选择地显示所述多个图像；将所述多个图像之中与用户选择的图像相对应的所述至少一个情绪的强度作为表示所述用户当前的情绪状态的当前情绪状态而获取；获取表示所述用户作为目标的情绪状态的目标情绪状态；决定用于使所述当前情绪状态变化为所述目标情绪状态的内容；输出所述内容。
根据该构成，因为将被显示在显示器上的多个图像之中与用户选择的图像相对应的至少一个情绪的强度作为表示用户当前的情绪状态的当前情绪状态而获取，用户可以凭感觉选择自身的情绪状态并可以从用户选择的图像中方便地确定用户当前的情绪状态。
以下参照附图对本发明的实施方式进行说明。另外，以下说明的实施方式都是具体地表示本发明的一个例子，并不用于限定本发明的技术保护范围。
(实施方式)
图1是表示本发明的一实施方式涉及的内容提供系统的构成的一个例子的示意图。图1所示的内容提供系统具备终端装置1、服务器2、内容提供装置3以扬声器装置4。
终端装置1例如是个人计算机、平板计算机或智能手机，被配置在用户存在的空间。
服务器2获取表示用户当前的情绪状态的当前情绪状态，并获取表示作为用户的目标的情绪状态的目标情绪状态。终端装置1和服务器2经由互联网等的网络5相互可通信地连接。
内容提供装置3例如是具备处理器以及存储器的服务器，提供用于使用户当前的情绪状态变化为目标情绪状态的内容。另外，在本实施方式，内容提供装置3，作为内容的一个例子，将音乐内容提供给用户，但是本发明并不特别地限定于此。内容提供装置3也可以提供用于使用户的情绪状态发生变化的视频内容。而且，内容提供装置3也可以通过使用户所在空间内的照明的颜色发生变化来提供使用户的情绪状态发生变化的照明内容。服务器2和内容提供装置3经由网络5相互可通信地连接。
扬声器装置4被配置在用户存在的空间。扬声器装置4输出从内容提供装置3接收到的音乐内容。另外，在给用户提供视频内容的情况下，内容提供系统也可以具备显示装置来代替扬声器装置4。而且，在给用户提供照明内容的情况下，内容提供系统也可以具备照明装置来代替扬声器装置4。
图2是表示本发明的一实施方式涉及的终端装置的构成的一个例子的方框图。
图2所示的终端装置1具备显示部11、输入部12、通信部13、处理器14以及存储器15。
显示部11例如是液晶显示装置，用于显示各种信息。显示部11显示用于受理用户输入的用于识别用户的用户ID的用户ID输入画面。显示部11可选择地显示与至少一个情绪的强度相对应的多个图像。显示部11显示用于受理用户从多个图像之中选择的表示用户当前的情绪状态的一个图像的第一图像选择画面。显示部11显示用于受理用户从多个图像之中选择的表示用户作为目标的情绪状态的一个图像的第二图像选择画面。
输入部12例如是键盘、鼠标或触控面板显示器，受理用户输入的各种信息。输入部12受理用户输入的用户ID。输入部12受理用户从多个图像之中选择的表示用户当前的情绪状态的一个图像。输入部12受理用户从多个图像之中选择的表示用户作为目标的情绪状态的一个图像。
通信部13向服务器2发送各种信息并从服务器2接收各种信息。通信部13将通过输入部12输入的用户ID发送到服务器2。通信部13从服务器2接收包含多个图像的图像数据。通信部13向服务器2发送用于识别表示由用户选择的当前的情绪状态的一个图像的第一图像ID。通信部13向服务器2发送用于识别表示由用户选择的作为目标的情绪状态的一个图像的第二图像ID。
处理器14例如是CPU(中央运算处理装置)，具备显示控制部141、输入控制部142以及通信控制部143。
显示控制部141控制显示部11的显示动作。显示控制部141使显示部11显示用于受理用户输入的用户ID的用户ID输入画面。显示控制部141使显示部11可以选择地显示多个图像。显示控制部141使显示部11显示用于受理用户从多个图像之中选择表示用户当前的情绪状态的一个图像的第一图像选择画面。显示控制部141使显示部11显示用于受理用户从多个图像之中选择表示用户作为目标的情绪状态的一个图像的第二图像选择画面。
输入控制部142控制输入部12的输入受理动作。输入控制部142以让输入部12受理用户ID的用户进行的输入的方式控制输入部12。输入控制部142控制输入部12受理用户从多个图像之中对表示用户当前的情绪状态的一个图像的选择。输入控制部142控制输入部12受理用户从多个图像之中对表示用户作为目标的情绪状态的一个图像的选择。
通信控制部143控制通信部13的通信动作以及发送动作。通信控制部143以让通信部13向服务器2发送通过输入部12输入的用户ID的方式控制通信部13。通信控制部143将通过通信部13接收到的图像数据存储到图像数据存储部151。通信控制部143以让通信部13向服务器2发送通过输入部12选择的第一图像ID的方式控制通信部13。而且，通信控制部143以让通信部13向服务器2发送通过输入部12选择的第二图像ID的方式控制通信部13。
存储器15例如是半导体存储器或硬盘驱动器，具备图像数据存储部151。
图像数据存储部151存储通过通信部13接收到的图像数据。
图3是表示本发明的一实施方式涉及的服务器的构成的一个例子的方框图。
图3所示的服务器2具备通信部21、处理器22以及存储器23。
通信部21接收由终端装置1发送来的用户ID。通信部21向终端装置1发送图像数据。通信部21从终端装置1接收用于识别表示用户当前的情绪状态的一个图像的第一图像ID。通信部21从终端装置1接收用于识别表示用户作为目标的情绪状态的一个图像的第二图像ID。通信部21向内容提供装置3发送表示用户当前的情绪状态的当前情绪状态和表示用户作为目标的情绪状态的目标情绪状态。
存储器23例如是半导体存储器或硬盘驱动器，具备图像数据库存储部231。
图像数据库存储部231存储将至少一个情绪的强度与多个图像分别相对应的图像数据库。
在此，对图像数据库进行说明。
图4是表示本实施方式的图像数据库的一个例子的示意图。
如图4所示，图像数据库将用于识别图像的图像ID、图像特征量以及至少一个情绪的强度相互对应起来。图像特征量包含表示图像的色调的第一图像特征量、表示图像的色彩鲜艳程度的第二图像特征量、表示图像的亮度的第三图像特征量。
另外，图像数据库针对每个图像ID对应有图像特征量。例如，在图像被存储在外部的数据库中的情况下，可以从外部的数据库获取与图像数据库的图像ID对应的图像，也可以从外部的数据库获取具有与图像数据库的图像特征量相同的图像特征量的图像。
情绪的强度例如用觉醒度(arousal leveD的值和情绪价(emotional valence)的值来表示。而且，当前情绪状态和目标情绪状态这两个情绪的强度用在以纵轴和横轴表示的坐标平面上的坐标值来表示。即，用以纵轴为觉醒度、横轴为情绪价的二维坐标的坐标值来表示当前情绪状态和目标情绪状态。该二维坐标是基于环丛效应模型(circumplexmodel of affect)的坐标(James A.Russell，“A Circumplex Model of Affect”，Journalof Personality and Social Psychology，1980，Vol.39，No.6，1161-1178)。觉醒度用从-1.0(镇静)到+1.0(觉醒)为止的值来表示，情绪价用从-1.0(不适)到+1.0(舒适)的值来表示。用户的情绪状态通过觉醒度的值和情绪价的值来表示。
另外，在本实施方式，图像所对应的情绪的强度是觉醒度的值以及情绪价的值，但是本发明并不特别地限定于此。图像所对应的情绪的强度也可以是觉醒度的值、情绪价的值、表示紧张感的值、表示复杂性的值以及表示压力感的值的至少其中之一。
情绪的强度也可以用无量纲量(dimensionless quantity)来规定。例如，如果觉醒度的值较大就表示觉醒度较高。情绪的强度也可以基于规定的基准用正值以及负值来表示。
在此，对情绪的强度和图像的特征量之间的关系进行说明。例如，觉醒度的值较高的图像与觉醒度的值较低的图像相比包含更多的红色成分。而且，情绪价的值较高的图像的亮度高于情绪价的值较低的图像的亮度。而且，紧张感的值较高的图像与紧张感的值较低的图像相比包含更多的黄色成分。而且，复杂性的值较高的图像与复杂性的值较低的图像相比具有更多的颜色。而且，作为复杂性的值较高的图像的例子，例如迷彩图案那样多个颜色的边界线用曲线来表示的图像。而且，压力感较高的图像比压力感较低的图像具有更多的颜色。作为压力感的值较高的图像的例子，例如多个颜色的边界线是锐角的图像。
其次，对创建图像数据库的方法进行说明。
存储在图像数据库中的图像和情绪的强度，基于图像的特征量、对用户的问卷调查结果或用户的生命体征信息的测量结果，被相互对应起来。例如，对于一个图像对应有觉醒度、情绪价、紧张感、复杂性以及压力感等的情绪的强度。
而且，向用户提示图像，将用户对所提示的图像的评价作为问卷调查结果而获取。由此，图像和情绪的强度被相互对应起来。例如，实施以下的问卷调查，即，向用户提示照片图像或有设计的图像，用户用7个阶段来评价对所提示的图像的多个情绪。例如，基于针对多个情绪的每个情绪的评价得分和图像之间的关系，使图像和情绪的强度相互对应起来。另外，既可以使用一个用户的问卷调查结果，也可以使用多个用户的问卷调查结果的平均值。
也可以基于用户对图像集合所包含的多个图像之中的一部分图像的问卷调查结果，给未向用户提示的其它的图像赋予情绪的强度。例如，也可以让推测模型利用图像和多个用户对图像的评价结果进行学习，利用已学习的推测模型来推测未提示的图像的情绪的强度。而且，也可以让推测模型利用对一部分图像的问卷调查结果和一部分图像的特征量进行学习，利用已学习的推测模型来推测其它的图像的情绪的强度。
而且，在使用用户的生命体征信息的测量结果的情况下，参照用户的生命体征信息的测量结果与情绪的强度之间的对应关系，基于测量结果，决定图像与情绪的强度的对应关系。例如，作为生命体征信息，可利用脑波、脉波或心电图等。
图5是表示本实施方式对图像进行的问卷调查的一个例子的示意图。
例如，向用户提示多个图像之中的一个图像。然后，受理用户对所提示的图像的评价。图5所示的例子表示将多个用户针对一个图像对多个情绪的各个项目的评价平均之后的问卷调查结果。在图5所示的问卷调查中，对于一个图像评价觉醒度、乐观悲观(1ight-dark、情绪价)、紧张感以及复杂性这4个情绪。每个情绪用7个阶段进行评价。在图5中，觉醒度的评价的平均值为6.7，乐观悲观(情绪价)的评价的平均值为6.4，紧张感的评价的平均值为1.5，复杂性的评价的平均值为1.2。每个情绪的评价的平均值被标准化为-1.0至+1.0的值，作为情绪的强度与图像相对应。例如，在问卷调查中，即可以获取与情绪直接地相对应的评价结果，也可以获取如乐观悲观(情绪价)这样的接近图像的特征量的评价结果，或获取对其它的图像的情绪评价的基准。
而且例如也可以仅将乐观悲观(情绪价)的情绪状态与图像相对应。服务器2也可以在输出了音乐内容之后获取用户的情绪状态作为反馈。在不是以用户的直接的情绪状态而是以乐观悲观的形式表示的情绪状态可以决定适合用户的音乐内容的情况下，服务器2也可以根据输出音乐内容之后的反馈结果来获取当前情绪状态和目标情绪状态。可以基于与图像特征量相关联的信息获取情绪状态并决定音乐内容。
图6是表示在本实施方式向用户提示的图像的一个例子的示意图。
图像可以通过颜色、图形以及图案的至少其中之一来表现。在图6中示意了例如仅以颜色、仅以图形或仅以图案来表现的图像。图像也可以用组合多个要素来表现。而且，例如，也可能存在取决于用户容易受到图像的印象的影响的情绪的项目。也可以根据输出音乐内容之后的反馈结果，利用包含容易受到图像的印象的影响的情绪的项目的图像获取情绪状态。
图7是表示在本实施方式将多个情绪的强度相互对应的图像的一个例子的示意图。
如图7所示，在纵轴为觉醒度、横轴为情绪价的二维坐标平面上配置对应于觉醒度和情绪价的值的多个图像。在此，除了觉醒度和情绪价之外，还可以将紧张感或压力感的情绪与图像相对应。例如，在将觉醒度、情绪价以及紧张感与图像相对应的情况下，图像1000可以包含表现觉醒度和情绪价的第一区域1001、接近于第一区域1001的外边缘表现紧张感的第二区域1002。第二区域1002包含使紧张感增加的黄色成分。例如，可以针对每个显示位置，通过使第二区域1002的黄色成分的含有量发生变化，使紧张感的强度发生变化。通过增加第二区域1002的黄色成分，紧张感增加。
而且，例如，在将觉醒度、情绪价和压力感与图像相对应的情况下，图像1010包含具有第一颜色的第一区域1011、具有与第一颜色不同的第二颜色的第二区域1012。通过第一区域1011和第二区域1012来表现觉醒度和情绪价。第一区域1011和第二区域1012的边界线1013包含至少一个锐角部分。通过锐角部分的数量来表现压力感。例如，可以针对每个显示位置，通过使锐角部分的数量发生变化，使压力感的强度发生变化。通过增加边界线1013的锐角部分的数量，压力感增加。
处理器22例如是CPU，具备图像获取部221、当前情绪状态获取部222、目标情绪状态获取部223以及通信控制部224。
图像获取部221从图像数据库存储部231获取与至少一个情绪强度相对应的多个图像。通信部21将通过图像获取部221获取的包含多个图像的图像数据发送到终端装置1。
当前情绪状态获取部222将与用户在多个图像之中选择的图像相对应的至少一个情绪的强度作为表示用户当前的情绪状态的当前情绪状态而获取。当前情绪状态获取部222，从图像数据库存储部231获取与用于识别表示通过通信部21接收到的用户当前的情绪状态的一个图像的第一图像ID相对应的情绪的强度，作为当前情绪状态。
目标情绪状态获取部223获取表示用户作为目标的情绪状态的目标情绪状态。目标情绪状态获取部223，从图像数据库存储部231获取与用于识别表示通过通信部21接收到的用户作为目标的情绪状态的一个图像的第二图像ID相对应的情绪的强度，作为目标情绪状态。
通信控制部224控制通信部21的发送动作和接收动作。通信控制部224以让通信部21接收通过终端装置1发送来的用户ID的方式控制通信部21。通信控制部224以让通信部21将图像数据发送到终端装置1的方式控制通信部21。通信控制部224以让通信部21从终端装置1接收用于识别表示用户当前的情绪状态的一个图像的第一图像ID的方式控制通信部21。通信控制部224以让通信部21从终端装置1接收用于识别表示用户作为目标的情绪状态的一个图像的第二图像ID的方式控制通信部21。通信控制部224以让通信部21将当前情绪状态和目标情绪状态发送到内容提供装置3的方式控制通信部21。
图8是表示本发明的一实施方式涉及的内容提供装置的构成的一个例子的方框图。
图8所示的内容提供装置3具备通信部31、处理器32以及存储器33。
通信部31接收通过服务器2发送来的当前情绪状态和目标情绪状态。通信部31将通过音乐内容决定部321决定的音乐内容发送到扬声器装置4。
存储器33例如是半导体存储器或硬盘驱动器，具备音乐内容存储部331。
音乐内容存储部331存储多个音乐内容。音乐内容存储部331将用于识别音乐内容的乐曲ID、乐曲名、表示当前情绪状态和目标情绪状态之间的差值的情绪状态变化值与音乐内容相互对应地进行存储。
处理器32例如是CPU，具备音乐内容决定部321以及通信控制部322。
音乐内容决定部321决定用于使当前情绪状态变化为目标情绪状态的内容。本实施方式的内容是音乐内容。音乐内容决定部321计算表示通过通信部31接收到的当前情绪状态和目标情绪状态的差值的情绪状态变化值。音乐内容决定部321从音乐内容存储部331获取与计算出的情绪状态变化值相对应的音乐内容。
例如，在当前情绪状态的觉醒度和情绪价为-0.5以及-0.5，目标情绪状态的觉醒度和情绪价为+0.3以及+0.6的情况下，情绪状态变化值(觉醒度的差值和情绪价的差值)为+0.8以及+1.1。音乐内容决定部321从音乐内容存储部331获取与作为情绪状态变化值的觉醒度的差值(+0.8)以及情绪价的差值(+1.1)相对应的音乐内容。
通信控制部322以让通信部31接收通过服务器2发送来的当前情绪状态和目标情绪状态的方式控制通信部31。通信控制部322以让通信部31将通过音乐内容决定部321决定的音乐内容发送到扬声器装置4的方式控制通信部31。
图9是表示本发明的一实施方式涉及的扬声器装置的构成的一个例子的方框图。
图9所示的扬声器装置4具备通信部41、处理器42以及扬声器43。
通信部41接收通过内容提供装置3发送来的音乐内容。
处理器42例如是CPU，具备音乐内容输出控制部421和通信控制部422。
音乐内容输出控制部421以让扬声器43输出通过通信部41接收到的音乐内容的方式控制扬声器43。
通信控制部422以让通信部41接收通过内容提供装置3发送来的音乐内容的方式控制通信部41。
扬声器43输出内容。本实施方式的内容是音乐内容。
接着，对本实施方式的内容提供系统的动作进行说明。
图10是用于说明本实施方式的终端装置以及服务器的动作的流程图。
首先，在步骤S1，终端装置1的显示部11显示用于受理用户输入的用户ID的用户ID输入画面。
其次，在步骤S2，输入部12受理用户在显示部11显示的用户ID输入画面输入的用户ID。
其次，在步骤S3，通信部13将通过输入部12受理的用户ID发送到服务器2。
其次，在步骤S4，服务器2的通信部21接收通过终端装置1发送来的用户ID。
其次，在步骤S5，图像获取部221从图像数据库存储部231获取与通信部21接收到的用户ID对应的多个图像。
在此，用户ID被预先与多个图像相对应。而且，与用户ID相对应的多个图像被预先决定了显示位置。
图11是表示在本实施方式将用户ID和多个图像的显示位置相互对应的显示位置数据库的一个例子的示意图，图12是表示在本实施方式显示在终端装置的显示部的多个图像的显示位置的一个例子的示意图。
如图11所示，显示位置数据库将用户ID和多个图像的显示位置预先相互对应。另外，显示位置数据库被存储在存储器23中。
图像获取部221获取用于识别用户的用户ID(用户识别信息)。图像获取部221获取预先与用户ID(用户识别信息)相对应的多个图像。在存储显示位置数据库的情况下，基于显示位置数据库中包含的多个图像的每个图像的显示位置的信息，让显示部11显示多个图像。
如图12所示，显示部11将用户的选择操作分为两个阶段，可以将在第一画面1111粗略地选择的情感通过第二画面1112更详细地进行选择。图12的第一画面1111粗略地表示图12的图像组1113。首先，显示部11显示第一画面1111。例如，用户选择图12的第一画面1111的坐标(3、3)的图像。在这种情况下，其次，显示部11将图12的图像组1113之中的从坐标(7、7)到坐标(9、9)的9个图像作为第二画面1112来显示。通过利用该操作，用户可以更详细地选择在图12的第一画面1111选择的在情感的轴上的区域。
另外，第一画面1111的每个图像也可以使用将图像组1113按3×3划分时的左上角的图像。例如，第一画面1111的坐标(1、1)的图像可以使用图像组1113的坐标(1、1)的图像，第一画面1111的坐标(1、2)可以使用图像组1113的坐标(1、4)的图像，第一画面1111的坐标(3、3)可以使用图像组1113的坐标(7、7)的图像。
显示部11显示3×3＝9个第一图像集合，并受理对第一图像集合之中的一个图像的选择。然后，在第一图像集合之中的一个图像被选择的情况下，显示部11显示与该一个图像相对应的3×3＝9个第二图像集合，并受理对第二图像集合之中的一个图像的选择。在这种情况下，图像数据库存储部231存储第一图像集合和第二图像集合，第一图像集合将包含图12所示的9×9＝81个图像的图像组1113作为3×3＝9个图像粗略地进行表示，第二图像集合将与第一图像集合的每个图像对应的区域作为更详细的3×3＝9个图像来表示。第一图像集合的一个图像是第一画面的坐标(1、1)至(1、3)、(2、1)至(2、3)、(3、1)至(3、3)这9个图像之中的任意一个图像。而且，第二图像集合的一个图像例如是第二画面的坐标(7、7)至(9、9)之中的任意一个图像。
图13是表示在本实施方式显示在终端装置的显示部的多个图像的显示位置的第一变形例的示意图。
如图13所示，也可以在终端装置1的显示部11上显示在纵向以及横向分别为9个的图像。图13的坐标(1、1)至坐标(9、9)表示每个图像的显示位置。
而且，显示部11，如图13所示，也可以在一个画面上显示9×9＝81个图像，但是，在画面的尺寸较小的情况下，有可能难以视觉识别每个图像。因此，显示部11也可以在画面上可视觉识别地显示81个图像的一部分图像，通过在纵向以及横向滚动，来显示全部的图像。
另外，在本实施方式，图像数据库存储部231预先针对每个用户存储图像组，但是，本发明并不特别地限定于此，也可以针对每个用户存储多个图像组。图像获取部221也可以例如基于利用时间、利用日期(工作日或休息日)或者在利用空间中是否存在其它的人等的信息，从多个图像组之中获取一个图像组。而且，终端装置1也可以向用户提示多个情绪，受理从所提示的多个情绪之中对最感兴趣的情绪的选择。图像获取部221也可以基于所选择的情绪来选择图像组。
如上所述，通过事先对利用内容提供系统的用户进行问卷调查，预先将用于识别该用户的用户ID和多个图像相互对应起来，可以更准确地获取该用户的当前情绪状态和目标情绪状态。
另外，在本实施方式是获取用户ID，但是本发明并不特别地限定于此，也可以不获取用户ID。在这种情况下，不再需要受理用户ID的输入的处理，也可以不用存储将用户ID和多个图像预先相互对应的显示位置数据库。
而且，在不存储显示位置数据库的情况下，也可以基于与多个图像的每个情绪的强度有关的值，在显示部11显示多个图像。
图14是表示在本实施方式显示在终端装置的显示部的多个图像的显示位置的第二变形例的示意图。
例如，也可以根据作为情绪的强度的觉醒度的值以及情绪价的值来决定显示位置。如图14所示，在显示画面中，纵轴是觉醒度，横轴是情绪价，也可以在与各个值对应的位置显示图像。
如图14所示，显示部11也可以将用户的选择操作分为两个阶段，将在第一画面1121粗略地选择的情感在第二画面1122更详细地进行选择。图14的第一画面1121粗略地表示图14的图像组1123。首先，显示部11显示第一画面1121。例如，用户选择图14的第一画面1121的坐标(3、3)的图像。在这种情况下，其次，显示部11将图14的图像组1123之中的从坐标(7、7)到坐标(9、9)的9个图像作为第二画面1122来显示。通过利用该操作，用户可以更详细地选择在图14的第一画面1121选择的在情感轴上的区域。
另外，第一画面1121的各个图像也可以使用将图像组1123按3×3划分时的左上角的图像。例如，第一画面1121的坐标(1、1)的图像可以使用图像组1123的坐标(1、1)的图像，第一画面1121的坐标(1、2)可以使用图像组1123的坐标(1、4)的图像，第一画面1121的坐标(3、3)可以使用图像组1123的坐标(7、7)的图像。
显示部11也可以显示3×3＝9个的第一图像集合并受理在第一图像集合之中对一个图像的选择。然后，在选择了第一图像集合之中的一个图像的情况下，显示部11也可以显示与该一个图像相对应的3×3＝9个的第二图像集合，之后，受理在第二图像集合之中对一个图像的选择。在这种情况下，图像数据库存储部231存储第一图像集合和第二图像集合，第一图像集合将在觉醒度为纵轴、情绪价为横轴的坐标平面上的图像组1123分割为3×3＝9个图像，第二图像集合将与第一图像集合的每个图像对应的区域分割为3×3＝9个图像。第一图像集合的一个图像是第一画面的坐标(1、1)至(1、3)、(2、1)至(2、3)、(3、1)至(3、3)这9个图像之中的任意一个图像。而且，第二图像集合的一个图像例如是第二画面的坐标(7、7)至(9、9)之中的任意一个图像。
图15是表示在本实施方式显示在终端装置的显示部的多个图像的显示位置的第三变形例的示意图。
如图15所示，在终端装置1的显示部11可以显示在纵向以及横向上分别为9个的图像。如图15所示，在显示画面中，纵轴是觉醒度，横轴是情绪价，可以在与各个值对应的位置显示图像。
而且，显示部11虽然在一个画面上显示如图15所示的9×9＝81个图像，但是，在画面的尺寸较小的情况下，有可能难以视觉识别出每个图像。因此，显示部11也可以在画面上可视觉识别地显示81个图像之中的一部分图像，通过向纵向以及横向滚动，来显示全部的图像。
而且，显示部11也可以不显示如图15所示的9×9＝81个图像，而是显示觉醒度为纵轴、情绪价为横轴的坐标平面，受理在坐标平面上对与用户的当前情绪状态对应的位置的选择。而且，显示部11也可以显示以包含在坐标平面上所选择的位置的图像为中心的3×3＝9个图像组，受理在图像集合之中对一个图像的选择。
而且，在每个图像与两个以上的情绪的强度相对应的情况下，终端装置1的显示控制部141也可以从两个以上的情绪的强度之中选择两个情绪的强度，并利用两个情绪的强度以二维显示多个图像。而且，显示控制部141也可以根据与每个图像相对应的情绪的数量，以一维至多维来显示多个图像。另外，从用户的可视性的观点来看，最好以二维显示多个图像。
而且，显示控制部141也可以用一维显示与两个以上的情绪强度之中的一个情绪的强度相对应的多个图像，在受理了用户的选择之后，进一步用一维显示与两个以上的情绪的强度之中的其它的情绪的强度相对应的多个图像，并受理用户的选择。
图16是表示在本实施方式显示在终端装置的显示部的多个图像的显示位置的第四变形例的示意图。
在图16所示的第一画面1131中用觉醒度和情绪价这两个轴显示表示情绪的图像。纵轴是觉醒度，横轴是情绪价。第一画面1131包含3×3个图像。例如，在用户选择了第一画面1131左上角的图像的情况下，可以看出用户所选择的情绪是既兴奋又消极的情绪。然而，仅根据第一画面1131还不知道在既兴奋又消极的情绪之中更详细的情绪，例如，愤怒、恐怖或深深的悲伤等。因此，在选择了第一画面1131的多个图像之中与既兴奋又消极的情绪对应的图像的情况下，还进一步显示表示与既兴奋又消极的情绪相关联的多个图像的第二画面1132。用户从显示在第二画面1132的多个图像之中进一步选择与自身的情绪对应的图像。由此，可以在系统中更详细地把握用户在意的情绪。
返回到图10，其次，在步骤S6，通信部21将包含通过图像获取部221获取的多个图像的图像数据发送到终端装置1。另外，图像数据包含与用户ID对应的多个图像的显示位置。
其次，在步骤S7，终端装置1的通信部13接收通过服务器2发送来的图像数据。
其次，在步骤S8，显示控制部141使显示部11显示多个图像并显示用于受理用户从多个图像之中对表示用户当前的情绪状态的一个图像的选择的第一图像选择画面。
其次，在步骤S9，输入部12，在显示部11显示的第一图像选择画面，受理用户从多个图像之中对表示用户当前的情绪状态的一个图像的选择。
图17是表示在本实施方式显示在终端装置的显示部的第一图像选择画面的一个例子的示意图。
显示部11显示图17所示的第一图像选择画面。在图17所示的第一图像选择画面，可以选择性地显示多个图像。用户，利用输入部12，从多个图像之中选择表示用户当前的情绪状态的一个图像。当前的情绪状态是选择音乐内容的基准的信息。为此，最好从作为直觉的信息的多个图像之中选择一个图像。
返回到图10，其次，在步骤S10，通信部13将与表示通过输入部12选择的用户当前的情绪状态的一个图像对应的第一图像ID发送到服务器2。
其次，在步骤S11，服务器2的通信部21接收通过终端装置1发送来的第一图像ID。
其次，在步骤S12，当前情绪状态获取部222从图像数据库存储部231获取与通过通信部21接收到的第一图像ID相对应的情绪的强度，作为当前情绪状态。
其次，在步骤S13，终端装置1的显示控制部141使显示部11显示多个图像并显示用于受理用户从多个图像之中对表示用户作为目标的情绪状态的一个图像的选择的第二图像选择画面。显示控制部141，在获取了当前的情绪状态之后，使显示部11可选择地显示多个图像。
其次，在步骤S14，输入部12，在显示部11显示的第二图像选择画面，受理用户从多个图像之中对表示用户作为目标的情绪状态的一个图像的选择。
图18是表示在本实施方式显示在终端装置的显示部的第二图像选择画面的一个例子的示意图。
显示部11显示图18所示的第二图像选择画面。图18所示的第二图像选择画面可选择地显示多个图像。用户，利用输入部12从多个图像之中选择表示用户作为目标的情绪状态的一个图像。
返回到图10，其次，在步骤S15，通信部13将与表示通过输入部12选择的用户作为目标的情绪状态的一个图像对应的第二图像ID发送到服务器2。
其次，在步骤S16，服务器2的通信部21接收通过终端装置1发送来的第二图像ID。
其次，在步骤S17，目标情绪状态获取部223，从图像数据库存储部231获取与通过通信部21接收到的第二图像ID相对应的情绪的强度，作为目标情绪状态。目标情绪状态获取部223将与用户从多个图像之中选择的图像相对应的至少一个情绪的强度作为目标情绪状态进行获取。
其次，在步骤S18，通信部21将通过当前情绪状态获取部222获取的当前情绪状态和通过目标情绪状态获取部223获取的目标情绪状态发送到内容提供装置3。
另外，在本实施方式，终端装置1分别发送第一图像ID以及第二图像ID，但是本发明并不特别地限定于此，终端装置1也可以汇总一起发送第一图像ID以及第二图像ID。在这种情况下，不再需要图10的步骤S10以及步骤S11的处理，在步骤S9的处理之后，进行步骤S13的处理。在步骤S15，通信部13将第一图像ID以及第二图像ID发送到服务器2。服务器2在接收到第一图像ID以及第二图像ID之后，进行步骤S12、步骤S17以及步骤S18的处理。
在本实施方式，在显示了第一图像选择画面之后显示第二图像选择画面，但是本发明并不特别地限定于此，也可以一边受理用户从多个图像之中对表示用户当前的情绪状态的一个图像的选择，一边显示用于受理用户从多个图像之中对表示作为用户的目标的情绪状态的一个图像的选择的一个图像选择画面。
图19是表示在本实施方式显示在终端装置的显示部的图像选择画面的一个例子的示意图。
显示部11也可以显示图19所示的图像选择画面。在图19所示的图像选择画面，可选择地显示用于让用户选择表示当前的情绪状态的一个图像的第一图像组，并可选择地显示用于让用户选择表示作为目标的情绪状态的一个图像的第二图像组。用户利用输入部12从第一图像组之中选择表示用户当前的情绪状态的一个图像，并从第二图像组之中选择表示用户作为目标的情绪状态的一个图像。
而且，在本实施方式，显示用于受理用户从多个图像之中选择表示用户作为目标的情绪状态的一个图像的第二图像选择画面，但是本发明并不特别地限定于此，也可以显示用于受理用户在以纵轴和横轴表示两个情绪的强度的坐标平面上选择表示用户作为目标的情绪状态的坐标点的坐标选择画面。
图20是表示在本实施方式在输入表示用户作为目标的情绪状态的坐标点之前显示在终端装置的显示部的坐标选择画面的一个例子的示意图，图21是表示在本实施方式在输入了表示用户作为目标的情绪状态的坐标点之后显示在终端装置的显示部的坐标选择画面的一个例子的示意图。
显示部11也可以显示图20所示的坐标选择画面。在图20所示的坐标选择画面显示以纵轴和横轴表示两个情绪的强度的坐标平面和表示当前情绪状态的坐标点。在图20中，纵轴表示觉醒度，横轴表示情绪价。图20中的起点显示了表示当前情绪状态的坐标点。当前情绪状态用以纵轴和横轴表示两个情绪的强度的坐标平面上的坐标值来表示。显示控制部141，在获取了当前情绪状态之后，使显示部11显示表示当前情绪状态的坐标点以及坐标平面。用户利用输入部12在坐标平面上选择表示用户作为目标的情绪状态的坐标点。服务器2的目标情绪状态获取部223将表示用户在坐标平面上选择的目标情绪状态的坐标点的坐标值作为目标情绪状态而获取。
在选择了表示目标情绪状态的坐标点之后，显示部11显示图21所示的坐标选择画面。在图21所示的坐标选择画面显示以纵轴和横轴表示两个情绪的强度的坐标平面、表示当前情绪状态的坐标点、表示目标情绪状态的坐标点。在图21中，纵轴表示觉醒度，横轴表示情绪价。图21中的起点显示了表示当前情绪状态的坐标点，终点显示了表示目标情绪状态的坐标点。在坐标选择画面中显示连接起点和终点的箭头。
图22是用于说明本实施方式的内容提供装置以及扬声器装置的动作的流程图。
首先，在步骤S21，内容提供装置3的通信部31接收通过服务器2发送来的当前情绪状态和目标情绪状态。
其次，在步骤S22，音乐内容决定部321决定用于使当前情绪状态变化为目标情绪状态的音乐内容。音乐内容决定部321，通过从表示目标情绪状态的情绪的强度减去表示当前情绪状态的情绪的强度，计算表示当前情绪状态和目标情绪状态之间的差值的情绪状态变化值。音乐内容决定部321从音乐内容存储部331获取与计算出的情绪状态变化值相对应的音乐内容。
其次，在步骤S23，通信部31将通过音乐内容决定部321决定的音乐内容发送到扬声器装置4。
其次，在步骤S24，扬声器装置4的通信部41接收通过内容提供装置3发送来的音乐内容。
其次，在步骤S25，音乐内容输出控制部421使扬声器43输出通过通信部41接收到的音乐内容。用户倾听从扬声器43输出的音乐内容。由此，用户的情绪状态从当前情绪状态变化为目标情绪状态。
另外，在音乐内容的输出过程中，终端装置1的显示部11也可以显示当前情绪状态、目标情绪状态以及音乐内容的乐曲名。
图23是表示在本实施方式在开始输出音乐内容时显示的内容提示画面的一个例子的示意图，图24是表示在本实施方式在输出音乐内容过程中所显示的内容提示画面的一个例子的示意图。
显示部11在开始输出音乐内容时显示图23所示的内容提示画面。图23所示的内容提示画面显示以纵轴和横轴表示两个情绪的强度的坐标平面、表示当前情绪状态的坐标点、表示目标情绪状态的坐标点、音乐内容的乐曲名、音乐内容的光盘封面图像。在图23中，纵轴表示觉醒度，横轴表示情绪价。图23中的起点显示了表示当前情绪状态的坐标点，终点显示了表示目标情绪状态的坐标点。在坐标选择画面显示连接起点和终点的箭头。
而且，显示部11在输出音乐内容过程中显示图24所示的内容提示画面。图24所示的内容提示画面显示坐标平面、表示当前情绪状态的坐标点、表示目标情绪状态的坐标点、表示用户的情绪状态的转变的坐标点、音乐内容的乐曲名、音乐内容的光盘封面图像。图24中的当前点显示了表示通过听音乐内容而变化的用户的情绪状态的转变的坐标点。另外，当前点的坐标基于音乐内容的输出时间和当前时刻而计算得出。
另外，终端装置1从服务器2接收当前情绪状态以及目标情绪状态，从内容提供装置3接收音乐内容的乐曲名和音乐内容的光盘封面图像，并生成内容提示画面。
而且，对于音乐内容也可以与图像同样地进行问卷调查，基于问卷调查结果，获取与音乐内容相对应的情绪状态变化值。
图25是表示在本实施方式针对音乐内容进行的问卷调查的一个例子的示意图。
例如，向用户输出多个音乐内容之中的一个音乐内容。然后，受理用户对输出的音乐内容的评价。此时，在从开始输出音乐内容时起在规定的时间内(例如，从输出开始起10秒钟内)，受理用户对音乐内容的评价。而且，在从音乐内容的结束输出时起在规定时间内(例如，从结束输出时的10秒钟前到10秒钟后为止的期间)，受理用户对音乐内容的评价。
图25所示的例子显示了多个用户针对一个音乐内容对多个情绪项目的每个项目进行的评价的被平均后的问卷调查结果。在图25所示的问卷调查中，对于一个音乐内容用4个情绪即觉醒度、乐观悲观(情绪价)、紧张感以及复杂性进行评价。每个情绪用7个阶段来评价。
图25中，在开始输出音乐内容时，觉醒度的评价的平均值为3.1、乐观悲观(情绪价)的评价的平均值为5.4、紧张感的评价的平均值为1.5、复杂性的评价的平均值为5.8。而且，在结束输出音乐内容时，觉醒度的评价的平均值为5.5、乐观悲观(情绪价)的评价的平均值为7.8、紧张感的评价的平均值为1.0、复杂性的评价的平均值为3.5。通过从结束输出时的每个情绪的评价值减去开始输出时的每个情绪的评价值，计算出每个情绪的情绪状态变化值。情绪状态变化值被标准化为-1.0至+1.0的值，与音乐内容相对应。
(变形例)
其次，对本实施方式的变形例进行说明。
(1)在选择图像时，终端装置1也可以在用一轴显示与一个情绪的强度对应的多个图像的显示方式和用多轴显示与多个情绪的强度对应的多个图像的显示方式之间切换。例如，终端装置1也可以根据用户所在的场所来切换显示方式。
例如，用户在睡觉之前在卧室使用内容提供系统的情况下，一般输出安静的音乐内容等，输出的音乐内容是可以预先想象到的。在这种情况下，多个图像可以用一个情绪轴来显示。例如，显示仅与情绪价轴对应的多个图像。而且，终端装置1也可以在最初受理用户对是显示与消极(负能量)对应的多个图像还是显示与积极(正能量)对应的多个图像进行的选择。
而且，在基于用户的利用信息，从开始输出音乐内容起在规定时间内音乐内容的输出被取消规定次数以上的情况下，终端装置1，为了能更准确地获取情绪价的信息，也可以变更多个图像。例如，终端装置1也可以显示用于受理用户对是显示与正能量的情绪价对应的多个图像还是显示与负能量的情绪价对应的多个图像进行选择的画面。然后，终端装置1也可以显示用户所选择的与正能量的情绪价对应的多个图像或与负能量的情绪价对应的多个图像。
而且，在基于用户的利用信息，从开始输出音乐内容起在规定时间内音乐内容的输出被取消规定次数以上的情况下，终端装置1也可以显示与其它的情绪相对应的多个图像。在基于情绪价而决定的音乐内容从开始输出起在规定时间以内其音乐内容的输出被取消规定次数以上的情况下，终端装置1也可以显示与复杂性或压力感相对应的多个图像。例如，终端装置1，在获取了一个轴的情绪的强度之后音乐内容的输出还是被取消的情况下，也可以获取一个轴的不同的情绪的强度。
例如，当用户在客厅处于舒适的休息状态下使用内容提供系统时，可以设想用户是有详细地选择音乐内容的心理准备的。在这种情况下，也可以从最初开始以两个情绪轴来显示多个图像。终端装置1例如可以按照觉醒度、情绪价、紧张感以及复杂性的顺序显示多个图像让用户进行选择。
当前时刻既可以从互联网获取也可以从内置于内容提供装置3或终端装置1中的时钟获取。而且，也可以预先存储终端装置1的配置位置，通过参照所存储的配置位置来确定终端装置1(用户)的位置。
(2)终端装置1也可以根据用户的状况来获取更详细的当前情绪状态或目标情绪状态。例如，在用户睡觉前的时间段利用内容提供系统的情况下，终端装置1也可以显示用于受理用户对是显示与正能量的情绪价对应的多个图像还是显示与负能量的情绪价对应的多个图像进行选择的画面。然后，终端装置1显示用户所选择的与正能量的情绪价对应的多个图像或与负能量的情绪价对应的多个图像。多个图像例如是3个图像。
(3)终端装置1也可以，基于从显示了多个图像的时刻起到用户选择了一个图像的时刻为止的选择时间，变更作为当前情绪状态或目标情绪状态而获取的情绪的数量。初学者，由于不习惯，选择时间可能会变长，随着成熟度的提高，选择时间会变短。例如，在选择时间比规定的阈值短的情况下，为了获取更详细的情绪状态，终端装置1也可以增加要获取的情绪轴的数量。
终端装置1的显示控制部141使与第一情绪的强度相对应的多个图像得到显示。终端装置1的处理器14也可以具备测量从显示多个图像起到用户选择图像为止的选择时间的时间测量部。显示控制部141，在所测量的选择时间在规定时间以下的情况下，使与第一情绪的强度不同的第二情绪的强度相对应的多个图像可选择地得到显示。
最初，服务器2，将两个轴的情绪的强度作为当前情绪状态或目标情绪状态而获取，随着选择时间被缩短而增加要获取的情绪轴。终端装置1也可以将一个画面分割为多个画面，在各个画面上显示与多个情绪分别对应的多个图像。而且，服务器2也可以，基于显示与一个情绪轴或两个情绪轴对应的多个图像的第一画面，来获取一个情绪的强度或两个情绪的强度。然后，服务器2也可以，基于显示与第一画面不同的一个情绪轴或两个情绪轴对应的多个图像的第二画面，来获取一个情绪的强度或两个情绪的强度。
另外，作为选择时间的阈值可以设定为基于用户的过去的选择时间的时间。终端装置1，例如，在显示多个图像之前的过去五次的选择时间的平均值与显示多个图像之前的过去十次的选择时间的平均值的差值变短到规定的时间以上的情况下，判断成熟度有所上升，增加要获取的情绪轴。而且，终端装置1也可以使用从上一次的选择时间起到第五次为止的选择时间的平均值与从第六次的选择时间起到第十次为止的选择时间的平均值的差值。
而且，终端装置1也可以在第二画面显示表示不增加情绪轴的选择按钮。而且，终端装置1，在第二画面的选择时间在规定时间以上并且音乐内容的输出被取消规定次数以上的情况下，也可以停止显示第二画面仅显示第一画面。
终端装置1，在第二画面按下表示不增加情绪轴的选择按钮之后，获取之后的当前情绪状态或目标情绪状态时，也可以不显示第二画面。而且，终端装置1，在不显示第二画面而获取当前情绪状态或目标情绪状态并且音乐内容的输出被取消规定次数以上的情况下，也可以显示第二画面并显示表示通过在第二画面选择图像可以输出适合于用户的音乐内容的消息。
(4)也可以基于当前情绪状态或目标情绪状态的过去的履历，使获取的情绪的强度值变化较大的情绪的优先顺序提高，使获取的情绪的强度值变化较小的情绪的优先顺序降低。服务器2的存储器23也可以存储获取的当前情绪状态的履历。图像获取部221，在上一次获取的当前情绪状态的情绪的强度与再上一次获取的当前情绪状态的情绪的强度之间的差值在阈值以上的情况下，也可以提高情绪的强度的优先度。图像获取部221也可以获取与优先度较高的情绪的强度对应的多个图像。终端装置1的显示控制部141也可以使与优先度较高的情绪的强度相对应的多个图像依次显示。
例如，终端装置1，在获取多个情绪的强度的情况下，先显示与优先顺序较高的情绪的强度对应的多个图像。在针对每一个情绪轴显示多个图像并获取多个情绪的强度的情况下，终端装置1依次显示与优先顺序较高的情绪的强度对应的多个图像。
而且，终端装置1，在显示与两个情绪轴对应的多个图像并且还显示与一个情绪轴对应的多个图像的情况下，按照优先顺序较高的顺序显示与两个情绪轴对应的多个图像，然后，显示与第三顺位的优先顺序的情绪轴对应的多个图像。而且，终端装置1也可以先显示与优先顺序为第一顺位以及第二顺位的情绪轴对应的多个图像，然后，显示与优先顺序为第一顺位以及第三顺位的情绪轴对应的多个图像。
而且，服务器2，在获取的情绪的强度值的变化在规定值以下的情况下，也可以不让用户选择图像，而是基于过去的选择履历获取当前情绪状态或目标情绪状态。在判断获取的情绪的强度值的变化是否在规定值以下时，可以利用与所选择的图像对应的情绪的强度值相对于平均值的差值。而且，在判断获取的情绪的强度值的变化是否在规定值以下时，也可以利用分散值。
另外，获取的情绪的强度值的变化最好根据时间段来利用。对应于时间段的情绪轴的设定，由于不是基于过去的履历而是根据用户的行动来设定，比较有效。例如，即将睡觉之前的时间段的用户想要睡觉的可能性比较高。为此，服务器2，利用紧张感的轴或压力感的轴获取情绪的强度，不利用觉醒度的轴获取情绪的强度。
而且，获取的情绪的强度值的变化也可以在获取当前情绪状态和目标情绪状态的至少其中之一时进行比较。
(5)对于所选择图像的情绪状态也可以根据人的特性进行校正。服务器2的处理器22还可以具备基于当前的时刻和所选择的图像的特征量校正获取的当前情绪状态的校正部。而且，校正部也可以基于当前的时刻和所选择的图像的特征量校正获取的目标情绪状态。
图26是用于说明本实施方式的校正觉醒度的示意图。
校正部，获取用户选择图像的时刻等的时刻信息，基于获取的时刻信息和所选择的图像的特征量，校正当前情绪状态的值或目标情绪状态的值。例如，据说人对颜色的观察根据时间段的不同会发生变化。例如，据说晚上容易看到蓝色。为此，校正部，在表示当前的时刻(用户选择图像的时刻)是夜间并且所选择的图像的色调为蓝色(例如，180°至240°)的情况下，也可以使觉醒度的值例如增加20％。
在图26的例子中，在所选择的图像的图像ID为“7788”、当前的时刻是夜间的时刻的情况下，因为作为第一图像特征量的色调为185°，所以校正部将觉醒度的值从“+0.1”校正为“+0.12”。
而且，音乐内容决定部321，也可以根据人的特性来决定音乐内容。据说人对时间经过的感受会随着时间段而变化。例如，据说，即使是同一个乐曲，夜晚的节奏比白天要快。为此，如果当前的时刻处于夜间的时间段，音乐内容决定部321也可以决定例如节奏比与计算出的情绪状态变化值相对应的音乐内容的节奏慢20％的音乐内容。
(6)对于所选择的图像的情绪状态，也可以根据选择图像时用户的生命体征信息来校正。内容提供系统还可以具备测量用户的生命体征信息的生命体征信息测量装置。生命体征信息例如是心率。服务器2的通信部21从生命体征信息测量装置获取用户的生命体征信息。服务器2的处理器22还可以具备基于获取的生命体征信息校正获取的当前情绪状态的校正部。例如，在获取的心率在规定值以上的情况下，校正部也可以使当前情绪状态的觉醒度的值增加20％。
而且，校正部也可以基于获取的生命体征信息来校正获取的目标情绪状态。在这种情况下，例如，在获取的心率在规定值以上的情况下，校正部也可以使目标情绪状态的觉醒度的值增加20％。
而且，据说，人在心率较高的时候听音乐会比平时听上去的节奏慢。因此，音乐内容决定部321也可以根据用户的生命体征信息来决定音乐内容。
图27是用于说明本实施方式根据用户的生命体征信息决定音乐内容的示意图。
平时，用户当前的心情(觉醒度)为“0”的情况是心率为60bpm时的感觉。此时，表示用户当前的心情(觉醒度)的音乐内容的节奏是60bpm。另一方面，在用户跑完步之后，用户当前的心情(觉醒度)为“0”的情况是心率为120bpm时的感觉。此时，由于用户当前的心情(觉醒度)为“0”，如果输出60bpm节奏的音乐内容，就会给人一种再生了觉醒度非常低的音乐内容的印象。为此，希望音乐内容决定部321最好根据用户的生命体征信息(例如，心率)来校正音乐内容的节奏。如图27的校正公式所示，音乐内容决定部321可以将平时的心率60bpm和跑步之后的当前的心率120bpm相加的值除以2而得到的值(90bpm)作为校正后的音乐内容的节奏而计算得出。由此，可以提供符合当前的心情(觉醒度)的节奏的音乐内容。
而且，当前情绪状态获取部222也可以根据用户的心率来校正当前情绪状态的强度。当前情绪状态获取部222，在获取觉醒度(例如，“0”)时的心率为平时值60bpm的情况下，直接获取觉醒度。另一方面，当前情绪状态获取部222，在获取觉醒度(例如，“0”)时的心率高于规定值的情况下，也可以将觉醒度校正为比较高的值(例如，+0.5)。当前情绪状态获取部222也可以根据当前的心率的值来决定校正值。而且，当前情绪状态获取部222，在当前的心率在规定的范围内的情况下，也可以获取减去规定的值的觉醒度。
而且，目标情绪状态获取部223也可以根据用户的心率来校正目标情绪状态的强度。另外，目标情绪状态获取部223也可以根据用户的心率不对目标情绪状态的强度进行校正。在这种情况下，也可以利用心率仅校正当前情绪状态的强度。
而且，音乐内容输出控制部421也可以用如下的方式控制音乐内容的输出，在输出开始时以校正后的节奏(例如，90bpm)输出音乐内容，随着时间的流逝而逐渐减慢节奏，在输出结束时以平时的节奏(例如，60bpm)输出音乐内容。如此，可以通过使节奏逐渐减慢来有效地诱导用户的情绪。
(7)也可以通过将解析了音乐数据的结果视觉化来制作多个图像。例如，也可以通过作为非线性时间序列分析方法之一的递归图，来制作使各种音乐数据的特征可视化的多个二维平面图像。
图28是表示在本实施方式通过递归图制作的多个图像的一个例子的示意图。
图28所示的图像1021是用分层递归图解析了巴萨诺瓦(BossaNova)音乐的图像，图像1022是用分层递归图解析了治愈用合成音乐(synthesizer music for healing)的图像，图像1023是用分层递归图解析了音乐盒音(music box)的图像。也可以给每个图像赋予表示情绪的颜色。另外，关于分层递归图，因为在“Miwa Fukino，Yoshito Hirata以及Kazuyuki Aihara，“Coarse-graining time series data：recurrence plot ofrecurrence plots and its application for music”，Chaos：An InterdisciplinaryJournal of Nonlinear Science，(2016年)”中已经公开，所以省略其详细的说明。
如此，通过用递归图解析各种音乐数据可以方便地制作多个图像。
(8)在本实施方式，终端装置1也可以具备服务器2、内容提供装置3以及扬声器装置4中的至少其中之一的一部分或全部。
图29是表示本发明的实施方式的变形例涉及的终端装置的构成的一个例子的方框图。
图29所示的终端装置1A具备显示部11、输入部12、处理器14A、存储器15A以及扬声器43。处理器14A具备显示控制部141、输入控制部142、图像获取部221、当前情绪状态获取部222、目标情绪状态获取部223、音乐内容决定部321以及音乐内容输出控制部421。存储器15A具备图像数据库存储部231以及音乐内容存储部331。另外，在图29所示的终端装置1A中，对于与上述实施方式的终端装置1、服务器2、内容提供装置3以及扬声器装置4相同的构成赋予相同的符号，并省略其说明。
(总结)
在本实施方式，在选择了表示粗略的(俯瞰的)情绪的3×3图像之中的一个图像之后，从与所选择的一个图像对应的情绪的范围中选择表示更详细的情绪的3×3图像之中的一个图像。通过这样的选择操作，用户可以获取与从图像接收到的更详细的情绪有关的信息。而且，通过这样的选择操作，还可以校正系统方面假设的图像所表现的情绪与用户方面接受到的情绪的差异。
而且，在显示部11的画面较大的情况下，显示控制部141也可以从最初显示9×9的图像。而且，在显示部11的画面较小的情况下，显示控制部141也可以将9×9的图像分为两个阶段层，最初显示3×3的图像，如果从3×3的图像之中选择了一个图像，就进一步显示3×3的图像。由此，在系统方面保持的情绪图像的数量没有变化的情况下，可以提高图像的可视性。
而且，通过设置两个轴以上的情绪轴，让用户一个轴一个轴地进行选择，系统方面可以一边进行机器学习一边发现用基于Russell的两个轴的图无法表现的新轴并将其进行追加。由此，可以成为具有将来扩展性的用户界面设计。例如，在表现对高音的金属声音(刺耳的声音)的感受性非常高的用户的情绪的情况下，用以往的两个轴的图时在图上无法表现音高的差异。然而，在通过机器学习可以辨别音高的差异之后，通过用递归图分别解析高度不同的多个声音，可以制作出表现了音高的差异的多个图像。然后，通过向用户提示所制作的多个图像，可以实现可应对个人差异的情绪的输入界面。
另外，在上述各实施方式中，各构成要素即可以用专用的硬件来构成，也可以通过执行适合于各构成要素的软件程序来实现。各构成要素也可以通过让CPU或处理器等程序执行部读取记录在硬盘或半导体存储器等记录介质中的软件程序来实现。
本发明的实施方式所涉及的装置的功能的一部分或全部可以典型地作为集成电路LSI(Large Scale Integration)来实现。这些功能的一部分或全部即可以分别地形成芯片化，也可以形成为包含一部分或全部的芯片化。而且，集成电路不局限于LSI，也可以用专用电路或通用处理器来实现。也可以利用在制造LSI之后可编程的FPGA(FieldProgrammable Gate Array)或可重新构筑LSI内部的电路单元的连接或设定的可重构处理器。
而且，本发明的实施方式所涉及的装置的功能的一部分或全部也可以通过让CPU等处理器执行程序来实现。
而且，在上述所使用的数字都是为了具体地说明本发明而给出的示例，本发明不局限于这些被示例的数字。
而且，上述流程图所示的各步骤被执行的顺序只是为了具体地说明本发明而给出的示例，在能够获得同样效果的范围内也可以是上述以外的顺序。而且，上述步骤的一部分也可以与其它的步骤同时(并行)执行。
本发明涉及的技术，因为用户可以凭感觉选择自身的情绪状态并可以从用户选择的图像中方便地确定用户当前的情绪状态，作为选择使用户的情绪状态变化的内容的技术有其实用价值。

Claims (10)

1.一种内容选择方法，其特征在于，让计算机执行以下步骤：
获取与至少一个情绪的强度相对应的多个图像；
使显示器可选择地显示所述多个图像；
将所述多个图像之中与用户选择的图像相对应的所述至少一个情绪的强度作为表示所述用户当前的情绪状态的当前情绪状态而获取；
获取表示所述用户作为目标的情绪状态的目标情绪状态；
决定用于使所述当前情绪状态变化为所述目标情绪状态的内容；
输出所述内容。
2.根据权利要求1所述的内容选择方法，其特征在于，
还获取用于识别所述用户的用户识别信息；
在获取所述多个图像时，获取预先与所述用户识别信息相对应的所述多个图像。
3.根据权利要求1所述的内容选择方法，其特征在于，
还在获取所述当前情绪状态之后，使所述显示器可选择地显示所述多个图像；
在获取所述目标情绪状态时，将所述多个图像之中与用户选择的图像相对应的所述至少一个情绪的强度作为所述目标情绪状态而获取。
4.根据权利要求1所述的内容选择方法，其特征在于，
所述当前情绪状态用以纵轴以及横轴来表示两个情绪的强度的坐标平面上的坐标值来表示，
在获取了所述当前情绪状态之后，还使所述显示器显示表示所述当前情绪状态的坐标点以及所述坐标平面，
在获取所述目标情绪状态时，将表示所述用户在所述坐标平面上选择的所述目标情绪状态的坐标点的坐标值作为所述目标情绪状态而获取。
5.根据权利要求1所述的内容选择方法，其特征在于，
在显示所述多个图像时，显示与第一情绪的强度相对应的多个图像，
还测量从显示所述多个图像起到所述用户选择了所述图像为止的选择时间，
在所测量的所述选择时间在规定时间以下的情况下，还可选择地显示与第二情绪的强度相对应的多个图像，其中，所述第二情绪的强度与所述第一情绪的强度不同。
6.根据权利要求1所述的内容选择方法，其特征在于，
还存储获取的所述当前情绪状态的履历，
在上一次获取的所述当前情绪状态的所述情绪的强度与再上一次获取的所述当前情绪状态的所述情绪的强度之间的差值在阈值以上的情况下，还提高所述情绪的强度的优先度，
在显示所述多个图像时，依次显示与所述优先度高的所述情绪的强度相对应的所述多个图像。
7.根据权利要求1所述的内容选择方法，其特征在于，
还基于当前的时刻和所选择的所述图像的特征量，校正获取的所述当前情绪状态。
8.根据权利要求1所述的内容选择方法，其特征在于，
还获取所述用户的生命体征信息，
还基于获取的所述生命体征信息校正获取的所述当前情绪状态。
9.一种内容选择装置，其特征在于具备：
图像获取部，获取与至少一个情绪的强度相对应的多个图像；
显示控制部，使显示器可选择地显示所述多个图像；
当前情绪状态获取部，将所述多个图像之中与用户选择的图像相对应的所述至少一个情绪的强度作为表示所述用户当前的情绪状态的当前情绪状态而获取；
目标情绪状态获取部，获取表示所述用户作为目标的情绪状态的目标情绪状态；
内容决定部，决定用于使所述当前情绪状态变化为所述目标情绪状态的内容；以及，
输出部，输出所述内容。
10.一种记录介质，是记录了内容选择程序的非暂时性的计算机可读取的记录介质，其特征在于，所述内容选择程序使计算机具备以下功能：
获取与至少一个情绪的强度相对应的多个图像；
使显示器可选择地显示所述多个图像；
将所述多个图像之中与用户选择的图像相对应的所述至少一个情绪的强度作为表示所述用户当前的情绪状态的当前情绪状态而获取；
获取表示所述用户作为目标的情绪状态的目标情绪状态；
决定用于使所述当前情绪状态变化为所述目标情绪状态的内容；
输出所述内容。
CN202010497320.8A 2019-06-06 2020-06-03 内容选择方法、内容选择装置以及记录介质 Active CN112052349B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962858020P 2019-06-06 2019-06-06
US62/858,020 2019-06-06
JP2019-179541 2019-09-30
JP2019179541 2019-09-30

Publications (2)

Publication Number Publication Date
CN112052349A true CN112052349A (zh) 2020-12-08
CN112052349B CN112052349B (zh) 2024-04-16

Family

ID=73609421

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010497320.8A Active CN112052349B (zh) 2019-06-06 2020-06-03 内容选择方法、内容选择装置以及记录介质

Country Status (3)

Country Link
US (1) US11379094B2 (zh)
JP (1) JP2021057002A (zh)
CN (1) CN112052349B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023139849A1 (ja) * 2022-01-18 2023-07-27 パナソニックＩｐマネジメント株式会社 感情推定方法、コンテンツ決定方法、プログラム、感情推定システム、及びコンテンツ決定システム

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080216002A1 (en) * 2004-08-30 2008-09-04 Pioneer Corporation Image Display Controller and Image Display Method
CN101512574A (zh) * 2006-09-07 2009-08-19 宝洁公司 用于测量情绪响应和选择偏好的方法
CN102150163A (zh) * 2008-10-03 2011-08-10 伊斯曼柯达公司 交互式图像选择方法
US20170277330A1 (en) * 2014-09-19 2017-09-28 Samsung Electronics Co., Ltd. Terminal device and control method therefor
CN107424019A (zh) * 2017-08-15 2017-12-01 京东方科技集团股份有限公司 基于情绪识别的艺术品推荐方法、装置、介质和电子设备
CN109688909A (zh) * 2016-05-27 2019-04-26 詹森药业有限公司 根据虚拟世界活动评估真实世界用户的认知状态和情绪状态的系统和方法
CN109688264A (zh) * 2018-12-17 2019-04-26 咪咕数字传媒有限公司 一种电子设备显示状态调整方法、装置及存储介质
CN109684978A (zh) * 2018-12-18 2019-04-26 深圳壹账通智能科技有限公司 员工情绪监控方法、装置、计算机设备和存储介质

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5822123A (en) * 1993-09-09 1998-10-13 Davis; Bruce Electronic television program guide schedule system and method with pop-up hints
US5732232A (en) * 1996-09-17 1998-03-24 International Business Machines Corp. Method and apparatus for directing the expression of emotion for a graphical user interface
KR101262922B1 (ko) * 2009-12-10 2013-05-09 한국전자통신연구원 감성 변화에 따른 감성지수 결정 장치 및 그 방법
JP2011170690A (ja) 2010-02-19 2011-09-01 Sony Corp 情報処理装置、情報処理方法、およびプログラム。
CN104428804A (zh) * 2012-05-04 2015-03-18 B-Sm@Rk公司 用于评价对象的方法和装置
US20170004260A1 (en) * 2012-08-16 2017-01-05 Ginger.io, Inc. Method for providing health therapeutic interventions to a user
US9047871B2 (en) * 2012-12-12 2015-06-02 At&T Intellectual Property I, L.P. Real—time emotion tracking system
US10698951B2 (en) * 2016-07-29 2020-06-30 Booktrack Holdings Limited Systems and methods for automatic-creation of soundtracks for speech audio
US20180101659A1 (en) * 2016-10-07 2018-04-12 eMind Science Corp. Methods, devices, and systems for identifying, monitoring, and treating a mental health disorder
JP6839818B2 (ja) 2017-05-17 2021-03-10 パナソニックＩｐマネジメント株式会社 コンテンツ提供方法、コンテンツ提供装置及びコンテンツ提供プログラム
US10091554B1 (en) * 2017-12-06 2018-10-02 Echostar Technologies L.L.C. Apparatus, systems and methods for generating an emotional-based content recommendation list

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080216002A1 (en) * 2004-08-30 2008-09-04 Pioneer Corporation Image Display Controller and Image Display Method
CN101512574A (zh) * 2006-09-07 2009-08-19 宝洁公司 用于测量情绪响应和选择偏好的方法
CN102150163A (zh) * 2008-10-03 2011-08-10 伊斯曼柯达公司 交互式图像选择方法
US20170277330A1 (en) * 2014-09-19 2017-09-28 Samsung Electronics Co., Ltd. Terminal device and control method therefor
CN109688909A (zh) * 2016-05-27 2019-04-26 詹森药业有限公司 根据虚拟世界活动评估真实世界用户的认知状态和情绪状态的系统和方法
CN107424019A (zh) * 2017-08-15 2017-12-01 京东方科技集团股份有限公司 基于情绪识别的艺术品推荐方法、装置、介质和电子设备
CN109688264A (zh) * 2018-12-17 2019-04-26 咪咕数字传媒有限公司 一种电子设备显示状态调整方法、装置及存储介质
CN109684978A (zh) * 2018-12-18 2019-04-26 深圳壹账通智能科技有限公司 员工情绪监控方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
CN112052349B (zh) 2024-04-16
US11379094B2 (en) 2022-07-05
US20200387267A1 (en) 2020-12-10
JP2021057002A (ja) 2021-04-08

Similar Documents

Publication Publication Date Title
JP6636792B2 (ja) 刺激提示システム、刺激提示方法、コンピュータ、および制御方法
CN106580346A (zh) 情绪推定方法和情绪推定装置
CN109599161A (zh) 身体活动和健身监视器
US20210212581A1 (en) Method and apparatus for providing biometric information by electronic device
WO2021090817A1 (ja) 情報処理装置、情報処理方法及びプログラム
JP2007319238A (ja) 睡眠モニタ装置
JP2008242963A (ja) 健康分析表示方法及び健康分析表示装置
JP2009233027A (ja) 睡眠改善装置及び睡眠改善プログラム
KR102053604B1 (ko) 수면 분석 방법 및 이를 이용한 수면 분석 디바이스
US20140136225A1 (en) Discharge readiness index
US10372086B2 (en) Smart watch having display, color of which changes according to state of user
US9679109B2 (en) Interview system, server system, server device, information terminal, interview method, information processing method, and program
TW201832814A (zh) 使用基因型數據以產生化身之系統及方法
JP2018097610A (ja) 満足度評価装置、満足度評価方法及び満足度評価プログラム
JP7288064B2 (ja) 視覚型仮想エージェント
CN112052349B (zh) 内容选择方法、内容选择装置以及记录介质
JP2008000283A (ja) 出力装置、出力装置の制御方法、出力装置の制御プログラム、出力装置の制御プログラムを記録した記録媒体
WO2022049727A1 (ja) 情報処理装置、制御方法及び記憶媒体
JP6226288B2 (ja) 印象評価装置及び印象評価方法
KR101928272B1 (ko) 환자의 생활 기록 데이터를 히트맵 형태로 시각화하여 나타내는 방법 및 서버
Carneiro et al. Dynamically improving collective environments through mood induction procedures
JP7402577B1 (ja) 音楽提供システム
CN109783673B (zh) 一种舌象图像的标注方法和装置
JP7400832B2 (ja) 情報処理装置、制御方法及びプログラム
EP3893091A1 (en) Controlling a data inspection by a user

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant