CN109074117B - 提供基于情绪的认知助理系统、方法及计算器可读取媒体 - Google Patents

Abstract

一种以个人情绪为基础的认知助理系统，其包括可由用户穿戴成头戴式耳机的一个或多个组件；收集该用户的情绪状态的一个或多个传感器；根据收集得的情绪状态，来识别环境对该用户的个人意义的处理器；及根据辨识得的个人意义，而将带有有关该环境的资料的经识别的个人化意义，储存于内存储器的不同区中的内存储器。

Description

提供基于情绪的认知助理系统、方法及计算器可读取媒体

[参考相关申请案]

此申请案主张提申日期2016年3月14日向美国专利局提出申请的美国临时专利申请案第62/308,202号的优先申请权，该案全文揭示爰引于此并融入本发明的揭示。

技术领域

广义言之，符合具体实施例的设备、方法、系统、及计算机可读取媒体有关于认知技术，及更明确言之，有关于提供基于情绪的认知感觉内存储器及认知洞察力。

背景技术

由于无数技术上的进展，包括更小型装置、更快速处理、及更大的储存容量，其用途扩大而辅助用户的日常生活活动及各项其它功能。今日，计算装置可在餐厅接你的点菜单，及发送给厨房加以执行。计算装置可具有内建于装置中的自动化个人助理软件，例如，Siri、Google Now等。此等自动化个人助理器可与用户进行对话，及提供所请求的信息。

为了改善用户的使用经验，个人助理器可以是情况与情境知晓，例如参考美国专利案第6,190,314号。此外，个人助理器可根据用户的先前互动而建立情境资料库，例如参考美国专利案第9,171,092号。

此外，个人助理器业已发展成不仅用来提供信息给用户，同时也执行若干基本任务。于相关领域中，虚拟个人助理器可了解用户的口头输入及/或书写输入，执行任务诸如在用户玩的虚拟游戏中掷骰子，且随时间的推移而调整适应用户的偏好，例如参考美国专利公告案第20130152092号。

又，有些个人助理器可具有个性参数，其可根据装置与用户的互动加以调整，例如参考美国专利公告案第20020029203号及EP 2531912。

于相关领域中，用户输入通常透过与计算机的语音通讯进行，或透过书写输入或触控输入驱动个人助理器进行。又复，个人助理器根据此输入，及根据所施加的用户偏好(可能随时间的推移改变)，或某种情境知晓，而提供信息及/或从事基本任务。

于相关领域中，个人助理器极受限制而无法代表人脑的智慧。虽然若干记忆力提升装置为已知，例如参考美国专利案第9,101,279号及美国专利案第9,177,257号，但认知洞察力只存在于人脑，现有计算机无法存取与使用此种洞察力。

因此，领域需要改良提供认知洞察力，其将根据类似人类情绪及人脑的复杂度而予个人化。领域需要有计算机，该计算机仿真人脑来，根据用户的个人洞察力，辅助用户的日常学习、记忆、思考、与作决策。

人类的思考经常带有情绪成分。相关领域的系统忽略了考虑人类思考与洞察力的此种情绪成分。领域需要针对个别洞察力或个人化洞察力，组合个别情绪成分与认知成分。

相关领域系统聚焦在考虑解译情境诸如影像及语音的意义，及使用复杂算法将其储存成配置文件、图片等。然而，情境或情境信息的意义因人而异。亦即，情境的解译将因人而异。领域需要组合呈情绪成分出现的个人情境意义与认知成分，来形成个别洞察力或个人化洞察力。

发明内容

[发明概要]

依据非限制性具体实施例，提供根据认知模块的认知助理系统，其以实时或实时现场处理而具体实施了感觉信息，诸如视觉资料及听觉资料，其与情绪信息同步。

依据非限制性具体实施例，情绪信息基于多-情绪信号，具体实施了视觉及听觉感觉信息对用户的本能洞察力及后天开发的洞察力的不同的交互相关性意义。

依据非限制性具体实施例，根据感觉资料与用户个别情绪状态的组合，系统可形成未经确认的认知感觉内存储器。

依据非限制性具体实施例，当用户复习、强化、演练显示出的认知感觉模块时，根据已确认的认知感觉内存储器与用户的个人化情绪状态的组合，系统可形成个人化洞察力或长期内存储器。

依据非限制性具体实施例，根据在从后天已开发的认知洞察力被取回的认知模块进行处理，系统可形成个人化思考及建立思考内存储器(或长期内存储器)。

例示性的非限制性实施例可克服先前技术的前记缺点及问题，且也已发展来对前文未描述的其它缺点及问题提供解决方案。然而，依据本文揭示的教示而操作的方法、设备、系统、及计算机可读取媒体并非必要要求克服前述特定问题或缺点中的任一者。须了解一个或多个具体实施例并不要求克服前述缺点，且可不克服前述问题中的任一者。

依据具体实施例的一态样，提出一种以个人情绪为基础的认知助理系统，其包括：至少一个传感器，其经配置以收集用户的情绪状态；一处理器，其经配置以根据收集得的情绪状态，来识别环境对该用户的个人意义；及一内存储器，其经配置以根据辨识得的个人意义，而将带有有关该环境的资料的经识别的个人化意义储存于内存储器的不同区中。

依据具体实施例的又另一态样，提出一种提供以个人情绪为基础的认知辅助的方法，其包括：藉至少一个传感器，收集用户的情绪状态；藉一处理器，根据收集得的情绪状态，来识别环境对该用户的个人意义；根据辨识得的个人意义，而将带有有关该环境的资料的经识别的个人化意义储存于内存储器的不同区中；及根据该资料的个人意义而输出结果。

依据具体实施例的又另一态样，提出一种经配置以储存信息的非过渡计算机可读取媒体，其当由处理器执行时使得该处理器执行各项操作。该等操作包括：接收由至少一个传感器收集得的一用户的情绪状态；根据收集得的情绪状态，来识别环境对该用户的个人意义；根据辨识得的个人意义，而将带有有关该环境的资料的经识别的个人化意义储存于内存储器的不同区中；及在一显示器上根据该资料的个人意义而输出结果。

依据各个具体实施例，用户容易明白了解当研读时需要进一步关注的题目、欲购买的项目等。依据各个具体实施例，个人化思考根据用户观察得的环境而形成。此等个人化思考可模仿用户大脑的思考，且被输出以辅助用户作各项决策。输出可呈各种形式，包括建议、警告、内容列表、研读期间重复某些资料等。

附图说明

爰引于此并构成本说明书具体实施例的一部分的附图连同实施方式用来解译与例示具体实施例。更明确言之：

图1为例示依据一具体实施例收集感觉资料及情绪资料的装置的视图。

图2A至2D例示依据一具体实施例检测情绪信息的情绪传感器的视图。

图3为例示依据一具体实施例的认知模块的成分的视图。

图4为例示依据一具体实施例用以将情绪信号分类成各类型情绪的图表，该等情绪反映出环境信息输入对用户的认知洞察力的用户情绪交互相关性的视图。

图5A及5B为例示依据一具体实施例将认知模块储存于认知感觉内存储器的流程图及流图。

图6为例示依据一具体实施例的认知感觉产生器的方块图。

图7为例示依据一具体实施例的认知洞察力产生器的方块图。

图8为例示依据一具体实施例用来将情绪信号分类成各类型的情绪而反映出认知工作讯资与用户的认知洞察力间的情绪交互相关性的图表的视图。

图9为例示依据一具体实施例处理认知模块的方法的流程图。

具体实施方式

现在将参考附图以详细描述具体实施例。具体实施例可以许多不同形式具体实施，且不应解译为囿限于本文中陈述的例示性具体实施例。反而，提供具体实施例使得本文揭示彻底地完整，且将完整地传递例示性构想给熟谙该领域者。又，众所周知的功能或组成可被删除以提供具体实施例的清晰精简的描述。须参考申请专利范围及其相当范围以确定本发明构想的真正范围。

人脑是个复杂的智慧设施，其具体实现陈述性信息，该信息可在工作内存储器上工作，及以视觉及听觉形式在大脑中枢执行。语句信息以情节记忆、语义记忆、及思考记忆形式而自人类的洞察力中的长期记忆取回。人类的洞察力建立在公理的不证自明的本能洞察力的核心上。人类本能乃天然安装在洞察力中者，人类生来即具有者，诸如呼吸、吸吮、哭泣等本能。人类本能随着时间逐渐累积。举例言之，随着人类发育，他学到父母是他最亲近的人，然后，他或她学习什么是手指、苹果、数字、加法运算等。新洞察力元素是建立在先前洞察力之上。人类的初始本能为喜爱、求生、及探索。人体器官产生情绪信号，以协助识别一对象对个体的意义。若一对象为已知且有意义，则可能产生情绪信号，诸如「喜欢」、「喜爱」、「害怕」。若一对象为未知但获取某人的注意，则可能产生属于「探索本能」的情绪，诸如好奇、深刻印象、关注。人类洞察力导致形成了情绪信号，以控制洞察力的建立过程。

洞察力的建立过程始于人类的五种感觉。人类透过感觉信息来感觉周遭环境，该等感觉信息包括：视觉、听觉、嗅觉、运动觉、及味觉信息。然而，大脑只接收有意义的信息，该信息使得人脑的特定位置产生情绪信号，其数值大于临界值。在大脑中，视觉、听觉、及其它感觉复合输入与同步复合情绪组合，变成了认知模块，其经分类且储存在大脑的不同内存储器定义域，建立起个人的认知洞察力。他的认知洞察力乃个人有意义的、经良好组织的资料库，准备好用于每个认知操作，诸如思考、作决策、及实行动作。

迄今为止，认知洞察力只存在于人脑中，在现有计算机所无法存取与利用的神经元、激素、及神经传递物质等复杂的器官下。即便现有计算机的速度快且储存容量大，但仍然无法用来辅助用户的日常个人认知操作。于相关领域中，计算机无法在某个事件之后或在用户于大型购物中心的购物之旅结束之后，响应于接收到与人类用户相同的输入，而给用户归纳总结与显示显著的元素与观察。相关领域无法考虑情绪信号，且经常地，无法考虑内建于人类对事件的观察的复合情绪信号。虽然可能形成客观信息资料库，但用户个体化的洞察力仍然付之缺如。

于一具体实施例中，计算机系统模仿人脑的工作，及包括个人化资料库，诸如在人脑中的资料库，以辅助用户的日常学习、记忆、思考、与作决策。于相关领域中，客观信息资料库可包括信息，诸如2+3＝5，但资料库缺乏用户对此信息的信心级别。于一具体实施例中，系统不只储存2+3＝5，同时也包括用户在解出这条方程式时的舒适程度或信心程度。

于一具体实施例中，容后详述，「2」是个语义模块，取决于用户有关数字2的个人史，储存成情绪相片及故事，诸如2手指、2苹果、父母一起为2。当对题目背景的全部认知元素为已知时，用户有信心。于本实例中，题目可以是加法，而语义为数字2、3、5等。当经验到全部认知元素的交互相关性时，一手有两根手指及/或两粒苹果，一手有三根手指及/或三粒苹果，结果一手共有五根手指或碗里有五粒苹果，用户感觉有信心或用户的信心级别高。「加法」的学习过程完成，人们在他的洞察力里已建立起新的语义模块。新语义洞察力被建立在且储存在用户大脑及系统两者。系统乃由用户情绪驱动。不像人类，系统不会忘记储存在它的洞察力里的东西，辅助人类提升他们的记忆能力。

此外，于一具体实施例中，用户可能对运算诸如加法及减法有不同的感觉，系统将考虑此等差异。于相关领域中，计算机将以相同方式处理「加」与「减」、「赢」与「输」，对其提供以相同的认知意义。于一具体实施例中，系统可能观察到用户喜欢赢而不喜欢输。用户喜欢有更多的巧克力、更多的玩具等。但用户不喜欢输掉玩具或糖果等。因此，于一具体实施例中，系统将考虑此等差异，类似人脑，系统将以不同方式处理「加」、「减」、「赢」、及「输」。于一具体实施例中，系统可提供处理基于情绪的信息，其从趋向于用户决心要赢而避免会输的洞察力取回者。

于一具体实施例中，认知洞察力经由将认知感觉内存储器与接收自用户的确认情绪信号组合而予形成。因此，若用户正在读书准备考试，则系统可协助用户判定哪些观念需要进一步研读或用户有困难的那些观念。若用户正在购物中心购物，则系统可协助用户自动拍摄沿途他或她喜欢的物品照片，然后，最终，显示该等照片，检讨与选出最感兴趣者。

于一具体实施例中，基于情绪的认知系统包括用来建立与处理认知感觉模块，具体实施视觉信息(VI)、听觉信息(AI)、及情绪信息(EI)的操作系统及设备。依据一具体实施例，系统包括至少一个相机及一个麦克风，用以收集用户同步观看到与听到的影像、视讯、语音及声音；及至少一个传感器，及优选地，更多个传感器，用以收集从用户大脑产生的情绪信号，诸如：喜爱、喜欢、好奇、关心、信心、及对应于视觉与听觉输入的其它不同类型的情绪信号，容后详述。系统利用环境感觉情绪信号的临界值以控制过滤过程，其使得来自环境的有意义的视觉信息及听觉信息能与内在产生联结。于一具体实施例中，系统收集到用户把他(或她)的大脑转到一个工作内存储器时产生的深思情绪信号，系统利用深思情绪信号来关闭环境信息输入，例如来自相机及麦克风的视觉及听觉，以避免未同步的或不当同步的组合。于此种情况下，情绪与用户大脑的最新思考有关，而非与用户所见及所听者有关，即便情绪值高于临界值亦复如此。若系统允许此类型的输入，则将导致错误的组合。

于一具体实施例中，系统可包括处理设备，其经配置以组合认知信息模块，其具体实施已过滤的环境感觉视觉及听觉信息及同步情绪信息。于一具体实施例中，系统可包括非过渡计算机可读取储存媒体，其用于储存建立起认知感觉内存储器的认知感觉信息模块。

于一具体实施例中，经配置以产生认知洞察力的认知处理系统包括：中央处理单元(CPU)、认知工作处理器、长期内存储器、及情绪信息形成器、及认知工作显示器。依据一具体实施例，长期内存储器可包括情节内存储器、语义内存储器、及思考内存储器。认知工作处理器包括认知工作中心、暂存内存储器诸如缓冲器、未完成工作内存储器、及排程内存储器，容后详述。此外，于一具体实施例中，基于情绪的操作指令可根据人类本能洞察力产生，容后详述。

图1为例示依据一具体实施例收集感觉资料及情绪资料的装置的视图。

如于图1中显示，依据一具体实施例，相机11可设置于头戴式耳机1上。换言之，依据一具体实施例，可设置左相机、中相机、及右相机(图中未显示)以拍摄视觉资料。此点仅供举例说明而非限制性。该领域中具有一般知识者将容易了解，视觉资料可使用个人装置拍摄，诸如用户的个人资料助理或电话手机。此外，该领域中具有一般知识者将容易了解可使用任何数目的相机，及视觉资料可由单一相机或由多部相机提供。然后，拍摄得的视觉资料(VI)可移转给电子板10，其包括与处理器(图中未显示)耦合的至少一个内存储器。

于一具体实施例中，电子板10可处理感觉信息及情绪信息以形成认知感觉记忆，容后就图4详加描述。于又另一具体实施例中，所形成的认知感觉信息可透过架设在头戴式耳机1上的通讯接口(图中未显示)，发射到另一个远程装置以供储存、监控、或进一步处理之用。举例言之，头戴式耳机1可包括通讯接口(例如，网络卡、天线、及该领域中具有一般知识者已知的其它界面，或稍后发展出的接口)以无线方式，例如，蓝牙、红外线、WiFi、及/或细胞式网络，发射资料至远程服务器或云端以供进一步储存、处理、或监控与共同监督。举例言之，警察在侦察期间可穿戴头戴式耳机1，藉由头戴式耳机1发射警察的认知洞察力给督察长，督察长在警察局内复核警察的工作。

此外，头戴式耳机1可包括一个或多个麦克风12及电池(图中未显示)。举例说明而非限制性，麦克风12可包括左耳麦克风、右耳麦克风、及中央麦克风。该领域中具有一般知识者将容易了解听觉信息可透过单一麦克风或多个麦克风收集。

于一具体实施例中，一个或多个情绪传感器13进一步设置于头戴式耳机1上。虽然图1描绘四个情绪传感器，但此点仅供举例说明而非限制性。该领域中具有一般知识者将容易了解设置单一情绪传感器，但优选地，设置多个情绪传感器以收集情绪信息。情绪传感器13检测得情绪信息(EI)。亦即，于一具体实施例中，藉由侦测大脑各部分的活动，情绪信息(EI)得自多个传感器。亦即，EEG频率及振幅随用户的情绪级别而改变。于一具体实施例中，无活动表示全部EEG成分的频率及振幅皆低于预定临界值。EEG供举例说明而非限制性。

举例言之，当用户松懈，注意力不集中时，人脑输出低度活动度信号。换言之，低度活动度信号指示用户不警觉、不关注、或不被其感觉环境所打动。当用户关注或注意其所观察者(例如，听见及看见)时，情绪信号的频率及振幅随之而改变。若变化超过预定临界值，则其将触发闸门，使得VI、AI、及EI能输入到于电子板10具体实施的处理器(及/或微处理器)，以供处理/组合/产生认知感觉模块。此点仅供举例说明而非限制性。依据一具体实施例，情绪传感器13将就图2A-2D以进一步细节解说如下。收集得的视觉信息(VI)及听觉信息(AI)及情绪信息彼此同步化或彼此关联，及被储存于电子板10的内存储器。

图2A至2D为例示依据一具体实施例检测情绪信息(EI)的情绪传感器的视图。

如于图2A、2B、2C、2D中显示，情绪信息(EI)可根据来自传感器S1至S16的输出获得，于其中至少一个传感器可以是参考传感器。于一具体实施例中，S1至S16乃分别形成多频道的频带资料信号的EEG传感器。亦即，S1至S16检测得的EEG信号被解译成个别频道信号ET01-ET12，容后就图3详述。图2A至2D例示传感器S1-S16的定位。举例言之，传感器S1至S10置于用户脑部的左、右颞叶周围，其与相关联情绪有关，容后详述；及传感器S11至S16置于额叶周围，其与执行情绪有关。于一具体实施例中，由S1至S16检测得的信号可根据多子波变换加以分析、处理来分类人类情绪，推论出空间上位在脑子内部的来自多个特定点的信号，其形成特定类型的情绪信号。

图3为例示依据一具体实施例包括视觉信息、听觉信息、及情绪信息的认知模块的成分的视图。如于图3中显示，情绪信息可具体实施对用户的个人观点解译不同的情绪意义的多个成分ET01至ET12的各项组合。于一具体实施例中，ET01至ET12可藉处理从传感器S1-S16输出的信号形成。如于图3中显示，认知信息模块3包括VI信息31、AI信息32、及EI信息33。EI信息33包括所形成的情绪数值ET01-ET12，其藉处理与分析来自传感器S1-S16的输出获得。此点仅供举例说明而非限制性。

于一具体实施例中，图3例示当用户碰面且听见他心爱的人时经解译的情绪信号。举例言之，ET01可指示喜爱情绪定义域，其显示为高；ET09可指示信心情绪定义域，其也显示为高；及ET10可分配来指示显见情绪定义域及其也是高。当ET01-ET08中的一者为高时，ET09及/或ET10将也是高，原因在于若某个东西为未知且用户感觉对此项目缺乏信心时，则用户无法喜欢该物品。当用户在一家新餐厅里看到他偏爱的披萨时，他可能喜欢它(ET03将为高及ET10将也是高)。又，因那是他偏好的食物，他感觉显见。然而，用户可能不确定这家新餐厅的披萨是否好吃，如果这次好吃，则下次在这家餐厅看到披萨时，他的ET09可能为高。

图4为例示依据一具体实施例，将情绪信号分类成各类型情绪的表，该等情绪反映出环境信息输入对用户的认知洞察力的用户情绪交互相关性的视图。如于图4中显示，ET01有关生殖，当人们看到及/或听到有关此定义域的某些东西时，在边缘系统(颞叶内部)的特定点01(举例)将产生诱发性行为的荷尔蒙。取决于人们所见，来自人脑的这个特定位置的情绪信号以特定频率及振幅形成。此信号由全部16个传感器收集(举例说明而非限制性)，然后，处理器分析该信号，计算及定义(使用支持向量机处理，根据在用户头上16个传感器的经界定的位置)，例如，来自点01的信号具有如于图3中显示的原始形式。处理器也能判定ET09及ET10对应于额叶的点09及10。

图5A为例示依据一具体实施例建构认知感觉内存储器的流程图。于图5A中，视觉信息(VI)、听觉信息(AI)、及情绪信息(EI)分别接收自相机524、麦克风526、及情绪传感器520。VI及AI为连续串流，其经缓冲历经够长时间，以对应于检测情绪活动的延迟时间。举例言之，孩童能记住他被提醒或警告前五秒他母亲所说的话。根据来自传感器520的情绪信息，情绪505在情绪复合解释器530(其在处理器及/或微处理器，诸如电子板10中的处理器上实施)中获得、分析、变换、及组合。如前文解释，情绪可以是复合的情绪信息，其根据由情绪传感器(诸如以上描述者)检测得的多个信号获得。如前文讨论，多子波情绪信号可被分解与组合成各型情绪。亦即，于一具体实施例中，情绪信号进行分解处理。若复合情绪中的至少一个成分高于临界值，例如，用户注意他或她所见或所听，及/或显示感兴趣，则开关532被打开，储存于缓冲存储器528中的视觉信息及听觉信息，与由认知模块组合器534中的情绪复合解释器530所提供的复合情绪组合，其可在处理器或微处理器上实施，及一起储存于认知感觉内存储器540中作为感觉认知模块。于一具体实施例中，感觉认知模块包含于认知感觉内存储器540中形成的VI、AI、及EI。

图5B为例示依据一具体实施例建构认知感觉内存储器或模块的方法的流图。如于图5B中显示，于操作5001中，认知系统例如使用如上参考图1描述的头戴式耳机1，接收视觉、听觉、及情绪资料。于操作5002中，根据接收自情绪传感器的情绪资料，出现情绪相位空间重构PSR。于操作5003中，情绪使用支持向量机(SVM)分类。亦即，于一具体实施例中，情绪资料经处理以形成信号ET01-ET12。于操作5004中，情绪复合解译判定所形成的信号ET01-ET12的成分的数值。于操作5005中，专心情绪值与临界值作比较，若于操作5005中专心情绪值不超过临界值，则于操作5008中忽略输入资料。否则，于操作5006中，形成包含该输入资料的认知感觉模块或内存储器；及于操作5007中，已组合成的认知感觉模块储存于认知感觉内存储器。

图6为例示依据一具体实施例的认知感觉产生器的方块图。

依据一具体实施例且如于图6中显示，用户601与环境602互动。与环境602互动可给用户601提供运动觉输入612、味觉输入610、嗅觉输入608、听觉输入606、及视觉输入604。举例言之，用户坐在餐厅的一桌，则他的大脑可能接收各种输入中的一或多者。举例言之，用户可观察到服务生捧着一盘漂亮的意大利面过来，将盘子放在他面前的桌子上。服务生可说「先生，你的意大利面！」此点仅供举例说明而非限制性。用户可能获得多个其它感觉信息，包括他的盘子里的食物口味好(味觉输入)，气味香(嗅觉输入)，用户可能进一步观察到盘子脏(视觉输入)，盘子及/或食物烫(运动觉输入)，及用户可能进一步注意到盘子滋滋作响的声音(听觉输入)。换言之，于一具体实施例中，与环境602互动可给用户601提供各种感觉输入，他的大脑加以实时处理。提供给用户大脑的各种感觉输入，产生了情绪信号。例如，用户可感觉他喜欢该食物。如于图6中描绘，使用情绪产生器，传感器将侦测到EEG活动增加，及组合情绪ET03可具有极高值。情绪信号的高数值使得系统，如前文描述，将全部实时视觉信息、听觉信息、及情绪信息纪录到它的感觉内存储器。稍后，如下参考图7以进一步详细描述，感觉内存储器或感觉模块将被移转至洞察力产生器，以经过确认并储存在用户的语义「意大利面」定义域。因此，在用户的洞察力，语义「意大利面」已被彻底地个人化，当此项信息被取回用于「意大利面」相关的话题、思考等时，此项信息对该用户而言极为具有意义。

于一具体实施例中，用户可穿戴装置诸如头戴式耳机1(描绘于图1)，此装置可以是认知感觉产生器600实例。

于又另一具体实施例中，认知感觉产生器可供应认知信息给计算机、个人助理装置、行动装置诸如细胞式移动电话。此点仅供举例说明而非限制性。虽然具体实施例描述认知感觉产生器600由用户穿戴，但其仅供举例说明。该领域中具有一般知识者将容易了解认知感觉产生器可以是各种设备的组合，例如，外部麦克风及外部相机，及观察用户的远程情绪传感器等。

依据一具体实施例，认知感觉产生器600包括至少一个处理器636，及在硬件内存储器上实施的缓冲存储器628，及任选地，通讯接口638。

于一具体实施例中，认知感觉产生器600包括多个硬件组件及软件组件，诸如硬件内存储器、硬件处理器、麦克风、相机、压力传感器等。

于一具体实施例中，不像相关技术的个人助理器，认知助理器基于至少三种感觉输入操作，亦即，视觉信息、得自用户环境的听觉信息、及也包括得自用户的情绪信息。于一具体实施例中，用户的认知世界是与他的情绪世界整合。记忆也包括有关认知资料的用户的个人情绪。

如于图6中显示，认知感觉产生器600可包括相机624，其拍摄用户的观察，例如，教授在黑板上写的文字、商店橱窗里展示的T恤等。认知感觉产生器600可进一步包括麦克风626，用以收集用户的话语或音频输入诸如来自所观看目标的语音。举例言之，当教授在黑板上画图或解释屏幕上描绘的构想时教授的语音，或来自商店橱窗的广告音乐及其类。

于一具体实施例中，认知感觉产生器600透过相机624拍摄视觉信息(VI)，透过麦克风626收集听觉信息(AI)，及将收集得的信息储存于缓冲存储器628。缓冲存储器628可视同人脑的感觉缓存器。举例言之，缓冲存储器628的视觉感觉缓存器可储存约一秒的VI，听觉感觉缓存器可储存约五秒的AI。此项感觉资料或感觉信息可储存于缓冲存储器628的各种感觉缓存器，即便用户不一定专心注意亦复如此。它只是用户的最新观察。换言之，它是在获得情绪信号前的预定部分时间(例如，数秒钟)发生的事。于一具体实施例中，采用在接收得的情绪信息之前一秒的视觉信息及之前五秒的听觉信息。于一具体实施例中，如此模仿人脑，人脑响应于大约一秒的视觉资料及五秒的听觉资料。此点仅供举例说明而非限制性。至于变化例，在接收到情绪信号前获得的感觉资料量，例如可随年龄而改变。当从相机624及麦克风626获得新资料时，新资料覆写了目前储存于缓冲器628中的感觉资料。

得自情绪传感器620的情绪信息或资料(EI)输入至认知模块处理器636内。于认知模块处理器636中，接收自情绪传感器620的情绪资料首先由情绪复合解释器630处理而形成情绪信息。于一具体实施例中，接收自各个传感器的情绪资料与参考值作比较，以获知情绪信息的类型，及形成带有其对应值的包含各类型情绪的复合情绪。其次，针对各型情绪，频率峰值或振幅宽度或两者的组合与临界值作比较。于一具体实施例中，EI藉情绪临界值过滤器632而与临界值作比较，以检测用户的脑部活动或情绪。于一具体实施例中，高情绪指示对用户而言有意义的信息，须被储存。因此，于一具体实施例中，情绪临界值过滤器632检测对用户有意义的特定信息输入。举例言之，若用户注意、感兴趣、喜欢、爱好有关被观察对象的信息，则其将储存于认知感觉内存储器640，及可由通讯接口638输出。如此，检测得的情绪信号当作扳机，来处理缓冲存储器中的感觉资料，以制定规划出对用户有意义的认知感觉模块。

认知感觉模块被储存于认知感觉内存储器640中，直到内存储器的容量满了，需要被删除，或需要例如透过通讯接口638而备份至分开装置为止。依据一具体实施例，虽然通讯接口638被描绘为认知模块处理器636的一部分，但该领域中具有一般知识者将容易了解通讯接口638可以是分开的组件，硬件与软件的组合诸如网络卡。于一具体实施例中，缓冲存储器628及认知模块处理器636在电子板650上实施。

如参考图7，以进一步详细描述，重要信息可提交给用户大脑的长期记忆。为了提交信息给长期记忆，用户需要演练，强迫他或她自己记住感觉资料，让它储存在长期内存储器。单纯注意关注感觉资料及其类，可能不足，反而需要用户付出额外的努力或工作来将信息储存入用户大脑的长期内存储器。于一具体实施例中，短期记忆若经确认，例如，关注程度或了解程度经重新衡量，则提交到长期内存储器。亦即，当接收到新记忆时，储存在记忆中的短期区的认知感觉记忆可能改变。此等认知感觉记忆可被移动而将被储存在长期内存储器里，容后详述。

于一具体实施例中，根据由传感器S1至S12输出的数值，可能判定用户正在付出额外努力以记住信息，及类似人脑，该信息可被提交至长期内存储器，如参考图7的描述。

图7为例示依据一具体实施例经配置以产生认知洞察力的认知洞察力产生器700的方块图。认知洞察力产生器包括：CPU 722、认知工作处理器711、长期内存储器730、情绪信息形成器70、及认知工作显示器707。依据一具体实施例，长期内存储器730可包括情节内存储器724、语义内存储器726、及思考内存储器728。认知工作处理器711包括认知工作中心716、暂存内存储器712、未完成工作内存储器714、及排程内存储器720。认知洞察力产生器700包括情绪信息形成器70，其接收来自用户7的情绪输入705。

于一具体实施例中，认知洞察力产生器700并不使用来自相机及麦克风的视觉资料及听觉资料工作，反而取而代之，它使用提供在系统中且显示在认知工作显示器707上的现有的视觉信息及听觉信息工作。以如同感觉产生器600的相同方式，情绪信息EI是由EI形成器70产生。当采用图6显示的感觉产生器600时，用户从环境接收VI及AI来形成EI；在产生器700，用户注视屏幕且聆听扬声器来形成EI。认知工作显示器707显示来自认知工作内存储器718的资料。

特定言之，于一具体实施例中，用户7观看认知工作显示器707，它给用户7提供视觉资料704及听觉资料706。根据用户对环境的观察，情绪形成器G7形成情绪705。认知洞察力产生器接收到由情绪信息形成器70所形成的情绪资料705，及形成了情绪信息(EI)。

依据一具体实施例，情绪信息形成器70包括情绪传感器72，用以检测用户的情绪。该领域中具有一般知识者将了解此点供举例说明而非限制性。情绪传感器72可位在认知洞察力产生器700外部。其次，情绪信息形成器70进一步包括情绪复合解释器73，其处理由情绪传感器72输出的信号，及形成各类型的情绪信息。

图8为例示依据一具体实施例，用来将情绪信号分类成各类型的情绪，而反映出认知工作讯资与用户的认知洞察力间的情绪交互相关性的图表的视图。如于图8中显示，用户8的情绪产生器G8产生各种情绪，诸如交互相关情绪及执行情绪，其由情绪传感器820(类似情绪传感器72)感测。举例言之，情绪复合解释器73(图8中描绘为情绪复合解释器830)分析来自传感器的输入，及形成包含带有对应数值的ET01…ET12的情绪信息(EI)83。

如于图7中显示，情绪信息产生器70具有通讯接口78，其发送所产生的情绪信息(EI 83)给输入与输出接口710，其又转而将所产生的情绪信息(EI 83)提供给认知工作处理器711。所产生的情绪信息可储存在暂存内存储器712。

如于图7中显示，认知感觉模块(其可包括与EI组合的视觉信息及听觉信息)可暂存在暂存内存储器712，及然后，由认知工作中心716内部的认知工作内存储器718，根据在认知工作显示器705上显示的用户情绪，以及在长期内存储器中的交互相关信息，而确认或重新分类，容后详述。

人脑包括工作内存储器，其可维持直接接收自眼睛及耳朵的短期记忆，连同若有所需，从长期内存储器取得的相关信息或资料以从事心智操作。举例言之，为了从事2+3的操作，人脑将从背景到工作内存储器直接获得视觉信息2及3及+。2、3、及+的语义意义须从长期内存储器取回成为文字「2」、2手指、2苹果、文字「3」、3手指、3苹果、文字「加法」、父和母、一起等等的视觉。举个实例，五岁男童的人脑可在作为认知工作显示器的纸张上画出全部此等语义。然后，语义5将取回在他的工作内存储器，他可把答案5写在一张纸上。

于一具体实施例中，为了模拟人脑，提供认知工作中心716(其由硬件处理器执行)，其获得暂存在暂存内存储器710中的记忆，然后，在认知工作显示器707上显示该等记忆，及根据连同得自长期内存储器的各个记忆的已更新的交互相关性一起收集的已更新的情绪信息，确认该等记忆，容后详述。

认知工作中心716连同认知工作显示器707可被视同人脑中的内部语音及内部眼睛。认知工作中心716规划与形成意识洞察力及/或思考，将其储存到长期内存储器730，以供后来取回之用及供处理未来思考之用。也能够透过网络702经由社交媒体、因特网及其类而与其它友人共享意识洞察力及/或思考。

如于图7中显示，认知工作中心716接收已形成的认知感觉内存储器或模块，且发送之而被显示在认知工作显示器707上。用户将复习显示在认知工作显示器707上认知感觉模块，且形成了情绪，然后该情绪由情绪信息形成器70处理成情绪信息(EI)。认知工作中心716剖析情绪信息(EI)，以判定回应于所接收的感觉信息(VI及AI)用户所经验的各类情绪，如于图8中显示。

举例言之，认知工作中心716运用影像认知技术(领域已知者或稍后将发展出者)以撷取视觉信息中的对象，且运用语音至文字转换技术(领域已知者或稍后将发展出者)以撷取以VI及AI具体实现的该等对象的更多细节规格。然后，认知工作中心716将已分类的VI及AI、以及带有已确定情绪信号类型的EI储存于长期内存储器各区中的其中一区。举例言之，假设认知工作中心716判定该EI在ET01、ET02、ET09、及ET10具有高数值，其中以ET01为最高，则该认知感觉模块(VI、AI、及EI)将被储存在长期内存储器MD1中的语义定义域726MD01内的类别LOVE(喜爱)项下(如于图8中显示)。

如于图7中显示，长期内存储器730(图8中的MD1)可包括情节区724，其储存涵括响应于VI及AI信息，由用户所调用的相对应情绪的情节记忆。情节区724储存事件及涵括其针对该用户所调用的情绪的个人经验。亦即，于一具体实施例中，情节内存储器涵括全部记忆(可能也被储存在语义区的记忆)，但此等记忆以时间序编排储存。举例言之，用户可从这个情节区724取回去年的年度会议的相关信息。

于一具体实施例中，举例言之，认知工作显示器707显示自认知感觉内存储器740取回的，或自暂存内存储器712取回的VI及AI。然而，显示在显示器707上的信息可能与他在课堂上观看的与聆听的信息不同。在家里，用户可在显示器707上复习与在课堂上取得的相同VI及AI，且根据复习语义或题目，而可能建立与用户的洞察力更多的交互相关性，例如，更深的理解及/或更高的信心级别。于一具体实施例中，至少根据信心情绪在高级别，认知工作中心716可使得系统能将该认知感觉模块储存于长期内存储器。当中心716须处理其它紧急工作任务时，若信心情绪与显见情绪两者皆为低，则认知信息将被储存在未完成工作内存储器714，以供当工作内存储器结束紧急任务时进一步取回进行处理。

举另一个实例，若用户研读具有定义域MD01→MD06的简单语义，诸如，如于图8中显示，警察(MD02-人类)、披萨(MD03-食物)、汽车(MD04-东西)、大象(MD05-动物)、树(MD06-植物)、下雨(MD07-现象)、饮食(MD08-过程)…，学习得的认知语义储存于其个别的定义域，而最高偏好者(最喜欢的物项)在其个别的定义域的最顶端。当用户搜寻该定义域(他的长期内存储器)时，透过显示器707提供选单画面给用户，具有针对MD01→MD08的八个小图帜。若他想到食物，则他将选择小图帜MD03，然后，将出现巧克力(如果他最爱巧克力)的语义。此点仅供举例说明而非限制性。于一具体实施例中，用户可从长期内存储器的各个定义域取回他或她最偏好的食物、人们、及其类。

举另一个实例，若用户研读复杂语义。它被视为思考，且就其重要性或效益而言，思考与情绪相关。举例言之，当用户完成新制程设计或新业务计划时，它将是个复杂的已完成的思考，而全部ET09(信心)、ET10(显见)、及ET11(期望)在其高级别。然而，该设计(或计划)因其在晚近市场上有用的潜力展望，使得该用户感觉极有希望，比起ET9、ET10，用户的情绪ET11具有最高值(他对该设计(或计划)极有信心且显见，但他的期望情绪，亦即他的希望在以上三类型的情绪中是在最高水平)，这个思考可被储存在定义域MD11-期望思考的定义域。通常，此等类型的思考被定名为个人的「希望」、「信念」、及「渴望」。他们通常在人脑的最顶端。

探索情绪来自于人类的本能。于一具体实施例中，若学生研读十个构想，则认知工作中心716可将此等构想储存在思考区728，用户最知晓的构想储存在MD09的顶端，而显然是最困难的、最伤脑筋的、考试时有最高失败风险的构想则储存在定义域MD12的顶端。构想基于由传感器诸如传感器S1至S16测量得的用户的情绪状态加以分类。思考区728定义用户的各种思考。

长期内存储器730的语义区726可定义人类MD02、食物MD03、东西MD04等。举例言之，针对东西MD04的语义内存储器区可被细分成多个子定义域，诸如衣着、房屋等。于各个定义域中，当用户搜寻该定义域时，偏好的子定义域在顶端。因而当该用户在选单上选择「MD04」小图帜时，例如汽车、房屋、高尔夫球小图帜将出现在选单画面上。

举例说明但非限制性，长期内存储器730可被逻辑上分割成各个区。分割可以是实体的，或者分开的记忆可被使用来模仿人脑中内存储器的各区。

认知工作处理器711也包括排程内存储器720。排程内存储器720可储存某些题目，其在当时已经完成，而将在预定时间由认知工作中心716加以执行。举例言之，用户可在排程内存储器720中储存准备8am周一会议，或储存10am周二提交业务合约。当在预定时间被执行之后，此等题目将被储存在长期内存储器730中作为一般已完成的题目。因此，于一具体实施例中，认知工作内存储器718中的已完成的题目或思考，若其以一组时程注记被具体实施，则其可能被移动至排程内存储器720，而非移动至长期内存储器730。

图9为例示依据一具体实施例一种产生认知洞察力的方法的流程图。

于一具体实施例中，于操作9001中，用户可选择一个题目。于操作9002中，题目可在操作9002中由认知工作显示器加以显示。于操作9003中，用户复习题目背景与交互相关性。若输入的题目是2，则交互相关性可包括2手指、2双亲。于操作9004中，自长期内存储器取回交互相关的洞察力，所取回的交互相关的洞察力在操作9005中显示。当用户复习所显示的题目时，根据用户的情绪状态，例如，用户感觉有信心、显而易见、担忧、渴望、好奇等而形成情绪信息。所得的情绪信息(EI)与参考状态作比较。举例言之，于操作9006中，若ET09及/或ET10与参考样本间的区别高于预设的临界值TH，则于操作9007中，系统将检查在认知模块内容中是否已设定一时程。若未设定时程，则于操作9010中，信息被储存于长期内存储器中以供稍后取回之用。若已设定时程，则于操作9008中，信息被储存于排程内存储器中以供在设定时间处理之用。

其次，于操作9009中，若ET09及ET10与参考样本间的区别两者皆低于临界值，例如，用户尚未理解题目，需要更多思考时间，需要获得更多交互相关性、证据来变得更有信心，例如，题目需要更多处理，则系统检查工作内存储器是否可资运用。若于操作9009中工作内存储器是可资运用，则系统将未完成的题目送回操作9002，以供显示与进一步处理直到该题目被理解与完成为止。另一方面，若于操作9009中工作内存储器并非可资运用，则ET11值及ET12值被界定为重要级别，且被储存于未完成内存储器内供稍后处理之用。

举另一个实例，用户可请求藉由取回他或她喜欢的全部购物项目而复习他的或她的购物经验。用户可将感觉内存储器转移成认知洞察力产生器，诸如于图7中例示的认知洞察力产生器700(CIP)。CIP以时间序编排储存所接收的感觉内存储器于暂存内存储器内。然后，处理器711可以ET04值顺序重新列表。用户将有一张受监控东西的列表，最喜好的项目出现在表列的最顶端(根据对象形成的情绪ET04值，从最喜好者至最不喜好者)。

依据各个具体实施例，认知模块处理器可作为改良的个体的人脑。根据连同相对应情绪信息而储存于长期内存储器存库内的参考记忆，认知模块处理器可输出警告，诸如「别吃这个，你并不喜欢绿花椰菜」，或输出认知洞察力给该用户，诸如「这是约翰，你喜欢和约翰在A运动咖啡馆里观看篮球」。又，认知模块处理器可根据所接收的感觉资料而执行某些动作。举例言之，若判定(带有高度害怕情绪级别)用户发生车祸了，则认知模块处理器可发送信号呼叫911。若判定用户错过了安妮，则认知模块处理器可产生简讯发送给安妮等。

业已呈现各个具体实施例的详细说明用于例示性目的，但非意图为排它性或限于所揭示的实施例。

未背离所述实施例的范围及精髓，许多变化对该领域中具有一般知识者而言可能为显然易知。本文中采用的术语经选择来最优选地解释实施例的原理、实际应用、或优于市场上出现的技术的技术改良者；或使得该领域中具有一般知识者能够更了解本文揭示的实施例者。

于一具体实施例中，认知模块处理器可在有形的计算机可读取媒体上体现。如于本文中使用，术语「计算机可读取媒体」是指参与提供指令给处理器以供执行的任何媒体。计算机可读取媒体例如可以是，但非限制性，电子、磁性、光学、电磁学、红外线、或半导体系统、设备、或装置，或前述者的任何合宜组合。计算机可读取媒体的更特定实例(非排他列表)将包括下列：有两根以上导线的电气链接、便携计算机盘片诸如软盘或挠性碟、磁带或任何其它磁性媒体、硬盘、随机存取内存储器(RAM)、只读存储器(ROM)、可抹除可程序只读存储器(EPROM或闪存)、记忆卡、任何其它内存储器芯片或卡匣、光纤、可携式光盘只读存储器(CD-ROM)、任何其它光学媒体、穿孔卡、纸带、任何其它带有打孔图案的实体媒体、任何其它计算机可读取的媒体，或前述者的合宜组合。

于本文件的上下文中，计算机可读取媒体可以是能够容纳或储存程序，以供由指令执行系统、设备、或装置使用或与其链接的任何有形的非过渡媒体。

另一个形式乃信号媒体，可包括有计算机可读取程序代码于其中具体实施，例如，于基带中或作为载波的一部分具体实施的传播资料信号。此种传播信号可呈多种形式中的任一种，包括，但非限制性，电磁学、光学、或其任何合宜组合。信号媒体可包括同轴缆线、铜导线、及光纤，涵括其包含资料汇流排的导线。信号媒体可以是其非为计算机可读取储存媒体，及其能够通讯、传播、或传送程序，以供由指令执行系统、设备、或装置使用或与其链接的任何媒体。

在计算机可读取媒体上实施的程序代码可使用任何适当媒体传输，包括但非仅限于无线、有线、光纤缆线、RF等，或前述者的任何合宜组合。

针对具体实施例的各个面向进行操作的计算机程序码可以一个或多个程序语言的任一种组合写成，包括面向对象程序语言，诸如爪哇、Smalltalk、C++、.Net等及习知程序程序语言。程序代码可以完全在用户计算机上执行，部分在用户计算机上执行，作为孤立软件包执行，部分在用户计算机上执行及部分在远程计算机上执行，或完全在远程计算机或服务器上执行。远程计算机可通过任何类型的网络而链接到用户计算机，包括局域网络(LAN)或广域网(WAN)，或可链接到外部计算机(例如，使用因特网服务提供业者透过因特网连结)。

计算机可读取媒体只是可携载指令以供实施本文中描述的方法及/或技术中的任一者的机器可读取媒体中的一个实例。此种媒体可呈任何形式，包括但非仅限于，非依电性媒体及依电性媒体。非依电性媒体包括例如光盘或磁盘。依电性媒体包括动态存取内存储器。

各种形式的计算机可读取媒体可能涉及将一个或多个序列的一个或多个指令携载到处理器诸如CPU以供执行。举例言之，指令可初步携载于来自远程计算机的磁盘上。另外，远程计算机可将指令加载其动态存取内存储器内部，及采用调制解调器透过电话线发送指令。计算机系统本地的调制解调器能接收在电话在线的资料，及使用红外线发射器来将资料转换成红外线信号。红外线检测器能接收携载于红外线信号中的资料，适当的电路可将该资料置于资料汇流排上。汇流排将资料携载至依电性储存装置，处理器自其中取回指令且执行指令。由依电性内存储器所接收的指令，在由处理器执行之前或之后，可选择性地储存于持久性储存装置上。使用领域众所周知的多个网络资料通讯协议，指令也可透过因特网下载至计算机平台中。

图式中的流程图及方块图例示依据各个具体实施例，系统、方法、及计算机程序产品的可能体现的架构、功能、及操作。就此方面而言，流程图或方块图中的各个方块可表示一个码模块、码区段、或码部分，其包含用于实施特定逻辑功能的一个或多个可执行指令。于若干其它实施例中，也须注意方块中注记的功能可以图式中注记的顺序以外的顺序发生。举例言之，取决于涉及的功能，接续显示的两个方块实际上可实质上同时执行，或者两个方块偶尔可以相反顺序执行。也须注意例示方块图及/或流程图的各个方块，及例示方块图及/或流程图中的方块组合，能由执行特定功能或动作的以特定用途硬件为基础的系统、或特定用途硬件与计算机指令的组合加以实施。

如于本文中使用的术语仅用于描述特定实施例，而非意图为限制性。如于本文中使用，除非上下文明确地另行指示，否则单数形「一(a)」、「一(an)」及「该」指预期也涵括复数形。进一步须了解术语「包含」及/或「包含有」当用于本说明书中时，载明了所陈述的特征、整数、步骤、操作、组件、及/或组件的存在，但并不排除一个或多个其它特征、整数、步骤、操作、组件、组件、及/或其群组的存在或增添。

如下申请专利范围中的全部手段或步骤加上功能组件的对应结构、材料、动作、及相当物预期涵括用于执行该功能的任何结构、材料、或动作组合如特别请求专利的其它请求专利组件。

已经呈现具体实施例的实施方式用于例示说明目的，但绝非为排他性或限于任何形式。未背离本发明的范围及精髓，许多修改及变化对该领域中具有一般知识者而言将为显然易知。具体实施例经选择与描述，以便解释其操作及实际应用，且使得其它熟谙该领域者将了解带有如适合预期的特定用途的各项修改的各个实施例。换言之，对此等实施例的各项修改将为该领域中具有一般知识者显然易知，且未使用本发明的能力，本文中定义的通用原理及特定实例可应用至其它实施例。举例言之，前文讨论的不同实施例的部分或全部特征可组合成单一实施例。相反地，如上讨论的单一实施例的部分特征可从实施例中删除。因此，本文揭示非意图囿限于本文中描述的具体实施例，反而须以如由申请专利范围的特征及其相当范围界定的最广义范围加以解译。

Claims (22)

1.一种以个人情绪为基础的认知助理系统，其包含：

至少一个机构，其经配置以实时收集有关环境的资料，该资料包含用户观察到的同步视觉及听觉信息；

至少一个传感器，其经配置以收集该用户对应收集得的同步视觉及听觉信息的情绪状态；

处理器，其经配置以根据收集得的该情绪状态，来识别该环境对该用户的个人意义；及

内存储器，其经配置以根据识别得的该个人意义，而将带有有关该环境的资料的经识别的该个人意义存储于该内存储器的不同区中，

其中，该处理器对该环境的该个人意义的识别包含：

根据存储于资料库中的该用户的收集得的该情绪状态及不同本能参考信号，从已存储收集得的该同步视觉及听觉信息中过滤、检测及识别该用户的本能情绪信号；

识别该环境的该个人意义，该个人意义是根据识别得的相对应该本能情绪信号的本能情绪代码，其中识别得的相对应该本能情绪代码包含了识别得的相对应该本能情绪信号的成分与该不同本能参考信号之间的不同识别区别；及

通过合成识别得的相对应该本能情绪代码与相对应已存储收集得的该同步视觉及听觉信息来形成认知模块；

其中，该内存储器的该不同区在逻辑上被分区，使得该不同区对应于该不同本能参考信号，该不同本能参考信号表示人类本能内存储器的不同定义域。

2.如权利要求1所述的以个人情绪为基础的认知助理系统，进一步包含输出器，该输出器经配置以根据该资料的该个人意义而输出结果，其中该输出器包含：

工作内存储器，以存储该结果；及

显示器，其经配置为通过至少一个显示屏及音频扬声器以视觉及听觉信息的形式，来输出存储于该工作内存储器的结果，

其中，由该输出器显示的该视觉及听觉信息是该用户观察到的具有相对应该本能情绪信号的该同步视觉及听觉信息，

其中，该资料的该个人意义是依据识别得的相对应该本能情绪信号的识别得的该本能情绪代码，

其中，该工作内存储器中的结果至少包含从长期内存储器区取回的相对应该认知模块，

其中，该人类本能内存储器的该不同定义域包含：生殖定义域、求生定义域及探索定义域，

其中，响应于针对新收集得的信息而识别该用户的另一个相对应本能情绪代码，该处理器进一步经配置为对应于所述另一个相对应本能情绪代码而取回于该长期内存储器区中的已存储认知模块，并将所述新收集得的信息存储在该工作内存储器中。

3.如权利要求1所述的以个人情绪为基础的认知助理系统，其中该经配置以实时收集该用户观察到的该同步视觉及听觉信息的该至少一个机构，包含至少一个相机和至少一个麦克风，

其中，该不同本能参考信号是探索本能参考信号，

其中，所形成的认知模块存储在该内存储器的感觉内存储器区中。

4.如权利要求2所述的以个人情绪为基础的认知助理系统，进一步包含输出机构，其经配置为通过扬声器和显示器输出工作视觉及听觉信息，

其中，该用户观察到的该同步视觉及听觉信息是该工作视觉及听觉信息，

其中，该经配置以实时收集该用户观察到的该同步视觉及听觉信息的该至少一个机构是该工作内存储器，其存储该输出机构上显示的该工作视觉及听觉信息。

5.如权利要求1所述的以个人情绪为基础的认知助理系统，其中：

该至少一个传感器包含多个传感器，其量测该用户的头部内的活动以输出多个脑波信号，

该处理器根据该不同本能参考信号而从该多个脑波信号中过滤、检测并识别本能情绪信息，形成复合本能情绪信息，及将所形成的复合本能情绪信息与该不同本能参考信号作比较，以控制该内存储器以根据该比较来存储该资料。

6.如权利要求3所述的以个人情绪为基础的认知助理系统，其中：

该至少一个传感器包含多个经配置以感测该用户的多情绪信号的传感器，

该处理器进一步经配置以处理该多情绪信号以形成情绪信息，并确定所形成的情绪信息是否高于临界值，表示用户正在关注收集得的视觉及听觉资料，及

响应于确定该情绪信息高于该临界值，在该内存储器中生成并存储该所形成的该认知模块，

其中，该认知模块存储在该内存储器的不同区中的该感觉内存储器区。

7.如权利要求6所述的以个人情绪为基础的认知助理系统，其进一步包含：

缓冲器，其经配置以存储该收集得的同步视觉及听觉信息一段时间，其对应于人脑发出本能情绪代码之前的一段时间。

8.如权利要求4所述的以个人情绪为基础的认知助理系统，其中该系统为由用户穿戴的头戴式耳机，当该用户观察到该同步视觉及听觉信息时提供认知感觉内存储器，及当该用户观察该输出机构的显示时为系统提供该本能情绪信号。

9.如权利要求4所述的以个人情绪为基础的认知助理系统，其中：

该处理器进一步经配置以确定收集得的该情绪状态是否高于另一个临界值，表示该用户对该输出机构上显示的该工作视觉及听觉信息是有信心或显见的，

响应于该处理器确定收集得的该情绪状态高于所述另一个临界值，形成该认知模块，其包括根据收集得的该情绪状态及相对应经显示的该工作视觉及听觉信息所形成的该本能情绪代码，并存储所形成的该认知模块在该内存储器的多个特别区中的该长期内存储器区。

10.如权利要求9所述的以个人情绪为基础的认知助理系统，其中：

该长期内存储器区包含多个子区，

该长期内存储器区的该多个子区包含情节子区、语义子区、思考子区及本能子区，

该处理器进一步经配置为根据该用户的收集得的该情绪状态来确定该多个子区的至少一个，以存储该所形成的认知模块。

11.如权利要求4所述的以个人情绪为基础的认知助理系统，其中该至少一个传感器包含多个传感器，该多个传感器被定置于该用户上的不同位置，且其中该多个传感器包含专用于检测该用户的生殖本能的第一传感器、专用于检测该用户的求生本能的第二传感器、及专用于检测该用户的探索本能的第三传感器。

12.如权利要求11所述的以个人情绪为基础的认知助理系统，其中该处理器经配置为将由该多个传感器收集得的多种不同类型的情绪分类成生殖本能、求生本能、及探索本能的至少一种，使得根据由该多个传感器的输出所形成的复合情绪来识别多个特别区中的区。

13.如权利要求12所述的以个人情绪为基础的认知助理系统，进一步包含显示器上的触摸屏及几何画板，该显示器经配置为手动输入进一步的细节、修改、文本、及草图中的至少一个，以直接移动、缩放、及编辑多个工作认知模块的视觉信息。

14.如权利要求13所述的以个人情绪为基础的认知助理系统，其中该显示器进一步经配置为以不同形式输出该多个工作认知模块的情绪信息成分，该形式包含下列中的至少一个：图形用户接口组件的声音、工具栏、位置、及色彩写码。

15.如权利要求14所述的以个人情绪为基础的认知助理系统，其中该内存储器进一步划分为该多个特别区，包含存储接口存储器的暂存内存储器、模仿人类大脑的思想的工作内存储器、存储未解决的问题的未完成工作内存储器、存储定义未来时间计划及执行的排程内存储器、及对应于人脑的长期记忆的该长期内存储器区。

16.如权利要求15所述的以个人情绪为基础的认知助理系统，其中该工作内存储器存储正在由该输出机构确认、修改、增添、组合、编辑、及显示处理中的信息，其中该暂存内存储器存储至少一个等待由该工作内存储器中处理的的输入信息中，当该工作内存储器正忙着有更高重要性的认知模块时，该未完成工作内存储器存储被中断的工作信息模块，及该排程内存储器存储具体实施特定排程注记的认知信息模块。

17.如权利要求16所述的以个人情绪为基础的认知助理系统，其中该长期内存储器区包含：

情节内存储器，其以时间编排顺序存储经确认的认知信息模块，

语义内存储器，其存储通过类别组织的该经确认的认知信息模块，其中该类别表示本能情绪写码系统的不同定义域，

思考内存储器，其以重要性顺序存储已完成的认知工作信息模块，及

个人本能参考内存储器，其存储不同本能参考信号。

18.如权利要求8所述的以个人情绪为基础的认知助理系统，其进一步包含：

显示器，其显示视觉及听觉资料，

其中该处理器进一步经配置以识别经显示的该视觉及听觉资料的个人意义，及响应于经识别的该个人意义，而自该内存储器取回相关的认知信息，

其中该显示器进一步经配置以进一步显示经取回的相关的该认知信息，及

其中该处理器进一步经配置以收集、确认、与处理经显示的输出该认知信息，及响应于该认知信息经确认，控制该内存储器以将结果存储于多个特别区中的一者。

19.一种提供以个人情绪为基础的认知辅助的方法，其包含：

通过至少一个机构，实时收集有关环境的资料，该资料包含用户观察到的同步视觉及听觉信息；

通过至少一个传感器，收集该用户对应收集得的同步视觉及听觉信息的情绪状态；

通过处理器，根据收集得的该情绪状态来识别该环境对该用户的个人意义；

根据识别的该个人意义而将带有有关该环境的资料的经识别的该个人意义存储于内存储器的不同区中，

其中，该处理器对该环境的该个人意义的识别包含：

根据存储于资料库中的该用户的收集得的该情绪状态及不同本能参考信号，从已存储收集得的该同步视觉及听觉信息中过滤、检测及识别该用户的本能情绪信号；

识别该环境的该个人意义，该个人意义是根据识别得的相对应该本能情绪信号的本能情绪代码，其中识别得的相对应该本能情绪代码包含了识别得的相对应该本能情绪信号的成分与该不同本能参考信号之间的不同识别区别；及

通过合成识别得的相对应该本能情绪代码与相对应已存储收集得的该同步视觉及听觉信息来形成认知模块；

其中，该内存储器的该不同区在逻辑上被分区，使得该不同区对应于该不同本能参考信号，该不同本能参考信号表示人类本能内存储器的不同定义域。

20.如权利要求19所述的方法，进一步包含在显示器上显示所形成的该认知模块及讯息，所形成的该认知模块及该讯息表示该用户对于收集得的该视觉及听觉资料的舒适度。

21.如权利要求19所述的方法，进一步包含：

在用作几何画板的显示器上输入细节、修改、文本、及草图中的至少一个，

在用作触摸屏的显示器上输入有关输入细节的移动命令、缩放命令、及编辑命令中的至少一个。

22.一种经配置以存储指令的非暂时性计算机可读取媒体，所述指令当由处理器执行时使得该处理器执行下列操作：

实时接收有关环境的资料，该资料包含用户观察到的同步视觉及听觉信息；

接收由至少一个传感器收集得的该用户的情绪状态，该情绪状态对应于收集得的同步视觉及听觉信息；

根据收集得的该情绪状态来识别该环境对该用户的个人意义；

根据识别得的该个人意义而将带有有关该环境的资料的经识别的该个人意义存储于内存储器的不同区中，

其中，该环境的该个人意义的识别包含：

根据存储于资料库中的该用户的收集得的该情绪状态及不同本能参考信号，从已存储收集得的该同步视觉及听觉信息中过滤、检测、及识别该用户的本能情绪信号；

识别该环境的该个人意义，该个人意义是根据识别得的相对应该本能情绪信号的本能情绪代码，其中识别得的相对应该本能情绪代码包含了识别得的相对应该本能情绪信号的成分与该不同本能参考信号之间的不同识别区别；及

通过合成识别得的相对应该本能情绪代码与相对应已存储收集得的该同步视觉及听觉信息来形成认知信息模块；

其中，该内存储器的该不同区在逻辑上被分区，使得该不同区对应于该不同本能参考信号，该不同本能参考信号表示人类本能内存储器的不同定义域。

Images