CN104914752A - 将用户输入准确地变换为具体系统功能的装置和方法 - Google Patents
将用户输入准确地变换为具体系统功能的装置和方法 Download PDFInfo
- Publication number
- CN104914752A CN104914752A CN201510120750.7A CN201510120750A CN104914752A CN 104914752 A CN104914752 A CN 104914752A CN 201510120750 A CN201510120750 A CN 201510120750A CN 104914752 A CN104914752 A CN 104914752A
- Authority
- CN
- China
- Prior art keywords
- user
- data
- subjective
- processor
- instruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 57
- 238000004891 communication Methods 0.000 claims abstract description 78
- 230000008569 process Effects 0.000 claims description 46
- 239000002243 precursor Substances 0.000 claims description 42
- 230000001105 regulatory effect Effects 0.000 claims description 30
- 230000006870 function Effects 0.000 description 44
- 238000004458 analytical method Methods 0.000 description 40
- 239000003550 marker Substances 0.000 description 32
- 238000005516 engineering process Methods 0.000 description 29
- 230000009471 action Effects 0.000 description 28
- 230000004044 response Effects 0.000 description 14
- 230000008859 change Effects 0.000 description 12
- 230000000875 corresponding effect Effects 0.000 description 10
- 230000035945 sensitivity Effects 0.000 description 10
- 230000003993 interaction Effects 0.000 description 9
- 238000006243 chemical reaction Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 238000013507 mapping Methods 0.000 description 7
- 238000013461 design Methods 0.000 description 6
- 239000000725 suspension Substances 0.000 description 6
- 230000008901 benefit Effects 0.000 description 5
- 238000011221 initial treatment Methods 0.000 description 5
- 238000010801 machine learning Methods 0.000 description 5
- 238000013473 artificial intelligence Methods 0.000 description 4
- 239000010977 jade Substances 0.000 description 4
- 238000010295 mobile communication Methods 0.000 description 4
- 238000010438 heat treatment Methods 0.000 description 3
- 230000006872 improvement Effects 0.000 description 3
- 230000036651 mood Effects 0.000 description 3
- 238000003825 pressing Methods 0.000 description 3
- 210000004243 sweat Anatomy 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 238000009423 ventilation Methods 0.000 description 3
- 208000019901 Anxiety disease Diseases 0.000 description 2
- 241001672694 Citrus reticulata Species 0.000 description 2
- 238000004378 air conditioning Methods 0.000 description 2
- 230000036506 anxiety Effects 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 230000001276 controlling effect Effects 0.000 description 2
- 238000001816 cooling Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000009795 derivation Methods 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 238000005562 fading Methods 0.000 description 2
- 210000001061 forehead Anatomy 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000004904 shortening Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000011282 treatment Methods 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 206010016275 Fear Diseases 0.000 description 1
- 244000287680 Garcinia dulcis Species 0.000 description 1
- CBENFWSGALASAD-UHFFFAOYSA-N Ozone Chemical compound [O-][O+]=O CBENFWSGALASAD-UHFFFAOYSA-N 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013506 data mapping Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 201000006549 dyspepsia Diseases 0.000 description 1
- 230000002996 emotional effect Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000033001 locomotion Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 239000007858 starting material Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
- G05B19/042—Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B13/00—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion
- G05B13/02—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric
- G05B13/0265—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric the criterion being a learning criterion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Artificial Intelligence (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Medical Informatics (AREA)
- Health & Medical Sciences (AREA)
- Evolutionary Computation (AREA)
- Automation & Control Theory (AREA)
- Multimedia (AREA)
- Social Psychology (AREA)
- Human Computer Interaction (AREA)
- Psychiatry (AREA)
- General Health & Medical Sciences (AREA)
- Data Mining & Analysis (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及将用户输入准确地变换为具体系统功能的装置和方法。所述装置用于基于用户通信输入来调节可控系统,诸如非详尽或随意的输入。该装置包括处理器和计算机可读存储介质,所述计算机可读存储介质包括当由处理器执行时使处理器执行以下操作的指令:该操作用于对应于用户输入确定客观系统命令,用于调节可控系统。
Description
技术领域
本发明总体上涉及解释各种类型的用户通信的装置,并且更具体而言涉及将用户通信(即使非详尽或随意的)变换为系统(诸如汽车系统)的功能的适当变化。
背景技术
常规的车辆系统设计有相对的路线设定控制。加热、通风和空调(HVAC)系统是一种示例。常规的HVAC控制面板可以允许车辆操作者控制风扇从而以四种设定之一操作-例如关、低、中、高。这些系统的固定的一成不变的属性具有许多缺点。
常规的控制系统(诸如汽车或其它车辆控制系统)没有配置为允许用户自然地控制它们。用户不能以与他们和人互动的方式相似的任何方式与系统互动。暂住客人例如更可能询问主人是否似乎有一点点热,而不是要求他们将温度下降6.5度,更不用说请求详细动作,诸如将湿度设定降低5个百分点,或将风扇速度设定增大20%。响应于用户提供大范围的输入中的任何输入(包括非详细或随意的输入),常规的控制系统并不实施系统操作的期望的或以其他方式适当的改变。
常规的控制系统的另一个缺点在于用户往往不知道调节系统以达到期望结果的最佳方式。在前面的示例中,例如暂住客人可能知道温度应该降低,但不知道降低多少,或者另一行动方针,诸如涉及湿度和风扇速度的改变实际上在这种情况下会更有效。
常规系统的又一个缺点在于系统的固定设计并不一定匹配用户的思维或互动方式。类似地,用户将可能不知道每个可调子系统及其设定。这可以通过参考车辆悬架系统的背景以示例的方式进行说明。车辆操作者(例如驾驶员)可能感觉他或她的车辆似乎在转弯操纵时倾斜地太厉害。但是,该操作员不可能知道应该如何调节车辆的可调悬架以改进转弯感觉。
常规系统的缺点例如会导致主题车辆、程序、设备、处所的效率低下或无效利用和有时用户的受挫感。
发明内容
本发明涉及一种用于确定对应于各种用户输入(包括非详尽或随意的输入)中的任何输入的系统命令的装置。作为示例输入,响应于用户感觉环境太热,或将手擦过他们的额头、擦去汗水或象征这样做,用户可以发出“啊”。
该装置包括处理器和计算机可读存储介质,所述计算机可读存储介质包括当由所述处理器执行时使所述处理器执行操作的指令,用于确定由诸如车辆系统等系统实施的系统命令。
在一个实施例中,所述指令包括多个模块,包括解释模块、分析模块、目标识别器模块和转换模块。
在一个实施例中,多个模块还包括执行模块。
在一个实施例中,计算机可读存储介质包括在执行操作时由指令使用的多个数据库。
在一个实施例中,数据库包括用户模型数据库、语义数据库和可用系统状态数据库中的一个或多个。
在一个实施例中,所述指令包括代码,当执行所述代码时,使得所述处理器执行学习功能。
在一个实施例中,所述指令包括代码,当执行所述代码时,使得所述处理器基于过去的装置操作和当前情况向用户诸如车辆的驾驶员建议适当的动作。
在一个实施例中,所述指令包括代码,当执行所述代码时,使得所述处理器基于过去的装置操作和当前情况而自动地采取行动。
在一个实施例中,所述指令包括代码,当执行所述代码时,使得所述处理器基于过去的装置操作和当前情况,提供用于由用户接收的通信,告知将自动地采取行动。
在一个实施例中,所述指令包括代码,当执行所述代码时,使得所述处理器基于过去的装置操作和当前情况,提供用于由用户接收的通信,告知将自动地采取行动,提供告知在另外没有来自用户的命令的情况下将自动地采取行动的通信。
在一个实施例中,(a)解释模块当由处理器执行时,使得所述处理器过滤和/或调节用户输入,以产生最初处理的输出,(b)分析模块当由处理器执行时,使得所述处理器将初始处理的输出变换为表示明显的用户期望、需求或偏好的前体,(c)目标识别器模块当由处理器执行时,使得所述处理器基于所述前体生成主观系统输出或命令,指示基于明显的用户期望、需求或偏好应该如何明显地调节系统,以及(d)转换模块当由处理器执行时,使得所述处理器基于主观系统输出而生成客观系统命令。
在一个实施例中,(i)解释模块当由所述处理器执行时,使得所述处理器过滤和/或调节用户输入,以产生最初处理的输出,(ii)分析模块当由处理器执行时,使得所述处理器将初始处理的输出变换为表示明显的用户期望、需求或偏好的前体,(iii)目标-识别器模块当由处理器执行时,使得所述处理器基于所述前体而生成主观系统输出或命令,指示基于明显的用户期望、需求或偏好应该如何明显地调节系统,(iv)转换模块当由处理器执行时,使得所述处理器基于主观系统输出而生成客观系统命令,以及(v)执行模块当由处理器执行时,使得处理器执行客观系统命令,用于根据所确定的前体和对应于用户输入的主观系统输出来调节相关系统。
在另一方面中,本技术涉及一种包括指令的计算机可读存储介质,当由处理器执行所述指令时,所述指令使得所述处理器执行操作,包括:接收用户输入,诸如非详尽或随意的输入-例如,响应于用户感觉汽车内部太热,而发出“啊”,或将他们的手擦过额头以擦去汗水或象征擦去汗水。该操作还包括基于输入确定用于由系统实施的对应于用户输入的系统命令。
在该第二方面的实施例中,所述指令包括多个模块,所述多个模块包括解释模块、分析模块、目标识别器模块和转换模块。
在一个实施例中,多个模块还包括执行模块。
在一个实施例中,计算机可读存储介质包括在执行操作时由指令使用的多个数据库。
在一个实施例中,数据库包括用户模型数据库、语义数据库和可用系统状态数据库中的一个或多个。
在一个实施例中,所述指令包括代码,当执行所述代码时,所述代码使得所述处理器执行学习功能。
在一个实施例中,所述指令包括代码,当执行所述代码时,使得所述处理器基于过去的操作和当前情况向用户建议动作。
在一个实施例中,所述指令包括代码,当执行所述代码时,使得所述处理器基于过去的操作和当前情况而自动地采取行动。
在一个实施例中,所述指令包括代码,当执行所述代码时,使得所述处理器基于过去的操作和当前情况,提供用于由用户接收的通信,告知将自动地采取行动。
在一个实施例中,所述指令包括代码,当执行所述代码时,使得所述处理器基于过去的操作和当前情况,提供用于由用户(车辆用户)接收的通信,告知将自动地采取行动,提供告知在另外没有来自用户的命令的情况下将自动地采取行动的通信。
在一个实施例中,(A)解释模块当由处理器执行时,使得所述处理器过滤和/或调节用户输入,以产生最初处理的输出,(B)分析模块当由处理器执行时,使得所述处理器将初始处理的输出变换为表示明显的用户期望、需求或偏好的前体,(C)目标识别器模块当由处理器执行时,使得所述处理器基于所述前体生成主观系统输出或命令,指示基于明显的用户期望、需求或偏好应该如何明显地调节系统,以及(D)转换模块当由处理器执行时,使得所述处理器基于主观系统输出而生成客观系统命令。
在一个实施例中,(I)解释模块当由所述处理器执行时,使得所述处理器过滤和/或调节用户输入,以产生最初处理的输出,(II)分析模块当由处理器执行时,使得所述处理器将初始处理的输出变换为表示明显的用户期望、需求或偏好的前体,(III)目标-识别器模块当由处理器执行时,使得所述处理器基于所述前体而生成主观系统输出或命令,指示基于明显的用户期望、需求或偏好应该如何明显地调节系统,(IV)转换模块当由处理器执行时,使得所述处理器基于主观系统输出而生成客观系统命令,以及(V)执行模块当由处理器执行时,使得处理器执行客观系统命令,用于根据所确定的前体和对应于用户输入的主观系统输出来调节系统(例如车辆系统)。
在各个方面中,本技术包括具有以上描述的任何功能并由任何装置、系统、部件或设备执行的处理和方法。
1.一种装置,包括:
处理器;和
包括指令的计算机可读存储介质,当由所述处理器执行所述指令时,使得所述处理器执行以下操作:包括:
接收用户通信数据;
解释所述用户通信数据,从而得到识别由所述用户通信数据指示的用户需求的解释输出;
基于所述解释输出生成主观系统输出,该主观系统输出指示调节可控系统以实现所识别的需求的方式;和
基于所述主观系统输出生成客观系统命令,用于调节所述可控系统的功能以满足所识别的需求。
2.如方案1所述的装置,其中所述客观系统命令包括计算机可执行代码。
3.如方案1所述的装置,其中所述操作还包括处理所述解释输出以得到前体数据,其中,基于所述解释输出生成主观系统输出的操作包括基于所述前体数据生成所述主观系统输出。
4.如方案3所述的装置,其中处理所述解释输出以得到前体数据的操作是基于所述解释输出和从用户模型数据库接收的用户简介数据的。
5.如方案3所述的装置,其中处理所述解释输出以得到前体数据的操作是基于所述解释输出和从语义词典数据库接收的语义数据的。
6.如方案1所述的装置,其中所述操作还包括执行所述客观系统命令来调节所述可控系统,以满足所识别的用户需求。
7.如方案1所述的装置,其中所述用户通信数据表示感测到的用户通信,包括用户手势。
8.如方案7所述的装置,其中,所述用户通信数据从检测所述手势的摄像头或基于光的传感器接收。
9.如方案1所述的装置,其中,所述用户通信数据表示包括随意发声的感测到的用户通信。
10.如方案1所述的装置,其中,解释所述用户通信数据、生成所述主观系统输出和生成所述客观系统命令的操作中的至少一个包括处理背景数据。
11.如方案10所述的装置,其中,所述背景数据包括指示在所述可控系统处或所述可控系统附近的环境的特性的环境数据。
12.如方案10所述的装置,其中,所述背景数据指示用户特定特性。
13.如方案1所述的装置,其中,生成所述主观系统输出的操作是基于所述解释输出和当前系统状态数据的,所述当前系统状态数据指示所述可控系统的当前系统状态。
14.如方案1所述的装置,其中,生成所述主观系统输出的操作是基于所述解释输出和可用系统状态数据的,所述可用系统状态数据指示用于所述可控系统的可用系统状态。
15.如方案1所述的装置,其中,生成所述客观系统命令的操作是基于所述主观系统输出和当前系统状态数据的,所述当前系统状态数据指示所述可控系统的当前系统状态。
16.如方案1所述的装置,其中,生成所述客观系统命令的操作是基于所述主观系统输出和可用系统状态数据的,所述可用系统状态数据指示用于所述可控系统的可用系统状态。
17.如方案1所述的装置,其中,所述指令包括代码,当执行所述代码时,所述代码使得所述处理器执行基于反馈的学习功能,用于改进后续的装置操作。
18.如方案1所述的装置,其中,所述用户通信数据是第一用户通信数据,并且所述学习功能包括分析在由所述系统执行所述客观系统命令之后生成并接收的第二用户通信数据。
19.一种计算机可读存储介质,包括指令,当由处理器执行所述指令时,使所述处理器执行以下操作,包括:
接收用户通信数据;
解释所述用户通信数据,从而得到识别由所述用户通信数据指示的用户需求的解释输出;
基于所述解释输出生成主观系统输出,该主观系统输出指示调节可控系统以实现所识别的需求的方式;和
基于所述主观系统输出生成客观系统命令,用于调节所述可控系统的功能以满足所识别的需求。
20.一种方法,包括:
由包括处理器的装置接收用户通信数据;
由所述装置解释所述用户通信数据,从而得到识别由所述用户通信数据指示的用户需求的解释输出;
由所述装置基于所述解释输出生成主观系统输出,该主观系统输出指示调节可控系统以实现所识别的需求的方式;和
由所述装置基于所述主观系统输出生成客观系统命令,用于调节所述可控系统的功能,以满足所识别的需求。
本技术的其他方面将是部分显而易见的,并且部分在下文中指出。
附图说明
图1示意性地示出了表示根据本技术的用于至少部分基于用户通信来控制系统的示例装置的部件的框图。
图2示意性地示出了表示图1的装置的部件及其功能的框图。
图3示出了可控系统的示例可用和潜在状态之间的互动。
具体实施方式
根据需要,本文公开本发明的详细实施例。所公开的实施例仅仅是可以以各种和替代形式及其组合实施的示例。当在本文中使用时,例如示例性和类似术语广泛地指用作例示、标本、模型或模式的实施例。
附图不一定是按比例的,一些特征可能被放大或最小化,诸如为了显示具体部件的细节。在一些实例中,为了避免使本发明难以理解,而没有详细地描述公知的部件、系统、材料或方法。因此,本文公开的特定结构和功能细节不被解释为限制性的,而仅仅作为权利要求的基础和作为用于教导本领域技术人员利用本发明的代表性基础。
尽管本技术在本文中主要结合汽车进行描述,但是该技术不限于汽车。该构思可以用于各种各样的应用,诸如结合飞机、轮船、住宅用途、商业用途,诸如在酒店房间中等。
I.技术的概述
本技术配置为解释用户通信,以识别潜在的用户意图、期望、目标、需求等。系统进一步识别并执行匹配所识别目标的一个或多个适当的命令。用户通信可以包括非详细的非描述性的或者随意的通信,诸如发声和/或手势。
在各个实施方式中,本发明描述用于解释通过多个输入模式中的一个或更多个接收到的用户输入的装置、系统、计算机可读介质以及处理。该输入例如可以由一个或多个用户或人机界面(UMI,HMI)接收。多于一种模式的输入可以称为多模式输入。示例输入模式包括口头(例如语音)、其他声音模式、手势和触摸(诸如通过触摸屏或其它触控装置)。
该装置将所解释的基础用户输入变换为对应于输入的至少一个具体输出功能。
在一些实施例中,解释和变换也基于一个或多个辅助输入执行。辅助输入可以包括例如天气、环境或其他背景数据以及预先设定或预先存储的用户偏好。
该技术能够用于改善车辆(诸如汽车)的用户的操作或舒适性。更具体而言,该技术能够用于准确且高效地调节HVAC系统。结果包括更高效的车辆使用以及所有乘客的改进舒适性、和因此改进的用户体验以及对车辆的良好的用户满意度。
除了HVAC应用,本技术的其它示例用途包括导航系统、自主或半自主驾驶系统(例如自动巡航控制)、电子可控的车辆悬架系统、音频系统(例如收音机、扬声器电话)。虽然一些系统被链接到处所(例如家庭HVAC)或对象(例如车辆HVAC),但是一些实施方式支持其他系统的控制,诸如个人系统,例如像作为可控系统的移动通信设备的导航系统。
II.装置部件-图1
现在转向附图,并且更具体地转向第一张图,图1示意性地示出了表示根据本技术的装置或系统的部件和功能的框图。
该装置在图1中总体上由附图标记100指示。装置部件在下文首先总体描述,随后是结构和组成功能的更详细描述。
在一个实施例中,装置100以其整体是车辆(诸如汽车)的一部分。在一个实施例中,一些或所有的装置是车辆处理单元的一部分,诸如车辆的车载计算机(OBC)。
装置100包括和/或与一个或多个传感器102通信,传感器102例如也可以被称为用户或人机界面(UMI、HMI)。在各个实施方式中,传感器102可以包括各种感测或输入设备中的一种或多种,诸如麦克风、摄像头、基于光的传感器(例如使用激光的传感器)、按钮、旋钮、触控显示器和/或其它触控设备。
装置100还包括存储器或计算机可读介质104,诸如易失性介质、非易失性介质、可移动介质和不可移动介质。当在说明书和权利要求书中使用时,术语计算机可读介质及其变形是指有形或非瞬时性的计算机可读存储设备。
本文中所描述的任何计算部件(包括存储器)可位于车辆的外部,其中定位有一个或多个受控系统(例如车辆HVAC)。存储器104例如可以位于与车载装置进行通信的远程设备,诸如服务器(基于服务器的存储器),用于根据本文的教导调节车辆系统(例如HVAC)。远程设备可以是远程客户服务中心的一部分,诸如客户服务中心。
在一些实施例中,存储介质包括易失性和/或非易失性、可移动和/或不可移动介质,诸如例如随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、固态存储器或其他存储器技术、CD-ROM、DVD、蓝光或其他光盘存储装置、磁带、磁盘存储或其它磁存储设备。
计算机可读介质104是还包括处理器105的计算或处理设备、装置或系统的一部分,所述处理器105通过通信链路107与计算机可读介质104连接或能够连接,诸如无线连接(由所需的硬件-例如收发器))或有线连接(例如计算机总线)。
处理器105可以是多个处理器,其可以包括在一台机器或多台机器中的分布式处理器或并行处理器。处理器105可用于支持虚拟处理环境。处理器105可以包括状态机、专用集成电路(ASIC)、包括现场PGA在内的可编程门阵列(PGA)或状态机。本文提及执行代码或指令以执行操作、动作、任务、功能、步骤等的处理器可以包括直接执行操作和/或促进、引导或与其他设备或部件配合来执行操作的处理器105。
计算机可读介质104包括计算机可执行指令或代码106。计算机可执行指令106可由所述处理器105执行,以使处理器并且因此使计算设备执行在本发明中描述的功能的任何组合。
计算机可执行指令106包括限定一套互动特征的代码。指令106可以是或形成被称为用户或人机界面(UMI、HMI)代理(UMIA、HMIA)的一部分。当在本文中描述时,代理在用户和至少一个可控车辆系统(诸如HVAC系统)之间作用。
计算设备还包括输入/输出(I/O)设备(未详细示出),诸如无线收发器和/或有线通信端口。执行指令106的处理器105在与其它装置部件、车辆部件、以及在一些实施方式中的一个或多个额外的车辆通信网络(未详细示出),诸如专用短距离通信(DSRC)、Wi-Fi、蜂窝或卫星网络(用于与远程系统(例如,远程客户服务中心,诸如客户服务中心)通信)之间发送和接收诸如消息、信号或分组数据的形式的信息。
存储器104还包括数据库或数据存储区,容纳在执行装置100的功能时使用的数据。数据库由执行计算机指令106的处理器105访问。数据库或存储区包括存储区108,存储区108包括代表可用系统状态的数据。存储器104还包括语义词典或语义数据库110。词典或数据库也可以被描述为语义词典数据库、词典数据库、词典存储区、语义存储区等。并且存储器104包括用户模型数据库112,其可以由诸如用户模型等其他术语指代。
可用系统状态数据库108包括系统状态。系统状态是指装置100诸如由系统或系统部件设计师(例如工程师)进行设计的(多种)方式。
在一个实施方式中,状态是指有关可控或可调系统或子系统的所有潜在或可能的配置。示例系统或子系统包括HVAC系统、音频系统、导航系统或部件、和自主或半自主驾驶系统。
虽然一些系统被链接到处所(例如家庭HVAC)或对象(例如车辆HVAC),但一些实施方式支持作为可控系统的其他系统的控制,诸如个人系统,例如像移动通信设备的导航系统。
在一些实施例中,关于所确定的用户需求,可以同时控制或结合共同的事件控制多于一个的系统,诸如为了满足所确定的用户需求。例如,如果装置确定HVAC太大声而不能听到收音机,那么可以相应地调节HVAC和收音机系统(例如,降低风扇转速、增大收音机音量),以满足所识别的用户需求。
关于HVAC系统,例如系统状态包括每种可能的HVAC设定,诸如可选择的每个风扇速度、每个温度设定、每个湿度百分比设定,如果适用的话,压缩机是开启还是关闭,空气输送路线(例如面板、路程)等。
可用系统状态数据库108是存储器104的数据库,其中系统状态以一定方式布置。在一个实施例中,数据库108包括由操作员应用例如聚集在系统状态上而安排的系统状态。
结果是作为输出可用的系统状态覆盖在执行装置功能时可以识别的整个范围的客观潜在系统输出,而不仅仅覆盖由系统状态确定的输出。
换言之,每个物理系统具有能够执行的一系列输出。一些用户接口通过显示那些系统的用户离散值来简化他们的操作。例如,鼓风机可能从用户要求低、中或高的输入等级,而实际鼓风机能够以从0%至100%的范围内的功率等级产生风扇输出-即,本示例中的可用系统状态代表连续范围的设定或可用值,而不只是在通常过程中用于这样的系统的呈现给用户的三个离散值。
例如,虽然鼓风机速度设定为15%或22%的可用状态可能是物理上可以由鼓风机使用的,但可能不可以由例如仅允许风扇速度设定1至6的六(6)个值的现有状态使用。
语义数据库110在一个实施例中是一般静态数据库。在一个实施例中,虽然语义数据库110是可编程的,但它在正常操作期间不由装置100实时地调节。
在一个实施例中,语义数据库110被创建和/或修改(例如通过软件更新),以反映对应于与至少一个用户的互动的语义定义或规则。在大多数实施方式中,语义数据库110被创建和/或修改,以反映基于与许多用户的互动所产生的语义定义或规则。
语义数据库110包括涉及用户已经或可能进行的通信的数据。语义数据库中的数据110可以基于过去与用户的互动来建立。语义数据库110中的数据也可以由程序员(例如装置设计师)设定。数据库110可包括在用户购买车辆之前被预先存储在车辆控制系统中的预先设定数据、或通过更新向装置提供的数据。
语义数据库110还包括映射在数据中的一个或多个解释,用于潜在的未来通信,其例如可以从在装置处接收或以其它方式编程到装置中的过去用户通信取得。通信类型不受限制,并且可以包括例如口头或语言发声、手势、注视、语调和手动输入,诸如按压按钮或按压屏幕、滑动等。
在创建语义数据库110时使用的通信可以以多种形式中的任何一种或多种被接收和识别。示例形式包括预先制造的测试和/或通过使用当前车辆和/或一个或多个其他车辆上的装置。
语义数据库110用于将所识别的各种通信映射到一个或多个基础的匹配前体。该关系可以被称为语义。术语“前体”是指如至少部分地由他们的通信(例如发声或手势)表示的用户真正想要或喜欢的动作,即使他们不知道他们喜欢什么,即使如果他们的确知道但他们不知道如何表达,以及即使他们不知道他们正在表达。
如背景技术部分所提到的那样,在用户不知道他们想要如何调节可控系统(例如HVAC系统)的情况下,常规系统不允许用户调节所述系统。用户可能不知道其中的差别,有时使用HVAC系统的“经济模式”相对于在其他时间使用HVAC系统的“舒适模式”的优缺点,或者甚至不知道这样的模式存在。本技术基于用户输入以及在各个实施例中的辅助输入(例如,背景数据114、语义数据库110、用户模型数据112),确定在这种情况下将是最佳的或至少确定最佳或最适当的调节。
语义数据库110可以包括指代、链接到或配置为接收背景数据或使用背景数据处理的数据或代码。该背景(也可以被称为辅助数据)可以从例如附图中的示意框114接收。用户输入的具体解释或映射(诸如,用户说“热”)可以取决于背景,诸如车辆的内部温度和/或外部温度。
作为另一个示例,映射可以取决于用户已经在车辆中呆了多久。如果用户刚刚进入汽车,内部温度超过100华氏度并且用户说“热”,则语义词典数据可以结合背景数据(例如车内时间、用户日程、用户生物统计数据(感应的或存储的)、外部温度)得出确定例如需要利用以高速率推到面板通风口的冷空气进行快速冷却。
如果另一方面,用户刚进入车内,内部温度约为80华氏度并且用户说“热”,则语义数据可以例如结合背景数据(例如车内时间、用户日程、用户生物统计数据(感测的或存储的)、内部温度、外部温度)得出确定虽然需要冷却,但与以高速率推到面板通风口的非常冷的空气相比,不那么强烈的冷却将是适当的,诸如以中等速率推到多个通风孔的只是相对较冷的空气。
该装置还可以包括这些数据的版本,如同任何语义数据库数据,每个例如对于具体的车辆用户都是特定的,并因此编程到接下来描述的用户模型数据库112中。
在一些实施例中,语义数据库110包括涉及用户的个人状态的语义数据,诸如性格、情绪、个性、态度等。语义数据库110可以包括关于用户当前兴奋、紧张、苛求等的数据。根据这些个人状态因素,数据库110可以以不同的方式映射通信-例如讲话发声。再次,该装置也可以包括这些因素的版本,如同任何语义数据库数据,每个对于具体的车辆用户都是特定的,并因此编程到接下来描述的用户模型数据库112中。
在一个实施例中,用户模型数据库112根据动态模型来实施。在本实施例中,数据库112可以在执行本技术的处理、执行指令106时改变,如图1和图2中的返回箭头(指向模块106)所示以及如下面进一步描述的那样。
在各个实施例中,用户模型数据库112包括个性化词典。个性化词典在方式上可以像语义数据库110,并且数据库110、112可以一起工作。用户模型112例如包括涉及汽车的实际操作者的用户特定数据。该数据可以包括有关特定用户如何通信的信息,诸如用户如何使用语音发声。
用户模型数据库112包括用于车辆的至少一个用户的用户简介和/或用户偏好。对应于具体用户的数据可以以各种方式中的任何方式配置,包括例如基于过去的行为、用户设定的偏好或喜好、或默认设定直到改变。为简单起见,这些数据可以被统称为用户简介,而与数据在数据库112中存储的结构无关。
该装置100可以确定以下内容或者可以使用代表以下内容的数据编程:例如当第一车辆用户(例如琳达)在车中说“显得热”时,她的意思是在车中“似乎非常热”。同一个数据库也可以包括关于其他用户(例如约翰)的用户简介/偏好。用户模型数据库112中的用于他的用户数据可以指示,当他在车中说“显得热”时,他一般是指在车中“似乎有点暖和”,而当在车中非常热时,那么他更可能说“非常热”。
用户模型112的用户特定数据可以通过用户输入、设定用户偏好或喜好进行修改。该数据也可以通过使用该装置来确定。该装置例如可以确定:在车中说了“热”之后,只有当温度下降10度以上后琳达才表示满意,从而得出这样的结论:说“热”时,她的意思是当时她“非常热”。她还可以设定用户模型数据库112的偏好,使得说“热”使得装置100例如降低温度10度。
作为另一示例用户偏好,可由该装置或用户输入设定,模型112的数据可以指示:用户对噪音敏感,诸如HVAC风扇噪音。这可能由于听觉灵敏性或者用户经常或在一定时间使用免提电话。当设定有效或适用时,该装置将确保:将进行HVAC调节,以确保风扇没有提高到过大等级-例如不到或超出10级中的4级。当涉及大量人时,这种偏好或灵敏性也可以或替代地表示在语义数据库110的数据中。
再次,在用户特定的同时,这些偏好或灵敏性还可以针对每辆车的多于一个的用户建立和维持。用户数据可以以各种方式中的任何方式建立,包括通过装置设计者或更新装置的其他人进行设定,正在运转的装置(例如,处理用户输入的装置或装置学习中),或以其他方式接收用户偏好的装置。
作为各种偏好或灵敏性的示例执行,假设考虑第一用户琳达和第二用户约翰。基于用户的各自的用户数据,该装置可以要求,当琳达说“提高风扇速度”、“加大风扇”、“扇大”、“更大风”等时,她期望、喜欢、希望或需要增加两个等级或单位,而来自约翰的相同发声意味着他希望风扇只加大一个等级或单位。
在这种情况下,虽然确定系统调节(例如,提高空调系统的湿度5%)显然适当的装置100的基础/根基可以包括由用户通信直接或间接指示的大量相关因素中的任意因素,诸如用户需求、用户期望、用户偏好、用户会欣赏或享受什么等,但是该基础或根基可以统称为用户需求。因此,在本文中以及然后包括在所附权利要求中短语“用户需求”不是以限制性意义使用的-诸如指待满足的必要或要求的条件,或者诸如排除简单的期望或建议的系统改变用于舒适性-而是广泛地包含由用户通信直接或间接地指示的许多基础中的任何基础,可用于根据本技术的各个实施例考虑的装置。
如所提供的那样,以上结合语义数据库110描述的数据在用户模型112中可以由用户特定版本表示。用户模型数据库112可以包括具体用户可能提供的数据映射输入,并且可以提供一定条件(例如,用户刚进入车内、内部温度为大约80华氏度、用户说“热”)以得到一定结果,而在相同条件下基于编程到用户模型112中的用户特定数据,将由另一个用户提供的这样的输入映射到不同的结果。
用户模型112的个人数据可以包括对于具体的用户个人状态特定的数据-例如性格、情绪、个性、态度等。用户模型数据库112可以包括关于用户当前正兴奋、紧张、苛求等的数据、以及根据这些个人状态因素以不同的方式映射来自具体用户的通信。
正如以上所提到的那样,装置100可以包括和/或与一种或多种其它背景部件通信,背景部件总体上在图1中由附图标记114表示。虽然背景部件114被单独示出,但是本文结合部件114描述的一些或全部特性可以存在于其它装置部件内或者替代地由其它装置部件执行,诸如语义数据库110。
在一些实施例中,背景信息包括从一个或多个内部或外部车辆传感器中的任意一个对处理器105的输入。
该背景信息可以包括例如指示世界或环境状态的数据,诸如在、接近、邻近或者邻接待调节的(多个)系统,诸如周围的车外温度。背景数据还可以包括影响待控制的系统和/或用户的其他因素,诸如用户处于正调节HVAC的车辆中的时间量。其他示例背景数据包括用户日程(这可以例如从车辆或用户移动设备中的日历程序获得)以及由车辆传感器感测的或存储的用户生物统计数据、或其他用户特定特性。此外,观察图1,传感器102可以配置并布置为提供关于周围环境的信息。
背景部件114可以实时地提供背景信息,用于由处理器105在诸如通过正常馈送(推进功能)执行指令106时使用,或者部件114可以存储这样的信息:用于选择性地提供给处理器105或由处理器105访问(拉动功能)。
图1还通过附图标记116示意性地示出了车辆输出系统、设备或部件。在不脱离本技术的范围的情况下,输出系统116可以包括各种可控车辆系统中的任意一种。示例输出系统116包括HVAC系统、导航系统或部件、可控车辆悬架系统、音频系统(例如收音机、扬声器电话)、自主或半自主驾驶(例如自动巡航控制)系统。
在一些实施例中,如所提到的那样,关于所确定的用户需求,可以同时控制或结合共同的事件(episode)控制多于一个的系统,诸如满足所确定的用户需求。例如,如果该装置确定HVAC太大声而不能听到收音机,那么可以相应地调节HVAC和收音机系统(例如降低风扇速度、增大收音机音量),以满足所识别的用户需求。
111装置功能-图2
III.A.功能介绍
计算机可执行指令106包括用于执行所提及的本技术的功能的计算机代码。这些指令106包括定义一套正在互动或者互动特征的代码。更具体而言,这些指令包括定义或作为用户或人机界面(UMI、HMI)代理(UMIA、HMIA)的一部分的代码。HMI代理功能包括处理从传感器102(包括用户输入)接收的输入和任何单独或附加的背景114、其他代码(例如108、110、112)和来自其他车辆部件116的车辆。
图2示出了图1的装置100,其中计算机可读指令106以表示由处理器105执行的功能的方式扩展,所述处理器105执行指令106的各个模块202、204、206、208、210。尽管功能由处理器105执行,但为了简单起见,功能示意性地示出为在指令的模块202、204、206、208、210处执行。为了方便读者,在下文有时重复该关系-即,尽管功能表示为或有时描述为在模块处或由模块执行,但处理器105执行功能,所述功能执行所述模块的代码。
在本技术的范围内,任何一个或多个功能或者其操作可以构成独特的方法或处理。示出的流程可以代表一个或多个算法,由代码106定义。应当理解,该方法的步骤不一定以任何特定的顺序呈现,而是以替代顺序执行一些或所有步骤是可能的并且是可预期的。
为了便于描述和图示,已经以展示的顺序给出了步骤。在不脱离所附权利要求的范围的情况下,可以添加、省略和/或同时执行步骤。还应该理解,示出的方法可以在任何时候结束。在某些实施例中,该处理的一些或所有步骤和/或基本等同的步骤通过执行计算机可读指令来执行,所述计算机可读指令存储或包括在计算机可读介质中,诸如所描述的计算设备的存储器104。
功能模块包括解释模块202、分析模块204、目标识别器模块206或简称为目标识别器、转换模块208和执行模块210。
虽然这些被单独示出并且在下文依次描述每个的功能,但是应当理解,任何两个或更多个模块可以组合,并且任何一个可以分割。这样,描述为由单个模块执行的功能或操作可以替代地由多于一个的模块执行,并且描述为由两个或更多个模块执行的功能在其它实施方式中可以由较少的模块(例如一个模块)来执行。
模块202、204、206、208、210中的任何一个或者多个可以配置为包括人工智能-例如机器学习。分析模块204可以例如通过其操作学习,并从而改进本身,用于在将来的操作中实现更好的性能。学习可以包括反馈数据给用户模型数据库112,诸如关于输入部件230和确定输出238之间的关系的数据。学习过程也可以被称作基于反馈的学习过程,包括基于反馈的学习功能。
III.B.解释模块
解释模块202包括用于执行各种输入的前期处理的指令。该输入可以包括从用户222接收到的一个或多个通信输入220。输入可以包括以任何形式接收的一个或多个信号、消息和/或数据。
作为通信输入的基础的通信或底层通信例如可以包括听觉通信224,诸如语音发声、拍手、打响指、笑声、叹气等等。
更具体而言,在解释模块(再次,例如执行模块的代码的处理器105)从一个或多个车辆传感器或接口102接收通信输入226。传感器或接口102感测用户动作或与车辆的互动。输入可以表示来自任何用户的通信,包括车辆操作者或任何车辆乘客。
如所提到的那样,传感器可以包括一个或多个麦克风、摄像头、基于光的传感器(例如使用激光的传感器)、按钮、旋钮、触控显示器和/或其它触控设备。
关于摄像头接口,其他示例底层通信可以包括用户的手势或其他运动,诸如挥手、移动(例如倾斜或点头)头、移动眼睛的注视。
关于触控接口,其他示例底层通信可以包括或产自软按钮选择、滑动、或其他屏幕上或设备上手势、触摸或动作。
如还示出的那样,解释模块202还可以接收背景输入228作为输入。虽然背景输入228在图1和图2中被单独示出,但是来自传感器102的输入226可以包括上文提及的背景信息。背景或背景信息可以包括例如车辆驾驶室温度、车外温度、车辆内或外的湿度等级、声音等级、车辆部件操作特性,诸如车辆或其子系统中所使用的电压量、车辆RPM等。
在一个实施例中,解释模块202将来自至少一种接收到的格式或语言的一些或所有输入变换为至少一种其它变换后的格式或语言。例如,将输入格式变换为预先设定的语言,或将第一语言变换为预先设定的第二语言。该过程可以被称为映射,例如将相关接收格式输入映射到变换后的格式。装置(例如模块204、206等)或其部件的平衡可以配置为使用在后续功能中产生的格式或语言。
作为示例,解释模块202将从传感器102接收并且指示用户正在他或她的脸前面像扇子一样挥手的输入226变换为语言,诸如“热”。
作为变化语言的示例,实施方式模块202可以将“哇,热!”的输入变换为更客观或简单的对应短语,诸如“非常热”、“太热了”、或者只是“太热”或“热”。
在设想的实施例中,解释模块202将以另一语言(诸如德语、中文普通话等)接收的词转换为诸如英语等基础语言。
在一个实施例中,解释模块202过滤输入226和/或背景输入228。如所提到的那样,一些或所有输入226/228可以被映射到预先设定的格式或语言。在一个具体实施例中,模块202通过识别或选择通信输入的相关特征、方面或特性来过滤通信输入。
在一个设想的实施例中,装置配置为确定车辆中的谁提供了输入-例如驾驶员还是后座乘客-或者具体的人,例如,用户琳达或用户约翰。在各个实施例中,所述确定例如包括接近测量(雷达、声音级别)。在实施例中,确定包括生物统计数据评估,诸如语音分析、其他声音分析、面部识别等。
在实施例中,装置以各种方式使用装置处理中的确定。例如与乘客输入相比,该装置可以分配更多的权重到驾驶员输入。作为另一个示例,如果仅从后排乘客接收到发声(例如抱怨或指令),则该装置可以确定以调节车后隔室温度,而不是车前部件温度。作为又一个示例,该装置可以确定当调节车辆的前部和后部或车辆整体的环境时,更多地调节后部的环境。
解释模块202的过滤结果可以多种方式中的任何方式表示。在一个实施例中,使用相关数据(例如,到解释模块202的所示数据输入226、228),HMI代码或指令106配置为使得通过执行指令106得到的结果输出230表示为数据矢量。
解释模块202的输出230可以被称为解释输出、解释模块输出、初始处理输出230、类似术语或其他。
矢量格式的输出230例如传递到分析模块204等,用于进一步处理。利用输出230的下游功能包括分析,以识别潜在的用户意图、期望、需求或偏好,其可以被称为前体。
如以上更详细地提供的那样,不管驱动系统调节的基础(例如用户需求、希望、舒适性等)如何,可以将基础总体称为用户需求,并且在本文中包括在所附权利要求中,不是以限制性的意义使用该短语,而是广泛地包括由用户通信直接或间接地指示的许多基础中的任何基础,可用于根据本技术的各个实施例考虑的装置。
III.C.分析模块
分析模块204接收解释模块输出230(即,再次,执行模块204的代码的处理器105)。如上所述,该输出230可以部分或全部格式化和/或通过解释模块202的操作进行过滤。该模块204还可称为基于规则的引擎。
分析模块204分析解释模块输出230,以识别用户的明显意图或期望。意图、期望、需要或偏好可以被称为前体。
推导前体包括评估至少一条用户通信输入226,如将在解释模块输出230表示的那样。然后推导还可以包括评估在输出230中表示的任何不同的背景信息228,或如可以诸如通过背景数据路径232从(多个)背景源114接收。
也如图2所示,对分析模块204的输入还可以包括用户模型112和/或语义数据库110的输入。
分析模块204可以配置为在推导中考虑用户输入226、背景输入228/232、用户模式输入236和/或语义数据库输入234的各种方面中的任何一个。
所考虑的这些方面可以包括例如指示用户的精神状态、情绪状态或其他情况或意图或期望(诸如兴奋、沮丧等)的方面。例如,诸如当只需要按压一次时用户连续地不只一次按压软键,或当用户挥动或以其他方式作两次或更多次手势时,重复可以表示沮丧或情绪激动。
至于可以在分析中使用的通信特性的其他预期示例包括语调、音量或通信的其他可辨别程度的通信。诸如当用户大声说指令或其它通信时,或者当用户使用比需要的大得多的力或者比用户通常的力或普通用户的的力更大的力按压软键或按钮时,这样的特性例如可以指示沮丧或高情绪。
在一个实施例中,分析模块204考虑用户特定数据和/或基于涉及许多主体用户的经验或经历创建的数据。该数据可包括用户偏好或设定、或指示用户和/或其它用户的过去经历的数据,可被称为基于规则的引擎。该数据可以从它会存在的各种位置中的任何位置被接收,诸如用户模型数据库112。
对于其功能,分析模块204包括输入(例如,在解释输出230中表示的用户输入226)和一个或多个可能的前体之间的关联或链接规则。分析模块204同样可以包括多个输入和一个或多个可能前体之间的关联。分析模块204还可以包括或考虑非用户输入,例如背景数据232-例如周围温度、来自语义数据库110的输入234、和/或来自用户模型数据库112的输入236。
在一些实施例中,分析模块204还更新用户模型数据库112,如图2中由从模块204到数据库112的返回箭头240所示。这例如通过跟踪用户对装置分析结果的反应来完成。例如,该装置可以跟踪用户对基于所确定的初始前体进行的初始系统调节(例如温度下降)的反应,并在以后分析中使用反应反馈。
反馈可以指示例如:当输入80华氏度(F)车内温度时,响应于用户发出“啊”而确定的初始前体(例如需要较低温度)是准确的,并因此涉及或关联到更高程度(用于预测的更强联系),结合车辆用户或发声并被识别的具体车辆用户的相同前体的情况下的这样的输入(“啊”、或结合环境条件的发声)。
相反,如果系统在跟踪中确定用户似乎不完全满意所确定的初始前体(即,使用产生的系统输出),则可以去除或削弱相关性,用于在由模块204进行的将来的分析中使用。替代地,相关性也可以用另一种关系代替,诸如与在用户实际期望的初始交互作用之后的装置所确定的情况的联系。
分析模块204输出所产生的前体作为分析输出238。与本文中所使用的所有术语一样,分析输出238可以由其它术语指代。在目标识别器模块206处接收分析输出238。
如所提供的那样,模块202、204、206、208、210中的任何一个或多个可以配置为包括人工智能。在实施例中,目标识别器模块206在其操作中学习,并从而提高自身,用于在将来的操作中实现更好的性能。在分析模块204提供反馈给用户模型数据库112和数据路径240的实施例中,反馈240可以包括分析结果。示例分析结果包括:在对模块204的输入(用户输入、背景数据等)和所确定的结果(例如前体)之间确定的关系。反馈可以是学习的一部分。如前所述,由模块204实施的学习可以是一种人工智能-例如机器学习。学习过程如上所述可以被称为基于反馈的学习过程,包括基于反馈的学习功能。
作为一个示例,基于规则的布置可以基于特定用户和/或其他用户的过去的经历开发。如果对于一种或多种情况中的每一种,对于(i)一定的背景设定(例如,一天中的时间和/或驾驶室温度),(ii)用户说“非常热”,(iii)HMI代理将当前风扇增加一个速度设定,(iv)和用户不高兴(如可以由例如随后发声和/或用户的手势或HVAC的手动控制来确定),则该装置可以自动地响应更新自身,使得然后替代地将相同情况((i)和(ii))由新的或调节后的规则映射到不同的例如更强烈的HMI动作-例如以两个单位提高风扇速度。
作为另一示例,如果装置确定(例如通过用户反馈和/或随后的用户动作-例如加大收音机音量)某个风扇设定和空气输送通道(例如挡板通风口)太大声,则该装置将通过新的或调节后的规则自动地更新映射,即(i)避免增加用于输送到挡板通风口的空气的鼓风机(也许只是更多地降低温度),(ii)通过其它通道(例如经由地板通风口),以考虑了气候和声音背景(如收音机播放、电台谈话节目或谈话节目频道打开)或期望认为适当的任何风扇等级,输送全部或至少更多的空气和/或(iii)例如增大收音机音量。
在一个实施例中,当规则是准确的置信水平高于阈值水平时,新的或调节后的规则被存储。在一个具体实施例中,置信水平可以保持为百分比。规则中的信心可以通过在同一个用户的情况下发生相同情况的次数与和HVAC互动的总数之比来定义或表示。在一个实施方式中,当信心至少是50%-即,该规则更有可能是真实的或准确的时,存储新的或调节后的规则。但是应当认识到,如果存在足够的数据支持规则改变(例如,由大于50%的信心支持的可能规则),则随后可以保存替换规则或反向调节。
分析模块204和/或识别器模块206的功能可以总称为包容或理解实际的用户期望和意图。所产生的个性化的用户经历然后可以称为“包容经历”。
可以基于从一个或多个用户接收到的暗示或隐含的指示例如通信(诸如发声和手势),来执行包容。在许多实施方式中,隐含指示不同于用户的实际的或明确的通信,诸如按压按钮、表达命令(例如“冷5华氏度”)等。如所提供的那样,包容也可以包括考虑任何所描述的背景数据、用户模型数据、语义数据库数据、可用系统数据以及当前系统设定数据。
III.D.目标识别器模块
用户或人机界面(UMI、HMI)代理(UMIA、HMIA)106还包括目标识别器模块206,其可以简称为目标识别器、识别器、GR模块、GR等。
在操作中,目标识别器模块206(例如,执行模块206的指令的处理器)使用经由路线238确定并接收的用户前体,来确定在车辆处待实施的一个或多个对应目标。
在各个实施例中,在确定对应于所确定的前体238的目标时,除了前体238,目标识别器206还考虑辅助数据,包括来自背景源114的任何单独的背景数据242、从系统状态数据库208接收到的系统状态数据244、和/或来自车辆系统116的车辆系统反馈或数据246(例如当前系统状态)。
背景数据242可以和提供给解释模块202和/或分析模块204的数据232是相同或大致相同的,或者和由分析模块204处理或传递的数据是相同或大致相同的。
在一个实施例中,识别器206还使用来自可用系统状态数据库108的指示可用系统状态的数据244,来确定所产生的目标。目标可以包括一个或多个建议系统状态。
在图2中,是否使用可用系统状态数据254,来自识别器206的输出或目标由从模块206延伸到下一个下游模块208的数据路径247表示。
所产生的目标也可以称为主观系统输出或命令,并指示HMI 106已经确定的由一个或多个用户需要(例如有意识地或无意识地期望)的系统操作或状态(例如,HVAC设定或状态)或系统调节(例如对HVAC系统的改变)。
一般来说,主观系统输出247表示用户想要改变的事物(例如更新鲜的空气),即使他们不知道如何请求系统调节(例如通过发声或手势),或者即使他们不知道他们已经进行了请求-例如以相对较高鼓风机速度的较冷空气的循环。
如所提供的那样,模块202、204、206、208、210中的任何一个或多个可以配置为包括人工智能。目标识别器模块206可以例如在其操作期间学习,并从而提高自身,用于在将来的操作中实现更好的性能。
如上所述,目标识别器模块206可以经由数据路径244接收可用系统状态数据。在一个实施例中,如所示的路径244指示的那样,目标识别器模块206提供反馈给可用系统状态数据库108。反馈可以包括模块功能的结果,诸如在输入(前体、背景数据等)和所确定的结果(例如主观系统输出)之间确定的关系。
反馈可以是学习的一部分。如上所述,由模块206实施的学习可以是一种人工智能-例如机器学习。学习过程可以称为基于反馈的学习过程,其中包括基于反馈的学习功能。
在一个示例操作中,目标识别器模块206向可用状态数据库108发送查询。在一些实施方式中,查询包括目标识别器模块206关于当前状态(例如当前HVAC状态;通过例如当前系统信号246指示)具有的信息、来自前体238的信息、以及或许背景数据242。响应于该查询,目标识别器模块206反过来从可用系统数据库108接收系统的目标状态(例如HVAC)。
如提到的那样,分析模块204和/或识别器模块206的功能可被统称为包容或理解实际的用户期望和意图。该包容可以基于从一个或多个用户接收的暗示或隐含的指示例如通信(包括发声和手势)来执行。在许多实施方式中,隐含指示不同于用户的实际的或明确的通信,诸如按压按钮、表达命令(例如“冷5华氏度”)等。如所提供的那样,包容还可以包括分析任何所描述的背景数据(例如232、242)、用户模型数据(例如236)、语义数据库数据(例如234)、可用系统数据(例如244)和当前系统设定数据(例如246)。
III.E转换模块
用户或人机界面(UMI、HMI)代理(UMIA、HMIA)106还包括转换模块208。该转换模块208可以由其他的名字指代,诸如转换模块、转换器模块、转换器等。
在操作中,转换模块208(例如,执行模块208的计算机可执行代码的处理器105)确定或识别一个或多个系统命令248、或客观系统输出、代码或指示248,其将在车辆处(例如在HVAC系统或NAV系统处)使用,以实现由之前模块206识别的目标247或主观系统输出或命令。输出248还可以包括并被称作HMI系统命令。
对于给定的目标247,例如转换模块208确定一个或多个客观系统状态输出248。
在各个实施例中,在确定客观系统命令248时,除了主观系统输出或命令247之外,转换器208还考虑来自背景源114的任何单独的背景数据250和/或从系统状态数据库208接收的系统状态数据252、和/或来自车辆系统116的车辆系统反馈或数据246(例如当前系统状态)。
可用系统状态数据库108的可用于如所示的模块206、208的可用系统状态数据244可以指示系统116的所有潜在或可能的设定或操作值。可用系统状态数据244可以包括整个范围(例如0-100%)的鼓风机风扇速度,例如与给出的常规的风扇设定相比,其允许更精细的调节-例如用于低、中、高或1至4级的风扇速度值的仪表盘显示旋钮。
背景数据250可以和提供给之前模块(202、204和/或206)的数据232是相同或大致相同的,或和由这些模块中的任何一个或多个处理和/或仅传递的数据是相同或大致相同的。在各个实施方式中,和每个主要功能模块(例如202、204、206、208、210)相同,背景数据可以由转换器208直接从数据库114接收或处理,例如数据114不经过其他模块。
在一些实施例中,客观系统命令248包括将在系统116处待实施的适当输出(例如物理输出)的原始表示。输出248可以指示所提及的整个范围的一个或多个系统116设定(例如从0-100%的鼓风机风扇速度的设定),这比呈现给用户的常规设定(例如低、中、高的风扇速度值)更精确。
如所提供的那样,模块202、204、206、208或210中的任何一个或多个可以配置为包括人工智能。目标识别器模块206可以例如在其操作期间学习,并从而提高自身,用于在将来的操作中实现更好的性能。
在一个实施例中,如由数据路径254所指示的那样,转换模块208提供反馈给可用态数据库108。反馈可以包括模块功能的结果,诸如在对转换模块208的输入(主观系统输出246、背景数据150等)和所确定的结果(例如客观系统命令和随后的用户通信)之间确定的关系(在系统116处执行了客观系统命令之后)。
如提到的那样,反馈可以是学习的一部分。由转换模块208实施的学习可以是一种人工智能-例如机器学习。并且学习过程可以称为基于反馈的学习过程,包括基于反馈的学习功能。
在一个示例运作中,转换器模块208向可用状态数据库108发送查询,询问对应于当前目标(例如,从目标识别器模块206接收的目标)的状态,并作为响应接收目标当前状态。
III.F.执行模块
在一些实施方式中存在的执行模块210接收客观系统命令248-例如由转换模块208生成的HMI车辆命令。
在操作中,执行模块210(例如,执行所述执行模块210的代码的处理器105)对命令248执行任何最终处理。最终处理可以包括在命令被发送256以在适当的车辆系统116处实施之前所需要的任何相关处理,诸如格式化、转换、变换等。
III.G.建议或自动动作
在设想的实施例中,用户或人机界面(UMI、HMI)代理(UMIA、HMIA)106是配置为在检测到匹配用户提供指示特定系统调节的通信222的之前情况的情况下,自动地为系统(例如HVAC或NAV系统)建议或进行特定调节。
例如,当用户结合某些情况(例如驾驶室温度和空气流动状态、或道路质量(例如颠簸路段)提供通信224时,HMI 106可以结合输入224存储这些条件,或至少采取行动(例如256),以备后用。然后,响应于HMI 106确定存在相同或相似的条件,HMI 106可以建议动作,通知用户将采取行动(或认为不存在其他指示),或者直接采取行动。
在设想的实施例中,HMI也可以在用户模型数据库112中设定建议或决定的类型作为用户设定或偏好,例如用于以后的自动呈现或实施。在各个实施方式中,例如可以响应于用户批准或由用户请求来建立该设定。
IV.示例实施方式
用于所生成的系统命令256的目标车辆系统116可以包括车辆的任何自动可控系统。如所提到的那样,这些可以包括HVAC系统、导航系统、自主或半自主驾驶(例如自动巡航控制)系统、电子可控车辆悬架系统与音频系统(例如收音机、扬声器电话)。针对这些系统的示例实施例将在下面的部分中描述。
IV.A.加热、通风和空气调节系统
现在进一步描述各HVAC系统作为主题系统116的示例实施方式。
HVAC系统代表可以基于用户通信224以用户的个人方式控制的另一个系统116[例如,基于处所(例如家或旅馆)或对象(例如车辆)的系统],包括间接通信-例如发声和/或手势,单独或结合背景数据、语义数据库数据、用户模型或设定/偏好数据以及系统数据。
本技术允许HVAC参数的调节以改进或维持用户舒适度。在一些实施例中,该调节连续地执行,或者总体上持续地执行。在一些实施例中,该调节自动地执行,或者在从装置100接收到建议之后响应于选择而执行。在一些实施例中,在通知计划的调节之后执行所述调节,诸如自动地或在通知之后,和在没有反对由通知指示的计划调节的用户通信的情况下。
现在进一步参照HVAC系统以举例的方式说明图2的流程。在该示例中,用户222以发出“令人窒息!”或“哇,这里很热”的方式提供用户通信224。
通信224由传感器102(诸如麦克风)感测。对应于所感测通信的信号226例如由人机界面(HMI)106接收,-例如由执行HMI 106的代码的计算单元的处理器接收,诸如提到的车辆的机载计算机(OBC)。更具体地说,可以在HMI106的解释模块202处接收输入226。
对HMI 106的解释模块202的另一个输入可以包括背景数据228。示例背景数据228指示当前驾驶室温度、HVAC空气的当前输出路径(例如到面板的空气)、或当前风扇功率或鼓风机等级-例如30%。在一个实施例中,将这样的辅助数据(当前驾驶室温度或当前风扇功率或鼓风机等级)替代地或附加地经由路径246提供给HMI 106,并由相关联的接收模块例如目标识别器和/或转换模块206、208考虑。
如在之前示例中提到的那样,解释模块202将从传感器102接收到的输入226变换或映射为输入226的主旨的描述或指标。例如,解释模块202将指示用户正在他或她的脸前面像风扇一样挥手的通信输入226映射为语言,诸如“它热”或“热”或温度过高的其他指示。
在各个实施例中,模块202评估主观口头输入226,诸如“让人窒息”!或“哇”以及任何背景数据,以确定输入226的更客观措辞,诸如“真是非常热”或只是“非常热”。
如所提供的那样,在设想实施例中,解释模块202将以另一种语言(例如德语、中文普通话等)接收的词变换为基础语言(例如英语)。
解释模块202的输出230被传递至分析模块204。输出230可以以多种方式中的任何方式来表示,包括作为数据矢量。
分析模块204单独地或与背景输入232(例如驾驶室室温度)、用户模型数据库输入236和语义词典数据库输入234中的任何一种或多种一起处理输入230(例如“太热”),以产生提供通信224的具体一个/多个用户222的明显意图或期望。
在本示例中进行处理的分析模块204的结果238可以例如是该用户想要更强的风和降低的温度。再次,结果238可以被称为前体。
前体238随后由目标识别器模块206使用。目标识别器206单独地或与背景输入242(例如驾驶室温度)和从系统状态数据库108接收的可用系统状态数据244以及来自车辆系统116(例如HVAC系统)的车辆系统反馈或数据246(例如当前系统状态)中的任何一种或多种一起,使用输出238。
所产生的目标247(它也可以称为主观系统输出)表示HMI 106所确定的是由一个或多个用户需要、偏爱或有意识或无意识地期望的系统操作或状态(例如HVAC设定或状态)或系统调节(例如对HVAC系统的改变)。
在本HVAC示例中,主观系统输出247可以包括例如提高风扇功率到50%并降低目标温度5华氏度。
使用或不使用其他输入-例如,一个或多个背景输入242(例如驾驶室温度)和可用系统状态108、从系统状态数据库208接收到的系统状态数据244、和来自车辆系统116(例如HVAC系统)的车辆系统反馈或数据246(例如当前系统状态),转换模块208将主观系统输出247变换为系统命令或更多客观系统输出248。
客观系统命令248表示可在HVAC系统116执行或用于控制HVAC系统116的系统命令-例如,对应于主观系统输出247的计算机可执行或设备可执行指令。
在该示例中,系统命令248可以包括代码或其他信号或指令,指示车辆系统116将风扇设定为某一等级,例如4级(从先前2级),并将温度设定为某一温度,例如22摄氏度(℃)(从先前27摄氏度)。
执行模块210表示有助于执行系统命令248的任何执行代码。执行可以包括生成配置为使得相关车辆系统116相应地调节的最终指令或信号256。
为了例示本技术的迭代方面,示例可以还包括:在增加了HVAC风扇(例如至4级)和降低了温度(例如降低至22摄氏度)之后,接收随后的用户输入224,诸如发出“啊......还是热,但更多的空气会弄乱我的脸”或“啊......还是热,但空气已经很强”。
解释模块202将对应的新输入226单独地或与背景信息228一起变换为输出230,输出230表示被认为是确定为用户(由发声、手势等)所表达的本质的后续输出230。
在处理的该后续迭代中,解释模块202输出可以包括“太热了,更多的空气会令人不安”、“太热了,不要空气”、“太热且空气太多”等。
使用输出238和用于分析模块描述并示出的任何其它输入,模块204确定用户的显然需求。该后续结果238可被称为第二或随后前体。在本示例中,结果238可以指示该用户显然想要更凉的空气但更少的空气流动-例如-在他的脸上的更少的空气)。
使用输出230和用于目标识别器206描述并示出的任何其它输入,模块206然后确定后续主观系统输出247,诸如将风扇功率设定至60%,将空气输送改变为地板+面板。
如上所述(例如使用背景和/或系统状态输入250/252),转换模块208将随后的主观系统输出248变换为客观系统命令248,用于经由执行模块210来执行。
如所提供的那样,模块202、204、206、208或210中的任何一个或多个可以配置为包括人工智能。分析模块204例如可以在其操作期间学习,从而提高自身用于在将来的操作中实现更好的性能。
对用户模型数据库112的反馈数据(例如,输入特征230和所确定的输出238之间的关系)可以是学习的一部分。如前所述,由模块204实施的学习可以是一种人工智能-例如机器学习。
学习功能在此之前提到。在所描述的示例迭代中,HMI106可以使得存储数据-存储到用户模型和/或语义数据库112、110中,例如-表示(A)最初的用户通信224(例如,“令人窒息!”或“哇!”)以及任何其他输入(例如背景),而不是所确定的最初输出238、247、248、256,与B)随后确定的有效(例如,由于没有进一步的相关用户通信(抱怨或相关手势))输出238、247、248、256(例如,将风扇功率设定至60%,将空气输送改变为地板+面板)248之间的一个或多个联系。该关系然后可以在将来的操作中用于更有效、明确的个性化的HVAC系统调节。
如所提供的那样,在设想的实施例中,HMI 106配置为在检测到匹配用户提供指示特定系统调节的通信222的之前情况的情况下,建议或进行特定系统(例如HVAC系统)调节。在这种情况下,响应于HMI 106确定存在当用户先前进行相关通信224(例如,“令人窒息!”或“哇,这里真热!”)时存在的条件(例如背景数据),HMI 106可以随后建议采取后续的行动(例如,将风扇功率设定至60%,将空气输送改变为地面+面板),或者只陈述将采取行动(或否则没有用户指令)。该HMI也可以将这种类型的决定设定为用户设定或偏好(在例如用户模型数据库112中),用于以后自动实施,诸如在有用户批准的情况下、没有反对或由用户请求。
IV.B.导航系统
现在进一步描述具有导航系统作为主题系统116的示例实施方式。
如所提供的那样,导航系统表示基于用户通信224可以以用户的个人方式进行控制的另一个系统116[例如,基于个人(例如移动通信设备)、处所(例如家或旅馆)或对象(例如车辆)的系统116],包括间接通信-例如发声和/或手势,单独或结合背景数据、语义数据库数据、用户模型或设定/偏好数据以及系统数据。
许多现代导航系统可以设定为向着操作者方向说话。在一个示例中,正在以该方式向操作者提供方向,并且可能反复地提供,同时他们已经知道他们要去哪(诸如他们的家)。在该导航系统情况下,用户222的示例输入224于是可能包括“我知道我回家的路,你为什么重复这个?”。
例如,可以执行所描述的HMI 106的处理(包括图2所示的所有或任何方面),以识别例如“我不想要这么频繁地接收方向”、“一旦我这么接近我的房子我就不想要到家的方向”等的前体238。
在该情况下(例如回家并在家附近),处理然后还可以产生调节消息的时机和内容的主观系统输出247。将命令247变换为客观命令248,存储用于以后的实施(例如,到可用系统状态并也可能或替代地语义和/或用户模型数据库),并根据需要经由执行模块210来执行,用于调节NAV系统116。
如所提供的那样,在设想的实施例中,HMI 106配置为在检测到匹配用户提供指示特定系统调节的通信222的之前情况的情况下,建议或进行特定系统(例如NAV系统)调节。在这种情况下,HMI 106可以响应于HMI 106确定存在相同或相似的条件(例如,在或接近家的相同邻区),而以后建议方向叙述停止,或只是陈述方向叙述将停止。自动地或在有用户批准的情况下,基于之前进行的设定,HMI 106然后执行所建议的动作。该HMI也可以将这种类型的决定设定为用户设定或偏好(在例如用户模型数据库112中),用于以后自动实施,诸如在有用户批准的情况下或由用户请求。
作为另一个NAV系统示例,用户222可以陈述224“在这条路上有太多的路面颠簸!”。例如可以执行所描述的HMI 106处理(包括图2所示的所有或任何方面),以识别例如“我并不想再或再次在这条路上开车”等的前体238。
处理然后还可以产生离开路线的主观系统输出247,或者重新计算尽可能地或实际地远离当前道路的路线。将命令247变换为客观命令248,并存储用于以后实施(例如,在可用系统状态中并且还可能或代替语义和/或用户模型数据库中,使用将道路与避让标志联系起来的映射数据来更新用户偏好或设定),并根据需要经由执行模块210来执行,用于当前调节NAV系统116。
如所提供的那样,在设想的实施例中,HMI 106配置为在检测到匹配用户提供指示特定系统调节的通信222的之前情况的情况下,建议或进行特定系统(例如NAV系统)调节。在这种情况下,响应于HMI 106确定存在相同、相似或更大程度的道路颠簸/孔(例如基于来自背景源114例如悬架系统的背景数据228),HMI 106可以稍后例如向操作者建议重新确定路线。在各个实施例中,基于之前进行的设定,HMI 106(i)自动地(ii)没有用户反对地或(iii)在有用户批准的情况下,然后执行建议的动作。该HMI也可以将这种类型的决定设定为用户设定或偏好(在例如用户模型数据库112中),用于以后自动实施,诸如在有用户批准的情况下或由用户请求。
IV.C.自主/半自主驾驶系统
现在进一步描述具有自主或部分自主驾驶系统作为主题系统116的示例性实现方式。
如所提供的那样,自主和半自主驾驶系统-例如自动巡航控制(ACC)-表示基于用户通信224为用户个性化的其它车辆系统116,包括间接通信-例如-发声和/或手势,单独或与背景数据、语义数据、用户模型或设定/偏好数据以及系统数据结合。
作为示例输入224,用户222可以提供“我害怕”或“哇,太慢”的表达的形式的通信。
例如可以执行包括图2所示的所有或任何方面的所描述的HMI 106处理,以识别例如“前方更多的间隔距离”的前体238。
该HMI处理也可以然后产生例如总体上来说使车辆减速的主观系统输出247,或者更具体地来说实现一定的间隔距离(例如能够通过LIDAR和/或其他车辆传感器测量)。将命令247变换为客观命令248,存储用于以后实施(例如,到现有系统状态并且还可能或代替语义和/或用户模型数据库),并根据需要经由执行模块210来执行,用于调节自主或半自动驾驶系统116。
如所提供的那样,在设想的实施例中,HMI 106配置为在检测到匹配用户提供指示特定系统调节的通信222的之前情况的情况下,建议或进行特定系统(例如ACC系统)调节。在这种情况下,响应于HMI 106确定存在相同或相似的条件-例如,与前方车辆的接近程度处于使得用户在之前情况下害怕的距离,HMI106可以以后建议缩短间隔距离,或者只是陈述将增加间隔距离或者维持而不缩短,或者直接增加间隔距离或维持间隔距离而不缩短。自动地或在有用户批准的情况下,基于之前进行的设定,HMI 106然后执行建议的动作。该HMI也可以将这种类型的决定设定为用户设定或偏好(在例如用户模型数据库112中),用于以后自动实施,诸如在有用户批准的情况下或由用户请求。
IV.D.音频系统
现在进一步描述具有导航系统作为主题系统116的示例实施方式。
音频或音响系统-例如收音机、经由麦克风和扬声器的电话、导航音频、客户服务音频(例如,OnStar系统音频-代表其他系统116[例如,基于个人(例如移动通讯设备)、处所(例如家或旅馆)或对象(例如车辆)的系统116]可以基于用户通信224以用户的个人方式进行控制,包括间接通信-例如发声和/或手势,单独或与背景数据、语义数据、用户模型或设定/偏好数据以及系统数据结合。
例如,作为示例输入224,用户222可以提供“音乐听起来太微小”或“音乐听起来很小”的形式的表达的通信。
例如可以执行包括图2所示的所有或任何方面的所描述的HMI 106处理,以识别例如“使音乐声音变粗”的前体238。
HMI处理也可以然后产生例如增加低音、较低高音、平衡向右的主观系统输出247。将命令247变换为客观命令248,存储用于以后实施(例如到可用系统状态以及还可能或替代语义和/或用户模型数据库),并根据需要经由执行模块210来执行,用于调节音响系统116。
如所提供的那样,在设想的实施例中,HMI 106配置为在检测到匹配用户提供指示特定系统调节的通信222的之前情况(例如,相同或相似类型的歌曲、相似的车辆乘员简介-例如只有驾驶员)的情况下,建议或进行特定系统(例如音频系统)调节。
在这种情况下,响应于HMI 106确定在以前实例中存在相同或相似的条件-例如相同或相似类型的歌曲、相似的车辆乘员简介-这导致用户抱怨音乐过于单薄,HMI 106可以以后建议缩短间隔距离,或者只是陈述这样改变音频(例如增加低音、较低高音、平衡向右),或者直接进行更改。自动地或在有用户批准的情况下,基于之前进行的设定,HMI 106然后执行建议的动作。该HMI也可以将这种类型的决定设定为用户设定或偏好(在例如用户模型数据库112中),用于以后自动实施,诸如在有用户批准的情况下、没有反对或由用户请求。
作为另一音频系统示例,扩展以包括多于一个用户,假设传感器102感测后座乘客222说224“我听不到音乐”或“我听不到你在说什么”。例如可以执行包括图2所示的所有或任何方面的所描述的HMI 106处理,以分别识别例如“到后方的更大收音机音量”或“到后方的更小收音机音量”的前体238。
该HMI处理也可以然后产生例如分别增加后方音频或降低后方音频的主观系统输出247。将该命令247变换为客观命令248,存储用于以后实施(例如,到现有系统状态以及还可能或替代到语义和/或用户模型数据库),并根据需要经由执行模块210来执行,用于调节音响系统116。
如所提供的那样,在设想的实施例中,HMI 106配置为在检测到匹配用户224(后座乘客)提供指示特定系统调节的通信222的之前情况(例如,相同的车辆乘员简介-例如驾驶员和乘客、以及对于第二个示例(“我听不见你”),驾驶员讲话)的情况下,建议或进行特定系统(例如音频系统)调节。
在这种情况下,响应于HMI 106确定存在相同或相似的条件,HMI 106可以以后建议需要采取或提议所确定的音频调节。而且,自动地或在有用户批准的情况下,基于之前进行的设定,HMI 106然后执行建议的动作。该HMI也可以将这种类型的决定设定为用户设定或偏好(在例如用户模型数据库112中),用于以后自动实施,诸如在有用户批准的情况下或由用户请求。
作为又一音频示例,操作员222可以说“太大声,我听不到自己”。在所描述的HMI 106的操作中,所产生的输入226可以导致例如降低驾驶员或前方的音频的前体238、和对应的主观和客观的命令用于执行。
V.可用和潜在的系统状态
图3表示车辆HVAC系统的示例潜在和可用系统状态的之间的关系的示意图300。
示意图300包括所有潜在或可能的系统状态310以及可用系统状态330的列表。可用系统状态330存储在可用系统状态数据库108中。
该示例的可能系统状态310包括气候模式和风扇速度。该示例包括如下的所有组合:(A)气候模式的两种设定:“经济的”或“经济性”气候模式312(节能模式)、以及“舒适”气候模式314和(B)风扇速度的六种设定:速度((1)-(6)),分别表示为314、316、318、320、322、324,从而产生图示的12种组合1-12。尽管示例包括两个变量(气候模式和风扇转速)并且第一个变量具有两种设定而后者具有六种设定,但是根据具体系统的设计,各个实施例可以具有更少或更多的变量和可用设定。
根据风扇功率设定来组织可用系统状态330。三个风扇功率设定322、334和336通过示例方式示出,分别表示5%、30%和50%的风扇功率设定。虽然示出了三种设定,但是根据系统的设计,各个实施例可以使用更少或更多的组。
在第一风扇功率设定332下,示出了可能系统状态组合310的示例气候模式/风扇速度组合312/314。在第二风扇功率设定334下,示出了可能系统状态组合310的两种示例气候模式/风扇速度组合312/318和314/316。在第三风扇功率设定336下,示出了可能系统状态组合310的另两个示例气候模式/风扇速度组合312/324和314/320。
关于作为可用系统状态的灵活性的示例被提到的可用系统状态336,第三状态336表示新的状态,具有50%的风扇输出。状态336通过鼓风机可以实现,但不可用于已有状态,其显示用户只有六个独立的风扇速度选择((1)-(6),如由图3中的风扇速度314、316、318、320、322、324所示。
50%的风扇功率可以通过模式和风扇速度等级的不同组合方式来实现。速度等级由值1-6表示。
目标识别器模块206(即,再次执行模块206的代码的处理器105)的功能由第一箭头340示意性地表示。目标识别器206接收可能系统状态作为输入,并检索可用系统状态(箭头340)。
转换模块208(即,再次执行模块208的代码的处理器105)的功能由第二箭头350示意性地表示。转换模块208从目标识别器206接收可用系统状态作为输入,并检索所有的可能系统状态。
V1.示例目标识别器和转换功能
下面的两个函数概要(1)、(2)以文本形式示出了以上对于目标识别器模块206和转换模块208所描述的功能的示例细节。示例在车辆HVAC系统的背景下提供。更具体地说,下面的两个概要示例从图3的情况继续。
下面,第一概要(1)聚焦于目标识别器206的函数相对于对识别器206的三个主要因素或输入:(i)当前系统状态(S)(例如经由路径246的数据),(ii)前体(例如路径238的数据),以及(iii)可用系统状态(例如从可用系统状态数据库108经由路径252)。
函数概要(1)
{/*CurrState=[CC=Eco,FS=3]*/
NewState=FindState(CurrState,DB)
/*NewState=“FanPower30%”*/
Goal=FindGoal(Precursor,NewState,DB)
/*Based on precursor,Goal=FanPower50%*/
Retum goal}
更具体来说,以上第一函数概要(1)示出当前系统状态(例如数据246)作为对目标识别器模块206的第一输入。该示例当前系统状态包括“经济”或经济性)的气候模式和第3级的风扇速度。该状态对应于图3所示的状态310的第三状态(框312、318)。
当前状态由“经济”模式和等于3级的风扇速度给出。通过使用当前状态值搜索数据库而找到新的状态。这可以产生新的状态,利用该新的状态,例如风扇功率需要是30%。然后搜索数据库以找到对应的目标状态。
目标识别器模块206构造和布置为根据所陈述的输入生成目标247或主观系统输出。
下面,第二概述(2)聚焦于转换模块208相对于对转换器208的三个主要因素或输入的功能:(i)当前系统状态(例如经由路径246的数据),(ii)所确定的目标(例如路径247的数据)以及(iii)可用系统状态(例如从可用系统状态数据库108经由路径252)。
函数概要(2)
{/*Goal=“FanPower50%”
CurrState=[CC=Eco,FS=3]*/
State=Search DB,choose state close to currstate under Goal
Return State}
更具体来说,以上第二函数概要(2)示出了指示50%风扇功率的目标(247)作为对转换模块208的输入。转换器208也接收所提到的当前系统状态数据(即“经济”气候模式和3级风扇速度)作为输入。
当前要达到的目标等于实现50%的鼓风机功率,而当前状态由“经济”模式和等于3级的风扇速度给出。程序将搜索可用状态的数据库,以选择最接近于当前状态的HVAC状态,以实现目标。
转换器208配置为基于所陈述的输入生成系统目标247或主观系统输出。
VII.选择优势和优点
本发明在上面描述了本技术的许多优势和优点。本部分总结这些中的一些,并且描述一些其他,但不是全部。
本技术允许至少部分地基于诸如来自计算装置本身的人类用户输入,来个性化且灵敏地控制一个或多个车辆系统参数,与例如严格工程或技术输入相比,所述用户输入特别包括隐含或暗示输入。
即使用户不知道他们想要或需要什么,不知道应该调节什么系统,或者如何调节和/或启动调节的具体方式,在这样的情况下,本技术也基于用户输入以及在各个实施例中如已经描述的辅助输入,来确定会是最佳的调节,或至少确定最好或最合适的调节。
该控制向车辆的用户提供优势,诸如更大的舒适性和车辆使用的容易性,例如包括以基于用户行为的定制方式。装置和所执行的方法的灵敏控制可以称为灵敏性特征。
给定本技术的灵敏性特征,结合以上描述的有关的重叠的包容特征(例如,关于一个或多个可调节的车辆系统解释实际的用户期望和意图),该技术可以被称为包容和灵敏性系统-例如包容和灵敏性HVAC系统、包容和灵敏性NAV系统、包容和灵敏性自主驾驶系统、包容-和灵敏性半自主驾驶系统以及包容和灵敏性自动巡航控制系统)。
VIII.结论
本文中公开了本发明的各种实施例。所公开的实施例只是示例,其可以以各种替代形式及其组合实施。
以上描述的实施例仅仅是为了清楚地理解本发明的原理而阐述的实施方式的示例性阐述,以清楚例示理解本公开的原理。在可不偏脱离权利要求的范围的情况下来,可以对以上描述的实施例进行作出变化、修改和结组合。所有这些变化、修改和组合结合可通过由本公开发明和如下所附权利要求的范围来而包括在本文中。
Claims (10)
1.一种装置,包括:
处理器;和
包括指令的计算机可读存储介质,当由所述处理器执行所述指令时,使得所述处理器执行以下操作:包括:
接收用户通信数据;
解释所述用户通信数据,从而得到识别由所述用户通信数据指示的用户需求的解释输出;
基于所述解释输出生成主观系统输出,该主观系统输出指示调节可控系统以实现所识别的需求的方式;和
基于所述主观系统输出生成客观系统命令,用于调节所述可控系统的功能以满足所识别的需求。
2.如权利要求1所述的装置,其中所述客观系统命令包括计算机可执行代码。
3.如权利要求1所述的装置,其中所述操作还包括处理所述解释输出以得到前体数据,其中,基于所述解释输出生成主观系统输出的操作包括基于所述前体数据生成所述主观系统输出。
4.如权利要求3所述的装置,其中处理所述解释输出以得到前体数据的操作是基于所述解释输出和从用户模型数据库接收的用户简介数据的。
5.如权利要求3所述的装置,其中处理所述解释输出以得到前体数据的操作是基于所述解释输出和从语义词典数据库接收的语义数据的。
6.如权利要求1所述的装置,其中所述操作还包括执行所述客观系统命令来调节所述可控系统,以满足所识别的用户需求。
7.如权利要求1所述的装置,其中所述用户通信数据表示感测到的用户通信,包括用户手势。
8.如权利要求7所述的装置,其中,所述用户通信数据从检测所述手势的摄像头或基于光的传感器接收。
9.一种计算机可读存储介质,包括指令,当由处理器执行所述指令时,使所述处理器执行以下操作,包括:
接收用户通信数据;
解释所述用户通信数据,从而得到识别由所述用户通信数据指示的用户需求的解释输出;
基于所述解释输出生成主观系统输出,该主观系统输出指示调节可控系统以实现所识别的需求的方式;和
基于所述主观系统输出生成客观系统命令,用于调节所述可控系统的功能以满足所识别的需求。
10.一种方法,包括:
由包括处理器的装置接收用户通信数据;
由所述装置解释所述用户通信数据,从而得到识别由所述用户通信数据指示的用户需求的解释输出;
由所述装置基于所述解释输出生成主观系统输出,该主观系统输出指示调节可控系统以实现所识别的需求的方式;和
由所述装置基于所述主观系统输出生成客观系统命令,用于调节所述可控系统的功能,以满足所识别的需求。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201461935528P | 2014-02-04 | 2014-02-04 | |
US61/935528 | 2014-02-04 | ||
US14/611,625 US10198696B2 (en) | 2014-02-04 | 2015-02-02 | Apparatus and methods for converting user input accurately to a particular system function |
US14/611625 | 2015-02-02 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104914752A true CN104914752A (zh) | 2015-09-16 |
CN104914752B CN104914752B (zh) | 2018-11-13 |
Family
ID=53754773
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510120750.7A Expired - Fee Related CN104914752B (zh) | 2014-02-04 | 2015-02-04 | 将用户输入准确地变换为具体系统功能的装置和方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10198696B2 (zh) |
CN (1) | CN104914752B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111016567A (zh) * | 2019-12-30 | 2020-04-17 | 东风小康汽车有限公司重庆分公司 | 一种汽车驾驶模式的自动切换方法及装置 |
CN111610781A (zh) * | 2019-02-06 | 2020-09-01 | 哲内提 | 用于控制车辆的自动驾驶系统的方法和系统 |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016125164A2 (en) * | 2015-02-05 | 2016-08-11 | Verifood, Ltd. | Spectrometry system applications |
KR20170015114A (ko) * | 2015-07-30 | 2017-02-08 | 삼성전자주식회사 | 자율 주행 차량 및 자율 주행 차량 제어 방법 |
JP7044040B2 (ja) * | 2018-11-28 | 2022-03-30 | トヨタ自動車株式会社 | 質問応答装置、質問応答方法及びプログラム |
US11074484B2 (en) * | 2019-01-31 | 2021-07-27 | International Business Machines Corporation | Self-improving transferring in bot conversation |
WO2021060570A1 (ko) * | 2019-09-23 | 2021-04-01 | 엘지전자 주식회사 | 가전 기기 및 서버 |
US11872985B2 (en) * | 2021-03-30 | 2024-01-16 | Toyota Motor Engineering & Manufacturing North America, Inc. | Determining a setting for a cruise control |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1742242A (zh) * | 2003-02-14 | 2006-03-01 | 西门子公司 | 确定自动化系统的功能组件的处理顺序的方法以及自动化系统 |
US20080065291A1 (en) * | 2002-11-04 | 2008-03-13 | Automotive Technologies International, Inc. | Gesture-Based Control of Vehicular Components |
CN101536494A (zh) * | 2005-02-08 | 2009-09-16 | 奥布隆工业有限公司 | 用于基于姿势的控制系统的系统和方法 |
EP1577724B1 (en) * | 2004-03-15 | 2009-10-07 | Rockwell Automation Technologies, Inc. | Agent program environment |
US20090278915A1 (en) * | 2006-02-08 | 2009-11-12 | Oblong Industries, Inc. | Gesture-Based Control System For Vehicle Interfaces |
Family Cites Families (66)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4534056A (en) * | 1982-08-26 | 1985-08-06 | Westinghouse Electric Corp. | Voice-recognition elevator security system |
US4590604A (en) * | 1983-01-13 | 1986-05-20 | Westinghouse Electric Corp. | Voice-recognition elevator security system |
US4825385A (en) * | 1983-08-22 | 1989-04-25 | Nartron Corporation | Speech processor method and apparatus |
US4771390A (en) * | 1983-08-22 | 1988-09-13 | Nartron Corporation | Motor vehicle speech processor method and apparatus |
US20010020202A1 (en) * | 1999-09-21 | 2001-09-06 | American Calcar Inc. | Multimedia information and control system for automobiles |
US6009355A (en) * | 1997-01-28 | 1999-12-28 | American Calcar Inc. | Multimedia information and control system for automobiles |
US8482488B2 (en) * | 2004-12-22 | 2013-07-09 | Oakley, Inc. | Data input management system for wearable electronically enabled interface |
US6230138B1 (en) * | 2000-06-28 | 2001-05-08 | Visteon Global Technologies, Inc. | Method and apparatus for controlling multiple speech engines in an in-vehicle speech recognition system |
US7668718B2 (en) * | 2001-07-17 | 2010-02-23 | Custom Speech Usa, Inc. | Synchronized pattern recognition source data processed by manual or automatic means for creation of shared speaker-dependent speech user profile |
US8471677B2 (en) * | 2001-07-25 | 2013-06-25 | The Chamberlain Group, Inc. | Barrier movement system including a combined keypad and voice responsive transmitter |
CA2578653A1 (en) * | 2004-07-29 | 2006-02-09 | Kevin Ferguson | A human movement measurement system |
US7774202B2 (en) * | 2006-06-12 | 2010-08-10 | Lockheed Martin Corporation | Speech activated control system and related methods |
EP2057455B1 (en) * | 2006-08-17 | 2015-11-04 | Snap-on Incorporated | Vehicle diagnostic equipment providing hands free operation |
US7904298B2 (en) * | 2006-11-17 | 2011-03-08 | Rao Ashwin P | Predictive speech-to-text input |
US8099289B2 (en) * | 2008-02-13 | 2012-01-17 | Sensory, Inc. | Voice interface and search for electronic devices including bluetooth headsets and remote systems |
US9037530B2 (en) * | 2008-06-26 | 2015-05-19 | Microsoft Technology Licensing, Llc | Wearable electromyography-based human-computer interface |
US8170656B2 (en) * | 2008-06-26 | 2012-05-01 | Microsoft Corporation | Wearable electromyography-based controllers for human-computer interface |
TWI379205B (en) * | 2009-03-12 | 2012-12-11 | Ind Tech Res Inst | Instant communication interacting system and method thereof |
WO2010105671A1 (en) * | 2009-03-17 | 2010-09-23 | Flanders' Mechatronics Technology Centre Vzw | Method for controlling a torque transmitting device with learning function |
US9174123B2 (en) * | 2009-11-09 | 2015-11-03 | Invensense, Inc. | Handheld computer systems and techniques for character and command recognition related to human movements |
US20130278631A1 (en) * | 2010-02-28 | 2013-10-24 | Osterhout Group, Inc. | 3d positioning of augmented reality information |
US20120194552A1 (en) * | 2010-02-28 | 2012-08-02 | Osterhout Group, Inc. | Ar glasses with predictive control of external device based on event input |
US9341843B2 (en) * | 2010-02-28 | 2016-05-17 | Microsoft Technology Licensing, Llc | See-through near-eye display glasses with a small scale image source |
US9285589B2 (en) * | 2010-02-28 | 2016-03-15 | Microsoft Technology Licensing, Llc | AR glasses with event and sensor triggered control of AR eyepiece applications |
US20120200499A1 (en) * | 2010-02-28 | 2012-08-09 | Osterhout Group, Inc. | Ar glasses with event, sensor, and user action based control of applications resident on external devices with feedback |
US9759917B2 (en) * | 2010-02-28 | 2017-09-12 | Microsoft Technology Licensing, Llc | AR glasses with event and sensor triggered AR eyepiece interface to external devices |
US8477425B2 (en) * | 2010-02-28 | 2013-07-02 | Osterhout Group, Inc. | See-through near-eye display glasses including a partially reflective, partially transmitting optical element |
US20120212484A1 (en) * | 2010-02-28 | 2012-08-23 | Osterhout Group, Inc. | System and method for display content placement using distance and location information |
US10180572B2 (en) * | 2010-02-28 | 2019-01-15 | Microsoft Technology Licensing, Llc | AR glasses with event and user action control of external applications |
US20120206334A1 (en) * | 2010-02-28 | 2012-08-16 | Osterhout Group, Inc. | Ar glasses with event and user action capture device control of external applications |
US9129295B2 (en) * | 2010-02-28 | 2015-09-08 | Microsoft Technology Licensing, Llc | See-through near-eye display glasses with a fast response photochromic film system for quick transition from dark to clear |
US20120200488A1 (en) * | 2010-02-28 | 2012-08-09 | Osterhout Group, Inc. | Ar glasses with sensor and user action based control of eyepiece applications with feedback |
US20120194549A1 (en) * | 2010-02-28 | 2012-08-02 | Osterhout Group, Inc. | Ar glasses specific user interface based on a connected external device type |
US8488246B2 (en) * | 2010-02-28 | 2013-07-16 | Osterhout Group, Inc. | See-through near-eye display glasses including a curved polarizing film in the image source, a partially reflective, partially transmitting optical element and an optically flat film |
US20120194553A1 (en) * | 2010-02-28 | 2012-08-02 | Osterhout Group, Inc. | Ar glasses with sensor and user action based control of external devices with feedback |
US20120200601A1 (en) * | 2010-02-28 | 2012-08-09 | Osterhout Group, Inc. | Ar glasses with state triggered eye control interaction with advertising facility |
US20120212499A1 (en) * | 2010-02-28 | 2012-08-23 | Osterhout Group, Inc. | System and method for display content control during glasses movement |
US20120249797A1 (en) * | 2010-02-28 | 2012-10-04 | Osterhout Group, Inc. | Head-worn adaptive display |
US20120194418A1 (en) * | 2010-02-28 | 2012-08-02 | Osterhout Group, Inc. | Ar glasses with user action control and event input based control of eyepiece application |
US20120206335A1 (en) * | 2010-02-28 | 2012-08-16 | Osterhout Group, Inc. | Ar glasses with event, sensor, and user action based direct control of external devices with feedback |
US20130314303A1 (en) * | 2010-02-28 | 2013-11-28 | Osterhout Group, Inc. | Ar glasses with user action control of and between internal and external applications with feedback |
US20150309316A1 (en) * | 2011-04-06 | 2015-10-29 | Microsoft Technology Licensing, Llc | Ar glasses with predictive control of external device based on event input |
US20120206322A1 (en) * | 2010-02-28 | 2012-08-16 | Osterhout Group, Inc. | Ar glasses with event and sensor input triggered user action capture device control of ar eyepiece facility |
US20120235887A1 (en) * | 2010-02-28 | 2012-09-20 | Osterhout Group, Inc. | See-through near-eye display glasses including a partially reflective, partially transmitting optical element and an optically flat film |
US20120194551A1 (en) * | 2010-02-28 | 2012-08-02 | Osterhout Group, Inc. | Ar glasses with user-action based command and control of external devices |
US20120206485A1 (en) * | 2010-02-28 | 2012-08-16 | Osterhout Group, Inc. | Ar glasses with event and sensor triggered user movement control of ar eyepiece facilities |
US8964298B2 (en) * | 2010-02-28 | 2015-02-24 | Microsoft Corporation | Video display modification based on sensor input for a see-through near-to-eye display |
US20120194420A1 (en) * | 2010-02-28 | 2012-08-02 | Osterhout Group, Inc. | Ar glasses with event triggered user action control of ar eyepiece facility |
US20120194550A1 (en) * | 2010-02-28 | 2012-08-02 | Osterhout Group, Inc. | Sensor-based command and control of external devices with feedback from the external device to the ar glasses |
US8467133B2 (en) * | 2010-02-28 | 2013-06-18 | Osterhout Group, Inc. | See-through display with an optical assembly including a wedge-shaped illumination system |
US9229227B2 (en) * | 2010-02-28 | 2016-01-05 | Microsoft Technology Licensing, Llc | See-through near-eye display glasses with a light transmissive wedge shaped illumination system |
WO2011140303A1 (en) * | 2010-05-05 | 2011-11-10 | University Of Maryland, College Park | Time domain-based methods for noninvasive brain-machine interfaces |
US20120065972A1 (en) * | 2010-09-12 | 2012-03-15 | Var Systems Ltd. | Wireless voice recognition control system for controlling a welder power supply by voice commands |
US8504487B2 (en) | 2010-09-21 | 2013-08-06 | Sony Computer Entertainment America Llc | Evolution of a user interface based on learned idiosyncrasies and collected data of a user |
US9081550B2 (en) * | 2011-02-18 | 2015-07-14 | Nuance Communications, Inc. | Adding speech capabilities to existing computer applications with complex graphical user interfaces |
US20160187654A1 (en) * | 2011-02-28 | 2016-06-30 | Microsoft Technology Licensing, Llc | See-through near-eye display glasses with a light transmissive wedge shaped illumination system |
US8655829B2 (en) * | 2011-03-29 | 2014-02-18 | Manyworlds, Inc. | Activity stream-based recommendations system and method |
US9064006B2 (en) * | 2012-08-23 | 2015-06-23 | Microsoft Technology Licensing, Llc | Translating natural language utterances to keyword search queries |
US9453740B2 (en) * | 2012-10-30 | 2016-09-27 | Alpine Electronics, Inc. | Method of displaying objects on navigation map |
US20140242560A1 (en) * | 2013-02-15 | 2014-08-28 | Emotient | Facial expression training using feedback from automatic facial expression recognition |
US9122681B2 (en) * | 2013-03-15 | 2015-09-01 | Gordon Villy Cormack | Systems and methods for classifying electronic information using advanced active learning techniques |
US9633317B2 (en) * | 2013-06-20 | 2017-04-25 | Viv Labs, Inc. | Dynamically evolving cognitive architecture system based on a natural language intent interpreter |
US9594542B2 (en) * | 2013-06-20 | 2017-03-14 | Viv Labs, Inc. | Dynamically evolving cognitive architecture system based on training by third-party developers |
US20160235323A1 (en) * | 2013-09-25 | 2016-08-18 | Mindmaze Sa | Physiological parameter measurement and feedback system |
US10409382B2 (en) * | 2014-04-03 | 2019-09-10 | Honda Motor Co., Ltd. | Smart tutorial for gesture control system |
US9691378B1 (en) * | 2015-11-05 | 2017-06-27 | Amazon Technologies, Inc. | Methods and devices for selectively ignoring captured audio data |
-
2015
- 2015-02-02 US US14/611,625 patent/US10198696B2/en not_active Expired - Fee Related
- 2015-02-04 CN CN201510120750.7A patent/CN104914752B/zh not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080065291A1 (en) * | 2002-11-04 | 2008-03-13 | Automotive Technologies International, Inc. | Gesture-Based Control of Vehicular Components |
CN1742242A (zh) * | 2003-02-14 | 2006-03-01 | 西门子公司 | 确定自动化系统的功能组件的处理顺序的方法以及自动化系统 |
EP1577724B1 (en) * | 2004-03-15 | 2009-10-07 | Rockwell Automation Technologies, Inc. | Agent program environment |
CN101536494A (zh) * | 2005-02-08 | 2009-09-16 | 奥布隆工业有限公司 | 用于基于姿势的控制系统的系统和方法 |
US20090278915A1 (en) * | 2006-02-08 | 2009-11-12 | Oblong Industries, Inc. | Gesture-Based Control System For Vehicle Interfaces |
CN102112945A (zh) * | 2008-06-18 | 2011-06-29 | 奥布隆工业有限公司 | 用于交通工具接口的基于姿态的控制系统 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111610781A (zh) * | 2019-02-06 | 2020-09-01 | 哲内提 | 用于控制车辆的自动驾驶系统的方法和系统 |
CN111610781B (zh) * | 2019-02-06 | 2024-03-29 | 哲内提 | 用于控制车辆的自动驾驶系统的方法和系统 |
CN111016567A (zh) * | 2019-12-30 | 2020-04-17 | 东风小康汽车有限公司重庆分公司 | 一种汽车驾驶模式的自动切换方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
US20150220068A1 (en) | 2015-08-06 |
CN104914752B (zh) | 2018-11-13 |
US10198696B2 (en) | 2019-02-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104914752A (zh) | 将用户输入准确地变换为具体系统功能的装置和方法 | |
US10960838B2 (en) | Multi-sensor data fusion for automotive systems | |
US11034362B2 (en) | Portable personalization | |
CN108284840B (zh) | 结合乘员偏好的自主车辆控制系统和方法 | |
US11003414B2 (en) | Acoustic control system, apparatus and method | |
CN103677799B (zh) | 用于车辆系统的主观命令控制的方法和设备 | |
KR102249392B1 (ko) | 사용자 맞춤형 서비스를 위한 차량 기기 제어 장치 및 방법 | |
CA2952836A1 (en) | Text rule based multi-accent speech recognition with single acoustic model and automatic accent detection | |
CN110286745B (zh) | 对话处理系统、具有对话处理系统的车辆及对话处理方法 | |
CN108182093A (zh) | 智能型车辆信息娱乐系统 | |
US20210234932A1 (en) | Dynamic time-based playback of content in a vehicle | |
CN110956967A (zh) | 基于声纹识别的车辆控制方法与车辆 | |
CN115428067A (zh) | 用于提供个性化虚拟个人助理的系统和方法 | |
CN113614713A (zh) | 一种人机交互方法及装置、设备及车辆 | |
KR101518960B1 (ko) | 차량 편의장치의 자동 제어장치와 방법 | |
CN114387963A (zh) | 车辆及其控制方法 | |
DE112015003379T5 (de) | Systeme und Verfahren für eine adaptive Schnittstelle, um Anwendererfahrungen in einem Fahrzeug zu verbessern | |
WO2021070732A1 (ja) | 情報処理装置、情報処理方法、並びにプログラム | |
CN116353522A (zh) | 用于车辆的服务管理系统及服务管理方法 | |
CN116259320A (zh) | 基于语音的车辆控制方法及装置、存储介质、电子装置 | |
US20240013776A1 (en) | System and method for scenario context-aware voice assistant auto-activation | |
DE102015101507A1 (de) | Vorrichtung und Verfahren zum genauen Umwandeln eines Benutzereingangs in eine bestimmte Systemfunktion | |
CN114043987B (zh) | 指令处理方法、装置、终端和存储介质 | |
US20240127810A1 (en) | Dialogue Management Method, Dialogue Management System, And Computer-Readable Recording Medium | |
US20230206915A1 (en) | Method and system for assisting a user |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20181113 |
|
CF01 | Termination of patent right due to non-payment of annual fee |