CN102145695B - 包括时间代理的情感咨询系统 - Google Patents
包括时间代理的情感咨询系统 Download PDFInfo
- Publication number
- CN102145695B CN102145695B CN201110025319.6A CN201110025319A CN102145695B CN 102145695 B CN102145695 B CN 102145695B CN 201110025319 A CN201110025319 A CN 201110025319A CN 102145695 B CN102145695 B CN 102145695B
- Authority
- CN
- China
- Prior art keywords
- passenger
- time
- emotion
- spoken
- computing machine
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000008451 emotion Effects 0.000 title claims abstract description 35
- 230000002123 temporal effect Effects 0.000 claims abstract description 23
- 238000004088 simulation Methods 0.000 claims description 7
- 238000004891 communication Methods 0.000 claims description 4
- 238000000034 method Methods 0.000 description 22
- 239000003795 chemical substances by application Substances 0.000 description 12
- 230000008569 process Effects 0.000 description 11
- 238000013523 data management Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 6
- 239000000446 fuel Substances 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000008447 perception Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 239000000295 fuel oil Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003340 mental effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000009423 ventilation Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3605—Destination input or retrieval
- G01C21/3608—Destination input or retrieval using speech input, e.g. using speech recognition
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
- B60R16/0373—Voice control
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3629—Guidance using speech or audio output, e.g. text-to-speech
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- General Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Artificial Intelligence (AREA)
- Acoustics & Sound (AREA)
- Mechanical Engineering (AREA)
- Multimedia (AREA)
- Navigation (AREA)
Abstract
本发明公开了一种包括时间代理的情感咨询系统。一种由机动车辆的一个或多个乘客使用的情感咨询系统包括计算机。所述计算机被配置为接收指示车辆的操作状态的输入。所述计算机确定基于车辆的操作状态将时间信息提供给乘客的需求和将时间信息提供给乘客的乘客请求中的至少一个。计算机产生代表虚拟形象表情的数据和代表虚拟形象口语讲话的数据。所述口语讲话基于需求和请求中的至少一个以口语对话将时间信息提供给乘客。计算机输出代表虚拟形象视觉显示的数据和代表虚拟形象音频讲话播放的数据。
Description
技术领域
本发明涉及一种由机动车辆的一个或多个乘客使用的情感咨询系统(EAS，EmotiveAdvisorySystem)。
背景技术
驾驶员使用车辆时钟应同有乘客在车里为驾驶员检测时间时一样容易。此外，车辆时钟可以以模拟形式显示时间，从而易于被读取。难以使用工艺时钟收音机(artclockradio)的状态。由于仪表板的过度拥挤，所以已去除了在仪表板上可视的传统模拟时钟。工艺时钟的状态是在小的显示器上周期性地以数字格式显示时间的LED或LC显示器。
读取显示器的步骤一般包括将目光从路面移开并等待时间显示在显示器上。当使用太阳镜或具有近场视觉缺陷(nearfieldvisualimpariment)时，经常无法观看到显示器。因此，在读取时间之前，必须脱下或戴上眼镜，并且在读取时间的同时可能无法充分地观看到路面。此外，工艺时钟的状态缺少可以使其容易使用的很多特征。由于人们经常需要进行一些计算以获得其需要的信息，因此数字时间显示器不方便。例如，如果你有1:10PM的约会并且您的时钟显示12:56PM，则您需要进行一些心算以确定您有14分钟以到达您的约定。
对于夏令时或时区，工艺时钟的状态是不正确的。当您在底特律时它们无法告诉您芝加哥时间。驾驶员应能够询问时钟“还有多长时间？”，时钟告诉您到达目的地有多少分钟。不幸的是，车辆时钟没有很好地集成到其它车辆功能。例如，无法计算燃油用完的时间或车辆看到日出或一些坏天气的时间。
此外，车辆仪表板继续变得越来越复杂。随着添加新的系统并且现有系统变得更复杂，增加在仪表板上的空间竞争以及控制是越来越难以使用。新的系统包括导航系统、MP3播放器、免提蜂窝电话和卫星广播；而变得更加复杂的现有系统是FM/AM广播、HVAC(加热、通风和空气调节)、车辆灯光和动力传动系统控制。
逐渐地，从传统控制移向人机接口以管理这些复杂的情况。在一种方式中，在机动车辆中的多个接口合并到在情感咨询系统系统(EAS)中的单个接口中。
可在公开号为2008/0269958的美国专利申请中查到背景信息。
发明内容
在本发明的一实施例中，一种由机动车辆的一个或多个乘客使用的情感咨询系统包括计算机。所述计算机被配置为接收指示车辆的操作状态的输入。所述计算机确定基于车辆的操作状态将时间信息提供给乘客的需求(1)和将时间信息提供给乘客的乘客请求(2)中的至少一个。计算机产生代表虚拟形象表情的数据和代表虚拟形象口语讲话的数据。所述口语讲话基于需求和请求中的至少一个以口语对话将时间信息提供给乘客。计算机输出代表虚拟形象视觉显示的数据和代表虚拟形象音频讲话播放的数据。
可以以各种方式实现本发明的实施例。例如，计算机还可被配置为提供自然语言接口以与乘客通信。例如，表情和口语讲话可将虚拟形象的模拟的感情状态传达给乘客。
在一个实施例中，计算机还被配置为以口语对话的形式接收指示乘客请求将时间信息提供给乘客的输入。口语讲话基于请求以口语对话将时间信息提供给乘客。
在口语讲话中提供的时间信息还可基于用户喜好，和/或还可基于语境信息。
在一个实施例中，计算机还可被配置为确定基于作为输入以口语对话的形式接收的先前命令将时间信息提供给乘客的需求，该先前命令指示乘客设置的闹钟。先前命令还可指示闹钟的紧急事件。
另外，应该理解本发明的实施例可基于从各种源获得的信息提供时间信息。例如，计算机还可被配置为与车辆系统的导航系统通信。在这种情况下，部分地基于从导航系统获得的信息，口语讲话以口语对话将时间信息提供给乘客。在另一示例中，计算机可与机动车辆的全球定位系统或与机动车辆分离的时间应用服务器通信。
在另一实施例中，本发明包括一种由机动车辆的一个或多个乘客使用的情感咨询系统，所述情感咨询系统包括计算机，计算机被配置为确定基于车辆的操作状态将时间信息提供给乘客的需求。计算机产生数据，所述数据表示基于所述需求以口语对话将时间信息提供给乘客的口语讲话，并且计算机输出表示音频播放的讲话的数据。
附图说明
图1是在一个实施例中的用于机动车辆的情感咨询系统的框图；
图2是在一个实施例中的用于车辆系统的包括时间代理的情感咨询系统的框图；
图3示出包括各种功能模块的时间代理的实施例；
图4-7示出时间代理的各种功能模块的操作；
图8A至图8D示出用于时间代理的消息协议的各方面；
图9是示出在本发明一个实施例中的EAS代理期望通告时间的方法的流程图；
图10是示出在本发明的一个实施例中的驾驶员请求时间信息的驾驶员方法的流程图；
图11是示出在本发明的一个实施例中的EAS代理期望知道时间的方法的流程图。
具体实施方式
本发明的实施例包括由机动车辆的一个或多个乘客使用的情感咨询系统(EAS)。用于实现所述系统的一个方式中，将机动车辆中的多个车辆接口合并到情感咨询系统(EAS)中的单个接口中。
通常，用于机动车辆的情感咨询系统(EAS)将信息动情地传达给乘客。所述系统接收指示车辆的操作状态的输入，将该输入转换为表示模拟的感情状态的数据并产生表示虚拟形象(avatar)的数据，该虚拟形象表示模拟的情感状态。虚拟形象可被显示。所述系统可从乘客接收关于虚拟形象的情感状态的询问，并响应该询问。在公开号为2008/0269958的美国专利申请中描述了示例情感咨询系统和方法。
如图1所示，情感咨询系统(EAS)10的实施例帮助车辆14的乘客/用户12操作车辆14并从车辆14通过网络17远程访问信息源16a、16b、16c(例如，网络服务器等)。当然，EAS10的其它实施例可实现在任何类型的装置和/或机器的环境中。例如，EAS10可附于家用电器、手持计算装置等。EAS10的特定实施例可实现为可以与其它装置和/或机器拆卸的集成模块。因此，用户可随身携带它们的EAS10并使用EAS10与其希望交互的装置和/或机器进行交互。其它配置和布置也是可以的。
在图1的实施例中，传感器18检测由乘客12产生的输入并将该输入转换为用于计算机20的数字信息。计算机20接收这些输入以及来自信息源16a、16b、16c和车辆系统22的输入。计算机20处理这些输入并产生用于乘客12、信息源16a、16b、16c和车辆系统22中的至少一个的输出。致动器/输出24等将用于乘客12的输出从数字格式转换为乘客12能够感知的格式，例如，可视、可听、可触知、触觉的等。
在一些实施例中，乘客12可通过遵循对话规则(例如，Grice准则)的口语对话与EAS10通信。例如，乘客12可提问“在该区域中有好的餐馆吗？”。作为响应，EAS10可从车辆系统22询问适当的信息源16a、16b、16c，以及地理位置信息，确定车辆14的当前位置附近的高评级的餐馆的列表。EAS10可使用模拟的对话答复：“有几个。您要听列表吗？”来自乘客12的肯定答复可引起EAS10读列表。
乘客12还可命令EAS10改变与车辆系统22相关联的特定参数。例如，乘客12可以说“今天我想开快点”。作为响应，EAS10可提问“您要优化动力传动系统以执行驱动吗？”来自乘客12的肯定答复可引起EAS10改变引擎调节参数以增强性能。
在一些实施例中，可不用按任何按钮或相反将输入实体地提供给EAS10来发起与EAS10的口语对话。该开放式麦克风功能允许乘客12以与乘客12会发起与车辆14的其它乘客的会话相似的方式发起与EAS10的会话。
乘客12还可在EAS10会话时“干涉”EAS10。例如，当EAS10读取上述的餐馆的列表时，乘客12可插话“告诉我更多关于餐馆X的信息”。作为响应，EAS10可停止读取列表并询问适当的信息源16a、16b、16c以收集关于餐馆X的附加信息。然后，EAS10可将附加信息读给乘客12。
在一些实施例中，致动器/输出24包括选择性地显示虚拟形象的屏幕。虚拟形象可以是人、动物、机器、植物、车辆等的图形表示，并且可包括能够视觉地传达情感的特征(例如，脸部等)。例如，如果车辆14的速度高于可由制造商或用户定义的阈值，则可从视野隐藏虚拟形象。然而，能够继续听到虚拟形象的声音。当然，可以使用任何合适类型的显示技术(例如，全息或平视显示)。
虚拟形象的模拟的人情感状态可取决于各种不同标准，所述各种不同标准包括估计的乘客12的情感状态、车辆14的情况和/或EAS10执行任务的质量等。例如，传感器18可检测乘客12的头部移动、语音韵律、生物测定(biometric)信息等，其中，当计算机20处理乘客12的头部移动、语音韵律、生物测定信息等时，指示乘客12为愤怒。在一个示例响应中，EAS10可限制或中止当乘客12愤怒时发起的与乘客12的对话。在另一示例响应中，虚拟形象可被渲染成具有关心的面部表情的蓝色调并以平静的声音提问“有什么烦心事吗？”如果乘客12通过回答“因为这种交通情况，我想上班可能会迟到”来答复，则虚拟形象可提问“您希望我寻找快捷路径吗？”或“要我给什么人打电话吗？”如果乘客12回答“不。这仅是...”，则虚拟形象可提问“您要听古典音乐吗？”。乘客12可回答“不要。但是能告诉我即将到来的选举吗？”。作为响应，EAS10可询问适当的信息源16a、16b、16c以获得与选举相关的当前新闻。在询问期间，如果与信息源16a、16b、16c的通信链接强，则虚拟形象可表现出高兴。然而，如果与信息源16a、16b、16c的通信链接弱，则虚拟形象可表现出沮丧，促使乘客提问“获得与选举相关的新闻有困难吗？”虚拟形象可回答“是的，我难以建立远程通信链接”。
在上述的交互中，例如，如果车辆14表现出频繁地加速和减速或其它粗暴的操纵，则虚拟形象可表现出变得受挫。模拟的情感的这种改变可促使乘客14提问“有什么事吗？”虚拟形象可回答“您的驾驶在损坏我的燃油效率。您也许被要求减少频繁的加速和减速”。例如，如果虚拟形象没有理解来自乘客14的命令或询问，则虚拟形象还可表现出困惑。这种类型的对话可以与虚拟形象持续进行，虚拟形象通过其外观、表情、音调、词汇选择等来动态地改变它的模拟的情感以将信息传达给乘客12。
基于乘客12与EAS10之间的交互的历史，EAS10还可学习预料乘客12的请求、命令和/或喜好。例如，EAS10可获知，当周围温度超过80华氏度时乘客12喜欢72华氏度的车内温度，当周围温度低于40华氏度并且是阴天时乘客12喜欢78华氏度的陈内温度。这种气候控制设置和周围温度的记录可通知EAS10乘客12的这种喜好。相似地，EAS10可学习，乘客12喜欢在车辆启动时收听当地交通报告。紧跟车辆启动的对于交通新闻的各种请求的记录可促使EAS10在车辆启动时收集这种信息，并向乘客12提问是否喜欢收听当地交通。还可以进行其它学习的行动。
乘客限定的规则可以补充和/或初始化这些学习的请求、命令和/或喜好。例如，乘客12可通知EAS10不喜欢讨论体育而喜欢讨论音乐等。在该示例中，EAS10可避免与乘客12发起关于体育的会话，而周期性地与乘客12进行关于音乐的会话。
理解的是，可以以各种方式实现情感咨询系统(EAS)，在此的描述仅是示例。在公开号为2008/0269958的美国专利申请中提供了示例情感咨询系统的进一步的更详细的描述。通常，继续参照图1，计算机20与信息源16a、16b、16c进行通信并与各种外部装置(例如，按钮、视频相机、车辆BUS控制器、声音装置和主车辆网络)进行通信。计算机20也与可渲染虚拟形象的显示器进行通信。当然，其它配置和布置也是可以的。
图2示出示例实施例的用于机动车辆的情感咨询系统(EAS)30的框图。更详细地示出EAS30，并且EAS30一般可以与上述的图1的EAS10相似的方式进行操作。如所示出的那样，口语对话系统/分配器(dispatcher)32与语音识别部件34和虚拟形象部件36通信，语音识别部件34和虚拟形象部件36与驾驶员38进行交互。同样地，口语对话系统/分配器32还与情感对话部件40通信。EAS30的各种部件实现在处理器42中。处理器42可采取本领域技术人员理解的任何合适的装置的形式。例如，处理器42可实现为在车辆中的控制模块。更详细地，动力传动系统AI44与口语对话系统/分配器32进行通信，并与控制器局域网络(CAN)接口50进行通信，该CAN接口50包括数据管理器52和CAN管理器54。CAN是当前用于车辆的嵌入的网络。其它实现也是可以的。
中间件(Middleware)将EAS30与一个或多个软件代理(softwareagent)60链接，该软件代理60包括时间代理62。通常，软件代理可以是与图2中示出的EAS30(或图1的EAS10)交互以实现特定任务/功能的独立程序。例如，代理实现特定任务或功能，并且可利用口语对话系统/分配器32和其它系统部件来与驾驶员38交互。
软件代理可被配置为接收各种输入。代理可处理这些输入，提供各种输出并根据输入执行这些输入指定的任务。代理还可处理车辆系统输出。代理还可输出作为代理多好地执行其期望的功能的指示器的由虚拟形象36呈现的感情输出。
根据本发明的示出的实施例，时钟被实现为EAS代理、时间代理62。EAS系统30允许时钟通过口语对话与驾驶员38交互，而不是被动地等待时钟信息。
时间客户机64实现在移动装置66上。移动装置66可采取本领域技术人员理解的任何合适的装置的形式，并通过链接70与口语对话系统/分配器32通信。例如，移动装置66可采取移动电话或PDA的形式。在一个实现中，使用了ARM硬件(ARMHoldings，剑桥，英格兰，英国)和Window移动操作系统(微软公司，雷德蒙，华盛顿)。时间客户机64与示出的位于互联网74上的时间应用程序服务器72通信。
继续参照图2，将进一步详细描述示例实施例。通过使用声音接口来消除转移目光事件(look-awayevent)。此外，EAS30可使用语境感知推荐系统(contextawarerecommendersystem)来预测驾驶员的所需时钟信息并主动地提供该时钟信息。可由命令通过将导航或虚拟形象面板替换为时钟图形来将时钟信息可视地显示在EAS屏幕上。时钟信息还可被显示在平视显示器(headupdisplay)上。在这种情况下，由于当驾驶员请求时钟信息时该时钟信息是可用的，所以目光转移被最小化。EAS时钟/时间代理62通过EAS消息定向中间件(MOM，messageorientedmiddleware)集成到在EAS系统30中的其它代理60中。同样，EAS30通过CAN接口50与各种车辆系统80通信，各种车辆系统80包括例如传动系统(powertrain)控制模块82、导航系统84和全球定位系统86。
因此，时间代理62能够从GPS86获得当前时间、位置、速度、方位、日出、日落等信息，从导航系统84获得路径信息(例如，估计的到达时间、到下一出口的时间)。时间代理62可从网络资源检索特定地址或GPS位置的地理编码(geocode)信息，例如，对于邮政编码的时区。通过这种方式，时间代理62可响应各种驾驶员的请求，例如：“芝加哥时间是几点？”；“我的当前位置处的当前时间是几点？”；“在我看到日落时是几点？”；“日落时我在哪？”；“午饭时间我在哪？”或“5:00我在哪？”。
EAS时钟代理62还可设置闹钟(alarm)以管理特定时间和紧急事件。驾驶员可唤醒(evoke)多个语音命令中的一个以设置闹钟，例如，“每半小时告诉我时间”；“一小时以后告诉我时间”；“日出时告诉我时间”。与所有时间命令一样，可通过如下的说话来赋予紧急事件等级，例如：“一个半小时后中断新闻告诉我时间”。EAS时钟代理62还能够设置用于其它代理的闹钟，所以如果燃料监控器代理每10分钟需要闹钟以更新燃料参数，则燃料监控器代理可使用在预设间隔唤醒闹钟的时钟代理62来设置闹钟。
此外，闹钟可提供驾驶员选择的钟声(chime)或铃声，从而无需中断音频娱乐或EAS口语对话而提供一些时间信息。例如，钟声或铃声可不需要中断音频娱乐或EAS口语对话而提供“每个小时的整点(topofthehour)”信息。如所描述的那样，其它闹钟还可被实现为钟声或铃声。驾驶员可唤醒命令以将钟声或铃声设置为闹钟，例如，“每个小时的整点处响铃”；“一小时后播放我喜欢的铃声”；“日落前20分钟响铃”。
此外，时间代理62可根据存储在用户简档(userprofile)90中的用户喜好采取行动。如上面所讨论的那样，时间代理62还被示出为与显示器驱动器92连接。
应该理解，EAS10、EAS30、软件时间代理62和其它示出的系统和部件仅是示例，本发明的各种实现是可以的。
图3示出包括各种功能模块的时间代理的实施例。更详细地，时间代理62包括用于实现期望的功能的各种部件。包括各种部件的时间代理62可以以软件和/或本领域普通技术人员理解的任何合适的方式实现。如图3所示，时间代理62包括时间计算器部件100、位置模块102、结果类型模块104、优先级模块106和精确度模块108。
图4-7示出时间代理62的各种功能模块102、104、106、108的操作。在图4中，位置模块102接收来自时间应用程序服务器72的语境信息120、来自其它EAS代理60的语境信息122、来自用户简档90的用户喜好124和来自口语对话系统32的语境信息126。位置模块102接收位置元素130作为输入，并产生包括修正的位置元素132和时区信息134的输出。
在图5中，结果类型模块104接收来自时间应用程序服务器72的语境信息120、来自其它EAS代理60的语境信息122、来自用户简档90的用户喜好124和来自口语对话系统32的语境信息126。结果类型模块104接收结果类型元素140作为输入，并产生修正的结果类型元素142作为输出。
在图6中，优先级模块106接收来自时间应用程序服务器72的语境信息120、来自其它EAS代理60的语境信息122、来自用户简档90的用户喜好124和来自口语对话系统32的语境信息126。优先级模块106接收优先级元素150作为输入，并产生修正的优先级元素152作为输出。
在图7中，精确度模块108接收来自时间应用程序服务器72的语境信息120、来自其它EAS代理60的语境信息122、来自用户简档90的用户喜好124和来自口语对话系统32的语境信息126。精确度模块108接收精确度元素160作为输入，并产生精确度元素162作为输出。
图8A至图8D示出在示出的实施例中的用于时间代理的消息协议的各方面。例如，EAS代理可期望通告时间，驾驶员可请求时间信息，或者EAS代理可期望知道时间。通常，(代理或驾驶员的)时间请求、代理通告和来自时间代理的时间结果遵循定义的消息协议。图8A至图8D示出用于这些协议的一个可能性。在附图8A-8D中的图表示可扩展标记口语(XML)文档/消息，但是应该理解其它消息或对象格式是可以的。
图8A示出用于在170的代理通告(agentannouncements)的顶层元素(toplevelelement)。更详细地，图8A示出用于期望通告时间的EAS代理的消息协议。代理通告元素170包括属性172，属性172包括相对/绝对属性174、请求器ID属性176和请求ID属性178。代理通告元素170包括子元素，该子元素包括位置元素180、精确度元素182、优先级模型元素184和结果类型元素186。
图8B示出用于在190的驾驶员时间请求消息的顶层元素。更详细地，图8B示出用于驾驶员的时间请求的消息协议。驾驶员时间请求消息元素190包括属性192，该属性192包括相对/绝对属性194和请求ID属性198。驾驶员时间请求消息元素190包括子元素，该子元素包括位置元素200、精确度元素202、优先级模型元素204和结果类型元素206。
图8C示出在210的用于代理时间请求消息的顶层元素。更详细地，图8C示出用于EAS代理的时间请求的消息协议，该EAS代理期望知道特定时间信息。代理时间请求消息元素210包括属性212，该属性212包括请求器ID属性216和请求ID属性218。代理时间请求消息元素210包括子元素，该子元素包括位置元素220、精确度元素222、优先级模型元素224和结果类型元素226。
图8D示出在230的用于时间结果的顶层元素。更详细地，图8D示出用于来自时间代理的时间结果的消息协议。时间结果230包括属性232，该属性232包括请求器ID属性236和请求ID属性238。时间结果元素230包括子元素，该子元素包括位置元素240、时间元素242、优先级模型元素244和结果类型元素246。
继续参照图8A至图8D，通常，相对/绝对属性指示消息与相对时间相关还是与绝对时间相关；请求器ID属性指示请求或通告EAS代理；请求ID属性指示用于特定请求的唯一ID。此外，通常，位置子元素指示用于感兴趣的特定时间的位置，其原因是时间在不同的位置(时区)不同。至时间代理的消息中的位置子元素被位置模块102(图4)处理，以产生用于时间结果的位置子元素。精确度子元素指示对感兴趣的特定时间所需的精确度，例如，黑夜或白天；早晨、下午或晚上；大约一刻钟等。至时间代理的消息中的精确度子元素被精确度模块108(图7)处理，以产生用于时间结果的精确度。
优先级模型子元素指示用于特定请求或通告的优先级，例如，重要的或参考性的。至时间代理的消息中的优先级子元素被优先级模块106(图6)处理，以产生用于时间代理的优先级子元素。
结果类型子元素指示用于特定请求或通告的结果类型，例如，驾驶员将到达特定目的地、感兴趣的地方或位置时的估计的绝对时间；诸如直到一些事件所需多长时间或从一些事件经过了多长时间等的相对时间；或在感兴趣的一些时间驾驶员处于的位置。至时间代理的消息中的结果类型子元素被结果类型模块104(图5)处理，以产生用于时间结果的结果类型子元素。
时间子元素指示与时间结果元素230相关联的时间。
图9示出在本发明的一实施例中EAS代理期望通告时间的方法的流程图。在块260，EAS代理通过数据管理器将请求发送到时间代理。时间代理接收该请求。在块262，时间代理确定消息的优先级。时间代理处理请求以产生时间结果。更详细地，在块264，时间代理应用时区信息。在块266，时间代理应用来自请求的精确度信息；以及，在块268，时间代理应用来自用户简档的精确度信息。在块270，时间代理通常应用语境信息。
在块272，在确定时间结果的同时，时间代理通过数据管理器将请求发送到分配器。在块274，分配器唤醒事件的序列以与驾驶员进行口语对话。在块276，分配器在数据管理器中公布请求完成的消息。在块278，如果请求，则时间代理在数据管理器中向请求的EAS代理公布确认。
图10示出在本发明的一个实施例中驾驶员请求时间信息的方法的流程图。在块280，驾驶员(例如，通过口语请求)请求时间信息。在块282，EAS系统的语音识别将对话动作返回到分配器以进行处理。在块284，分配器通过数据管理器将请求发送到时间代理。
时间代理处理接收的请求。在块286，时间代理计算时区。在块288，时间代理计算需要的精确度。在块290，时间代理计算需要的优先级。在块292，计算时间结果。在块294，时间代理通过数据管理器将请求发送给分配器。在块296，在适当的时间，分配器将消息发送给口语对话系统。在块298，口语对话系统将正确的对话提供给驾驶员。在块300，分配器在数据管理器中公布请求完成的消息。
图11是在本发明的实施例中EAS代理期望知道时间的方法的流程图。在块310，EAS代理通过数据管理器将请求发送给时间代理。在块312，时间代理计算时区。在块314，时间代理计算需要的优先级。在块316，时间代理计算需要的优先级。在块318，时间代理计算请求的结果。在块320，时间代理通过数据管理器将时间结果输出到时间请求的EAS代理。
虽然示出和描述了本发明的实施例，但是这些实施例不试图示出和描述了本发明的所有可能的形式。相反，在说明书中使用的词汇是描述性的词汇，而不是限制性的词汇，应该理解，在不脱离本发明的精神和范围的情况下可以进行各种修改。
Claims (9)
1.一种由机动车辆的一个或多个乘客使用的情感咨询系统，所述系统包括：
计算机，该计算机被配置为：
接收指示车辆的操作状态的输入；
确定基于车辆的操作状态和以口语对话的形式接收的先前命令将时间信息提供给乘客的需求，其中，所述先前命令指示由乘客设置的闹铃；
产生代表虚拟形象表情的数据和代表虚拟形象口语讲话的数据，所述口语讲话基于所述需求以口语对话的形式将时间信息提供给乘客；
输出代表虚拟形象视觉显示的数据；
输出代表虚拟形象讲话的数据以进行播放。
2.如权利要求1所述的情感咨询系统，其中，所述计算机还被配置为：
提供用于与乘客通信的自然语言接口。
3.如权利要求1所述的情感咨询系统，其中，表情和口语讲话将虚拟形象的模拟的情感状态传达给乘客。
4.如权利要求1所述的情感咨询系统，其中，计算机还被配置为：
基于所述需求并且还基于学习的用户喜好确定在口语讲话中提供的时间信息。
5.如权利要求1所述的情感咨询系统，其中，计算机还被配置为：
基于所述需求并且还基于语境信息确定在口语讲话中提供的时间信息。
6.如权利要求1所述的情感咨询系统，其中，所述以口语对话的形式接收的先前命令还指示用于闹铃的紧急事件。
7.如权利要求1所述的情感咨询系统，其中，计算机还被配置为：
与所述机动车辆的导航系统通信，
其中，部分基于从导航系统获得的信息，口语讲话以口语对话将时间信息提供给乘客。
8.如权利要求1所述的情感咨询系统，其中，计算机还被配置为：
与所述机动车辆的全球定位系统通信；
其中，部分基于从全球定位系统获得的信息，口语讲话以口语对话将时间信息提供给乘客。
9.如权利要求1所述的情感咨询系统，其中，计算机还被配置为：
与时间应用服务器通信，该时间应用服务器与所述机动车辆分离，
其中，部分基于从时间应用服务器获得的信息，口语讲话以口语对话将时间信息提供给乘客。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US12/702,625 | 2010-02-09 | ||
| US12/702,625 US8400332B2 (en) | 2010-02-09 | 2010-02-09 | Emotive advisory system including time agent |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102145695A CN102145695A (zh) | 2011-08-10 |
| CN102145695B true CN102145695B (zh) | 2015-12-09 |
Family
ID=44316799
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201110025319.6A Active CN102145695B (zh) | 2010-02-09 | 2011-01-19 | 包括时间代理的情感咨询系统 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US8400332B2 (zh) |
| CN (1) | CN102145695B (zh) |
| DE (1) | DE102011002985A1 (zh) |
Families Citing this family (70)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8181205B2 (en) | 2002-09-24 | 2012-05-15 | Russ Samuel H | PVR channel and PVR IPG information |
| US20110093158A1 (en) * | 2009-10-21 | 2011-04-21 | Ford Global Technologies, Llc | Smart vehicle manuals and maintenance tracking system |
| JP2011209787A (ja) * | 2010-03-29 | 2011-10-20 | Sony Corp | 情報処理装置、および情報処理方法、並びにプログラム |
| US20120130717A1 (en) * | 2010-11-19 | 2012-05-24 | Microsoft Corporation | Real-time Animation for an Expressive Avatar |
| US9536517B2 (en) | 2011-11-18 | 2017-01-03 | At&T Intellectual Property I, L.P. | System and method for crowd-sourced data labeling |
| US20140309913A1 (en) * | 2013-04-15 | 2014-10-16 | Flextronics Ap, Llc | Relay and Exchange Protocol in an Automated Zone-Based Vehicular Traffic Control Environment |
| KR20140008870A (ko) * | 2012-07-12 | 2014-01-22 | 삼성전자주식회사 | 컨텐츠 정보 제공 방법 및 이를 적용한 방송 수신 장치 |
| US20140142948A1 (en) * | 2012-11-21 | 2014-05-22 | Somya Rathi | Systems and methods for in-vehicle context formation |
| DE102013006173A1 (de) * | 2013-04-10 | 2014-10-16 | Audi Ag | Verfahren und Vorrichtung zur proaktiven Dialogführung |
| CN104379414B (zh) * | 2013-04-15 | 2018-05-29 | 自动连接控股有限责任公司 | 用户接口和基于用户简档的虚拟个性呈现 |
| US9431008B2 (en) * | 2013-05-29 | 2016-08-30 | Nuance Communications, Inc. | Multiple parallel dialogs in smart phone applications |
| US9728184B2 (en) | 2013-06-18 | 2017-08-08 | Microsoft Technology Licensing, Llc | Restructuring deep neural network acoustic models |
| US9589565B2 (en) | 2013-06-21 | 2017-03-07 | Microsoft Technology Licensing, Llc | Environmentally aware dialog policies and response generation |
| US9311298B2 (en) | 2013-06-21 | 2016-04-12 | Microsoft Technology Licensing, Llc | Building conversational understanding systems using a toolset |
| US9324321B2 (en) | 2014-03-07 | 2016-04-26 | Microsoft Technology Licensing, Llc | Low-footprint adaptation and personalization for a deep neural network |
| US9529794B2 (en) | 2014-03-27 | 2016-12-27 | Microsoft Technology Licensing, Llc | Flexible schema for language model customization |
| US9614724B2 (en) | 2014-04-21 | 2017-04-04 | Microsoft Technology Licensing, Llc | Session-based device configuration |
| US9520127B2 (en) | 2014-04-29 | 2016-12-13 | Microsoft Technology Licensing, Llc | Shared hidden layer combination for speech recognition systems |
| US9384334B2 (en) | 2014-05-12 | 2016-07-05 | Microsoft Technology Licensing, Llc | Content discovery in managed wireless distribution networks |
| US10111099B2 (en) | 2014-05-12 | 2018-10-23 | Microsoft Technology Licensing, Llc | Distributing content in managed wireless distribution networks |
| US9430667B2 (en) | 2014-05-12 | 2016-08-30 | Microsoft Technology Licensing, Llc | Managed wireless distribution network |
| US9384335B2 (en) | 2014-05-12 | 2016-07-05 | Microsoft Technology Licensing, Llc | Content delivery prioritization in managed wireless distribution networks |
| US9874914B2 (en) | 2014-05-19 | 2018-01-23 | Microsoft Technology Licensing, Llc | Power management contracts for accessory devices |
| US10037202B2 (en) | 2014-06-03 | 2018-07-31 | Microsoft Technology Licensing, Llc | Techniques to isolating a portion of an online computing service |
| US9367490B2 (en) | 2014-06-13 | 2016-06-14 | Microsoft Technology Licensing, Llc | Reversible connector for accessory devices |
| JPWO2016136062A1 (ja) * | 2015-02-27 | 2017-12-07 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
| US20160320195A1 (en) | 2015-04-29 | 2016-11-03 | Ford Global Technologies, Llc | Ride-sharing long-term ride-share groups |
| US20160321771A1 (en) | 2015-04-29 | 2016-11-03 | Ford Global Technologies, Llc | Ride-sharing range contours |
| US20160320194A1 (en) | 2015-04-29 | 2016-11-03 | Ford Global Technologies, Llc | Ride-sharing user path disturbances and user re-routing |
| US20160320198A1 (en) | 2015-04-29 | 2016-11-03 | Ford Global Technologies, Llc | Ride-sharing routing using contextual constraints |
| US10796248B2 (en) | 2015-04-29 | 2020-10-06 | Ford Global Technologies, Llc | Ride-sharing joint rental groups |
| US10692126B2 (en) | 2015-11-17 | 2020-06-23 | Nio Usa, Inc. | Network-based system for selling and servicing cars |
| DE102016200815A1 (de) * | 2015-12-15 | 2017-06-22 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren und Vorrichtung zur Sprachsteuerung eines Kraftfahrzeugs |
| US20180012197A1 (en) | 2016-07-07 | 2018-01-11 | NextEv USA, Inc. | Battery exchange licensing program based on state of charge of battery pack |
| DE102016212681A1 (de) | 2016-07-12 | 2018-01-18 | Audi Ag | Steuervorrichtung und Verfahren zum sprachbasierten Betreiben eines Kraftfahrzeugs |
| US9928734B2 (en) | 2016-08-02 | 2018-03-27 | Nio Usa, Inc. | Vehicle-to-pedestrian communication systems |
| US10209949B2 (en) * | 2016-08-23 | 2019-02-19 | Google Llc | Automated vehicle operator stress reduction |
| US10074359B2 (en) * | 2016-11-01 | 2018-09-11 | Google Llc | Dynamic text-to-speech provisioning |
| US10031523B2 (en) | 2016-11-07 | 2018-07-24 | Nio Usa, Inc. | Method and system for behavioral sharing in autonomous vehicles |
| US10410064B2 (en) | 2016-11-11 | 2019-09-10 | Nio Usa, Inc. | System for tracking and identifying vehicles and pedestrians |
| US10694357B2 (en) | 2016-11-11 | 2020-06-23 | Nio Usa, Inc. | Using vehicle sensor data to monitor pedestrian health |
| US10708547B2 (en) | 2016-11-11 | 2020-07-07 | Nio Usa, Inc. | Using vehicle sensor data to monitor environmental and geologic conditions |
| US10699305B2 (en) | 2016-11-21 | 2020-06-30 | Nio Usa, Inc. | Smart refill assistant for electric vehicles |
| US10249104B2 (en) | 2016-12-06 | 2019-04-02 | Nio Usa, Inc. | Lease observation and event recording |
| US10074223B2 (en) | 2017-01-13 | 2018-09-11 | Nio Usa, Inc. | Secured vehicle for user use only |
| US9984572B1 (en) | 2017-01-16 | 2018-05-29 | Nio Usa, Inc. | Method and system for sharing parking space availability among autonomous vehicles |
| US10471829B2 (en) | 2017-01-16 | 2019-11-12 | Nio Usa, Inc. | Self-destruct zone and autonomous vehicle navigation |
| US10031521B1 (en) | 2017-01-16 | 2018-07-24 | Nio Usa, Inc. | Method and system for using weather information in operation of autonomous vehicles |
| US10286915B2 (en) | 2017-01-17 | 2019-05-14 | Nio Usa, Inc. | Machine learning for personalized driving |
| US10464530B2 (en) | 2017-01-17 | 2019-11-05 | Nio Usa, Inc. | Voice biometric pre-purchase enrollment for autonomous vehicles |
| US10897469B2 (en) | 2017-02-02 | 2021-01-19 | Nio Usa, Inc. | System and method for firewalls between vehicle networks |
| US10234302B2 (en) | 2017-06-27 | 2019-03-19 | Nio Usa, Inc. | Adaptive route and motion planning based on learned external and internal vehicle environment |
| US10369974B2 (en) | 2017-07-14 | 2019-08-06 | Nio Usa, Inc. | Control and coordination of driverless fuel replenishment for autonomous vehicles |
| US10710633B2 (en) | 2017-07-14 | 2020-07-14 | Nio Usa, Inc. | Control of complex parking maneuvers and autonomous fuel replenishment of driverless vehicles |
| US10837790B2 (en) | 2017-08-01 | 2020-11-17 | Nio Usa, Inc. | Productive and accident-free driving modes for a vehicle |
| US10635109B2 (en) | 2017-10-17 | 2020-04-28 | Nio Usa, Inc. | Vehicle path-planner monitor and controller |
| US20190122121A1 (en) * | 2017-10-23 | 2019-04-25 | AISA Innotech Inc. | Method and system for generating individual microdata |
| US10935978B2 (en) | 2017-10-30 | 2021-03-02 | Nio Usa, Inc. | Vehicle self-localization using particle filters and visual odometry |
| US10606274B2 (en) | 2017-10-30 | 2020-03-31 | Nio Usa, Inc. | Visual place recognition based self-localization for autonomous vehicles |
| US10717412B2 (en) | 2017-11-13 | 2020-07-21 | Nio Usa, Inc. | System and method for controlling a vehicle using secondary access methods |
| US10369966B1 (en) | 2018-05-23 | 2019-08-06 | Nio Usa, Inc. | Controlling access to a vehicle using wireless access devices |
| US11132681B2 (en) | 2018-07-06 | 2021-09-28 | At&T Intellectual Property I, L.P. | Services for entity trust conveyances |
| BR112021002265A2 (pt) * | 2018-08-06 | 2021-05-04 | Nissan Motor Co., Ltd. | dispositivo de diálogo por voz, sistema de diálogo por voz e método de controle do sistema de diálogo por voz |
| US10802872B2 (en) | 2018-09-12 | 2020-10-13 | At&T Intellectual Property I, L.P. | Task delegation and cooperation for automated assistants |
| US11481186B2 (en) | 2018-10-25 | 2022-10-25 | At&T Intellectual Property I, L.P. | Automated assistant context and protocol |
| US20200193264A1 (en) * | 2018-12-14 | 2020-06-18 | At&T Intellectual Property I, L.P. | Synchronizing virtual agent behavior bias to user context and personality attributes |
| US20200279553A1 (en) * | 2019-02-28 | 2020-09-03 | Microsoft Technology Licensing, Llc | Linguistic style matching agent |
| FR3105499B1 (fr) | 2019-12-18 | 2021-12-24 | Psa Automobiles Sa | Procédé et dispositif d’animation visuelle d’une interface de commande vocale d’un assistant personnel virtuel embarqué dans un véhicule automobile, et véhicule automobile l’incorporant |
| CN112270168B (zh) * | 2020-10-14 | 2023-11-24 | 北京百度网讯科技有限公司 | 对白情感风格预测方法、装置、电子设备及存储介质 |
| US11961516B1 (en) * | 2022-10-23 | 2024-04-16 | Conversation Processing Intelligence, Corp. | System and method for modifying operations of telecommunication devices using conversation processing |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6249720B1 (en) * | 1997-07-22 | 2001-06-19 | Kabushikikaisha Equos Research | Device mounted in vehicle |
| US6351698B1 (en) * | 1999-01-29 | 2002-02-26 | Kabushikikaisha Equos Research | Interactive vehicle control system |
| CN101048305A (zh) * | 2004-10-25 | 2007-10-03 | 罗伯特·博世有限公司 | 用于驾驶员支持的方法 |
| CN101198915A (zh) * | 2005-06-14 | 2008-06-11 | 丰田自动车株式会社 | 对话系统 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020055844A1 (en) * | 2000-02-25 | 2002-05-09 | L'esperance Lauren | Speech user interface for portable personal devices |
| JP2002318132A (ja) * | 2001-04-23 | 2002-10-31 | Hitachi Ltd | 音声対話型ナビゲーションシステムおよび移動端末装置および音声対話サーバ |
| US20070139182A1 (en) * | 2005-12-19 | 2007-06-21 | O'connor Jay D | Emergency communications for the mobile environment |
| EP2140341B1 (en) * | 2007-04-26 | 2012-04-25 | Ford Global Technologies, LLC | Emotive advisory system and method |
| US20100251283A1 (en) * | 2009-03-31 | 2010-09-30 | Qualcomm Incorporated | System and mehod for providing interactive content |
-
2010
- 2010-02-09 US US12/702,625 patent/US8400332B2/en active Active
-
2011
- 2011-01-19 CN CN201110025319.6A patent/CN102145695B/zh active Active
- 2011-01-21 DE DE102011002985A patent/DE102011002985A1/de active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6249720B1 (en) * | 1997-07-22 | 2001-06-19 | Kabushikikaisha Equos Research | Device mounted in vehicle |
| US6351698B1 (en) * | 1999-01-29 | 2002-02-26 | Kabushikikaisha Equos Research | Interactive vehicle control system |
| CN101048305A (zh) * | 2004-10-25 | 2007-10-03 | 罗伯特·博世有限公司 | 用于驾驶员支持的方法 |
| CN101198915A (zh) * | 2005-06-14 | 2008-06-11 | 丰田自动车株式会社 | 对话系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN102145695A (zh) | 2011-08-10 |
| DE102011002985A1 (de) | 2011-08-11 |
| US8400332B2 (en) | 2013-03-19 |
| US20110193726A1 (en) | 2011-08-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102145695B (zh) | 包括时间代理的情感咨询系统 | |
| CN110770772B (zh) | 被配置为自动定制动作组的虚拟助手 | |
| JP7250853B2 (ja) | 既存の会話を促進するためにアクションを推奨するように構成された仮想アシスタント | |
| CN109416733B (zh) | 便携式个性化 | |
| JP6397067B2 (ja) | サードパーティサービスをデジタルアシスタントと統合するシステム及び方法 | |
| WO2021027267A1 (zh) | 语音交互方法、装置、终端及存储介质 | |
| CN102039898B (zh) | 情绪咨询系统 | |
| US10531227B2 (en) | Time-delimited action suggestion system | |
| JP6585154B2 (ja) | 単一音響モデルと自動アクセント検出を用いたテキスト規則ベースの複数アクセントの音声認識 | |
| JP2023063444A (ja) | 非要請型コンテンツの人間対コンピュータダイアログ内へのプロアクティブな組込み | |
| US11302325B2 (en) | Automatic dialogue design | |
| EP3455722A1 (en) | Personalized and contextualized audio briefing | |
| CN101669090A (zh) | 情绪提示系统和方法 | |
| WO2019107145A1 (ja) | 情報処理装置、及び情報処理方法 | |
| CN107533564B (zh) | 在数字助理上提供个性化问候 | |
| CN108540815B (zh) | 多媒体内容播放方法、装置及系统 | |
| KR102592833B1 (ko) | 차량의 음성 인식 기능 연동 제어 시스템 및 방법 | |
| JP2022078951A (ja) | オンデバイスキャッシュを使用したハイブリッドフェッチング | |
| WO2015198783A1 (ja) | 情報処理装置、情報処理方法及びプログラム | |
| CN112612874A (zh) | 一种数据处理方法、装置及电子设备 | |
| US11164575B2 (en) | Methods and systems for managing voice response systems to optimize responses | |
| CN117043790A (zh) | 零前缀建议的装置上生成和个性化以及其使用 | |
| US20210245367A1 (en) | Customizing setup features of electronic devices | |
| US11936718B2 (en) | Information processing device and information processing method | |
| CN110895576A (zh) | 一种终端屏幕保护的显示方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant |