CN102844738A - 用于人工智能个人助理的系统和方法 - Google Patents

用于人工智能个人助理的系统和方法 Download PDF

Info

Publication number
CN102844738A
CN102844738A CN2011800135198A CN201180013519A CN102844738A CN 102844738 A CN102844738 A CN 102844738A CN 2011800135198 A CN2011800135198 A CN 2011800135198A CN 201180013519 A CN201180013519 A CN 201180013519A CN 102844738 A CN102844738 A CN 102844738A
Authority
CN
China
Prior art keywords
user
hipa
computer implemented
described computer
computing machine
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011800135198A
Other languages
English (en)
Inventor
迪恩·斯塔克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
4D RETAIL TECHNOLOGY CORP
Original Assignee
4D RETAIL TECHNOLOGY CORP
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 4D RETAIL TECHNOLOGY CORP filed Critical 4D RETAIL TECHNOLOGY CORP
Publication of CN102844738A publication Critical patent/CN102844738A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/01Customer relationship services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising

Abstract

本发明公开了一种人工智能个人助理系统和方法。用户与一个人的音频和视频图像进行交互。用户的输入请求一个或更多任务的执行,该请求包括仅仅是由动作检测激活的被动请求。因此,用户可以主动请求任务,例如浏览电子邮件,或者被动触发任务,例如销售协助。取决于任务的复杂性,人工操作者或者计算机可以协助所述用户。同步于下载结果,音频和视频图像与用户交流。

Description

用于人工智能个人助理的系统和方法
相关申请的交叉引用
本申请为非临时申请,要求全部引用至此的、名称为“用于人工智能个人助理的系统和方法”、于2010年2月2日提交(代理案号为124918-200100/US)的临时申请US61/300,790的利益。本申请也要求全部引用至此的、名称为“与多资源交互的系统和方法”、于2010年2月2日递交(代理案号为HIPA)的临时申请US61/300,550的利益。
版权注意事项和许可
本专利文件披露的一部分包含受版权保护的材料。版权所有人不反对任何人对如出现在专利商标局专利档案或记录中的专利文件或专利披露的复制,然而在别的方面却无论如何都保留所有版权权利。
技术领域
本发明涉及人到计算机化的音频和视频图像的界面领域。
发明内容
每一天,我们中的大多数花费一天的很大一部分时间去做大量重复性工作-人工智能个人助理(HIPA)将使得那些日常工作变得容易-HIPA能够为使你的生活更好而负责。
例如,HIPA可以是在终端用户和位于亚洲的呼叫中心之间的直接的VoIP(IP语音)或者视频连接。不管所请求任务的复杂性,所有注册用户将享受高质量的HIPA体验。如果需要,用户可以无缝升级到具有更多专业知识的各种专长的另一个或更多操作者,从浏览和回复用户的电子邮件,到辅助旅行计划中的用户或者帮助用户的小孩完成他或她的六年级家庭作业。
任何时候HIPA以最轻微的方式(即从你的音调,语言)检测到来自用户的任一级别的挫败或不满,HIPA操作者将会无缝地升级你的连接或会话到所要求领域的指导专家。在这个转移期间,用户将不会真的知道该转移,因为用户仍然将对同样的声音谈话,且将观看他或她的HIPA里的相同3D人工图像。
鉴于如此处描述的实施本发明的目前已知最佳方式的描述和优选实施例的工业应用,本发明的这些和其它目的和优势对本领域的技术人员来说将变得清楚。
附图简要说明
实施例以示例的方式阐述,并且不受附图的限制,附图中相似的标注表示相似的元件。
图1显示根据一实施例的人工智能个人助理系统。
图2显示根据一实施例的用于人工智能个人助理系统的示例用户终端。
具体实施方式
以下的描述和附图是说明性的,不应理解为限制。描述了许多具体细节以提供一个透彻的理解。然而,在一些例子中,没有对公知的或传统的细节进行描述以避免模糊了说明。在本公开中,对一个实施例或实施例的引用不一定是对同一实施例的引用;且该引用指至少一个引用。
在这里标题的使用仅仅为了便于引用,不应以任何方式解释为限制本公开或下面的权利要求。
说明书中对“一个实施例”或“实施例”的引用指的是该实施例中描述的具体的特征、结构或特性被包含在本发明公开的至少一个实施例中。在说明书中多处出现的短语“在一个实施例中”并不一定都指同样的实施例,也不是互相排除其它实施例在外的独立的或可替代的实施例。而且,描述的各种特征可能被一些实施例呈现而没有被其余的实施例呈现。同样地,描述的各种需求可能是一些实施例的需求而不是其它实施例的需求。
不受限制的HIPA带宽
在一个实施例中,用户的HIPA能够同时浏览用户没有打开的语音邮件消息,按照呼叫者、优先级和主题将它们记录(document)到一个汇总的邮件中,浏览和概述来自在用户的简介(之前已设置好并且可以动态修改)里列为重要人物的人的重要邮件。HIPA的个人简介和它的动态的工作量可伸缩特征允许用户决定多快生成结果。所述结果可以与用户能够与他或她的界面HIPA通信一样快地被提供。就一个简单的任务,一个HIPA可以独立工作,但是一旦任务变为时间集中或者要求完成数个任务,任务会被动态地分配给多个提供有实质上无带宽限制的HIPA。这使得用户能够视乎复杂性、专长和要求完成任务的时间分配可同时被操作的一系列简单到很复杂任务。类似于一个多处理器计算机,当工作量或需完成的任务的数量开始增加和更多耗时或者复杂的任务被分成断片(pieces)时,其它的处理器(即多个HIPA)自动启动。因此,这些断片中的每个能够被例如亚洲的多个操作者操作,然后结果无缝汇集(funneled)反馈给单个HIPA界面,如同任务在第一个地方被拆分为多个独立的组分用以以最有效率的方式处理它们那样轻而易举。当用户继续在和看似是一个人交流时,所有这些被完成,这时实际上多个HIPA在对一个任务工作。多个HIPA任务处理和用户简介/偏好是顾客体验成功的关键。顾客简介允许用户的HIPA动态扩展其能力的带宽远远超出这颗行星上提供的任何其它的助理类型服务。服务的成本应基于组合的操作者的秒数,而不考虑有多少个操作者来参与完成这项任务。几乎所有任务都被拆分成断片以减少完成所有任务所花费的时间量。视乎所需要的任务,一个使用一个HIPA的用户可以涉及多达1至30+个人。决定任务应如何遍布多个操作者的过程可以取决于多个变量中的一个,例如:(1)顾客的需求;(2)任务的数量;以及(3)任务的专业化(即旅游研究,浏览电子邮件,打印报告等等)。
HIPA体验可使用软件将顾客对他们的HIPA的用户需求动态解析成可无缝导向至例如在亚洲的个人操作者的最有效的组分,所述个人操作者能够处理被拆分的部分/组分,然后,所述软件将断片重新组装/重新编译成一格式,该格式将完成用户的初始任务请求(以类似于计算机处理器如何解译软件编码且将编码的部分分成处理器的各种专业部件的方式,所述专业部件例如专用于存储器、视频、i/o处理器管理和多线程管理)。
概念
1、零售商店橱窗展示
在一个实施例中,顾客可能在晚上商店关门后沿着布鲁尔街行走,并且注意到一位女士正在试穿来自一家声誉好的时尚服装生产商的新上衣的互动视频。当顾客走过时,他或她被传感器检测到,然后,一位衣着漂亮的H I PA模特面对顾客并且说“今晚很高兴见到您”(脚本以天为时间变化)。“我可以给您介绍我们新的漂亮的春季围巾收藏吗?$99起。”新围巾的拟真照片显示以3D形式涌现在HIPA的一侧。模特接着试戴上其中的一条围巾。她接着询问潜在顾客他们是否愿意看她试戴展示出的另外一条围巾。如果用户说好,然后她询问是哪一条,并且每一条会被依次高亮显示片刻。潜在顾客说“第三条或者有蓝色图样的绿色围巾”,然后模特就会无缝地试戴上它。当HIPA戴上围巾后,她会开始描述该产品,并且渲染(romance)拥有这排时装中的围巾的价值,以及它如何能突出任意整套服装。她然后会询问顾客,他们是否愿意从她这购买一条围巾。如果他们说是,她然后会问他们是否愿意明天直接递送到他们家或者工作所在地。然后,她会简单地要他们告诉她他们的名字,和通过将他们的信用卡举向橱窗上安装的微型摄像机提供给她提供支付细节。HIPA能够在信用卡的静止图像上快速地拉近摄像并记录下卡号,然后视乎信用卡,也可以要求顾客展示信用卡的背面。如果顾客说不(对她关于围巾的初始问题),她然后会询问顾客,他们是否愿意观看最新的手提包或者任何其他类别,她将将该类别列在橱窗显示屏上,并继续带他们进行突出各种部门和重点产品的商店的3D旅行。
2、虚拟商店指南
在另一个实施例中,顾客将进入一间零售店,HIPA通过展示最新广告的装备(outfit)且可能是以现实生活场景的特征欢迎顾客。然后,HIPA将询问顾客,他们是否注意到了X商店里各种部门的一些当前特价商品,并且询问他们是否会对进一步的细节或者帮助或者任何其它事项感兴趣,包括:
a)具体部门的位置
b)靠顾客提供对项目(item)的口头描述,HIPA通过展示产品的图像能够确认具体产品的价格。HIPA也能够提供可用库存以及广告项目的细节。HIPA也将有能力运用零售/宣传专业机构预先编排好的零售业知晓的最好的销售技巧直接向顾客销售项目。
c)帮忙为朋友挑选礼物。
HIPA在百货商店的每一方面上都训练有素,完全了解库存清单、产品位置、库存清单的每一项的供应商产品规格和特点、许多零售项目的视频图像且在许多情况下为3D渲染。最重要的是,HIPA关于每一项目具有大量预先编排的特别卖点和短语的库,用关闭该销售的非常有针对性的方法显示。HIPA的销售经验将是特别的,由世界上的最好的零售顾问撰稿。顾客将会感觉到他们仿佛是在被服务而不是被推销。
HIPA也会在顾客寻找特定产品或部门的位置时询问他们是否需要帮助。HIPA也会询问顾客他们是否想要一份高亮显示他们感兴趣的特定区域和/或任一特定广告或特定产品细节的地图,和/或清晰地指示了他们的部门的位置或与他们目前位置有关的感兴趣项目的非常干净简单的3D地图。HIPA会询问顾客的名字,并且会要求他们拿起高亮显示顾客的感兴趣区域的他们的个性化地图,该地图也可包含那些部门的特色产品。它们也包括由HIPA提供的特定项目或礼物选择。
当顾客离开商店指南区域时,通过使他们拨打HIPA说出或在屏幕上显示出的电话号码,HIPA也将向顾客提供持续的HIPA体验,或者,如果顾客向她提供他们的电话号码,HIPA可呼叫他们继续进行会话,因为许多手机用户不对呼入的分钟付费。百货商店通过以下方式创造动机以鼓励顾客使用HIPA:广告宣传一旦使用这种服务,HIPA将在整个一天内提供给用户随便在各种部门的独家供应。这将允许顾客在整个商店无缝地继续与HIPA会话,例如通过移动电话、PDA或其它这种装置、或通过装配有HIPA、VoIP功能的屏幕和遍布商店设置的传感器和/或麦克风。通过使顾客根据品牌和描述识别产品以及使HIPA获得来自百货商店和制造商的无限制的产品信息和卖点,HIPA将给顾客提供关于任一项目或部门的指引和产品信息。更重要的是,HIPA将具有由世界最好的零售销售专家创作且由每一个制造商修改和认可的世界最好的预先罐装封闭脚本。
使用HIPA就类似于与世界上最好的销售伙伴购物。这并不意味着顾客会被过度推销。它意味着顾客有机会由一个能提供关于顾客需求的更多信息和使体验更有效和兴奋的人指引。例如,当顾客正在看迪赛(Diesel)牛仔裤,他们会被告知它们完全在意大利制造,且全部仍手工缝制,并用3”岩石洗涤。
3、虚拟结账
在另一个实施例中,当HIPA用户想要购买任何东西或者使其递送出去时,HIPA用户自己现在将有能力在任何时候或任何地点处理付款和结账。如今,零售成为了低服务水平的同义词,顾客发现非常难寻求任何帮助,即便是当他们仅仅需要某人来拿他们的钱。视特定商店的偏好而定,在商店中的任何地方(利用移动电话或PDA或其它这类装置)或者在众多指定的虚拟HIPA结账台,选定的顾客将能够自己结账,而无需走到确确实实的收银处。HIPA能被用来有效率地购买项目,而不用寻找无人值守的收银台或者使顾客吃力地、浪费时间地找到收银台或者不用找出销售职员比慢更慢的收银台,或者收银台前的排队太长以致于顾客不能等,并简单地放下他们想要购买的项目而走出商店。
顾客服务至上的零售店/百货商店将提供虚拟HIPA结账服务给他们最有价值的顾客,向他们提供执行虚拟结账/付款作为一种优选服务的能力,提高整个零售体验。他们仅需简单地找出他们想要付款的产品和/或走到具有一个或更多HIPA结账显示屏的指定的虚拟结账区域。这些站台被摄像机良好覆盖,且HIPA也将要求顾客识别他们的位置并识别他们手上所有已付款和未付款的产品。HIPA也能根据顾客现有简介在视觉上辨别顾客。整个交易的详细视频录像也被记录并成为顾客简介的一部分。特定零售店指定的HIPA操作者(在另一端控制HIPA的人,该人在结账程序专门训练过)如果需要也能够请零售人员提供帮助。如果HIPA操作者不确定顾客是否根据要求的指定零售店指南引导他们自己,他们也可能宣称存在系统问题。这避免了顾客和零售商的任何形式的尴尬。百货商店可能允许顾客只是通过口头描述产品或者读出百货商店的SKU号码或者UPC号码,在任一通道的任何地方结账(借助移动电话或PDA或任何这类装置,或通过遍布商店设置的上述虚拟HIPA站台)。顾客也将能询问其它颜色和可用库存以及也可以安排产品递送。HIPA也能比较产品以及基于可用库存而提出建议。当然,HIPA将具有在任何时候供其支配的丰富的产品知识产品库和销售技巧。
4、在家和工作时你的HIPA
在另一个实施例中,HIPA能够在多种不同的日常任务中协助用户。没有HIPA,用户的日常生活将不再相同。当用户醒来,他们的一天将从接收预先安排好的文字信息、电子邮件、电话呼叫或在他们床边有吸引力的男性或女性HIPA图像的一个栩栩如生的HIPA图像的细语开始。HIPA图像将向用户寻求指示使得HIPA能完成用户今天想要HIPA做的项目和整天、整周等做的所有项目,以及用户的配偶和孩子想要用户做的事情。当用户仍躺在床上深思未来的一天而没有动一根手指时,用户将能够打断、忽略或者使HIPA专心于写或者回复电子邮件、文字信息或者给任何人拨打电话。
用户可能周末想要出去,在那种情况下,用户可以请HIPA搜索Expedia(艾派迪)和其它网站在这周五的下午7点后离开的大量细节,并归纳它们且在用户的家庭办公室内的打印机上打印出来。用户也可能请HIPA安排购买所述用户向HIPA描述的四张DVD中的三张,并还使用所述用户可以使用的DVD递送服务帐户在下周五递送。用户也可以让HIPA找出杂志上看到的新围巾的价格,用户想要购买该围巾用于用户的配偶下周的生日,并且用户也可以想要每天被一些离散提醒来提醒那件事情。
用户也能通过电话与2或3个人开一个HIPA会议,然后通过使用户加入会议,这样用户就不需要以语音邮件浪费他或她的私人时间。当HIPA留下某人请用户回电的信息时,HIPA将留下一个谷歌(Google)语音号码,该号码将由HIPA代表用户答复,并且在通知呼叫者该用户可得性之前,HIPA会征询用户的许可以使其他呼叫者与用户开会。由于用户从HIPA做出每一个额外的请求,视该请求而定,用户的HIPA会分配该请求给多个HIPA,同时允许每一个请求由专家执行,例如,请求可以由用户附近区域的合适的专家执行。在某些情况下,请求的任务可能需要花费一些时间来执行,并且HIPA可能需要请求一些时间来做响应。当HIPA已经解决该任务,HIPA会通过它们默认的提醒方法警示用户,除非被告知不这么做。例如,用户可以要求HIPA呼叫他们、给他们发送文本信息或者发送电子邮件给他们以及在用户设定的时间间隔内重复该提醒。
当用户早晨正在枕头上放松往左边一瞥看着他或她旁边的HIPA图像在计划着时,上面的所有事情可以无需举起一根手指就能够完成,这使用户未来日子的计划轻而易举(breeze)。
5、HIPA移动电话
在另一个实施例中,在一天中通过用户的电话、PDA、智能电话或其它此类装置也可以使用该用户的HIPA。在用户的家里和办公室,用户的呼叫者标识(ID)将会是到用户的个人HIPA简介的链接,就像用户的互联网用户标识(IP USER ID)和密码一样。MSS移动电话用户也能够通过他们的电话查看他们的HIPA。
6、HIPA翻译
在另一个实施例和不是说英语的国家的环境中,当地的HIPA操作者可受雇佣来简单地聆听顾客且将顾客的语音从英语翻译为该国家的当地语言的文本。视声音质量和清晰度以及语音至文本翻译的质量而定,语音至文本软件也可以协助HIPA操作者。文本结果会传送(stream)到例如亚洲,亚洲的HIPA操作者会将文本翻译为英语并且将文本转化为语音,然后以与英语消费者将会被处理的方式相同的方式被处理。
7、更多详细的应用
a)学生-在另一个实施例中,父亲或母亲可能希望他们的孩子每天花费15分钟来使他们的孩子检查他们的家庭作业或者在具体的科目上获得帮助,该科目能够在HIPA界面的文本框中被指定。在每一学期前,HIPA对要检查的课程会受到培训和得到经验。当被要求时,HIPA将能够报回给父母孩子的进展。
b)用于用户、用户的孩子和用户年老的父母-在另一个实施例中,所有用户能够浏览例如在亚洲的HIPA计算机屏幕,HIPA操作者允许用户指导或执行他们希望的任何任务,并显示消费者的电子邮件、完整简介、网络浏览器,协助建立服务器、润色图片编辑程序里的图像、写VB应用或任何其他软件应用,消费者能够通过语音指引HIPA执行以上任一或其它任一任务。例如,用户能够让HIPA在线购买一些音乐、写读书报告、使用来自他们电子邮件的数据创作电子数据表、放电影等等。在音乐或电影的情况中,用户也将既听到相关媒介的音频流也听到HIPA的语音。
c)企业-在另一个实施例中,企业在他们的接待或安全台(security desk)上可具有一个HIPA来替代一个传统的接待员。HIPA也将能接听呼入的电话和并利用VoIP在组织内传达它们。
d)网络-在另一个实施例中,企业可以购买许可证而在他们自己的网站上拥有他们自有品牌的HIPA以利用对应于在线用户或顾客位置而变化的种族、当地语言和的方言来销售产品。这些企业也可以通过HIPA得到“公司简介(Corp profile)”的许可证,“公司简介”是允许公司利用用户的HIPA简介的授权元素调整适应用户的体验的数据简介。
e)虚拟网络计算机-在另一个实施例中,用户能够利用虚拟网络计算机(VNC)在他的家或办公室计算机或者智能电话的任一者上获得任意水平的服务或协助。所有计算机、所有基于UNIX的电话和基于Windows的电话(例如黑莓、iPhone、Windows移动电话和谷歌的Droid操作系统都和VNC一起工作)都容易地与VNC一起工作。VNC类似于微软的远程桌面但是可以是免费和/或开源的。此VNC的性能可以允许HIPA顾客接收来自他们的HIPA的帮助以添加联系信息到他们的无线电话、增添电影、安装应用、更新固件或者修复简单或复杂的电话问题。VNC允许用户通过本地网络或因特网对另一台计算机采取控制。对移动电话用户来说一个尤其好的选择是,VNC包括Java客户端,该客户端使用户能够通过任一浏览器访问远程计算机而无需安装任何软件。目前,有针对Windows、UNIX、Linux和Solaris的现成版本。VNC能够用HIPA操作而没有通过局域网(LAN)连接被减速,也不会耗费更多的金钱。为了能在低速连接时操作VNC,需要用户减少色彩、移除桌面壁纸或者在他们的运用VNC的电话或移动装置上仅仅有一个活动的窗口。虽然用户可保存VNC界面为常用快捷方式,但是VNC界面无法处理为数众多的连接。VNC程序能运行为服务程序,允许用户连接到没有人登录的机器。安装文件足够小以致用户可以保存它们在软盘上。一些版本的VNC可以是免费的,以及VNC适用于家庭和商业用,尤其因为VNC可以是开源的、完全记录的且利用不依赖于平台的协议使得用户能在多种平台上远程操作。
f)屏幕查看-在另一个实施例中,用户也能够查看HIPA的整个屏幕或者HIPA的屏幕的一部分。
g)专业化培训-在另一个实施例中,HIPA能够给用户提供每一专业化培训,从烹饪到从事某项体育运动到许多不同训练的任一一项。
h)监管孩子——在另一个实施例中,用户的HIPA被分配照看他们房间里的用户的孩子或者一起玩耍的任务,并且如果孩子们开始打架或者做任何父亲或母亲列在名录(profile)里允许或不允许的任何事情则提醒用户(父母)。父亲或母亲所有要做的是安装无线或有线摄相机,也可以是一系列摄相机。
i)监视声音-在另一个实施例中,声音和视频能一起被监视。
j)记录和存档音频和视频-在另一个实施例中,HIPA能够记录和存档音频和视频。
k)实时监视和记录-在另一个实施例中,保安(security)公司、零售商店、父母或者非常关心宠物的主人可能想要一个或一系列视频/音频摄像机受他们的HIPA监视/记录且受实时监视或记录。作为一种可选项,也可以添加动作检测软件,它能提醒HIPA要仔细检查的活动并用于接下来的进一步指示,例如呼叫外出吃晚餐的父母告知孩子们正在打架并且保姆正在睡觉或者忽略了孩子们。
l)通过移动装置流动式传送(streaming)视频:在另一个实施例中,视频也能够通过手机、智能电话、PDA或其它任何这类装置被传送到任一地点并被监控。
m)摄像机用途-在另一个实施例中,例如,汽车爱好者(buff)可能想要通过他的窗在他街上的汽车安装一个摄像机,如果有人触摸他的汽车,使HIPA通知他。
n)电视/电影向导-在另一个实施例中,用户可能想要他的HIPA成为他通向世界的电视/电影向导。例如,HIPA会提供美国和世界范围可用的按次计费服务。以与人们如何查看家庭个人视频录像机(PVR)所反馈的视频/音频类似的格式,HIPA中心局会传送视频/音频给远程膝上型电脑或移动装置或手机。该视频/音频内容也能通过VNC或者专门的流媒体软件观看。
o)世界范围的流动式传送-在另一个实施例中,例如在亚洲的HIPA提供者能够使用户观看世界范围的任一电影或电视节目的视频流。
p)共享和控制软件程序-在另一个实施例中,HIPA可向用户提供例如在亚洲的包含最流行的软件程序的虚拟计算机的共享和控制的能力。通过安装被许可的软件到HIPA提供者所拥有和操作且也能够与HIPA共享的VM(虚拟机),这能够容易地实现,在连接上HIPA后,允许用户无限制地使用特定的软件程序。
q)通过VNC或者MS远程桌面的协助-在另一个实施例中,用户能通过VNC或者MS远程桌面允许HIPA访问他或她的计算机,VNC或者MS远程桌面然后使得HIPA监控或者协助用户在该计算机上的任何行动。例如,HIPA可以被请来帮助调试在一定时间内必须完成的应用程序上有问题的高级计算机程序员。在这种情况下,在具体一类计算机语言和/或应用类型方面的专家被号召过来协助该高级计算机程序员直至问题被解决。
r)号召虚拟客人-在另一个实施例中,如果顾客需要非常专业化的帮助,虚拟客人能够被HIPA提供者号召来帮助HIPA提供者和/或顾客。例如,如果顾客在使用过时的或晦涩I BM操作系统层次的计算机上需要协助,并且没有一个HIPA提供者能够提供帮助,然后HIPA会邀请具有特殊才能的知名人士,例如非常熟悉HIPA顾客需要协助的操作系统层次的已退休IBM雇员。然后,HIPA将邀请已退休的IBM雇员利用任何在线会议或者网络会议软件来协助。
s)共享音乐-在另一个实施例中,通过分享出来由HIPA控制的以许多流行音乐选择为特征的得到许可的VM,也能够享受音乐。其中一些能由知名的DJ为事件而编辑并被HIPA许可,且被组织和租出给HIPA顾客。
t)促进商务交流-在另一个实施例中,用户能使用HIPA来促进全世界的商务交流。例如,如果纽约的HIPA顾客可能正在开发一种新的设计概念,且他或她想要查看在米兰的特定街的展示窗口,他或她能够请他们的HIPA安排HIPA雇员/附属人员在预先设置的时间利用流媒体视频/音频手机访问所要求的地方,所述流媒体视频/音频手机使顾客能够准确地交流他们在附近或者在世界上任何城市实时地想要看到的事物。当需要时,HIPA组织会在每一个城市基于契约的雇佣人,以通过HIPA执行任何法律任务。潜在的立契约者会被HIPA组织的专门一组人员雇佣,HIPA组织会利用例如分类网页和求职网站的传播媒介刊登广告来征求这一类人。当执行任务时,许多立契约者会被派发一个特殊的视频手机来使用,以允许顾客引导或控制所要求的任务中的当地立契约者并且查看HIPA顾客想要的图像。例如,汽车设计者可以请他的HIPA使立契约者参加年度底特律汽车展并且提供电话视频/音频信号给终端顾客。顾客将指引HIPA,实际上HIPA用非常具体指令来指引立契约者关于走那条通道、哪里停止和说什么。顾客也可能请立契约者挑选具体文件并且将它们直接带到联邦快递(Fedex)或者UPS地点来邮寄它们。这些文件可以发送给HIPA或者直接给终端顾客。零售商店企业也可能利用简单一致的HIPA界面的独特控制和数据反馈来使他们的HIPA在全球的新进入者或竞争者的通道中走。公司的总部办公室也可能想要HIPA通过手机或者视频电话或者一些其它视频通信手段雇佣人来检查他们自己的设备。
u)其它商业应用-在另一个实施例中,HIPA能够例如用在贸易展会或者汽车展,或者用来游览竞争者的商店或者用来查看新大楼来建立新的商店分支等等。
附图说明
图1示出了根据一个实施例的人工智能个人助理系统。具体地,图1示出了服务器通过网络连接至少一个终端,其中,服务器存储根据本公开的实施例的软件。针对功能和数据结构的软件或程序代码,例如可用于人工智能个人助理(HIPA)的软件或程序代码,可以绑定到远程服务器102。远程服务器102连接因特网104,且因特网104通过直接连接转而连接到至少一台计算机108,通过无线连接或直接连接到至少一台移动计算机106,以及连接到至少一台便携式电话或移动装置110,该移动电话和移动装置用于接收视频流、基于因特网的内容或者基于无线应用协议(WAP)的内容。至少一台计算机108也可以是站台或者装备有传感器和麦克风的计算机,所述传感器和麦克风如上讨论的遍及零售店而设置,用作HIPA的虚拟站台。至少一台便捷式电话和移动装置110可包括例如手机、智能电话、PDA、黑莓手机、iPhone等等。
图2示出了根据一个实施例的用于人工智能个人助理系统的用户终端的例子。虽然图2示出了计算机系统的各种组件,但是它并不意图于描述互连组件的任何特定结构或方式。一些实施例可以使用比图2所示的那些组件更少或更多的组件的其他系统。
在图2中,用户终端的数据处理系统200包括与微处理器203和存储器208互连的互连202(例如总线和系统核逻辑)。以图2为例,微处理器203耦合到缓存存储器204。
互连202使微处理器203和存储器208互连到一起,且将它们互连至显示控制器、显示装置207、传感器209以及互连到外围装置,例如通过输入/输出控制器206互连到输入/输出(I/O)装置205。
传感器209可以包括例如确定用户终端方向和/或检测用户终端摇动的加速计,或再例如记录用户终端附近声音的声音记录设备。
典型的I/O装置包括鼠标、键盘、调制解调器、网络接口、打印机、扫描仪、视频摄像机、触摸板、麦克风和本领域公知的其它设备。在一些实施例中,当数据处理系统是服务器系统时,一些I/O设备,例如打印机、扫描仪、鼠标、和/或键盘是可选的。
互连202可包括通过各种桥接器、控制器和/或适配器互相连接的一根或多根总线。在一个实施例中,I/O控制器206包括控制USB外围设备的USB(通用串行总线)适配器,和/或控制IEEE-1394外围设备的I EEE-1394总线适配器。
存储器208可包括ROM(只读存储器)、易失性RAM(随机存取存储器)和非易失性存储器,例如硬盘驱动器、闪存等。
在之前的说明和以下所附的文件中,本公开是参照本公开具体的示例性实施例进行描述的。将明显的是,在不脱离下面的权利要求书所提出的广义精神和范围的情况下,可对本公开作出各种变化。因此,说明书和附图应被认为是示例意义上的而不是限制意义上的。
在描述中,各种功能和操作可以被描述成是由软件代码执行或引起的,以简化描述。然而,本领域技术人员应认识到这种表达意味的是,这些功能来自于例如微处理器的处理器执行代码/指令产生的结果。可替代的或相结合的,这些功能和操作可利用专用电路在有或没有软件指令的情况下实现,例如利用专用用途集成电路(ASIC)或现场可编程门阵列(FPGA)来实现。实施例可使用不带软件指令的硬线电路、或与软件指令结合来实现。因此,技术不限于硬件电路和软件的任何具体组合,也不限于由数据处理系统执行的指令的任何具体源。
虽然一些实施例可在功能全面的计算机和计算机系统中实现,但是各种实施例能够被分布为各种形式的计算产品,且能够被应用而无需考虑用来实际上实行分布的机器或可读计算机媒介的特定类型。
所公开的至少一些方面可至少部分地体现到软件中。也就是说,技术能够在计算机系统或响应其处理器(例如微处理器)的其它数据处理系统中执行包含在存储器(例如ROM、易失性RAM、非易失性存储器、缓存或远程存储装置)中的指令序列来实施。
被执行用于实现实施例的例行程序(routine)可被实施为操作系统的一部分或具体应用、组件、程序、对象、模块或被称为“计算机程序”的指令序列。计算机程序典型地包括在不同时期在计算机中的各种内存和存储装置中设置的一个或更多指令,并且,当所述一个或更多指令被计算机中的一个或更多处理器读取和执行时,使得计算机执行操作,该操作为执行涉及各个方面的元件必要的操作。
总的来说,机器可读介质包括以机器(例如计算机、网络装置、个人数字助理、生产工具、具有一个或更多处理器为一组的任何装置等等)可访问形式提供(即存储和/或传送)信息的任何机制。
机器可读介质也能用于存储软件和数据,当数据处理系统执行所述软件和数据时,会使得系统执行各种方法。可执行的软件和数据可以存储在各种地方,包括例如ROM、易失性RAM、非易失性存储器和/或缓存。该软件和/或数据的部分可存储在这些存储装置的任意一个中。进一步的,数据和指令能够从集中的服务器和/或对等网络获得。在不同时期和在不同通讯会话或相同通讯会话中,数据和指令的不同部分能够从不同的集中服务器和/或对等网络获得。所述数据和指令能够在应用执行前完整获得。可替换的,当需要执行时,数据和指令的部分能够及时地被动态获得。因此,不需要数据和指令在一个特定的时间实例完整位于机器可读介质。
易失性RAM通常被实施为动态RAM(DRAM),动态RAM需要不断供电以更新或维持存储器内的数据。非易失性存储器通常是磁性硬盘驱动器、磁性光盘驱动器、光盘驱动器(例如DVD RAM)或者即便从系统移除电力后也能维持数据的其它类型存储系统。非易失性存储器也可以是随机存取存储器。非易失性存储器能够是直接耦合到数据处理系统的其余组件的本地装置。也可以使用远离系统的非易失性存储装置,例如,通过例如调制解调器或以太网接口的网络接口耦合至数据处理系统的网络存储装置。
计算机可读介质的例子包括但不限于,可记录和不可记录类型的介质,其中,例如易失性和非易失性存储装置、只读存储器(ROM)、随机存取存储器(RAM)、闪存装置、软盘和其他可移动盘、磁盘存储介质、光学存储介质(例如光盘只读存储器(CD ROM)、数字多功能光盘(DVD)等等)。
计算机可读介质可存储指令。总体来说,有形的机器可读介质包括以机器(例如计算机、网络装置、个人数字助理、生产工具、具有一个或更多处理器为一组的任何装置等等)可访问的形式提供(即存储和/或传送)信息的任何机制。
在不同实施例中,硬线电路可以和软件指令结合来实现该技术。因此,该技术不限于硬件电路和软件的任何具体组合,也不限于由数据处理系统执行的指令的任何特定源。
尽管一些附图以特定的顺序示出操作,但可记录没有依赖顺序的操作,且其它操作也可组合或拆分。虽然特别提到一些重新排序或其它编组,但其他的对本领域普通技术人员是显而易见的,因此没有呈现可替代方式的详尽列表。此外,应该认识到步骤(stages)可以以硬件、固件、软件或它们的任意组合实施。
本公开包括方法和执行这些方法的设备,该设备包括执行这些方法的数据处理系统和包含指令的计算机可读介质,当指令在数据处理系统上被执行时致使系统执行这些方法。
虽然方法和系统以目前认为最好的实践和优选实施例进行了描述,但应该理解本公开不限于已公开的实施例。旨在涵盖被包括在权利要求的精神和范围内的各种修改和相似排列,权利要求的范围应该符合最宽泛的解释以包含所有这种修改和相似结构。本公开包括以下权利要求书的任一和所有实施例。
也应该理解的是,不脱离本发明的本质可作出各种变化。这种变化也暗含在说明书中。它们仍然落在本发明的范围内。应该理解的是,本公开旨在产生一个专利,涵盖本发明的许多方面,包括独立和作为一个整体系统且以方法和设备二种方式。
进一步的,本发明和权利要求书的各种元件中的每一个也可以各种方式获得。本发明应该理解为包含每一个这种变化,可以是任一设备实施例的一实施例的变化、方法或处理实施例的变化、或者甚至仅仅是这些中的任一元件的变化。
特别的,应该理解的是,因为本公开涉及到发明元件,每个元件的用词可以表述为等同的设备术语或方法术语一一即便仅仅功能或结果相同。
这种等同、更宽泛的、或者甚至更一般的用词应被认为包含在每一个元件或行动的描述中。在希望使本发明授予的不明晰的宽泛范围明晰化时,这种用词能够被替代。
应该理解的是,所有行动可以被表述为发生该行动的手段,或表述为导致该行动的元件。
类似地,所公开的每一个物理元件应该被理解为包含物理元件促使的动作的公开。
在这方面应该理解的是,因为实际原因以及为了避免潜在增加数以百计的权利要求,申请人仅仅列出了最初始的从属权利要求。
到做出非实质替代的程度、到申请人事实上没有起草任何权利要求以从文字上包含任一特定实施例的程度、以及到不然可应用的程度,申请人不应被理解为以任何方式试图或实际上放弃这种覆盖,因为只是申请人还不能预测所有可能性;本领域技术人员不应合理被期望能起草文字上包含各种替代实施例的权利要求。
进一步的,根据惯例的权利要求解释,在这里使用连接词“包含”用于维持“开放端的”权利要求。因此,除非文中要求相反的解释,不然,应该理解术语“包含”或者其变形试图隐含地包含陈述的元件或步骤或元件组或步骤组,但不排除任一其它元件或步骤或元件组或步骤组。此类用词应以它们最宽泛的形式理解,以便根据以下权利要求书给予申请人法律上允许的最宽泛的覆盖范围。
在前面的说明中,结合本公开的具体的示例性实施例描述了本公开。将显而易见的是,在不脱离以下权利要求书中阐述的最宽泛的精神和范围的情况下可对本公开做出各种修改。因此,说明书和附图被认为是示例意义上的而非限制意义上的。

Claims (18)

1.一种用于人工智能个人助理的计算机实施方法,包括:
呈现移动视频图像给用户;
通过计算装置接收来自所述用户的输入,所述输入请求至少一个任务的执行;
确定所述执行是否应该由零个或更多操作者连同零个或更多计算机一起完成,其中存在至少一个操作者或至少一台计算机;
通过所述确定的裁决,完成所述执行以产生结果;以及
输出所述结果给所述用户,其中,所述结果与所述移动视频图像同步传送给所述用户。
2.权利要求1所述的计算机实施方法,其中所述执行所述至少一个任务包括:
拆分所述至少一个任务为至少一断片用于实施;
断定所述实施是否应由零个或更多操作者连同零个或更多计算机完成,其中存在至少一个操作者或至少一台计算机;
通过所述断定的决定完成所述实施;以及
将完成所述实施的产物重新加回到所述结果。
3.权利要求1所述的计算机实施方法,其中,所述移动视频图像为人的图像,所述结果包括音频输出,以及所述同步包括所述音频输出与所述人的图像的嘴唇移动的同步。
4.权利要求1所述的计算机实施方法,其中,所述移动视频图像是计算机产生的。
5.权利要求1所述的计算机实施方法,其中,所述输入包括选自由运动检测、语音、视频、键盘、触摸屏、鼠标和手写笔所构成的组中的至少一者。
6.权利要求1所述的计算机实施方法,其中,所述一个或更多计算机与零个或更多额外的计算机连网。
7.权利要求1所述的计算机实施方法,其中,所述一个或更多计算机与服务器通信。
8.权利要求1所述的计算机实施方法,其中,所述完成包括产生由语音到文字、文字到语音、文字到文字、语音到语音、视频到视频、所述输入的翻译、所述结果的翻译、计算机到计算机文字、计算机到计算机语音和计算机到计算机视频所构成的组中的一个或更多者。
9.权利要求1所述的计算机实施方法,其中,所述计算装置完成解析所述输入和过滤所述输入中的至少一者。
10.一种计算机实施的人工智能个人助理系统,包括:
显示器,用于呈现移动视频图像给用户;
计算装置,用于接收来自所述用户的输入,所述输入请求至少一个任务的执行;
用于确定所述执行是否应该由零个或更多操作者连同零个或更多计算机完成的装置,其中存在至少一个操作者或至少一台计算机;
用于通过所述确定的裁决,完成所述执行以产生结果的装置;以及
用于输出所述结果给所述用户的装置,其中,所述结果与所述移动视频图像同步传送给所述用户。
11.权利要求10所述的计算机实施系统,其中,用于完成至少一个任务的装置包括:
用于拆分所述至少一个任务为至少一断片用于实施的装置;
用于断定所述实施是否应由零个或更多操作者连同零个或更多计算机完成的装置,其中有至少一个操作者或至少一台计算机;
用于通过所述断定的决定完成所述实施的装置;以及
用于将完成所述实施的产物重新加回到所述结果的装置。
12.权利要求10所述的计算机实施系统,其中,所述移动视频图像为人的图像,所述结果包括音频输出,以及所述同步包括所述音频输出与所述人的图像的嘴唇移动的同步。
13.权利要求10所述的计算机实施系统,其中,所述移动视频图像是计算机产生的。
14.权利要求10所述的计算机实施系统,其中,所述输入包括选自由运动检测、语音、视频、键盘、触摸屏、鼠标和手写笔所构成的组中的至少一成员。
15.权利要求10所述的计算机实施系统,其中,所述一个或更多计算机与零个或更多额外的计算机连网。
16.权利要求10所述的计算机实施系统,其中,所述一个或更多计算机与服务器通信。
17.权利要求10所述的计算机实施系统,其中,用于完成的所述装置包括用于产生由语音到文字、文字到语音、文字到文字、语音到语音、视频到视频、所述输入的翻译、所述结果的翻译、计算机到计算机文字、计算机到计算机语音和计算机到计算机视频所构成的组中的一个或更多成员的装置。
18.权利要求10所述的计算机实施系统,其中,所述计算装置用于执行解析所述输入和过滤所述输入中的至少一者。
CN2011800135198A 2010-02-02 2011-02-02 用于人工智能个人助理的系统和方法 Pending CN102844738A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US30079010P 2010-02-02 2010-02-02
US30055010P 2010-02-02 2010-02-02
US61/300,790 2010-02-02
US61/300,550 2010-02-02
PCT/US2011/023492 WO2011097309A2 (en) 2010-02-02 2011-02-02 Systems and methods for human intelligence personal assistance

Publications (1)

Publication Number Publication Date
CN102844738A true CN102844738A (zh) 2012-12-26

Family

ID=44342707

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011800135198A Pending CN102844738A (zh) 2010-02-02 2011-02-02 用于人工智能个人助理的系统和方法

Country Status (5)

Country Link
US (1) US20110191681A1 (zh)
EP (1) EP2531912A4 (zh)
CN (1) CN102844738A (zh)
CA (1) CA2794542A1 (zh)
WO (1) WO2011097309A2 (zh)

Cited By (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103489210A (zh) * 2013-09-06 2014-01-01 雷路德 一种虚拟人物主动联系系统及其方法
CN103500244A (zh) * 2013-09-06 2014-01-08 雷路德 一种虚拟朋友会话系统及其方法
CN104602130A (zh) * 2015-02-15 2015-05-06 科大讯飞股份有限公司 实现交互式广告的方法及系统
US9361628B2 (en) 2010-04-13 2016-06-07 Dean Stark Interactive video shelving system
US9367869B2 (en) 2012-02-13 2016-06-14 Dean Stark System and method for virtual display
US9563906B2 (en) 2011-02-11 2017-02-07 4D Retail Technology Corp. System and method for virtual shopping display
US9733699B2 (en) 2010-04-13 2017-08-15 Dean Stark Virtual anamorphic product display with viewer height detection
CN107924313A (zh) * 2015-09-08 2018-04-17 苹果公司 分布式个人助理
CN111147357A (zh) * 2014-06-19 2020-05-12 微软技术许可有限责任公司 数字助手在通信中的使用
TWI713916B (zh) * 2018-10-24 2020-12-21 淇譽電子科技股份有限公司 即時辨識廣告的互動方法及其互動系統
US10978090B2 (en) 2013-02-07 2021-04-13 Apple Inc. Voice trigger for a digital assistant
US10984798B2 (en) 2018-06-01 2021-04-20 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11009970B2 (en) 2018-06-01 2021-05-18 Apple Inc. Attention aware virtual assistant dismissal
CN112905284A (zh) * 2017-05-08 2021-06-04 谷歌有限责任公司 经由可选图形元素初始化与自动代理的会话
US11037565B2 (en) 2016-06-10 2021-06-15 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US11070949B2 (en) 2015-05-27 2021-07-20 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on an electronic device with a touch-sensitive display
US11087759B2 (en) 2015-03-08 2021-08-10 Apple Inc. Virtual assistant activation
US11120372B2 (en) 2011-06-03 2021-09-14 Apple Inc. Performing actions associated with task items that represent tasks to perform
US11126400B2 (en) 2015-09-08 2021-09-21 Apple Inc. Zero latency digital assistant
US11133008B2 (en) 2014-05-30 2021-09-28 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US11152002B2 (en) 2016-06-11 2021-10-19 Apple Inc. Application integration with a digital assistant
US11169616B2 (en) 2018-05-07 2021-11-09 Apple Inc. Raise to speak
US11237797B2 (en) 2019-05-31 2022-02-01 Apple Inc. User activity shortcut suggestions
US11257504B2 (en) 2014-05-30 2022-02-22 Apple Inc. Intelligent assistant for home automation
US11281727B2 (en) 2019-07-03 2022-03-22 International Business Machines Corporation Methods and systems for managing virtual assistants in multiple device environments based on user movements
US11321116B2 (en) 2012-05-15 2022-05-03 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US11348582B2 (en) 2008-10-02 2022-05-31 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US11380310B2 (en) 2017-05-12 2022-07-05 Apple Inc. Low-latency intelligent automated assistant
US11388291B2 (en) 2013-03-14 2022-07-12 Apple Inc. System and method for processing voicemail
US11405466B2 (en) 2017-05-12 2022-08-02 Apple Inc. Synchronization and task delegation of a digital assistant
US11423886B2 (en) 2010-01-18 2022-08-23 Apple Inc. Task flow identification based on user intent
US11431642B2 (en) 2018-06-01 2022-08-30 Apple Inc. Variable latency device coordination
US11467802B2 (en) 2017-05-11 2022-10-11 Apple Inc. Maintaining privacy of personal information
US11516537B2 (en) 2014-06-30 2022-11-29 Apple Inc. Intelligent automated assistant for TV user interactions
US11526368B2 (en) 2015-11-06 2022-12-13 Apple Inc. Intelligent automated assistant in a messaging environment
US11532306B2 (en) 2017-05-16 2022-12-20 Apple Inc. Detecting a trigger of a digital assistant
US11580990B2 (en) 2017-05-12 2023-02-14 Apple Inc. User-specific acoustic models
US11599331B2 (en) 2017-05-11 2023-03-07 Apple Inc. Maintaining privacy of personal information
US11657813B2 (en) 2019-05-31 2023-05-23 Apple Inc. Voice identification in digital assistant systems
US11671920B2 (en) 2007-04-03 2023-06-06 Apple Inc. Method and system for operating a multifunction portable electronic device using voice-activation
US11670289B2 (en) 2014-05-30 2023-06-06 Apple Inc. Multi-command single utterance input method
US11675491B2 (en) 2019-05-06 2023-06-13 Apple Inc. User configurable task triggers
US11675829B2 (en) 2017-05-16 2023-06-13 Apple Inc. Intelligent automated assistant for media exploration
US11696060B2 (en) 2020-07-21 2023-07-04 Apple Inc. User identification using headphones
US11705130B2 (en) 2019-05-06 2023-07-18 Apple Inc. Spoken notifications
US11710482B2 (en) 2018-03-26 2023-07-25 Apple Inc. Natural assistant interaction
US11727219B2 (en) 2013-06-09 2023-08-15 Apple Inc. System and method for inferring user intent from speech inputs
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11765209B2 (en) 2020-05-11 2023-09-19 Apple Inc. Digital assistant hardware abstraction
US11783815B2 (en) 2019-03-18 2023-10-10 Apple Inc. Multimodality in digital assistant systems
US11790914B2 (en) 2019-06-01 2023-10-17 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11798547B2 (en) 2013-03-15 2023-10-24 Apple Inc. Voice activated device for use with a voice-based digital assistant
US11809483B2 (en) 2015-09-08 2023-11-07 Apple Inc. Intelligent automated assistant for media search and playback
US11809783B2 (en) 2016-06-11 2023-11-07 Apple Inc. Intelligent device arbitration and control
US11838734B2 (en) 2020-07-20 2023-12-05 Apple Inc. Multi-device audio adjustment coordination
US11854539B2 (en) 2018-05-07 2023-12-26 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11853536B2 (en) 2015-09-08 2023-12-26 Apple Inc. Intelligent automated assistant in a media environment
US11853647B2 (en) 2015-12-23 2023-12-26 Apple Inc. Proactive assistance based on dialog communication between devices
US11888791B2 (en) 2019-05-21 2024-01-30 Apple Inc. Providing message response suggestions
US11886805B2 (en) 2015-11-09 2024-01-30 Apple Inc. Unconventional virtual assistant interactions
US11893992B2 (en) 2018-09-28 2024-02-06 Apple Inc. Multi-modal inputs for voice commands
US11914848B2 (en) 2020-05-11 2024-02-27 Apple Inc. Providing relevant data items based on context
US11947873B2 (en) 2015-06-29 2024-04-02 Apple Inc. Virtual assistant for media playback

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102939615A (zh) * 2010-03-26 2013-02-20 4D零售科技公司 构建和使用交互显示器桌来方便登记的系统和方法
US10467560B2 (en) * 2010-09-30 2019-11-05 Avaya Inc. System and method for adaptive multiple contact assignment
US20120197678A1 (en) * 2011-02-01 2012-08-02 Herbert Ristock Methods and Apparatus for Managing Interaction Processing
US10368136B1 (en) * 2015-12-17 2019-07-30 Amazon Technologies, Inc. Resource management for video playback and chat
US9711056B1 (en) 2016-03-14 2017-07-18 Fuvi Cognitive Network Corp. Apparatus, method, and system of building and processing personal emotion-based computer readable cognitive sensory memory and cognitive insights for enhancing memorization and decision making skills
US10257127B2 (en) 2016-08-09 2019-04-09 Microsoft Technology Licensing, Llc Email personalization
US11669684B2 (en) 2019-09-05 2023-06-06 Paro AI, LLC Method and system of natural language processing in an enterprise environment

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002057896A2 (en) * 2001-01-22 2002-07-25 Digital Animations Group Plc Interactive virtual assistant
US20020120554A1 (en) * 2001-02-28 2002-08-29 Vega Lilly Mae Auction, imagery and retaining engine systems for services and service providers
CN1716244A (zh) * 2003-12-29 2006-01-04 西安迪戈科技有限责任公司 智能搜索、智能文件系统和自动智能助手的方法
US20060074831A1 (en) * 2004-09-20 2006-04-06 Hyder Andrew D Virtual assistant

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19843902A1 (de) * 1997-09-26 1999-04-01 Denso Corp Bildinformations-Anzeigesystem und Hologramm-Anzeigevorrichtung
US6183089B1 (en) * 1998-10-13 2001-02-06 Hossein Tajalli Tehrani Motion picture, TV and computer 3-D imaging system and method of use
US20050055298A1 (en) * 1999-03-02 2005-03-10 Czora Gregory J. Apparatus and method for simulating artificial intelligence over computer networks
US6757362B1 (en) * 2000-03-06 2004-06-29 Avaya Technology Corp. Personal virtual assistant
US20020029205A1 (en) * 2000-04-26 2002-03-07 Alfonso Pedraza Industry and/or other specific educatable/reasoning artificial intelligence analyzation control system(s), process(es)and/or method(s) to increase accuracy, reduce human error faults in new or existent system(s), process(es) and/or method(s)
US6661418B1 (en) * 2001-01-22 2003-12-09 Digital Animations Limited Character animation system
US7950925B2 (en) * 2004-12-30 2011-05-31 Kimberly-Clark Worldwide, Inc. Interacting with consumers to inform, educate, consult, and assist with the purchase and use of personal care products
US8260689B2 (en) * 2006-07-07 2012-09-04 Dollens Joseph R Method and system for managing and displaying product images
US20080256008A1 (en) * 2007-03-31 2008-10-16 Mitchell Kwok Human Artificial Intelligence Machine
US20100063862A1 (en) * 2008-09-08 2010-03-11 Thompson Ronald L Media delivery system and system including a media delivery system and a building automation system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002057896A2 (en) * 2001-01-22 2002-07-25 Digital Animations Group Plc Interactive virtual assistant
US20020120554A1 (en) * 2001-02-28 2002-08-29 Vega Lilly Mae Auction, imagery and retaining engine systems for services and service providers
CN1716244A (zh) * 2003-12-29 2006-01-04 西安迪戈科技有限责任公司 智能搜索、智能文件系统和自动智能助手的方法
US20060074831A1 (en) * 2004-09-20 2006-04-06 Hyder Andrew D Virtual assistant

Cited By (89)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11671920B2 (en) 2007-04-03 2023-06-06 Apple Inc. Method and system for operating a multifunction portable electronic device using voice-activation
US11900936B2 (en) 2008-10-02 2024-02-13 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US11348582B2 (en) 2008-10-02 2022-05-31 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US11423886B2 (en) 2010-01-18 2022-08-23 Apple Inc. Task flow identification based on user intent
US9361628B2 (en) 2010-04-13 2016-06-07 Dean Stark Interactive video shelving system
US9733699B2 (en) 2010-04-13 2017-08-15 Dean Stark Virtual anamorphic product display with viewer height detection
US9563906B2 (en) 2011-02-11 2017-02-07 4D Retail Technology Corp. System and method for virtual shopping display
US11120372B2 (en) 2011-06-03 2021-09-14 Apple Inc. Performing actions associated with task items that represent tasks to perform
US9367869B2 (en) 2012-02-13 2016-06-14 Dean Stark System and method for virtual display
US11321116B2 (en) 2012-05-15 2022-05-03 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US11557310B2 (en) 2013-02-07 2023-01-17 Apple Inc. Voice trigger for a digital assistant
US10978090B2 (en) 2013-02-07 2021-04-13 Apple Inc. Voice trigger for a digital assistant
US11862186B2 (en) 2013-02-07 2024-01-02 Apple Inc. Voice trigger for a digital assistant
US11636869B2 (en) 2013-02-07 2023-04-25 Apple Inc. Voice trigger for a digital assistant
US11388291B2 (en) 2013-03-14 2022-07-12 Apple Inc. System and method for processing voicemail
US11798547B2 (en) 2013-03-15 2023-10-24 Apple Inc. Voice activated device for use with a voice-based digital assistant
US11727219B2 (en) 2013-06-09 2023-08-15 Apple Inc. System and method for inferring user intent from speech inputs
CN103489210A (zh) * 2013-09-06 2014-01-01 雷路德 一种虚拟人物主动联系系统及其方法
CN103500244A (zh) * 2013-09-06 2014-01-08 雷路德 一种虚拟朋友会话系统及其方法
US11670289B2 (en) 2014-05-30 2023-06-06 Apple Inc. Multi-command single utterance input method
US11699448B2 (en) 2014-05-30 2023-07-11 Apple Inc. Intelligent assistant for home automation
US11133008B2 (en) 2014-05-30 2021-09-28 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US11257504B2 (en) 2014-05-30 2022-02-22 Apple Inc. Intelligent assistant for home automation
US11810562B2 (en) 2014-05-30 2023-11-07 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
CN111147357A (zh) * 2014-06-19 2020-05-12 微软技术许可有限责任公司 数字助手在通信中的使用
CN111147357B (zh) * 2014-06-19 2022-03-29 微软技术许可有限责任公司 数字助手在通信中的使用
US11838579B2 (en) 2014-06-30 2023-12-05 Apple Inc. Intelligent automated assistant for TV user interactions
US11516537B2 (en) 2014-06-30 2022-11-29 Apple Inc. Intelligent automated assistant for TV user interactions
CN104602130A (zh) * 2015-02-15 2015-05-06 科大讯飞股份有限公司 实现交互式广告的方法及系统
US11842734B2 (en) 2015-03-08 2023-12-12 Apple Inc. Virtual assistant activation
US11087759B2 (en) 2015-03-08 2021-08-10 Apple Inc. Virtual assistant activation
US11070949B2 (en) 2015-05-27 2021-07-20 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on an electronic device with a touch-sensitive display
US11947873B2 (en) 2015-06-29 2024-04-02 Apple Inc. Virtual assistant for media playback
US11550542B2 (en) 2015-09-08 2023-01-10 Apple Inc. Zero latency digital assistant
US11809483B2 (en) 2015-09-08 2023-11-07 Apple Inc. Intelligent automated assistant for media search and playback
US11954405B2 (en) 2015-09-08 2024-04-09 Apple Inc. Zero latency digital assistant
CN113190300A (zh) * 2015-09-08 2021-07-30 苹果公司 分布式个人助理
CN107924313A (zh) * 2015-09-08 2018-04-17 苹果公司 分布式个人助理
US11500672B2 (en) 2015-09-08 2022-11-15 Apple Inc. Distributed personal assistant
US11126400B2 (en) 2015-09-08 2021-09-21 Apple Inc. Zero latency digital assistant
CN113157361A (zh) * 2015-09-08 2021-07-23 苹果公司 分布式个人助理
US11853536B2 (en) 2015-09-08 2023-12-26 Apple Inc. Intelligent automated assistant in a media environment
US11526368B2 (en) 2015-11-06 2022-12-13 Apple Inc. Intelligent automated assistant in a messaging environment
US11809886B2 (en) 2015-11-06 2023-11-07 Apple Inc. Intelligent automated assistant in a messaging environment
US11886805B2 (en) 2015-11-09 2024-01-30 Apple Inc. Unconventional virtual assistant interactions
US11853647B2 (en) 2015-12-23 2023-12-26 Apple Inc. Proactive assistance based on dialog communication between devices
US11037565B2 (en) 2016-06-10 2021-06-15 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US11657820B2 (en) 2016-06-10 2023-05-23 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US11749275B2 (en) 2016-06-11 2023-09-05 Apple Inc. Application integration with a digital assistant
US11152002B2 (en) 2016-06-11 2021-10-19 Apple Inc. Application integration with a digital assistant
US11809783B2 (en) 2016-06-11 2023-11-07 Apple Inc. Intelligent device arbitration and control
CN112905284A (zh) * 2017-05-08 2021-06-04 谷歌有限责任公司 经由可选图形元素初始化与自动代理的会话
US11599331B2 (en) 2017-05-11 2023-03-07 Apple Inc. Maintaining privacy of personal information
US11467802B2 (en) 2017-05-11 2022-10-11 Apple Inc. Maintaining privacy of personal information
US11405466B2 (en) 2017-05-12 2022-08-02 Apple Inc. Synchronization and task delegation of a digital assistant
US11580990B2 (en) 2017-05-12 2023-02-14 Apple Inc. User-specific acoustic models
US11380310B2 (en) 2017-05-12 2022-07-05 Apple Inc. Low-latency intelligent automated assistant
US11862151B2 (en) 2017-05-12 2024-01-02 Apple Inc. Low-latency intelligent automated assistant
US11538469B2 (en) 2017-05-12 2022-12-27 Apple Inc. Low-latency intelligent automated assistant
US11675829B2 (en) 2017-05-16 2023-06-13 Apple Inc. Intelligent automated assistant for media exploration
US11532306B2 (en) 2017-05-16 2022-12-20 Apple Inc. Detecting a trigger of a digital assistant
US11710482B2 (en) 2018-03-26 2023-07-25 Apple Inc. Natural assistant interaction
US11854539B2 (en) 2018-05-07 2023-12-26 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11900923B2 (en) 2018-05-07 2024-02-13 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11169616B2 (en) 2018-05-07 2021-11-09 Apple Inc. Raise to speak
US11907436B2 (en) 2018-05-07 2024-02-20 Apple Inc. Raise to speak
US11487364B2 (en) 2018-05-07 2022-11-01 Apple Inc. Raise to speak
US11431642B2 (en) 2018-06-01 2022-08-30 Apple Inc. Variable latency device coordination
US11009970B2 (en) 2018-06-01 2021-05-18 Apple Inc. Attention aware virtual assistant dismissal
US11360577B2 (en) 2018-06-01 2022-06-14 Apple Inc. Attention aware virtual assistant dismissal
US11630525B2 (en) 2018-06-01 2023-04-18 Apple Inc. Attention aware virtual assistant dismissal
US10984798B2 (en) 2018-06-01 2021-04-20 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11893992B2 (en) 2018-09-28 2024-02-06 Apple Inc. Multi-modal inputs for voice commands
TWI713916B (zh) * 2018-10-24 2020-12-21 淇譽電子科技股份有限公司 即時辨識廣告的互動方法及其互動系統
US11783815B2 (en) 2019-03-18 2023-10-10 Apple Inc. Multimodality in digital assistant systems
US11705130B2 (en) 2019-05-06 2023-07-18 Apple Inc. Spoken notifications
US11675491B2 (en) 2019-05-06 2023-06-13 Apple Inc. User configurable task triggers
US11888791B2 (en) 2019-05-21 2024-01-30 Apple Inc. Providing message response suggestions
US11237797B2 (en) 2019-05-31 2022-02-01 Apple Inc. User activity shortcut suggestions
US11657813B2 (en) 2019-05-31 2023-05-23 Apple Inc. Voice identification in digital assistant systems
US11790914B2 (en) 2019-06-01 2023-10-17 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11281727B2 (en) 2019-07-03 2022-03-22 International Business Machines Corporation Methods and systems for managing virtual assistants in multiple device environments based on user movements
US11765209B2 (en) 2020-05-11 2023-09-19 Apple Inc. Digital assistant hardware abstraction
US11914848B2 (en) 2020-05-11 2024-02-27 Apple Inc. Providing relevant data items based on context
US11924254B2 (en) 2020-05-11 2024-03-05 Apple Inc. Digital assistant hardware abstraction
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11838734B2 (en) 2020-07-20 2023-12-05 Apple Inc. Multi-device audio adjustment coordination
US11696060B2 (en) 2020-07-21 2023-07-04 Apple Inc. User identification using headphones
US11750962B2 (en) 2020-07-21 2023-09-05 Apple Inc. User identification using headphones

Also Published As

Publication number Publication date
WO2011097309A2 (en) 2011-08-11
CA2794542A1 (en) 2011-08-11
EP2531912A4 (en) 2015-01-21
EP2531912A2 (en) 2012-12-12
WO2011097309A3 (en) 2011-12-01
US20110191681A1 (en) 2011-08-04

Similar Documents

Publication Publication Date Title
CN102844738A (zh) 用于人工智能个人助理的系统和方法
US10846937B2 (en) Three-dimensional virtual environment
Buhalis et al. eTourism: critical information and communication technologies for tourism destinations
Bergeron Essentials of CRM: A guide to customer relationship management
US7624044B2 (en) System for marketing goods and services utilizing computerized central and remote facilities
US6055514A (en) System for marketing foods and services utilizing computerized centraland remote facilities
CN111279336A (zh) 通过浏览器应用程序编程接口提供加密货币支付
JP2018195328A (ja) 売買情報交換装置及び方法
Krishnan et al. Impact of artificial intelligence-based chatbots on customer engagement and business growth
CN101073094A (zh) 通用网络营销系统
Radde Digital Guest Experience: Tools to help hotels to manage and optimize the digital guest experience
Lee Chatbots and communication: The growing role of artificial intelligence in addressing and shaping customer needs
De Kare-Silver e-shock 2020: how the digital technology revolution is changing business and all our lives
Subramaniam The future of competitive strategy: Unleashing the power of data and digital ecosystems
Siregar Phenomenological Analysis of Consumer Shopping Behavior in Asia and Europe
Harker et al. Exploring the needs of SMEs for mobile data technologies: the role of qualitative research techniques
WO2012099302A1 (ko) 가상 동네 서비스 제공 방법
Hisrich et al. E-commerce challenges and entrepreneurial manager
Heinemann Forms of Online Trade
Nguyen The Development of Customer Experience of Food Delivery Service in Finland: Case Company Wolt Enterprises Oy
Clarke III et al. Challenges of transforming a traditional brick-and-mortar store into a bricks-and-clicks model: A small business case study
US20210103903A1 (en) System for marketing goods and services utilizing computerized central and remote facilities
EP1272910A2 (en) System for marketing goods and services utilizing computerized central and remote facilities
Nash Relationship management: Improving business relationships in the internet age
Wang et al. Xiaomi: An Internet-Driven Miracle

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20121226