CN110753911B - 应用之间的自动情境传递 - Google Patents

应用之间的自动情境传递 Download PDF

Info

Publication number
CN110753911B
CN110753911B CN201880040026.5A CN201880040026A CN110753911B CN 110753911 B CN110753911 B CN 110753911B CN 201880040026 A CN201880040026 A CN 201880040026A CN 110753911 B CN110753911 B CN 110753911B
Authority
CN
China
Prior art keywords
application
content page
computing device
context
user interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880040026.5A
Other languages
English (en)
Other versions
CN110753911A (zh
Inventor
马里奥·亚尼玛
法扎德·科斯罗沙西
吉纳维芙·奎瓦斯
刘柳
卢卡斯·佩蒂纳蒂
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN110753911A publication Critical patent/CN110753911A/zh
Application granted granted Critical
Publication of CN110753911B publication Critical patent/CN110753911B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/107Computer-aided management of electronic mailing [e-mailing]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/543User-generated data transfer, e.g. clipboards, dynamic data exchange [DDE], object linking and embedding [OLE]

Abstract

通常,本公开指向一种计算设备,该计算设备被配置为识别和显示被确定为与当前任务相关的信息。计算设备接收与第二应用的内容页面相关联的信息,该内容页面的至少一部分被包括在图形用户界面中。计算设备基于该信息,确定第二应用的情境。计算设备基于该情境,确定与第二应用有关的一个或多个应用中的每个应用的对象组。计算设备生成第一应用的内容页面,该内容页面包括来自至少一个相应对象组的至少一个对象的图形指示。计算设备在图形用户界面内输出第一应用的内容页面的至少一部分用于显示。

Description

应用之间的自动情境传递
背景技术
尽管能够同时地执行多个应用,但是应用被设计为作为特定应用的隔离实例来执行,并且一旦在应用的特定实例内发生事件(例如,用户输入或满足其他要求)就改变状态。一些应用能够与其他不同的应用进行通信,但是通常需要到相应应用内的相关数据的明确导航以及附加用户输入,以启动应用之间的数据交换。移动计算设备的用户可能必须提供输入以在不同的应用图形用户界面(GUI)之间切换,以完成特定任务。例如,计算设备的用户可能必须停止在文字处理应用中输入文本,提供输入以使得该设备切换到日历应用,在日历应用内手动地导航以便定位可能与文字处理应用中正在查看的文本文档相关的任何事件,并且在日历应用的GUI提供又一附加输入,以选择或重新创建用户可能想要完成编辑文本文档的信息。提供由一些计算设备进行各种任务所需的多个输入可能是乏味、重复和耗时的。
发明内容
通常,本公开指向可以使得计算设备能够识别和显示来自各种应用的信息的技术,该信息被确定为与使用当前执行的应用正在进行的任务相关。例如,计算设备可以初始执行应用,并且在该应用内开始进行任务。例如,计算设备可以执行电子邮件应用,并且用户可以在电子邮件应用内开始进行起草电子邮件的任务。计算设备可以执行伴随应用,该伴随应用识别通常与一个或多个其他应用相关联的信息,该信息和与用初始执行的应用正在进行的任务相关联的情境信息有关。情境信息可以指定与使用当前执行的应用正在进行的任务相关联的对象、人、事件等。情境信息可以是与内容页面相关联的内容信息的主题或者特征或元素。例如,情境信息可以识别正在起草的电子邮件的接收者、正在起草的电子邮件的正文内的内容或者可以帮助计算设备识别电子邮件的细节的任何其他信息。伴随应用可以从一个或多个其他应用检索许多类型的数据对象,诸如是电子邮件、文档、文件、联系信息、事件信息或者被存储在计算设备或计算设备可访问的任何其他数据。例如,如果电子邮件包括引用特定事件的内容,则伴随应用可以检索关于该事件的日历信息、因特网搜索该事件的网页结果或者与该事件的话题(topic)有关的文档。计算设备可以在视觉上位于当前执行的应用的图形用户界面的顶部、旁边或内部的窗口或框架内显示潜在相关信息的指示。响应于检测到用户输入以选择信息的部分,计算设备可以向初始执行的应用提供选择的信息。当前执行的应用可以将选择的信息的部分插入与正在进行的任务有关的初始执行的应用的部分GUI内,或者利用伴随应用中所选择的信息以其他方式在初始执行的应用内进行功能。确定第二应用的情境可以替代地包括确定与第二应用有关的活动。它可以替代地包括确定与第二应用的内容页面的内容信息有关的活动。
方法包括,由在计算设备执行的第一应用接收在计算设备执行的第二应用的内容信息,第二应用的内容信息的至少第一部分被包括在计算设备的图形用户界面中。方法包括,由第一应用并且基于第二应用的内容信息,确定由第二应用所显示的内容信息的主题、特征或元素中的一个或多个。第一应用至少部分地基于第二应用的内容信息的主题、特征或元素,确定来自一个或多个其他应用的一个或多个对象。对象与第二应用的内容信息的主题、特征或元素有关。第一应用生成包括与第二应用的内容信息的主题、特征或元素有关的至少一个对象的图形指示的内容。第一应用在图形用户界面内输出第一应用的内容,同时第二应用的内容也被包括在图形用户界面中。
通过向伴随应用提供与初始执行的应用相关联的情境信息,本公开的技术可以为用户提供快速获得被确定为与使用在计算设备执行的应用正在进行的任务相关的文档、文件或任何其他数据的方式,而无需用户在多个不同的应用之间切换、手动地导航到相应应用内的相关内容页面或者辨别在两个不同的应用之间移动对象所需的输入。以该方式,本公开的技术可以减少从其他应用检索相关对象所需的时间量和用户输入的数量,这可以简化用户体验并且可以减少计算设备的功耗。
在一个示例中,本公开指向一种方法,所述方法包括,由在计算设备执行的第一应用接收与在所述计算设备执行的第二应用的内容页面相关联的信息。所述第二应用的所述内容页面的至少第一部分被包括在所述计算设备的图形用户界面中。所述方法进一步包括,由所述第一应用并且基于与所述第二应用的所述内容页面相关联的所述信息,确定所述第二应用的情境。所述方法进一步包括,由所述第一应用并且至少部分地基于所述第二应用的所述情境,确定来自与所述第二应用有关的一个或多个应用的每个应用的相应对象组。所述方法进一步包括,由所述第一应用并且至少部分地基于所述相应对象组,生成所述第一应用的内容页面,所述内容页面包括来自至少一个所述相应对象组的至少一个对象的一个或多个图形指示。所述方法进一步包括,当所述第二应用的所述内容页面的至少第二部分被包括在所述图形用户界面中时,由所述第一应用在所述计算设备的所述图形用户界面内输出所述第一应用的所述内容页面的至少一部分用于显示。
在另一示例中,本公开指向一种计算设备,所述计算设备包括至少一个处理器以及存储器,所述存储器存储与第一应用相关联的指令。所述指令在被执行时使得所述至少一个处理器接收与在所述计算设备执行的第二应用的内容页面相关联的信息。所述第二应用的所述内容页面的至少第一部分被包括在所述计算设备的图形用户界面中。所述指令进一步使得所述至少一个处理器基于与所述第二应用的所述内容页面相关联的所述信息,确定所述第二应用的情境。所述指令进一步使得所述至少一个处理器至少部分地基于所述第二应用的所述情境,确定来自与所述第二应用有关的一个或多个应用的每个应用的相应对象组。所述指令进一步使得所述至少一个处理器至少部分地基于所述相应对象组,生成所述第一应用的内容页面,所述内容页面包括来自至少一个所述相应对象组的至少一个对象的一个或多个图形指示。当所述第二应用的所述内容页面的至少第二部分被包括在所述图形用户界面中时,所述指令进一步使得所述至少一个处理器在所述计算设备的所述图形用户界面内输出所述第一应用的所述内容页面的至少一部分用于显示。
在另一示例中,本公开指向一种存储指令的非暂时性计算机可读存储介质,所述指令在被执行时使得计算设备的至少一个处理器接收与在所述计算设备执行的第二应用的内容页面相关联的信息。所述第二应用的所述内容页面的至少第一部分被包括在所述计算设备的图形用户界面中。所述指令进一步使得所述至少一个处理器基于与所述第二应用的所述内容页面相关联的所述信息,确定所述第二应用的情境。所述指令进一步使得所述至少一个处理器至少部分地基于所述第二应用的所述情境,确定来自与所述第二应用有关的一个或多个应用的每个应用的相应对象组。所述指令进一步使得所述至少一个处理器至少部分地基于所述相应对象组,生成所述第一应用的内容页面,所述内容页面包括来自至少一个所述相应对象组的至少一个对象的一个或多个图形指示。当所述第二应用的所述内容页面的至少第二部分被包括在所述图形用户界面中时,所述指令进一步使得所述至少一个处理器在所述计算设备的所述图形用户界面内输出所述第一应用的所述内容页面的至少一部分用于显示。
在下面的附图和说明书中阐述了本公开的一个或多个示例的细节。根据说明书和附图,以及根据权利要求书,本公开的其他特征、对象和优势将是显而易见的。
附图说明
图1是示出根据本公开的一个或多个方面的示例计算设备的概念图,该计算设备被配置为识别和显示被确定为与正在进行的任务相关的信息。
图2是示出根据本公开的一个或多个方面的示例计算设备的框图,该计算设备被配置为识别和显示被确定为与正在进行的任务相关的信息。
图3A-3C是示出根据本公开的一个或多个方面的示例计算设备的操作序列的概念图,该计算设备被配置为识别和显示被确定为与正在进行的任务相关的信息。
图4是示出根据本公开的一个或多个方面的示例计算设备的进一步示例操作的流程图,该计算设备被配置为识别和显示被确定为与正在进行的任务相关的信息。
具体实施方式
图1是示出根据本公开的一个或多个方面的示例计算设备110的概念图,该计算设备110被配置为识别和显示被确定为与正在进行的任务相关的信息。在图1的示例中,计算设备110表示单独的移动或非移动计算设备。计算设备110的示例包括移动电话,平板电脑,膝上型电脑,台式电脑,服务器,大型机,机顶盒,电视,可穿戴设备(例如,计算机化手表、计算机化眼镜、计算机化手套等),家庭自动化设备或系统(例如,智能恒温器或家庭助理设备),个人数字助理(PDA),游戏系统,媒体播放器,电子书阅读器,移动电视平台,汽车导航或信息娱乐系统,或者被配置为执行伴随应用(companion application)(例如,应用118B)或以其他方式访问与计算设备110当前正在进行的任务有关的应用的任何其他类型的移动、非移动、可穿戴和非可穿戴计算设备。
计算设备110包括用户界面(UID)112。计算设备110的UID 112可以用作计算设备110的输入和/或输出设备。可以使用各种技术来实施UID 112。例如,UID 112可以用作使用存在敏感(presence-sensitive)输入屏的输入设备,该存在敏感输入屏诸如是电阻触摸屏、表面声波触摸屏、电容触摸屏、投射电容触摸屏、压敏屏、声脉冲识别触摸屏或另一存在敏感显示技术。
UID 112可以用作使用麦克风技术、红外传感器技术或用于接收用户输入的其他输入设备技术的输入设备。例如,UID 112可以使用内置麦克风技术来检测UI模块120和/或情境模块122用于完成任务而处理的语音输入。作为另一示例,UID 112可以包括可以从计算设备110的用户接收触觉输入的存在敏感显示。UID 112可以通过检测来自用户的一个或多个手势(例如,用户用手指或手写笔来触摸或指向UID 112的一个或多个位置)来接收触觉输入的指示。
UID 112可以用作输出(例如,显示)设备,并且向用户呈现输出。UID 112可以用作使用任何一个或多个显示设备的输出设备,该显示设备诸如是液晶显示器(LCD)、点矩阵显示器、发光二极管(LED)显示器、有机发光二极管(OLED)显示器、电子墨水或能够向计算设备110的用户输出可见信息的类似的单色或彩色显示器。UID 112可以用作使用扬声器技术、触觉反馈技术或用于向用户输出信息的其他输出设备技术的输出设备。UID 112可以呈现与应用118A和118B以及情境模块122有关的用户界面(例如,用户界面102A或102B)。UID112可以呈现与在计算设备110执行和/或从计算设备110可访问的计算平台、操作系统、应用和/或服务(例如,电子邮件、聊天、在线服务、电话、游戏等)的其他特征有关的用户界面。
计算设备110进一步包括应用118A和118B、用户界面(UI)模块120和情境模块122。应用118A和118B以及模块120和122可以使用驻留在计算设备110中和/或在计算设备110执行的软件,硬件,固件或者硬件、软件和固件的混合来进行描述的操作。计算设备110的一个或多个处理器或者多个设备的处理器可以执行被存储在计算设备110的存储器或其他非暂时性存储介质的指令,以进行应用118A和118B以及模块120和122的操作。计算设备110可以将应用118A和118B以及模块120和122执行为在底层硬件上执行的虚拟机。应用118A和118B以及模块120和122可以执行为操作系统或计算平台的一个或多个服务。应用118A和118B以及模块120和122可以执行为在计算平台的应用层的一个或多个可执行程序。
UI模块120管理与UID 112和计算设备110的其他组件的用户交互。换句话说,UI模块120可以充当计算设备110的各种组件之间的中介,以基于由UID 112所检测的用户输入来进行确定,并且响应于用户输入而在UID 112生成输出。UI模块120可以从计算设备110的应用、服务、平台或其他模块接收指令,以使得UID 112输出用户界面(例如,用户界面14A)。UI模块120可以在用户查看并且与在UID 112所呈现的用户界面进行交互时管理由计算设备110所接收的输入,并且响应于从正在处理用户输入的计算设备110的应用、服务、平台或其他模块接收到附加指令来更新用户界面。
如图1中所示,用户界面102A是电子邮件用户界面。然而,用户界面102A可以是在诸如应用118A的第一应用的执行期间所产生的任何图形用户界面。在图1的示例中,用户界面102A包括内容对象104A(即,电子邮件通信的“to”字段)、内容对象104B(即,电子邮件通信的“from”字段)和内容对象104C(即,电子邮件通信的正文)。
根据本公开的技术,UI模块120可以执行应用118A,生成当前正在计算设备110上执行的应用118A的内容页面。在图1的示例中,应用118A是作为应用的网页套件的一部分的电子邮件应用。电子邮件应用的内容页面可以包括“To”字段、“From”字段、主题行、电子邮件正文区域、电子邮件的列表、电子邮件链中的附加内容或者与用户的电子邮件收件箱或发件箱有关的任何附加内容,包括文本、图像、元数据、应用状态、应用代码、字段标识符、文件名或文件类型。
UI模块120可以输出图形用户界面102A用于经由UID 112显示,图形用户界面102A包括应用118A的内容页面的至少一部分。在图1的示例中,被包括在图形用户界面102A中的内容页面的该部分由内容对象104A(即,电子邮件通信的“to”字段)、内容对象104B(即,电子邮件通信的“from”字段)和内容对象104C(即,电子邮件通信的正文)组成。然而,在其他示例中,UI模块120可以基于UID 112中可用的图形空间以及每个内容对象内所包含的内容量来输出更多的内容对象或更少的内容对象。
在从用户接收到这样做的明确许可之后,情境模块122可以执行应用118B,以接收与应用118A的内容页面相关联的信息。然后,情境模块122可以执行应用118B,以基于应用118A的内容页面,对于应用118B确定应用118A的情境。情境可以包括关于应用118A的当前状态的任何信息,该情境可以提供在应用118A内正在进行的当前任务、在应用118A内要进行的未来任务或与应用118A相关的任何其他信息的指示。例如,在执行应用118B之前,UI模块120可以输出对明确用户许可以执行应用118B并且传送与应用118A的内容页面相关联的信息的请求。在接收到这样做的明确许可之后,情境模块122可以开始执行应用118B。如果明确许可被拒绝,则情境模块122可以替代地避免执行应用118B。
在图1的示例中,情境模块122可以确定内容对象104A指示当前电子邮件通信是向计算设备110的用户所发送的接收到的电子邮件。情境模块122可以进一步确定内容对象104B指示用户的老板“Manager John”是当前电子邮件通信的作者,因此该电子邮件可能与工作有关。最终,情境模块122可以进一步确定内容对象104C指示用户的老板正在请求由用户和老板所编写的关于与X公司的交易的文档。
虽然图1的示例描述了情境模块122使用UI模块120当前正在输出用于经由UID112显示的内容对象,但是情境模块122可以在情境确定处理中分析内容页面内的任何内容对象,包括UI模块120当前没有输出用于显示但是在相同内容页面上的内容对象。例如,内容对象104C可以是对先前电子邮件链的回复,该电子邮件链被包括在内容页面上但是在屏幕外。当确定应用118A的情境时,情境模块122可以将先前电子邮件链用作附加数据。
至少部分地基于应用118A的情境,情境模块122可以执行应用118B,以确定来自与应用118A有关的一个或多个应用的每个应用的相应对象组。例如,应用118A,电子邮件应用,可以是应用的网页套件的一部分。应用118B可以被配置为访问来自将与应用118A有关的相同网页套件内的其他应用的数据。在其他情况下,可以与应用118A交换数据的任何应用都可以被认为是有关应用。在其他情况下,由与应用118A相同的公司所开发的任何应用都可以被认为是有关应用。在其他情况下,可以与和应用118A相同的数据存储设备的内容进行交互的任何应用都可以被认为是有关应用。
在图1的示例中,应用118B将应用118A的情境确定为用户正在查看与用户的老板的电子邮件往来,以便查找用户和用户的老板共同起草的特定文档。然后,情境模块122可以基于确定的情境来执行应用118B,以在与应用118A有关的文档编辑/存储应用内搜索文档(例如,关于X公司的文档和与所述X公司发生的交易)。应用118B可以检索与有关文档编辑/存储应用相关联的文档的列表,该文档包括对X公司的引用、用户的企业是其当事方的交易、由用户和用户的老板所共同编写的文档等。
应用118B可以向UI模块120转发检索的对象的列表,UI模块120可以生成应用118B的内容页面,该内容页面包括来自至少一个相应对象组的至少一个对象的一个或多个图形指示。内容页面可以包括由应用118B所检索的对象组的一部分或全部。然后,UI模块120可以输出图形用户界面102B用于在UID 112显示,同时显示图形用户界面102A的至少一部分,图形用户界面102B包括应用118B的内容页面的至少一部分。
例如,应用118B可以检索一组与X公司、用户是其当事方的交易或者由用户和用户的老板所共同编写的文档有关的十个文档。应用118B可以基于文档与确定的情境匹配的紧密程度来对文档进行排序。在图1的示例中,标题为“Corporation X Deal.doc”的文档106A可以是由用户和用户的老板所共同编写的有关用户的公司与X公司之间的交易的文档。标题为“Corporation X Fee Agreement.doc”的文档106B可以是由用户和用户的老板所共同编写的有关用户的公司与X公司之间的先前费用协议的文档。标题为“Corporation RDeal.doc”的文档106C可以是由用户所编写的有关用户的公司与R公司之间的交易的文档。UI模块120可以确定UID 112足够大以显示十个文档中的三个文档。UI模块120可以输出图形用户界面102B,如显示十个总检索文档中的前三个文档或在应用118B先前所生成的排名列表中排名最高的三个文档(即,文档106A-106C)。图形用户界面102B可以是可滚动的,使得可以向用户显示初始没有被显示在图形用户界面102B中的其他七个文档中的每个文档。
通过利用应用118B来确定在计算设备110上执行的应用118A的情境信息,计算设备110可以为用户提供快速获得被确定为与由计算设备110上的应用118A正在进行的任务相关的文档、文件或任何其他存储的数据对象的方式,而无需用户在多个不同的应用之间切换、手动地导航到相应应用内的相关内容页面或者辨别在两个不同的应用之间移动对象所需的输入。例如,在图1的示例中,用户可以将文档106A,由用户的老板所请求的可能文档,拖到应用118A的图形用户界面的回复字段中,以将请求的文档附加到回复电子邮件。以该方式,本公开的技术可以减少在其他应用中检索相关对象所需的时间量和用户输入的数量,这可以简化用户体验并且可以减少计算设备110的功耗。
通过向应用118B提供与应用118A相关联的情境信息,本公开的技术可以为用户提供快速获得被确定为与使用应用118A正在进行的任务相关的文档、文件或任何其他数据的方式,而无需用户在多个不同的应用之间切换、手动地导航到相应应用内的相关内容页面或者辨别在两个不同的应用之间移动对象所需的输入。以该方式,本公开的技术可以减少从其他应用检索相关对象所需的时间量和用户输入的数量,这可以简化用户体验并且可以减少计算设备110的功耗。
图2是示出根据本公开的一个或多个方面的示例计算设备的框图,该计算设备被配置为识别和显示被确定为与正在进行的任务相关的信息。下面将图2的计算设备210描述为图1的计算设备110A和/或110B的示例。图2仅示出了计算设备210的一个特定示例,并且计算设备210的许多其他示例可以用在其他实例中,并且可以包括示例计算设备210中所包括的组件的子集,或者可以包括图2中没有示出的附加组件。
如在图2的示例中所示,计算设备210包括用户界面设备(UID)212、一个或多个处理器240、一个或多个通信单元242、一个或多个输入组件244、一个或多个输出组件246以及一个或多个存储组件248。UID 212包括显示组件202和存在敏感输入组件204。计算设备210的存储组件248包括应用218A、应用218B、UI模块220、情境模块222、一个或多个有关应用224以及有关对象数据存储226。
一个或多个处理器240可以实施功能和/或执行与计算设备210相关联的指令,以主动地将用户引导到应用218A上的与在计算设备210上正在进行的任务有关的信息。处理器240的示例包括应用处理器,显示控制器,辅助处理器,一个或多个传感器集线器,以及配置为用作处理器、处理单元或处理设备的任何其他硬件。模块218A、218B、220和222可以由处理器240操作为进行计算设备210的各种动作、操作或功能。例如,计算设备210的处理器240可以检索并且执行由存储组件248所存储的指令,该指令使得处理器240进行操作模块218A、218B、220和222。指令在由处理器240执行时,可以使得计算设备210向应用218B提供关于应用218A的信息,应用218B确定应用218A的情境并且基于该情境检索有关对象。
UI模块220可以包括图1的计算设备110的UI模块120的所有功能,并且可以进行与UI模块120类似的操作,用于管理计算设备210在UID 212提供的用户界面(例如,用户界面102A和102B),例如,用于促进计算设备110的用户与应用218A和218B之间的交互。例如,计算设备210的UI模块220可以从应用218A和218B接收信息,该信息包括用于输出(例如,显示)伴随用户界面(例如,用户界面102B)的指令。UI模块220可以通过通信通道250从应用218B接收信息,并且使用数据来生成用户界面。UI模块220可以通过通信通道250传送显示命令和相关联的数据,以使得UID 212在UID 212呈现用户界面。
情境模块222可以包括图1的计算设备110的情境模块122的所有功能,并且可以进行与情境模块122类似的操作,用于执行应用218B。在一些示例中,情境模块222可以在本地(例如,在处理器240)执行,以提供与检索与应用218A的当前情境有关的对象相关联的功能。在一些示例中,情境模块222可以充当到计算设备210可访问的远程伴随服务的接口。例如,情境模块222可以是到应用218B的远程版本的接口或应用编程接口(API)。
一个或多个有关应用224表示在计算设备210执行和从计算设备210可访问的所有各种单独的应用和服务,该应用和服务可以由应用218B和情境模块222访问以向用户提供信息和/或进行任务。有关应用224的许多示例可以存在并且包括电子邮件应用、聊天或消息应用、日历应用、文档处理应用、联系人存储应用、搜索应用、地图或导航应用、运输服务应用(例如,公共汽车或火车跟踪应用)、社交媒体应用、因特网浏览器应用或者可以在计算设备210执行的任何和所有其他应用。通常,一个或多个有关应用224可以包括在与应用218A相同的套件中的任何应用、可以与应用218A交换数据的任何应用、由与应用218A相同的公司所开发的任何应用或者可以与和应用218A相同的数据存储设备的内容进行交互的任何应用。
如在整个本公开中所使用的,术语“情境”用于描述可以由情境模块222和应用218B用来定义计算设备以及计算设备的用户使用应用218A在特定时间可能正在进行的任务或有关任务的细节的任何信息。例如,在接收到来自用户的明确许可之后,应用218B可以接收关于使用应用218A正在进行的当前状态或当前任务的信息,并且基于所述信息来确定情境。通常,应用218B可以基于应用218A的内容页面中的信息来确定情境,该内容页面的至少一部分可以被输出,用于在图形用户界面中显示。内容页面可以包括各种内容对象或内容数据结构,每个内容对象或内容数据结构可以包括应用218B可以分析以确定应用218A的情境的文本、图像、媒体、音频、元数据、计算机代码或统一资源定位符(URL)信息。
计算设备210内的一个或多个存储组件248可以存储用于在计算设备210的操作期间进行处理的信息(例如,计算设备210可以存储在计算设备210处执行期间由模块218A、218B、220和222所访问的数据)。在一些示例中,存储组件248是临时存储器,这意味着存储组件248的主要目的不是长期存储。计算设备210上的存储组件248可以被配置用于作为易失性存储器将信息进行短期存储,因此如果断电则不保留存储的内容。易失性存储器的示例包括随机存取存储器(RAM)、动态随机存取存储器(DRAM)、静态随机存取存储器(SRAM)以及本领域已知的其他形式的易失性存储器。
在一些示例中,存储组件248还包括一个或多个计算机可读存储介质。在一些示例中,存储组件248包括一个或多个非暂时性计算机可读存储介质。存储组件248可以被配置为存储比通常由易失性存储器所存储的信息量更大的信息量。存储组件248可以进一步被配置用于作为非易失性存储空间将信息进行长期存储,并且在通电/断电周期之后保留信息。非易失性存储器的示例包括磁性硬盘、光盘、软盘、闪存或者电可编程存储器(EPROM)或电可擦可编程存储器(EEPROM)的形式。存储组件248可以存储与模块218A、218B、220和222以及数据存储226相关联的程序指令和/或信息(例如,数据)。存储组件248可以包括被配置为存储与模块218A、218B、220和222以及数据存储226相关联的数据或其他信息的存储器。
通信通道250可以互连组件212、240、242、244、246和248中的每个组件,用于组件间通信(物理地、通信地和/或可操作地)。在一些示例中,通信通道250可以包括系统总线、网络连接、进程间通信数据结构或用于传递数据的任何其他方法。
计算设备210的一个或多个通信单元242可以通过在一个或多个网络上传送和/或接收网络信号,来经由一个或多个有线和/或无线网络与外部设备进行通信。通信单元242的示例包括网络接口卡(例如,诸如以太网卡)、光收发器、射频收发器、GPS接收器或者可以发送和/或接收信息的任何其他类型的设备。通信单元242的其他示例可以包括短波无线电、蜂窝数据无线电、无线网络无线电以及通用串行总线(USB)控制器。
计算设备210的一个或多个输入组件244可以接收输入。输入的示例是触觉、音频和视频输入。在一个示例中,计算设备210的输入组件242包括存在敏感输入设备(例如,触敏屏、PSD)、鼠标、键盘、语音响应系统、相机、麦克风或者用于检测来自人或机器的输入的任何其他类型的设备。在一些示例中,输入组件242可以包括一个或多个传感器组件、一个或多个位置传感器(GPS组件、Wi-Fi组件、蜂窝组件)、一个或多个温度传感器、一个或多个移动传感器(例如,加速度计、陀螺仪)、一个或多个压力传感器(例如,气压计)、一个或多个环境光传感器以及一个或多个其他传感器(例如,红外接近传感器、湿度计传感器等)。举几个其他非限制性示例,其他传感器可以包括心率传感器、磁力计、葡萄糖传感器、嗅觉传感器、罗盘传感器、步数计数器传感器。
计算设备210的一个或多个输出组件246可以以选择的模式生成输出。模式的示例可以包括触觉通知、听觉通知、视觉通知、机器生成的语音通知或者其他模式。在一个示例中,计算设备210的输出组件246包括存在敏感显示器、声卡、视频图形适配器卡、扬声器、阴极射线管(CRT)监视器、液晶显示器(LCD)或者用于以选择的模式生成对人或机器的输出的任何其他类型的设备。
计算设备210的UID 212可以类似于计算设备110A的UID 112,并且包括显示组件202和存在敏感输入组件204。显示组件202可以是屏幕,由UID 212在该屏幕显示信息(例如,视觉指示),而存在敏感输入组件204可以在显示组件202处和/或显示组件202附近检测对象。
虽然被示为计算设备210的内部组件,但是UID 212还可以表示与计算设备210共享数据路径用于传送和/或接收输入和输出的外部组件。例如,在一个示例中,UID 212表示位于计算设备210的外部包装内并且物理连接到计算设备210的外部包装的计算设备210的内置组件(例如,移动电话上的屏幕)。在另一示例中,UID 212表示位于计算设备210的包装或壳体外部并且与计算设备210的包装或壳体物理分离的计算设备210的外部组件(例如,与计算设备210共享有线和/或无线数据路径的监视器、投影仪等)。
计算设备210的UID 212可以检测二维和/或三维手势作为来自计算设备210的用户的输入。例如,UID 212的传感器可以检测在UID 212的传感器的阈值距离内的用户的移动(例如,移动手、手臂、笔、手写笔等)。UID 212可以确定移动的二维或三维向量表示,并且将向量表示与具有多维的手势输入(例如,挥手、捏、拍手、笔触等)相关联。换句话说,UID212可以检测多维手势,而无需用户在UID 212输出用于显示的信息的屏幕或表面处或者屏幕或表面附近进行手势。相反,UID 212可以检测在传感器处或传感器附近所进行的多维手势,该传感器可以位于或可以不位于UID 212输出用于显示的信息的屏幕或表面附近。
根据本公开的技术,UI模块220可以执行应用218A,生成当前正在计算设备210上执行的应用218A的内容页面。在图2的示例中,应用218A可以是聊天应用。聊天应用的内容页面可以包括联系人字段、用户识别字段、先前聊天历史、当前聊天对话、文本输入字段、与其他用户的对话窗口、聊天应用中对方的附加联系信息或者与用户的聊天对话有关的任何附加内容,包括文本、图像、元数据、应用状态、应用代码、字段标识符、文件名或文件类型。
UI模块220可以输出图形用户界面用于经由UID 212显示,该图形用户界面包括应用218A的内容页面的至少一部分。在图2的示例中,被包括在图形用户界面中的内容页面的该部分可以包括当前聊天对话、当前聊天伙伴以及用于用户输入文本或者将媒体或其他文件附加到聊天对话的通信输入字段。然而,在其他示例中,UI模块可以基于UID112中可用的图形空间以及每个内容对象内所包含的内容量来输出更多的内容对象或更少的内容对象。
情境模块222可以执行应用218B,以接收与应用218A的内容页面相关联的信息。例如,应用218B可以接收用户与当前聊天伙伴之间的聊天历史、通信输入字段中的任何信息、关于当前聊天对话的任何信息以及用户当前正在对话的其他聊天伙伴。当前聊天对话的一部分可以包括与聊天伙伴讨论周末计划。在一些示例中,情境模块222可以响应于接收到用户输入以开始执行应用218B的指示而开始执行应用218B以确定情境。
然后,情境模块222可以执行应用218B,以基于应用218A的内容页面,对于应用218A确定应用218B的情境。情境可以包括关于应用218A的当前状态的任何信息,该情境可以提供在应用218A内正在进行的当前任务、在应用218A内要进行的未来任务或与应用218A相关的任何其他信息的指示。在图2的示例中,情境模块222可以确定用户正在与当前聊天伙伴讨论周末计划。情境模块222可以进一步确定当前聊天对话包括用户和聊天伙伴都喜欢的食物的讨论,即使当前聊天对话的该部分当前没有被显示在UID 212上。最终,情境模块222可以进一步确定用户之间的聊天历史包括用户和聊天伙伴都感兴趣访问的活动场所,即使聊天历史的该部分当前没有被显示在UID 212上。
在确定情境时,应用218B可以识别第二应用的内容页面中的一个或多个内容对象。内容对象可以包括文本、图像、元数据、应用状态、应用代码、字段标识符、文件名或文件类型中的一个或多个。从这些内容对象,应用218B可以提取一个或多个内容对象中的每个内容对象的至少一个相应属性。应用218B可以至少部分地基于一个或多个内容对象中的每个内容对象的至少一个相应属性中的一个或多个属性来确定情境。例如,应用218B可以从当前对话窗口提取文本。应用218B可以解析当前对话的文本以确定对话的话题或对话的特定主题。在当前情况下,当前聊天对话包括与聊天伙伴讨论周末计划。这样,应用218B解析文本以确定用户可能正在尝试与聊天伙伴制定计划,并且检索与用户的日历有关的对象可能有助于当前对话。
类似地,如果用户已经在与当前聊天伙伴交换媒体文件(例如,图像、音频或视频)或其他文档,则应用218B可以分析交换的文件,诸如使用图像识别、文件名分析、音频解析或者任何其他分析以确定交换的文件的内容。应用218B可以基于该分析的附加结果来确定情境。
至少部分地基于应用218A的情境,情境模块222可以执行应用218B,以确定从有关应用224到应用218A的每个应用的相应对象组。例如,应用218A,聊天应用,可以是应用的网页套件的一部分。应用218B可以被配置为访问来自有关应用224的数据,有关应用224可以是相同网页套件内的其他应用,有关应用224将与应用218A有关。在其他情况下,有关应用224可以包括可以与应用218A交换数据的任何应用。在其他情况下,有关应用224可以包括由与应用218A相同的公司所开发的任何应用。在其他情况下,有关应用224可以包括可以与和应用218A相同的数据存储设备的内容进行交互的任何应用。
在检索相应对象组时,应用218B可以基于情境来构造与应用218A有关的一个或多个应用224中的每个应用的相应搜索查询。然后,应用218B可以执行来自相应搜索查询的每个相应搜索查询,以从来自与应用218A有关的一个或多个应用224的对应应用的有关对象数据存储226检索相应对象组。在这样的情况下,有关对象数据存储226包括相应对象组。例如,有关应用224的日历应用可以利用有关对象数据存储226来存储日历事件的实例。基于用户讨论周末计划的情境,应用218B可以构造周五晚上5点与周日晚上11点之间发生的事件的搜索查询。应用218B可以在有关对象数据存储226内执行该搜索查询,并且从有关对象数据存储226检索搜索查询的结果,该结果是日历应用的相应对象组。
在一些示例中,应用218B可以检索与多个有关应用224中的每个有关应用相关联的对象,并且输出来自不同应用的对象的集聚(conglomeration)。例如,除了一般的周末计划之外,应用218B确定情境包括用户和聊天伙伴都喜欢的餐厅类型(例如,意大利餐厅)的讨论。除了检索日历事件之外,应用218B还可以执行搜索应用以搜索用户附近的意大利餐厅。在这样的情况下,在构造应用218B的内容页面时,应用218B可以包括两个日历事件的图形指示和该区域中评分最高的意大利餐厅的图形指示,将两个不同的有关应用的结果组合到相同的图形用户界面中。
在图2的示例中,应用218B确定应用218A的情境是用户正在与聊天伙伴讨论周末计划。然后,情境模块222可以基于确定的情境(即,用户与聊天伙伴正在讨论周末计划),执行应用218B以在有关应用224中的日历应用搜索该周末期间的任何日历事件。应用218B可以检索在讨论的时间期间发生的、被存储在有关日历应用中的用户的日历事件的列表。
应用218B可以向UI模块220转发检索的对象的列表,UI模块220可以生成应用218B的内容页面,该内容页面包括来自至少一个相应对象组的至少一个对象的一个或多个图形指示。内容页面可以包括由应用218B所检索的对象组的一部分或全部。然后,UI模块220可以输出图形用户界面202B用于在UID 212显示,同时显示原始图形用户界面的至少一部分,图形用户界面202B包括应用218B的内容页面的至少一部分。在一些情况下,可以以应用218B的内容页面重叠或替换显示的应用218A的图形用户界面的一部分的方式,来显示应用218B的内容页面。在其他情况下,可以以缩小原始图形用户界面并且与应用218B的内容页面并排显示而不增加或减少包含组合的图形用户界面的框架的大小的方式,来显示应用218B的内容页面。
例如,应用218B可以在即将到来的周末的时间表内检索用户的日历中的每个日历事件(例如,周五晚上的音乐会以及周六早上与用户的父母共进早午餐)。UI模块220可以确定UID 212足够大以显示两个日历事件。UI模块220可以输出显示两个日历事件的附加图形用户界面。
在一些情况下,在输出有关对象的图形指示之后,应用218B可以接收用户输入的指示,该用户输入从被包括在第一应用的内容页面中的至少一个对象的一个或多个图形指示选择第一对象的第一图形指示。然后,情境模块222可以向应用218A发送指令,以利用应用218A内的第一对象来进行功能。例如,应用218B可以接收用户输入的指示,该用户输入选择周六早上用户与用户的父母共进早午餐的日历事件。一旦接收到选择,情境模块222就可以将图形卡插入到与聊天伙伴的聊天对话中,并且向聊天伙伴发送图形卡,图形卡包括用户的早午餐日历事件的日期、时间和位置信息。
在一些示例中,用户可以选择应用218B应该分析哪些内容对象以便确定情境。例如,应用218B可以接收选择一个或多个图形指示的指示,该一个或多个图形指示表示被包括在应用218A的内容页面中的一个或多个内容对象。然后,应用218B可以基于选择的一个或多个内容对象来确定应用218A的更新的情境。应用218B可以至少部分地基于更新的情境来确定每个有关应用224的相应更新的对象组,并且生成第二应用的更新的内容页面,该更新的内容页面包括来自至少一个相应更新的对象组的至少一个对象的一个或多个图形指示。然后,UI模块220可以在图形用户界面内输出应用218B的更新的内容页面的一部分用于显示。例如,应用218B可以接收用户输入的指示,该用户输入选择明确提及特定类型的餐厅的共同喜好(common affinity)的对话的一部分。因此,应用218B可以确定对话的情境以餐厅的类型而不是专门用于周末的计划为中心。检索的内容对象可以反映更新的情境。
在一些示例中,应用218B的内容页面可以仅包括来自单个有关应用的结果。然而,用户可能希望看到来自不同的有关应用的结果。这样,应用218B可以接收用户输入的指示,该用户输入从有关应用224选择不同的有关应用。应用218B可以至少部分地基于相应对象组来生成应用218B的更新的内容页面,该更新的内容页面包括来自有关应用224的不同的应用的第二对象组的至少一个对象的一个或多个图形指示,并且在图形用户界面内输出应用218B的更新的内容页面的一部分用于显示。例如,用户可能希望发送周五晚上与用户参加音乐会的人的联系信息。这样,用户可能希望访问其通讯簿应用而不是日历应用。应用218B可以接收用户输入的指示,该用户输入选择通讯簿应用,并且基于先前确定的情境来输出新的对象组。
图3A-3C是示出根据本公开的一个或多个方面的示例计算设备的操作序列的概念图,该计算设备被配置为执行伴随应用以识别和显示来自各种应用的信息,该信息可能与使用当前执行的应用正在进行的任务相关。下面在图1的计算设备110的情境中描述图3。例如,根据本公开的一个或多个方面,情境模块122在计算设备110的一个或多个处理器执行时,可以执行应用118B以产生图形用户界面360A-360E。仅为了说明的目的,下面在图1的计算设备110的情境内描述图4。
在图3A中,计算设备110可以执行应用118A以产生图形用户界面260A。在图3A-3C的示例中,应用118A可以是文字处理应用。图形用户界面360A显示用户可能正在编辑关于Z公司在2017年8月8日的客户会议的文本文档。包括议程的会议的进一步细节被包括在图形用户界面360A中。即使图形用户界面360A可以仅包括文本文档的一部分,应用118A的内容页面也可以是整个文本文档。
在某一点,计算设备110可以开始执行应用118B。应用118B可以基于内容页面(即,文本文档的整体)来确定应用118A的情境。应用118B可以提取关于文本文档的信息,包括文本文档的任何附加作者和文本文档的内容。基于该情境,应用118B可以从与应用118A有关的应用检索相应对象组。在图3A的示例中,应用118B可以从电子邮件应用、日历应用和联系簿应用检索对象,该应用中的每个应用与应用118A有关。这些应用的列表,包括包含与所有应用有关的对象的组合的页面,可以由图形元素364来描绘。
在图3A的示例中,应用118B可以确定文本文档的标题是“Client Meeting Kick-Off”。应用118B还可以确定有关电子邮件应用包括具有主题行“Re:Client Kick-offAgenda”的来自文本文档的共同作者的电子邮件。应用118B可以确定该电子邮件可以包括在给定当前情境的情况下对用户有用的信息,并且输出电子邮件消息的图形指示362A。
应用118B还可以在日历应用中找到文字文档中所讨论的会议的日历事件以及会议的一个出席者的联系信息。这样,应用118B还可以在图形用户界面360B中分别输出这些对象的图形指示362B和362C。
在图3B和图形用户界面360C中,因为用户可能正在寻找讨论文本文档的特定电子邮件,所以用户可以从图形指示364的列表选择电子邮件应用。这样,应用118B可以生成仅包括从电子邮件应用的数据存储所检索的电子邮件的更新的内容页面。图形指示366A可以是与在图形用户界面360B中所最初显示的相同的电子邮件消息。然而,图形用户界面360C还可以包括初始没有被显示在图形用户界面360B中的与附加电子邮件相关联的两个附加图形指示366B和366C。
然后,应用118B可以接收用户输入的指示,该用户输入选择图形指示366A和相关联的电子邮件。这样,应用118B可以访问有关电子邮件应用以更新图形用户界面,以显示关于选择的电子邮件消息的附加信息。例如,应用118B可以输出主题行368A、联系人行368B和电子邮件正文368C,用于在图形用户界面360D中显示。
在图3C中,应用118B可以接收选择电子邮件正文368C的进一步用户输入的指示。这样,在图形用户界面360E中,应用118B可以使用选择的电子邮件正文368C来进行应用118A中的功能。在图3C的示例中,功能与“复制和粘贴”功能相关联,将电子邮件的正文粘贴到文本文档中。以该方式,用户能够在可以彼此通信的多个应用之间快速导航并且在所述应用之间传送相关信息,而无需完全导航离开初始应用。
图4是示出根据本公开的一个或多个方面的示例计算设备的进一步示例操作的流程图,该计算设备被配置为执行伴随应用以识别和显示来自各种应用的信息,该信息可能与使用当前执行的应用正在进行的任务相关。下面在图1的计算设备110的情境中描述图4。例如,根据本公开的一个或多个方面,情境模块122在计算设备110的一个或多个处理器执行时,可以执行应用118B以进行操作400-440。仅为了说明的目的,下面在图1的计算设备110的情境内描述图4。
根据本公开的技术,情境模块112可以执行应用118B以接收与在计算设备110执行的应用118A的内容页面相关联的信息(400)。然后,情境模块122可以执行应用118B,以基于应用118A的内容页面,对于应用118B确定应用118A的情境(410)。情境可以包括关于应用118A的当前状态的任何信息,该情境可以提供在应用118A内正在进行的当前任务、在应用118A内要进行的未来任务或与应用118A相关的任何其他信息的指示。
虽然图1的示例描述了情境模块122使用UI模块120当前正在输出用于经由UID112显示的内容对象,但是情境模块122可以在情境确定处理中分析内容页面内的任何内容对象,包括UI模块120当前没有输出用于显示但是在相同内容页面上的内容对象。例如,内容对象104C可以是对先前电子邮件链的回复,该电子邮件链被包括在内容页面上但是在屏幕外。当确定应用118A的情境时,情境模块122可以将先前电子邮件链用作附加数据。
至少部分地基于应用118A的情境,情境模块122可以执行应用118B,以确定来自与应用118A有关的一个或多个应用的每个应用的相应对象组(420)。例如,应用118A,电子邮件应用,可以是应用的网页套件的一部分。应用118B可以被配置为访问来自将与应用118A有关的相同网页套件内的其他应用的数据。在其他情况下,可以与应用118A交换数据的任何应用都可以被认为是有关应用。在其他情况下,由与应用118A相同的公司所开发的任何应用都可以被认为是有关应用。在其他情况下,可以与和应用118A相同的数据存储设备的内容进行交互的任何应用都可以被认为是有关应用。
应用118B可以向UI模块120转发检索的对象的列表,UI模块120可以生成应用118B的内容页面,该内容页面包括来自至少一个相应对象组的至少一个对象的一个或多个图形指示(430)。内容页面可以包括由应用118B所检索的对象组的一部分或全部。然后,UI模块120可以输出图形用户界面102B用于在UID 112显示,同时显示图形用户界面102A的至少一部分,图形用户界面102B包括应用118B的内容页面的至少一部分(440)。
通过利用应用118B来确定在计算设备110上执行的应用118A的情境信息,计算设备110可以为用户提供快速获得被确定为与由计算设备110上的应用118A正在进行的任务相关的文档、文件或任何其他存储的数据对象的方式,而无需用户在多个不同的应用之间切换、手动地导航到相应应用内的相关内容页面或者辨别在两个不同的应用之间移动对象所需的输入。例如,在图1的示例中,用户可以将文档106A,由用户的老板所请求的可能文档,拖到应用118A的图形用户界面的回复字段中,以将请求的文档附加到回复电子邮件。以该方式,本公开的技术可以减少在其他应用中检索相关对象所需的时间量和用户输入的数量,这可以简化用户体验并且可以减少计算设备110的功耗。
条款1.一种方法,包括:由在计算设备执行的第一应用接收与在所述计算设备执行的第二应用的内容页面相关联的信息,其中,所述第二应用的所述内容页面的至少第一部分被包括在所述计算设备的图形用户界面中;由所述第一应用并且基于与所述第二应用的所述内容页面相关联的所述信息,确定所述第二应用的情境;由所述第一应用并且至少部分地基于所述第二应用的所述情境,确定来自与所述第二应用有关的一个或多个应用的每个应用的相应对象组;由所述第一应用并且至少部分地基于所述相应对象组,生成所述第一应用的内容页面,所述内容页面包括来自至少一个所述相应对象组的至少一个对象的一个或多个图形指示;以及当所述第二应用的所述内容页面的至少第二部分被包括在所述图形用户界面中时,由所述第一应用在所述计算设备的所述图形用户界面内输出所述第一应用的所述内容页面的至少一部分用于显示。
条款2.根据条款1所述的方法,其中,确定所述第二应用的所述情境包括:由所述第一应用识别所述第二应用的所述内容页面中的一个或多个内容对象;由所述第一应用提取所述一个或多个内容对象中的每个内容对象的至少一个相应属性;以及由所述第一应用并且至少部分地基于所述一个或多个内容对象中的每个内容对象的所述至少一个相应属性的一个或多个属性,确定所述第二应用的所述情境。
条款3.根据条款2所述的方法,其中,所述一个或多个内容对象包括文本、图像、元数据、应用状态、应用代码、字段标识符、文件名或文件类型中的一个或多个。
条款4.根据条款1-3中任一项所述的方法,其中,确定来自与所述第二应用有关的所述一个或多个应用的每个应用的所述相应对象组包括:由所述第一应用并且基于所述情境,构造与所述第二应用有关的所述一个或多个应用中的每个应用的相应搜索查询;以及由所述第一应用执行来自所述相应搜索查询的每个相应搜索查询,以从来自与所述第二应用有关的所述一个或多个应用的对应应用的数据检索所述相应对象组。
条款5.根据条款1-4中任一项所述的方法,其中,与所述第二应用有关的所述一个或多个应用包括与所述第二应用有关的至少两个应用,并且其中,生成所述第一应用的所述内容页面包括,由所述第一应用并且至少部分地基于与所述第二应用有关的所述至少两个应用的所述相应对象组,生成所述第一应用的所述内容页面,所述内容页面包括来自与所述第二应用有关的所述至少两个应用的每个应用的所述相应对象组的至少一个对象的至少一个图形指示。
条款6.根据条款1-5中任一项所述的方法,进一步包括:由所述第一应用接收用户输入的指示,所述用户输入从被包括在所述第一应用的所述内容页面中的所述至少一个对象的所述一个或多个图形指示选择第一对象的第一图形指示;以及由所述第一应用向所述第二应用发送指令,以利用所述第一对象来进行功能。
条款7.根据条款1-6中任一项所述的方法,进一步包括:由所述第一应用接收选择表示被包括在所述第二应用的所述内容页面中的一个或多个内容对象的一个或多个图形指示的指示;由所述第一应用并且基于所述一个或多个内容对象,确定所述第二应用的更新的情境;由所述第一应用并且至少部分地基于所述第二应用的所述更新的情境,确定来自与所述第二应用有关的所述一个或多个应用的每个应用的相应更新的对象组;由所述第一应用并且至少部分地基于所述相应更新的对象组,生成所述第二应用的更新的内容页面,所述更新的内容页面包括来自至少一个所述相应更新的对象组的至少一个对象的一个或多个图形指示;以及当所述第二应用的所述内容页面的至少第三部分被包括在所述图形用户界面中时,由所述第一应用在所述计算设备的所述图形用户界面内输出所述第一应用的所述更新的内容页面的一部分用于显示。
条款8.根据条款1-7中任一项所述的方法,其中,输出所述第一应用的所述内容页面的所述部分包括:当所述第二应用的所述内容页面的至少所述第二部分被包括在所述图形用户界面中时,由所述第一应用将所述图形用户界面的一部分替换为所述第一应用的所述内容页面的所述部分。
条款9.根据条款1-8中任一项所述的方法,其中,被输出用于显示的所述第一应用的所述内容页面的所述部分包括,来自与所述第二应用有关的所述一个或多个应用的应用的第一对象组的至少一个对象的一个或多个图形指示,所述方法进一步包括:由所述第一应用接收用户输入的指示,所述用户输入从与所述第二应用有关的所述一个或多个应用选择不同的应用;由所述第一应用至少部分地基于所述相应对象组,生成所述第一应用的更新的内容页面,所述更新的内容页面包括来自与所述第二应用有关的所述一个或多个应用的所述不同的应用的第二对象组的至少一个对象的一个或多个图形指示;以及当所述第二应用的所述内容页面的至少所述第二部分被包括在所述图形用户界面中时,由所述第一应用在所述计算设备的所述图形用户界面内输出所述第一应用的所述更新的内容页面的一部分用于显示。
条款10.根据条款1-9中任一项所述的方法,进一步包括:在确定所述情境之前,由所述计算设备接收用户输入以开始执行所述第一应用的指示;以及响应于接收到用户输入的所述指示,由所述第一应用确定所述情境。
条款11.一种计算设备,包括:至少一个处理器;以及存储器,所述存储器存储与第一应用相关联的指令,所述指令在被执行时使得所述至少一个处理器:接收与在所述计算设备执行的第二应用的内容页面相关联的信息,其中,所述第二应用的所述内容页面的至少第一部分被包括在所述计算设备的图形用户界面中;基于与所述第二应用的所述内容页面相关联的所述信息,确定所述第二应用的情境;至少部分地基于所述第二应用的所述情境,确定来自与所述第二应用有关的一个或多个应用的每个应用的相应对象组;至少部分地基于所述相应对象组,生成所述第一应用的内容页面,所述内容页面包括来自至少一个所述相应对象组的至少一个对象的一个或多个图形指示;以及当所述第二应用的所述内容页面的至少第二部分被包括在所述图形用户界面中时,在所述计算设备的所述图形用户界面内输出所述第一应用的所述内容页面的至少一部分用于显示。
条款12.根据条款11所述的计算设备,其中,使得所述至少一个处理器确定所述第二应用的所述情境的所述指令包括与所述第一应用相关联的指令,所述指令在被执行时使得所述至少一个处理器:识别所述第二应用的所述内容页面中的一个或多个内容对象,其中,所述一个或多个内容对象包括文本、图像、元数据、应用状态、应用代码、字段标识符、文件名或文件类型中的一个或多个;提取所述一个或多个内容对象中的每个内容对象的至少一个相应属性;以及至少部分地基于所述一个或多个内容对象中的每个内容对象的所述至少一个相应属性的一个或多个属性,确定所述第二应用的所述情境。
条款13.根据条款11-12中任一项所述的计算设备,其中,使得所述至少一个处理器确定来自与所述第二应用有关的所述一个或多个应用的每个应用的所述相应对象组的所述指令包括与所述第一应用相关联的指令,所述指令在被执行时使得所述至少一个处理器:基于所述情境,构造与所述第二应用有关的所述一个或多个应用中的每个应用的相应搜索查询;执行来自所述相应搜索查询的每个相应搜索查询,以从来自与所述第二应用有关的所述一个或多个应用的对应应用的数据检索所述相应对象组。
条款14.根据条款11-13中任一项所述的计算设备,其中,与所述第二应用有关的所述一个或多个应用包括与所述第二应用有关的至少两个应用,并且其中,使得所述至少一个处理器生成所述第一应用的所述内容页面的所述指令包括与所述第一应用相关联的指令,所述指令在被执行时使得所述至少一个处理器至少部分地基于与所述第二应用有关的所述至少两个应用的所述相应对象组,生成所述第一应用的所述内容页面,所述内容页面包括来自与所述第二应用有关的所述至少两个应用的每个应用的所述相应对象组的至少一个对象的至少一个图形指示。
条款15.根据条款11-14中任一项所述的计算设备,其中,与所述第一应用相关联的所述指令在被执行时进一步使得所述至少一个处理器:接收用户输入的指示,所述用户输入从被包括在所述第一应用的所述内容页面中的所述至少一个对象的所述一个或多个图形指示选择第一对象的第一图形指示;以及向所述第二应用发送指令,以利用所述第一对象来进行功能。
条款16.一种存储与第一应用相关联的指令的非暂时性计算机可读存储介质,所述指令在被执行时使得计算设备的至少一个处理器:接收与在所述计算设备执行的第二应用的内容页面相关联的信息,其中,所述第二应用的所述内容页面的至少第一部分被包括在所述计算设备的图形用户界面中;基于与所述第二应用的所述内容页面相关联的所述信息,确定所述第二应用的情境;至少部分地基于所述第二应用的所述情境,确定来自与所述第二应用有关的一个或多个应用的每个应用的相应对象组;至少部分地基于所述相应对象组,生成所述第一应用的内容页面,所述内容页面包括来自至少一个所述相应对象组的至少一个对象的一个或多个图形指示;以及当所述第二应用的所述内容页面的至少第二部分被包括在所述图形用户界面中时,在所述计算设备的所述图形用户界面内输出所述第一应用的所述内容页面的至少一部分用于显示。
条款17.根据条款16所述的非暂时性计算机可读存储介质,其中,使得所述至少一个处理器确定所述第二应用的所述情境的所述指令包括与所述第一应用相关联的指令,所述指令在被执行时使得所述至少一个处理器:识别所述第二应用的所述内容页面中的一个或多个内容对象,其中,所述一个或多个内容对象包括文本、图像、元数据、应用状态、应用代码、字段标识符、文件名或文件类型中的一个或多个;提取所述一个或多个内容对象中的每个内容对象的至少一个相应属性;以及至少部分地基于所述一个或多个内容对象中的每个内容对象的所述至少一个相应属性的一个或多个属性,确定所述第二应用的所述情境。
条款18.根据条款16-17中任一项所述的非暂时性计算机可读存储介质,其中,使得所述至少一个处理器确定来自与所述第二应用有关的所述一个或多个应用的每个应用的所述相应对象组的所述指令包括与所述第一应用相关联的指令,所述指令在被执行时使得所述至少一个处理器:基于所述情境,构造与所述第二应用有关的所述一个或多个应用中的每个应用的相应搜索查询;执行来自所述相应搜索查询的每个相应搜索查询,以从来自与所述第二应用有关的所述一个或多个应用的对应应用的数据检索所述相应对象组。
条款19.根据条款16-18中任一项所述的非暂时性计算机可读存储介质,其中,与所述第二应用有关的所述一个或多个应用包括与所述第二应用有关的至少两个应用,并且其中,使得所述至少一个处理器生成所述第一应用的所述内容页面的所述指令包括与所述第一应用相关联的指令,所述指令在被执行时使得所述至少一个处理器至少部分地基于与所述第二应用有关的所述至少两个应用的所述相应对象组,生成所述第一应用的所述内容页面,所述内容页面包括来自与所述第二应用有关的所述至少两个应用的每个应用的所述相应对象组的至少一个对象的至少一个图形指示。
条款20.根据条款16-19中任一项所述的非暂时性计算机可读存储介质,其中,与所述第一应用相关联的所述指令在被执行时进一步使得所述至少一个处理器:接收用户输入的指示,所述用户输入从被包括在所述第一应用的所述内容页面中的所述至少一个对象的所述一个或多个图形指示选择第一对象的第一图形指示;以及向所述第二应用发送指令,以利用所述第一对象来进行功能。
条款21.一种计算设备,被配置为进行条款1-12中的任何一种方法。
条款22.一种计算设备,包括用于进行条款1-12中的任何一种方法的装置。
条款23.一种编码有指令的计算机可读存储介质,所述指令用于使得一个或多个可编程处理器进行条款1-12中的任何一种方法。
在一个或多个示例中,可以以硬件、软件、固件或其任何组合来实施描述的功能。如果以软件来实施,则功能可以作为一个或多个指令或代码被存储在计算机可读介质上或通过计算机可读介质被传送,并且由基于硬件的处理单元来执行。计算机可读介质可以包括与诸如数据存储介质的有形介质对应的计算机可读存储介质,或者包括例如根据通信协议来促进将计算机程序从一个地方转移到另一地方的任何介质的通信介质。以该方式,计算机可读介质通常可以对应于(1)非暂时性的有形计算机可读存储介质或者(2)诸如信号或载波的通信介质。数据存储介质可以是可以由一个或多个计算机或者一个或多个处理器访问以检索指令、代码和/或数据结构用于实施本公开中所描述的技术的任何可用介质。计算机程序产品可以包括计算机可读介质。
作为示例而非限制,这样的计算机可读存储介质可以包括RAM、ROM、EEPROM、CD-ROM或其他光盘存储、磁盘存储或其他磁性存储设备、闪存或者可以用于以指令或数据结构的形式存储所需的程序代码并且可以由计算机访问的任何其他介质。同样,任何连接都被适当地称为计算机可读介质。例如,如果使用同轴电缆、光纤电缆、双绞线、数字用户线(DSL)或者诸如红外、无线电和微波的无线技术从网站、服务器或其他远程源传送指令,则同轴电缆、光纤电缆、双绞线、DSL或者诸如红外、无线电和微波的无线技术被包括在介质的定义中。然而,应该理解的是,计算机可读存储介质和数据存储介质不包括连接、载波、信号或其他瞬态介质,而是指向非瞬态的有形存储介质。如在本文中所使用的磁盘和光盘包括压缩光盘(CD)、激光光盘、光盘、数字多功能光盘(DVD)、软盘和蓝光光盘,其中磁盘通常磁性地复制数据,而光盘用激光光学地复制数据。上面的组合也应该被包括在计算机可读介质的范围内。
指令可以由一个或多个处理器来执行,该一个或多个处理器诸如是一个或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)或者其他等同的集成或离散逻辑电路。因此,如在本文中所使用的术语“处理器”可以指任何前述结构或者适用于实施在本文中所描述的技术的任何其他结构。另外,在一些方面,可以在专用硬件和/或软件模块内提供在本文中所描述的功能。同样,技术可以被完全地实施在一个或多个电路或逻辑元件中。
本公开的技术可以被实施在包括无线手持机、集成电路(IC)或一组IC(例如,芯片组)的各种各样的设备或装置中。在本公开中描述各种组件、模块或单元以强调被配置为进行公开的技术的设备的功能方面,但是不一定需要由不同的硬件单元来实现。而是,如上所述,各种单元可以以硬件单元来组合或者由互操作的硬件单元的集合来提供,包括与合适的软件和/或固件结合的如上所述的一个或多个处理器。
已经描述了本公开的各种示例。描述的系统、操作或功能的任何组合是预期的。这些和其他示例在以下权利要求的范围内。

Claims (13)

1.一种用于应用之间的自动情境传递方法,其特征在于,包括:
由在计算设备执行的第一应用接收与在所述计算设备执行的第二应用的内容页面相关联的信息,其中,所述第二应用的所述内容页面的至少第一部分被包括在所述计算设备的第一图形用户界面中;
由所述第一应用并且基于与所述第二应用的所述内容页面相关联的所述信息,确定所述第二应用的情境;
由所述第一应用并且至少部分地基于所述第二应用的所述情境,确定来自与所述第二应用有关的一个或多个应用的每个应用的相应对象组,其中,与所述第二应用有关的所述一个或多个应用不同于所述第一应用和所述第二应用;
由所述第一应用并且至少部分地基于所述相应对象组,生成所述第一应用的内容页面,所述内容页面包括来自至少一个所述相应对象组的至少一个对象的一个或多个图形指示;以及
当所述第二应用的所述内容页面的至少第二部分被包括在所述第一图形用户界面中时,由所述第一应用在与所述计算设备的所述第一图形用户界面相邻的所述计算设备的第二图形用户界面内输出所述第一应用的所述内容页面的至少一部分用于显示。
2.根据权利要求1所述的方法,其特征在于,确定所述第二应用的所述情境包括:
由所述第一应用识别所述第二应用的所述内容页面中的一个或多个内容对象;
由所述第一应用提取所述一个或多个内容对象中的每个内容对象的至少一个相应属性;以及
由所述第一应用并且至少部分地基于所述一个或多个内容对象中的每个内容对象的所述至少一个相应属性的一个或多个属性,确定所述第二应用的所述情境。
3.根据权利要求2所述的方法,其特征在于,所述一个或多个内容对象包括文本、图像、元数据、应用状态、应用代码、字段标识符、文件名或文件类型中的一个或多个。
4.根据权利要求1-3中任一项所述的方法,其特征在于,确定来自与所述第二应用有关的所述一个或多个应用的每个应用的所述相应对象组包括:
由所述第一应用并且基于所述情境,构造与所述第二应用有关的所述一个或多个应用中的每个应用的相应搜索查询;以及
由所述第一应用执行来自所述相应搜索查询的每个相应搜索查询,以从来自与所述第二应用有关的所述一个或多个应用的对应应用的数据检索所述相应对象组。
5.根据权利要求4所述的方法,其特征在于,
其中,与所述第二应用有关的所述一个或多个应用包括与所述第二应用有关的至少两个应用,并且
其中,生成所述第一应用的所述内容页面包括,由所述第一应用并且至少部分地基于与所述第二应用有关的所述至少两个应用的所述相应对象组,生成所述第一应用的所述内容页面,所述内容页面包括来自与所述第二应用有关的所述至少两个应用的每个应用的所述相应对象组的至少一个对象的至少一个图形指示。
6.根据权利要求5所述的方法,其特征在于,进一步包括:
由所述第一应用接收用户输入的指示,所述用户输入从被包括在所述第一应用的所述内容页面中的所述至少一个对象的所述一个或多个图形指示选择第一对象的第一图形指示;以及
由所述第一应用向所述第二应用发送指令,以利用所述第一对象来进行功能。
7.根据权利要求6所述的方法,其特征在于,进一步包括:
由所述第一应用接收选择表示被包括在所述第二应用的所述内容页面中的一个或多个内容对象的一个或多个图形指示的指示;
由所述第一应用并且基于所述一个或多个内容对象,确定所述第二应用的更新的情境;
由所述第一应用并且至少部分地基于所述第二应用的所述更新的情境,确定来自与所述第二应用有关的所述一个或多个应用的每个应用的相应更新的对象组;
由所述第一应用并且至少部分地基于所述相应更新的对象组,生成所述第二应用的更新的内容页面,所述更新的内容页面包括来自至少一个所述相应更新的对象组的至少一个对象的一个或多个图形指示;以及
当所述第二应用的所述内容页面的至少第三部分被包括在所述第一图形用户界面中时,由所述第一应用在所述第二图形用户界面内输出所述第一应用的所述更新的内容页面的一部分用于显示。
8.根据权利要求7所述的方法,其特征在于,输出所述第一应用的所述内容页面的所述部分包括:
当所述第二应用的所述内容页面的至少所述第二部分被包括在所述第一图形用户界面中时,由所述第一应用将所述第一图形用户界面的一部分替换为所述第一应用的所述内容页面的所述部分。
9.根据权利要求8所述的方法,其特征在于,被输出用于显示的所述第一应用的所述内容页面的所述部分包括,来自与所述第二应用有关的所述一个或多个应用的每个应用的第一对象组的至少一个对象的一个或多个图形指示,所述方法进一步包括:
由所述第一应用接收用户输入的指示,所述用户输入从与所述第二应用有关的所述一个或多个应用选择不同的应用;
由所述第一应用至少部分地基于所述相应对象组,生成所述第一应用的更新的内容页面,所述更新的内容页面包括来自与所述第二应用有关的所述一个或多个应用的所述不同的应用的第二对象组的至少一个对象的一个或多个图形指示;以及
当所述第二应用的所述内容页面的至少所述第二部分被包括在所述第一图形用户界面中时,由所述第一应用在所述第二图形用户界面内输出所述第一应用的所述更新的内容页面的一部分用于显示。
10.根据权利要求9所述的方法,其特征在于,进一步包括:
在确定所述情境之前,由所述计算设备接收用户输入以开始执行所述第一应用的指示;以及
响应于接收到用户输入的所述指示,由所述第一应用确定所述情境。
11.一种计算设备,其特征在于,包括:
至少一个处理器;以及
存储器,所述存储器存储与第一应用相关联的指令,所述指令在被执行时使得所述至少一个处理器:
接收与在所述计算设备执行的第二应用的内容页面相关联的信息,其中,所述第二应用的所述内容页面的至少第一部分被包括在所述计算设备的第一图形用户界面中;
基于与所述第二应用的所述内容页面相关联的所述信息,确定所述第二应用的情境;
至少部分地基于所述第二应用的所述情境,确定来自与所述第二应用有关的一个或多个应用的每个应用的相应对象组,其中,与所述第二应用有关的所述一个或多个应用不同于所述第一应用和所述第二应用;
至少部分地基于所述相应对象组,生成所述第一应用的内容页面,所述内容页面包括来自至少一个所述相应对象组的至少一个对象的一个或多个图形指示;以及
当所述第二应用的所述内容页面的至少第二部分被包括在所述第一图形用户界面中时,在与所述计算设备的所述第一图形用户界面相邻的所述计算设备的第二图形用户界面内输出所述第一应用的所述内容页面的至少一部分用于显示。
12.根据权利要求11所述的计算设备,其特征在于,所述指令进一步由所述至少一个处理器可执行为进行权利要求1-10中的任何一种方法。
13.一种编码有指令的计算机可读存储介质,其特征在于,所述指令在被执行时使得所述至少一个处理器进行权利要求1-10中的任何一种方法。
CN201880040026.5A 2017-05-15 2018-02-13 应用之间的自动情境传递 Active CN110753911B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/595,532 2017-05-15
US15/595,532 US10558950B2 (en) 2017-05-15 2017-05-15 Automatic context passing between applications
PCT/US2018/018025 WO2018212814A1 (en) 2017-05-15 2018-02-13 Automatic context passing between applications

Publications (2)

Publication Number Publication Date
CN110753911A CN110753911A (zh) 2020-02-04
CN110753911B true CN110753911B (zh) 2023-09-08

Family

ID=61527521

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880040026.5A Active CN110753911B (zh) 2017-05-15 2018-02-13 应用之间的自动情境传递

Country Status (4)

Country Link
US (1) US10558950B2 (zh)
EP (1) EP3610376B1 (zh)
CN (1) CN110753911B (zh)
WO (1) WO2018212814A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10521278B2 (en) 2017-09-26 2019-12-31 Google Llc Format-specific data object passing between applications
US10901760B2 (en) * 2018-03-05 2021-01-26 Microsoft Technology Licensing, Llc View augmentation in multiscreen environment
US11106934B2 (en) * 2019-02-11 2021-08-31 Innovaccer Inc. Automatic visual display overlays of contextually related data from multiple applications
CN111128153B (zh) * 2019-12-03 2020-10-02 北京蓦然认知科技有限公司 一种语音交互方法及装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104903929A (zh) * 2012-11-12 2015-09-09 谷歌公司 在站点上向用户提供内容推荐
CN104981792A (zh) * 2012-12-21 2015-10-14 谷歌公司 针对内容项汇总交互

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040172584A1 (en) 2003-02-28 2004-09-02 Microsoft Corporation Method and system for enhancing paste functionality of a computer software application
US20050066335A1 (en) 2003-09-23 2005-03-24 Robert Aarts System and method for exposing local clipboard functionality towards external applications
US7383499B2 (en) 2004-12-30 2008-06-03 Microsoft Corporation System and method for dynamically creating a destination template
JP2007249754A (ja) 2006-03-17 2007-09-27 Internatl Business Mach Corp <Ibm> 情報処理装置、情報処理方法およびプログラム
US20090006448A1 (en) 2007-06-28 2009-01-01 Microsoft Corporation Automated model generator
US8584149B2 (en) 2007-07-16 2013-11-12 Apteryx, Inc. Methods of populating a third-party document with digital information content
US8275779B2 (en) 2009-01-22 2012-09-25 International Business Machines Corporation Data tranformations for applications supporting different data formats
US8577960B2 (en) * 2010-07-29 2013-11-05 Sap Ag Providing status information for components in a distributed landscape
US8423405B1 (en) * 2010-11-01 2013-04-16 Google Inc. Advertisement selection
US20130159984A1 (en) 2011-12-14 2013-06-20 Sap Ag Release independent deployment of user productivity services
US20130339980A1 (en) 2012-06-14 2013-12-19 Clicksoftware Technologies Ltd Composite application enabling workflow between unmodified constituent applications
US8656265B1 (en) * 2012-09-11 2014-02-18 Google Inc. Low-latency transition into embedded web view
US9002821B2 (en) * 2013-01-16 2015-04-07 Google Inc. Indexing application pages of native applications
US20140380142A1 (en) 2013-06-20 2014-12-25 Microsoft Corporation Capturing website content through capture services
KR20150004713A (ko) 2013-07-03 2015-01-13 삼성전자주식회사 사용자 디바이스에서 어플리케이션 연동 방법 및 장치
US10394949B2 (en) 2015-06-22 2019-08-27 Microsoft Technology Licensing, Llc Deconstructing documents into component blocks for reuse in productivity applications
US10331620B2 (en) 2015-11-24 2019-06-25 International Business Machines Corporation File generator

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104903929A (zh) * 2012-11-12 2015-09-09 谷歌公司 在站点上向用户提供内容推荐
CN104981792A (zh) * 2012-12-21 2015-10-14 谷歌公司 针对内容项汇总交互

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
高效的动态脚本网页关联性挖掘算法研究;谭涛;《电脑知识与技术》;第8卷(第13期);第3002-3005页 *

Also Published As

Publication number Publication date
EP3610376A1 (en) 2020-02-19
US20180330329A1 (en) 2018-11-15
WO2018212814A1 (en) 2018-11-22
EP3610376B1 (en) 2023-10-04
US10558950B2 (en) 2020-02-11
CN110753911A (zh) 2020-02-04

Similar Documents

Publication Publication Date Title
US11669752B2 (en) Automatic actions based on contextual replies
CN108701016B (zh) 根据通知数据自动生成图形用户界面的方法、装置及系统
CN107957776B (zh) 主动虚拟助理
CN111095215B (zh) 应用间传递格式特定的数据对象
US20180139291A1 (en) Determing data associated with proximate computing devices
CN109076083B (zh) 促进数字个人助理之间的交互
US20170357521A1 (en) Virtual keyboard with intent-based, dynamically generated task icons
CN110753911B (zh) 应用之间的自动情境传递
CN109076085B (zh) 用于支持多个账户的上下文感知数字个人助理的方法、系统和计算机程序产品
CN109074548B (zh) 对内容的自动丰富
US10938767B2 (en) Outputting reengagement alerts by a computing device
US11886748B2 (en) Systems and methods for contextual memory capture and recall
JP7167131B2 (ja) 会話型スケジューリングアシスタントコンピューティングシステムにおける自然言語処理及び分析
US11934293B2 (en) Dynamically linking social media reactions to actions performed by remote applications
US20230186248A1 (en) Method and system for facilitating convergence
WO2023113898A1 (en) Method and system for facilitating convergence

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant