CN116235159A - 用于为情境驱动的用户交互建模可执行交互模型的计算机实现的系统和方法 - Google Patents

用于为情境驱动的用户交互建模可执行交互模型的计算机实现的系统和方法 Download PDF

Info

Publication number
CN116235159A
CN116235159A CN202180063701.8A CN202180063701A CN116235159A CN 116235159 A CN116235159 A CN 116235159A CN 202180063701 A CN202180063701 A CN 202180063701A CN 116235159 A CN116235159 A CN 116235159A
Authority
CN
China
Prior art keywords
user
data
interaction
module
modules
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180063701.8A
Other languages
English (en)
Inventor
拉杜·内古列斯库
拉杜·亚历山德鲁·廷特斯库
劳伦蒂乌·彼得鲁特·乔巴努
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sethens Technology
Original Assignee
Sethens Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sethens Technology filed Critical Sethens Technology
Publication of CN116235159A publication Critical patent/CN116235159A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2379Updates performed during online database operations; commit processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/901Indexing; Data structures therefor; Storage structures
    • G06F16/9024Graphs; Linked lists
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/604Tools and structures for managing or administering access control systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/109Time management, e.g. calendars, reminders, meetings or time accounting
    • G06Q10/1091Recording time for administrative or management purposes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/109Time management, e.g. calendars, reminders, meetings or time accounting
    • G06Q10/1093Calendar-based scheduling for persons or groups
    • G06Q10/1097Task assignment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1831Tracking arrangements for later retrieval, e.g. recording contents, participants activities or behavior, network status
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/14Session management
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/55Push-based network services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2221/00Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/21Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/2141Access rights, e.g. capability lists, access control lists, access tables, access matrices

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Strategic Management (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Operations Research (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Quality & Reliability (AREA)
  • Marketing (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Educational Administration (AREA)
  • Automation & Control Theory (AREA)
  • Bioethics (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)
  • Stored Programmes (AREA)

Abstract

提供了用于对情境驱动的用户交互进行建模、执行和控制的计算机实现的系统和方法。在一些实施例中,提供了用于对用户交互进行建模并且生成交互模型的系统和方法。每个生成的交互模型可以是可执行的,用于控制情境驱动的用户交互。交互模型可以包括识别在建模的交互的会话中可执行的一个或更多个交互对象和一个或更多个模块的数据。

Description

用于为情境驱动的用户交互建模可执行交互模型的计算机实 现的系统和方法
技术领域
本公开涉及数据管理、信息安全以及计算机数据处理和传送的领域。更具体地,而非限制性地,本公开涉及用于对情境驱动的用户交互进行建模和控制的计算机实现的系统和方法。每个交互可以包括针对常用情境交换信息的用户之间的一个或更多个会话。交换的数据可以与元数据一起存储为数据构建(data buildup)的一部分。本公开还涉及用于实现本公开的系统和方法的界面、模块和其它部件。
背景技术
在当今的现代社会中,个人之间的计算机化交互和信息交换是高度先进的。随着网络、数据库、服务器、应用和用户设备的技术发展,存在大量的通信工具和基础设施。总体上,它们使得能够在任何给定时间和在任何给定情境中进行即时信息交换。此外,信息是数字化的,并且容易以许多形式(包括视频、音频和文本)获得。在这种高度连接的、信息丰富的世界中,访问和交换信息实际上没有成本或限制。
不幸的是,这些进步导致了诸如信息过载和混乱的缺点。拥有如此多的可用信息,对用户、企业和其它实体来说,有效地处理和管理该信息是一种挑战。例如,特别是对于常用情境或目标常常难以存储、识别和访问正确的或有用的信息。也难以在可用信息的数量和质量之间取得平衡。另外,访问控制和信息管理存在安全问题和难题。因此,协作和生产率受损。
还存在其它缺点。例如,可用的计算机实现的系统和技术是限制性的和不灵活的。因此,由于用于促进通信的大量技术和不同平台,经常存在兼容性问题和/或基础结构挑战,这使得难以组织和保留相关数据。当涉及多个用户和各种计算和数据源时,现有技术和方法也不能够提供控制和管理通信的有效方式。这阻碍了知识构建、保留和检索。更进一步地,许多数据库系统仅提供关于所存储的数据的有限信息(例如,文件名、日期和/或作者)。这意味着通常不可能确定存储的数据的情境,包括该数据是如何在用户之间共享、收集和/或开发的。因此,相关数据也变得难以从存储器中识别和检索。
发明内容
本公开的实施例提供了用于对情境驱动的用户交互进行建模、执行和控制的计算机实现的系统和方法。如本文所公开的,目前实施例解决了现有技术和方法的以上提及的缺点中的一个或更多个缺点。本公开的实施例包括用于通过生成交互模型来对用户交互进行建模的系统和方法。本公开的实施例还提供了用于处理和管理在这些交互中交换的数据的技术解决方案。所公开的实施例还提供了更灵活并且能够在涉及多个用户和各种计算和数据源时管理交互的系统和方法。
更进一步地,根据本公开的系统和方法能够实现对由用户提供的数据的定性结构化和组织。该数据可以通过一个或更多个会话上的用户之间的建模的交互来交换。如本文所公开的,交互模型可以被设计为管理和控制每个交互。利用交互模型,计算机实现的模块被定义为以更高的精度控制交互的执行,并且同时,定义和生成议程,用于在交互的整个执行期间引导和通知用户。因此,本文公开的系统和方法能够为用户之间的协作和通信提供改进的和无摩擦的交互环境。本公开的这些和其它特征解决了现有系统的上述缺点,同时提高了用户之间的工作效率和生产率。
本公开的实施例还包括创新平台,所述创新平台用于使得能够在常用情境中在用户的构成之间交换信息,并且用于保留所有相关信息作为数据构建的一部分。如本文所公开的,根据本公开的数据构建使得能够进行有效的知识保留并标识数据是如何在用户之间共享、收集和/或开发的。此外,可以容易地从存储器中识别和检索相关数据。本公开的实施例的这些和其它特征和优点在本文中呈现,并且将从以下详细描述和附图以及权利要求中变得更加明显。
如本文所公开的,提供了一种用于生成交互模型的计算机实现的方法。交互模型提供用于控制交互的模型,所述交互包括针对常用情境交换数据的定义的用户的构成之间的多个会话。所述方法包括在计算机实现的显示器上提供适于基于多个用户输入来设计交互模型的设计器界面。所述方法还包括:响应于第一用户输入,按照在设计器界面中显示的顺序和/或相对于在设计器界面中显示的时间轴来布置一个或更多个交互对象,每个交互对象表示与交互相关联的用户的构成;以及响应于第二用户输入,进一步相对于在设计器界面中显示的顺序和/或时间轴来布置一个或更多个模块,每个模块表示在交互的多个会话中的一个或更多个会话中可执行的功能元素集。所述方法还包括将表示基于布置在设计器界面中的一个或更多个交互对象和模块的交互模型的数据存储在计算机可读介质中。
在一些实施例中,所述计算机实现的方法还可以包括:响应于第三用户输入,识别与每个交互对象的构成相关联的用户和指配给构成中的每个用户的角色;以及将表示所识别的用户和指配给用户的角色的数据作为交互模型的一部分存储在计算机可读介质中。可用于指配给用户的角色可以包括例如所有者、管理员、贡献者和参与者。每个指配的角色可以定义构成中的用户的权限。另外,模块中的一个或更多个模块的功能元素集可以包括被配置为取决于指配给用户的角色的功能元素。这样的特征有助于解决安全问题并且提供更好的访问控制和信息管理,同时支持用于针对常用情境交换数据的结构良好的环境。
根据另一实施例,提供了一种用于控制包括多个会话的交互的计算机实现的方法,每个会话包括使用与系统平台进行网络通信的多个用户设备来针对常用情境交换数据的用户的构成。所述方法包括在计算机可读介质中提供用于控制交互的交互模型,所述交互模型包括标识按顺序和/或相对于时间轴布置的一个或更多个交互对象和一个或更多个模块的数据。每个交互对象可以表示与交互相关联的用户的构成,并且每个模块可以包括在交互的会话中的一个或更多个会话中可执行的功能元素集。所述方法还可以包括:在每个用户设备的计算机实现的显示器上提供播放器界面,所述播放器界面适于显示交互环境以实现在与交互相关联的用户的构成之间的数据交换;以及利用至少一个处理器来执行所提供的交互模型的实例,以控制在与交互相关联的用户的构成之间的数据交换。如本文所公开的,由播放器界面显示的交互环境可以响应于交互模型的执行被更新。这样的特征提供了用于交换数据的更有组织的环境,并且可以解决由于参与会话的用户之间的各种计算和数据源而可能存在的兼容性问题。
举例来说,播放器界面的交互环境可以被更新以在交互模型的执行期间呈现工具、提示或指令中的至少一者。另外,播放器界面的交互环境可以响应于交互模型的模块中的一个或更多个模块的执行而被更新。
在一些实施例中,构成中的用户可以通过播放器界面查看每个会话的议程和每个会话相对于所述议程的进度。另外,构成中的用户可以使用交互模型的一个或更多个模块通过播放器界面的交互环境交换数据。
根据本公开,所述计算机实现的方法还可以包括在设计器界面或管理界面中的至少一者中识别与每个交互对象的构成相关联的用户和指配给构成中的每个用户的角色。此外,所述方法可以包括将表示所识别的用户和指配给用户的角色的数据作为交互模型的一部分存储在计算机可读介质中。
如本文所公开的,用于交互的数据构建可以存储在数据库中。数据构建可以包括在交互的会话中交换的数据。为了帮助从数据构建中搜索和检索数据,可以存储元数据,所述元数据标识用于数据构建中的数据的情境信息等。在交互模型的执行期间,一个或更多个模块的功能元素可以生成并且提供用于数据构建的元数据。模块的示例包括例如微模块、宏模块和元模块。
根据本公开的又一些实施例,提供了一种交互系统。所述交互系统可以包括数据管理服务器,所述数据管理服务器被配置为形成持久层并且管理与多个交互模型相关联的数据。所述系统还可以包括构建服务器,所述构建服务器被配置为使用持久层来存储和提供与每个交互模型的已执行实例相关联的数据。另外,所述系统可以包括被配置为执行交互模型的实例的应用服务器,每个交互模型包括用于交互的多个会话,每个会话包括针对常用情境交换数据的用户的构成。
如本文所公开的,每个交互模型可以包括一个或更多个交互对象和一个或更多个模块。每个交互对象可以表示与交互相关联的用户的构成。另外,每个模块可以包括在交互的会话的一个或更多个会话中可执行的功能元素集。
在一些实施例中,应用服务器可以被配置为处理元数据,所述元数据包括用于访问由数据管理服务器管理或由构建服务器存储的数据的位置信息。元数据还可以包括情境信息以供搜索和检索由构建服务器存储的数据。另外,根据本公开的交互系统,可以提供包括构成数据的应用数据。构成数据可以标识与每个交互对象的构成相关联的用户和指配给构成中的每个用户的角色。
根据本公开的又一些实施例,提供了一种用于控制情境驱动的交互的计算机实现的系统。在所述系统中,每个交互可以包括使用与所述系统进行网络通信的多个用户设备交换数据的用户的构成。所述系统可以包括存储用于控制交互的至少一个交互模型的计算机可读介质。交互模型可以包括标识按顺序和/或相对于时间轴布置的一个或更多个交互对象和一个或更多个模块的数据。每个交互对象可以表示与交互相关联的用户的构成,并且每个模块可以包括在交互的会话中的一个或更多个会话中可执行的功能元素集。此外,一个或更多个模块可以包括作为交互的至少一个会话的一部分按顺序布置的一个或更多个微模块。
所述计算机实现的系统还可以包括在每个用户设备的计算机实现的显示器上生成的播放器界面,所述播放器界面适于显示交互环境以实现在与交互相关联的用户的构成之间的数据交换。另外,所述系统可以包括至少一个处理器,所述至少一个处理器被配置为执行交互模型的实例,以控制与交互相关联的用户的构成之间的数据交换。如本文所公开的,由播放器界面显示的交互环境可以响应于交互模型的执行被更新。另外,可以在交互环境中显示用于至少一个会话的议程,所述议程包括按照一个或更多个微模块的顺序布置的一个或更多个图形对象。
在一些实施例中,用户可选择议程中的图形对象中的至少一个图形对象来执行交互模型中的微模块中的至少一个微模块的功能元素。微模块的示例包括例如评论模块、视频会议模块或演示模块。本文中公开了微模块和其它类型模块的另外示例。
在计算机实现的系统中,至少一个处理器可以被配置为执行交互模式的一个或更多个模块。另外,如本文所公开的,由播放器界面显示的交互环境可以是响应于交互模型的模块中的一个或更多个模块的执行被更新的。举例来说,可以通过显示进度指示符或进度条或通过突出显示议程中的项来更新由播放器界面显示的交互环境,以指示至少一个会话相对于议程的进度。
在交互模型的执行期间,构成中的用户可以通过他们各自的用户设备上的播放器界面的交互环境来交换数据。可以执行交互模型的一个或更多个模块的功能元素以支持用户之间的数据传送。在交互的会话中交换的数据可以存储在数据构建中。例如,数据构建可以被实现为关系数据库的一部分。
在又一些附加的实施例中,公开了一种用于为情境驱动的交互提供数据构建的计算机实现的方法。每个交互可以包括使用多个用户设备交换数据的用户的构成。所述方法可以包括提供用于控制交互的至少一个交互模型,所述交互模型包括标识一个或更多个交互对象和一个或更多个模块的数据。每个交互对象可以表示与交互相关联的用户的构成,并且每个模块可以包括在交互的会话中的一个或更多个会话中可执行的功能元素集。
所述计算机实现的方法还可以包括:在每个用户设备的计算机实现的显示器上生成播放器界面,所述播放器界面适于显示交互环境以实现在与交互相关联的用户的构成之间的数据交换;以及利用至少一个处理器来执行交互模型,以控制在与交互相关联的用户的构成之间的数据交换。另外,所述方法可以包括:提供被配置为存储用于交互的数据构建的数据库,所述数据构建包括在交互的会话中交换的数据;以及维护用于存储数据构建的数据库的模式。
在所述方法的一些实施例中,维护模式可以包括基于交互模型中的模块的名称空间和由模块中的一个或更多个模块声明的相对于交互模型中的其它模块的依赖关系来组装模式,所述名称空间包括每个模块的开发者名称和模块名称中的至少一者。
如本文所公开的,所述计算机实现的方法可以包括存储对模式的所有改变的图形表示,所述图形表示包括标识模块对模式的改变的数据。另外,所述方法可以包括通过消除图形表示中的与冗余操作相对应的圈来减小图形表示。附加地,所述方法可以包括提供标识用于数据构建中的数据的情境信息的元数据,其中元数据的至少一部分由模块中的一个或更多个模块的功能元素生成。
本公开的另外的目的和优点将在以下详细描述中部分地阐述,并且部分地将从描述中清楚,或者可以通过本公开的实施例的实践而获知。本公开的目的和优点将通过所附权利要求中特别指出的要素和组合来实现和获得。
应当理解,前面的一般性描述和以下详细描述仅是示例性和说明性的,而不是对所公开的实施例的限制。
一个方面中的任何特征可以以任何适当的组合被应用于其它方面。特别地,方法方面可以被应用于装置或系统方面,反之亦然。本文中描述的任何装置或系统特征也可以作为方法特征提供,反之亦然。此外,以硬件实现的特征可以以软件实现,反之亦然。本文中对软件和硬件特征的任何引用都应被相应地解释。当使用时,功能特征或步骤可以根据它们对应的结构(诸如适当编程的处理器和相关联的存储器)可替代性地表示。应当理解,本公开的实施例的任何方面中描述和定义的各种特征的特定组合可以独立地实现和/或提供和/或使用。
附图说明
构成本说明书一部分的附图图示了若干实施例,并且与描述一起用于解释所公开的实施例的原理和特征。在附图中:
图1A图示了根据本公开的实施例的用于在交互系统和方法中使用的示例设备。
图1B图示了根据本公开的实施例的提供交互环境以供用户交换信息的示例播放器界面。
图1C图示了根据本公开的实施例的提供交互环境以供用户交换信息的另一示例播放器界面。
图1D图示了根据本公开的实施例的包括用户的构成和多个会话的示例交互模型。
图1E图示了根据本公开的实施例的图1D中所示的模块的图形对象。
图2图示了根据本公开的实施例的表示不同类型的用户及其相关联角色的示例图形对象。
图3是根据本公开的实施例的交互对象的示例类型的图示。
图4是根据本公开的实施例的包括相对于时间轴示出的交互对象的示例交互模型的图示。
图5图示了根据本公开的实施例的表示不同类型的模块的示例图形对象。
图6是根据本公开的实施例的包括交互对象和不同类型的模块的示例交互模型的图示。
图7是根据本公开的实施例的包括交互对象和不同类型的模块的交互模型的数据构建的图示。
图8图示了根据本公开的实施例的示例系统及其部件的布置。
图9A图示了根据本公开的实施例的被实现为图形用户界面的示例基础界面。
图9B图示了根据本公开的实施例的被实现为图形用户界面的示例工作室界面。
图9C图示了根据本公开的实施例的用于基础界面或工作室界面的示例交互式地图视图。
图10A图示了根据本公开的实施例的被实现为图形用户界面的示例播放器界面的列表视图。
图10B图示了根据本公开的实施例的被实现为图形用户界面的示例播放器界面的透视图。
图10C图示了根据本公开的实施例的被实现为图形用户界面的示例播放器界面的会话视图。
图11图示了根据本公开的实施例的被实现为图形用户界面的示例设计器界面。
图12图示了根据本公开的实施例的示例系统及其部件的布置。
图13图示了根据本公开的实施例的包括客户端和服务器部件的另一示例系统。
图14图示了根据本公开的实施例的不同的用户构成的示例。
图15是图示根据本公开的实施例的用于生成交互模型的示例方法的流程图。
图16是图示根据本公开的实施例的用于控制包括多个会话的交互的示例方法的流程图。
图17是图示根据本公开的实施例的用于控制包括多个会话的交互的示例方法的流程图。
图18图示了根据本公开的实施例的示例交互模型,该示例交互模型包括具有一系列模块的已定义会话和用于管理会话中的模块的议程模块。
图19A至图19C图示了根据本公开的实施例的构建界面的示例。
具体实施方式
本公开所公开的实施例涉及用于对情境驱动的用户交互进行建模、执行和控制的计算机实现的系统和方法。在一些实施例中,所公开的系统和方法可以被配置为生成交互模型。交互模型可以提供用于控制交互的模型,所述交互包括针对常用情境交换信息的用户之间的一个或更多个会话。如本文所公开的,交互模型可以包括以更高的精度控制交互的顺序和执行的一个或更多个计算机实现的模块。利用交互模型,还可以定义每个会话的用户的构成,包括他们各自的角色和访问权限。因此,避免了现有系统的缺点,诸如信息过载和混乱。
交互的常用情境可以涉及任何目标、宗旨或目的。另外,其可以涉及任何类型的会议、项目或倡议。举例来说,交互的情境可以是软件开发项目、产品研发、科学研究、董事会会议、财务审计、商业计划开发、司法或法律听证、法案写作倡议、教育内容创建、在线节日、音乐/播放/电影制图和制作、建筑研究、建筑项目等等。如将从本公开理解的,这些是非限制性示例,并且可以用所公开的系统和方法来建模和执行其它情境驱动的交互。
本公开的实施例可以利用各种类型的设备、界面、模块和用于实现本文所公开的系统和方法的其它部件来实现。例如,用户可以使用包括计算机、膝上型计算机、平板计算机、智能电话、移动电话、可穿戴设备、虚拟现实(VR)或增强现实(AR)头戴式耳机、手势设备、显示屏、电子白板或智能板、音频头戴式耳机、耳塞、麦克风、触笔等等设备的任何组合来生成、交换、访问和查看信息。这些设备可以使用网络和通信技术的任何组合来与系统平台和彼此通信。网络的示例包括局域网和广域网。网络可以包括私有网络(例如,公司或虚拟私有网络)和/或公共网络(例如,因特网)的任何组合。此外,可以采用有线和/或无线通信技术的任何合适的组合,包括例如蓝牙、WiFi、802.11、GPS、4G/5G、TCP/IP、USB C等等。
如本文所公开的,可以提供各种界面以使得用户能够生成和交换信息。界面还可以被提供用于其它目的,诸如使得用户能够设计交互模型和管理交互。作为另外的示例,还可以提供界面来设置参数和/或程序模块。在一些实施例中,界面可以利用软件来实现,并且当被执行时提供显示在用户设备或终端上和/或用用户设备或终端显示的图形用户界面(GUI)和/或VR/AR界面。每个界面可以是设备独立的(例如,独立的应用解决方案或app;基于web浏览器或小应用程序的解决方案等)并且与各种形式的输入/输出数据(诸如音频、语音、文本和/或触觉反馈)一起工作。根据本公开的界面的示例包括设计器界面、管理界面(诸如基础界面或工作室界面)、播放器界面和构建界面。界面的另外的示例包括程序界面(例如,用于对模块进行编程)和市场界面(例如,用于从开发者和供应商搜索、购买和/或加载模块)。以下进一步描述界面的这些和其它示例,包括这些界面的示例特征和能力。在一些实施例中,可以使用界面中的图形对象来显示用于交互的用户角色和配置的表示。总体上,图形对象和元素可以用于表示交互模型的特征、设计和状态,如在本文中呈现的示例实施例中所示。
在一些实施例中,提供了一种生成交互模型的方法,该方法包括计算机实现的步骤。例如,该方法可以利用执行可编程指令的一个或更多个处理器来实现,并且包括在计算机实现的显示器上提供适于基于多个用户输入来设计交互模型的设计器界面。通过设计器界面,用户或管理员可以选择和布置图形对象来设计交互模型。例如,该方法可以包括:响应于第一用户输入,按照在设计器界面中显示的顺序和/或相对于在设计器界面中显示的时间轴布置一个或更多个交互对象。每个交互对象可以表示与交互相关联的用户的构成。该方法还可以包括:响应于第二用户输入,进一步相对于在设计器界面中显示的顺序和/或时间轴布置一个或更多个模块。每个模块可以表示在交互的多个会话的一个或更多个会话中可执行的功能元素集。在一些实施例中,数据库或其它计算机可读介质可以存储表示交互模型的数据,包括通过设计器界面布置的一个或更多个交互对象和模块。
在一些实施例中,交互的用户和要指配给每个用户的角色可以通过针对设计器界面的附加输入(例如,交互的所有者或管理员作出的第三用户输入)而被识别。表示所识别的用户和角色的数据可以作为交互模型的一部分存储在数据库中。如本文所公开的,可以存在不同类型的用户角色(例如,所有者、贡献者、参与者),并且每个角色可以定义构成中的用户的权限,包括提供信息或访问信息的权限。用户角色还可以由模块的功能元素使用来控制或管理会话期间的用户活动或参与。
根据本公开的实施例的系统和方法还可以被配置为执行交互模型并且控制情境驱动的用户交互。如以上所讨论的,每个交互模型可以包括一个或更多个模块。在一些实施例中,可以存在不同类型的模块并且每个模块可以被实现为软件应用或可由系统执行的可编程指令集。模块可以提供规则或功能元素,以在会话的特定时间点或时间段期间控制和/或管理用户交互。
根据一些实施例,提供了一种用于控制包括多个会话的交互的方法,每个会话包括使用与系统平台联网的多个用户设备来针对常用情境交换信息的用户的构成。该方法可以包括计算机实现的步骤。例如,该方法可以利用执行可编程指令的一个或更多个处理器来实现,并且包括提供用于控制交互的交互模型,该交互模型包括按顺序和/或相对于时间轴布置的一个或更多个交互对象和一个或更多个模块。另外,可以在每个用户设备的计算机实现的显示器上提供播放器界面。如本文进一步公开的,播放器界面可以适于提供交互环境以在交互的每个会话中的用户之间交换信息。该方法还可以包括利用系统平台的至少一个处理器来执行交互模型的实例,以控制交互的每个会话中的用户之间的信息交换,其中由播放器界面提供的交互环境是响应于交互模型的执行而更新的。
例如,在一些实施例中,可以基于交互模型更新播放器界面以显示信息和/或图形对象。在一些实施例中,播放器界面可以被配置为基于交互模型的一个或更多个模块来显示议程。如本文所公开的,议程可以包括图形对象,所述图形对象可由用户选择以访问和执行一个或更多个模块的功能元素。图形对象可以是文本、符号和/或图形的任何组合。另外,可以响应于交互模型的一个或更多个模块的执行来更新播放器界面以显示信息。通过播放器界面,构成中的用户能够查看和确认(包括一个或更多个模块的)会话的议程以及会话的进度。此外,通过播放器界面,构成中的用户可以交换数据,包括响应于播放器界面中呈现的工具、提示和/或指令。工具可以由播放器界面中的图形对象来表示,并且当被选择时,使得用户能够链接到另一界面(例如,设计器界面或管理界面)或模块(例如,设备模块、微模块、宏模块或元模块)的功能元素。用于管理会话或数据交换的提示和/或指令还可以使用例如预定屏幕片段(例如,屏幕的外边沿)和/或弹出窗口显示在播放器界面中。另外,在一些实施例中,可以更新播放器界面以显示取决于指配给每个用户的角色的信息。因此,可以存在用于所有用户的公共显示和通过播放器界面呈现的用户角色特定显示。
如前所述,可以将用户角色作为交互模型的一部分来存储。每个角色可以定义每个用户的权限,包括提供或访问某些信息的权限。用户角色还可以控制哪些用户具有定义交互模型和其它用户的角色的权限。角色还可以由模块的功能元素使用以在会话期间控制或管理用户活动或参与(例如,加入分支会议;对一个或更多个事项进行投票;授权软件版本;控制对机密文件的访问;等等)。
例如,在一些实施例中,作为所有者或管理员的用户可以具有定义和执行交互模型的权限。所有者或管理员还可以具有定义其它用户的角色的权限以及在交互期间贡献数据的权限。作为贡献者的用户还可以具有向交互贡献数据的权限,但不具有指配角色或设计交互模型的权限。作为参与者的用户可以仅具有参与会话的权限。也就是说,他们不能将数据作为构建的一部分来贡献,也不能设计交互的任何方面。从本公开将理解,以上是角色定义和权限的非限制性示例,并且其它角色和相关联的权限可以被实现为本文中的实施例的一部分。
当由系统执行交互模型时,对于每个模块可以存在不同的触发器。附加地或可替代地,模块及其功能元素可以在相对于会话的特定时间点或时间段可用。例如,当交互模型的执行通过建模的顺序和/或时间轴而进展时,一种模块类型可以在特定时间点或时间段被触发,而另一模块类型可以在会话的执行开始时被触发或可用,并且在整个会话中保持活动。
如先前所描述的,可以存在不同类型的模块,并且可以出于不同的目的(例如,在交互环境中创建、编辑和/或记录数据;搜索和访问存档数据;共享演示;提供元环境以生成和交换信息;等等)提供与每个模块相关的功能元素集。以下进一步描述模块及其功能元素的示例。通常,可以提供至少三种类型的模块:微模块、宏模块和元模块。还可以存在设备模块来支持不同类型或类别的设备(例如,智能板、平板计算机、VR、头戴式耳机等)。以下参考本实施例进一步描述模块。
本公开的实施例还提供了一种交互系统,该交互系统用于使得能够在常用情境中在用户的构成之间交换信息,并且用于保留所有相关信息作为数据构建的一部分。如本文所公开的,根据本公开的数据构建使得能够进行有效的知识保留并标识数据是如何在用户之间共享、收集和/或开发的。此外,可以容易地从存储器中识别和检索相关数据(例如,在由另一用户给出演示时创建的用户的笔记或聊天)。如本文所公开的,可以将元数据作为构建的一部分来存储。元数据可以提供标识在交互中如何共享、收集和/或开发数据的情境信息。利用元数据,可以从存储器中搜索和检索相关数据。这提供了优于现有系统的优点,现有系统不保留这样的情境信息和/或仅具有用于搜索和检索数据的有限工具。
根据一些实施例,提供了一种交互系统,该交互系统除了其它部件之外还包括数据管理服务器、构建服务器和应用服务器。数据管理服务器可以被配置为形成持久层并且管理与多个交互模型相关联的数据。构建服务器可以被配置为使用持久层存储和提供与每个交互模型的已执行实例相关联的数据。在一些实施例中,交互模型的一个或更多个模块在其执行期间提供可以用于从构建服务器搜索和访问数据的元数据。附加地或可替代地,数据管理服务器可以提供用于访问来自交互的数据的元数据。
作为系统平台的一部分,应用服务器可以被配置为执行用于交互的交互模型的实例。如先前所描述的,每个交互可以包括多个会话,并且每个会话可以包括针对常用情境交换信息的用户的构成。交互模型可以设计为具有一个或更多个模块。每个模块可以提供在交互的会话的一个或更多个会话中可执行的功能元素集。模块可以被实现为可由应用服务器执行的软件应用或可编程指令集。可以提供应用程序界面(API)和/或软件开发包(SDK)来帮助模块的开发,并且使得能够在系统内和由应用服务器顺利执行。另外,每个模块的功能元素可以用作在会话的特定时间点或时间段期间控制和管理用户交互的规则,从而帮助提供用于交换信息的更结构化的环境,其中以更高的精度执行交互。同时,由于交互模型的设计是开放的并且可由交互的管理员的所有者调整,并且可以通过诸如本文所公开的示例设计界面等用户界面来有效地开发,因此本公开的实施例产生更灵活并且便于通信的系统和方法。
该系统还可以包括被配置为存储来自会话的数据的一个或更多个数据库。数据可以包括文档、演示、笔记、音频、图片、视频、多媒体文件以及用户在交互中交换的其它内容。根据本公开的实施例,数据可以被数字化和/或被流式传输。另外,通过系统界面,用户可以生成、访问、修改和交换任何合适形式的信息,包括视频、音频和文本。所有数据成为用于交互的构建的一部分。在一些实施例中,还将元数据还作为构建的一部分来存储。其中,元数据使得能够标识在交互中如何在用户之间共享、收集和/或开发数据。此外,可以从存储器中识别和检索相关数据。
现在参考图1A至图1D,描述了根据本公开的系统和方法的示例实施例。在这些示例中,用户的构成针对常用情境(例如,软件开发项目、产品研发、科学研究、董事会会议等)交换信息。一些用户可以物理上存在于同一房间或办公室中,而其它用户可以经由远程连接参与。为了参与,可以使用例如安全网络连接将所有用户设备连接到系统平台。在一些实施例中,用户具有会议码和/或密码以认证他们自己并且将他们的设备加入交互流程的会话。附加地或可替代地,用户可以通过适当的识别方式(例如,个人电子邮件、密码和/或ID)来识别和/或认证他们自己。
图1A图示了根据本公开的实施例的用于在交互系统和方法中使用的示例设备。图示的设备包括大显示屏或板110和平板计算机120。如将从本公开理解的,这些是非限制性示例,并且可以利用其它形式的设备。举例来说,用户设备可以包括智能电视、监视器、触摸屏、智能手表或其它可穿戴设备、智能电话、移动电话、计算机、膝上型计算机、平板计算机或平板电脑、智能眼镜、虚拟现实(VR)或增强现实(AR)头戴式耳机、手势设备、电子白板或智能板等等。根据需要,这些设备可以单独使用或与以上或其它设备组合使用。用户设备的进一步示例包括头戴式耳机、耳塞、鼠标、触笔等等。以上设备中的任何设备可以被集成(即,相同装置的一部分)或者彼此进行有线或无线通信。为了进一步说明,大显示屏110和平板计算机120可以彼此无线通信,并且还可以与诸如键盘、鼠标、触笔、触摸屏、智能眼镜、VR或AR头戴式耳机、运动传感器、图像捕获设备、麦克风等等的其它设备通信地组合。
根据本公开,可以在设备上呈现各种界面。界面可以被实现为向用户显示的图形用户界面(GUI)和/或VR/AR界面。界面可以是设备独立的(例如,独立的应用解决方案或app;基于web浏览器或小应用程序的解决方案等)并且与各种形式的输入/输出数据(诸如音频、语音、文本和/或触觉反馈)一起工作。界面的示例包括设计器界面、管理界面(诸如基础界面或工作室界面)、播放器界面和构建界面。以下参考附图进一步描述这些界面。
利用类似图1A所示和以上描述的设备,用户可以参与交互的会话,并且根据他们的角色和权限生成和交换数据。举例来说,至少一个用户可以充当交互的所有者或管理员,并且负责调度和执行交互模型中的会话。其他用户可以作为贡献者和参与者加入,根据他们的角色观察和提供数据。根据本公开的实施例,来自每个会话的数据由模块自动收集和存储,使得该数据成为数据构建的一部分,并且可以在以后被搜索和访问。
图1B图示了根据本公开的实施例的提供交互环境以供用户交换信息的示例播放器界面170。在图1B中,会话的用户被集合在公共办公室或房间100中。如上所述,一些用户可以物理上一起来进行会话,而其它用户可以经由远程连接参与。在一些实施例中,用作交互的所有者或管理员的用户130可以建立和发起会话。这可以通过例如播放器界面或管理界面(例如,基础界面或工作室界面)来完成。附加地或可替代地,所有者或管理员可以直接从设计器界面发起交互模型的会话。用户140、142、144等可以是会话中的贡献者和参与者,并且使用例如安全网络连接来他们的设备加入。在一些实施例中,可以键入会议码和/或密码以使各个设备(诸如膝上型计算机153或平板计算机155)以及公共或共享设备(诸如大显示屏或板150)加入。为了安全起见,可以使用其它形式的识别,包括随机生成的密码和多形式识别。
图1B图示了用于会话的若干示例设备,包括大显示屏150、膝上型计算机153和平板计算机155。诸如以上描述的那些设备的其它设备(例如,计算机、可穿戴设备、头戴式耳机、VR设备、AR设备、鼠标、触笔等)也可以用于会话中。用于会话的常用情境例如可以是软件开发项目、产品研发、科学研究或董事会会议。根据本公开的实施例,由系统执行的交互模型可以定义交互的所有方面,包括用于每个会话的用户的构成和模块。以下参考图1D描述示例交互模型。
再次参考图1B,在大显示屏150上示出了示例播放器界面170。可以在各个用户设备上呈现相同或相似的播放器界面。在界面170的左手侧,为该会话提供会议议程。该议程包括例如“介绍”、“视频演示”、“幻灯片”和“Q&A会话”。可以从交互模型自动生成议程,其中指配给会话的一个或更多个模块用于创建议程。例如,基于交互模型中模块的顺序和名称,可以在播放器界面中生成并且显示议程。议程可以包括可由用户选择以访问议程中的模块的功能元素(例如,用于播放视频、给出演示、做笔记、启用聊天等)的图形对象。图形对象可以是文本、符号和/或图形的任何组合。当会话被执行时,该会话相对于议程的进度可以经由播放器界面(例如,通过显示进度指示符/线和/或议程项的突出显示)显示给用户。此外,当某些模块变为活动的或可用的时(例如,自动地或在议程中选择了对应的图形对象时),可以触发会话的进度。主视图在界面170的中心。在图1B的示例中,主视图示出具有文本域和一组图形对象。在文本域中,可以显示即将到来的/安排的会话,或者用户可以通过名称(例如,韦恩技术董事会会议,第1周)来搜索特定的交互和/或会话。在一些实施例中,为了安全起见,可以将会议ID和/或密码键入到文本域中。屏幕上的图形对象可以提供各种功能(例如,“登录”、“加入”等)以帮助加入会话并且控制不同的设置(例如,打开/关闭麦克风和相机)。会话中的所有用户的身份也可以使用适当的标记(例如,对于每个用户,包括用户照片和/或首字母的气泡或圆圈)显示在界面170中。在一些实施例中,会话的用户信息首先显示在主视图中的文本域之下,并且然后在会话开始之后移动到右边沿。也可以更新主视图。例如,在会话期间,可以更新主视图以播放视频演示,显示演示文档幻灯片,发送正在说话或进行演示的用户的视频等。图1C中示出了用于交互环境的更新的主视图的示例。
在每个会话期间,可以使用不同的模块来管理和控制会话。如本文所公开的,每个模块及其功能元素可以在相对于交互的每个会话的特定时间点或时间段可用。例如,一些模块可以在整个会话中可用,而其它模块可在特定点被触发和执行或在指定时段可用,如交互模型中所定义的。此外,根据本公开,可以存在不同类型的模块来帮助交互和用于构建的数据收集。举例来说,可以提供至少三种类型的模块:微模块、宏模块和元模块。另外,可以提供其它类型的模块,诸如设备模块。设备模块可以支持在每个会话期间使用的不同类型或类别的设备。以下参考本实施例进一步描述这些模块类型中的每一种。
图1C图示了根据本公开的实施例的提供交互环境以供用户交换信息的另一示例播放器界面(相对于图1B中所示被更新)。在图1C中,屏幕150上的播放器界面170的主视图被更新以在会话期间呈现内容。这可以是视频演示的一部分或用户之一(例如所有者)评论议程或主持会议。在会话中的其它点处,其它用户(诸如贡献者)可以通过其单独的设备呈现内容(例如,共享文档、给出幻灯片演示等)。作为会话参与者的用户将通过他们的单独设备(诸如膝上型计算机或平板计算机)或共享设备(诸如会议室中的大屏幕或板150)来收听/观看/观察并且消费该信息。来自会话的所有演示和数据可以由系统收集并且作为数据构建的一部分被存储。元数据也由模块生成并且与数据构建一起存储。其中,元数据可以使得能够标识在交互中如何在用户之间共享、收集和/或开发数据。此外,可以从存储器中识别和检索相关数据。
再次参考董事会会议示例,用于该交互的交互模型可以包括数个会话。每个会话可以对应于安排的董事会会议。在每次董事会会议期间,该会话中的用户可以例如查看与公司相关的事项,记录会议纪要等。在一些会话中,董事会成员可以对项目或决议进行投票。每个会话可以具有相似的用户的构成(例如,CEO/董事长和所有的董事会成员),但是可以存在附加用户加入该构成的会话(例如,被安排给出演示的外部法律顾问或战略顾问)。每个会话的用户的构成可以在交互模型中定义,或者作为数据提供,以使用于执行的交互模型实例化。此外,对于每个会话,可以选择和定义一组模块以帮助交互流程和信息交换。一些模块可以特别适用于董事会会议交互,并且提供用于记录会议纪要、投票、分析销售数据等的功能。通常,模块可以用不同的功能元素集来开发。另外,在一些实施例中,系统可以被设计为开放平台,该开放平台被配置为执行来自各种开发者和源的模块(例如,作为软件应用或可编程指令集)。可以提供应用程序界面(API)和/或软件开发包(SDK)来协助这些模块的开发并且使得能够在系统内顺利执行。
如以上所讨论的,在交互模型中定义用于每个会话的用户构成(一个或多个)和模块。根据本公开的实施例,交互模型可以通过设计器界面生成(参见例如图11)。如果在最初设计交互模型之后需要对其进行调整,则所有者或管理员可以通过设计器界面进行改变或更新。附加地或可替代地,所有者或管理员可以通过管理界面(参见例如图9A和图9B)对交互模型进行改变或更新。以下进一步描述这些界面的示例实施例。
图1D图示了示例交互模型180,该示例交互模型180包括用户的构成和多个会话。图1D的示例包括按顺序和/或相对于时间轴190布置的多个图形对象(其中多个图形对象表示交互对象182和多个模块184、186、188a-188c)。在一些实施例中,通过多个用户输入(例如,拖放操作、文本命令、语音命令、运动命令等)在设计器界面中执行对象的布置。图1D的示例图示了当用户设计交互模型时,界面模型180的图形对象的布置可以如何在设计器界面中显现给用户。用户可以从模块的存储库或储存库中选择模块。一组可用模块在图1D的右下部分中示出。此外,图1E更详细地图示了图1D中所示的模块的图形对象,包括与每个示例模块相关联的示例文本和图形。以下进一步描述包括其工具和功能的示例设计器界面(参见例如图11)。
在图1D中,交互模型180包括交互对象182和多个模块184、186、188a-188c。交互对象182表示用于交互的用户的构成。在该示例中,相同的用户的构成被应用于会话中的每个会话(第1周至第3周)。如以上描述的,用户的构成还可以在会话之间变化。在这种情况下,可以在交互模型中定义多于一个交互对象。
模块184、186、188a-188c表示用于交互的不同模块类型和功能元素集。在该示例中,模块184是设备模块,模块186是宏模块,并且模块188a、188b、188c是微模块。这些模块按建模顺序和/或相对于时间轴190的布置定义了这些模块何时可用或被触发来执行。根据一些实施例,与时间轴190垂直地或作为从时间轴190的分支布置的模块(诸如模块184和186)在整个交互期间可用(例如,它们在每个会话开始时被执行,并且可以在每个会话期间的任何时间被使用)。如果模块(诸如模块188a、188b、188c)被同轴布置或沿时间轴190布置,则该模块在特定时间或有限时段内可用(例如,它们在会话内的特定点或时间段被执行)。每个会话内的模块188a、188b、188c的顺序和名称还可以用于生成会话议程,该会话议程包括在交互模型中定义的模块名称及其顺序。如本文所公开的,可以在播放器界面中显示每个会话的议程,以向用户通知所计划的会话活动,并且在执行会话时管理和引导该会话。另外,议程可以包括可由用户选择来实现或执行模块(例如,评论模块、视频会议模块、演示模块等)的图形对象。可以在交互模型180中提供其它模块类型,诸如元模块(图1D中未示出)。如本文进一步公开的,元模块可以提供用于交换信息的元环境。元模块可以在整个交互及其每个会话中可用。
设备模块184可以支持不同类型或类别的用户设备。在图1D的示例中,设备模块184包括智能板模块和平板模块。如将理解的,可以提供其它类型的设备模块,诸如用于计算机、膝上型计算机、平板计算机、VR设备、AR设备、头戴式设备等的设备模块。这些示例是非限制性的,并且从本公开将理解,可以实现其它类型的设备模块。
宏模块186可以提供各功能元素集以在每个会话期间支持和控制活动。如上所述,在一些实施例中,宏模块在整个交互中是活动的,并且可以在每个会话期间的任何时间被使用。下表中提供了宏模块的非限制性示例:
表1:宏模块的示例
Figure BDA0004129725070000201
/>
Figure BDA0004129725070000211
微模块188a、188b、188c还包括在会话期间支持和控制活动的功能元素。然而,它们可能仅在特定点或有限时间段内可用。例如,根据这些模块按建模顺序和/或在交互模型的时间轴上的布置,它们可以在会话内的特定时间点或时间段被执行。这些模块按顺序和/或在时间轴上的布置还可以定义微模块的激活顺序。通过设计器界面,可以按照用于生成会话的议程的顺序来布置微模块。也可以在议程中显示其它模块,诸如宏模块和设备模块。在下表中提供了微模块的非限制性示例:
表2:微模块的示例
Figure BDA0004129725070000221
Figure BDA0004129725070000231
/>
如以上描述的,可以使用其它类型的模块来设计交互模型。例如,在一些实施例中,可以提供元模块。元模块可以始终是活动的。此外,它们可以用于提供用于在任何会话期间交换信息的元环境。在一些实施例中,元模块可以通过使得能够将数据从另一平台或环境导入、转化和/或转换到交互系统来提供元环境,反之亦然。这可以在交互发生时为用户提供沉浸式体验或环境。元模块的非限制性示例包括沉浸式模块和游戏模块。沉浸式模块可以提供沉浸式会话,其中用于交换内容/数据的所有信道(音频、视频、文本)都是可用的。游戏模块可以提供会话,其中向该会话中的所有用户广播游戏。另外,可以在交互模型中组合不同的模块类型。例如,沉浸式模块可以与VR或AR设备对象模块组合,以向用户提供用于访问、获得、共享、使用和/或进一步贡献一个或更多个会话的数据或情境的VR或AR体验。作为另外的示例,玩家可以通过将游戏平台与游戏模块对接来流式传输游戏会话,并且使用微模块来记录该游戏会话和/或生成短视频。更进一步地,可以使用根据本公开的模块将记录和/或短视频上载到视频共享平台。
根据本公开的实施例,构成中的用户被指配给角色。角色定义以下各项中的至少一项:用户的功能、权限、许可、访问级别、能力和职责(在本文中统称为“权限”)。举例来说,角色可以指定用户是否仅能够访问信息。另一角色可以给予用户附加权限,诸如设计和生成交互模型(包括交互模型的交互对象和模块)的权限。角色还可以由模块使用来确定向用户呈现或共享什么,以及应当向用户应用什么功能元素(诸如应用支付过程、对项目投票、上载或共享文档或演示等)。
在一些实施例中,指配给用户的角色可以随着用于交互的会话的进度而随时间改变。例如,用户的角色可以在一个会话内或不同会话之间关于其功能、权限、许可、访问级别、能力和/或职责而改变。在一些实施例中,用户的角色还可以在交互模型之间改变并且不同。例如,用户可以是一个交互模型的所有者,以及另一个交互模型的贡献者或参与者。附加地或可替代地,用户的角色可以取决于哪个实体或群组设计和管理特定交互和对应的交互模型而变化。在交互由实体或群组设计和管理的情况下,该实体或群组可以指配一个或更多个个体作为所有者、贡献者和参与者。更进一步地,交互还可以基于来自不同实体或群组的用户之间的协作(例如,开源或标准设置交互)。在这种情况下,角色指配可以包括多个指定的所有者以帮助交互模型的设计和管理。每个会话也可以存在多个贡献者和参与者。通常,根据本公开的系统和方法灵活地支持任何数量和组合的角色指配。以下参考图14描述另外的示例。另外,本公开的实施例可以实现用于各种使用情况的交互模型。
在一些实施例中,角色可以由基于许可的认证部件(例如,在应用服务器或编排器上实现或作为其一部分实现)来管理。例如,身份和访问管理(IAM)部件可以被配置为管理用户角色。每个角色可以被定义为被指配了该角色的用户可用的许可的集合。一些许可可以准许用户访问特定功能或功能元素。以下进一步描述用于实现具有角色管理的系统的实施例(参见例如图8和图13)。
现在参考图2,根据本公开的实施例,提供了表示不同类型的用户及其相关联角色的示例图形对象的图示。角色可以作为在交互模型中定义的配置的一部分被指配给用户,或者作为数据被提供以实例化用于执行的交互模型。示例角色包括所有者220、贡献者240和参与者260。以下描述与这些角色中的每个角色相关联的权限。
所有者220可以具有设计和生成交互模型的权限。如以上描述的,设计器界面可以用于设计交互模型,包括界面对象(表示用户构成)和模块的布置。所有者220还可以具有管理权限,诸如为其它用户指配角色并且根据需要更新交互模型。所有者220还可以安排会话,添加/移除模块,并且具有作为交互的所有者的其它权限。
贡献者240可以具有贡献会话的权限。这样的贡献可以包括例如提供文档、提交评论或笔记、共享/给出演示等。在一些实施例中,贡献者可以充当所有者220的助理,并且具有帮助施行或管理交互模型的权限。这样的权限可以由所有者指定。例如,贡献者240可以具有安排会话或对交互模型进行更新的权限。
参与者260表示向用于交互的一个或更多个会话的配置指配的用户。参与者260可以具有加入会话并查看和消费信息的权限。然而,参与者260可以不具有贡献任何内容或信息的权限。此外,参与者260可以不具有执行具有所有者或贡献者角色的用户的功能或职责的任何管理权限或能力。在一些实施例中,参与者260的权限可以由例如所有者220改变以允许参与者260在会话期间贡献信息。
在一些实施例中,一个或更多个所有者可以设计一个或更多个交互模型,并且用户可以基于一个或更多个交互模型加入并且体验交互。另外,在一些实施例中,一个或更多个所有者和/或一个或更多个贡献者可以管理交互模型以促进或控制交互。如以上描述的,可以存在用于交互及其会话的角色指配的任何数量和组合。
根据一些实施例,交互模型的所有所有者220、贡献者240和参与者260能够在会话期间提供信息或数据,从而形成和定义在交互模型系统中发生的交互的情境。
在一些实施例中,所有者220能够执行贡献者240和/或参与者260的所有功能。另外,在一些实施例中,贡献者240能够执行参与者260的所有功能,但仅能够执行所有者220的功能中的一些功能。附加地或可替代地,所有者220能够执行设计交互模型所需的所有功能,但不能够执行贡献者240和/或参与者260的至少一些功能。因此,用户的权限可以随角色而变化,并且一些角色可以包括其他角色的权限。
根据本公开的实施例,访问和使用界面的能力可以由指配给用户的角色来控制。在一些实施例中,每个角色可以具有对系统的一个或更多个界面的访问权限(或使用许可)。例如,所有者220可以具有访问和使用设计器界面和管理界面以及其它界面(诸如播放器界面和构建界面)的权限。贡献者240可以具有访问和使用管理界面、播放器界面和构建界面的权限。参与者260可以仅访问和使用播放器界面和构建界面。在一些实施例中,所有者220能够改变或更新用户对界面的访问权限。在一些实施例中,可以基于来自所有者220的通过例如设计器界面和/或管理界面的输入来更新(准许或撤销)界面访问权限。
根据一些实施例,交互模型建立(定义、计划和安排)特定于常用情境的用户之间的交互。每个交互模型定义在一个或更多个会话中交换信息的用户的构成。交互可以涉及任何类型的数据或信息交换,包括文档、演示、笔记、音频、图片、视频、多媒体文件和/或其它内容。另外,根据本公开的实施例,数据可以被数字化和/或被流式传输。
根据本公开的实施例,可以提供交互对象来表示一个或更多个会话的用户的构成。图3图示了根据本公开的实施例的交互对象的示例类型。这些示例是非限制性的,并且从本公开将理解,可以提供其它类型的交互对象,包括其用于生成交互模型的图形表示。
在图3中,图示了交互对象的三个非限制性示例322、324、326。这些交互对象表示用于交互的一个或更多个会话的用户的三种不同的构成。在图形上,它们表示哪些类型的用户在构成中并且可以交换信息。虽然在用于交互模型的数据中提供了与每种构成相关的附加信息(例如,构成中的用户的特定身份和数量,以及他们各自的角色中的每个角色),但是这些交互对象帮助所有者或管理员使构成在设计器界面中可视化并且设计交互模型。
在图3的示例中,第一类型的图形表示322指示一个或更多个所有者和贡献者之间的构成。第二类型324表示包括一个或更多个所有者和参与者的用户的构成。另外,第三类型326表示包括一个或更多个所有者、贡献者和参与者的用户的构成。如从本公开将理解的,对象322、324、326是非限制性示例,并且可以提供其它类型的交互对象。例如,任何图示类型的对象322、324、326可以被修改(例如,用框勾画)以指示在构成中包括附加类型的用户,诸如管理员。另外,交互对象的其它示例包括用户构成的图形表示,其中信息交换是在一个或更多个管理员、贡献者和/或参与者之间(即,所有者不在该构成中)。
在生成交互模型之后,它可以由根据本公开的计算机实现的系统来执行。如本文所公开的,交互模型可以设计为具有一个或更多个会话。随着每个会话被发起并且随后完成,交互对象和用户之间的信息交换相对于交互模型的时间轴有所进展。这提供了用于知识的累积和数据构建以及完成常用情境的目标或目的结构化过程。图4提供了根据本公开的实施例的包括交互对象453的示例交互模型450的图示,该交互对象453相对于时间轴455的进度被示出。应当理解,该图是用于呈现与本公开相关的构思的交互模型的广义表示。本文提供了另外的示例。
在图4中,示出了具有交互对象453的示例交互模型450。交互对象453类似于对象322,因为它是表示包括一个或更多个所有者和贡献者的用户的构成的一种类型的交互对象。交互对象453可以被应用于交互模型450的所有会话,或者它可以被设计成仅用于某些会话,而对于在交互模型450中定义的其余会话安排其它交互对象。
根据本公开的实施例,交互模型定义了一个或更多个交互对象和一个或更多个模块相对于时间轴的布置。在图4中,交互对象453表示可应用于特定时间点或时间段(例如,当交互的特定会话在当前发生、在过去发生或被安排在将来发生时的时间点/时间位置或时间段)的用户的构成。如上所述,随着每个会话被发起并且随后完成,交互对象和用户之间的信息交换相对于交互模型的时间轴有所进展。此外,一个或更多个模块(图4中未示出)可用于帮助每个会话中的流程和活动。会存在在过去已经完成的会话,并且会存在将要在交互完成之前执行的将来会话。由此,交互模型450被定义成与时间相关,并且时间轴455对于会话和与其相关的对象和模块的设计和布置是极为重要的。在交互模型中定义了所有过去、现在和将来的会话,以及用于每个会话的用户的构成和模块。这提供了用于信息交换和知识累积(即,数据构建)以及完成常用情境的目标或目的的结构化模型和过程。它还用对所有参与者来说是清楚和平稳的过程来促进工作协作和效率。
与从每个会话存储的数据一起,元数据可以作为数据构建的一部分被存储。在一些实施例中,元数据提供与交互相关的数据的情境信息。在一些实施例中,元数据可以包括用于交互或交互的会话(例如,会话讨论、投票、演示等等)的描述、标题、话题、评论和/或指南中的一个或更多个。该元数据可以提供当前发生的、过去发生的和/或将来将要发生的情境信息。因此,元数据可以向用户增加透明度和结构,并且还有助于交互系统的益处。
如本文所公开的,可以在交互模型中定义一个或更多个模块。可以存在不同类型的模块,并且每个模块可以被实现为软件应用或可由系统执行的可编程指令集。模块可以提供规则或功能元素,以在一个或更多个会话的特定时间点或时间段期间控制和管理用户交互。以上描述了模块的示例,包括关于表1和表2进行的描述。模块还可以被配置为生成和提供每个会话的元数据,诸如以上描述的元数据。
在一些实施例中,可以向系统提供核心模块集,并且该核心模块集可用于经由设计器界面进行选择以生成交互模型。使用本公开的系统和方法,来自第三方开发者的模块也可以被添加并且用于生成交互模型。附加地,可以存在可用于经由设计器界面来选择以用于更新或实例化(例如,通过改变标准化会话,界面对象和/或模块中的一个或更多个)的标准化交互模型,以生成用于特定情境或使用情况的最终交互模型。
在一些实施例中,模块可以设置条件、规则和/或指令,以在交互的会话期间实现数据的提供、收集、存储、访问、获取、生成、共享、使用和/或交换中的至少一种。可以使用能够被插入到系统中的界面(例如,管理和/或播放器界面)来执行会话。在一些实施例中,存在不同类型的模块,当执行交互模型的实例时,每个模块类型可供使用、可应用和/或可实现。
现在参考本公开的图5和图6。在这些附图中,图5图示了根据本公开的实施例的表示不同类型的模块的示例图形对象。另外,图6是根据本公开的实施例的包括交互对象和不同类型的模块的示例交互模型的图示。
在图5中,示出了三种不同类型的模块510、512、514。如图5中图示的,这些模块510、512、514的图形对象表示它们可以如何显现在用于生成交互模型的设计器界面中。
然而,如将理解的,每个图示的对象中的“X”是占位符,并且其可以用文本、符号和/或图形来替换,以指示由对应模块执行的特定功能(例如,记录器、语音转文本、笔记、视频会议、投票、文档容器等)。图1D和图1E图示了每个示例模块的具有文本、符号和/或图形的模块的图形对象。本公开中的图6和若干其它图示出了具有通用“X”占位符的模块的图形对象。
再次参考图5,模块的示例类型包括:对应于微模块第一类型510;对应于宏模块的第二类型512;以及对应于元模块的第三类型514。以上描述了这些类型的模块中的每个模块的示例(参见例如表1和表2以及周围段落)。如将理解的,可以存在其它类型的模块,诸如设备模块。类似于宏模块,设备模块可以被布置为与时间轴垂直或作为其分支。
模块类型510、512、514中的每一种包括功能元素集。如所讨论的,这些功能元素可以设置条件、规则和/或指令,以在交互的会话期间实现数据的提供、收集、存储、访问、获取、生成、共享、使用和交换中的至少一种。另外,模块可以生成并且提供用于每个会话的元数据,诸如比本文中公开的元数据。围绕每个模块类型的外围的连接的虚线(参见图5)指示模块将如何相对于交互模型的时间轴布置。图6提供了模块类型510、512、514相对于示例交互模型650的时间轴655的布置的另外的图示。根据一些实施例,垂直于时间轴布置或作为时间轴的分支的模块(诸如设备模块(未示出)或模块类型512、宏模块)在整个交互期间是可用的(例如,它们在每个会话开始时被执行,并且可以在每个会话期间的任何时间被使用)。同轴布置或沿时间轴布置的模块(例如模块类型510、微模块)在特定时间或有限时段内是可用的(例如,它们在会话内的特定时间或时段内被执行)。其它模块可以覆盖在时间轴的顶部(诸如模块类型514、元模块),并且在整个交互及其每个会话中可用。
再次参考图6,交互模型650包括相对于时间轴655布置的数个模块510、512、514。图6中还示出了表示用户的构成的交互对象626。第一类型510的模块(即,微模块)包括功能元素集,根据它们相对于时间轴655的布置,这些功能元素可用于在特定时间点或时间段使用。第二类型512的模块(即,宏模块)包括可用于在交互的整个会话期间使用的功能元素集。第三类型514的模块(即,元模块)包括用于为交互提供元环境的功能元素集。在一些实施例中,元模块可以用于在交互期间的任何时间使用。
举例来说,微模块510可以用于控制在特定时间点和按照在交互模型中定义并且按每个会话的议程在播放器界面中示出的顺序发生的数据交换。如本文所公开的,可以从为会话定义的一个或更多个模块生成议程。例如,使用交互模型中的用于会话的微模块的顺序和名称,可以在播放器界面中生成并且显示议程。议程可以包括可由用户选择以访问该会话的议程中的模块的功能元素(例如,用于播放视频、给出演示、做笔记、启用聊天等)的图形对象。图形对象可以是文本、符号和/或图形的任何组合。另外,当会话被执行时,该会话相对于议程的进度可以经由播放器界面(例如,通过显示进度指示符/线和/或议程项的突出显示)示出给用户。此外,当某些模块变为活动的或可用的时(例如,自动地或在议程中选择了对应的图形对象时),可以触发会话的进度。诸如宏模块的其它模块可以由播放器界面中的议程中或议程附近的图形对象来表示。举例来说,宏模块512可以用于控制可以在交互的会话期间的任何时间采取的动作(例如,笔记、语音转文本、AR2R等)。元模块可以被定义为交互模式的一部分,以配置用于交换数据的元环境。例如,元模块514可以在整个交互中可用,并且用于使得系统能够与外部平台或环境(诸如特定数据存储或基于云的服务、VR系统、AR系统、游戏系统等等)进行通信,并且将数据转换成与外部平台或环境兼容的格式,以及从与外部平台或环境兼容的格式转换数据。
在会话执行期间,可以利用播放器界面和显示的议程来实现进一步的特征和方面。例如,可以允许用户移动在播放器界面中显示的进度指示符或进度条以对会话的流程进行导航或调整。例如,通过其用户设备,用户(诸如所有者)可以提供将进度指示符或进度条拖动或移动到议程中的任何部分或阶段的输入。举例来说,所有者可以将进度指示符或进度条移动到议程中的先前微模块,并且由此使该模块重新执行与该模块相关联的功能元素或使与该模块相关联的功能元素在会话内再次可用。所有者还可以向前或经过微模块移动进度指示符或进度条,并且由此相对于议程推进会话。这在例如议程中的特定项或模块已被较早执行或需要将其推迟到较晚时间或完全跳过(因为不再需要)的情况下可能是有帮助的。利用这种在议程中来回导航的能力,可以在会话的执行期间提供更多的控制,并且由此提高效率和协作。
在一些实施例中,模块510、512、514可以被配置为使得微模块510和元模块514在特定时间点或时间段被触发(例如,变得可用、实例化和/或执行),并且宏模块512总是被触发(即,在交互模型正在被执行被触发并且因此是活动的并且可供使用)。设备模块(未示出)也可以像宏模块512一样执行。另外,在一些实施例中,可以通过将模块中的条件设置为真或活动来实现模块的触发。
图7是根据本公开的实施例的包括相对于时间轴655布置的交互对象626和不同类型的模块510、512、514的交互模型650的数据构建的图示。如本文所公开的,数据构建是生成、访问、共享、记录或以其它方式与交互的会话相关的所有数据项(例如,文档、消息、音频、视频、文本、多媒体文件、记录的会话等)的累积。数据构建随时间累积数据,并且从交互的开始到结束有所增加。数据构建被存储在数据库中,并且随后可以由与相同交易或后续交易有关的用户访问。在一些实施例中,数据构建被存储在关系数据库系统中。利用存储在关系数据库中的数据构建,可以查看彼此相关的每条生成的数据和相关联的信息。
根据一些实施例,模块可以将数据存储到数据构建。模块还可以包括允许用户访问数据构建中的数据的功能元素。举例来说,文件宏模块可以呈现其已保存到构建体的文档的预览。作为另外的示例,幻灯片微模块可以呈现演示的预览,并且聊天宏模块可以呈现聊天历史。更进一步地,投票微模块可以呈现示出投票结果的条形图。在一些实施例中,数据可以与时间戳一起存储或标记为与交互的时间轴相关。这可以使得用户能够导航和查看例如由微模块保存的视频或音频流的部分。还可以相对于文件或文档进行数据检索。例如,用户可能想要听到在演示的前5个幻灯片期间所呈现的内容。如将理解的,这些是非限制性示例,并且可以实现其它数据存储和检索特征。
在一些实施例中,用于维护数据构建的数据库或存储系统可以是联网的和/或基于云的系统。例如,取决于组织和所需的网络安全,可以利用公共或私有云系统。另外,每个数据库或存储系统可以被实现为关系数据库,诸如SQL或CQL数据库。作为另外的示例,每个数据库或存储系统可以支持用于容器的受管理的Kubernetes集群。
根据本公开的实施例,元数据还被存储在数据构建内或与数据构建相关地被存储,以提供所存储的数据的情境信息,并且使得能够检索构建中的数据以及相关数据(例如,其它文档、消息、音频、视频、文本等)。元数据可以提供例如与所存储的数据是如何、何时和/或为何被创建、共享和/或存储以及由谁来创建、共享和/或存储相关的信息。作为另外的示例,对于交互的每个会话,元数据可以包括标识会话的标题和/或议程、哪些用户登录了、哪些模块被激活和使用了、模块如何被配置、哪些数据信道被打开等等沉浸式信息。作为又一些示例,元数据可以包括帮助识别相关数据的信息,诸如在给出演示时作出了什么笔记或评论,在一个用户询问问题时另一个用户给出什么答案,哪个用户做了会议纪要等等。在一些实施例中,可以相对于时间、建模顺序和/或交互的时间轴来(例如,使用时间戳)标记元数据。元数据还可以包括关于来自交互的数据被存储在何处以及相关数据的存储位置的信息。
在一些实施例中,来自会话的数据(例如,文档、消息、演示、媒体等)可以存储在与元数据分开的容器中。元数据可以包括指向数据的存储位置的指针,诸如指向数据库中的blob(二进制数据)的ID的指针。数据可以在任何点移动到冷存储或返回到热存储。元数据可以帮助始终跟踪数据。应当理解,这些是非限制性示例,并且根据本公开的实施例,其它数据库实现也是可能的。
为了便于从构建中搜索和检索数据,可以提供构建界面。构建界面可以被实现为GUI并且呈现在用户设备(例如,板、膝上型计算机、平板等;参见图1A至图1C)上或用用户设备来呈现。构建界面可以具有使得用户能够从数据库中搜索和查看数据以及该数据与会话和/或交互的关系的工具和能力。作为非限制性示例,以下特征可以由构建界面提供:(i)指示所有交互如何生成数据的全局视图;(ii)指示特定交互如何生成数据的交互视图;(iii)来自特定交互的指示特定会话如何生成数据的会话视图;(iv)经由参数(例如,具有其角色的用户和模块元数据,两者都以时间相关性呈现)从全局视图、流程视图和/或会话视图中搜索特定数据的能力;以及(v)与其他人(例如,组织或其它实体内部或外部的用户)共享所得数据的能力。
在图19A至图19C中提供了构建界面的示例。包括在这些附图中的是用于构建界面的全局视图(图19A)、界面视图(图19B)和会话视图(图19C)的示例。
在一些实施例中,构建界面可以包括报告特征或工具。其中,报告工具可以使得用户能够生成特定用户或用户群组的对话、笔记、评论等的历史。也可以分析和报告历史数据和趋势。举例来说,构建界面和报告工具可以通过帮助组织和其它实体通过查看基于用户在特定时间段上的所记录活动的趋势来优化其通信或交互过程。
如本文所公开的,本公开涉及用于对情境驱动的用户交互进行建模和控制的计算机实现的系统和方法。根据本公开的实施例的系统和方法可以被配置为执行具有一个或更多个模块的交互模型,
这些模块提供规则或功能元素来控制和管理用户交互。模块还可以生成用于数据的元数据,诸如本文中公开的示例元数据。本文还公开了使得用户能够接收和提供信息的界面。这些界面可以被实现为GUI和/或VR/AR界面,并且可以是独立于设备的。根据本公开的界面的示例包括设计器界面、管理界面(诸如基础界面或工作室界面)、播放器界面和构建界面。
图8图示了根据本公开的实施例的示例系统810。图8示出了系统810的若干主要部件(821、823、841、851、855、880)如何在逻辑级彼此交互。应当理解,图8中的部件的数量和布置是示例性的,并且可以根据本公开进行修改和调整。例如,图8的部件可以被组合成一起工作和运行的多个子系统。附加地或可替代地,可以增加、减少或简化部件的数量。另外,一个或更多个处理器和/或服务器可以用于将系统810及其部件实现为单个系统或分布式系统。部件还可以被添加到系统810(诸如应用服务器或编排器),并且系统810可以被联网以实现图示的部件(821、823、841、851、855、880)之间以及与用户设备(未示出)之间的通信。
图8中图示的部件包括:设计器界面821,该设计器界面821用于设计和生成交互模型;管理界面和播放器界面823,该管理界面和播放器界面823用于管理交互模型的实例,在用户设备(未示出)上呈现交互环境,以及控制交互中用户之间的信息交换;模块数据库841,该模块数据库841用于存储和提供模块;交互模型数据库851,该交互模型数据库851用于存储和提供交互模型;API/SDK数据库855;以及数据构建880。根据本公开的实施例,设计器界面821用于设计和生成交互模型。不同类型的模块(例如,微模块、宏模块、元模块、设备模块)可以存储在数据库841中,并用于利用设计器界面821生成交互模块。交互模型被存储在数据库851中,并且然后由管理界面和播放器界面823解释、管理和呈现,其中模块和相关联数据根据来自API/SDK数据库855的API进行处理。由模块生成并且为每个交互收集的所有数据和元数据被存储在数据构建880中。
如本文所公开的,设计器界面821可以用于设计和生成交互模型。交互模型可以包括来自模块数据库841的一个或更多个模块等等。表示每个交互模型的数据被存储在交互模型数据库851中。在一些实施例中,每个交互模型被解释(例如,通过提供来自数据库851的数据并且执行交互模型的实例),并且被选作交互模型的一部分的模块被触发或执行。作为该过程的一部分,在每个用户设备(未示出)上呈现播放器界面,以为构成中的用户提供交互环境,从而在常用情境中生成和交换信息。另外,在具有图形对象的播放器界面中提供会话议程,这些图形对象是用户可选择的,以执行交互模型中的模块中的一个或更多个模块的功能元素。来自交互的会话的所有数据和元数据被存储在数据构建880中。根据本公开的实施例,数据构建880可以利用一个或更多个数据库系统(诸如高度可扩展的关系数据库系统)来实现。数据库系统的示例包括可扩展数据库系统(诸如Apache Cassandra)和云存储系统(诸如Amazon S3),该云存储系统包括数据归档和长期备份解决方案(诸如AmazonS3 Glacier)。应当理解,这些是非限制性示例,并且根据本公开的实施例,其它实现是可能的。
在一些实施例中,图8中的系统810进一步包括实现为内核应用的编排器。编排器或内核应用可以在服务器和/或每个用户设备(例如,服务器和/或客户端应用)上运行。界面在服务器和/或每个用户设备上运行并且执行以下各项中的至少一项:模块控制和管理(例如,对模块何时或如何被触发或执行的管理;管理模块之间的数据通信;对与会话或交互相关的信息或数据的更新);系统资源分配;API管理;以及基于角色或用户的许可/授权执行。
在一些实施例中,图8中的系统810的部件中的一个或更多个部件在服务器(例如,外部服务器或云服务器)上实现(或托管),其中其余部件通过经由通信网络(例如,包括内联网和/或因特网的有线和/或无线通信网络)接收和/或发送数据来访问、获得其中的数据和/或将数据提供到其中。应当理解,取决于系统的大小和容量需要,这样的实现可以包括一个或更多个服务器或处理器。
此外,在一些实施例中,数据库(例如,数据库841、851、855)中的一个或更多个数据库可以托管在可以是相同或不同服务器的服务器上,其中界面(例如,设计器界面821、管理界面和播放器界面823、构建界面880)在可以是相同或不同用户设备或终端的用户设备或终端上运行,与服务器通信。此外,在一些实施例中,数据构建880可以包括在一个或更多个服务器上托管的一个或更多个数据库。
如本文所公开的,可以为各种类型的界面提供不同的特征和能力集。根据本公开的界面的示例包括设计器界面、管理界面(诸如基础界面或工作室界面)、播放器界面和构建界面。在一些实施例中,界面可以利用软件来实现,并且当被执行时提供显示在用户设备或终端上的GUI和/或VR/AR界面。每个界面可以是设备独立的(例如,独立的应用解决方案或app;基于web浏览器或小应用程序的解决方案等)并且与各种形式的输入/输出数据(诸如音频、语音、文本和/或触觉反馈)一起工作。
现在将参考图9A至图9C描述示例管理界面。在这些示例之后,参考图10A至图10C提供示例播放器界面的描述,并且参考图11提供示例设计器界面。以下公开了其它示例界面,包括示例构建界面和示例市场界面。从本公开将理解,可以提供界面的其它实施例,包括具有不同的特征和能力集。
管理界面可以使得用户能够管理交互。在一些实施例中,可以存在不同类型的管理界面,诸如基础界面和工作室界面。使用管理界面或管理界面的特定特征或类型的权限可以是角色相关的。此外,访问和使用其它界面和/或其特征的权限可以是角色相关的。图9A中图示了示例基础界面,并且图9B中图示了示例工作室界面。通常,工作室界面可以与基础界面共享特征和能力,但是它可以包括附加的特征和能力。因此,与基础界面相比,工作室界面可以是更高级的管理界面。
在一些实施例中,管理界面可以使得用户能够管理交互,包括交互的配置、调度和执行。例如,管理界面可以使得用户能够选择和进入其它界面,诸如设计器界面或播放器界面。如本文所公开的,设计器界面可以被配置为使得用户能够创建新的交互模型或编辑现有的交互模型。另外,播放器界面可以被配置为使能用户能够访问定义的/安排的交互并且作为该交互的一部分交换信息。
在管理界面内,可以向用户提供其它特征和能力。例如,利用管理界面,交互的所有者或管理员可以识别构成的用户。另外,所有者或管理员可以对在用于交互的构成中的用户定义和指配角色。更进一步地,所有者或管理员可以使用管理界面来更新指配的角色或管理构成中的用户(例如,添加或删除用户)。在一些实施例中,可以通过管理界面为所有者或管理员启用其它特征和能力,诸如为创建的会话或交互安排和发送的个体用户或群组邀请。在管理界面中还可以存在各种设置和选项,诸如日历视图、组织视图、时间线视图、交互式地图视图或定制视图,以便访问用于管理交易的信息。
现在参考图9A,图示了根据本公开的实施例的示例基础界面。如图所示,基础界面可以包括用于访问、管理和/或控制基础界面的特征和能力的多个图形对象(包括信息项或图标和链接)。如将从本公开理解的,可以修改和更新这些对象(910、920、922、924、930、932、934、942)的数量和布置,并且因此除了图9A的非限制性示例之外,基础界面的其它实施例也是可能的。
如图9A中所示,基础界面包括用于访问设计器界面的图形对象或链接910。通过点击链接910,用户可以打开具有设计器界面的新的窗口或显示器,以创建新的交互模型或编辑现有的交互模型。用户与之相关联的活动交互可以在基础界面的通知字段920中示出。这些字段920中的每个字段可以提供关于活动交互的信息,诸如交互ID或号码922和交互标题或名称924。可以关于交互号码、安排时间等以升序或降序来对通知字段920进行排序。字段920还可以按交互标题或名称924按字母顺序来排序。在一些实施例中,当用户点击字段920中的特定一个字段(例如,字段的任何部分或字段中的播放按钮)时,可以向用户呈现具有播放器界面的新窗口或显示器,用于对应的交互。在一些实施例中,如果用户是交互的所有者或管理员,则点击用于该交互的字段920中的特定一个字段可以使基础界面的更新视图被显示,通过该视图所有者或管理员可以管理该交互(例如,将用户添加到构成或将用户删除;指配角色或修改指配的角色;更新用于交互的安排,包括交互的会话的安排)。
如图9A中进一步所示,基础界面还可以包括用于访问和管理设置(诸如视图设置或用户简档设置)的设置对象930。如以上描述的,可以为基础界面提供各种视图选项或设置,诸如日历视图、组织视图、时间线视图、交互式地图视图或定制视图,以便访问用于管理交易的信息。图9C图示了根据本公开的实施例的用于基础界面或工作室界面的示例交互式地图视图。地图视图可以是可导航的,并且包括一个或更多个场景,每个场景表示交互。场景可以是动画的,具有变化的颜色或要素,和/或被更新以示出通知。当用户将光标悬停在场景上或指向场景时,场景可以用动画、着色和/或通知来作出响应。然后用户可以键入输入并且管理选择的场景或交互。另外,基础界面可以包括用于显示当前用户的简档或图像的简档对象932,该简档对象932可以作为用户简档设置的一部分来调整。此外,可以提供信息标签934以使得用户能够获得与交互系统的基础界面或任何其它方面相关的信息或解决与交互系统的基础界面或任何其它方面相关的问题。例如,通过点击信息标签934,可以更新基础界面以显示事实和/或频繁问题和对应答案的列表。在一些实施例中,可以提供搜索字段以使得用户能够搜索教学视频或文档。附加地或可替代地,可以呈现在线聊天窗口以使得用户能够从现场服务员或聊天机器人通信和接收信息。
在图9A中,基础界面还被示为包括表示一个或更多个模块的对象942。可以列出不同的模块,每个模块具有不同的功能元素集。通过点击对象942中的特定一个对象,用户可以调用对应的模块来执行某些功能或动作,诸如为创建的会话或交互安排和发送个体用户或群组邀请。作为进一步的非限制性示例,对象942中的一个对象可以由用户选择以调用用于准备会话或交互的笔记或指令的模块。此外,例如,可以选择并且执行聊天模块以与基础界面中活动的每个人通信。
图9B图示了根据本公开的实施例的示例工作室界面。如本文所公开的,工作室界面可以与基础界面(包括910、920、922、924、930、932、934、942)共享特征和能力,但是它可以包括附加特征和能力。例如,工作室界面可以支持更多数量的交互。另外,在图9B的示例中,工作室界面使得能够创建和管理子流程960,如下面进一步描述的。通常,工作室界面包括用于访问、管理和/或控制工作室界面的特征和能力的多个图形对象(包括信息项或图标和链接)。如将从本公开理解的,可以修改和更新这些对象(910、920、922、924、930、932、934、942、960、962)的数量和布置,并且因此除了图9B的非限制性示例之外,工作室界面的其它实施例也是可能的。
与基础界面一样,工作室界面包括用于访问设计器界面的图形对象或链接910。通过点击链接910,用户可以打开具有设计器界面的新的窗口或显示器,以创建新的交互模型或编辑现有的交互模型。另外,工作室界面包括用于活动交互的通知字段920。这些字段920中的每个字段可以提供关于活动交互的信息,诸如交互ID或号码922和交互标题或名称924。可以关于交互号码、安排时间等以升序或降序来对通知字段920进行排序。字段920还可以按交互标题或名称924按字母顺序来排序。在一些实施例中,当用户点击字段920中的特定一个字段(例如,字段的任何部分或字段中的播放按钮)时,可以向用户呈现具有播放器界面的新窗口或显示器,用于对应的交互。在一些实施例中,如果用户是交互的所有者或管理员,则点击用于交互的字段920中的特定一个字段可以使工作室界面的更新视图被显示,通过该视图所有者或管理员可以管理该交互(例如,将用户添加到构成或将用户删除;指配角色或修改指配的角色;更新用于交互的安排,包括交互的会话的安排)。
如图9B中进一步所示,工作室界面包括用于活动子流程的通知字段960。可以在字段960中通过ID或号码以及标题或名称来标识子流程。根据本公开的实施例,可以为与交互相关的特定工作或任务建立子流程。每个子流程可以继承父交互的所有模块或功能,但是仅作为父交互的子集。对于每个子流程,可以存在特定的用户构成和指配的角色,并且与子流程相关的工作或任务可以包含交互的一个或更多个会话,或者仅包含交互的会话的一部分。在图9B的示例中,标识出两个子流程;即,群组一和群组二。每个都是标题为阿尔法项目(Alpha Project)的父交互的子流程或子集。与父交互相比,子流程可以具有不同的所有者或管理员以及用户构成(例如,组织、公司或其它实体内的特定群组或部门)。有利地,子流程可以允许管理或控制的分布,这可以有助于大规模交互并且提高生产率。
可以通过工作室界面来管理子流程。例如,通过工作室界面,交互的所有者或管理员可以创建交互的一个或更多个子流程。作为该过程的一部分,可以定义子流程的特定任务或工作,以及子流程的用户构成。另外,对于活动子流程,当用户点击字段960中的特定一个字段(例如,字段的任何部分或字段中的播放按钮)时,可以向用户呈现具有播放器界面的新窗口或显示器,用于对应的子流程。如果用户是子流程的所有者或管理员,则点击该子流程的字段960中的特定一个字段可以使工作室界面的更新视图被显示,所有者或管理员可以通过该更新视图来管理子流程(例如,将用户添加到构成或将用户删除;指配角色或修改指配的角色;更新子流程的安排,等等)。在一些实施例中,可以在设计器界面中执行子流程的创建和编辑,并且通过工作室界面完成对该子流程的管理。
图9B的工作室界面还包括用于访问和管理设置(诸如视图设置或用户简档设置)的设置对象930。例如,通过对象930,用户可以在工作室界面的各种视图选项之间进行选择,诸如日历视图、组织视图、时间线视图、交互式地图视图或定制视图。如以上描述的,图9C图示了根据本公开的实施例的用于基础界面或工作室界面的示例交互式地图视图。另外,显示当前用户的简档或图像的简档对象932可以作为用户简档设置的一部分来调整。与基础界面一样,也可以在工作室界面中提供信息标签934,以使得用户能够获得信息或解决问题。例如,通过点击信息标签934,可以更新工作室界面以显示事实和/或频繁问题和对应答案的列表。在一些实施例中,可以提供搜索字段以使得用户能够搜索教学视频或文档。附加地或可替代地,可以呈现在线聊天窗口以使得用户能够从现场服务员或聊天机器人通信和接收信息。
工作室界面还可以包括用于定义和管理工作室用户的对象962。点击对象962可以引起用于管理工作室用户的工作室界面的更新视图。例如,需要访问工作室界面以管理子流程的用户可以被准许使用对象962进行访问。此外,可以改变访问工作室界面的权限,并且可以通过对象962完成对用户的特定子流程指配。另外,工作室界面可以包括表示一个或更多个模块的一个或更多个对象942。类似于以上描述的用于基础界面的模块,可以列出不同的模块,每个模块具有不同功能元素集。通过点击对象942中的特定一个对象,用户可以调用对应的模块来执行某些功能或动作,诸如为创建的会话或交互安排和发送个体用户或群组邀请。作为进一步的非限制性示例,对象942中的一个对象可以由用户选择以调用用于准备会话或交互的笔记或指令的模块。作为另一示例,可以提供视频模块以使得能够播放视频(诸如教学视频或信息视频)。
图10A至图10C图示了播放器界面的示例实施例和视图。如本文所公开的,播放器界面可以被实现成为提供交互环境,以使用户在交互模型的实例的执行期间生成、交换、访问和查看信息。播放器界面的能力和显示的视图可以取决于指配给与交互相关联的用户的角色。例如,参与者可以使用播放器界面来消费在交互的会话中交换的信息。贡献者还可以通过播放器界面消费信息,但是贡献者还可以生成并且向交互贡献数据。所有者具有贡献者和参与者的权限,但也具有通过播放器界面的附加权限和能力。例如,交易的所有者可以更新或修改用于会话或交互的模块,包括移除、替换或添加模块。通过播放器界面,所有者还能够与模块交互并且控制其配置(例如,使用电子邮件模块向所有参与者发送电子邮件)。播放器界面还可以使所有者能够与其它用户交互并且改变他们的配置(例如,改变用户在模块内或相对于模块指配的角色)。更进一步地,所有者可以使用播放器界面来停止、重新编程或重复交互的会话,或者扩展交互的会话。以上是非限制性示例,并且从本公开将理解,可以在播放器界面中实现其它特征和能力及其组合。
图10A图示了根据本公开的实施例的被实现为图形用户界面的示例播放器界面的列表视图。列表视图被配置为提供列出定义的交互的一个或更多个会话的显示。如本文所公开的,可以使用交互模型对每个交互进行建模。在图10A的示例中,播放器界面包括提供用于交互的信息的信息字段1010,该信息字段1010包括用于交互的名称或标题1020。在信息字段中或附近,还可以在窗口1024中提供用于交互的简短描述或主题图像。在信息字段1010下方,可以示出用于交互的每个安排的会话1030。会话列表视图可以根据会话的顺序和/或安排而按时间次序进行。对于列表中的每个会话1030,可以提供关于会话的信息(例如安排的日期和时间;会话名称或ID;等等)。如果会话列表超出即时屏幕视图,则播放器界面可以被配置为使得用户能够滚动会话列表视图(例如,对于图10A中的示例,向上或向下滚动屏幕视图)。
在一些实施例中,播放器界面还可以显示与跟交互相关联的模块相关的信息。例如,如图10A中所示,为会话中的一个或更多个会话定义的宏模块512可以与会话的列表视图相邻地显示。另外,可以示出在会话中的特定时间或时间段应用的一个或更多个微模块510。为了示出用于会话的定义的微模块510,代表性图形对象可以出现在对应会话的旁边或附近,或者当用户点击或将光标悬停在播放器界面中的显现的会话上时,可以列出或显示微模块510。在一些实施例中,通过点击微模块510或宏模块512,所有者可以交互或控制模块的配置。如以上所讨论的,播放器界面还可以被配置为使得用户能够更新或修改用于会话或交互的模块,包括移除、替换或添加模块。
播放器界面可以包括附加特征和能力。例如,如图10A中所示,提供图形对象1022以使得用户能够导航到管理界面(诸如基础界面或工作室界面)。在一些实施例中,响应于用户点击对象1022,向用户提供包括管理界面的新窗口或显示器。举例来说,播放器界面中的其它特征和能力可以包括用于显示当前用户的简档或图像的简档对象(例如,在图10A的左上角),以及用于调整诸如视图和/或用户简档设置的设置的图形对象(未示出)。作为另外的示例,播放器界面可以包括信息标签(未示出),以使得用户能够获得与交互系统的播放器界面或任何其它方面相关的信息或解决与之相关的问题。
图10B图示了根据本公开的实施例的被实现为图形用户界面的示例播放器界面的透视图。该透视图被配置为提供示出定义的交互的一个或更多个会话相对于时间的显示。在图10B的示例中,播放器界面包括提供用于交互的信息的信息字段1010,该信息字段1010包括用于交互的名称或标题。在信息字段中或附近,还可以提供用于交互的简短描述或主题图像(未示出)。在信息字段1010下方,可以示出用于交互的安排的会话。可以显示与时间、建模顺序和/或时间轴相关的会话。例如,在一些实施例中,指示符可以指示时间轴(例如,今天)上的位置或时间。播放器界面还可以包括关于每个会话的信息,诸如会话名称或ID(例如,会话1;会话2;等等)。如果会话列表超出了即时屏幕视图,则播放器界面可以被配置为使得用户能够滚动会话的列表视图(例如,对于图10B中的示例,向左或向右滚动屏幕视图)。
在一些实施例中,播放器界面还可以显示与跟每个会话相关联的模块相关的信息。例如,如图10B中所示,为会话中的一个或更多个会话定义的宏模块512可以显示在会话透视图以下。另外,透视图可以示出为每个会话定义的一个或更多个微模块510的顺序和/或相对布置。当用户点击或将光标悬停在显示的模块上时,可以通过播放器界面提供关于微模块510或微模块512的详细信息。另外,在一些实施例中,通过点击微模块510或宏模块512,所有者可以交互或控制模块的配置。如以上所讨论的,播放器界面还可以被配置为使得用户能够更新或修改用于会话或交互的模块,包括移除、替换或添加模块。
图10B的播放器界面可以包括附加特征和能力。例如,与图10A中的示例一样,可以提供图形对象1022以使得用户能够导航到管理界面(诸如基础界面或工作室界面)。在一些实施例中,响应于用户点击对象1022,向用户提供包括管理界面的新窗口或显示器。举例来说,可以在图10B的播放器界面中提供的其它特征和能力包括用于显示当前用户的简档或图像的简档对象(例如,在屏幕的左上角中),以及用于调整诸如视图和/或用户简档设置的设置的图形对象(未示出)。作为另外的示例,播放器界面可以包括信息标签(未示出),以使得用户能够获得与交互系统的播放器界面或任何其它方面相关的信息或解决与之相关的问题。
在图10B的示例中,在播放器界面中提供图形对象1042。可以选择该对象来显示或访问关于交互贡献者的信息。也可以通过选择对象1042(即,通过向用户添加或移除贡献者角色指配)来更新或修改指配的贡献者。在一些实施例中,被指配了贡献者角色的用户可以具有访问例如播放器界面的透视图的权限。然而,贡献者访问和使用播放器界面中的某些特征的能力仍然可能受到限制(例如,添加或删除为会话定义的模块)。
图10C图示了根据本公开的实施例的被实现为图形用户界面的示例播放器界面的会话视图。会话视图被配置为显示执行的会话,并且更具体地显示用于用户访问、消费、生成和交换信息的交互环境。利用会话视图,用户可以(例如,作为参与者或贡献者)参与当前会话并消费信息和/或(例如,作为贡献者)向会话贡献数据。如本文所公开的,将从交互的会话收集的所有数据和元数据作为数据构建的一部分来存储。
如图10C中所示,登录并且参与当前会话的用户可以通过具有适当标记(例如,对于每个用户,包括用户照片和/或首字母的气泡或圆圈)的一个或更多个图形对象1060在播放器界面中示出。在主窗口1050中,播放器界面可以呈现用于会话的交互。例如,在会话期间,可以更新主窗口1050以播放视频演示,显示演示文档幻灯片,发送正在说话或进行演示的用户的视频等。图10C中示出了用于交互环境的更新的主窗口1050的示例。
在每个会话期间,可以使用不同的模块1070来管理和控制会话。如本文所公开的,每个模块及其功能元素可以在相对于交互的每个会话的特定时间点或时间段可用。例如,一些模块可以在整个会话中可用,而其它模块可在特定点被触发和执行或在指定时段可用,如交互模型中所定义的。此外,根据本公开,可以存在不同类型的模块来帮助交互和用于构建的数据收集。举例来说,可以提供至少三种类型的模块:微模块、宏模块和元模块。另外,可以提供其它类型的模块,诸如设备模块。设备模块可以支持在每个会话期间使用的不同类型或类别的设备。可以显示表示用于会话的已定义模块的图形对象1070,使得用户可以选择和交互/使用模块来访问、消费、生成和交换信息。
图11图示了根据本公开的实施例的被实现为图形用户界面的示例设计器界面。如本文所公开的,可以提供设计器界面以使得能够设计和生成交互模型。用于交互的每个交互模型可以包括相对于顺序和/或时间轴定义的一个或更多个交互对象和一个或更多个模块。如本文所公开的,每个交互对象可以表示与该交互相关联的用户的构成。另外,每个模块可以包括在交互的一个或更多个会话中可执行的功能元素集。
利用设计器界面,所有者或管理员可以设计和生成用于交互的交互模型,包括交互的开始日期和结束日期,以及交互的会话的安排和顺序。可以通过按顺序和/或相对于时间轴布置模块并且提供它们的开始日期和结束日期来添加会话。如果需要改变或稍后期望改变,则还可以通过设计界面来执行对会话的编辑,包括通过添加或移除模块来进行编辑。可以从存储在数据库中的核心模块集中选择模块,以及通过市场界面选择模块。例如,在设计器界面中,拖放操作、音频/文本命令等可以用于在时间轴上布置模块。所有者或管理员还可以设置配置,诸如将用户指配给会话并且定义元数据结构。在定义了交互模型之后,所有者或管理员可以直接从设计器界面或通过进入播放器界面来执行对应的交互。
再次参考图11,示例设计器界面包括用于生成交互模型的数个图形对象、字段和特征。在设计器界面的顶部处,可以提供一个或更多个字段1124,用于键入交互的细节(例如,标题或名称(诸如“阿尔法项目”)和/或ID或号码)。此外,在设计器界面的顶部,存在用于标识交互模型的所有者或管理员的图形对象1122,以及提供导航到管理界面(诸如基础界面或工作室界面)的链接的图形对象1022。例如,图形对象1112可以包括所有者的照片、图像和/或首字母。所有者的标题或角色还可以用文本(未示出)显示。可以使用文本(例如,用户A管理员、用户B编辑、用户C贡献者)和具有标记的图形对象(例如,照片、图像和/或首字母)将构成中的其它用户呈现在所有者下方。另外,如图11中所示,可以存在图形对象1142,该图形对象用于将附加用户(诸如管理员、贡献者和/或参与者)添加到交互的会话。
设计器界面还可以包括时间轴(在图11中所示的界面的中间垂直延伸),以为每个会话布置模块。从中选择的可用模块可以在设计器界面的右手侧示出。例如,如图11中所示,存在表示可以相对于时间轴布置的微模块1131和宏模块对象1132的一个或更多个对象。此外,存在表示会话1136的对象,以相对于时间轴定义会话。还存在用于链接到市场界面以搜索和选择附加模块的对象1138。
在图11的示例中,一个或更多个微模块1111已经沿着时间轴布置,并且一个或更多个宏模块1112已经被布置为相对于时间轴的分支。还关于包括用于该会话的微模块1121和宏模块1122的时间轴定义了会话1116。表示用户的构成的图形对象1146在时间轴的顶部附近示出,并且在其附近提供对象1148,用于调整或改变交互的用户的构成。
在一些实施例中,使用图形对象1142和/或1146,所有者可以限制或准许用户访问交互模型的已执行实例。所有者还可以使用构成图形对象1148来设置或调整交互的用户的构成。在一些实施例中,用于交互的用户的构成定义了该交互的状态;例如,系统的哪些用户可以访问交互以及每个用户在交互中担当什么角色。
如本文所公开的,可以提供其它类型的界面,诸如构建界面、市场界面和程序界面。与其它界面一样,这些界面中的每个界面还可以被实现为GUI并且呈现在用户设备(例如,板、膝上型计算机、平板等;参见图1A至图1C)上。利用构建界面,用户可以从数据构建中搜索和查看特定数据。来自构建的数据可以以不同的方式呈现。例如,用户可以具有:指示所有交互如何生成数据的全局视图;指示特定交互如何生成数据的交互视图;以及来自特定交互的指示特定会话如何生成数据的会话视图。另外,利用该构建界面,用户可以经由参数(例如,具有其角色的用户和模块元数据,两者都以时间相关性呈现)从全局视图、流程视图和/或会话视图中搜索和查看特定数据。构建界面还可以包括报告特征和与其它用户(例如,组织或其它实体内部或外部的用户)共享数据的能力。
利用市场界面,用户能够搜索、选择、购买和/或下载用于在交互系统中使用的模块。在一些实施例中,系统可以被设计为开放平台,该开放平台被配置为执行来自各种开发者、供应商和其它源的模块(例如,作为软件应用或可编程指令集)。如本文所公开的,可以提供应用程序界面(API)和/或软件开发包(SDK)来帮助开发这些软件应用或程序,并且使得能够在系统内顺利执行。利用市场界面,用户可以从开发者和供应商搜索、购买和/或加载和购买模块。例如,用户可以使用市场界面中的关键字搜索来识别模块。还可以通过市场界面来提供每个识别的模块的细节(例如,描述、功能、如何配置)。一些模块可供购买,而其它模块免费可用或作为共享软件。所有被选择和购买的模块可以通过市场界面被添加到模块数据库(参见图8中的数据库841)。市场界面还可以提供其它特征和能力,诸如提供对模块的当前和进一步版本的更新、智能模块搜索和比较工具、推广或推荐模块等等。应当理解,这些是非限制性示例,并且可以在市场界面中提供其它特征和能力。
作为另外的示例,可以实现程序界面以允许对模块进行编程。例如,一些模块可以具有可编程参数或功能,以允许针对特定使用情况或交互来定制模块。通过程序界面,诸如交互的所有者的用户可以根据交互的需要对模块进行编程。举例来说,程序界面可以使得用户能够查看模块的可编程参数或功能的列表,并且然后通过一个或更多个用户输入来设置这些参数(例如,具有数据值或状态)或功能(例如,启用或禁用特定的功能元素集)。在一些实施例中,利用API,程序界面可以使得用户能够在代码级或通过视觉编程操作对模块进行编程。
在又一些实施例中,API可以允许其它应用或程序与模块的数据和进程进行交互。因此,可以实现根据本公开的系统以允许软件应用有能力使用GUI使能的程序界面来做用户可以做的任何事情。例如,如果公司或其它实体想要实现与用于开发软件的敏捷过程相匹配的交互(例如,使用所谓的“冲刺(sprints)”,其中开发团队创建了从开始到结束的特定的一组产品能力),则可以创建Jira集成应用,以在当前冲刺中进行新的议题或改变时自动更新这些交互。有利地,该方法允许根据需要自动更新和缩放模块,而无需用户输入或手动编程。
应该理解,本文公开的任何界面可以被配置为接收一种或多种不同形式的用户输入。例如,用户输入可以作为以下各项中的一项或多项来接收:使用小键盘或键盘的输入;使用鼠标或触摸板的输入;对GUI上显示的图形对象的操纵(例如,通过触摸屏上的触觉输入);通过麦克风接收的语音命令;和/或通过运动捕获设备(诸如具有加速度计的控制器或具有用于检测运动命令的图像处理能力的图像捕获设备)接收的运动或手势命令。另外,计算设备、增强环境和/或虚拟环境可以设置有用于接收任何用户输入的检测器或传感器。应当理解,这些是非限制性示例,并且根据本公开的实施例,界面可以接受其它形式的用户输入。
图12图示了根据本公开的实施例的示例交互系统1200及其部件的布置。系统1200可以实现本公开的方法和特征,包括:界面的提供和执行;交互模型的设计和生成;用户的构成和角色指配;提供数据以实例化每个交互模型;交互模型的安排和执行;模块的触发和执行;交互的控制和管理;数据和元数据的收集和存储;从数据构建中搜索和访问数据;构建视图的生成和数据的报告。应当理解,这些是非限制性示例,并且根据本公开的实施例,可以使用系统1200来实现其它特征和能力。
系统1200可以是具有硬件、软件和固件的任何合适的组合的计算机实现的系统。图示的部件可以利用包括一个或更多个处理器和可编程指令的计算设备或系统来实现。计算设备的示例包括计算机、服务器、云存储系统和数据库系统。如图12中所示和本文所描述的,部件可以物理上和/或逻辑上彼此通信。如将理解的,通信网络(公共和/或私有)、总线结构和数据连接(套接字)可以用于此目的。用户设备(未示出)还可以联网到具有安全特征(密码/登录功能;认证/角色管理;防火墙;等等)的系统1200以发送和接收数据。从本公开还可以理解,图12中的部件的数量和布置是为了说明的目的而提供的,并且可以被修改。因此,例如,图12的部件可以被组合成一起工作和运行的多个子系统。附加地或可替代地,可以增加、减少或简化部件的数量。
如图12中图示的,系统1200包括数个部件,包括:媒体服务器1260,该媒体服务器1260用于接收/管理/处理输入媒体数据(例如,在交互模型执行期间流式传输的视频、音频或事件等);媒体存储器1261,该媒体存储器1261用于存储来自媒体服务器1260的输入媒体数据;应用服务器1240,该应用服务器用于执行应用并且接收/管理/处理执行的应用相关数据(例如,与在执行期间使用的简档、配置、交互模型等相关的数据,以及接收/管理/处理在交互模型执行期间由用户贡献的信息或数据,诸如文档、演示、照片、笔记、媒体数据等);数据管理系统1290,该数据管理系统1290用于管理数据;应用存储器1241,该应用存储器1241用于存储来自应用服务器1240的输入应用数据;以及信息或数据存储器1251,该信息或数据存储器1251用于存储从应用服务器1240接收的用户贡献的信息或数据。逻辑上,一些部件可以支持或辅助数据输入源1205,而其它部件可以涉及应用程序和/或数据存储器1207的执行。
在一些实施例中,媒体服务器1260和/或媒体存储器1261为一个或更多个界面提供数据。系统1200的其它部件(诸如应用服务器1240和构建服务器1280)也可以与界面通信并且向其提供数据。数据可以用于生成GUI,以及界面的其它特征和功能(例如,控制、管理和/或通信)。本文中描述了示例界面,包括设计器界面、播放器界面、管理(基础或工作室)界面和构建界面。参见例如参考图8描述的示例管理界面和播放器界面;参考图9A至图9C描述的示例基础界面和工作室界面;参考图10A至图10C描述的示例播放器界面;以及参考图11描述的示例设计界面。以上还描述了构建界面的示例特征和功能。在一些实施例中,管理界面、播放器界面和/或构建界面可以与系统1200的部件通信以访问和接收数据以及提供和存储数据。
包括所有界面和模块的所有应用可以由应用服务器执行并在其上运行。
使用系统1200,数据从输入源1205在平台内移动。如图12中所示,存在三个主要输入源1205:流式传输的数据、用户贡献数据和应用数据。包括简档、配置和交互模型的应用数据可以作为设计和生成交互模型的过程的一部分来生成和提供,该交互模型包括用户构成数据和执行交互模型的角色指配。如本文所公开的,可以使用例如设计器界面和管理界面来生成和提供该数据。在交互模型的执行期间,可以生成和交换用户贡献的数据,包括文档、演示、照片、笔记、媒体数据等。如本文所公开的,可以使用例如播放器界面和一个或更多个模块来生成和提供该数据。还可以在交互模型的执行期间生成和提供包括视频、音频和现场事件等的流式传输的数据。如本文所公开的,可以使用例如播放器界面和一个或更多个模块来生成和提供该数据。
来自输入源1205的数据由应用处理和路由,以便被归档和存储1207供以后在构建视图中使用。如本文所公开的,可以提供构建界面以便于从构建服务器1280搜索和检索构建中的数据。另外,根据本公开,可以存储元数据以帮助在数据构建中搜索数据。元数据可以与数据构建一起存储在数据库中,或者单独存储在另一数据库或计算机可读介质中(例如,由数据管理系统1290管理)。
在一些实施例中,来自输入源1205的数据由数据管理系统1290处理和管理,该数据管理系统1290将数据存储在其相应的存储容器或位置(例如,媒体存储器1261、数据存储器1251和应用存储器1241)中。举例来说,数据可以存储为二进制数据,例如存储为二进制大对象(BLOB)。当存储输入媒体和其它数据时,这种数据管理方法是有用的,因为它可以为每种数据类型提供单个存储容器或位置,并且帮助提供与各种应用和界面的兼容性。
在一些实施例中,数据管理系统1290被配置为管理输入数据并且通过使用指向输入数据的存储位置的指针来跟踪存储位置。例如,可以使用BLOB标识符(取决于所使用的BLOB存储器的类型)或其它形式的指针。作为另外的示例,可以存储元数据,该元数据包括标识来自输入源1205的数据的存储位置的指针或其它信息。
数据管理系统1290可以被配置为形成持久层或数据访问层。另外,数据管理系统1290可以被配置为存储和管理与来自输入源1205的数据相关联的元数据。在一些实施例中,元数据标识数据的情境信息,并且在为每个会话执行交互模型的模块时由所述模块生成和提供。另外,在一些实施例中,关系数据库系统可以用于实现媒体存储器1261、数据存储器1251和应用存储器1241中的一个或更多个。
在一些实施例中,数据管理系统129可以使用持久层或数据访问层作为中间层来管理(例如,存储、检索和/或获取)过去或现在与交互系统1200相关联的不同类型、格式和/或源的数据。有利地,这可能使得界面不必绑定到特定数据类型或格式或源。通过形成持久层或数据访问层,数据管理系统1290还可以使得例如构建服务器1280能够为一个或更多个界面(诸如构建界面)提供数据。
在一些实施例中,构建界面可以使用由数据管理系统1290管理或从其提供的元数据来访问存储的输入数据并且识别情境和相关数据。如本文所公开的,构建界面可以被配置为提供不同的报告和/或视图。例如,使用元数据、构建界面可以提供关于概括所有登录用户的顺序和/或时间轴的报告、有效的微模块和宏模块(即,活动状态),和/或已发生的、当前正发生的或被安排发生的交互模型。
根据本公开的实施例,模块可以在其代码中指定实体,并且构建服务器1280和/或数据管理系统1290将加载这些声明性实体并且将其转换为可执行数据库查询。这种布置是灵活的,并且将管理数据库模式或结构的职责转移到模块。为了避免冲突,可以围绕每个模块创建由模块的供应商或开发者的名称和模块的名称组成的名称空间。该方法在模块储存库中是有效的,因为每个模块将包括供应商/开发者名称和模块名称的唯一组合。另外,可以为每个交互模型维护数据库模式的所有改变的记录或图形表示。这可以被实现为在任何情况下维护所有安装的模块的改变记录。如果两个操作相同,则将在图形中创建圈。然后可以减小图形以消除任何圈,从而消除冗余操作。作为迁移过程的一部分,这可以在每次对模式有改变时进行。因此,维护了数据库模式并且避免了冲突或冗余。有利地,该方法还通过提供用于管理数据库方案并且避免数据冲突和重叠的有效技术方案来支持具有由多个供应商/开发者提供的模块的开放系统平台。
如本文所公开的,数据构建可以存储在结构化数据库(例如,SQL或CQL数据库)中。另外,根据本公开的方面,定义数据库的模式的主要职责可以转移到模块。例如,每个模块可以定义该模式的块,并且构建服务器1280和/或数据管理系统1290可以使用这些块来组建随后用于检索和存储数据的完整模式。该方法还可以用于由模块生成的元数据。在一些实施例中,每个模块可以访问完整模式(授权和访问管理仍然适用)。例如,聊天模块可以访问由文件模块存储的文档的数据和/或元数据,而它们之间没有任何链接。作为协调过程的一部分,可以在每次应用启动时生成模式。添加新模块之后,系统将重启。可以设置预重启条件以确保对任何交互没有中断。当协调开始时,新模块将是新模式的一部分。如本文所公开的,模块可以声明它们所依赖于的其它模块。例如,聊天模块可以依赖于文件模块。因此,在交互模型的设计或开发阶段期间加载聊天模块时,文件模块将被启动并且模式将被协调。
因此,文件模块可以在聊天模块内部使用。每当在交互模型的设计期间在系统中安装模块时,应用将验证该模块的依赖关系。如果依赖关系不满足,则可以显示警告以帮助用户安装任何丢失的模块。这些技术可以避免数据依赖性问题并且还降低系统的整体复杂度。另外,该解决方案是有利的,因为它允许开放系统平台,该开放系统平台具有从众多供应商/开发者(即,模块的市场)通过由每个交互模型中的模块管理的数据库模式、而不是由系统集中管理的模式(该模式可能限制依赖关系和/或引起数据冲突和重叠)提供的模块。
再次参考图12,应用和/或数据存储部件1207可以被实现为单个系统或分布式系统。在一些实施例中,应用和/或数据存储部件1207可以利用基于云的平台来实现,其中应用和存储部件在一个或更多个云服务器上执行。从本公开将理解,这些是非限制性示例,并且可以提供其他架构和布置来实现这些部件(例如,联网的分布式服务和/或客户端-服务器架构)。
图13图示了根据本公开的实施例的包括服务器和客户端部件的另一示例系统1300。系统1300可以实现本公开的方法和特征。如下面进一步描述的,图13的客户端-服务器布置包括交互应用服务器1340(“app服务器”)和交互应用客户端1310(“app客户端”)。app服务器1340和app客户端1310可以经由网络1390(例如,有线和/或无线通信网络的任何组合,其可以是公共的或私有的)彼此通信。如图13中所示,app服务器1340和app客户端1310包括多个部件,并且该客户端服务器布置可以用于实现任何类型的模块(例如,微模块、宏模块、元模块等)。如本文所公开的,模块可以用于定义交互模型,并且每个模块可以包括可执行功能元素集,可执行功能元素集是可编程的,因此是高度可定制的、可适应的和可缩放的。在图13的示例实施例中,模块被分成两个部件:可以在用户浏览器或设备内部与app客户端1310交互的客户端代码(即,模块客户端1360);以及与app服务器1340交互的服务器代码(即,模块服务器1380)。以下进一步描述这些和其它特征。
app服务器1340可以在一个或更多个服务器上运行,并且如以上描述的,可以包括数个部件。当执行交互模型时,app服务器1340可以适于处理包括现场事件1347(例如,当前正在发生的现场会话)或其它事件的数据。app服务器1340还能够处理其它数据,诸如由一个或更多个模块生成的元数据或搜索参数以及对构建物中的数据的请求。如图13中图示的,app服务器140包括用于数据库、存储器、用户认证、元数据和/或用于插入模块或功能元素的套接字的API。app服务器1340还包括在执行每个交互模型时控制和管理该处理和数据交换的编排器或内核1345。在一些实施例中,例如,内核1345管理模型执行和资源管理的调度。因此,编排器或内核1345负责在正确的时间加载和卸载模块,并且负责服务器端的正确事件。
app客户端1310可以被实现为在每个用户设备上运行的本地客户端(例如,使用web浏览器或安装在用户设备上的应用)。当执行交互模型时,app客户端1310可以适于处理数据,包括用于安装或提供界面(例如,播放器界面、设计器界面、构建界面和/或管理界面)。另外,来自SDK的API可以被提供用于布局、GUI、流式传输、视频、音频、设备管理和/或用于插入设备、模块或功能元素的套接字。另外,app客户端1310可以包括编排器1350,该编排器1350在执行每个交互模型时控制和管理数据的处理和交换。在一些实施例中,编排器1350管理例如模型执行和资源管理的调度。因此,编排器或内核1350负责在正确的时间加载和卸载模块,并且负责客户端的正确事件。
如以上描述的,在图13的示例实施例中,模块被分成两个部件:可以在用户浏览器或设备内部与app客户端1310交互的客户端代码(即,模块客户端1360);以及与app服务器1340交互的服务器代码(即,模块服务器1380)。模块客户端1360可以由编排器1350管理。例如,编排器1350可以控制如何和何时在显示屏上呈现模块或与用户交互。编排器1350还可以交换当前的微模块(例如,基于交互模型),并且控制和/或改变用于交互的活动功能元素(例如,定义规则或条件)。编排器1350可以将其指令基于由设计器界面以及其它界面和/或模块生成的元数据。当模块客户端1360将要在显示屏上呈现图形对象或其它内容时,它可能基于它被安装的位置而受到影响。
例如,模块可以安装在播放器界面、管理界面、设计器界面或构建界面中。在图13中,示出了三个示例安装件:玩家安装件1321、设计安装件1323和构建安装件1330。在一些实施例中,所呈现的内容可能基于安装的界面而受到影响和不同。此外,模块客户端不仅可以看起来不同,而且可以基于该模块客户端被使用的位置而不同地动作。
模块客户端1360可以使用布局API将信息呈现在显示屏幕上,该布局API被配置为了解屏幕“布局”以及将由每个模块呈现的内容放置的位置。在活动时,每个模块客户端1360可以访问并且使用来自SDK的其它API来与交互模型进行交互。例如,模块客户端可以使用流式传输API(例如,用于视频、音频和/或会话记录)、设备API、套接字API、编排器API、认证器API、存储器API、持久性API等。可用API的列表可以随时间改变(例如,通过下载更多API或更新现有API)。例如,在新发布交互模型时,可用API的列表也可以被更新。
在交互模型的执行期间生成的数据可以是非常有用的和提供有用信息的。通过使用控制或管理数据库结构或模式的模块,交互模型生态系统能够捕获并且存储尽可能多的数据,并且然后使用生成的元数据(例如,基于数据库模式)以情境结构化的方式检索并且提供(例如,显示)捕获/存储的数据。
图14图示了根据本公开的实施例的不同的用户构成的示例。如本文所公开的,本公开的系统和方法可以用于生成和执行用于交互的交互模型。对于每个交互模型,可以为一个或更多个会话标识至少一种用户的构成,并且可以向构成中的每个用户指配特定角色(例如,所有者、管理员、贡献者、参与者等等)。用户可以在不同的交互中具有不同的角色,并且他们的角色可以在不同的组织和群组之间不同。
图14的示例图示了不同的用户构成及其各自的角色指配。在该示例中,示出了多个(m个)不同的组织(ORG I、ORG II……ORG M)。每个组织具有不同组的用户。例如,如图14中所图示的,用户O1U1-O1Un是组织ORG I的一部分,用户O2U1-O2Un是组织ORG II的一部分,依此类推,包括组织ORG M的用户OmU1-OmUn。在该示例中,还示出了两种交互(流程1和流程2)。用于这些交互的用户的构成可以包括来自不同组织的用户(即,与拥有和管理交互的组织相比,来自外部组织的“宾客用户”),并且用户可以在不同交互上具有不同角色。在一些实施例中,可以给予宾客用户受限的权限(即,仅参与者角色)。附加地或可替代地,宾客用户可以被指配具有任何级别的权限(即,从所有者到参与者)的角色。
下表总结了图14中两种交互的角色指配:
表3:用户在不同交互中的角色指配
Figure BDA0004129725070000541
Figure BDA0004129725070000551
在上表中,流程2中带星号的用户是“宾客用户”(即,来自组织ORG II的用户)。另外,一些用户在两种交互中具有不同的角色。例如,在流程1中,用户O2U1是所有者,而在流程2中,用户O2U1是贡献者。
当执行用于流程1的交互模型时,仅ORG II的用户参与交互。也就是说,在为流程1定义的用户的构成中不存在来自ORG I或任何其它组织的宾客用户。
当执行用于流程2的交互模型时,两个组织ORG I和ORG II的用户是定义的用户的构成的一部分。在该示例中,宾客用户来自ORG II,包括指配了贡献者角色的用户O2U1,并且每个用户O2U3、O2U3……O2U8被指配参与者角色。
图15是图示根据本公开的实施例的用于生成交互模型的示例方法的流程图。如本文所公开的,可以使用诸如设计器界面的界面来生成交互模型。图15的方法可以利用本文中公开的示例系统(参见例如图8、图12和图13)来实现。根据图15的方法的交互模型可以提供用于控制交互的模型。交互可以包括在针对常用情境交换数据的用户之间的多个会话。
如图15中所示,在步骤1520中,提供设计器界面。可以在用户设备的计算机实现的显示器上提供诸如图11中公开的GUI示例的设计器界面。对设计器界面的访问可以被限制于作为交互的所有者或管理员的用户。如本文所公开的,设计器界面可以包括数个工具和特征,以使得所有者或管理员能够定义和生成交互模型。交互模型可以包括按顺序和/或相对于时间轴布置的一个或更多个交互对象和一个或更多个模块。
再次参考图15,在步骤1540中,响应于第一用户输入,相对于在设计器界面中显示的时间轴布置一个或更多个交互对象。如本文所公开的,每个交互对象可以表示与该交互相关联的用户的构成。设计器界面的第一用户输入可以包括任何数量和类型的用户输入。例如,基于键盘或鼠标的输入;拖放操作;基于触摸的输入(例如,使用用户设备的触摸屏);基于语音识别的输入(例如,通过接收音频,并且对接收到的音频执行语音识别);以及基于运动捕获的输入(例如,通过捕获运动中的用户的图像并且执行运动捕获过程,或通过使用能够检测运动/加速度的控制器)。第一用户输入的其它示例包括利用VR或AR设备创建的输入。
在步骤1560中,响应于第二用户输入,相对于在设计器界面中显示的时间轴布置一个或更多个模块。如本文所公开的,一个或更多个模块中的每个模块表示在交互的多个会话中的一个或更多个会话中或在交互的多个会话中的一个或更多个会话期间可执行的功能元素集。通过执行这些功能元素,用户能够使用各种功能(例如,生成数据,保存数据,访问和检索数据,记录会话等等)。与第一用户输入类似,第二用户输入可以包括任何数量和类型的用户输入。例如,基于键盘或鼠标的输入;拖放操作;基于触摸的输入;基于语音识别的输入;以及基于运动捕获的输入。第二用户输入的其它示例包括利用VR或AR设备创建的输入。
在步骤1580中,表示交互模型的数据被存储在计算机可读介质中(例如,在本地设备、服务器或云系统上)。表示交互模型的存储的数据包括表示相对于时间轴布置的一个或更多个交互对象和一个或更多个模块的布置的数据等等。
在一些实施例中,该方法进一步包括:响应于第三用户输入(例如,基于键盘或鼠标的输入;拖放操作;基于触摸的输入;基于语音识别的输入;基于运动的输入;等等),识别与每个交互对象的构成相关联的用户和指配给每种构成中的用户的角色。可以在设计器界面或诸如管理界面的另一界面中进行第三用户输入。另外,该方法可以包括在计算机可读介质中存储识别的用户和角色作为交互模型的一部分。
如本文所公开的,可指配给每种构成中的用户的角色可以包括所有者、贡献者、协作者和/或参与者。每个角色定义了构成中的用户的权限。另外,模块中的一个或更多个模块可以包括被配置为取决于指配的角色的功能元素集。例如,当执行特定模块的功能元素时,提供给用户的该执行的结果输出或操作可以取决于指配给该特定用户的角色而变化。举例来说,取决于指配给用户的角色,可以向该用户显示不同的信息或指令。作为另外的示例,投票模块可以控制哪些用户可以基于其指配的角色对特定项进行投票。也可以基于每个用户的指配的角色来限制对某些文档或文件的访问。
在一些实施例中,该方法还可以包括存储用于交互模型的元数据。元数据可以包括用于存储在构建中的数据的情境信息。元数据还可以包括用于标识作为数据构建的一部分的数据的存储位置的信息。在一些实施例中,该方法还包括利用模块中的一个或更多个模块的功能元素生成元数据的至少一部分。
在一些实施例中,该方法包括通过以下操作生成交互模型:在设计器界面中的时间轴上布置并且显示表示在特定时间点或时间段可用的功能元素集的第一类型的模块(例如,微模块);进一步布置并且显示表示在交互的一个或更多个会话的整个会话期间可用的功能元素集的第二类型的模块(例如,宏模块),作为来自设计器界面中的时间轴的分支;以及提供表示用于提供元环境的功能元素集的第三类型的模块(例如,元模块)作为交互模型的一部分,其中所述元环境实现与外部环境的数据通信。
图16是图示根据本公开的实施例的用于控制包括多个会话的交互的示例方法的流程图。如本文所公开的,可以通过执行交互模型来控制和管理交互。图16的方法可以利用本文中公开的示例系统(参见例如图8、图12和图13)来实现。交互可以包括在针对常用情境交换数据的用户之间的多个会话。用户可以经由他们各自的用户设备并且通过实现交互环境的播放器界面来加入和参与会话。
如图16中所示,在步骤1620中,提供用于控制交互的交互模型。交互模型可以存储在计算机可读介质中,并且包括表示相对于时间轴布置的一个或更多个交互对象和一个或更多个模块的数据等等。每个交互对象可以表示与交互相关联的用户的构成,并且每个模块可以包括在交互的会话中的一个或更多个会话中可执行的功能元素集。
在步骤1640中,在每个用户设备的计算机实现的显示器上提供播放器界面。可以在每个用户设备的计算机实现的显示器上提供诸如图1和图10中公开的GUI示例的播放器界面。播放器界面可以包括使得用户能够参与每个会话的工具和特征。如本文所公开的,例如,播放器界面可以适于提供交互环境以供用户在交互的每个会话期间交换数据。在交互环境中,播放器界面还可以提供具有图形对象的议程,这些图形对象是用户可选择的以执行交互模型中的模块中的一个或更多个模块的功能元素。还可以通过播放器界面,例如通过显示进度指示符或进度条或通过突出显示议程中的项来示出会话相对于议程的进度。
再次参考图16,在步骤1660中,利用至少一个处理器执行所提供的交互模型的实例,以控制交互的每个会话中的用户之间的数据交换。如本文所公开的,在交互模型的执行期间,可以响应于交互模型的执行来更新由播放器界面显示的交互环境。在一些实施例中,播放器界面的交互环境可以响应于交互模型的模块中的一个或更多个模块的执行而被更新。
如上所述,在播放器界面中,构成中的用户可以查看每个会话的议程以及每个会话相对于议程的进度。此外,构成中的用户可以使用交互模型的一个或更多个模块通过播放器界面的交互环境交换数据。此外,可以更新播放器界面的交互环境,以在交互模型的执行期间向用户呈现提示和/或指令。
在一些实施例中,利用设计器界面或管理界面,可以识别构成的用户以及指配给每个用户的角色。可指配给用户的角色可以包括例如所有者、管理员、贡献者和参与者。如本文所公开的,每个角色可以定义构成中的用户的权限。
图16的示例方法还可以包括基于指配给每个用户的角色来更新每个用户设备上的播放器界面的显示以呈现信息。另外,该方法可以包括利用至少一个处理器根据指配给构成中的用户的角色来控制用户的权限。权限可以包括关于交互的可用功能、许可、访问级别、能力和职责中的一者或更多者。为了控制用户的权限,可以利用基于许可的认证部件。
更进一步地,图16的示例方法可以包括取决于指配给用户的角色来应用至少一个模块的功能元素。附加地或可替代地,该方法可以包括将用于交互的数据构建存储在数据库中,该数据构建包括在交互的会话中交换的数据。另外,作为该方法的一部分,可以存储元数据,该元数据提供用于数据构建中的数据的情境信息。
图17是图示根据本公开的实施例的用于控制包括多个会话的交互的示例方法的流程图。图17的方法可以利用图12中公开的示例系统来实现。根据权利要求17所述的方法使用数个部件,包括数据管理服务器、构建服务器和应用服务。从本公开可以理解,这些部件是非限制性示例,并且图17的方法可以利用其它部件和系统(诸如参考图8和图13描述的那些)来修改和实现。
在步骤1720中,提供数据管理服务器。数据管理服务器可以被配置为形成持久层并且管理与多个交互模型相关联的数据。数据管理服务器还可以被配置为提供用于访问与交互模型相关联的数据的元数据。图17的数据管理服务器和其它部件(构建服务器和应用服务器)可以是本地化的或分布式的(例如,在客户端服务器布置或云系统中)。
再次参考图17,在步骤1740中,提供了构建服务器。构建服务器可以被配置为使用数据管理服务器的持久层来存储和提供与每个交互模型的已执行实例相关联的数据。如本文所公开的,每个交互模型可以包括表示一个或更多个交互对象和一个或更多个模块的数据。每个交互对象可以表示与交互相关联的用户的构成。每个模块可以包括在交互的一个或更多个会话中可执行的功能元素集。
在步骤1760中,提供应用服务器。应用服务器可以被配置为执行交互模型的实例。可以为交互执行每个交互模型,并且每个交互模型包括多个会话。如本文所公开的,每个会话可以包括针对常用情境交换数据的用户的构成。应用服务器还可以被配置为处理来自数据管理服务器的元数据。元数据可以包括用于访问由数据管理服务器管理的数据的位置信息。
来自应用服务器的应用数据可以存储在第一数据库中,并且来自媒体服务器的媒体数据可以存储在第二数据库中。应用数据可以包括构成数据。举例来说,构成数据可以包括用于标识与每个交互对象的构成相关联的用户和指配给构成中的每个用户的角色的数据。
图17的方法还可以包括用应用服务器控制用户的权限。例如,应用服务器可以根据指配给用户的角色来控制构成中的用户的权限。用户的权限可以包括关于交互的许可、访问级别、能力和职责等。
模块中的一个或更多个模块的功能元素集可以包括被配置为取决于指配给构成中的用户的角色的功能元素。此外,交互模型的一个或更多个模块包括以下各项中的一项或多项:第一类型的模块,包括在特定时间点或时间段可用的功能元素集;第二类型的模块,包括在交互的一个或更多个会话的整个会话期间可用的功能元素集;以及第三类型的模块,包括用于提供元环境的功能元素集,该元环境实现与外部环境的数据通信。模块类型的示例包括微模块、宏模块和元模块。
如本文所公开的,用户设备可以使得用户能够在交互的一个或更多个会话中生成和交换数据。用户设备的示例包括智能板、计算机、膝上型计算机、平板计算机、VR设备、AR设备和头戴式设备。本文中公开了用户设备的另外的示例(参见例如图1)。
图18图示了根据本公开的实施例的示例交互模型1800,该示例交互模型包括具有一系列模块的已定义会话1820和用于管理会话中的模块的议程模块1805。如本文所公开的,可以使用设计器界面来生成交互模型。当设计用于交互或流程的交互模型时,用户可以选择相对于时间轴1890布置的多个图形对象(表示交互对象和多个模块等)。图形对象在设计器界面中的布置可以通过多个用户输入(例如,拖放操作、文本命令、语音命令、运动命令等)来完成。图18的示例图示了当设计交互模型时,界面模型1800的图形对象的布置可以如何在设计器界面中显现给用户。本文参考图11描述了包括其工具和功能的示例设计器界面。
在图18中,交互模型1800包括多个不同类型的模块(例如,微模块和宏模块)。另外,交互模型1800包括已定义会话1820。如将从本公开理解的,可以存在用于交互模型的其它已定义会话(未示出)。当在设计器界面中设计交互模型1800时,用户可以首先选择和布置宏模块(例如,记录模块(1)和聊天模块(2))作为从时间轴的分支。这些宏模块将在每个会话中可用。用户还可以设置在整个交互中可用的其它模块,诸如元模块和/或设备模块(未示出)。另外,用户可以沿着时间轴选择和布置一个或更多个微模块(例如,视频模块(3)和文档模块(4))。如交互模型1800中所定义的,这些微模块将在特定点或时间被触发并且可用。
当设计交互模型1800时,用户还可以定义一个或更多个会话。可以通过设计器界面定义每个会话,包括将成为该会话的一部分的模块和会话的定时或安排。在图18的示例中,定义了会话(5)。已定义会话1820可以被安排在特定的日期和时间。此外,可以为该会话定义用户的构成(未示出)。用户还可以沿着时间轴为已定义会话1820选择和布置一系列微模块(8-12)。在图18的示例中,选择的微模块包括会议配置1模块、幻灯片模块、会议配置2模块、投票模块和会议纪要模块。如交互模型1800中所定义的,这些微模块将在特定点或时间处按顺序被触发或可用。对于已定义会话1820,用户还可以选择和布置在该会话期间可用和使用的一个或更多个宏模块。例如,如图18中所示,用户可以识别议程模块(6)和笔记模块(7)。议程模块可以包括用于管理会话和会话中的微模块的功能元素。例如,议程模块可以允许用户改变模块的名称(例如“会议配置1”或“会议配置2”)并且设置其它期望的参数或构成数据。这些设置可以被存储为用于实现和执行交互模型1800的数据的一部分。
如本文所公开的,模块相对于时间轴1890的布置定义了这些模块何时可用或被触发用于执行。另外,模块(诸如已定义会话1820中的模块(8)-(12))的顺序和名称可以用于生成会话议程。使用交互模型的数据,可以为每个会话自动生成议程,并且将其显示在播放器界面中,以向用户通知计划的会话活动,并且在执行会话时管理和引导该会话。另外,议程可以包括可由用户选择以实现或执行模块(例如,投票模块、会议纪要模块等)的图形对象。出于说明的目的呈现了本公开。它不是详尽的,并且不限于所公开的精确形式或实施例。考虑到说明书和所公开的实施例的实践,实施例的修改和改变将是明显的。例如,描述的实现包括硬件,但是根据本公开的系统和方法可以利用硬件和软件来实现。另外,虽然某些部件被描述为彼此耦合或彼此布置,但是这些部件可以彼此集成或以任何合适的方式分布。
此外,虽然本文已经描述了说明性实施例,但是范围包括具有基于本公开的等同元件、修改、省略、组合(例如,跨各种实施例的各方面的组合)、改变和/或变更的任何和所有实施例。权利要求中的要素将基于权利要求中所采用的语言被宽泛地解释,并且不限于本说明书中或在本申请的审查期间所描述的示例,这些示例将被解释为非排他性的。另外,可以以任何方式修改所公开的方法的步骤,包括对步骤进行重新排序和/或插入或删除步骤。
根据详细的说明书,本公开的特征和优点是明显的,因此,所附权利要求旨在覆盖落入本公开的真实精神和范围内的所有系统和方法。如本文中所使用的,不定冠词“一”和“一个”意指“一个或更多个”。类似地,复数术语的使用不一定表示复数,除非其在给定上下文中是明确的。诸如“和”或“或”的词语是指“和/或”,除非另外特别指出。另外,由于通过研究本公开内容将容易地发生许多修改和变化,因此不期望将本公开内容限制于所图示和描述的确切构造和操作,并且因此,可以采取落在本公开内容的范围内的所有合适的修改和等同物。
考虑到说明书和本文所公开的实施例的实践,其它实施例将是明显的。说明书和示例仅旨在被认为是示例,所公开的实施例的真实范围和精神由所附权利要求来指示。
根据一些实施例,本文描述的操作、特征、方法和/或技术可以通过硬件、固件和软件的任何合适的组合来实现。举例来说,本文中所公开的设备、部件和系统可以包括一个或更多个硬件处理器,该一个或更多个硬件处理器被编程为根据固件、存储器、其它存储装置或其组合中的程序指令来执行本公开的这些操作、特征、方法和/或技术。另外,本文所公开的用户设备可以将定制硬连线逻辑、ASIC或FPGA与定制编程组合以实现本公开的操作、特征、方法和/或技术。此外,公开的设备、部件和系统通常可以由操作系统软件来控制和协调,诸如iOS、Android、Blackberry、Chrome OS、Windows XP、Windows Vista、Windows 7、Windows 8、Windows服务器、Windows CE、Unix、Linux、SunOS、Solaris、VxWorks或其它可兼容的操作系统。在其它实施例中,计算设备、部件和系统可以由专有操作系统控制。操作系统可以控制和调度用于执行的计算机过程,执行存储器管理,提供文件系统、联网、I/O服务,并且提供诸如图形用户界面(“GUI”)等用户界面功能。
此外,虽然所公开的实施例的各方面被描述为与存储在存储器和其它有形计算机可读存储介质中的数据相关联,但是本领域的技术人员将理解,这些方面也可以存储在许多类型的有形计算机可读介质(诸如辅助存储设备,如硬盘、CD-ROM或其它形式的RAM或ROM)上并且从其执行。相应地,所公开的实施例不限于以上描述的示例,而是由所附权利要求根据其等同物的全部范围来限定。
此外,虽然本文已经描述了说明性实施例,但是范围包括基于本公开内容具有等同要素、修改、省略、组合(例如,跨各种实施例的各方面的组合)改变或变更的任何和所有实施例。权利要求中的要素将基于权利要求中所采用的语言被宽泛地解释,并且不限于本说明书中或在本申请的审查期间所描述的示例,这些示例将被解释为非排他性的。另外,可以以任何方式修改所公开的方法的步骤,包括对步骤进行重新排序或插入或删除步骤。
因此,说明书和示例仅被认为是示例,真正的范围和精神由所附权利要求及其等同物的全部范围来指示。
在以下条款中概述了根据本公开的实施例的进一步的特征:
1.一种生成交互模型的计算机实现的方法,所述交互模型提供用于控制交互的模型,所述交互包括针对常用情境交换数据的用户之间的多个会话,所述方法包括:
在计算机实现的显示器上提供适于基于多个用户输入来设计所述交互模型的设计器界面;
响应于第一用户输入,按照在所述设计器界面中显示的顺序布置一个或更多个交互对象,每个交互对象表示了与所述交互相关联的用户的构成;
响应于第二用户输入,进一步相对于在所述设计器界面中显示的所述顺序布置一个或更多个模块,每个模块表示了在所述交互的所述多个会话中的一个或更多个会话中可执行的功能元素集;以及
将表示基于布置在所述设计器界面中的所述一个或更多个交互对象和模块的所述交互模型的数据存储在计算机可读介质中。
2.根据条款1所述的方法,所述方法还包括:
响应于第三用户输入,识别与每个交互对象的所述构成相关联的用户和指配给所述构成中的每个用户的角色;以及
将表示所识别的用户和指配给用户的角色的数据作为所述交互模型的一部分存储在所述计算机可读介质中。
3.根据条款2所述的方法,其中所述指配给用户的角色包括所有者、管理员、贡献者和参与者中的至少两者,每个角色定义了所述构成中的用户的权限。
4.根据条款2或3所述的方法,其中所述模块中的一个或更多个模块的所述功能元素集包括被配置为取决于所述指配给用户的角色的功能元素。
5.根据任一前述条款所述的方法,所述方法还包括:
将作为所述交互的一部分的由用户交换的数据存储为数据构建的一部分;以及
还为所述数据构建存储元数据,所述元数据标识作为所述数据构建的一部分而存储的用于所述数据的情境信息。
6.根据条款5所述的方法,其中所述元数据还包括用于标识作为所述数据构建的一部分的所述数据的存储位置的位置信息。
7.根据条款5或6的方法,所述方法还包括:
由所述模块中的一个或更多个模块的所述功能元素集生成用于所述数据构建的所述元数据的至少一部分。
8.根据任一前述条款所述的方法,其中所述第一用户输入和所述第二用户输入中的至少一者包括以下各项中的至少一项:
拖放操作;
语音命令输入;以及
运动命令输入。
9.根据任一前述条款所述的方法,所述方法还包括:
提供用于实例化所述一个或更多个交互对象、所述一个或更多个模块和所述交互模型中的至少一者的数据。
10.根据任一前述条款所述的方法,其中所述设计器界面适于显示时间轴,并且其中所述方法还包括:
响应于所述第一用户输入,相对于在所述设计器界面中显示的所述时间轴布置一个或更多个交互对象;以及
响应于所述第二用户输入,进一步相对于在所述设计器界面中显示的所述时间轴布置一个或更多个模块。
11.根据条款10所述的方法,所述方法还包括以下步骤中的至少一个:
在所述设计器界面中的所述时间轴上显示表示在特定时间点或时间段可用的功能元素集的第一类型的模块;
进一步将表示在所述交互的一个或更多个会话的整个会话期间可用的功能元素集的第二类型的模块在所述设计器界面中显示为所述时间轴的分支;以及
提供表示用于提供元环境的功能元素集的第三类型的模块作为所述交互模型的一部分,所述元环境了实现与外部环境的数据通信。
12.根据条款11所述的方法,其中所述第一类型的模块、所述第二类型的模块和所述第三类型的模块包括微模块、宏模块和元模块中的至少两者。
13.根据条款11或12所述的方法,所述方法还包括:
还提供表示用于支持来自用户设备的数据的功能元素集的第四类型的模块作为所述交互模型的一部分。
14.根据条款13所述的方法,其中所述用户设备使得用户能够生成和交换用于所述交互的一个或更多个会话的数据,所述用户设备包括智能板、计算机、膝上型计算机、平板计算机、VR设备、AR设备和头戴式设备中的至少一个。
15.一种用于生成用于控制交互的可执行交互模型的计算机实现的系统,所述交互包括用户针对常用情境交换数据的用户之间的多个会话,所述系统包括至少一个处理器,所述至少一个处理器被编程有指令编程并且被配置为:
在计算机实现的显示器上提供适于基于多个用户输入来设计所述交互模型的设计器界面;
响应于第一用户输入,相对于在所述设计器界面中显示的时间轴布置一个或更多个交互对象,每个交互对象表示了与所述交互相关联的用户的构成;
响应于第二用户输入,进一步相对于在所述设计器界面中显示的所述时间轴布置一个或更多个模块,每个模块表示了在所述交互的所述多个会话中的一个或更多个会话中可执行的功能元素集;以及
将表示基于布置在所述设计器界面中的所述一个或更多个交互对象和模块的所述交互模型的数据存储在计算机可读介质中。
16.根据条款15所述的系统,其中所述至少一个处理器还被配置为:
响应于第三用户输入,识别与每个交互对象的所述构成相关联的用户和指配给所述构成中的每个用户的角色;以及
将表示所识别的用户和指配给用户的角色的数据作为所述交互模型的一部分存储在所述计算机可读介质中。
17.根据条款16所述的系统,其中所述指配给用户的角色包括所有者、管理员、贡献者和参与者中的至少两者,每个角色定义所述构成中的用户的权限。
18.根据条款16或17所述的系统,其中所述模块中的一个或更多个模块的所述功能元素集包括被配置为取决于所述指配给用户的角色的功能元素。
19.根据条款15至18中任一项所述的系统,其中所述至少一个处理器还被配置为:
将作为所述交互的一部分的由用户交换的数据存储为数据构建的一部分;以及
还为所述数据构建存储元数据,所述元数据标识作为所述数据构建的一部分而存储的用于所述数据的情境信息。
20.根据条款19所述的系统,其中所述元数据还包括用于标识作为所述数据构建的一部分的所述数据的存储位置的位置信息。
21.根据条款19或20所述的系统,其中所述至少一个处理器还被配置为:
由所述模块中的一个或更多个模块的所述功能元素集生成用于所述数据构建的所述元数据的至少一部分。
22.根据条款15至21中任一项所述的系统,其中所述第一用户输入和所述第二用户输入中的至少一者包括以下各项中的至少一项:
拖放操作;
语音命令输入;以及
运动命令输入。
23.根据条款15至22中任一项所述的系统,其中所述至少一个处理器还被配置为:
提供用于实例化所述一个或更多个交互对象、所述一个或更多个模块和所述交互模型中的至少一者的数据。
24.根据条款15至23中任一项所述的系统,其中所述至少一个处理器还被配置为执行以下各项中的至少一项:
在所述设计器界面中的所述时间轴上显示表示在特定时间点或时间段可用的功能元素集的第一类型的模块;
进一步将表示在所述交互的一个或更多个会话的整个会话期间可用的功能元素集的第二类型的模块在所述设计器界面中显示为所述时间轴的分支;以及
提供表示用于提供元环境的功能元素集的第三类型的模块作为所述交互模型的一部分,所述元环境实现了与外部环境的数据通信。
25.根据条款24所述的系统,其中所述第一类型的模块、所述第二类型的模块和所述第三类型的模块包括微模块、宏模块和元模块中的至少两者。
26.根据条款24或25所述的系统,其中所述至少一个处理器还被配置为:
还提供表示用于支持来自用户设备的数据的功能元素集的第四类型的模块作为所述交互模型的一部分。
27.根据条款26所述的系统,其中所述用户设备被配置为使得用户能够生成和交换用于所述交互的一个或更多个会话的数据,所述用户设备包括智能板、计算机、膝上型计算机、平板计算机、VR设备、AR设备和头戴式设备中的至少一个。

Claims (27)

1.一种生成交互模型的计算机实现的方法,所述交互模型提供用于控制交互的模型,所述交互包括针对常用情境交换数据的用户之间的多个会话,所述方法包括:
在计算机实现的显示器上提供适于基于多个用户输入来设计所述交互模型的设计器界面;
响应于第一用户输入,按照在所述设计器界面中显示的顺序布置一个或更多个交互对象,每个交互对象表示了与所述交互相关联的用户的构成;
响应于第二用户输入,进一步相对于在所述设计器界面中显示的所述顺序布置一个或更多个模块,每个模块表示了在所述交互的所述多个会话中的一个或更多个会话中可执行的功能元素集;以及
将表示基于布置在所述设计器界面中的所述一个或更多个交互对象和模块的所述交互模型的数据存储在计算机可读介质中。
2.根据权利要求1所述的方法,所述方法还包括:
响应于第三用户输入,识别与每个交互对象的所述构成相关联的用户和指配给所述构成中的每个用户的角色;以及
将表示所识别的用户和指配给用户的角色的数据作为所述交互模型的一部分存储在所述计算机可读介质中。
3.根据权利要求2所述的方法,其中所述指配给用户的角色包括所有者、管理员、贡献者和参与者中的至少两者,每个角色定义了所述构成中的用户的权限。
4.根据权利要求3所述的方法,其中所述模块中的一个或更多个模块的所述功能元素集包括被配置为取决于所述指配给用户的角色的功能元素。
5.根据权利要求1所述的方法,所述方法还包括:
将作为所述交互的一部分的由用户交换的数据存储为数据构建的一部分;以及
还为所述数据构建存储元数据,所述元数据标识了作为所述数据构建的一部分而存储的用于所述数据的情境信息。
6.根据权利要求5所述的方法,其中所述元数据还包括用于标识作为所述数据构建的一部分的所述数据的存储位置的位置信息。
7.根据权利要求5所述的方法,所述方法还包括:
由所述模块中的一个或更多个模块的所述功能元素集生成用于所述数据构建的所述元数据的至少一部分。
8.根据权利要求1所述的方法,其中所述第一用户输入和所述第二用户输入中的至少一者包括以下各项中的至少一项:
拖放操作;
语音命令输入;以及
运动命令输入。
9.根据权利要求1所述的方法,所述方法还包括:
提供用于实例化所述一个或更多个交互对象、所述一个或更多个模块和所述交互模型中的至少一者的数据。
10.根据权利要求1所述的方法,其中所述设计器界面适于显示时间轴,并且其中所述方法还包括:
响应于所述第一用户输入,相对于在所述设计器界面中显示的所述时间轴布置一个或更多个交互对象;以及
响应于所述第二用户输入,进一步相对于在所述设计器界面中显示的所述时间轴布置一个或更多个模块。
11.根据权利要求10所述的方法,所述方法还包括以下步骤中的至少一个:
在所述设计器界面中的所述时间轴上显示表示在特定时间点或时间段可用的功能元素集的第一类型的模块;
进一步将表示在所述交互的一个或更多个会话的整个会话期间可用的功能元素集的第二类型的模块在所述设计器界面中显示为所述时间轴的分支;以及
提供表示用于提供元环境的功能元素集的第三类型的模块作为所述交互模型的一部分,所述元环境实现了与外部环境的数据通信。
12.根据权利要求11所述的方法,其中所述第一类型的模块、所述第二类型的模块和所述第三类型的模块包括微模块、宏模块和元模块中的至少两者。
13.根据权利要求11所述的方法,所述方法还包括:
还提供表示用于支持来自用户设备的数据的功能元素集的第四类型的模块作为所述交互模型的一部分。
14.根据权利要求13所述的方法,其中所述用户设备使得用户能够生成和交换用于所述交互的一个或更多个会话的数据,所述用户设备包括智能板、计算机、膝上型计算机、平板计算机、VR设备、AR设备和头戴式设备中的至少一个。
15.一种用于生成可执行交互模型的计算机实现的系统,所述可执行交互模型用于控制包括用户之间的多个会话的交互,所述用户针对常用情境交换数据,所述系统包括至少一个处理器,所述至少一个处理器被编程有指令并且被配置为:
在计算机实现的显示器上提供适于基于多个用户输入来设计所述交互模型的设计器界面;
响应于第一用户输入,相对于在所述设计器界面中显示的时间轴布置一个或更多个交互对象,每个交互对象表示了与所述交互相关联的用户的构成;
响应于第二用户输入,进一步相对于在所述设计器界面中显示的所述时间轴布置一个或更多个模块,每个模块表示了在所述交互的所述多个会话中的一个或更多个会话中可执行的功能元素集;以及
将表示基于布置在所述设计器界面中的所述一个或更多个交互对象和模块的所述交互模型的数据存储在计算机可读介质中。
16.根据权利要求15所述的系统,其中所述至少一个处理器还被配置为:
响应于第三用户输入,识别与每个交互对象的所述构成相关联的用户和指配给所述构成中的每个用户的角色;以及
将表示所识别的用户和指配给用户的角色的数据作为所述交互模型的一部分存储在所述计算机可读介质中。
17.根据权利要求16所述的系统,其中所述指配给用户的角色包括所有者、管理员、贡献者和参与者中的至少两者,每个角色定义所述构成中的用户的权限。
18.根据权利要求16或17所述的系统,其中所述模块中的一个或更多个模块的所述功能元素集包括被配置为取决于所述指配给用户的角色的功能元素。
19.根据权利要求15所述的系统,其中所述至少一个处理器还被配置为:
将作为所述交互的一部分的由用户交换的数据存储为数据构建的一部分;以及
还为所述数据构建存储元数据,所述元数据标识了作为所述数据构建的一部分而存储的用于所述数据的情境信息。
20.根据权利要求19所述的系统,其中所述元数据还包括用于标识作为所述数据构建的一部分的所述数据的存储位置的位置信息。
21.根据权利要求19所述的系统,其中所述至少一个处理器还被配置为:
由所述模块中的一个或更多个模块的所述功能元素集生成用于所述数据构建的所述元数据的至少一部分。
22.根据权利要求15所述的系统,其中所述第一用户输入和所述第二用户输入中的至少一者包括以下各项中的至少一项:
拖放操作;
语音命令输入;以及
运动命令输入。
23.根据权利要求15所述的系统,其中所述至少一个处理器还被配置为:
提供用于实例化所述一个或更多个交互对象、所述一个或更多个模块和所述交互模型中的至少一者的数据。
24.根据权利要求15所述的系统,其中所述至少一个处理器还被配置为执行以下各项中的至少一项:
在所述设计器界面中的所述时间轴上显示表示在特定时间点或时间段可用的功能元素集的第一类型的模块;
进一步将表示在所述交互的一个或更多个会话的整个会话期间可用的功能元素集的第二类型的模块在所述设计器界面中显示为所述时间轴的分支;以及
提供表示用于提供元环境的功能元素集的第三类型的模块作为所述交互模型的一部分,所述元环境实现了与外部环境的数据通信。
25.根据权利要求24所述的系统,其中所述第一类型的模块、所述第二类型的模块和所述第三类型的模块包括微模块、宏模块和元模块中的至少两者。
26.根据权利要求24所述的系统,其中所述至少一个处理器还被配置为:
还提供表示用于支持来自用户设备的数据的功能元素集的第四类型的模块作为所述交互模型的一部分。
27.根据权利要求26所述的系统,其中所述用户设备被配置为使得用户能够生成和交换用于所述交互的一个或更多个会话的数据,所述用户设备包括智能板、计算机、膝上型计算机、平板计算机、VR设备、AR设备和头戴式设备中的至少一个。
CN202180063701.8A 2020-09-16 2021-09-16 用于为情境驱动的用户交互建模可执行交互模型的计算机实现的系统和方法 Pending CN116235159A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US202063079304P 2020-09-16 2020-09-16
US63/079,304 2020-09-16
PCT/IB2021/058468 WO2022058934A1 (en) 2020-09-16 2021-09-16 Computer-implemented systems and methods for modeling executable interaction models for context-driven user interactions

Publications (1)

Publication Number Publication Date
CN116235159A true CN116235159A (zh) 2023-06-06

Family

ID=80625751

Family Applications (3)

Application Number Title Priority Date Filing Date
CN202180063692.2A Pending CN116324749A (zh) 2020-09-16 2021-09-16 用于执行交互模型以控制交互环境的计算机实现的系统和方法
CN202180063701.8A Pending CN116235159A (zh) 2020-09-16 2021-09-16 用于为情境驱动的用户交互建模可执行交互模型的计算机实现的系统和方法
CN202180063700.3A Pending CN116209989A (zh) 2020-09-16 2021-09-16 用于生成和管理用于情境驱动的用户交互的数据构建的计算机实现的系统和方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202180063692.2A Pending CN116324749A (zh) 2020-09-16 2021-09-16 用于执行交互模型以控制交互环境的计算机实现的系统和方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202180063700.3A Pending CN116209989A (zh) 2020-09-16 2021-09-16 用于生成和管理用于情境驱动的用户交互的数据构建的计算机实现的系统和方法

Country Status (4)

Country Link
US (3) US20220083985A1 (zh)
EP (3) EP4278275A1 (zh)
CN (3) CN116324749A (zh)
WO (3) WO2022058937A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116324749A (zh) 2020-09-16 2023-06-23 塞申斯技术公司 用于执行交互模型以控制交互环境的计算机实现的系统和方法
US11463499B1 (en) * 2020-12-18 2022-10-04 Vr Edu Llc Storage and retrieval of virtual reality sessions state based upon participants
US11551197B2 (en) * 2021-01-01 2023-01-10 Bank Of America Corporation Smart-glasses based contactless automated teller machine (“ATM”) transaction processing
US11734665B2 (en) 2021-02-08 2023-08-22 Bank Of America Corporation Card-to-smartglasses payment systems
US11907096B2 (en) * 2021-12-30 2024-02-20 Microsoft Technology Licensing, Llc Database simulation modeling framework
US20230359751A1 (en) * 2022-05-09 2023-11-09 International Business Machines Corporation Safety-measure centric temporal containers for real-time creation during a digital meeting
US20240028653A1 (en) * 2022-07-22 2024-01-25 Rovi Guides, Inc. Systems and methods for selecting supplemental content for a user based on a helping user's behavior

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7603657B2 (en) * 2001-03-02 2009-10-13 Oracle International Corporation Customization of client-server interaction in an internet application
US7716286B2 (en) * 2003-12-10 2010-05-11 Heins Douglas B Method and apparatus for utility computing in ad-hoc and configured peer-to-peer networks
US8661331B2 (en) * 2004-05-24 2014-02-25 Xerox Corporation Method of providing visual access to comment markings
US20060080432A1 (en) * 2004-09-03 2006-04-13 Spataro Jared M Systems and methods for collaboration
US8060864B1 (en) * 2005-01-07 2011-11-15 Interactive TKO, Inc. System and method for live software object interaction
US20070283239A1 (en) * 2006-05-30 2007-12-06 Robert Paul Morris Methods, systems, and computer program products for providing a user interaction model for use by a device
US20090132959A1 (en) * 2007-11-20 2009-05-21 Jayavel Shanmugasundaram Method and/or system for schema and view generation
US9046917B2 (en) * 2012-05-17 2015-06-02 Sri International Device, method and system for monitoring, predicting, and accelerating interactions with a computing device
WO2015127404A1 (en) * 2014-02-24 2015-08-27 Microsoft Technology Licensing, Llc Unified presentation of contextually connected information to improve user efficiency and interaction performance
US9674244B2 (en) * 2014-09-05 2017-06-06 Minerva Project, Inc. System and method for discussion initiation and management in a virtual conference
US10228858B1 (en) * 2015-02-11 2019-03-12 Violin Systems Llc System and method for granular deduplication
US10049098B2 (en) 2016-07-20 2018-08-14 Microsoft Technology Licensing, Llc. Extracting actionable information from emails
US20180294986A1 (en) * 2017-04-07 2018-10-11 Invar Consulting Limited Methods Circuits Devices Systems Platforms and Functionally Associated Machine Executable Code for Generating and Operating an Online Interactivity Environment
US20200382618A1 (en) * 2019-05-31 2020-12-03 Microsoft Technology Licensing, Llc Multi-stream content for communication sessions
US20210218784A1 (en) * 2020-01-15 2021-07-15 International Business Machines Corporation Determining a communication channel for a meeting
CN116324749A (zh) 2020-09-16 2023-06-23 塞申斯技术公司 用于执行交互模型以控制交互环境的计算机实现的系统和方法
US20240054104A2 (en) * 2021-03-29 2024-02-15 Comake, Inc. Dynamic presentation of searchable contextual actions and data

Also Published As

Publication number Publication date
US20220083538A1 (en) 2022-03-17
WO2022058938A1 (en) 2022-03-24
EP4278246A1 (en) 2023-11-22
WO2022058937A1 (en) 2022-03-24
EP4278245A1 (en) 2023-11-22
CN116324749A (zh) 2023-06-23
US11960475B2 (en) 2024-04-16
US20220083985A1 (en) 2022-03-17
US20220083212A1 (en) 2022-03-17
WO2022058934A1 (en) 2022-03-24
CN116209989A (zh) 2023-06-02
EP4278275A1 (en) 2023-11-22

Similar Documents

Publication Publication Date Title
US11960577B2 (en) Publication of collaborative file to library
US11960475B2 (en) Computer-implemented systems and methods for modeling executable interaction models for context-driven user interactions
US8464164B2 (en) System and method to create a collaborative web-based multimedia contextual dialogue
US10789574B1 (en) Systems and methods for remote huddle collaboration
US8935334B2 (en) System and method to create a collaborative workflow environment
US8266214B2 (en) System and method for collaborative web-based multimedia layered platform with recording and selective playback of content
US20170075927A1 (en) Discovery and sharing of photos between devices
US11321640B2 (en) Distributing a user interface for accessing files
KR20160106610A (ko) 미팅 속성 액세스 및 구성 기법
EP3746912B1 (en) Method, apparatus and computer-readable media for converting static objects into dynamic intelligent objects on a display device
JP2017519312A (ja) 映画産業プロフェッショナルのためのグローバル交換プラットホーム
US10956868B1 (en) Virtual reality collaborative workspace that is dynamically generated from a digital asset management workflow
US20160063087A1 (en) Method and system for providing location scouting information
CN112668283B (zh) 文档编辑方法、装置和电子设备
US20160057500A1 (en) Method and system for producing a personalized project repository for content creators
US11270264B1 (en) Systems and methods for remote huddle collaboration
US10200496B2 (en) User interface configuration tool
US11722536B2 (en) Apparatuses, computer-implemented methods, and computer program products for managing a shared dynamic collaborative presentation progression interface in association with an audio-video conferencing interface service
US11991223B2 (en) Methods and systems for facilitating communication in a collaborative work environment
US20230376515A1 (en) Generating summary documents for communications in a communication platform
US20230394440A1 (en) Generating collaborative documents for virtual meetings in a communication platform
Domokos et al. Real-Time Software System for Latin Dance Festival Organizers and Participants
WO2023220303A1 (en) Contextual workflow buttons

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination