CN114995709A - 一种多窗口拼窗组合交互方法、终端及可读存储介质 - Google Patents

一种多窗口拼窗组合交互方法、终端及可读存储介质 Download PDF

Info

Publication number
CN114995709A
CN114995709A CN202210526995.XA CN202210526995A CN114995709A CN 114995709 A CN114995709 A CN 114995709A CN 202210526995 A CN202210526995 A CN 202210526995A CN 114995709 A CN114995709 A CN 114995709A
Authority
CN
China
Prior art keywords
user
window
splicing
application
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210526995.XA
Other languages
English (en)
Inventor
周胜杰
沈自然
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Konka Electronic Technology Co Ltd
Original Assignee
Shenzhen Konka Electronic Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Konka Electronic Technology Co Ltd filed Critical Shenzhen Konka Electronic Technology Co Ltd
Priority to CN202210526995.XA priority Critical patent/CN114995709A/zh
Publication of CN114995709A publication Critical patent/CN114995709A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种多窗口拼窗组合交互方法，其中，方法包括：根据用户选择的场景模式采集所述用户的权限信息和历史行为分析信息；其中，所述权限信息为所述用户对应的人脸识别权限；根据所述权限信息和所述历史行为分析信息，匹配对应的拼窗模式以及在对应的窗口中开启关联的应用程序；根据所述用户的交互操作和/或关联事件，在对应的显示窗口中显示对应的交互信息和/或关联事件信息。本发明为家庭多用户在拼窗场景下提供了一种人性化、高效的拼窗场景组合方法，降低了家庭多用户拼窗组合设定的效率，提升了拼窗组合应用在家庭多人同时使用时的交互体验。

Description

一种多窗口拼窗组合交互方法、终端及可读存储介质
技术领域
本发明涉及终端应用领域，尤其涉及的是一种多窗口拼窗组合交互方法、终端及可读存储介质。
背景技术
进入21世纪，随着智能科学技术的发展，以无限屏为代表的新一代智能电视系统蓄势待发，多窗口多任务技术将成为未来智能电视的主流技术。当前无限屏还处于起步阶段，仅能够提供给用户在同一个电视窗口，分不同的显示区域(多窗口)，打开不同的应用(多应用)，当前智能电视的发展阶段已经跨越到摄像头人脸识别以及基于人脸识别技术的相关人机交互技术，但当前智能电视的人脸识别和基于人脸识别的应用推荐基本还停留在单用户模式，不支持多任务多窗口的场景。随着智能电视硬件性能的提升，一机多用已经成为一种趋势。如何让多个用户同时在电视上使用各自惯用的应用窗口并独立操作是目前面临的问题。无限屏拼窗急需在当前智能电视的人脸识别人机交互场景进行技术改进和优化，不然无法满足用户个性化以及群体性的场景化拼窗组合需求。
因此，现有技术还有待改进。
发明内容
本发明要解决的技术问题在于，针对现有技术缺陷，本发明提供一种多窗口拼窗组合交互方法、终端及可读存储介质，以解决现有的拼窗无法满足个性化以及群体性的场景化拼窗组合需求的技术问题。
本发明解决技术问题所采用的技术方案如下：
第一方面，本发明提供一种多窗口拼窗组合交互方法，多窗口拼窗组合交互方法包括以下步骤：
根据用户选择的场景模式采集所述用户的权限信息和历史行为分析信息；其中，所述权限信息为所述用户对应的人脸识别权限；
根据所述权限信息和所述历史行为分析信息，匹配对应的拼窗模式以及在对应的窗口中开启关联的应用程序；
根据所述用户的交互操作和/或关联事件，在对应的显示窗口中显示对应的交互信息和/或关联事件信息。
在一种实现方式中，所述所述根据用户选择的场景模式采集所述用户的权限信息和历史行为分析信息，之前包括；
预先根据配置参数及配置操作设置分屏模式；其中，所述配置参数包括：摄像头识别到的所述用户的个数；
根据所述用户输入的人脸信息将所述人脸信息与所述用户进行关联存储，得到所述用户的人脸帐户信息；
构建历史行为列表库；其中，所述历史行为列表库包括单人用户应用行为列表库和多人用户组合应用行为列表库，所述单人用户应用行为列表库和所述多人用户组合应用行为列表库与所述用户的人脸帐户信息相关联；
设置拼窗运营模块及拼窗推荐系统。
在一种实现方式中，所述所述根据用户选择的场景模式采集所述用户的权限信息和历史行为分析信息，包括：
根据所述用户选择的场景模式采集所述用户的权限信息；
记录所述用户的历史使用应用行为和拼窗应用行为，并将所记录的行为添加到历史行为列表。
在一种实现方式中，所述记录用户的历史使用应用行为和拼窗应用行为，并将所记录的行为添加到历史行为列表，包括：
当捕捉到单个所述用户时，记录所述用户的常用应用、使用时间点、使用场景、通常使用的拼窗组合，对所述常用应用、所述使用时间点、所述使用场景、所述通常使用的拼窗组合进行行为特征分析，并根据分析结果建立单人用户应用行为列表库；
当捕捉到多个所述用户时，记录所述用户的常用应用、使用时间点、使用场景、通常使用的拼窗组合，对所述常用应用、所述使用时间点、所述使用场景、所述通常使用的拼窗组合进行行为特征分析，并根据分析结果建立多人用户组合应用行为列表库。
在一种实现方式中，所述根据权限信息和所述历史行为分析信息，匹配对应的拼窗模式以及在对应的窗口中开启关联的应用程序，包括：
根据采集的用户应用行为列表中的行为，确定场景运营、拼窗场景应用提醒、定时拼窗应用；
将所述行为应用到所述场景运营、所述拼窗场景应用提醒以及所述定时拼窗应用交互中。
在一种实现方式中，所述将所述行为应用到场景运营、拼窗场景应用提醒、定时拼窗应用交互中，包括：
将识别到的人脸数据与分屏模式进行匹配；
当识别到的人脸数据与所述分屏模式匹配时，在所述拼窗运营模块中根据运营策略显示拼窗推荐系统推荐的拼窗内容，或显示用户行为常用的拼窗内容。
在一种实现方式中，所述根据所述权限信息和所述历史行为分析信息，匹配对应的拼窗模式以及在对应的窗口中开启关联的应用程序，还包括：
当检测到单个所述用户的时候，根据单人用户应用行为列表库具有用户的对应行为特征时，根据所述对应行为确定显示配置；
当检测到多个用户的时候，且多人用户组合应用行为列表库具有用户的对应行为特征时，打开分屏模式，根据所述对应行为确定显示配置；
所述显示配置包括，所述使用场景、历史记录以及推荐内容。
在一种实现方式中，所述根据所述用户的交互操作和/或关联事件，在对应的显示窗口中显示对应的交互信息和/或关联事件信息，包括：
当检测到单个所述用户的时候，且用户的相关行为特征符合单人用户应用行为列表库中记录的行为时，根据所述单人用户应用行为列表库中记录的行为与用户的行为相匹配的特点触发相关事件；
当检测到多个所述用户的时候，且用户的相关行为特征符合多人用户应用行为列表库中记录的行为时，根据所述多人用户组合应用行为列表库中记录的行为与用户的行为相匹配的特点触发相关事件；
所述触发相关事件包括：开启所述应用拼窗组合。
第二方面，本发明提供一种终端，包括：处理器以及存储器，所述存储器存储有多窗口拼窗组合交互程序，所述多窗口拼窗组合交互程序被所述处理器执行时用于实现第一方面所述的多窗口拼窗组合交互方法。
第三方面，本发明提供一种计算机可读存储介质，所述计算机可读存储介质存储有多窗口拼窗组合交互程序，所述多窗口拼窗组合交互程序被处理器执行时用于实现第一方面所述的多窗口拼窗组合交互方法。
本发明采用上述技术方案具有以下效果：
本发明将人脸场景属性和拼窗场景属性以及场景运营数据的融合，通过用户识别、大数据用户行为分析以及场景运营为用户提供个性化以及群体性的场景化拼窗组合体验。本发明为家庭多用户在拼窗场景下提供了一种人性化、高效的拼窗场景组合方法，降低了家庭多用户拼窗组合设定的效率，提升了拼窗组合应用在家庭多人同时使用时的交互体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图示出的结构获得其他的附图。
图1是本发明的一种实现方式中多窗口拼窗组合交互方法的流程图。
图2是本发明的一种实现方式中终端的功能原理图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
为使本发明的目的、技术方案及优点更加清楚、明确，以下参照附图并举实施例对本发明进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
示例性方法
如图1所示，本发明实施例提供一种多窗口拼窗组合交互方法，多窗口拼窗组合交互方法包括以下步骤：
步骤S100，根据用户选择的场景模式采集所述用户的权限信息和历史行为分析信息；其中，所述权限信息为所述用户对应的人脸识别权限。
在本实施例中，所述多窗口拼窗组合交互方法应用于终端中，所述终端包括但不限于：智能电视、计算机以及移动终端等设备，本实施例以智能电视为例，对所述多窗口拼窗组合交互方法进行说明。
在本实施例中，所述终端设备中内置摄像头的驱动电机；其中，所述驱动电机包括：升降电机和旋转电机，所述升降电机可用于驱动所述摄像头从隐藏位置(例如，智能电视的壳体中)到正常拍摄位置(例如，智能电视顶部正中间位置)；而所述摄像头上升到正常拍摄位置时，所述旋转电机则可用于驱动所述摄像头旋转至任意角度，以实现全景拍摄的功能。
在本实施例中，所述终端设备设置有相应的无限屏人脸智能识别程序，当所述终端设备启动人脸识别程序时，显示相应的测试界面以及该测试界面下的启动选项、参数选项以及设置选项等。
即在本实施例的一种实现方式中，步骤S100之前包括以下步骤：
步骤S001，预先根据配置参数及配置操作设置分屏模式；其中，所述配置参数包括：摄像头识别到的所述用户的个数；
步骤S002，根据所述用户输入的人脸信息将所述人脸信息与所述用户进行关联存储，得到所述用户的人脸帐户信息；
步骤S003，构建历史行为列表库；其中，所述历史行为列表库包括单人用户应用行为列表库和多人用户组合应用行为列表库，所述单人用户应用行为列表库和所述多人用户组合应用行为列表库与所述用户的人脸帐户信息相关联；
步骤S004，设置拼窗运营模块及拼窗推荐系统。
在本实施例中，需要预先根据配置参数及配置操作设置分屏模式，所述分屏模式包括，当检测到多个已注册人脸时，根据检测到的人脸信息数量将终端屏幕划分为对应个数的分屏窗口。在设置所述分屏模式，应该注意根据电视尺寸设置分屏窗口个数上限，例如：4个分屏窗口、8个分屏窗口，具体根据电视尺寸而定。
在设置分屏模式后，根据所述用户输入的人脸信息注册人脸帐户信息，其中，注册人脸帐户信息包括，在人脸设别场景设置人脸注册界面，当监测到陌生面孔时，则开启拼窗提示和拼窗场景加载，默认情况下只为在当前设备注册了人脸帐户的用户服务。
在本实施例中，除了需要设置分屏模式及注册用户信息，还需要构建历史行为列表库；其中，所述历史行为列表库包括单人用户应用行为列表库和多人用户组合应用行为列表库，所述单人用户应用行为列表库和所述多人用户组合应用行为列表库与所述用户的人脸帐户信息相关联。
在得到历史行为列表库后，设置拼窗运营模块及拼窗推荐系统，其中，所述拼窗推荐系统包括三个模块，用户建模模块、推荐对象建模模块、推荐模块；推荐模块数据来源于以下五个维度：
第一是使用记录，记录下用户实际使用过的软件、观看过的频道、影片；
第二是收藏夹，从某种程度说，用户收藏了某个频道、某部影片，系统认为该用户也会看，这是需要推送的数据之一；
第三是使用习惯，用户在一段时间内观看电视的习惯一般是不会改变，也就是常规设置是不会变的；
第四是同类推荐，根据用户观看的类型，推荐同类的影片也存在可能需要的情况；
第五是系统推荐，在用户刚注册的时候会选择一个所属类别，根据相应的类别把系统的清单推荐出来，以满足用户的需要。
例如：当用户A在使用应用程序A的时候，此时用户摄像头识别到用户B的人脸，应用行为列表库在该时间点上无用户B与用户A一组的体验特征，则提醒“检测到新用户”，是否开启拼窗组合，打开一个新的窗口一起使用。如果用户选择是，则获取用户B的单人用户历史行为记录，输出对应的拼窗推荐系统、拼窗历史记录的数据，如果未获取到相应的单人用户历史行为记录，则输出默认的拼窗运营数据。用户可以设定当摄像头检测到多人的时候的处理逻辑，如：不响应新加入用户。如果用户选择否，则不理会新识别到用户。
在本实施例中，预先设置拼窗运营模块及拼窗推荐系统，拼窗运营模块以及推荐系统根据用户体验特征列表中的数据进行分析整合，在合适的时间点调整窗口、软件、场景设置，使用户有量身定制之感。
在本实施例中，默认设置常规操作下自动采集注册用户的电视使用时间、亮度、背景、屏幕大小、字体大小等设置习惯，在开启电视机摄像头的情况下，检测到注册用户的人脸信息，则自动配置用户在常规使用的设置习惯。
在另一方案中，用户可以开启手动设置储存使用习惯功能，开启后智能终端通过人脸识别检测当前用户是否注册用户信息，若没有，则通过弹窗提示是否注册人脸信息；若存在该用户的注册信息，则通过用户手动操作以及确认保存使用习惯。该方案可以降低需要注册用户信息带来的时间浪费，使得用户不用注册也可以保存自己的使用习惯。
在本实施例的一种实现方式中，步骤S100包括以下步骤：
步骤S101，根据所述用户选择的场景模式采集所述用户的权限信息；
步骤S102，记录所述用户的历史使用应用行为和拼窗应用行为，并将所记录的行为添加到历史行为列表。
在本实施例中，根据单人用户构建单人用户应用行为列表库；在捕捉到一个已注册的人脸在用电视的场景，采集该人脸用户常用的应用，以及在哪些时间点用，在哪些场景下触发哪些应用，通常使用什么样的拼窗组合，在哪些时间点用，在哪些场景下触发，根据上述分析维度建立列表采集记录，经过分析，形成单人用户应用行为列表库。
在本实施例中，根据多用户组合构建多用户应用行为列表库；在捕捉到多个已注册的人脸在用电视的场景，采集该用户组合常用的应用，以及在哪些时间点用，在哪些场景下触发哪些应用，通常使用什么样的拼窗组合，在哪些时间点用，在哪些场景下触发以及共同的使用应用的习惯，根据上述分析维度建立列表采集记录，经过分析，形成多用户应用行为列表库。
如图1所示，在本发明实施例的一种实现方式中，多窗口拼窗组合交互方法还包括以下步骤：
步骤S200，根据权限信息和所述历史行为分析信息，匹配对应的拼窗模式以及在对应的窗口中开启关联的应用程序。
在本实施例的一种实现方式中，步骤S200包括以下步骤：
步骤S201，根据采集的用户应用行为列表中的行为，确定场景运营、拼窗场景应用提醒、定时拼窗应用；
步骤S202，将所述行为应用到所述场景运营、所述拼窗场景应用提醒以及所述定时拼窗应用交互中。
在本实施例中，终端根据用户应用行为列表库获取用户的行为习惯，根据用户的使用习惯为用户进行相应的场景配置、拼窗应用、以及定时拼窗交互，并且把用户应用行为列表库中用户的习惯应用到所述场景运营、所述拼窗场景应用提醒以及所述定时拼窗应用交互中。
在本实施例的一种实现方式中，步骤S202包括以下步骤：
步骤S2021，将识别到的人脸数据与分屏模式进行匹配；
步骤S2022，当识别到的人脸数据与所述分屏模式匹配时，在所述拼窗运营模块中根据运营策略显示拼窗推荐系统推荐的拼窗内容，或显示用户行为常用的拼窗内容。
在本实施例中，终端通过摄像头识别到的人脸信息个数，划分相应个数的分屏窗口，并且在每个分屏窗口配置用户的常用应用软件组合、历史观看记录、系统推荐等拼窗内容进行页面布局。
在本实施例的一种实现方式中，步骤S200还包括以下步骤：
步骤S203，当检测到单个所述用户的时候，根据单人用户应用行为列表库具有用户的对应行为特征时，根据所述对应行为确定显示配置；
步骤S204，当检测到多个用户的时候，且多人用户组合应用行为列表库具有用户的对应行为特征时，打开分屏模式，根据所述对应行为确定显示配置；所述显示配置包括，所述使用场景、历史记录以及推荐内容。
在本实施例中，当人脸识别模块识别出当前已注册用户的人脸数量，确定实际用户数量后，打开分屏模式，配置与实际用户数量相对应的界面，并且通过人脸信息查询得到每个用户的使用习惯，并根据获取的各用户对应的使用习惯，其中包括常用应用软件、应用软件组合、布局、页面样式等多种设置参数，控制将这些用户的使用习惯对应配置到划分好的分屏窗口中，并且其使用习惯与分屏窗口中的人脸信息也需要一一对应。使多个用户在同时使用同一智能电视时能够自动配置与各用户使用习惯相匹配的参数设置及应用软件组合和布局，进一步提升用户的使用体验。
示例的，当智能电视通过人脸识别判断电视机前有多个人脸时，则打开分屏模式；通过人脸识别获得该用户群体的信息，在多人用户群体应用行为列表库中查找预先采集并存储的使用习惯以及历史记录，当查找到该用户群体的记录，则智能电视将屏幕划分为相应人脸数量的窗口，并且将每个人脸用户常用的应用软件按顺序配置到窗口，并且在窗口底部显示历史观看记录以及推荐内容。
例如当智能电视的分屏窗口中配置的是电视页面时，根据用户a的使用习惯为：应用软件组合为优酷、芒果TV、腾讯视频以及电视直播，排布方式为2x2，且使用页面背景为深空灰。则智能电视将上述使用习惯同步到当前分屏窗口为用户a对应的人脸信息的分屏窗口中。
另一方面，当智能电视通过采集到的人脸信息查询到该用户并未存储在电视存储单元中时，配置该用户对应的分屏窗口为默认的应用或者应用软件组合、排布以及主题等，并且可通过弹窗的形式提示用户是否在所述智能电视中建立用户存档用于存储人脸信息以及对应人脸信息的使用习惯，当用户选择否则在下一次使用所述智能电视的多人分屏功能时同样配置默认的应用或者应用软件组合、排布以及主题等；当用户选择是则智能电视存储采集到的人脸信息并将此次该用户设置的使用习惯对应存储。
除此之外，本实施例还可以更新用户应用行为列表库，根据历史时段内控制已注册用户的观看记录和观看时长生成观看列表；通过设置时间段以及观看次数阈值，对用户观看列表进行排序以及更新，方便用户进行挑选。用户也可以对观看列表进行修改，该修改包括对观看列表上的内容进行增加和删除。
如图1所示，在本发明实施例的一种实现方式中，多窗口拼窗组合交互方法还包括以下步骤：
步骤S300，根据所述用户的交互操作和/或关联事件，在对应的显示窗口中显示对应的交互信息和/或关联事件信息。
在本实施例中，终端接收到用户的操作指令，经过判断，与用户应用行为列表库中的行为记录对应，则确定为触发交互操作/或关联事件，终端根据用户应用行为列表库中记录的行为信息跳出弹窗推荐下一步操作步骤的信息。
在本实施例的一种实现方式中，步骤S300包括以下步骤：
步骤S301，当检测到单个所述用户的时候，且用户的相关行为特征符合单人用户应用行为列表库中记录的行为时，根据所述单人用户应用行为列表库中记录的行为与用户的行为相匹配的特点触发相关事件；
步骤S302，当检测到多个所述用户的时候，且用户的相关行为特征符合多人用户组合应用行为列表库中记录的行为时，根据所述多人用户组合应用行为列表库中记录的行为与用户的行为相匹配的特点触发相关事件；所述触发相关事件包括：开启所述应用拼窗组合。
在本实施例中，当人脸识别模块检测到单个或者多个用户时，并且单个或者多个用户的操作行为与单人或者多人用户列表库中记录的行为对应，则在单个或者多个用户进行下一步操作之前，系统根据应用行为触发相关事件，提高用户体验感。
例如，假设智能电视中预存有单人用户A的配置信息，包括，A用户习惯在20:00用ZzAPP，看XX类型影片等，比如XX影视有更新的时候，A用户在晚上9点，会第一时间打开XXXAPP看，当XX好友上线的时候，使用视频聊天工具边看边聊(腾讯视频+视频聊天)；如此，当用户A启动智能电视时，会查找与用户A对应的配置信息项，在20：00的时候弹出切换至ZzAPP窗口，在XX影视有更新的时候，弹出打开XXXAPP看的窗口。
示例地，如检测到多人的时候：当用户A在使用应用程序A的时候，此时用户摄像头识别到用户C的人脸，应用行为列表库在该时间点上有两人共同的体验特征，则提醒“检测到用户C”，再过2分钟就是您和用户C一起边聊边练的时间了，是否现在开启边聊边练(边视频聊天，边运动锻炼)。该逻辑可以用户2个及2个以上的多人。
在本实施例的另外一种实现方式中，当检测到人脸用户离开时，设定离开时间X分钟之后(时间用户可以设置，即当前摄像头检测不到用户人脸之后倒计时)，应用行为列表对应的离开用户的窗口询问是否要“自动关闭”，询问是否如此操作，用户可以选择关闭或不关闭。如此可以适应实际情况，提高用户使用效果。
本实施例通过将人脸场景属性和拼窗场景属性以及场景运营数据的融合，通过用户识别、大数据用户行为分析以及场景运营为用户提供个性化以及群体性的场景化拼窗组合体验。本发明为家庭多用户在拼窗场景下提供了一种人性化、高效的拼窗场景组合方法，降低了家庭多用户拼窗组合设定的效率，提升了拼窗组合应用在家庭多人同时使用时的交互体验。
示例性设备
基于上述实施例，本发明还提供一种终端，其原理框图可以如图2所示。
该终端包括：通过系统总线连接的处理器、存储器、接口、显示屏以及通讯模块；其中，该终端的处理器用于提供计算和控制能力；该终端的存储器包括计算机可读存储介质以及内存储器；该计算机可读存储介质存储有操作系统和计算机程序；该内存储器为计算机可读存储介质中的操作系统和计算机程序的运行提供环境；该接口用于连接外部终端设备，例如，移动终端以及计算机等设备；该显示屏用于显示相应的多窗口拼窗组合交互信息；该通讯模块用于与云端服务器或移动终端进行通讯。
该计算机程序被处理器执行时用以实现一种多窗口拼窗组合交互方法。
本领域技术人员可以理解的是，图2中示出的原理框图，仅仅是与本发明方案相关的部分结构的框图，并不构成对本发明方案所应用于其上的终端的限定，具体的终端可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，提供了一种终端，其中，包括：处理器和存储器，存储器存储有多窗口拼窗组合交互程序，该多窗口拼窗组合交互程序被处理器执行时用于实现如上所述的多窗口拼窗组合交互方法。
在一个实施例中，提供了一种计算机可读存储介质，其中，该计算机可读存储介质存储有多窗口拼窗组合交互程序，多窗口拼窗组合交互程序被处理器执行时用于实现如上所述的多窗口拼窗组合交互方法。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，计算机程序可存储于一非易失性计算机可读取计算机可读存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本发明所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。
综上，本发明公开了一种多窗口拼窗组合交互方法，其中，方法包括：根据用户选择的场景模式采集所述用户的权限信息和历史行为分析信息；其中，所述权限信息为所述用户对应的人脸识别权限；根据所述权限信息和所述历史行为分析信息，匹配对应的拼窗模式以及在对应的窗口中开启关联的应用程序；根据所述用户的交互操作和/或关联事件，在对应的显示窗口中显示对应的交互信息和/或关联事件信息。本发明为家庭多用户在拼窗场景下提供了一种人性化、高效的拼窗场景组合方法，降低了家庭多用户拼窗组合设定的效率，提升了拼窗组合应用在家庭多人同时使用时的交互体验。
应当理解的是，本发明的应用不限于上述的举例，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (10)

1.一种多窗口拼窗组合交互方法，其特征在于，所述多窗口拼窗组合交互方法包括以下步骤：
根据用户选择的场景模式采集所述用户的权限信息和历史行为分析信息；其中，所述权限信息为所述用户对应的人脸识别权限；
根据所述权限信息和所述历史行为分析信息，匹配对应的拼窗模式以及在对应的窗口中开启关联的应用程序；
根据所述用户的交互操作和/或关联事件，在对应的显示窗口中显示对应的交互信息和/或关联事件信息。
2.根据权利要求1所述的多窗口拼窗组合交互方法，其特征在于，所述所述根据用户选择的场景模式采集所述用户的权限信息和历史行为分析信息，之前包括；
预先根据配置参数及配置操作设置分屏模式；其中，所述配置参数包括：摄像头识别到的所述用户的个数；
根据所述用户输入的人脸信息将所述人脸信息与所述用户进行关联存储，得到所述用户的人脸帐户信息；
构建历史行为列表库；其中，所述历史行为列表库包括单人用户应用行为列表库和多人用户组合应用行为列表库，所述单人用户应用行为列表库和所述多人用户组合应用行为列表库与所述用户的人脸帐户信息相关联；
设置拼窗运营模块及拼窗推荐系统。
3.根据权利要求1所述的多窗口拼窗组合交互方法，其特征在于，所述所述根据用户选择的场景模式采集所述用户的权限信息和历史行为分析信息，包括：
根据所述用户选择的场景模式采集所述用户的权限信息；
记录所述用户的历史使用应用行为和拼窗应用行为，并将所记录的行为添加到历史行为列表。
4.根据权利要求3所述的多窗口拼窗组合交互方法，其特征在于，所述记录用户的历史使用应用行为和拼窗应用行为，并将所记录的行为添加到历史行为列表，包括：
当捕捉到单个所述用户时，记录所述用户的常用应用、使用时间点、使用场景、通常使用的拼窗组合，对所述常用应用、所述使用时间点、所述使用场景、所述通常使用的拼窗组合进行行为特征分析，并根据分析结果建立单人用户应用行为列表库；
当捕捉到多个所述用户时，记录所述用户的常用应用、使用时间点、使用场景、通常使用的拼窗组合，对所述常用应用、所述使用时间点、所述使用场景、所述通常使用的拼窗组合进行行为特征分析，并根据分析结果建立多人用户组合应用行为列表库。
5.根据权利要求1所述的多窗口拼窗组合交互方法，其特征在于，所述根据权限信息和所述历史行为分析信息，匹配对应的拼窗模式以及在对应的窗口中开启关联的应用程序，包括：
根据采集的用户应用行为列表中的行为，确定场景运营、拼窗场景应用提醒、定时拼窗应用；
将所述行为应用到所述场景运营、所述拼窗场景应用提醒以及所述定时拼窗应用交互中。
6.根据权利要求5所述的多窗口拼窗组合交互方法，其特征在于，所述将所述行为应用到场景运营、拼窗场景应用提醒、定时拼窗应用交互中，包括：
将识别到的人脸数据与分屏模式进行匹配；
当识别到的人脸数据与所述分屏模式匹配时，在所述拼窗运营模块中根据运营策略显示拼窗推荐系统推荐的拼窗内容，或显示用户行为常用的拼窗内容。
7.根据权利要求1所述的多窗口拼窗组合交互方法，其特征在于，所述根据所述权限信息和所述历史行为分析信息，匹配对应的拼窗模式以及在对应的窗口中开启关联的应用程序，还包括：
当检测到单个所述用户的时候，根据单人用户应用行为列表库具有用户的对应行为特征时，根据所述对应行为确定显示配置；
当检测到多个用户的时候，且多人用户组合应用行为列表库具有用户的对应行为特征时，打开分屏模式，根据所述对应行为确定显示配置；
所述显示配置包括，所述使用场景、历史记录以及推荐内容。
8.根据权利要求1所述的多窗口拼窗组合交互方法，其特征在于，所述根据所述用户的交互操作和/或关联事件，在对应的显示窗口中显示对应的交互信息和/或关联事件信息，包括：
当检测到单个所述用户的时候，且用户的相关行为特征符合单人用户应用行为列表库中记录的行为时，根据所述单人用户应用行为列表库中记录的行为与用户的行为相匹配的特点触发相关事件；
当检测到多个所述用户的时候，且用户的相关行为特征符合多人用户组合应用行为列表库中记录的行为时，根据所述多人用户组合应用行为列表库中记录的行为与用户的行为相匹配的特点触发相关事件；
所述触发相关事件包括：开启所述应用拼窗组合。
9.一种终端，其特征在于，包括：处理器以及存储器，所述存储器存储有多窗口拼窗组合交互程序，所述多窗口拼窗组合交互程序被所述处理器执行时用于实现如权利要求1-8中任意一项所述的多窗口拼窗组合交互方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有多窗口拼窗组合交互程序，所述多窗口拼窗组合交互程序被处理器执行时用于实现如权利要求1-8中任意一项所述的多窗口拼窗组合交互方法。
CN202210526995.XA 2022-05-13 2022-05-13 一种多窗口拼窗组合交互方法、终端及可读存储介质 Pending CN114995709A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210526995.XA CN114995709A (zh) 2022-05-13 2022-05-13 一种多窗口拼窗组合交互方法、终端及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210526995.XA CN114995709A (zh) 2022-05-13 2022-05-13 一种多窗口拼窗组合交互方法、终端及可读存储介质

Publications (1)

Publication Number Publication Date
CN114995709A true CN114995709A (zh) 2022-09-02

Family

ID=83027706

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210526995.XA Pending CN114995709A (zh) 2022-05-13 2022-05-13 一种多窗口拼窗组合交互方法、终端及可读存储介质

Country Status (1)

Country Link
CN (1) CN114995709A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019072133A1 (zh) * 2017-10-11 2019-04-18 Oppo广东移动通信有限公司 人脸识别方法及相关产品
CN110045621A (zh) * 2019-04-12 2019-07-23 深圳康佳电子科技有限公司 智能场景处理方法、系统、智能家居设备及存储介质
CN110727382A (zh) * 2019-09-06 2020-01-24 华为技术有限公司 一种分屏显示方法及电子设备
CN112406727A (zh) * 2019-08-23 2021-02-26 比亚迪股份有限公司 车辆及多屏系统的控制方法、装置
CN113573130A (zh) * 2021-07-09 2021-10-29 深圳康佳电子科技有限公司 基于人脸识别的智能电视分屏方法、装置、设备及介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019072133A1 (zh) * 2017-10-11 2019-04-18 Oppo广东移动通信有限公司 人脸识别方法及相关产品
CN110045621A (zh) * 2019-04-12 2019-07-23 深圳康佳电子科技有限公司 智能场景处理方法、系统、智能家居设备及存储介质
CN112406727A (zh) * 2019-08-23 2021-02-26 比亚迪股份有限公司 车辆及多屏系统的控制方法、装置
CN110727382A (zh) * 2019-09-06 2020-01-24 华为技术有限公司 一种分屏显示方法及电子设备
CN113573130A (zh) * 2021-07-09 2021-10-29 深圳康佳电子科技有限公司 基于人脸识别的智能电视分屏方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
WO2020207413A1 (zh) 一种内容推送方法、装置与设备
EP2728859B1 (en) Method of providing information-of-users' interest when video call is made, and electronic apparatus thereof
WO2021063096A1 (zh) 视频合成方法、装置、电子设备及存储介质
CN112988299B (zh) 推荐信息的显示方法、装置、终端及存储介质
CN113114841A (zh) 动态壁纸获取方法、装置
CN112333509A (zh) 一种媒资推荐方法、推荐媒资的播放方法及显示设备
WO2022012271A1 (zh) 显示设备和服务器
CN103780960A (zh) 节目播放方法、节目播放系统和显示装置
CN112698905A (zh) 一种屏保显示方法、显示设备、终端设备及服务器
CN112492390A (zh) 一种显示设备及内容推荐方法
CN112399239A (zh) 视频播放方法及装置
WO2022078172A1 (zh) 一种显示设备和内容展示方法
CN113573130B (zh) 基于人脸识别的智能电视分屏方法、装置、设备及介质
CN114489331A (zh) 区别于按钮点击的隔空手势交互方法、装置、设备和介质
CN113722542A (zh) 视频推荐方法及显示设备
CN108965998A (zh) 一种频道切换方法、系统、智能电视及存储介质
CN105323624A (zh) 一种录制视频的方法、装置和系统
CN110113645B (zh) 多媒体设备的播放控制方法、装置、电子设备及存储介质
CN114995709A (zh) 一种多窗口拼窗组合交互方法、终端及可读存储介质
CN109618231A (zh) 一种基于冷启动的影视内容推荐方法及系统
CN108875670A (zh) 信息处理方法、装置和存储介质
CN112333520B (zh) 节目推荐方法、显示设备及服务器
CN105592362B (zh) 控制智能终端应用自动运行的方法和系统
CN114173167A (zh) 显示设备、内容分发网络系统和服务器
CN109936753B (zh) 儿童专属课堂推荐方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination