CN115469735A - 基于手势的交互方法、装置和客户端 - Google Patents

基于手势的交互方法、装置和客户端 Download PDF

Info

Publication number
CN115469735A
CN115469735A CN202110592514.0A CN202110592514A CN115469735A CN 115469735 A CN115469735 A CN 115469735A CN 202110592514 A CN202110592514 A CN 202110592514A CN 115469735 A CN115469735 A CN 115469735A
Authority
CN
China
Prior art keywords
gesture
animation
client
user
playing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110592514.0A
Other languages
English (en)
Inventor
李翼辰
周军
王霖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN202110592514.0A priority Critical patent/CN115469735A/zh
Priority to EP22810377.6A priority patent/EP4332732A1/en
Priority to PCT/CN2022/092451 priority patent/WO2022247650A1/zh
Publication of CN115469735A publication Critical patent/CN115469735A/zh
Priority to US18/520,876 priority patent/US20240094826A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本公开涉及一种基于手势的交互方法、装置和客户端。该方法包括：在一个网络直播的直播过程中，主播用户的客户端在手势动画的播放功能处于启动状态时，识别主播用户的手势。在手势类别与手势动画的预设类别匹配时，主播用户的客户端在与手势位置对应的第一区域中播放手势动画，并通过第一服务器向看播用户的客户端发送第一内容。看播用户的客户端基于第一内容，在与手势位置对应的第二区域中播放手势动画，并检测第二区域上的触发操作。从而，不仅使得看播用户的客户端能够同步播放主播用户的客户端的手势动画，还使得看播用户的客户端展示与主播用户互动的触发区域，提升了看播用户与主播用户之间的密切互动程度。

Description

基于手势的交互方法、装置和客户端
技术领域
本公开涉及直播技术领域，尤其涉及一种基于手势的交互方法、装置和客户端。
背景技术
随着互联网技术的不断发展，网络直播应运而生，为用户提供了丰富多彩的娱乐生活，可实现多方异地的用户实时互动。
目前，主播用户可通过主播用户的客户端开启一个网络直播，即主播用户的客户端为该网络直播分配一个接入地址(称为虚拟直播间)，看播用户可通过看播用户的客户端进入到该网络直播中，实现网络直播的观看和互动。
然而，主播用户常常通过反馈看播用户的评论消息，实现与看播用户的互动。可见，互动方式单一且无趣，不利于看播用户继续进行网络直播的观看和互动，降低了看播用户观看网络直播时实时互动的交互体验。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题，本公开提供了一种基于手势的交互方法、装置和客户端。
第一方面，本公开提供了一种基于手势的交互方法，该方法应用于主播用户的客户端；该方法包括：
识别主播用户的手势对应的手势类别和手势位置；
在手势类别与手势动画的预设类别匹配时，在与手势位置对应的第一区域中播放手势动画，并通过第一服务器向看播用户的客户端发送第一内容，第一内容用于表示手势动画的播放情况，以使看播用户的客户端基于第一内容，在与手势位置对应的第二区域中播放手势动画，并检测第二区域上的触发操作，第二区域上的触发操作用于触发目标页的显示，目标页用于提供与主播用户交互的入口。
通过第一方面提供的方法，在网络直播的直播过程中，在主播用户做出一个特定的手势后，不仅使得看播用户的客户端能够同步播放主播用户的客户端的手势动画，还使得看播用户的客户端展示与主播用户互动的触发区域，提升了看播用户与主播用户之间的密切互动程度，增加了用户使用客户端的兴趣。
其中，在第一区域中播放所述手势动画的同时，屏蔽第一区域上的触发操作。
在一种可能的设计中，第一内容中包括：开始标识、预设类别、手势位置和/或触发标识，开始标识用于表示开始播放手势动画，预设类别用于确定手势动画的音视频，手势位置用于确定第二区域，第二区域上的触发标识用于表示目标页的网页地址或者目标页在看播用户的客户端中的页面标识。
在一种可能的设计中，该方法还包括：
在手势动画播放结束时，在第一区域中停止播放手势动画，并通过第一服务器向看播用户的客户端发送第二内容，第二内容用于表示手势动画的停止播放情况，以使看播用户的客户端基于第二内容，在第二区域中停止播放手势动画，并屏蔽第二区域上的触发操作。
在一种可能的设计中，第二内容中包括：结束标识和预设类别，结束标识用于表示结束播放手势动画，预设类别用于确定手势动画的音视频。
在一种可能的设计中，该方法还包括：
在接收到横幅区域上的触发操作后，显示配置页，配置页用于提供手势动画的播放功能是否启动的入口，配置页中包括开关控件，开关控件用于启动或停止启动手势动画的播放功能；
在接收到处于停止启动状态的开关控件上的触发操作后，确定手势动画的音视频的资源包是否下载；
在资源包未下载时，确定首次启动手势动画的播放功能；
在资源包已下载时，确定非首次启动手势动画的播放功能。
在一种可能的设计中，在首次启动手势动画的播放功能时，该方法还包括：
向第二服务器发送第一请求，第一请求用于请求启动手势动画的播放功能以及下载资源包，第一请求中携带有预设类别；
从第二服务器接收第一响应，第一响应中携带有第一标识、第二标识、预设类别和资源包，第一标识用于表示第二服务器将手势动画的播放功能的当前状态更新为启动状态，第二标识用于表示可使用手势动画的播放功能；
在接收到第二标识后，存储预设类别和资源包，并识别手势类别和手势位置。
在一种可能的设计中，在非首次启动手势动画的播放功能时，该方法还包括：
向第二服务器发送第二请求，第二请求用于请求启动手势动画的播放功能，第二请求中携带有预设类别；
从第二服务器接收第二响应，第二响应中携带有第一标识、第二标识和预设类别，第一标识用于表示第二服务器将手势动画的播放功能的当前状态更新为启动状态，第二标识用于表示可使用手势动画的播放功能；
在接收到第二标识后，识别手势类别和手势位置。
在一种可能的设计中，该方法还包括：
在接收到处于启动状态的开关控件上的触发操作后，确定停止启动手势动画的播放功能。
在一种可能的设计中，在停止启动手势动画的播放功能时，该方法还包括：
向第二服务器发送第三请求，第三请求用于请求停止启动手势动画的播放功能，第三请求中携带有预设类别；
从第二服务器接收第三响应，第三响应中携带有第三标识、第四标识和预设类别，第三标识用于表示第二服务器将手势动画的播放功能的当前状态更新为停止启动状态，第四标识用于表示停止使用手势动画的播放功能；
在接收到第四标识后，停止识别手势类别和手势位置。
第二方面，本公开提供了一种基于手势的交互方法，该方法应用于看播用户的客户端；该方法包括：
在进入到主播用户启动的一个网络直播后，通过第一服务器从主播用户的客户端接收第一内容，第一内容用于表示手势动画的播放情况，第一内容为主播用户的客户端在主播用户的手势对应的手势类别与手势动画的预设类别匹配时发送的；
基于与第一内容，在与主播用户的手势对应的手势位置对应的第二区域中播放手势动画，并检测第二区域上的触发操作，第二区域上的触发操作用于触发目标页的显示，目标页用于提供与主播用户交互的入口。
通过第二方面提供的方法，在网络直播的直播过程中，在主播用户做出一个特定的手势后，不仅使得看播用户的客户端能够同步播放主播用户的客户端的手势动画，还使得看播用户的客户端展示与主播用户互动的触发区域，提升了看播用户与主播用户之间的密切互动程度，增加了用户使用客户端的兴趣。
在一种可能的设计中，第一内容中包括：开始标识、预设类别、手势位置和/或触发标识，开始标识用于表示开始播放手势动画，预设类别用于确定手势动画的音视频，手势位置用于确定第二区域，第二区域上的触发标识用于表示目标页的网页地址或者目标页在看播用户的客户端中的页面标识。
在一种可能的设计中，在第二区域中包括手势控件，手势控件用于触发目标页的显示；该方法还包括：
在接收到手势控件上的触发操作后，显示目标页。
在一种可能的设计中，该方法还包括：
通过第一服务器从主播用户的客户端接收第二内容，第二内容用于表示手势动画的停止播放情况，第二内容为主播用户的客户端在手势动画播放结束时发送的；
基于第二内容，在第二区域中停止播放手势动画，并屏蔽第二区域上的触发操作。
在一种可能的设计中，第二内容中包括：结束标识和预设类别，结束标识用于表示结束播放手势动画，预设类别用于确定手势动画的音视频。
第三方面，本公开提供了一种基于手势的交互装置，该装置应用于主播用户的客户端；该装置包括：
识别模块，用于识别主播用户的手势对应的手势类别和手势位置；
第一处理模块，用于在手势类别与手势动画的预设类别匹配时，在与手势位置对应的第一区域中播放手势动画，并通过第一服务器向看播用户的客户端发送第一内容，第一内容用于表示手势动画的播放情况，以使看播用户的客户端基于第一内容，在与手势位置对应的第二区域中播放手势动画，并检测第二区域上的触发操作，第二区域上的触发操作用于触发目标页的显示，目标页用于提供与主播用户交互的入口。
其中，第一处理模块，还用于在第一区域中播放所述手势动画的同时，屏蔽第一区域上的触发操作。
在一种可能的设计中，第一内容中包括：开始标识、预设类别、手势位置和/或触发标识，开始标识用于表示开始播放手势动画，预设类别用于确定手势动画的音视频，手势位置用于确定第二区域，第二区域上的触发标识用于表示目标页的网页地址或者目标页在看播用户的客户端中的页面标识。
在一种可能的设计中，第一处理模块，还用于在手势动画播放结束时，在第一区域中停止播放手势动画，并通过第一服务器向看播用户的客户端发送第二内容，第二内容用于表示手势动画的停止播放情况，以使看播用户的客户端基于第二内容，在第二区域中停止播放手势动画，并屏蔽第二区域上的触发操作。
在一种可能的设计中，第二内容中包括：结束标识和预设类别，结束标识用于表示结束播放手势动画，预设类别用于确定手势动画的音视频。
在一种可能的设计中，第一处理模块，还用于在接收到横幅区域上的触发操作后，显示配置页，配置页用于提供手势动画的播放功能是否启动的入口，配置页中包括开关控件，开关控件用于启动或停止启动手势动画的播放功能；在接收到处于停止启动状态的开关控件上的触发操作后，确定手势动画的音视频的资源包是否下载；在资源包未下载时，确定首次启动手势动画的播放功能；在资源包已下载时，确定非首次启动手势动画的播放功能。
在一种可能的设计中，第一处理模块，具体用于在首次启动手势动画的播放功能时，向第二服务器发送第一请求，第一请求用于请求启动手势动画的播放功能以及下载资源包，第一请求中携带有预设类别；从第二服务器接收第一响应，第一响应中携带有第一标识、第二标识、预设类别和资源包，第一标识用于表示第二服务器将手势动画的播放功能的当前状态更新为启动状态，第二标识用于表示可使用手势动画的播放功能；在接收到第二标识后，存储预设类别和资源包，并识别手势类别和手势位置。
在一种可能的设计中，第一处理模块，具体用于在非首次启动手势动画的播放功能时，向第二服务器发送第二请求，第二请求用于请求启动手势动画的播放功能，第二请求中携带有预设类别；从第二服务器接收第二响应，第二响应中携带有第一标识、第二标识和预设类别，第一标识用于表示第二服务器将手势动画的播放功能的当前状态更新为启动状态，第二标识用于表示可使用手势动画的播放功能；在接收到第二标识后，识别手势类别和手势位置。
在一种可能的设计中，第一处理模块，还用于在接收到处于启动状态的开关控件上的触发操作后，确定停止启动手势动画的播放功能。
在一种可能的设计中，第一处理模块，具体用于在停止启动手势动画的播放功能时，向第二服务器发送第三请求，第三请求用于请求停止启动手势动画的播放功能，第三请求中携带有预设类别；从第二服务器接收第三响应，第三响应中携带有第三标识、第四标识和预设类别，第三标识用于表示第二服务器将手势动画的播放功能的当前状态更新为停止启动状态，第四标识用于表示停止使用手势动画的播放功能；在接收到第四标识后，停止识别手势类别和手势位置。
上述第三方面以及上述第三方面的各可能的设计中所提供的基于手势的交互装置，其有益效果可以参见上述第一方面和第一方面的各可能的实施方式所带来的有益效果，在此不再赘述。
第四方面，本公开提供了一种基于手势的交互装置，该装置应用于看播用户的客户端；该装置包括：
接收模块，用于在进入到主播用户启动的一个网络直播后，通过第一服务器从主播用户的客户端接收第一内容，第一内容用于表示手势动画的播放情况，第一内容为主播用户的客户端在主播用户的手势对应的手势类别与手势动画的预设类别匹配时发送的；
第二处理模块，用于基于与第一内容，在与主播用户的手势对应的手势位置对应的第二区域中播放手势动画，并检测第二区域上的触发操作，第二区域上的触发操作用于触发目标页的显示，目标页用于提供与主播用户交互的入口。
在一种可能的设计中，第一内容中包括：开始标识、预设类别、手势位置和/或触发标识，开始标识用于表示开始播放手势动画，预设类别用于确定手势动画的音视频，手势位置用于确定第二区域，第二区域上的触发标识用于表示目标页的网页地址或者目标页在看播用户的客户端中的页面标识。
在一种可能的设计中，第二处理模块，还用于在第二区域中包括手势控件，手势控件用于触发目标页的显示；在接收到手势控件上的触发操作后，显示目标页。
在一种可能的设计中，第二处理模块，还用于通过第一服务器从主播用户的客户端接收第二内容，第二内容用于表示手势动画的停止播放情况，第二内容为主播用户的客户端在手势动画播放结束时发送的；基于第二内容，在第二区域中停止播放手势动画，并屏蔽第二区域上的触发操作。
在一种可能的设计中，第二内容中包括：结束标识和预设类别，结束标识用于表示结束播放手势动画，预设类别用于确定手势动画的音视频。
上述第四方面以及上述第四方面的各可能的设计中所提供的基于手势的交互装置，其有益效果可以参见上述第二方面和第二方面的各可能的实施方式所带来的有益效果，在此不再赘述。
第五方面，本公开提供了一种电子设备，包括：存储器和处理器；存储器用于存储程序指令；处理器用于调用存储器中的程序指令使得电子设备执行第一方面及第一方面任一种可能的设计中的基于手势的交互方法，和/或，处理器用于调用存储器中的程序指令使得电子设备执行第二方面及第二方面任一种可能的设计中的基于手势的交互方法。
第六方面，本公开提供了一种计算机存储介质，包括计算机指令，当计算机指令在电子设备上运行时，使得电子设备执行第一方面及第一方面任一种可能的设计中的基于手势的交互方法，和/或，使得电子设备执行第二方面及第二方面任一种可能的设计中的基于手势的交互方法。
第七方面，本公开提供了一种计算机程序产品，当计算机程序产品在计算机上运行时，使得计算机执行第一方面及第一方面任一种可能的设计中的基于手势的交互方法，和/或，使得计算机执行第二方面及第二方面任一种可能的设计中的基于手势的交互方法。
第八方面，本公开提供了一种芯片系统，芯片系统应用于包括显示器、存储器和传感器的电子设备；芯片系统包括：处理器；当处理器执行存储器中存储的计算机指令时，电子设备执行第一方面及第一方面任一种可能的设计中的基于手势的交互方法，和/或，电子设备执行第二方面及第二方面任一种可能的设计中的基于手势的交互方法。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。
为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的通信系统的架构示意图；
图2A-图2K为本公开实施例提供的人机交互界面示意图；
图3为本公开实施例提供的基于手势的交互方法的信令交互图；
图4为本公开实施例提供的基于手势的交互方法的信令交互图；
图5为本公开实施例提供的基于手势的交互方法的信令交互图；
图6为本公开实施例提供的基于手势的交互方法的信令交互图；
图7为本公开实施例提供的基于手势的交互方法的信令交互图；
图8为本公开实施例提供的基于手势的交互装置的结构示意图；
图9为本公开实施例提供的基于手势的交互装置的结构示意图。
具体实施方式
为了能够更清楚地理解本公开的上述目的、特征和优点，下面将对本公开的方案进行进一步描述。需要说明的是，在不冲突的情况下，本公开的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本公开，但本公开还可以采用其他不同于在此描述的方式来实施；显然，说明书中的实施例只是本公开的一部分实施例，而不是全部的实施例。
请参阅图1，图1为本公开实施例提供的通信系统的架构示意图。
如图1所示，本公开提供的通信系统可以包括：服务器和客户端，服务器与客户端之间可实现相互通信。
其中，客户端可为具备开启网络直播功能的客户端(简称为主播用户的客户端)，也可为具备进入到网络直播功能的客户端(简称为看播用户的客户端)，也可为兼顾开启网络直播和进入到网络直播这两个功能的客户端。
其中，客户端可通过终端设备中的应用程序(application，APP)、公众号、网页等方式实现本公开的虚拟直播间的显示方法，终端设备可以包括手机(如折叠屏手机、智能手机等)、个人数字助理(personal digital assistant，PDA)、平板电脑、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本、可穿戴电子设备、智能家居设备等设备，本公开对终端设备的具体类型不作任何限制。
其中，本公开对终端设备的操作系统的类型不做限定。例如，Android系统、Linux系统、Windows系统或者iOS系统等。
其中，本公开对电子设备的操作系统的类型不做限定。例如，Android系统、Linux系统、Windows系统、iOS系统等。
为了便于说明，图1中，以通信系统包括主播用户的客户端、看播用户的客户端、第一服务器和第二服务器进行举例示意。其中，第一服务器为内容分发网络(contentdelivery network，CDN)对应的服务器。第二服务器和第二服务器可为相同或不同的服务器。
本公开中，主播用户的客户端与看播用户的客户端可相互通信，可理解为主播用户的客户端与看播用户的客户端可通过内容分发网络第一服务器同步一个网络直播中的直播流。
其中，本公开提及的直播流可包括：网络直播的音视频和手势动画的音视频，手势动画为预设类别对应的手势的音视频。
主播用户的客户端可对网络直播的音视频进行打包处理，得到数据包1。主播用户的客户端可采用补充增强信息(Supplemental Enhancement Information，SEI)对手势动画的播放情况/停止播放情况进行打包处理，得到数据包2。
主播用户的客户端可将数据包1与数据包2共同打包成数据包3，并将数据包3发送给第一服务器。在看播用户进入到主播用户开启的网络直播后，看播用户的客户端向第一服务器请求数据。第一服务器可将数据包3发送给看播用户的客户端。
看播用户的客户端对数据包3进行解包处理，得到数据包1与数据包2。看播用户可对数据包1进行解包处理，得到网络直播的音视频。看播用户的客户端可采用SEI对数据包2进行解包处理，得到手势动画的播放情况/停止播放情况。
从而，看播用户的客户端基于网络直播的音视频和手势动画的播放情况，可在网络直播中执行播放手势动画的相关操作；基于网络直播的音视频和手势动画的停止播放情况，可在网络直播中执行停止播放手势动画的相关操作。
其中，SEI属于码流范畴，提供了向视频码流中加入额外信息的方法，是H.264/H.265等视频压缩标准的特性之一。从而，可保障网络直播与手势动画的同步。
其中，手势动画的播放情况可表明手势动画的预设类别、手势动画的开始播放时刻、手势动画的显示位置、手势动画的音视频、手势动画的触发区域被启动、触发标识等内容。
触发区域上的触发操作用于触发目标页的显示，目标页用于提供与主播用户交互的入口。在一些实施例中，触发区域中可包括手势控件，手势控件用于触发目标页的显示。
触发标识用于表示目标页的网页地址或者目标页在看播用户的客户端中的页面标识。
其中，本公开对目标页的具体实现方式不做限定。在一些实施例中，目标页可为关注活动页，用于提供关注主播用户的入口。或者，目标页可为粉丝团面板，用于提供加入主播用户的粉丝团的入口。或者，目标页可为礼物面板，用于提供向主播用户送礼物的入口。
其中，手势动画的停止播放情况可表明手势动画的预设类别、手势动画的停止播放时刻内容、手势动画的触发区域被屏蔽等内容。
本公开中，主播用户的客户端中可以包括：前端和能力模块。
前端，用于提供配置页的入口、显示配置页以及通知手势动画的播放功能是否启动。
其中，配置页的入口可通过设置在网络直播的页面中的横幅区域进行触发，即横幅区域用于触发配置页的显示。
其中，配置页用于提供手势动画的播放功能是否启动的入口。在一些实施例中，配置页中可以包括：开关控件，开关控件用于启动或停止启动手势动画的播放功能。
其中，开关控件的启动状态和停止启动状态可采用开关值来进行表示。在一些实施例中，在开关控件处于启动状态时，开关值可设置为“1”；在开关控件处于停止启动状态时，开关值可设置为“0”。
在网络直播开播后，主播用户的客户端可从第二服务器获取手势动画的播放功能的历史状态。主播用户的客户端可向前端同步手势动画的播放功能的历史状态。前端基于手势动画的播放功能的历史状态，可显示处于启动状态或停止启动状态的开关控件。
前端可接收到开关控件上的触发操作，确定出开关控件的开关值。前端基于开关控件的开关值可确定手势动画的播放功能的当前状态。前端可向主播用户的客户端通知手势动画的播放功能的当前状态。
从而，在手势动画的播放功能的当前状态处于启动状态时，主播用户的客户端可判断手势动画的音视频的资源包是否下载。
在手势动画的音视频的资源包未下载时，主播用户的客户端可确定首次启动手势动画的播放功能。从而，主播用户的客户端可向第二服务器请求更新手势动画的播放功能的当前状态以及手势动画的音视频的资源包。第二服务器可向主播用户的客户端通知已更新手势动画的播放功能的当前状态、通知手势动画的播放功能可使用以及发送手势动画的音视频的资源包。主播用户的客户端便可存储手势动画的音视频的资源包，并开始识别主播用户的手势。
在手势动画的音视频的资源包已下载时，主播用户的客户端可确定非首次启动手势动画的播放功能。从而，主播用户的客户端可向第二服务器请求更新手势动画的播放功能的当前状态。第二服务器可向主播用户的客户端通知已更新手势动画的播放功能的当前状态以及通知手势动画的播放功能可使用。主播用户的客户端便可开始识别主播用户的手势。
在手势动画的播放功能的当前状态处于停止启动状态时，主播用户的客户端可确定停止启动手势动画的播放功能。从而，主播用户的客户端可向第二服务器请求更新手势动画的播放功能的当前状态。第二服务器可向主播用户的客户端通知已更新手势动画的播放功能的当前状态以及通知手势动画的播放功能停止使用。主播用户的客户端便可停止识别主播用户的手势。
能力模块，用于在停止启动手势动画的播放功能时，停止识别主播用户的手势对应的手势类别和手势位置。在启动手势动画的播放功能时，识别主播用户的手势对应的手势类别和手势位置，并将识别出的结果传输给主播用户的客户端，使得主播用户的客户端进行手势类别的匹配，以便在匹配成功后通过第一服务器与看播用户的客户端同步执行播放手势动画的相关操作。
能力模块，还用于在手势动画的播放结束后，通知主播用户的客户端停止播放手势动画，以便主播用户的客户端通过第一服务器与看播用户的客户端同步执行停止播放手势动画的相关操作。
基于前述描述，结合图2A-图2K，以电子设备为手机，且主播用户的手机和看播用户的手机中均安装有的客户端为短视频社交APP(简称应用1和应用2)，预设类别为张开五指为例，介绍本公开提供的基于手势的交互方法的具体实现过程。
请参阅图2A-图2K，图2A-图2K为本公开实施例提供的人机交互界面示意图。
应用1可在主播用户的手机上显示图2A所示的用户界面10，用户界面10用于显示应用1中的主播用户开启的一个网络直播。
图2A中，用户界面10中可包括横幅区域101，用户可从用户界面10触发横幅区域101。其中，横幅区域101用于触发配置页的显示，以便进入到配置页。另外，横幅区域101还可用于介绍手势动画的播放功能的活动通知。本公开对横幅区域101的具体实现方式不做限定。
在应用1接收到主播用户在图2A所示的用户界面10中执行的如点击横幅区域101的操作后，应用1可在用户界面10上显示图2B示例性所示的窗口102，窗口102用于显示配置页。
图2B中，窗口102应用可用于介绍手势动画的播放功能的活动说明。本公开对窗口102的具体实现方式不做限定。
在应用1接收到主播用户在图2B所示的窗口102中执行的如滑动操作后，应用1可在窗口102上显示图2C示例性所示的开关控件103。
其中，开关控件103用于启动或者停止启动手势动画的播放功能，且开关控件103可在启动状态和停止启动状态之间相互切换。
图2C中，开关控件103处于停止启动状态，即表明停止启动手势动画的播放功能。
在应用1接收到主播用户在图2B所示的窗口102中执行的如切换开关控件103的状态的操作后，在手势动画的音视频的资源包未下载时，应用1可在窗口102上显示图2D示例性所示的更新状态后的开关控件103和窗口104。在手势动画的音视频的资源包已下载时，应用1可在窗口102上显示图2D示例性所示的更新状态后的开关控件103。
图2D中，开关控件103处于启动状态，即表明启动手势动画的播放功能。窗口104，用于表示手势动画的音视频的资源包的下载进度，如表示下载成功的通知内容或者表示正在下载的通知内容。
综上，应用1便启动了手势动画的播放功能。
此外，在应用1接收到主播用户在图2D所示的窗口102中执行的如切换开关控件103的状态的操作后，应用1可在窗口102上显示图2C示例性所示的更新状态后的开关控件103。图2C中，开关控件103处于停止启动状态，即表明停止启动手势动画的播放功能。从而，应用1实现了停止启动手势动画的播放功能的过程。
需要说明的是，除了上述实现方式之外，在应用1接收到主播用户在图2A所示的用户界面10中执行的如点击横幅区域101的操作后，应用1可在用户界面10上显示图2C示例性所示的包含有开关控件103的窗口102。
另外，在手势动画的音视频的资源包未下载时，应用1也可在窗口102上不显示窗口104。
另外，应用1中的前端可实现横幅区域101和配置页102的显示，以及通过检测开关控件103是处于启动状态还是处于停止启动状态，实现开关控件103的显示。应用1可实现窗口104的显示。
在应用1接收到主播用户在图2D所示的用户界面10的空白区域中执行的如点击的操作后，应用1可在手机上显示图2E示例性所示的用户界面10。此时，应用1中的手势动画的播放功能处于启动状态。
当主播用户做出一个手势时，应用1可在主播用户的手机上显示图2E所示的用户界面10，用户界面10用于显示该手势。
并且，应用1可实时识别该手势对应的手势类别和手势位置，并对手势类别与手势动画的预设列表进行匹配。
在手势类别与手势动画的预设列表匹配时，应用1可在用户界面10上显示图2F所示的显示区域105和手势控件106。其中，显示区域105，用于播放手势动画。手势控件106，用于触发目标页的显示。
需要说明的是，显示区域105和手势控件106的显示用于通知主播用户所做出的手势与手势动画的预设类别匹配，以及手势动画能够正常播放。另外，应用1可屏蔽手势控件106上的触发操作，即在应用1接收到主播用户执行的如点击手势控件106的操作后，应用1不会显示目标页。
对应的，在主播用户做出一个手势时，应用1可通过第一服务器向应用2同步网络直播的音视频。从而，应用2基于同步的网络直播的音视频，可在看播用户的手机上显示图2G所示的用户界面20，用户界面20用于显示应用2中看播用户进入到的主播用户开启的一个网络直播。
在手势类别与手势动画的预设列表匹配时，应用1可过第一服务器向应用2同步网络直播的音视频和手势动画的音视频。从而，应用2基于网络直播的音视频和手势动画的音视频，可在用户界面20上显示图2H所示的显示区域201和手势控件202，且检测手势控件202上的触发操作，以便进入到目标页中。其中，显示区域201，用于播放手势动画。手势控件202，用于触发目标页的显示。
在应用2接收到看播用户在图2H所示的用户界面20中执行的如点击手势控件202的操作后，应用2可在用户界面20上显示图2I示例性所示的窗口203，或者，应用2可在用户界面20上显示图2J示例性所示的窗口204，或者，应用2可在用户界面20上显示图2K示例性所示的窗口205。
其中，窗口203用于显示关注活动页的目标页。窗口204用于显示粉丝团面板的目标页。窗口205用于显示礼物面板的目标页。
需要说明的是，本公开包括但不限于窗口203、窗口204和窗口205中显示的目标页。
综上，在主播用户做出一个手势后，应用1可播放与该手势的手势类别匹配的手势动画，且通过第一服务器向应用2同步该手势动画。应用2可向看播用户播放该手势动画，与此同时，检测手势控件上的触发操作，以便在看播用户在手势控件上执行操作操作后，应用2及时进入到目标页中，有利于实现看播用户与主播用户之间的密切互动。
此外，在手势动画播放结束后，应用1可在主播用户的手机上显示图2E所示的用户界面10，不再继续播放手势动画。并且，应用1可通过第一服务器向应用2同步网络直播的音视频且不同步手势动画的音视频。从而，应用2基于网络直播的音视频，可在手机显示图2G所示的用户界面20，且屏蔽手势控件202所在区域的触发操作。
综上，在手势动画播放结束后，应用1可停止播放该手势动画，且通过第一服务器向应用2同步停止该手势动画。应用2可向看播用户停止播放该手势动画，与此同时，屏蔽手势控件上的触发操作，可防止看播用户的误操作。
基于图1以及图2A-图2K实施例的描述，本公开以实施例将以图1中的主播用户的客户端、第一服务器和看播用户的客户端为例，结合附图和应用场景，对本公开提供的基于手势的交互方法进行详细阐述。
请参阅图3，图3为本公开实施例提供的基于手势的交互方法的信令交互图。如图3所示，本公开提供的基于手势的交互方法可以包括：
S101、主播用户的客户端在一个网络直播的直播过程中，在手势动画的播放功能处于启动状态时，识别主播用户的手势对应的手势类别和手势位置。
在一个网络直播的直播过程中，主播用户可在主播用户的客户端中做出一个手势。在手势动画的播放功能处于启动状态时，主播用户的客户端可实时检测主播用户的手势对应的手势类别和手势位置。
其中，本公开对手势类别的具体实现方式不做限定。在一些实施例中，手势类别可包括但不限于张开五指、笔芯、握紧拳头等类别。手势位置为该手势在主播用户的电子设备的屏幕中进行显示的区域，可采用如中心坐标和距离大小或者多个坐标的方式进行表示。
并且，主播用户的客户端可判断该手势类别与手势动画的预设类别是否匹配。其中，本公开对主播用户的客户端实现的手势类别匹配的具体实现方式不做限定。在一些实施例中，主播用户的客户端可引入图像相似度算法进行手势类别的匹配。
在手势类别与手势动画的预设类别不匹配时，主播用户的客户端可继续实时检测主播用户的手势对应的手势类别和手势位置。在手势类别与手势动画的预设类别匹配时，主播用户的客户端可执行步骤S102。
S102、在手势类别与手势动画的预设类别匹配时，在与手势位置对应的第一区域中播放手势动画，并向第一服务器发送第一内容。
在手势类别与手势动画的预设类别匹配时，主播用户的客户端可确定与手势位置对应的第一区域。其中，第一区域为手势动画在主播用户的电子设备的屏幕中进行播放的区域，可采用如中心坐标和距离大小或者多个坐标的方式进行表示，如图2F所示的窗口106的描述。
从而，主播用户的客户端可在第一区域中播放手势动画，并屏蔽第一区域上的触发操作。与此同时，主播用户的客户端可对网络直播的音视频和第一内容进行打包处理，得到一个数据包。主播用户的客户端将该数据包发送给第一服务器。
其中，第一内容用于表示手势动画的播放情况。本公开对第一内容的具体实现方式不做限定。在一些实施例中，第一内容中可以包括：开始标识、预设类别、手势位置和触发标识。
开始标识用于表示开始播放手势动画，如采用开始播放时刻进行表示。预设类别用于确定手势动画的音视频。手势位置用于确定手势动画在看播用户的电子设备的屏幕中进行播放的第二区域，如图2H所示的显示区域201或手势控件202的描述。第二区域上的触发标识用于表示目标页的网页地址或者目标页在看播用户的客户端中的页面标识。
另外，在第二区域上的触发标识用于表示目标页的网页地址时，目标页可为一个网页，如图2I所示的窗口203的描述。在第二区域上的触发标识用于表示目标页在看播用户的客户端中的页面标识时，目标页可为一个看播用户的客户端中的一个功能面板，如图2J所示的窗口204或者图2K所示的窗口205的描述。
在一些实施例中，步骤S102的具体实现过程可参见图2E变为图2F所示的实施例的描述，此处不做赘述。
S103、看播用户的客户端在进入到主播用户启动的一个网络直播后，向第一服务器请求第一内容。
S104、第一服务器向看播用户的客户端发送第一内容。
在看播用户进入到主播用户启动的一个网络直播后，看播用户的客户端基于网络直播的接入地址或身份标识号(identity document，ID)等信息，可确定出CDN播放地址。
从而，看播用户的客户端基于CDN播放地址，可向第一服务器请求该数据包。第一服务器可向看播用户的客户端发送该数据包。看播用户的客户端可对该数据包进行解包处理，得到网络直播的音视频和第一内容。
S105、看播用户的客户端基于第一内容，在与手势位置对应的第二区域中播放手势动画，并检测第二区域上的触发操作。
看播用户的客户端在解析到第一内容后，可确定出手势动画以及与手势位置对应的第二区域。其中，第二区域为手势动画在看播用户的电子设备的屏幕中进行播放的区域，可采用如中心坐标和距离大小或者多个坐标的方式进行表示，如图2H所示的显示区域201或手势控件202的描述。
看播用户的客户端在展示网络直播的音视频的同时，可在第二区域中播放手势动画，并检测第二区域上的触发操作。从而，看播用户的客户端在接收到第二区域上的触发操作后，可及时显示目标页，提升看播用户的互动体验。
其中，第二区域上的触发操作用于触发目标页的显示，目标页用于提供与主播用户交互的入口。
在一些实施例中，步骤S105的具体实现过程可参见图2H所示的实施例的描述，此处不做赘述。
本公开提供的基于手势的交互方法，通过在一个网络直播的直播过程中，主播用户的客户端在手势动画的播放功能处于启动状态时，可识别主播用户的手势对应的手势类别和手势位置。在手势类别与手势动画的预设类别匹配时，主播用户的客户端在与手势位置对应的第一区域中播放手势动画，并通过第一服务器向看播用户的客户端发送第一内容。看播用户的客户端基于第一内容，可在与手势位置对应的第二区域中播放手势动画，并检测第二区域上的触发操作。从而，在网络直播的直播过程中，在主播用户做出一个特定的手势后，不仅使得看播用户的客户端能够同步播放主播用户的客户端的手势动画，还使得看播用户的客户端展示与主播用户互动的触发区域，提升了看播用户与主播用户之间的密切互动程度，增加了用户使用客户端的兴趣。
基于步骤S105实施例的描述，看播用户的客户端可在第二区域中可以包括：手势控件，手势控件用于触发目标页的显示。从而，在接收到手势控件上的触发操作后，看播用户的客户端可显示目标页。
基于上述实施例的描述，本公开以实施例将以图1中的主播用户的客户端、第一服务器和看播用户的客户端为例，结合附图和应用场景，对本公开提供的基于手势的交互方法进行详细阐述。
请参阅图4，图4为本公开实施例提供的基于手势的交互方法的信令交互图。如图4所示，本公开提供的基于手势的交互方法可以包括：
S201、主播用户的客户端在手势动画播放结束时，在第一区域中停止播放手势动画，并向第一服务器发送第二内容。
在手势动画播放结束时，主播用户的客户端可在第一区域中T停止播放手势动画，并屏蔽第一区域上的触发操作。与此同时，主播用户的客户端可对网络直播的音视频和第二内容进行打包处理，得到另一个数据包。主播用户的客户端将该数据包发送给第一服务器。
其中，第二内容用于表示手势动画的停止播放情况。本公开对第二内容的具体实现方式不做限定。在一些实施例中，第二内容中包括：结束标识和预设类别。结束标识用于表示结束播放手势动画，如采用结束播放时刻进行表示。预设类别用于确定手势动画的音视频。
在一些实施例中，步骤S201的具体实现过程可参见图2F变为图2E所示的实施例的描述，此处不做赘述。
S202、看播用户的客户端在进入到主播用户启动的一个网络直播后，向第一服务器请求第二内容。
S203、第一服务器向看播用户的客户端发送第二内容。
由于看播用户的客户端已经确定出CDN播放地址。因此，看播用户的客户端基于CDN播放地址，可向第一服务器请求该数据包。第一服务器可向看播用户的客户端发送该数据包。看播用户的客户端可对该数据包进行解包处理，得到网络直播的音视频和第二内容。
S204、看播用户的客户端基于第二内容，在第二区域中停止播放手势动画，并屏蔽第二区域上的触发操作。
看播用户的客户端在解析到第二内容后，在展示网络直播的音视频的同时，可在第二区域中停止播放手势动画，并屏蔽第二区域上的触发操作。
在一些实施例中，步骤S204的具体实现过程可参见图2H变为图2G所示的实施例的描述，此处不做赘述。
综上，在手势动画结束播放后，在网络直播的直播过程中，不仅使得看播用户的客户端能够同步停止播放主播用户的客户端的手势动画，还使得看播用户的客户端屏蔽与主播用户互动的触发区域，避免看播用户产生的误操作，完成了播放手势动画的完整过程。
基于上述实施例的描述，主播用户的客户端在展示网络直播的音视频的页面中可设置一个横幅区域，用于触发配置页的显示。
其中，本公开对横幅区域的具体实现方式不做限定。在一些实施例中，横幅区域的具体实现方式可参见图2A所示的用户界面10中的横幅区域101的描述。
从而，在接收到横幅区域上的触发操作后，主播用户的客户端可显示配置页。其中，配置页用于提供手势动画的播放功能是否启动的入口，配置页可介绍手势动画的播放功能的活动说明。本公开对配置页的具体实现方式不做限定。在一些实施例中，配置页的具体实现方式可参见图2B所示的用户界面10中的窗口102的描述。
并且，配置页中可以包括：开关控件，开关控件用于启动或停止启动手势动画的播放功能。
其中，本公开对开关控件的具体实现方式不做限定。在一些实施例中，开关控件的具体实现方式可参见图2C和图2D所示的用户界面10中的开关控件103的描述。
从而，在接收到处于停止启动状态的开关控件上的触发操作后，主播用户的客户端可确定手势动画的音视频的资源包是否下载，且确定启动手势动画的播放功能。从而，实现手势动画的音视频的资源包的下载以及启动手势动画的播放功能。
在资源包未下载时，主播用户的客户端可确定首次启动手势动画的播放功能。
其中，前述过程可参见图2C变为图2D所示的实施例的描述。
下面，本公开以实施例将以图1中的主播用户的客户端和第二服务器为例，在首次启动手势动画的播放功能时，对主播用户的客户端实现手势动画的音视频的资源包的下载以及启动手势动画的播放功能的具体实现过程进行详细阐述。
请参阅图5，图5为本公开实施例提供的基于手势的交互方法的信令交互图。如图5所示，本公开提供的基于手势的交互方法可以包括：
S301、主播用户的客户端向第二服务器发送第一请求，第一请求用于请求启动手势动画的播放功能以及下载资源包，第一请求中携带有预设类别。
S302、第二服务器向主播用户的客户端发送第一响应，第一响应中携带有第一标识、第二标识、预设类别和资源包，第一标识用于表示第二服务器将手势动画的播放功能的当前状态更新为启动状态，第二标识用于表示可使用手势动画的播放功能。
S303、主播用户的客户端在接收到第二标识后，存储预设类别和资源包，并识别手势类别和手势位置。
综上，主播用户的客户端实现了手势动画的音视频的资源包的下载以及启动手势动画的播放功能，为识别主播用户的手势以及播放手势动画做了准备。
在资源包已下载时，主播用户的客户端可确定非首次启动手势动画的播放功能。
其中，前述过程可参见图2C变为图2D所示的实施例的描述。
下面，本公开以实施例将以图1中的主播用户的客户端和第二服务器为例，在非首次启动手势动画的播放功能时，对主播用户的客户端实现启动手势动画的播放功能的具体实现过程进行详细阐述。
请参阅图6，图6为本公开实施例提供的基于手势的交互方法的信令交互图。如图6所示，本公开提供的基于手势的交互方法可以包括：
S401、主播用户的客户端向第二服务器发送第二请求，第二请求用于请求启动手势动画的播放功能，第二请求中携带有预设类别。
S402、第二服务器向主播用户的客户端发送第二响应，第二响应中携带有第一标识、第二标识和预设类别，第一标识用于表示第二服务器将手势动画的播放功能的当前状态更新为启动状态，第二标识用于表示可使用手势动画的播放功能。
S403、主播用户的客户端在接收到第二标识后，识别手势类别和手势位置。
综上，主播用户的客户端实现了启动手势动画的播放功能，无需再次下载手势动画的音视频的资源包，为识别主播用户的手势以及播放手势动画做了准备。
在接收到处于启动状态的开关控件上的触发操作后，主播用户的客户端可确定停止启动手势动画的播放功能。从而，实现停止启动手势动画的播放功能。
其中，前述过程可参见图2D变为图2C所示的实施例的描述。
下面，本公开以实施例将以图1中的主播用户的客户端和第二服务器为例，在停止启动手势动画的播放功能时，对主播用户的客户端实现停止启动手势动画的播放功能的具体实现过程进行详细阐述。
请参阅图7，图7为本公开实施例提供的基于手势的交互方法的信令交互图。如图7所示，本公开提供的基于手势的交互方法可以包括：
S501、主播用户的客户端向第二服务器发送第三请求，第三请求用于请求停止启动手势动画的播放功能，第三请求中携带有预设类别。
S502、第二服务器向主播用户的客户端发送第三响应，第三响应中携带有第三标识、第四标识和预设类别，第三标识用于表示第二服务器将手势动画的播放功能的当前状态更新为停止启动状态，第四标识用于表示停止使用手势动画的播放功能。
S503、主播用户的客户端在接收到第四标识后，停止识别手势类别和手势位置。
综上，主播用户的客户端实现了停止启动手势动画的播放功能，向主播用户提供了是否启动手势动画的播放功能的自由选择。
示例性地，本公开提供一种基于手势的交互装置。
请参阅图8，图8为本公开实施例提供的基于手势的交互装置的结构示意图。本公开的基于手势的交互装置可设置在电子设备中，可实现上述图1-图7实施例的基于手势的交互方法对应于主播用户的客户端的操作。
如图8所示，本公开提供的基于手势的交互装置100可以包括：识别模块101和第一处理模块102。
识别模块101，用于在一个网络直播的直播过程中，在手势动画的播放功能处于启动状态时，识别主播用户的手势对应的手势类别和手势位置；
第一处理模块102，用于在手势类别与手势动画的预设类别匹配时，在与手势位置对应的第一区域中播放手势动画，并通过第一服务器向看播用户的客户端发送第一内容，第一内容用于表示手势动画的播放情况，以使看播用户的客户端基于第一内容，在与手势位置对应的第二区域中播放手势动画，并检测第二区域上的触发操作，第二区域上的触发操作用于触发目标页的显示，目标页用于提供与主播用户交互的入口。
其中，第一处理模块102，还用于在第一区域中播放所述手势动画的同时，屏蔽第一区域上的触发操作。
在一些实施例中，第一内容中包括：开始标识、预设类别、手势位置和/或触发标识，开始标识用于表示开始播放手势动画，预设类别用于确定手势动画的音视频，手势位置用于确定第二区域，第二区域上的触发标识用于表示目标页的网页地址或者目标页在看播用户的客户端中的页面标识。
在一些实施例中，第一处理模块102，还用于在手势动画播放结束时，在第一区域中停止播放手势动画，并通过第一服务器向看播用户的客户端发送第二内容，第二内容用于表示手势动画的停止播放情况，以使看播用户的客户端基于第二内容，在第二区域中停止播放手势动画，并屏蔽第二区域上的触发操作。
在一些实施例中，第二内容中包括：结束标识和预设类别，结束标识用于表示结束播放手势动画，预设类别用于确定手势动画的音视频。
在一些实施例中，第一处理模块102，还用于在接收到横幅区域上的触发操作后，显示配置页，配置页用于提供手势动画的播放功能是否启动的入口，配置页中包括开关控件，开关控件用于启动或停止启动手势动画的播放功能；在接收到处于停止启动状态的开关控件上的触发操作后，确定手势动画的音视频的资源包是否下载；在资源包未下载时，确定首次启动手势动画的播放功能；在资源包已下载时，确定非首次启动手势动画的播放功能。
在一些实施例中，第一处理模块102，具体用于在首次启动手势动画的播放功能时，向第二服务器发送第一请求，第一请求用于请求启动手势动画的播放功能以及下载资源包，第一请求中携带有预设类别；从第二服务器接收第一响应，第一响应中携带有第一标识、第二标识、预设类别和资源包，第一标识用于表示第二服务器将手势动画的播放功能的当前状态更新为启动状态，第二标识用于表示可使用手势动画的播放功能；在接收到第二标识后，存储预设类别和资源包，并识别手势类别和手势位置。
在一些实施例中，第一处理模块，具体用于在非首次启动手势动画的播放功能时，向第二服务器发送第二请求，第二请求用于请求启动手势动画的播放功能，第二请求中携带有预设类别；从第二服务器接收第二响应，第二响应中携带有第一标识、第二标识和预设类别，第一标识用于表示第二服务器将手势动画的播放功能的当前状态更新为启动状态，第二标识用于表示可使用手势动画的播放功能；在接收到第二标识后，识别手势类别和手势位置。
在一些实施例中，第一处理模块102，还用于在接收到处于启动状态的开关控件上的触发操作后，确定停止启动手势动画的播放功能。
在一些实施例中，第一处理模块102，具体用于在停止启动手势动画的播放功能时，向第二服务器发送第三请求，第三请求用于请求停止启动手势动画的播放功能，第三请求中携带有预设类别；从第二服务器接收第三响应，第三响应中携带有第三标识、第四标识和预设类别，第三标识用于表示第二服务器将手势动画的播放功能的当前状态更新为停止启动状态，第四标识用于表示停止使用手势动画的播放功能；在接收到第四标识后，停止识别手势类别和手势位置。
本公开提供的基于手势的交互装置，可执行上述方法实施例，其具体实现原理和技术效果，可参见上述方法实施例，本公开此处不再赘述。
示例性地，本公开提供一种基于手势的交互装置。
请参阅图9，图9为本公开实施例提供的基于手势的交互装置的结构示意图。本公开的基于手势的交互装置可设置在电子设备中，可实现上述图1-图7实施例的基于手势的交互方法对应于看播用户的客户端的操作。
如图9所示，本公开提供的基于手势的交互装置200可以包括：接收模块201和第二处理模块202。
接收模块201，用于在进入到主播用户启动的一个网络直播后，通过第一服务器从主播用户的客户端接收第一内容，第一内容用于表示手势动画的播放情况，第一内容为主播用户的客户端在主播用户的手势对应的手势类别与手势动画的预设类别匹配时发送的；
第二处理模块202，用于基于与第一内容，在与主播用户的手势对应的手势位置对应的第二区域中播放手势动画，并检测第二区域上的触发操作，第二区域上的触发操作用于触发目标页的显示，目标页用于提供与主播用户交互的入口。
在一些实施例中，第一内容中包括：开始标识、预设类别、手势位置和/或触发标识，开始标识用于表示开始播放手势动画，预设类别用于确定手势动画的音视频，手势位置用于确定第二区域，第二区域上的触发标识用于表示目标页的网页地址或者目标页在看播用户的客户端中的页面标识。
在一些实施例中，第二处理模块202，还用于在第二区域中包括手势控件，手势控件用于触发目标页的显示；在接收到手势控件上的触发操作后，显示目标页。
在一些实施例中，第二处理模块202，还用于通过第一服务器从主播用户的客户端接收第二内容，第二内容用于表示手势动画的停止播放情况，第二内容为主播用户的客户端在手势动画播放结束时发送的；基于第二内容，在第二区域中停止播放手势动画，并屏蔽第二区域上的触发操作。
在一些实施例中，第二内容中包括：结束标识和预设类别，结束标识用于表示结束播放手势动画，预设类别用于确定手势动画的音视频。
本公开提供的基于手势的交互装置，可执行上述方法实施例，其具体实现原理和技术效果，可参见上述方法实施例，本公开此处不再赘述。
示例性地，本公开提供一种客户端，包括：一个或多个处理器；存储器；以及一个或多个计算机程序；其中一个或多个计算机程序被存储在存储器中；一个或多个处理器在执行一个或多个计算机程序时，使得客户端实现前文实施例的基于手势的交互方法。
示例性地，本公开提供一种芯片系统，芯片系统应用于包括显示器、存储器和传感器的电子设备；芯片系统包括：处理器；当处理器执行存储器中存储的计算机指令时，电子设备执行前文实施例的基于手势的交互方法。
示例性地，本公开提供一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器使得电子设备执行时实现前文实施例的基于手势的交互方法。
示例性地，本公开提供一种计算机程序产品，当计算机程序产品在计算机上运行时，使得计算机执行前文实施例的基于手势的交互方法。
在上述实施例中，全部或部分功能可以通过软件、硬件、或者软件加硬件的组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时，全部或部分地产生按照本公开实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如，固态硬盘(solid state disk，SSD))等。
需要说明的是，在本文中，诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本公开的具体实施方式，使本领域技术人员能够理解或实现本公开。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本公开的精神或范围的情况下，在其它实施例中实现。因此，本公开将不会被限制于本文所述的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (19)

1.一种基于手势的交互方法，其特征在于，所述方法应用于主播用户的客户端；所述方法包括：
识别主播用户的手势对应的手势类别和手势位置；
在所述手势类别与所述手势动画的预设类别匹配时，在与所述手势位置对应的第一区域中播放所述手势动画，并通过第一服务器向看播用户的客户端发送第一内容，所述第一内容用于表示所述手势动画的播放情况，以使所述看播用户的客户端基于所述第一内容，在与所述手势位置对应的第二区域中播放所述手势动画，并检测所述第二区域上的触发操作，所述第二区域上的触发操作用于触发目标页的显示，所述目标页用于提供与所述主播用户交互的入口。
2.根据权利要求1所述的方法，其特征在于，所述第一内容中包括：开始标识、所述预设类别、所述手势位置和/或触发标识，所述开始标识用于表示开始播放所述手势动画，所述预设类别用于确定所述手势动画的音视频，所述手势位置用于确定所述第二区域，所述第二区域上的触发标识用于表示所述目标页的网页地址或者所述目标页在所述看播用户的客户端中的页面标识。
3.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：
在所述手势动画播放结束时，在所述第一区域中停止播放所述手势动画，并通过所述第一服务器向所述看播用户的客户端发送第二内容，所述第二内容用于表示所述手势动画的停止播放情况，以使所述看播用户的客户端基于所述第二内容，在所述第二区域中停止播放所述手势动画，并屏蔽所述第二区域上的触发操作。
4.根据权利要求3所述的方法，其特征在于，所述第二内容中包括：结束标识和所述预设类别，所述结束标识用于表示结束播放所述手势动画，所述预设类别用于确定所述手势动画的音视频。
5.根据权利要求1-4任一项所述的方法，其特征在于，所述方法还包括：
在接收到横幅区域上的触发操作后，显示配置页，所述配置页用于提供所述手势动画的播放功能是否启动的入口，所述配置页中包括开关控件，所述开关控件用于启动或停止启动所述手势动画的播放功能；
在接收到处于停止启动状态的所述开关控件上的触发操作后，确定所述手势动画的音视频的资源包是否下载；
在所述资源包未下载时，确定首次启动所述手势动画的播放功能；
在所述资源包已下载时，确定非首次启动所述手势动画的播放功能。
6.根据权利要求5所述的方法，其特征在于，在首次启动所述手势动画的播放功能时，所述方法还包括：
向第二服务器发送第一请求，所述第一请求用于请求启动所述手势动画的播放功能以及下载所述资源包，所述第一请求中携带有所述预设类别；
从所述第二服务器接收第一响应，所述第一响应中携带有第一标识、第二标识、所述预设类别和所述资源包，所述第一标识用于表示所述第二服务器将所述手势动画的播放功能的当前状态更新为启动状态，所述第二标识用于表示可使用所述手势动画的播放功能；
在接收到所述第二标识后，存储所述预设类别和所述资源包，并识别所述手势类别和所述手势位置。
7.根据权利要求5所述的方法，其特征在于，在非首次启动所述手势动画的播放功能时，所述方法还包括：
向第二服务器发送第二请求，所述第二请求用于请求启动所述手势动画的播放功能，所述第二请求中携带有所述预设类别；
从所述第二服务器接收第二响应，所述第二响应中携带有第一标识、第二标识和所述预设类别，所述第一标识用于表示所述第二服务器将所述手势动画的播放功能的当前状态更新为启动状态，所述第二标识用于表示可使用所述手势动画的播放功能；
在接收到所述第二标识后，识别所述手势类别和所述手势位置。
8.根据权利要求5所述的方法，其特征在于，所述方法还包括：
在接收到处于启动状态的所述开关控件上的触发操作后，确定停止启动所述手势动画的播放功能。
9.根据权利要求8所述的方法，其特征在于，在停止启动所述手势动画的播放功能时，所述方法还包括：
向第二服务器发送第三请求，所述第三请求用于请求停止启动所述手势动画的播放功能，所述第三请求中携带有所述预设类别；
从所述第二服务器接收第三响应，所述第三响应中携带有第三标识、第四标识和所述预设类别，所述第三标识用于表示所述第二服务器将所述手势动画的播放功能的当前状态更新为停止启动状态，所述第四标识用于表示停止使用所述手势动画的播放功能；
在接收到所述第四标识后，停止识别所述手势类别和所述手势位置。
10.一种基于手势的交互方法，其特征在于，所述方法应用于看播用户的客户端；所述方法包括：
在进入到主播用户启动的一个网络直播后，通过第一服务器从所述主播用户的客户端接收第一内容，所述第一内容用于表示手势动画的播放情况，所述第一内容为所述主播用户的客户端在所述主播用户的手势对应的手势类别与所述手势动画的预设类别匹配时发送的；
基于与所述第一内容，在与所述主播用户的手势对应的手势位置对应的第二区域中播放所述手势动画，并检测所述第二区域上的触发操作，所述第二区域上的触发操作用于触发目标页的显示，所述目标页用于提供与所述主播用户交互的入口。
11.根据权利要求10所述的方法，其特征在于，所述第一内容中包括：开始标识、所述预设类别、所述手势位置和/或触发标识，所述开始标识用于表示开始播放所述手势动画，所述预设类别用于确定所述手势动画的音视频，所述手势位置用于确定所述第二区域，所述第二区域上的触发标识用于表示所述目标页的网页地址或者所述目标页在所述看播用户的客户端中的页面标识。
12.根据权利要求10或11所述的方法，其特征在于，在所述第二区域中包括手势控件，所述手势控件用于触发所述目标页的显示；所述方法还包括：
在接收到所述手势控件上的触发操作后，显示所述目标页。
13.根据权利要求10-12任一项所述的方法，其特征在于，所述方法还包括：
通过所述第一服务器从所述主播用户的客户端接收第二内容，所述第二内容用于表示所述手势动画的停止播放情况，所述第二内容为所述主播用户的客户端在所述手势动画播放结束时发送的；
基于所述第二内容，在所述第二区域中停止播放所述手势动画，并屏蔽所述第二区域上的触发操作。
14.根据权利要求13所述的方法，其特征在于，所述第二内容中包括：结束标识和所述预设类别，所述结束标识用于表示结束播放所述手势动画，所述预设类别用于确定所述手势动画的音视频。
15.一种基于手势的交互装置，其特征在于，所述装置应用于主播用户的客户端；所述装置包括：
识别模块，用于识别主播用户的手势对应的手势类别和手势位置；
第一处理模块，用于在所述手势类别与所述手势动画的预设类别匹配时，在与所述手势位置对应的第一区域中播放所述手势动画，并通过第一服务器向看播用户的客户端发送第一内容，所述第一内容用于表示所述手势动画的播放情况，以使所述看播用户的客户端基于所述第一内容，在与所述手势位置对应的第二区域中播放所述手势动画，并检测所述第二区域上的触发操作，所述第二区域上的触发操作用于触发目标页的显示，所述目标页用于提供与所述主播用户交互的入口。
16.一种基于手势的交互装置，其特征在于，所述装置应用于看播用户的客户端；所述装置包括：
接收模块，用于在进入到主播用户启动的一个网络直播后，通过第一服务器从所述主播用户的客户端接收第一内容，所述第一内容用于表示手势动画的播放情况，所述第一内容为所述主播用户的客户端在所述主播用户的手势对应的手势类别与所述手势动画的预设类别匹配时发送的；
第二处理模块，用于基于与所述第一内容，在与所述主播用户的手势对应的手势位置对应的第二区域中播放所述手势动画，并检测所述第二区域上的触发操作，所述第二区域上的触发操作用于触发目标页的显示，所述目标页用于提供与所述主播用户交互的入口。
17.一种客户端，包括：一个或多个处理器；存储器；以及一个或多个计算机程序；其中所述一个或多个计算机程序被存储在所述存储器中；其特征在于，所述一个或多个处理器在执行所述一个或多个计算机程序时，使得所述客户端实现如权利要求1-9任一项所述的基于手势的交互方法，和/或，使得所述客户端实现如权利要求10-14任一项所述的基于手势的交互方法。
18.一种计算机存储介质，其特征在于，包括计算机指令，当所述计算机指令在电子设备上运行时，使得所述电子设备执行如权利要求1-9任一项所述的基于手势的交互方法，和/或，使得所述电子设备执行如权利要求10-14任一项所述的基于手势的交互方法。
19.一种计算机程序产品，其特征在于，当所述计算机程序产品在计算机上运行时，使得所述计算机执行如权利要求1-9任一项所述的基于手势的交互方法，和/或，使得所述计算机执行如权利要求10-14任一项所述的基于手势的交互方法。
CN202110592514.0A 2021-05-28 2021-05-28 基于手势的交互方法、装置和客户端 Pending CN115469735A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN202110592514.0A CN115469735A (zh) 2021-05-28 2021-05-28 基于手势的交互方法、装置和客户端
EP22810377.6A EP4332732A1 (en) 2021-05-28 2022-05-12 Gesture-based interaction method and device, and client
PCT/CN2022/092451 WO2022247650A1 (zh) 2021-05-28 2022-05-12 基于手势的交互方法、装置和客户端
US18/520,876 US20240094826A1 (en) 2021-05-28 2023-11-28 Hand-gesture-based interaction method and apparatus, and client

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110592514.0A CN115469735A (zh) 2021-05-28 2021-05-28 基于手势的交互方法、装置和客户端

Publications (1)

Publication Number Publication Date
CN115469735A true CN115469735A (zh) 2022-12-13

Family

ID=84229506

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110592514.0A Pending CN115469735A (zh) 2021-05-28 2021-05-28 基于手势的交互方法、装置和客户端

Country Status (4)

Country Link
US (1) US20240094826A1 (zh)
EP (1) EP4332732A1 (zh)
CN (1) CN115469735A (zh)
WO (1) WO2022247650A1 (zh)

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9792716B2 (en) * 2014-06-13 2017-10-17 Arcsoft Inc. Enhancing video chatting
EP3272126A1 (en) * 2015-03-20 2018-01-24 Twitter, Inc. Live video stream sharing
CN107340852A (zh) * 2016-08-19 2017-11-10 北京市商汤科技开发有限公司 手势控制方法、装置和终端设备
US10412139B2 (en) * 2017-05-26 2019-09-10 Streamsure Solutions Limited Communication event
US10372298B2 (en) * 2017-09-29 2019-08-06 Apple Inc. User interface for multi-user communication session
KR102661019B1 (ko) * 2018-02-23 2024-04-26 삼성전자주식회사 얼굴에 대응하는 3차원 아바타를 이용하여 얼굴의 움직임이 반영된 3차원 아바타를 포함하는 이미지를 생성하는 전자 장치 및 그 동작 방법
US10531154B2 (en) * 2018-05-31 2020-01-07 International Business Machines Corporation Viewer-relation broadcasting buffer
US11659222B2 (en) * 2018-08-14 2023-05-23 Comcast Cable Communications, Llc Adaptive multicast streaming
US11106342B1 (en) * 2019-06-03 2021-08-31 Snap Inc. User interfaces to facilitate multiple modes of electronic communication
CN110703913B (zh) * 2019-09-27 2023-09-26 腾讯科技（深圳）有限公司 对象交互方法和装置、存储介质及电子装置
US11128586B2 (en) * 2019-12-09 2021-09-21 Snap Inc. Context sensitive avatar captions
US10887033B1 (en) * 2020-03-06 2021-01-05 Algoriddim Gmbh Live decomposition of mixed audio data
CN114616541A (zh) * 2020-05-13 2022-06-10 辉达公司 具有渲染的图形输出的会话ai平台
CN112073821A (zh) * 2020-09-08 2020-12-11 北京字节跳动网络技术有限公司 信息提示方法、装置、电子设备及计算机可读介质
US11509612B2 (en) * 2020-12-15 2022-11-22 Microsoft Technology Licensing, Llc Modifying an avatar to reflect a user's expression in a messaging platform
WO2022166338A1 (zh) * 2021-02-08 2022-08-11 海信视像科技股份有限公司 显示设备

Also Published As

Publication number Publication date
US20240094826A1 (en) 2024-03-21
WO2022247650A1 (zh) 2022-12-01
EP4332732A1 (en) 2024-03-06

Similar Documents

Publication Publication Date Title
EP4087258A1 (en) Method and apparatus for displaying live broadcast data, and device and storage medium
CN112817684B (zh) 用户界面显示方法、装置、终端及存储介质
JP6324495B2 (ja) チャットインターフェースでのゲーム実現の方法、装置および端末機器
CN113286159B (zh) 应用程序的页面显示方法、装置和设备
WO2019006939A1 (zh) 弹幕显示方法、装置及电子设备
CN110198484B (zh) 消息推送方法、装置及设备
WO2019047728A1 (zh) 开启快捷功能的方法、装置、移动终端及存储介质
EP3678008A1 (en) Message display method and device and terminal
EP4084488A1 (en) Video interaction method and device, electronic device and storage medium
CN106358059B (zh) 一种多媒体信息处理方法、设备及系统
US11132123B2 (en) Key display method, terminal, and non-transitory computer-readable medium
CN110413347B (zh) 应用程序中广告的处理方法、装置、存储介质及终端
US20150121301A1 (en) Information processing method and electronic device
CN114727146B (zh) 信息处理方法、装置、设备及存储介质
CN113268212A (zh) 投屏方法、装置、存储介质及电子设备
CN111790148A (zh) 游戏场景中的信息交互方法、设备及计算机可读介质
WO2017113855A1 (zh) 应用程序交互的方法和终端
US20170171266A1 (en) Method and electronic device based on android platform for multimedia resource play
US20240073488A1 (en) Live video processing method and apparatus, device and medium
CN113365136A (zh) 应用程序的页面显示方法、装置和电子设备
CN115469735A (zh) 基于手势的交互方法、装置和客户端
CN106383705B (zh) 在应用瘦客户端中设置鼠标显示状态的方法及装置
CN114116105A (zh) 动态桌面的控制方法及装置、存储介质、电子装置
CN113825022A (zh) 一种播放控制状态检测方法、装置、存储介质及电子设备
CN112291602A (zh) 视频播放方法、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination