CN112473121A - 一种显示设备及基于肢体识别的躲避球显示方法 - Google Patents

一种显示设备及基于肢体识别的躲避球显示方法 Download PDF

Info

Publication number
CN112473121A
CN112473121A CN202011267208.1A CN202011267208A CN112473121A CN 112473121 A CN112473121 A CN 112473121A CN 202011267208 A CN202011267208 A CN 202011267208A CN 112473121 A CN112473121 A CN 112473121A
Authority
CN
China
Prior art keywords
size
target user
display
user
positioning point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011267208.1A
Other languages
English (en)
Other versions
CN112473121B (zh
Inventor
刘俊秀
姜俊厚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Visual Technology Co Ltd
Original Assignee
Hisense Visual Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Visual Technology Co Ltd filed Critical Hisense Visual Technology Co Ltd
Priority to CN202011267208.1A priority Critical patent/CN112473121B/zh
Publication of CN112473121A publication Critical patent/CN112473121A/zh
Priority to PCT/CN2021/117797 priority patent/WO2022100262A1/zh
Priority to CN202180057495.XA priority patent/CN116114250A/zh
Application granted granted Critical
Publication of CN112473121B publication Critical patent/CN112473121B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • A63F2300/1093—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera using visible light

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请涉及通信技术领域，特别地，涉及一种显示设备及基于肢体识别的躲避球显示方法。一定程度上可以解决用户躯体不全显示于游戏界面时显示器依然显示用户定位框、并发射躲避球的问题。所述显示设备，包括：摄像头；显示器；控制器，被配置为：根据所述背景图像中目标用户的第一尺寸、及所述目标用户在所述用户界面中的第一位置，控制所述用户界面在所述第一位置显示第一标识，其中，所述第一标识用于触发躲避球发射，所述第一标识的尺寸与所述第一尺寸相应；当所述目标用户的上身躯干不完全位于所述采集区域、且所述目标用户正在离开所述采集区域时，控制器控制所述用户界面不再显示所述第一标识。

Description

一种显示设备及基于肢体识别的躲避球显示方法
技术领域
本申请涉及通信技术领域，特别地，涉及一种显示设备及基于肢体识别的躲避球显示方法。
背景技术
随着智能电视技术的发展，电视已经成为智慧家居的入口，其大屏属性成为各种智能设备(包括摄像头)的最佳信息整合显示器。
目前使用摄像头的电视场景越来越多，包括利用摄像头进行的小游戏，例如AR躲避球。AR躲避球是一个利用摄像头定位用户位置后发射虚拟小球让用户进行躲避的互动小游戏。
然而，在游戏进行中的用户需要中途离开、或中断游戏俯身进行其他活动、用户身体大部分轮廓不在游戏屏幕显示时，躲避球游戏依然会根据屏幕内部分用户躯体显示定位框并发射小球。
发明内容
为了解决用户躯体不全显示于游戏界面时显示器依然显示用户定位框、并发射躲避球的问题，本申请提供了一种显示设备及基于肢体识别的躲避球显示方法。
本申请的实施例是这样实现的：
本申请实施例的第一方面提供一种显示设备，包括：摄像头，用于在检测区域内采集躲避球游戏中的目标用户、背景图像；显示器，用于显示包含所述目标用户、背景图像的躲避球游戏用户界面；控制器，被配置为：根据所述背景图像中目标用户的第一尺寸、及所述目标用户在所述用户界面中的第一位置，控制所述用户界面在所述第一位置显示第一标识，其中，所述第一标识用于触发躲避球发射，所述第一标识的尺寸与所述第一尺寸相应；当所述目标用户的上身躯干不完全位于所述采集区域、且所述目标用户正在离开所述采集区域时，控制器控制所述用户界面不再显示所述第一标识。
本申请实施例的第二方面提供一种基于肢体识别的躲避球显示方法，所述方法包括：根据躲避球游戏用户界面背景图像中目标用户的第一尺寸、及所述目标用户在所述用户界面中的第一位置，控制所述用户界面在所述第一位置显示第一标识，其中，所述第一标识用于触发躲避球发射，所述第一标识的尺寸与所述第一尺寸相应；当所述目标用户的上身躯干不完全位于摄像头的采集区域、且所述目标用户正在离开所述采集区域时，控制所述用户界面不再显示所述第一标识。
本申请的有益效果：通过构建第一尺寸，可以控制第一标识的尺寸；进一步通过构建第一位置，可以实现第一标识的位置获取；进一步通过控制第一标识不显示，可以实现用户离开游戏时不发射躲避球；进一步通过构建第一定位点、第二定位点、第三定位点，可以实现识别游戏用户肢体、预测游戏用户运动趋势、根据用户在屏幕中显示的大小调整第一标识的尺寸、实现用户不在屏幕显示范围内时不进行游戏。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图；
图2中示例性示出了根据实施例中显示设备200的硬件配置框图；
图3中示例性示出了根据实施例中控制设备100的硬件配置框图；
图4中示例性示出了根据实施例中显示设备200的功能配置示意图；
图5a中示例性示出了根据实施例中显示设备200中软件配置示意图；
图5b中示例性示出了根据实施例中显示设备200中应用程序的配置示意图；
图6示出了本申请一实施例显示设备应用程序界面的示意图；
图7示出了本申请另一实施例显示设备应用程序界面的示意图；
图8A示出了本申请一实施例显示设备躲避球游戏用户界面的示意图；
图8B示出了本申请另一实施例显示设备躲避球游戏用户界面的示意图；
图9示出了本申请另一实施例显示设备躲避球游戏用户界面的示意图；
图10A示出了本申请一实施例显示设备识别用户肢体的示意图；
图10B示出了本申请另一实施例显示设备识别用户肢体的示意图。
具体实施方式
为使本申请示例性实施例的目的、技术方案和优点更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施例中的技术方案进行清楚、完整地描述，显然，所描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。
基于本申请中示出的示例性实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。此外，虽然本申请中公开内容按照示范性一个或几个实例来介绍，但应理解，可以就这些公开内容的各个方面也可以单独构成一个完整技术方案。
应当理解，本申请中说明书和权利要求书及上述附图中的术语″第一″、″第二″、″第三″等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。
此外，术语″包括″和″具有″以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的那些组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
本申请中使用的术语″模块″，是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。
本说明书通篇提及的″多个实施例″、″一些实施例″、″一个实施例″或″实施例″等，意味着结合该实施例描述的具体特征、结构或特性包括在至少一个实施例中。因此，本说明书通篇出现的短语″在多个实施例中″、″在一些实施例中″、″在至少另一个实施例中″或″在实施例中″等并不一定都指相同的实施例。此外，在一个或多个实施例中，具体特征、结构或特性可以任何合适的方式进行组合。因此，在无限制的情形下，结合一个实施例示出或描述的具体特征、结构或特性可全部或部分地与一个或多个其他实施例的特征、结构或特性进行组合。这种修改和变型旨在包括在本申请的范围之内。
本申请中使用的术语″遥控器″，是指电子设备(如本申请中公开的显示设备)的一个组件，通常可在较短的距离范围内无线控制电子设备。一般使用红外线和/或射频(RF)信号和/或蓝牙与电子设备连接，也可以包括WiFi、无线USB、蓝牙、动作传感器等功能模块。例如：手持式触摸遥控器，是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬键。
本申请中使用的术语″手势″，是指用户通过一种手型的变化或手部运动等动作，用于表达预期想法、动作、目的/或结果的用户行为。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图。如图1中示出，用户可通过移动终端300和控制装置100操作显示设备200。
其中，控制装置100可以遥控器，包括红外协议通信或蓝牙协议通信，及其他短距离通信方式等，通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键，语音输入、控制面板输入等输入用户指令，来控制显示设备200。如：用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令，来实现控制显示设备200的功能。
在一些实施例中，也可以使用移动终端、平板电脑、计算机、笔记本电脑、和其他智能设备以控制显示设备200。例如，使用在智能设备上运行的应用程序控制显示设备200。该应用程序通过配置可以在与智能设备关联的屏幕上，在直观的用户界面(UI)中为用户提供各种控制。
示例的，移动终端300可与显示设备200安装软件应用，通过网络通信协议实现连接通信，实现一对一控制操作的和数据通信的目的。如：可以实现用移动终端300与显示设备200建立控制指令协议，将遥控控制键盘同步到移动终端300上，通过控制移动终端300上用户界面，实现控制显示设备200的功能。也可以将移动终端300上显示音视频内容传输到显示设备200上，实现同步显示功能。
如图1中还示出，显示设备200还与服务器400通过多种通信方式进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。示例的，显示设备200通过发送和接收信息，以及电子节目指南(EPG)互动，接收软件程序更新，或访问远程储存的数字媒体库。服务器400可以一组，也可以多组，可以一类或多类服务器。通过服务器400提供视频点播和广告服务等其他网络服务内容。
显示设备200，可以液晶显示器、OLED显示器、投影显示设备。具体显示设备类型，尺寸大小和分辨率等不作限定，本领技术人员可以理解的是，显示设备200可以根据需要做性能和配置上一些改变。
显示设备200除了提供广播接收电视功能之外，还可以附加提供计算机支持功能的智能网络电视功能。示例的包括，网络电视、智能电视、互联网协议电视(IPTV)等。
图2中示例性示出了根据示例性实施例中显示设备200的硬件配置框图。如图2中示出，显示设备200中包括控制器210、调谐解调器220、通信接口230、检测器240、输入\输出接口250、视频处理器260-1，音频处理器60-2，显示器280，音频输出270、存储器290，供电电源、红外接收器。
显示器280，用于接收源自视频处理器260-1输入的图像信号，进行显示视频内容和图像以及菜单操控界面的组件。显示器280包括用于呈现画面的显示屏组件，以及驱动图像显示的驱动组件。显示视频内容，可以来自广播电视内容，也可以是说，可通过有线或无线通信协议接收的各种广播信号。或者，可显示来自网络通信协议接收来自网络服务器端发送的各种图像内容。
同时，显示器280，同时显示显示设备200中产生且用于控制显示设备200的用户操控UI界面。
以及，根据显示器280类型不同，还包括用于驱动显示的驱动组件。或者，倘若显示器280为一种投影显示器，还可以包括一种投影装置和投影屏幕。
通信接口230是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如：通信接口230可以是Wifi芯片231，蓝牙通信协议芯片232，有线以太网通信协议芯片233等其他网络通信协议芯片或近场通信协议芯片，以及红外接收器(图中未示出)。
显示设备200可以通过通信接口230与外部控制设备或内容提供设备之间建立控制信号和数据信号发送和接收。以及，红外接收器，可用于接收控制装置100(如：红外遥控器等)红外控制信号的接口器。
检测器240，是显示设备200用于采集外部环境或与外部交互的信号。检测器240包括光接收器242，用于采集环境光线强度的传感器，可以通过采集环境光可以自适应性显示参数变化等。
以及包括图像采集器241，例如为相机、或摄像头，可以用于采集外部环境场景，以及用于采集用户的属性或与用户交互手势，可以自适应变化显示参数，也可以识别用户手势，以实现与用户之间互动的功能。
在其他一些示例性实施例中，检测器240，还可温度传感器等，如通过感测环境温度，显示设备200可自适应调整图像的显示色温。如当温度偏高的环境时，可调整显示设备200显示图像色温偏冷色调，或当温度偏低的环境时，可以调整显示设备200显示图像偏暖色调。
在其他一些示例性实施例中，检测器240，还可声音采集器等，如麦克风，可以用于接收用户的声音，包括用户控制显示设备200的控制指令的语音信号，或采集环境声音，用于识别环境场景类型，显示设备200可以自适应适应环境噪声。
输入/输出接口250，在控制器210的控制显示设备200与外部其他设备间数据传输。如接收外部设备的视频信号和音频信号、或命令指令等数据。
其中，输入/输出接口250可以包括，但不限于如下：可以高清多媒体接口HDMI接口251、模拟或数据高清分量输入接口253、复合视频输入接口252、USB输入接口254、RGB端口(图中未示出)等任一个或多个接口。
在其他一些示例性实施例中，输入/输出接口250也可以上述多个接口形成复合性的输入/输出接口。
调谐解调器220，通过有线或无线接收方式接收广播电视信号，可以进行放大、混频和谐振等调制解调处理，从多多个无线或有线广播电视信号中解调出用户所选择电视频道频率中所携带的电视音视频信号，以及EPG数据信号。
调谐解调器220，可根据用户选择，以及由控制器210控制，响应用户选择的电视信号频率以及该频率所携带的电视信号。
调谐解调器220，可以接收信号的途径，根据电视信号广播制式不同，有很多种，诸如：地面广播、有线广播、卫星广播或互联网广播信号等；以及根据调制类型不同，可以数字调制，也可以模拟调制方式。根据接收电视信号种类不同，可以模拟信号和数字信号。
在其他一些示例性实施例中，调谐解调器220也可在外置设备中，如外置机顶盒等。这样，机顶盒通过调制解调后输出电视音视频信号，经过输入/输出接口250输入显示设备200中。
视频处理器260-1，用于将接收外部视频信号，根据输入信号的标准编解码协议，进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等等视频处理，可得到直接可显示设备200上显示或播放的信号。
示例的，视频处理器260-1，包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。
其中，解复用模块，用于对输入音视频数据流进行解复用处理，如输入MPEG-2，则解复用模块进行解复用成视频信号和音频信号等。
视频解码模块，则用于对解复用后的视频信号进行处理，包括解码和缩放处理等。
图像合成模块，如图像合成器，其用于将图形生成器根据用户输入或自身生成的GUI信号，与缩放处理后视频图像进行叠加混合处理，以生成可供显示的图像信号。
帧率转换模块，用于对转换输入视频帧率，如将60Hz帧率转换为120Hz帧率或240Hz帧率，通常的格式采用如插帧方式实现。
显示格式化模块，则用于将接收帧率转换后视频输出信号，改变信号以符合显示格式的信号，如输出RGB数据信号。
音频处理器260-2，用于接收外部的音频信号，根据输入信号的标准编解码协议，进行解压缩和解码，以及降噪、数模转换、和放大处理等处理，得到可以在扬声器中播放的声音信号。
在其他一些示例性实施例中，视频处理器260-1可以包括一颗或多颗芯片组成。音频处理器260-2，也可以包括一颗或多颗芯片组成。
以及，在其他一些示例性实施例中，视频处理器260-1和音频处理器260-2，可以单独的芯片，也可以于控制器210一起集成在一颗或多颗芯片中。
音频输出272，在控制器210的控制下接收音频处理器260-2输出的声音信号，如：扬声器272，以及除了显示设备200自身携带的扬声器272之外，可以输出至外接设备的发生装置的外接音响输出端子274，如：外接音响接口或耳机接口等。
供电电源，在控制器210控制下，将外部电源输入的电力为显示设备200提供电源供电支持。供电电源可以包括安装显示设备200内部的内置电源电路，也可以是安装在显示设备200外部电源，在显示设备200中提供外接电源的电源接口。
用户输入接口，用于接收用户的输入信号，然后，将接收用户输入信号发送给控制器210。用户输入信号可以是通过红外接收器接收的遥控器信号，可以通过网络通信模块接收各种用户控制信号。
示例的，用户通过遥控器100或移动终端300输入用户命令，用户输入接口则根据用户的输入，显示设备200则通过控制器210响应用户的输入。
在一些实施例中，用户可在显示器280上显示的图形用户界面(GUI)输入用户命令，则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者，用户可通过输入特定的声音或手势进行输入用户命令，则用户输入接口通过传感器识别出声音或手势，来接收用户输入命令。
控制器210，通过存储在存储器290上中各种软件控制程序，来控制显示设备200的工作和响应用户的操作。
如图2所示，控制器210包括RAM213和ROM214以及图形处理器216、CPU处理器212、通信接口218，如：第一接口218-1到第n接口218-n，以及通信总线。其中，RAM213和ROM214以及图形处理器216、CPU处理器212、通信接口218通过总线相连接。
ROM213，用于存储各种系统启动的指令。如在收到开机信号时，显示设备200电源开始启动，CPU处理器212运行ROM中系统启动指令，将存储在存储器290的操作系统拷贝至RAM213中，以使开始运行启动操作系统。当操作系统启动完成后，CPU处理器212再将存储器290中各种应用程序拷贝至RAM213中，然后，开始运行启动各种应用程序。
图形处理器216，用于产生各种图形对象，如：图标、操作菜单、以及用户输入指令显示图形等。包括运算器，通过接收用户输入各种交互指令进行运算，根据显示属性显示各种对象。以及包括渲染器，产生基于运算器得到的各种对象，进行渲染的结果显示在显示器280上。
CPU处理器212，用于执行存储在存储器290中操作系统和应用程序指令。以及根据接收外部输入的各种交互指令，来执行各种应用程序、数据和内容，以便最终显示和播放各种音视频内容。
在一些示例性实施例中，CPU处理器212，可以包括多个处理器。多个处理器可包括一个主处理器以及多个或一个子处理器。主处理器，用于在预加电模式中执行显示设备200一些操作，和/或在正常模式下显示画面的操作。多个或一个子处理器，用于在待机模式等状态下一种操作。
控制器210可以控制显示设备100的整体操作。例如：响应于接收到用于选择在显示器280上显示UI对象的用户命令，控制器210便可以执行与由用户命令选择的对象有关的操作。
其中，所述对象可以是可选对象中的任何一个，例如超链接或图标。与所选择的对象有关操作，例如：显示连接到超链接页面、文档、图像等操作，或者执行与所述图标相对应程序的操作。用于选择UI对象用户命令，可以是通过连接到显示设备200的各种输入装置(例如，鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
存储器290，包括存储用于驱动显示设备200的各种软件模块。如：存储器290中存储的各种软件模块，包括：基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等。
其中，基础模块用于产后护理显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块用于从各种传感器或用户输入接口中收集各种信息，并进行数模转换以及分析管理的管理模块。
例如：语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块用于控制显示器280进行显示图像内容的模块，可以用于播放多媒体图像内容和UI界面等信息。通信模块，用于与外部设备之间进行控制和数据通信的模块。浏览器模块，用于执行浏览服务器之间数据通信的模块。服务模块，用于提供各种服务以及各类应用程序在内的模块。
同时，存储器290还用存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
图3中示例性示出了根据示例性实施例中控制设备100的配置框图。如图3所示，控制设备100包括控制器110、通信接口130、用户输入/输出接口140、存储器190、供电电源180。
控制设备100被配置为控制显示设备200，以及可接收用户的输入操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起用用户与显示设备200之间交互中介作用。如：用户通过操作控制设备100上频道加减键，显示设备200响应频道加减的操作。
在一些实施例中，控制设备100可是一种智能设备。如：控制设备100可根据用户需求安装控制显示设备200的各种应用。
在一些实施例中，如图1所示，移动终端300或其他智能电子设备，可在安装操控显示设备200的应用之后，可以起到控制设备100类似功能。如：用户可以通过安装应用，在移动终端300或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮，以实现控制设备100实体按键的功能。
控制器110包括处理器112和RAM113和ROM114、通信接口218以及通信总线。控制器110用于控制控制设备100的运行和操作，以及内部各部件之间通信协作以及外部和内部的数据处理功能。
通信接口130在控制器110的控制下，实现与显示设备200之间控制信号和数据信号的通信。如：将接收到的用户输入信号发送至显示设备200上。通信接口130可包括WiFi芯片、蓝牙模块、NFC模块等其他近场通信模块中至少之一种。
用户输入/输出接口140，其中，输入接口包括麦克风141、摄像头142、传感器143、按键144等其他输入接口中至少一者。如：用户可以通过语音、触摸、手势、按压等动作实现用户指令输入功能，输入接口通过将接收的模拟信号转换为数字信号，以及数字信号转换为相应指令信号，发送至显示设备200。需要说明的是，本申请提供的摄像头可实施为显示设备外接的摄像头142，也可实施为显示设备内置的图像采集器241。
输出接口包括将接收的用户指令发送至显示设备200的接口。在一些实施例中，可以红外接口，也可以是射频接口。如：红外信号接口时，需要将用户输入指令按照红外控制协议转化为红外控制信号，经红外发送模块进行发送至显示设备200。再如：射频信号接口时，需将用户输入指令转化为数字信号，然后按照射频控制信号调制协议进行调制后，由射频发送端子发送至显示设备200。
在一些实施例中，控制设备100包括通信接口130和输出接口中至少一者。控制设备100中配置通信接口130，如：WiFi、蓝牙、NFC等模块，可将用户输入指令通过WiFi协议、或蓝牙协议、或NFC协议编码，发送至显示设备200.
存储器190，用于在控制器110的控制下存储驱动和控制控制设备200的各种运行程序、数据和应用。存储器190，可以存储用户输入的各类控制信号指令。
供电电源180，用于在控制器110的控制下为控制设备100各元件提供运行电力支持。可以电池及相关控制电路。
图4中示例性示出了根据示例性实施例中显示设备200功能配置示意图。如图4所示，存储器290用于存储操作系统、应用程序、内容和用户数据等，在控制器210控制下执行驱动显示设备200的系统运行以及响应用户的各种操作。存储器290可以包括易失性和/或非易失性存储器。
存储器290，具体用于存储驱动显示设备200中控制器210的运行程序，以及存储显示设备200内置各种应用程序，以及用户从外部设备下载的各种应用程序、以及与应用相关各种图形用户界面，以及与图形用户界面相关的各种对象，用户数据信息，以及各种支持应用的内部数据。存储器290用于存储OS内核、中间件和应用等系统软件，以及存储输入的视频数据和音频数据、及其他用户数据。
存储器290，具体用于存储音视频处理器260-1和260-2、显示器280、通信接口230、调谐解调器220、检测器240输入/输出接口等驱动程序和相关数据。
在一些实施例中，存储器290可以存储软件和/或程序，用于表示操作系统(OS)的软件程序包括，例如：内核、中间件、应用编程接口(API)和/或应用程序。示例性的，内核可控制或管理系统资源，或其它程序所实施的功能(如所述中间件、API或应用程序)，以及内核可以提供接口，以允许中间件和API，或应用访问控制器，以实现控制或管理系统资源。
示例的，存储器290，包括广播接收模块2901、频道控制模块2902、音量控制模块2903、图像控制模块2904、显示控制模块2905、音频控制模块2906、外部指令识别模块2907、通信控制模块2908、光接收模块2909、电力控制模块2910、操作系统2911、以及其他应用程序2912、浏览器模块等等。控制器210通过运行存储器290中各种软件程序，来执行诸如：广播电视信号接收解调功能、电视频道选择控制功能、音量选择控制功能、图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等其他应用。
图5a中示例性示出了根据示例性实施例中显示设备200中软件系统的配置框图。
如图5a中所示，操作系统2911，包括用于处理各种基础系统服务和用于实施硬件相关任务的执行操作软件，充当应用程序和硬件组件之间完成的数据处理的媒介。一些实施例中，部分操作系统内核可以包含一系列软件，用以管理显示设备硬件资源，并为其他程序或软件代码提供服务。
其他一些实施例中，部分操作系统内核可包含一个或多个设备驱动器，设备驱动器可以是操作系统中的一组软件代码，帮助操作或控制显示设备关联的设备或硬件。驱动器可以包含操作视频、音频和/或其他多媒体组件的代码。示例的，包括显示屏、摄像头、Flash、WiFi和音频驱动器。
其中，可访问性模块2911-1，用于修改或访问应用程序，以实现应用程序的可访问性和对其显示内容的可操作性。
通信模块2911-2，用于经由相关通信接口和通信网络与其他外设的连接。
用户界面模块2911-3，用于提供显示用户界面的对象，以供各应用程序可访问，可实现用户可操作性。
控制应用程序2911-4，用于可控制进程管理，包括运行时间应用程序等。
事件传输系统2914，可在操作系统2911内或应用程序2912中实现，以一些实施例中，一方面在在操作系统2911内实现，同时在应用程序2912中实现，用于监听各种用户输入事件，将根据各种事件指代响应各类事件或子事件的识别结果，而实施一组或多组预定义的操作的处理程序。
其中，事件监听模块2914-1，用于监听用户输入接口输入事件或子事件。
事件识别模块2914-1，用于对各种用户输入接口输入各类事件的定义，识别出各种事件或子事件，且将其传输给处理用以执行其相应一组或多组的处理程序。
其中，事件或子事件，是指显示设备200中一个或多个传感器检测的输入，以及外界控制设备(如控制设备100等)的输入。如：语音输入各种子事件，手势识别的手势输入，以及控制设备的遥控按键指令输入的子事件等。示例的，遥控器中一个或多个子事件包括多种形式，包括但不限于按键按上/下/左右/、确定键、按键按住等中一个或组合。以及非实体按键的操作，如移动、按住、释放等操作。
界面布局管理器2913，直接或间接接收来自于事件传输系统2914监听到各用户输入事件或子事件，用于更新用户界面的布局，包括但不限于界面中各控件或子控件的位置，以及容器的大小或位置、层级等与界面布局相关各种执行操作。
如图5b中所示，应用程序层2912包含也可在显示设备200执行的各种应用程序。应用程序可包含但不限于一个或多个应用程序，如：直播电视应用程序、视频点播应用程序、媒体中心应用程序、应用程序中心、游戏应用等。
直播电视应用程序，可以通过不同的信号源提供直播电视。例如，直播电视应用程可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视信号。以及，直播电视应用程序可在显示设备200上显示直播电视信号的视频。
视频点播应用程序，可以提供来自不同存储源的视频。不同于直播电视应用程序，视频点播提供来自某些存储源的视频显示。例如，视频点播可以来自云存储的服务器端、来自包含已存视频节目的本地硬盘储存器。
媒体中心应用程序，可以提供各种多媒体内容播放的应用程序。例如，媒体中心，可以为不同于直播电视或视频点播，用户可通过媒体中心应用程序访问各种图像或音频所提供服务。
应用程序中心，可以提供储存各种应用程序。应用程序可以是一种游戏、应用程序，或某些和计算机系统或其他设备相关但可以在智能电视中运行的其他应用程序。应用程序中心可从不同来源获得这些应用程序，将它们储存在本地储存器中，然后在显示设备200上可运行。
本申请实施例可以应用于各种类型的显示设备(包括但不限于：智能电视、移动终端、平板电脑、机顶盒等设备)。下文将以智能电视基于肢体识别预测运动趋势的躲避球显示技术方案、及用户界面为例，对显示设备、基于肢体识别的躲避球显示方法进行阐述。
图6示出了本申请一实施例显示设备应用程序界面的示意图。
图中示出了显示屏展示电视的应用程序UI界面，例如，所述应用程序UI界面包括4个已安装于电视的应用程序，分别是新闻头条、影院点播、AR躲避球、K歌等。通过使用遥控器等控制器在显示屏上移动焦点，可以选择不同的应用程序、或其他功能按钮。
在一些实施例中，电视显示屏在展示应用程序UI界面的同时，还被配置为可以展示其他交互元素，所述交互元素可包括例如电视主页控件、搜索控件、消息按钮控件、邮箱控件、浏览器控件、收藏夹控件、信号栏控件等。
为提高电视UI的便利性、形象性，在一些实施例中，本申请实施例中显示设备的控制器响应于对所述交互元素的操作而对电视的UI进行控制。例如，用户通过遥控器等控制器对搜索控件进行点击，可以将搜索UI展示于其它UI的顶部，即控制交互元素映射的应用组件的UI能够变大、或全屏运行和显示。
在一些实施例中，所述交互元素还可通过传感器进行操作，所述传感器可以是但不限于是声学输入传感器，例如麦克风，其可检测包括所需交互元素指示的语音命令。例如，用户可使用″躲避球″或任意其它合适的标识识别所需交互元素，例如搜索控件，并且还可描述将执行与所需交互元素相关的所需动作。控制器可识别语音命令并向UI或其处理部件或引擎提交表征交互的数据。
图7示出了本申请另一实施例显示设备应用程序界面的示意图。
在一些实施例中，用户可通过遥控器控制显示屏的焦点，选择AR躲避球应用程序，以使得其图标在所述显示屏的用户界面中高亮度显示；然后通过点击所述高亮度图标，可实现打开图标映射的应用程序。
需要说明的是，本申请实施例所示的UI界面图标、及文字仅作为示例对小聚在家生成视频集锦文件技术方案进行阐述，附图中UI界面的图标、及文字还可以实施为其它内容，本申请附图不做具体的限制。
图8A示出了本申请一实施例显示设备躲避球游戏用户界面的示意图。
本申请提供的显示设备包括摄像头、显示器、控制器。其中，摄像头用于在检测区域内采集躲避球游戏中的目标用户、背景图像；显示器用于显示包含所述目标用户、背景图像的躲避球游戏用户界面；控制器被配置为：根据所述背景图像中目标用户的第一尺寸、及所述目标用户在所述用户界面中的第一位置，控制所述用户界面在所述第一位置显示第一标识，其中，所述第一标识用于触发躲避球发射，所述第一标识的尺寸与所述第一尺寸相应，如图8B所示；
在一些实施例中，当所述目标用户的上身躯干不完全位于所述采集区域、且所述目标用户正在离开所述采集区域时，控制器控制所述用户界面不再显示所述第一标识。
在一些实施例中，摄像头再起监测区域内获取目标用户图像、以及所述目标用户的背景图像，其中，所述目标用户及背景图像都将显示于躲避球游戏的用户界面。控制器根据目标用户在背景图像中的第一尺寸及所述目标用户在游戏用户界面中的第一位置，控制用户界面在所述第一位置显示第一标识，如图8A所示。
控制器根据背景图像中目标用户，即正在进行躲避球游戏用户的尺寸确定第一标识的尺寸，即用户在背景图像中的尺寸越大，所述第一标识也越大；用户在背景图像中的尺寸越小，所述第一标识也越小。
当用户由用户界面中显示的第一位置移动至第二位置时，控制器将根据用户在第二位置时的第二尺寸重新确定第二标识的尺寸，并将第二标识显示于游戏用户界面。
在一些实施例中，控制器控制所述用户界面在所述第一位置显示第一标识，所述第一标识的尺寸与所述第一尺寸相应，具体包括：当所述目标用户相对于所述摄像头由远到近运动时，所述第一尺寸逐渐变大，所述第一标识的尺寸相应于所述第一标识变大；当所述目标用户相对于所述摄像头由近到远运动时，所述第一尺寸逐渐变小，所述第一标识的尺寸相应于所述第一标识变小。
例如，当用户由第一位置移动至第二位置时，控制器根据目标用户在背景图像中第一尺寸和第二尺寸的变化，可以相应的控制第二标识相较于第一标识放大、或缩小。
在一些实施例中，控制器控制所述第一标识覆盖显示于所述第一位置的目标用户。例如，所述第一标识可以显示为近似矩形框，当控制器定位目标用户在游戏用户界面中的第一位置后，将符合目标用户当时第一尺寸的近似矩形框，即第一标识覆盖显示于目标用户。
图9示出了本申请另一实施例显示设备躲避球游戏用户界面的示意图。
当目标用户的上身躯干不完全位于采集区域、且所述目标用户正在离开所述采集区域时，控制器控制用户界面不再显示第一标识。
可以理解，目标用户离开游戏时包括：目标用户走向摄像头采集区域但用户上身躯干任处于所述采集区域内、目标用户正在穿过摄像头采集区域边缘且用户部分上身躯干任处于所述采集区域内、目标用户已穿过摄像头采集区域边缘且用户上身躯干完全不处于所述采集区域内。本申请提供的显示设备可识别目标用户正在穿过摄像头采集区域边缘且用户部分上身躯干任处于所述采集区域内，并控制所述用户界面不再第一标识，也不会触发游戏继续发射躲避球，如图中所示的虚线近似矩形框，所述虚线近似矩形框用于方便理解，其并不显示于显示设备的游戏用户界面，所述虚线近似矩形框表示控制器所识别的部分目标用户上身躯干。
图10A示出了本申请一实施例显示设备识别用户肢体的示意图。
在一些实施例中，控制器控制所述用户界面在所述第一位置显示第一标识，所述第一标识的尺寸与所述第一尺寸相应，具体包括所述控制器：将摄像头采集图像中目标用户的左臂肘部标识为第一定位点、右臂肘部标识为第二定位点；根据所述第一定位点、第二定位点之间的第一间隔距离，确定在所述第一位置处显示第一标识的尺寸。
控制器根据图像识别模型，将摄像头采集的目标用户的上身躯干分解成各个点，根据上肢各个点的位置变化判断用户运动趋势，由部分肢体推测整体位置，从而改变第一标识的位置和大小，其位置即本申请提供的第一位置，其大小即本申请提供的第一标识的尺寸。
例如，控制器将目标用户的左臂肘部标识为第一定位点、右臂肘部标识为第二定位点，然后根据所述第一定位点与第二定位点之间的第一间隔距离，例如所述第一间隔距离为10cm，则控制器控制所述用户界面在第一位置处显示宽度为10cm的第一标识，所述第一标识可实施为近似矩形框。
在一些实施例中，控制器通过下面步骤识别摄像头采集图像中的目标用户。首先，每隔预设帧数，从所述采集视频中抽取一单帧图像；对所述单帧图像进行人体检测，确定所述单帧图像中是否包含人体；若所述单帧图像中包含人体，在所述人体的人体框范围内对所述单帧图像进行人脸检测，确定所述人体框范围内是否包含人脸；若所述人体框范围内包含人脸，对所述人脸进行特征提取，得到所述采集视频中的用户的人脸特征；将所述采集视频中的用户的人脸特征与预设的家庭成员人脸特征库进行比对，确定所述采集视频中的用户是否为家庭成员及游戏用户。
在一些实施例中，控制器对摄像头采集图像中的人体，应用人脸检测算法(例如：可变形的组件模型Deformable Part Model)，在检测出的人体框范围内对该单帧图像进行人脸检测，确定人体框范围内是否包含人脸。若人体框范围内包含人脸，对该人脸进行特征提取，得到该用户的人脸特征。将该用户的人脸特征与家庭成员人脸特征库进行比对，确定该用户是否为家庭成员及游戏用户。
图10B示出了本申请另一实施例显示设备识别用户肢体的示意图。
在一些实施例中，控制器还被配置为：将摄像头采集图像中目标用户的左臂肘部标识为第一定位点、右臂肘部标识为第二定位点，其他关节标识为第三定位点，所述第三定位点位于左手、和/或左肩、和/或脖子、和/或右肩、和/或右手、和/或左腰、和/或右腰；根据追踪所述第一定位点、第二定位点、第三定位点的位置变化，确定目标用户的上身躯干是否处完全于采集区域、且所述目标用户是否正在离开所述采集区域。
例如，将用户的左手标识为点1、左臂肘部标识为点2、左肩标识为点3、脖子标识为点4、右肩标识为点5、右臂肘部标识为点6、右手标识为点7、左腰标识为点8、右腰标识为点9。
其中，第一定位点实施为点2、第二定位点实施为点6，第三定位点可实施为剩余点中的一个、或多个的组合。控制器在采集图像中识别上述多个点、跟踪所述多个点、根据所述多个点，例如根据9个点计算用户的整体位置以得到第一位置；其中，点2和点6之间的间隔距离决定了第一标识显示框的大小，通过所述多个点的位置变化确定目标用户的运动方向，确定目标用户的上身躯干是否处完全于采集区域、且所述目标用户是否正在离开所述采集区域。
在一些实施例中，控制器对从摄像头接收到的采集图像，每隔预设帧数(例如：每隔90帧)从采集视频中抽取一单帧图像。应用图像识别技术中的人体检测算法(例如：卷积姿态机器Convolutional Pose Machine，检测出人体的各个关节点，再将这些关节点组成的范围确定为该人体的人体框)，对该单帧图像进行人体检测，通过多个点的位置变化确定目标用户的运动方向，确定目标用户的上身躯干是否处完全于采集区域、且所述目标用户是否正在离开所述采集区域。
在一些实施例中，家庭成员特征库中存储着各家庭成员的身体特征以及对应的家庭成员标识。其中，家庭成员的身体特征存储着该家庭成员的各个身体特征点的坐标。例如：家庭成员03的右手的坐标为(10，0)、左手的坐标为(-10，0)、右肩的坐标为(5，-10)、左肩坐标为(-5，-10)等。
在一些实施例中，按照预定连线规则(例如：将左肩与右肩连线，再将右肩与右臂肘部连线，再将右臂肘部与右手连线......)，将采集视频中的用户的各个上身躯干特征点顺序连接起来，从而得到该用户的上身边缘图。同理，得到各家庭成员的上身边缘图。
对一家庭成员，通过连线的角度，来确定该用户的上身边缘图各连线与该家庭成员的上身边缘图对应连线的相似度。例如：对家庭成员A，用户的上身边缘图中由左手、左壁肘部、左肩连成的线的角度为27度。目标用户的上身边缘图中由左手、左壁肘部、左肩连成的线的角度为30度。则目标用户的上身边缘图的该连线、与家庭成员A的上身边缘图的该连线的相似度为1-(|27-30|/30)＝0.9。
确定了目标用户的上身边缘图各连线与该家庭成员的上身边缘图对应连线的相似度之后，将该用户的上身边缘图各连线与该家庭成员的上身边缘图对应连线的相似度的均值，确定为该用户的上身特征与该家庭成员的上身特征的相似度。
基于上文中对显示设备基于肢体识别预测运动方向的躲避球显示方案的阐述，本申请还提供了一种基于肢体识别的躲避球显示方法，所述方法包括：根据躲避球游戏用户界面背景图像中目标用户的第一尺寸、及所述目标用户在所述用户界面中的第一位置，控制所述用户界面在所述第一位置显示第一标识，其中，所述第一标识用于触发躲避球发射，所述第一标识的尺寸与所述第一尺寸相应；当所述目标用户的上身躯干不完全位于摄像头的采集区域、且所述目标用户正在离开所述采集区域时，控制所述用户界面不再显示所述第一标识。所述基于肢体识别的躲避球显示方法的具体操作、步骤在上文对显示设备实现方案中已进行详细阐述，在此不再赘述。
在一些实施例中，控制所述用户界面在所述第一位置显示第一标识，所述第一标识的尺寸与所述第一尺寸相应，具体包括：当目标用户相对于摄像头由远到近运动时，所述第一尺寸逐渐变大，所述第一标识的尺寸相应于所述第一标识变大；当目标用户相对于摄像头由近到远运动时，所述第一尺寸逐渐变小，所述第一标识的尺寸相应于所述第一标识变小。所述基于肢体识别的躲避球显示方法的具体操作、步骤在上文对显示设备实现方案中已进行详细阐述，在此不再赘述。
在一些实施例中，控制所述用户界面在所述第一位置显示第一标识，所述第一标识的尺寸与所述第一尺寸相应，具体包括：将采集图像中目标用户的左臂肘部标识为第一定位点、右臂肘部标识为第二定位点；根据所述第一定位点、第二定位点之间的第一间隔距离，确定在所述第一位置处显示第一标识的尺寸。所述基于肢体识别的躲避球显示方法的具体操作、步骤在上文对显示设备实现方案中已进行详细阐述，在此不再赘述。
在一些实施例中，所述方法还包括：将采集图像中目标用户的左臂肘部标识为第一定位点、右臂肘部标识为第二定位点，其他关节标识为第三定位点，所述第三定位点位于左手、和/或左肩、和/或脖子、和/或右肩、和/或右手、和/或左腰、和/或右腰；根据追踪所述第一定位点、第二定位点、第三定位点的位置变化，确定目标用户的上身躯干是否处完全于采集区域、且所述目标用户是否正在离开所述采集区域。所述基于肢体识别的躲避球显示方法的具体操作、步骤在上文对显示设备实现方案中已进行详细阐述，在此不再赘述。
在一些实施例中，控制所述用户界面在所述第一位置显示第一标识，具体包括所述控制器：将所述第一标识覆盖显示于所述第一位置的目标用户。所述基于肢体识别的躲避球显示方法的具体操作、步骤在上文对显示设备实现方案中已进行详细阐述，在此不再赘述。
本申请实施例的有益效果在于，通过构建第一尺寸，可以控制第一标识的尺寸；进一步通过构建第一位置，可以实现第一标识的位置获取；进一步通过控制第一标识不显示，可以实现用户离开游戏时不发射躲避球；进一步通过构建第一定位点、第二定位点、第三定位点，可以实现识别游戏用户肢体、预测游戏用户运动趋势、根据用户在屏幕中显示的大小调整第一标识的尺寸、实现用户不在屏幕显示范围内时不进行游戏。
此外，本领域技术人员可以理解，本申请的各方面可以通过若干具有可专利性的种类或情况进行说明和描述，包括任何新的和有用的工序、机器、产品或物质的组合，或对他们的任何新的和有用的改进。相应地，本申请的各个方面可以完全由硬件执行、可以完全由软件(包括固件、常驻软件、微码等)执行、也可以由硬件和软件组合执行。以上硬件或软件均可被称为″数据块″、″控制器″、″引擎″、″单元″、″组件″或″系统″。此外，本申请的各方面可能表现为位于一个或多个计算机可读介质中的计算机产品，该产品包括计算机可读程序编码。
计算机存储介质可能包含一个内合有计算机程序编码的传播数据信号，例如在基带上或作为载波的一部分。该传播信号可能有多种表现形式，包括电磁形式、光形式等，或合适的组合形式。计算机存储介质可以是除计算机可读存储介质之外的任何计算机可读介质，该介质可以通过连接至一个指令执行系统、装置或设备以实现通讯、传播或传输供使用的程序。位于计算机存储介质上的程序编码可以通过任何合适的介质进行传播，包括无线电、电缆、光纤电缆、RF、或类似介质，或任何上述介质的组合。
本申请各部分操作所需的计算机程序编码可以用任意一种或多种程序语言编写，包括面向对象编程语言如Java、Scala、Smalltalk、Eiffel、JADE、Emerald、C++、C#、VB.NET、Python等，常规程序化编程语言如C语言、Visual Basic、Fortran 2003、Perl、COBOL 2002、PHP、ABAP，动态编程语言如Python、Ruby和Groovy，或其他编程语言等。该程序编码可以完全在用户计算机上运行、或作为独立的软件包在用户计算机上运行、或部分在用户计算机上运行部分在远程计算机运行、或完全在远程计算机或服务器上运行。在后种情况下，远程计算机可以通过任何网络形式与用户计算机连接，比如局域网(LAN)或广域网(WAN)、或连接至外部计算机(例如通过因特网)、或在云计算环境中、或作为服务使用如软件即服务(SaaS)。
此外，除非权利要求中明确说明，本申请所述处理元素和序列的顺序、数字字母的使用、或其他名称的使用，并非用于限定本申请流程和方法的顺序。尽管上述披露中通过各种示例讨论了一些目前认为有用的发明实施例，但应当理解的是，该类细节仅起到说明的目的，附加的权利要求并不仅限于披露的实施例，相反，权利要求旨在覆盖所有符合本申请实施例实质和范围的修正和等价组合。例如，虽然以上所描述的系统组件可以通过硬件设备实现，但是也可以只通过软件的解决方案得以实现，如在现有的服务器或移动设备上安装所描述的系统。
同理，应当注意的是，为了简化本申请披露的表述，从而帮助对一个或多个发明实施例的理解，前文对本申请实施例的描述中，有时会将多种特征归并至一个实施例、附图或对其的描述中。但是，这种披露方法并不意味着本申请对象所需要的特征比权利要求中提及的特征多。实际上，实施例的特征要少于上述披露的单个实施例的全部特征。
针对本申请引用的每个专利、专利申请、专利申请公开物和其他材料，如文章、书籍、说明书、出版物、文档等，特此将其全部内容并入本申请作为参考。与本申请内容不一致或产生冲突的申请历史文件除外，对本申请权利要求最广范围有限制的文件(当前或之后附加于本申请中的)也除外。需要说明的是，如果本申请附属材料中的描述、定义、和/或术语的使用与本申请所述内容有不一致或冲突的地方，以本申请的描述、定义和/或术语的使用为准。

Claims (10)

1.一种显示设备，其特征在于，包括：
摄像头，用于在检测区域内采集躲避球游戏中的目标用户、背景图像；
显示器，用于显示包含所述目标用户、背景图像的躲避球游戏用户界面；
控制器，被配置为：
根据所述背景图像中目标用户的第一尺寸、及所述目标用户在所述用户界面中的第一位置，控制所述用户界面在所述第一位置显示第一标识，其中，所述第一标识用于触发躲避球发射，所述第一标识的尺寸与所述第一尺寸相应；
当所述目标用户的上身躯干不完全位于所述采集区域、且所述目标用户正在离开所述采集区域时，控制器控制所述用户界面不再显示所述第一标识。
2.如权利要求1所述显示设备，其特征在于，所述控制器控制所述用户界面在所述第一位置显示第一标识，所述第一标识的尺寸与所述第一尺寸相应，具体包括：
当所述目标用户相对于所述摄像头由远到近运动时，所述第一尺寸逐渐变大，所述第一标识的尺寸相应于所述第一标识变大；
当所述目标用户相对于所述摄像头由近到远运动时，所述第一尺寸逐渐变小，所述第一标识的尺寸相应于所述第一标识变小。
3.如权利要求2所述显示设备，其特征在于，所述控制器控制所述用户界面在所述第一位置显示第一标识，所述第一标识的尺寸与所述第一尺寸相应，具体包括所述控制器：
将摄像头采集图像中目标用户的左臂肘部标识为第一定位点、右臂肘部标识为第二定位点；
根据所述第一定位点、第二定位点之间的第一间隔距离，确定在所述第一位置处显示第一标识的尺寸。
4.如权利要求3所述显示设备，其特征在于，所述控制器还被配置为：
将摄像头采集图像中目标用户的左臂肘部标识为第一定位点、右臂肘部标识为第二定位点，其他关节标识为第三定位点，所述第三定位点位于左手、和/或左肩、和/或脖子、和/或右肩、和/或右手、和/或左腰、和/或右腰；
根据追踪所述第一定位点、第二定位点、第三定位点的位置变化，确定目标用户的上身躯干是否处完全于采集区域、且所述目标用户是否正在离开所述采集区域。
5.如权利要求1所述显示设备，其特征在于，控制器控制所述用户界面在所述第一位置显示第一标识，具体包括所述控制器：
将所述第一标识覆盖显示于所述第一位置的目标用户。
6.一种基于肢体识别的躲避球显示方法，其特征在于，所述方法包括：
根据躲避球游戏用户界面背景图像中目标用户的第一尺寸、及所述目标用户在所述用户界面中的第一位置，控制所述用户界面在所述第一位置显示第一标识，其中，所述第一标识用于触发躲避球发射，所述第一标识的尺寸与所述第一尺寸相应；
当所述目标用户的上身躯干不完全位于摄像头的采集区域、且所述目标用户正在离开所述采集区域时，控制所述用户界面不再显示所述第一标识。
7.如权利要求6所述基于肢体识别的躲避球显示方法，其特征在于，控制所述用户界面在所述第一位置显示第一标识，所述第一标识的尺寸与所述第一尺寸相应，具体包括：
当目标用户相对于摄像头由远到近运动时，所述第一尺寸逐渐变大，所述第一标识的尺寸相应于所述第一标识变大；
当目标用户相对于摄像头由近到远运动时，所述第一尺寸逐渐变小，所述第一标识的尺寸相应于所述第一标识变小。
8.如权利要求7所述基于肢体识别的躲避球显示方法，其特征在于，控制所述用户界面在所述第一位置显示第一标识，所述第一标识的尺寸与所述第一尺寸相应，具体包括：
将采集图像中目标用户的左臂肘部标识为第一定位点、右臂肘部标识为第二定位点；
根据所述第一定位点、第二定位点之间的第一间隔距离，确定在所述第一位置处显示第一标识的尺寸。
9.如权利要求8所述基于肢体识别的躲避球显示方法，其特征在于，所述方法还包括：
将采集图像中目标用户的左臂肘部标识为第一定位点、右臂肘部标识为第二定位点，其他关节标识为第三定位点，所述第三定位点位于左手、和/或左肩、和/或脖子、和/或右肩、和/或右手、和/或左腰、和/或右腰；
根据追踪所述第一定位点、第二定位点、第三定位点的位置变化，确定目标用户的上身躯干是否处完全于采集区域、且所述目标用户是否正在离开所述采集区域。
10.如权利要求6所述基于肢体识别的躲避球显示方法，其特征在于，控制所述用户界面在所述第一位置显示第一标识，具体包括所述控制器：将所述第一标识覆盖显示于所述第一位置的目标用户。
CN202011267208.1A 2020-11-12 2020-11-13 一种显示设备及基于肢体识别的躲避球显示方法 Active CN112473121B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202011267208.1A CN112473121B (zh) 2020-11-13 2020-11-13 一种显示设备及基于肢体识别的躲避球显示方法
PCT/CN2021/117797 WO2022100262A1 (zh) 2020-11-12 2021-09-10 显示设备、人体姿态检测方法及应用
CN202180057495.XA CN116114250A (zh) 2020-11-12 2021-09-10 显示设备、人体姿态检测方法及应用

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011267208.1A CN112473121B (zh) 2020-11-13 2020-11-13 一种显示设备及基于肢体识别的躲避球显示方法

Publications (2)

Publication Number Publication Date
CN112473121A true CN112473121A (zh) 2021-03-12
CN112473121B CN112473121B (zh) 2023-06-09

Family

ID=74930219

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011267208.1A Active CN112473121B (zh) 2020-11-12 2020-11-13 一种显示设备及基于肢体识别的躲避球显示方法

Country Status (1)

Country Link
CN (1) CN112473121B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114302200A (zh) * 2021-06-28 2022-04-08 海信视像科技股份有限公司 一种显示设备、及基于用户姿态触发的拍照方法
WO2022100262A1 (zh) * 2020-11-12 2022-05-19 海信视像科技股份有限公司 显示设备、人体姿态检测方法及应用
CN115810203A (zh) * 2022-12-19 2023-03-17 天翼爱音乐文化科技有限公司 一种障碍物躲避识别方法、系统、电子设备及存储介质

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102221886A (zh) * 2010-06-11 2011-10-19 微软公司 通过化身与用户界面交互
CN102508548A (zh) * 2011-11-08 2012-06-20 北京新岸线网络技术有限公司 一种电子信息设备的操作方法及系统
CN202605707U (zh) * 2012-05-15 2012-12-19 上海体育学院中国武术博物馆 躲避暗器互动体验系统
CN109200575A (zh) * 2017-06-29 2019-01-15 深圳泰山体育科技股份有限公司 基于视觉识别的加强用户现场运动体验的方法和系统
CN109407825A (zh) * 2018-08-30 2019-03-01 百度在线网络技术（北京）有限公司 基于虚拟物品的互动方法与装置
CN109872283A (zh) * 2019-01-18 2019-06-11 维沃移动通信有限公司 一种图像处理方法及移动终端
CN110559645A (zh) * 2019-07-18 2019-12-13 华为技术有限公司 一种应用的运行方法及电子设备
WO2020063009A1 (zh) * 2018-09-25 2020-04-02 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN110947181A (zh) * 2018-09-26 2020-04-03 Oppo广东移动通信有限公司 游戏画面显示方法、装置、存储介质及电子设备
CN111352507A (zh) * 2020-02-27 2020-06-30 维沃移动通信有限公司 信息提示方法及电子设备
CN111417028A (zh) * 2020-03-13 2020-07-14 腾讯科技（深圳）有限公司 信息处理方法、装置、存储介质及电子设备
WO2020147796A1 (zh) * 2019-01-18 2020-07-23 北京市商汤科技开发有限公司 图像处理方法及装置、图像设备及存储介质
CN111514584A (zh) * 2019-02-01 2020-08-11 北京市商汤科技开发有限公司 游戏控制方法及装置、游戏终端及存储介质
CN111897430A (zh) * 2020-07-30 2020-11-06 深圳创维－Rgb电子有限公司 应用的控制方法、显示终端及计算机可读存储介质
CN111901518A (zh) * 2020-06-23 2020-11-06 维沃移动通信有限公司 显示方法、装置和电子设备

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102221886A (zh) * 2010-06-11 2011-10-19 微软公司 通过化身与用户界面交互
CN102508548A (zh) * 2011-11-08 2012-06-20 北京新岸线网络技术有限公司 一种电子信息设备的操作方法及系统
CN202605707U (zh) * 2012-05-15 2012-12-19 上海体育学院中国武术博物馆 躲避暗器互动体验系统
CN109200575A (zh) * 2017-06-29 2019-01-15 深圳泰山体育科技股份有限公司 基于视觉识别的加强用户现场运动体验的方法和系统
CN109407825A (zh) * 2018-08-30 2019-03-01 百度在线网络技术（北京）有限公司 基于虚拟物品的互动方法与装置
WO2020063009A1 (zh) * 2018-09-25 2020-04-02 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN110947181A (zh) * 2018-09-26 2020-04-03 Oppo广东移动通信有限公司 游戏画面显示方法、装置、存储介质及电子设备
WO2020147796A1 (zh) * 2019-01-18 2020-07-23 北京市商汤科技开发有限公司 图像处理方法及装置、图像设备及存储介质
CN109872283A (zh) * 2019-01-18 2019-06-11 维沃移动通信有限公司 一种图像处理方法及移动终端
CN111514584A (zh) * 2019-02-01 2020-08-11 北京市商汤科技开发有限公司 游戏控制方法及装置、游戏终端及存储介质
CN110559645A (zh) * 2019-07-18 2019-12-13 华为技术有限公司 一种应用的运行方法及电子设备
CN111352507A (zh) * 2020-02-27 2020-06-30 维沃移动通信有限公司 信息提示方法及电子设备
CN111417028A (zh) * 2020-03-13 2020-07-14 腾讯科技（深圳）有限公司 信息处理方法、装置、存储介质及电子设备
CN111901518A (zh) * 2020-06-23 2020-11-06 维沃移动通信有限公司 显示方法、装置和电子设备
CN111897430A (zh) * 2020-07-30 2020-11-06 深圳创维－Rgb电子有限公司 应用的控制方法、显示终端及计算机可读存储介质

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022100262A1 (zh) * 2020-11-12 2022-05-19 海信视像科技股份有限公司 显示设备、人体姿态检测方法及应用
CN114302200A (zh) * 2021-06-28 2022-04-08 海信视像科技股份有限公司 一种显示设备、及基于用户姿态触发的拍照方法
CN115810203A (zh) * 2022-12-19 2023-03-17 天翼爱音乐文化科技有限公司 一种障碍物躲避识别方法、系统、电子设备及存储介质
CN115810203B (zh) * 2022-12-19 2024-05-10 天翼爱音乐文化科技有限公司 一种障碍物躲避识别方法、系统、电子设备及存储介质

Also Published As

Publication number Publication date
CN112473121B (zh) 2023-06-09

Similar Documents

Publication Publication Date Title
CN111752518B (zh) 一种显示设备投屏方法及显示设备
CN112473121B (zh) 一种显示设备及基于肢体识别的躲避球显示方法
CN112055240B (zh) 一种显示设备及其与遥控器配对的操作提示展示方法
CN112866772B (zh) 一种显示设备及声像人物定位追踪方法
CN112543359B (zh) 一种显示设备及自动配置视频参数的方法
CN111031375B (zh) 一种开机动画详情页的跳转方法及显示设备
CN112866773B (zh) 一种显示设备及多人场景下摄像头追踪方法
CN114079829A (zh) 一种显示设备及视频集锦文件水印的生成方法
CN112333499A (zh) 寻找目标设备的方法和显示设备
CN111836083B (zh) 显示设备及屏幕发声方法
CN111083538A (zh) 一种背景图像的显示方法及设备
CN111939561B (zh) 显示设备及交互方法
CN111984167B (zh) 一种快捷命名的方法及显示设备
CN111586463B (zh) 显示设备
CN110719514A (zh) 设备的控制方法及系统、终端
CN112261289B (zh) 显示设备及ai算法结果获取方法
CN112073777B (zh) 一种语音交互方法及显示设备
CN113573115B (zh) 确定搜索字符的方法及显示设备
CN111931692A (zh) 显示设备及图像识别方法
CN112399235A (zh) 一种智能电视的摄像头拍照效果增强方法及显示设备
CN113542878A (zh) 一种基于人脸识别与手势检测的唤醒方法及显示设备
CN113467651A (zh) 一种控件对应的内容的显示方法及显示设备
CN113807375B (zh) 一种显示设备
CN113645502B (zh) 一种动态调整控件的方法及显示设备
CN112087651B (zh) 显示询问信息的方法及智能电视

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant