CN112905008A - 一种手势调节显示图像方法及显示设备 - Google Patents

一种手势调节显示图像方法及显示设备 Download PDF

Info

Publication number
CN112905008A
CN112905008A CN202110125868.4A CN202110125868A CN112905008A CN 112905008 A CN112905008 A CN 112905008A CN 202110125868 A CN202110125868 A CN 202110125868A CN 112905008 A CN112905008 A CN 112905008A
Authority
CN
China
Prior art keywords
gesture
display
data
camera
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110125868.4A
Other languages
English (en)
Other versions
CN112905008B (zh
Inventor
刘兆磊
刘金刚
杨鲁明
孙娜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Visual Technology Co Ltd
Original Assignee
Hisense Visual Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Visual Technology Co Ltd filed Critical Hisense Visual Technology Co Ltd
Priority to CN202110125868.4A priority Critical patent/CN112905008B/zh
Publication of CN112905008A publication Critical patent/CN112905008A/zh
Application granted granted Critical
Publication of CN112905008B publication Critical patent/CN112905008B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请公开了一种手势调节显示图像方法及显示设备，本申请实施例可以给用户调节显示器上显示图像大小，提供便利。该方法包括：获取摄像头采集的图像数据；如果启动预设应用，则根据所述摄像头采集的图像数据，确定手势数据，其中所述手势数据包括手势类型和移动数据；如果所述手势类型为与调节摄像头焦距相关联的手势，则根据所述移动数据缩放显示在显示器上的图像；如果未启动预设应用，则不确定手势数据。

Description

一种手势调节显示图像方法及显示设备
技术领域
本申请涉及显示图像的技术领域，尤其涉及一种手势调节显示图像方法及显示设备。
背景技术
显示设备可以通过摄像头实现拍照功能，但是在拍照过程中可能出现焦距不合适的情况，例如，用户可能只想拍摄上半身，而当前摄像头拍摄了全身，此时需要调节摄像头的焦距，目前使用遥控器上的物理按键实现调节摄像头的焦距，给用户带来不便。
发明内容
本申请实施例提供一种手势调节显示图像方法及显示设备，给用户调节显示器上显示图像大小，提供便利。
第一方面，提供一种显示设备，包括：
显示器，用于显示用户界面；
用户接口，用于接收输入信号；
分别与显示器和用户接口连接的控制器，用于执行：
获取摄像头采集的图像数据；如果启动预设应用，则根据所述摄像头采集的图像数据，确定手势数据，其中所述手势数据包括手势类型和移动数据；如果所述手势类型为与调节摄像头焦距相关联的手势，则根据所述移动数据缩放显示在显示器上的图像；如果未启动预设应用，则不确定手势数据。
一些实施例中，所述控制器被配置为按照下述步骤执行根据所述摄像头采集的图像数据，确定手势类型：
获取摄像头预设时间段内拍摄的图片，确定每张图片对应的手势；
将最多数量的手势作为第一手势，如果所述第一手势对应的图片数量占所述图片的总数量的比例大于预设比例，则确定所述第一手势为手势类型。
一些实施例中，所述控制器被配置为按照下述步骤执行如果所述手势类型为与调节摄像头焦距相关联的手势，根据所述移动数据缩放显示在显示器上的图像：
如果所述手势类型为与调节摄像头焦距相关联的手势，则启动手势处理线程；
获取所述移动数据，并存入消息队列中；
所述手势处理线程间隔预设时间从所述消息队列中读取移动数据集；
如果所述移动数据集中移动数据的数量大于预设数量，则计算移动数据集中的按照时间排列的第一个移动数据和最后一个移动数据的变化值；
根据所述变化值，缩放显示在显示器上的图像。
一些实施例中，所述控制器被配置为按照下述步骤执行根据所述变化值，缩放显示在显示器上的图像：
如果所述变化值大于预设变化值，且所述变化值与历史变化值的方向相同，则将移动数据集中的移动数据，根据距离滤波算法，缩放显示在显示器上的图像，并将移动数据集从消息队列中删除。
一些实施例中，所述控制器，还用于执行：
如果所述变化值大于预设变化值，且所述变化值与历史变化值的方向相反，则第一个移动数据对应的与调节摄像头焦距相关联的手势的位置作为初始位置，根据所述变化值和预设比较值，缩放显示在显示器上的图像，并将移动数据集从消息队列中删除。
一些实施例中，所述控制器被配置为按照下述步骤执行根据所述变化值和预设比较值，缩放显示在显示器上的图像：
如果所述变化值大于第一预设比较值，则焦距变化到0.5f，根据焦距缩放显示在显示器上的图像；
如果所述变化值不大于第一预设比较值，且大于第二预设比较值，则焦距变化到0.3f，根据焦距缩放显示在显示器上的图像；如果所述变化值不大于所述第二预设比较值，则焦距变化到0.2f，根据焦距缩放显示在显示器上的图像。
一些实施例中，所述控制器，还用于执行：如果所述变化值不大于预设变化值，则不做处理，不将移动数据集从消息队列中删除。
一些实施例中，所述控制器，还用于执行：所述控制器，还用于执行：如果所述移动数据集中移动数据的数量不大于预设数量，则不做处理，不将移动数据集从消息队列中删除。
一些实施例中，所述距离滤波算法包括：
读取移动数据集中每个移动数据的横向坐标，标记为A0、A1...An；
Dn＝An-An-1，其中，n＝1，2，...i，Dn两个相邻位置第n次位置和第n-1次位置的横向坐标的差值；
Figure BDA0002923527770000021
Figure BDA0002923527770000022
表示差值的平均值；
通过系数修正A″′n＝A′n＊K+(1-K)＊An，A″′n为手势最终位置；
其中，A′n＝A′n-1+D；K可以取0.2，A′0＝A0；
根据第n次手势的手势最终位置和第n-1次位置，确定修正后的变化值。
第二方面，本申请提供一种显示设备，包括：
显示器，用于显示用户界面；
用户接口，用于接收输入信号；
分别与显示器和用户接口连接的控制器，用于执行：
获取摄像头采集的图像数据；如果启动预设应用，则根据所述摄像头采集的图像数据，确定手势数据，其中所述手势数据包括手势类型和移动数据；如果所述手势类型为与调节摄像头焦距相关联的手势，则根据所述移动数据，调节所述摄像头的焦距；
如果未启动预设应用，则不确定手势数据。
第三方面，本申请提供一种手势调节显示图像方法，所述方法包括：
获取摄像头采集的图像数据；如果启动预设应用，则根据所述摄像头采集的图像数据，确定手势数据，其中所述手势数据包括手势类型和移动数据；如果所述手势类型为与调节摄像头焦距相关联的手势，则根据所述移动数据缩放显示在显示器上的图像；如果未启动预设应用，则不确定手势数据。
在上述实施例中，一种手势调节显示图像方法及显示设备，本申请实施例可以给用户调节显示器上显示图像大小，提供便利。该方法包括：获取摄像头采集的图像数据；如果启动预设应用，则根据所述摄像头采集的图像数据，确定手势数据，其中所述手势数据包括手势类型和移动数据；如果所述手势类型为与调节摄像头焦距相关联的手势，则根据所述移动数据缩放显示在显示器上的图像；如果未启动预设应用，则不确定手势数据。
附图说明
图1示出了根据一些实施例的显示设备的使用场景；
图2示出了根据一些实施例的控制装置100的硬件配置框图；
图3示出了根据一些实施例的显示设备200的硬件配置框图；
图4示出了根据一些实施例的显示设备200中软件配置图；
图5中示例性示出了根据一些实施例的显示界面示意图；
图6中示例性示出了根据又一些实施例的显示界面示意图；
图7中示例性示出了根据又一些实施例的显示界面示意图；
图8中示例性示出了根据一些实施例的与调节摄像头焦距相关联的手势的示意图；
图9中示例性示出了根据一些实施例的与调节摄像头焦距相关联的手势的移动示意图。
具体实施方式
为使本申请的目的和实施方式更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施方式进行清楚、完整地描述，显然，描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。
需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。
本申请中说明书和权利要求书及上述附图中的术语″第一″、″第二″、″第三″等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。
术语″包括″和″具有″以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
术语″模块″是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。
图1为根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示，用户可通过智能设备300或控制装置100操作显示设备200。
在一些实施例中，控制装置100可以是遥控器，遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信，及其他短距离通信方式，通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令，来控制显示设备200。
在一些实施例中，也可以使用智能设备300(如移动终端、平板电脑、计算机、笔记本电脑等)以控制显示设备200。例如，使用在智能设备上运行的应用程序控制显示设备200。
在一些实施例中，显示设备200还可以采用除了控制装置100和智能设备300之外的方式进行控制，例如，可以通过显示设备200设备内部配置的获取语音指令的模块直接接收用户的语音指令控制，也可以通过显示设备200设备外部设置的语音控制设备来接收用户的语音指令控制。
在一些实施例中，显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群，也可以是多个集群，可以包括一类或多类服务器。
图2示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示，控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起用用户与显示设备200之间交互中介作用。
图3示出了根据示例性实施例中显示设备200的硬件配置框图。
在一些实施例中，显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。
在一些实施例中控制器包括处理器，视频处理器，音频处理器，图形处理器，RAM，ROM，用于输入/输出的第一接口至第n接口。
在一些实施例中，显示器260包括用于呈现画面的显示屏组件，以及驱动图像显示的驱动组件，用于接收源自控制器输出的图像信号，进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控UI界面。
在一些实施例中，显示器260可为液晶显示器、OLED显示器、以及投影显示器，还可以为一种投影装置和投影屏幕。
在一些实施例中，通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如：通信器可以包括Wifi模块，蓝牙模块，有线以太网模块等其他网络通信协议芯片或近场通信协议芯片，以及红外接收器中的至少一种。显示设备200可以通过通信器220与外部控制设备100或服务器400建立控制信号和数据信号的发送和接收。
在一些实施例中，用户接口，可用于接收控制装置100(如：红外遥控器等)的控制信号。
在一些实施例中，检测器230用于采集外部环境或与外部交互的信号。例如，检测器230包括光接收器，用于采集环境光线强度的传感器；或者，检测器230包括图像采集器，如摄像头，可以用于采集外部环境场景、用户的属性或用户交互手势，再或者，检测器230包括声音采集器，如麦克风等，用于接收外部声音。
在一些实施例中，外部装置接口240可以包括但不限于如下：高清多媒体接口接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。
在一些实施例中，调谐解调器210通过有线或无线接收方式接收广播电视信号，以及从多个无线或有线广播电视信号中解调出音视频信号，如以及EPG数据信号。
在一些实施例中，控制器250和调谐解调器210可以位于不同的分体设备中，即调谐解调器210也可在控制器250所在的主体设备的外置设备中，如外置机顶盒等。
在一些实施例中，控制器250，通过存储在存储器上中各种软件控制程序，来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如：响应于接收到用于选择在显示器260上显示UI对象的用户命令，控制器250便可以执行与由用户命令选择的对象有关的操作。
在一些实施例中，所述对象可以是可选对象中的任何一个，例如超链接、图标或其他可操作的控件。与所选择的对象有关操作有：显示连接到超链接页面、文档、图像等操作，或者执行与所述图标相对应程序的操作。
在一些实施例中控制器包括中央处理器(Central Processing Unit，CPU)，视频处理器，音频处理器，图形处理器(Graphics Processing Unit，GPU)，RAM Random AccessMemory，RAM)，ROM(Read-Only Memory，ROM)，用于输入/输出的第一接口至第n接口，通信总线(Bus)等中的至少一种。
CPU处理器。用于执行存储在存储器中操作系统和应用程序指令，以及根据接收外部输入的各种交互指令，来执行各种应用程序、数据和内容，以便最终显示和播放各种音视频内容。CPU处理器，可以包括多个处理器。如，包括一个主处理器以及一个或多个子处理器。
在一些实施例中，图形处理器，用于产生各种图形对象，如：图标、操作菜单、以及用户输入指令显示图形等。图形处理器包括运算器，通过接收用户输入各种交互指令进行运算，根据显示属性显示各种对象；还包括渲染器，对基于运算器得到的各种对象，进行渲染，上述渲染后的对象用于显示在显示器上。
在一些实施例中，视频处理器，用于将接收外部视频信号，根据输入信号的标准编解码协议，进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频处理，可得到直接可显示设备200上显示或播放的信号。
在一些实施例中，视频处理器，包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。其中，解复用模块，用于对输入音视频数据流进行解复用处理。视频解码模块，用于对解复用后的视频信号进行处理，包括解码和缩放处理等。图像合成模块，如图像合成器，其用于将图形生成器根据用户输入或自身生成的GUI信号，与缩放处理后视频图像进行叠加混合处理，以生成可供显示的图像信号。帧率转换模块，用于对转换输入视频帧率。显示格式化模块，用于将接收帧率转换后视频输出信号，改变信号以符合显示格式的信号，如输出RGB数据信号。
在一些实施例中，音频处理器，用于接收外部的音频信号，根据输入信号的标准编解码协议，进行解压缩和解码，以及降噪、数模转换、和放大处理等处理，得到可以在扬声器中播放的声音信号。
在一些实施例中，用户可在显示器260上显示的图形用户界面(GUI)输入用户命令，则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者，用户可通过输入特定的声音或手势进行输入用户命令，则用户输入接口通过传感器识别出声音或手势，来接收用户输入命令。
在一些实施例中，″用户界面″，是应用程序或操作系统与用户之间进行交互和信息交换的介质接口，它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface，GUI)，是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素，其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
在一些实施例中，显示设备的系统可以包括内核(Kernel)、命令解析器(shell)、文件系统和应用程序。内核、shell和文件系统一起组成了基本的操作系统结构，它们让用户可以管理文件、运行程序并使用系统。上电后，内核启动，激活内核空间，抽象硬件、初始化硬件参数等，运行并维护虚拟内存、调度器、信号及进程间通信(IPC)。内核启动后，再加载Shell和用户应用程序。应用程序在启动后被编译成机器码，形成一个进程。
如图4所示，显示设备的系统可以包括内核(Kernel)、命令解析器(shell)、文件系统和应用程序。内核、shell和文件系统一起组成了基本的操作系统结构，它们让用户可以管理文件、运行程序并使用系统。上电后，内核启动，激活内核空间，抽象硬件、初始化硬件参数等，运行并维护虚拟内存、调度器、信号及进程间通信(IPC)。内核启动后，再加载Shell和用户应用程序。应用程序在启动后被编译成机器码，形成一个进程。
如图4所示，将显示设备的系统分为三层，从上至下分别为应用层、中间件层和硬件层。
应用层主要包含电视上的常用应用，以及应用框架(Application Framework)，其中，常用应用主要是基于浏览器Browser开发的应用，例如：HTML5 APPs；以及原生应用(Native APPs)；
应用框架(Application Framework)是一个完整的程序模型，具备标准应用软件所需的一切基本功能，例如：文件存取、资料交换...，以及这些功能的使用接口(工具栏、状态列、菜单、对话框)。
原生应用(Native APPs)可以支持在线或离线，消息推送或本地资源访问。
中间件层包括各种电视协议、多媒体协议以及系统组件等中间件。中间件可以使用系统软件所提供的基础服务(功能)，衔接网络上应用系统的各个部分或不同的应用，能够达到资源共享、功能共享的目的。
硬件层主要包括HAL接口、硬件以及驱动，其中，HAL接口为所有电视芯片对接的统一接口，具体逻辑由各个芯片来实现。驱动主要包含：音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器，温度传感器，压力传感器等)、以及电源驱动等。
显示设备可以通过摄像头实现拍照功能，但是在拍照过程中可能出现焦距不合适的情况，例如，用户可能只想拍摄上半身，而当前摄像头拍摄了全身，此时需要调节摄像头的焦距，目前使用遥控器上的物理按键实现调节摄像头的焦距，给用户带来不便。
为了避免使用遥控器的按键给用户带来不好的使用体验，本申请实施例通过识别图像中的手势，最终实现调节摄像头的焦距目的。
本申请实施例使用的场景可以为利用显示设备上安装的″魔镜″应用，启动″魔镜″应用，控制显示设备上的摄像头拍摄周围环境，并将拍摄的图像显示在显示设备的显示器上，如图5所示。
本申请实施例提供一种手势调节摄像头的焦距方法。本申请实施例中，所述摄像头可以内置在显示设备中，也可以外接在显示设备上。启动″魔镜″应用时，摄像头拍摄图片。由于摄像头的焦距不同，拍摄范围也不相同，所以本申请实施例的显示界面上还设置有设置控件，再次参阅图5，用户可以通过控制装置移动选择器到设置控件51上，并按压控制装置上的确认键，用户界面跳转到图6。
需要说明的是，控件是指在显示设备中GUI显示以表示诸如图标、缩略图、视频剪辑、链接等对应内容的视觉对象。
控件的展示形式通常多样化。例如，控件可以包括文本内容和/或用于显示与文本内容相关的缩略图的图像。又如，控件可以是应用程序的文本和/或图标。还需说明的是，选择器用于指示其中任一控件已被选择，如焦点对象。一方面，可根据用户通过控制装置的输入，控制显示设备中显示焦点对象的移动来选择或控制控件。如：用户可通过控制装置上方向键控制焦点对象在控件之间的移动来选择和控制控件。另一方面，可根据用户通过控制装置的输入，控制显示设备中显示的各控件的移动来使得焦点对象选择或控制控件。如：用户可通过控制装置上方向键控制各控件一并进行左右移动，以在保持焦点对象的位置不变时使得焦点对象选择和控制控件。选择器的标识形式通常多样化。示例的，如图5中设置控件51可以通过改变聚焦控件的文本或图像的边框线、尺寸、颜色、透明度和轮廓和/或字体等标识焦点对象的位置，通过设置控件背景色来实现或标识焦点对象的位置。
在图6中设置列表中显示有焦距设置控件，用户可以通过控制装置移动选择器到焦距设置控件上，并按压控制装置上的确认键，用户界面跳转到图7，在显示的图7的用户界面上除了显示有摄像头拍摄的图像，还显示有调节焦距后的预览图71和/或放大倍数72，该放大倍数与焦距成正比，放大倍数和焦距的转化方法为现有技术，在此不做具体说明。
本申请实施例中，获取摄像头采集的图像数据。本申请实施例在启动″魔镜″应用后，摄像头持续拍摄图片，但是不在任何时间都对图片识别手势，根据手势调节焦距。因为在正常的拍摄过程中，用户也可能摆出与调节摄像头焦距相关联的手势去拍照，所以如果启动预设应用，则启动手势检测线程。本申请实施例中，所述预设应用可以为焦距设置应用，如图6所示，启动焦距设置应用通过控制装置移动选择器到焦距设置控件上，并按压控制装置上的确认键启动。所述手势检测线程根据所述摄像头拍摄的图片，确定手势数据，其中所述手势数据包括手势类型和移动数据。如果所述手势类型为与调节摄像头焦距相关联的手势，根据所述移动数据缩放显示在显示器上的图像。如果未启动预设应用，则不确定手势数据，且不利用所述手势数据，缩放显示在显示器上的图像。本申请实施例的最终目的是调节显示在显示器上的图像的大小，一些实施例中，可以直接利用摄像头的焦距调节，另一些实施例中，实际上不调节摄像头的焦距，而只是利用焦距作为缩放图像倍数的一个参考值，利用该参考值换算出图像的缩放倍数，直接将图像按照所述缩放倍数进行缩放后显示在显示器上。
一些实施例中，所述所述摄像头采集的图像数据，确定手势类型的步骤包括：
获取摄像头预设时间段内拍摄的图片，确定每张图片对应的手势。需要解释的是，如果仅通过一张图片，确定手势类型，可能会出现错误判断的情况。
一些实施例中，将预设时间段内拍摄的图片中最多数量的手势作为第一手势，如果所述第一手势对应的图片数量占所述图片的总数量的比例大于预设比例，则确定所述第一手势为手势类型。本申请实施例，在预设时间段内拍摄若干帧图片，确定每张图片对应的手势，如果多张图片都为同一手势，且占图片总数量的比例大于预设比例，则确定该手势为手势类型。
示例性的，预设时间段内拍摄的图片对应的手势依次包括拳头、OK、OK、OK、OK、OK、OK，此时将最多数量的手势OK作为第一手势，OK手势对应的图片的数量为6个，所有图片的数量为7个，所述预设比例可以为0.8，所述第一手势对应的图片数量占所述图片的总数量的比例为0.85，此时大于预设比例，则确定OK手势为手势类型，所述OK手势如图8所示。
一些实施例中，如果所述手势类型为与调节摄像头焦距相关联的手势，根据所述移动数据缩放显示在显示器上的图像的步骤包括：
如果所述手势类型为与调节摄像头焦距相关联的手势，则启动手势处理线程。示例性的，所述与调节摄像头焦距相关联的手势为OK手势，当手势类型为OK手势。
获取所述与调节摄像头焦距相关联的手势的移动数据，并存入消息队列中。本申请实施例中，所述移动数据包括手势的横向移动距离。示例性的，所述与调节摄像头焦距相关联的手势为OK手势，即OK手势的横向移动距离。
所述手势处理线程间隔预设时间从所述消息队列中读取移动数据集，所述预设时间可以为100ms，每隔100ms从消息队列中读取移动数据集。
如果所述移动数据集中移动数据的数量大于预设数量，则获取移动数据集中的按照时间排列的第一个移动数据和最后一个移动数据，并计算二者的变化值。示例性的，所述预设数量可以为1，当移动数据集中的移动数据的数量大于1时，则按照时间顺序排列移动数据集中的移动数据，确定最后一个移动数据相对于第一个移动数据的变化值，所述变化值除了包括数值改变，还包括变化方向，示例性的，与调节摄像头焦距相关联的手势可以向左移动或向右移动，如图9所示。
本申请实施例中，所述手势的横向移动距离可以根据手势的横向坐标表示。当第一个移动数据的横向坐标为2，最后一个移动数据的横向坐标为5，则可以将最后一个移动数据的横向坐标减去第一个移动数据的横向坐标，最终为3。当第一移动数据的横向坐标为5，最后一个移动数据的横向坐标为2，则将最后一个移动数据的横向坐标减去第一个移动数据的横向坐标，最终为-3。本申请实施例中变化方向可以根据数学符号，正号或负号表示。
一些实施例中，如果所述移动数据集中移动数据的数量不大于预设数量，则不做处理，不将移动数据集从消息队列中删除。当预设数量为1，移动数据集中移动数据的数量不大于1时，由于无法判断与调节摄像头焦距相关联的手势的变化值，所以此时不做处理，并且不将所述移动数据集从消息队列中删除，这样可以再次使用该移动数据。
一些实施例中，根据所述变化值，缩放显示在显示器上的图像。
一些实施例中，所述根据所述变化值，缩放显示在显示器上的图像的步骤包括：
如果所述变化值大于预设变化值，且所述变化值与历史变化值的方向相同，则将移动数据集中的移动数据，根据距离滤波算法，缩放显示在显示器上的图像，并将移动数据集从消息队列中删除。其中，所述历史变化值为上一预设时间内从所述消息队列中读取移动数据集时确定的变化值。所述距离滤波算法可以优化手势移动过程中的快慢不均的问题。
一些实施例中，所述距离滤波算法包括：
读取移动数据集中每个移动数据的横向坐标，标记为A0、A1...An；
Dn＝An-An-1，其中，n＝1，2，...i，Dn两个相邻位置第n次位置和第n-1次位置的横向坐标的差值。
Figure BDA0002923527770000111
Figure BDA0002923527770000113
表示差值的平均值；
通过系数修正A″′n＝A′n＊K+(1-K)＊An，A″′n为手势最终位置；
其中，
Figure BDA0002923527770000112
K可以取0.2，A′0＝A0；
修正后的变化值Di＝A″′n-An-1，A″′n为第n次手势的手势最终位置，An-1为第n-1次位置的横向坐标。
这样由于历史变化值和变化值的方向相同，为了避免两次移动手势移动过程中快慢不均的问题，对变化值进行修正，利用修正后的变化值确定手势的位置。
一些实施例中，根据所述修正后的变化值，缩放显示在显示器上的图像的步骤包括：
如果所述修正后的变化值大于第一预设比较值，则焦距变化到0.5f，根据焦距缩放显示在显示器上的图像；
如果所述修正后的变化值不大于第一预设比较值，且大于第二预设比较值，则焦距变化到0.3f，根据焦距缩放显示在显示器上的图像；如果所述修正后的变化值不大于所述第二预设比较值，则焦距变化到0.2f，根据焦距缩放显示在显示器上的图像。
一些实施例中，所述方法还包括：如果所述变化值大于预设变化值，且所述变化值与历史变化值的方向相反，则第一个移动数据对应的与调节摄像头焦距相关联的手势的位置作为初始位置，根据所述变化值和预设比较值，缩放显示在显示器上的图像，并将移动数据集从消息队列中删除。
一些实施例中，所述根据所述变化值和预设比较值，缩放显示在显示器上的图像的步骤包括：
如果所述变化值大于第一预设比较值，则焦距变化到0.5f，根据焦距缩放显示在显示器上的图像；
如果所述变化值不大于第一预设比较值，且大于第二预设比较值，则焦距变化到0.3f，根据焦距缩放显示在显示器上的图像；如果所述变化值不大于所述第二预设比较值，则焦距变化到0.2f，根据焦距缩放显示在显示器上的图像。
一些实施例中，所述方法还包括：如果所述变化值不大于预设变化值，则不做处理，不将移动数据集从消息队列中删除。为了避免摄像头检测出现的抖动，本申请实施例设置有预设变化值，如果变化值不大于预设变化值，则认为是一次抖动事件，不进行处理。
本申请实施例提供了通过手势识别实现摄像头虚拟调焦的算法，并能够鲁棒的解决在CPU负荷过大的情况下因手势检测过程中丢帧，卡顿，检测过慢而导致的焦距调节不流畅问题，能够通过识别滑动手势流畅的在智能电视上实现摄像头调焦。
上述实施例中，一种手势调节显示图像方法及显示设备，本申请实施例可以给用户调节显示器上显示图像大小，提供便利。该方法包括：获取摄像头采集的图像数据；如果启动预设应用，则根据所述摄像头采集的图像数据，确定手势数据，其中所述手势数据包括手势类型和移动数据；如果所述手势类型为与调节摄像头焦距相关联的手势，则根据所述移动数据缩放显示在显示器上的图像；如果未启动预设应用，则不确定手势数据。
最后应说明的是：以上各实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述各实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
为了方便解释，已经结合具体的实施方式进行了上述说明。但是，上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导，可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用，从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。

Claims (11)

1.一种显示设备，其特征在于，包括：
显示器，用于显示用户界面；
用户接口，用于接收输入信号；
分别与显示器和用户接口连接的控制器，用于执行：
获取摄像头采集的图像数据；如果启动预设应用，则根据所述摄像头采集的图像数据，确定手势数据，其中所述手势数据包括手势类型和移动数据；如果所述手势类型为与调节摄像头焦距相关联的手势，则根据所述移动数据缩放显示在显示器上的图像；
如果未启动预设应用，则不确定手势数据。
2.根据权利要求1所述的显示设备，其特征在于，所述控制器被配置为按照下述步骤执行根据所述摄像头采集的图像数据，确定手势类型：
获取摄像头预设时间段内拍摄的图片，确定每张图片对应的手势；
将最多数量的手势作为第一手势，如果所述第一手势对应的图片数量占所述图片的总数量的比例大于预设比例，则确定所述第一手势为手势类型。
3.根据权利要求1所述的显示设备，其特征在于，所述控制器被配置为按照下述步骤执行如果所述手势类型为与调节摄像头焦距相关联的手势，根据所述移动数据缩放显示在显示器上的图像：
如果所述手势类型为与调节摄像头焦距相关联的手势，则启动手势处理线程；
获取所述移动数据，并存入消息队列中；
所述手势处理线程间隔预设时间从所述消息队列中读取移动数据集；
如果所述移动数据集中移动数据的数量大于预设数量，则计算移动数据集中的按照时间排列的第一个移动数据和最后一个移动数据的变化值；
根据所述变化值，缩放显示在显示器上的图像。
4.根据权利要求3所述的显示设备，其特征在于，所述控制器被配置为按照下述步骤执行根据所述变化值，缩放显示在显示器上的图像：
如果所述变化值大于预设变化值，且所述变化值与历史变化值的方向相同，则将移动数据集中的移动数据，根据距离滤波算法，缩放显示在显示器上的图像，并将移动数据集从消息队列中删除。
5.根据权利要求4所述的显示设备，其特征在于，所述控制器，还用于执行：
如果所述变化值大于预设变化值，且所述变化值与历史变化值的方向相反，则第一个移动数据对应的与调节摄像头焦距相关联的手势的位置作为初始位置，根据所述变化值和预设比较值，缩放显示在显示器上的图像，并将移动数据集从消息队列中删除。
6.根据权利要求5所述的显示设备，其特征在于，所述控制器被配置为按照下述步骤执行根据所述变化值和预设比较值，缩放显示在显示器上的图像：
如果所述变化值大于第一预设比较值，则焦距变化到0.5f，根据焦距缩放显示在显示器上的图像；
如果所述变化值不大于第一预设比较值，且大于第二预设比较值，则焦距变化到0.3f，根据焦距缩放显示在显示器上的图像；如果所述变化值不大于所述第二预设比较值，则焦距变化到0.2f，根据焦距缩放显示在显示器上的图像。
7.根据权利要求4所述的显示设备，其特征在于，所述控制器，还用于执行：如果所述变化值不大于预设变化值，则不做处理，不将移动数据集从消息队列中删除。
8.根据权利要求4所述的显示设备，其特征在于，所述控制器，还用于执行：如果所述移动数据集中移动数据的数量不大于预设数量，则不做处理，不将移动数据集从消息队列中删除。
9.根据权利要求4所述的显示设备，其特征在于，所述距离滤波算法包括：
读取移动数据集中每个移动数据的横向坐标，标记为A0、A1...An；
Dn＝An-An-1，其中，n＝1，2，...i，Dn两个相邻位置第n次位置和第n-1次位置的横向坐标的差值；
Figure FDA0002923527760000021
Figure FDA0002923527760000022
表示差值的平均值；
通过系数修正A″′n＝A′n＊K+(1-K)＊An，A″′n为手势最终位置；
其中，
Figure FDA0002923527760000023
K可以取0.2，A′0＝A0；
根据第n次手势的手势最终位置和第n-1次位置，确定修正后的变化值。
10.一种显示设备，其特征在于，包括：
显示器，用于显示用户界面；
用户接口，用于接收输入信号；
分别与显示器和用户接口连接的控制器，用于执行：
获取摄像头采集的图像数据；如果启动预设应用，则根据所述摄像头采集的图像数据，确定手势数据，其中所述手势数据包括手势类型和移动数据；如果所述手势类型为与调节摄像头焦距相关联的手势，则根据所述移动数据，调节所述摄像头的焦距；
如果未启动预设应用，则不确定手势数据。
11.一种手势调节显示图像方法，其特征在于，所述方法包括：
获取摄像头采集的图像数据；如果启动预设应用，则根据所述摄像头采集的图像数据，确定手势数据，其中所述手势数据包括手势类型和移动数据；如果所述手势类型为与调节摄像头焦距相关联的手势，则根据所述移动数据缩放显示在显示器上的图像；
如果未启动预设应用，则不确定手势数据。
CN202110125868.4A 2021-01-29 2021-01-29 一种手势调节显示图像方法及显示设备 Active CN112905008B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110125868.4A CN112905008B (zh) 2021-01-29 2021-01-29 一种手势调节显示图像方法及显示设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110125868.4A CN112905008B (zh) 2021-01-29 2021-01-29 一种手势调节显示图像方法及显示设备

Publications (2)

Publication Number Publication Date
CN112905008A true CN112905008A (zh) 2021-06-04
CN112905008B CN112905008B (zh) 2023-01-20

Family

ID=76120978

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110125868.4A Active CN112905008B (zh) 2021-01-29 2021-01-29 一种手势调节显示图像方法及显示设备

Country Status (1)

Country Link
CN (1) CN112905008B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023040288A1 (zh) * 2021-09-18 2023-03-23 海信视像科技股份有限公司 显示设备及设备控制方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103914152A (zh) * 2014-04-11 2014-07-09 周光磊 三维空间中多点触控与捕捉手势运动的识别方法与系统
WO2015062247A1 (zh) * 2013-10-31 2015-05-07 京东方科技集团股份有限公司 显示装置及其控制方法、手势识别方法、和头戴显示装置
CN104656890A (zh) * 2014-12-10 2015-05-27 杭州凌手科技有限公司 虚拟现实智能投影手势互动一体机及互动实现方法
US20150293595A1 (en) * 2012-10-23 2015-10-15 Lg Electronics Inc. Image display device and method for controlling same
CN107077239A (zh) * 2015-05-29 2017-08-18 华为技术有限公司 通过触控板调节移动终端拍照焦距的方法和移动终端
CN107105093A (zh) * 2017-04-18 2017-08-29 广东欧珀移动通信有限公司 基于手部轨迹的拍照控制方法、装置及终端
WO2020197070A1 (en) * 2019-03-25 2020-10-01 Samsung Electronics Co., Ltd. Electronic device performing function according to gesture input and operation method thereof
CN111787223A (zh) * 2020-06-30 2020-10-16 维沃移动通信有限公司 视频拍摄方法、装置和电子设备

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150293595A1 (en) * 2012-10-23 2015-10-15 Lg Electronics Inc. Image display device and method for controlling same
WO2015062247A1 (zh) * 2013-10-31 2015-05-07 京东方科技集团股份有限公司 显示装置及其控制方法、手势识别方法、和头戴显示装置
CN103914152A (zh) * 2014-04-11 2014-07-09 周光磊 三维空间中多点触控与捕捉手势运动的识别方法与系统
CN104656890A (zh) * 2014-12-10 2015-05-27 杭州凌手科技有限公司 虚拟现实智能投影手势互动一体机及互动实现方法
CN107077239A (zh) * 2015-05-29 2017-08-18 华为技术有限公司 通过触控板调节移动终端拍照焦距的方法和移动终端
CN107105093A (zh) * 2017-04-18 2017-08-29 广东欧珀移动通信有限公司 基于手部轨迹的拍照控制方法、装置及终端
WO2020197070A1 (en) * 2019-03-25 2020-10-01 Samsung Electronics Co., Ltd. Electronic device performing function according to gesture input and operation method thereof
CN111787223A (zh) * 2020-06-30 2020-10-16 维沃移动通信有限公司 视频拍摄方法、装置和电子设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023040288A1 (zh) * 2021-09-18 2023-03-23 海信视像科技股份有限公司 显示设备及设备控制方法

Also Published As

Publication number Publication date
CN112905008B (zh) 2023-01-20

Similar Documents

Publication Publication Date Title
CN111556350B (zh) 一种智能终端及人机交互方法
CN113535019A (zh) 显示设备及应用图标的显示方法
CN112887778A (zh) 显示设备上视频资源播放模式的切换方法及显示设备
CN113630649A (zh) 一种显示设备及视频播放进度的调整方法
CN113360066B (zh) 一种显示设备及文件展示方法
WO2022161401A1 (zh) 一种投屏数据的处理方法及显示设备
CN113747078B (zh) 显示设备及焦距控制方法
CN112905008B (zh) 一种手势调节显示图像方法及显示设备
WO2021213097A1 (zh) 一种显示设备及投屏方法
CN113490032A (zh) 显示设备及媒资显示方法
CN114285985A (zh) 一种摄像头预览方向的确定方法及显示设备
CN113473196A (zh) 投屏数据的处理方法及显示设备
CN113163258A (zh) 一种频道切换的方法及显示设备
CN112799576A (zh) 一种虚拟鼠标移动的方法及显示设备
CN113453069B (zh) 一种显示设备及缩略图生成方法
CN113453052B (zh) 音画同步方法及显示设备
CN113064691B (zh) 一种开机用户界面的显示方法及显示设备
WO2021218473A1 (zh) 一种显示方法及显示设备
CN114302203A (zh) 图像显示方法及显示设备
CN112911371A (zh) 双路视频资源播放方法及显示设备
CN112601116A (zh) 一种显示设备及内容显示方法
CN113064534A (zh) 一种用户界面的显示方法及显示设备
CN112882631A (zh) 显示设备上电子说明书的显示方法及显示设备
CN112770169B (zh) 一种列表循环翻页方法及显示设备
CN113190202B (zh) 一种数据显示方法及显示设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant