CN114281285B - 一种显示设备及深度数据稳定呈现的显示方法 - Google Patents
一种显示设备及深度数据稳定呈现的显示方法 Download PDFInfo
- Publication number
- CN114281285B CN114281285B CN202110797093.5A CN202110797093A CN114281285B CN 114281285 B CN114281285 B CN 114281285B CN 202110797093 A CN202110797093 A CN 202110797093A CN 114281285 B CN114281285 B CN 114281285B
- Authority
- CN
- China
- Prior art keywords
- center point
- interface
- display
- plane
- stable
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 26
- 238000001514 detection method Methods 0.000 claims abstract description 54
- 230000002159 abnormal effect Effects 0.000 claims description 5
- 238000001914 filtration Methods 0.000 claims description 3
- 238000004891 communication Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 238000012545 processing Methods 0.000 description 9
- 230000003993 interaction Effects 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 238000010606 normalization Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 230000006978 adaptation Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Landscapes
- Controls And Circuits For Display Device (AREA)
Abstract
本申请提供一种显示设备及深度数据稳定呈现的显示方法。所述显示设备包括显示器、摄像头和控制器,其中,控制器可以从所述摄像头获取深度数据;将所述深度数据通过平面检测算法得到平面中心点,所述平面中心点分为有效中心点和无效中心点;若有效中心点满足当前界面稳定状态条件时,控制所述显示器呈现第一稳定图像界面;若有效中心点满足容错界面稳定状态条件时,控制所述显示器呈现第二稳定图像界面,其中,所述第二稳定图像界面不同于第一稳定图像界面。通过对平面检测的输出的平面中心点进行矫正,从而保证平面中心点的稳定性,进而以平面中心点的界面呈现,保证显示的稳定性。
Description
技术领域
本申请涉及智能电视技术领域,尤其涉及一种显示设备及深度数据稳定呈现的显示方法。
背景技术
随着用户对智能电视多样化和个性化需求,智能电视可以内置或外接摄像头设备,通过摄像头可以对指定区域进行图像采集,并显示在智能电视中,以实现特定的功能。
3D摄像头的独特性是可以获取深度数据,3D摄像头具有彩色摄像头和深度摄像头,通过彩色摄像头采集景物的平面数据,同时通过深度摄像头采集景物的深度数据,因此,3D摄像头采集的图像数据中每个点的三维坐标是通过结合平面数据和深度数据得到的。智能电视在启动对应功能的3D摄像头相关应用后,可以从3D摄像头获取深度数据和平面数据,深度数据通过平面检测算法后得到检测结果中心点,基于中心点可以进行其他界面展示或者可以进行其他格式动画展示等。
智能电视通过3D摄像头采集图像数据,由于的深度数据具有实时变化性,从而平面检测算法后得到的检测结果中心点存在差异,导致智能电视的界面动画在基于中心点的展示会随着中心点的位置跳变抖动,无法展示稳定的界面动画效果。
发明内容
本申请示例性的实施方式提供了一种显示设备及深度数据稳定呈现的显示方法,可用于解决智能电视的界面动画在基于深度数据平面检测后的中心点,导致展示不稳定,随中心点位置跳变的技术问题。
第一方面,本申请提供一种显示设备,包括显示器、外部装置接口以及控制器。其中所述显示器被配置为呈现稳定图像界面,所述外部装置接口被配置为连接摄像头,所述摄像头,被配置为采集深度数据、。
所述控制器被配置为执行以下程序步骤:
从所述摄像头获取深度数据;
将所述深度数据通过平面检测算法得到平面中心点,所述平面中心点分为有效中心点和无效中心点;
若有效中心点满足当前界面稳定状态条件时,控制所述显示器呈现第一稳定图像界面;
若有效中心点满足容错界面稳定状态条件时,控制所述显示器呈现第二稳定图像界面,其中,所述第二稳定图像界面不同于第一稳定图像界面。
由以上技术方案可知,本申请提供的显示设备包括显示器和控制器,以及外接的摄像头,其中,控制器可以从所述摄像头获取深度数据;将所述深度数据通过平面检测算法得到平面中心点,所述平面中心点分为有效中心点和无效中心点;若有效中心点满足当前界面稳定状态条件时,控制所述显示器呈现第一稳定图像界面;若有效中心点满足容错界面稳定状态条件时,控制所述显示器呈现第二稳定图像界面,其中,所述第二稳定图像界面不同于第一稳定图像界面。通过归一化方法,优化深度数据,减少因距离偏差导致的误差,同时对平面检测的输出的平面中心点进行矫正,从而保证平面中心点的稳定性,进而以平面中心点为坐标的动画展示,保证显示的稳定性。
第二方面,提供一种深度数据稳定呈现的显示方法,所述显示方法包括如下步骤:
获取深度数据和平面中心点,所述平面中心点包括有效中心点和无效中心点,其中,所述平面中心点为所述深度数据通过平面检测算法得到的;
若有效中心点满足当前界面稳定状态条件时,控制所述显示器呈现第一稳定图像界面;
若有效中心点满足容错界面稳定状态条件时,控制显示器呈现第二稳定图像界面,其中,所述第二稳定图像界面不同于第一稳定图像界面。
由以上技术方案可知,本申请提供深度数据稳定呈现的显示方法,获取深度数据和平面中心点,所述平面中心点包括有效中心点和无效中心点,其中,所述平面中心点为所述深度数据通过平面检测算法得到的;若有效中心点满足当前界面稳定状态条件时,控制所述显示器呈现第一稳定图像界面;若有效中心点满足容错界面稳定状态条件时,控制显示器呈现第二稳定图像界面,其中,所述第二稳定图像界面不同于第一稳定图像界面。通过归一化方法,优化深度数据,减少因距离偏差导致的误差,同时对平面检测的输出的平面中心点进行矫正,从而保证平面中心点的稳定性,进而以平面中心点为坐标的动画展示,保证显示的稳定性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例中的显示设备与控制装置之间操作场景的示意图;
图2为本申请实施例中控制装置100的硬件配置框图;
图3为本申请实施例中显示设备200的硬件配置框图;
图4为本申请实施例中显示设备200的软件配置示意图;
图5为本申请实施例中显示设备与摄像头结构示意图;
图6为本申请实施例中显示设备对摄像头控制及数据获取流程图;
图7为本申请实施例中一种深度数据示意图;
图8为本申请实施例中图7对应的检测结果平面的点云图;
图9为本申请实施例中深度数据稳定呈现的显示方法的流程图;
图10为本申请实施例中若有效中心点满足当前界面稳定状态条件时,控制所述显示器呈现第一稳定图像界面的流程图;
图11为本申请实施例中若有效中心点满足容错界面稳定状态条件时,控制所述显示器呈现第二稳定图像界面的流程图。
具体实施方式
为使本申请的目的和实施方式更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施方式进行清楚、完整地描述,显然,描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
需要说明的是,本申请中对于术语的简要说明,仅是为了方便理解接下来描述的实施方式,而不是意图限定本申请的实施方式。除非另有说明,这些术语应当按照其普通和通常的含义理解。
本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体,而不必然意味着限定特定的顺序或先后次序,除非另外注明。应该理解这样使用的用语在适当情况下可以互换。
术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的所有组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
图1为根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示,用户可通过智能设备300或控制装置100操作显示设备200。
在一些实施例中,控制装置100可以是遥控器,遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信,及其他短距离通信方式,通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。
在一些实施例中,也可以使用智能设备300(如移动终端、平板电脑、计算机、笔记本电脑等)以控制显示设备200。例如,使用在智能设备上运行的应用程序控制显示设备200。
在一些实施例中,显示设备200还可以采用除了控制装置100和智能设备300之外的方式进行控制,例如,可以通过显示设备200设备内部配置的获取语音指令的模块直接接收用户的语音指令控制,也可以通过显示设备200设备外部设置的语音控制设备来接收用户的语音指令控制。
在一些实施例中,显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群,也可以是多个集群,可以包括一类或多类服务器。
图2示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示,控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起用用户与显示设备200之间交互中介作用。
图3示出了根据示例性实施例中显示设备200的硬件配置框图。
在一些实施例中,显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。
在一些实施例中控制器包括处理器,视频处理器,音频处理器,图形处理器,RAM,ROM,用于输入/输出的第一接口至第n接口。
在一些实施例中,显示器260包括用于呈现画面的显示屏组件,以及驱动图像显示的驱动组件,用于接收源自控制器输出的图像信号,进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控UI界面。
在一些实施例中,显示器260可为液晶显示器、OLED显示器、以及投影显示器,还可以为一种投影装置和投影屏幕。
在一些实施例中,通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如:通信器可以包括Wifi模块,蓝牙模块,有线以太网模块等其他网络通信协议芯片或近场通信协议芯片,以及红外接收器中的至少一种。显示设备200可以通过通信器220与外部控制设备100或服务器400建立控制信号和数据信号的发送和接收。
在一些实施例中,用户接口,可用于接收控制装置100(如:红外遥控器等)的控制信号。
在一些实施例中,检测器230用于采集外部环境或与外部交互的信号。例如,检测器230包括光接收器,用于采集环境光线强度的传感器;或者,检测器230包括图像采集器,如摄像头,可以用于采集外部环境场景、用户的属性或用户交互手势,再或者,检测器230包括声音采集器,如麦克风等,用于接收外部声音。
在一些实施例中,外部装置接口240可以包括但不限于如下:高清多媒体接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。
在一些实施例中,调谐解调器210通过有线或无线接收方式接收广播电视信号,以及从多个无线或有线广播电视信号中解调出音视频信号,如以及EPG数据信号。
在一些实施例中,控制器250和调谐解调器210可以位于不同的分体设备中,即调谐解调器210也可在控制器250所在的主体设备的外置设备中,如外置机顶盒等。
在一些实施例中,控制器250,通过存储在存储器上中各种软件控制程序,来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器260上显示UI对象的用户命令,控制器250便可以执行与由用户命令选择的对象有关的操作。
在一些实施例中,所述对象可以是可选对象中的任何一个,例如超链接、图标或其他可操作的控件。与所选择的对象有关操作有:显示连接到超链接页面、文档、图像等操作,或者执行与所述图标相对应程序的操作。
在一些实施例中控制器包括中央处理器(Central Processing Unit,CPU),视频处理器,音频处理器,图形处理器(Graphics Processing Unit,GPU),RAM Random AccessMemory,RAM),ROM(Read-Only Memory,ROM),用于输入/输出的第一接口至第n接口,通信总线(Bus)等中的至少一种。
CPU处理器。用于执行存储在存储器中操作系统和应用程序指令,以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。CPU处理器,可以包括多个处理器。如,包括一个主处理器以及一个或多个子处理器。
在一些实施例中,图形处理器,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。图形处理器包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象;还包括渲染器,对基于运算器得到的各种对象,进行渲染,上述渲染后的对象用于显示在显示器上。
在一些实施例中,视频处理器,用于将接收外部视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频处理,可得到直接可显示设备200上显示或播放的信号。
在一些实施例中,视频处理器,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。其中,解复用模块,用于对输入音视频数据流进行解复用处理。视频解码模块,用于对解复用后的视频信号进行处理,包括解码和缩放处理等。图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。帧率转换模块,用于对转换输入视频帧率。显示格式化模块,用于将接收帧率转换后视频输出信号,改变信号以符合显示格式的信号,如输出RGB数据信号。
在一些实施例中,音频处理器,用于接收外部的音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等处理,得到可以在扬声器中播放的声音信号。
在一些实施例中,用户可在显示器260上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
在一些实施例中,“用户界面”,是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
在一些实施例中,显示设备的系统可以包括内核(Kernel)、命令解析器(shell)、文件系统和应用程序。内核、shell和文件系统一起组成了基本的操作系统结构,它们让用户可以管理文件、运行程序并使用系统。上电后,内核启动,激活内核空间,抽象硬件、初始化硬件参数等,运行并维护虚拟内存、调度器、信号及进程间通信(IPC)。内核启动后,再加载Shell和用户应用程序。应用程序在启动后被编译成机器码,形成一个进程。
参见图4,在一些实施例中,将系统分为四层,从上至下分别为应用程序(Applications)层(简称“应用层”),应用程序框架(Application Framework)层(简称“框架层”),安卓运行时(Android runtime)和系统库层(简称“系统运行库层”),以及内核层。
在一些实施例中,应用程序层中运行有至少一个应用程序,这些应用程序可以是操作系统自带的窗口(Window)程序、系统设置程序或时钟程序等;也可以是第三方开发者所开发的应用程序。在具体实施时,应用程序层中的应用程序包不限于以上举例。
框架层为应用程序提供应用编程接口(application programming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心,这个中心决定让应用层中的应用程序做出动作。应用程序通过API接口,可在执行中访问系统中的资源和取得系统的服务。
如图4所示,本申请实施例中应用程序框架层包括管理器(Managers),内容提供者(Content Provider)等,其中管理器包括以下模块中的至少一个:活动管理器(ActivityManager)用与和系统中正在运行的所有活动进行交互;位置管理器(Location Manager)用于给系统服务或应用提供了系统位置服务的访问;文件包管理器(Package Manager)用于检索当前安装在设备上的应用程序包相关的各种信息;通知管理器(NotificationManager)用于控制通知消息的显示和清除;窗口管理器(Window Manager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。
在一些实施例中,活动管理器用于管理各个应用程序的生命周期以及通常的导航回退功能,比如控制应用程序的退出、打开、后退等。窗口管理器用于管理所有的窗口程序,比如获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕,控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。
在一些实施例中,系统运行库层为上层即框架层提供支撑,当框架层被使用时,安卓操作系统会运行系统运行库层中包含的C/C++库以实现框架层要实现的功能。
在一些实施例中,内核层是硬件和软件之间的层。如图4所示,内核层至少包含以下驱动中的至少一种:音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器,温度传感器,压力传感器等)、以及电源驱动等。
基于上述显示设备200,如图5所示,可以通过摄像头500获取深度数据。摄像头500可以作为一种图像采集器内置于显示设备200中,也可以作为一种外部装置外接在显示设备200上。对于外接在显示设备200的摄像头500,可以将摄像头500连接至显示设备200的外部装置接口240,接入显示设备200。
摄像头500可以是3D摄像头,可以包括多种不同得摄像头,可以有深度摄像头,也可以有彩色摄像头,可通过彩色摄像头采集景物的平面数据,通过深度摄像头采集景物的深度数据;3D摄像头采集的图像数据中每个点的三位坐标通过结合平面数据中的(x,y)坐标和深度数据,其中,深度摄像头获取的深度数据中每一个像素点所存储的数据是这个像素点距离摄像头的距离,也就是深度;通过三维坐标可以还原真实场景,进一步实现平面检测、建模等应用。
在一些实施例中,显示设备200的输出结果,可以根据应用不同的需求来进行呈现的,可以在稳定图像界面中添加深度数据图像区,用于展示此时稳定图像界面对应的深度数据,同时,也可以在稳定图像界面中基于中心点进行其他格式动画展示的动画区。
在一些实施例中,所述应用是指安装在显示设备200中软件程序,所述应用可以通过摄像头500采集的三维图像数据,并根据设计需要,实现特定的功能。例如,应用“Plane”可以通过用户在显示器主页的请求,启动运行,基于显示设备的图像界面,显示玩偶驱动的应用。基于稳定的图像显示,应用呈现的玩偶也是稳定的。
如图6所示,显示设备200通过控制器250调用平台标准接口openCamera启动彩色摄像头,获得平面数据,即2D数据;启动适配层CameraAdapter,通过OpenNI(开放自然交互)接口启动深度摄像头,通过流方式,得到深度数据,将获得的深度数据填充至平面检测算法,返回平面信息以及平面中心点,其中,通过OpenNI设置摄像头的流类型,返回深度数据流。
在一些实施例中,将深度数据填充到平面检测算法中,进行平面检测,将如图7所示的深度数据转化为如图8所示的点云图,即检测后平面,以及对应的平面中心点,由于深度数据会随着摄像头采集的显示设备前端区域的景物实时发生改变,导致得到的平面中心点差异化,产生偏移。
在一些实施例中,平面检测算法模型通过DBSCAN(Density-Based SpatialClustering of Applications with Noise)聚类方法尽心聚类处理,对于处理过程可以是基于深度数据,得到对应大小的深度数据点,对于每个点,计算相邻的两个点之间的距离,根据预设相邻点距离的阈值确定深度数据点中的核心点,遍历所有的核心点,根据核心点之间的距离,得到相互连接的核心点并赋予聚类编号,对于未连接的核心点中筛选出边界点,将边界点相互连接并赋予聚类编号,得到不同的聚类集合,对聚类集合进行分析比较,得到检测结果平面,其中,以显示屏的左上角为坐标原点,每个聚类点对应的是屏幕中的任意位置点。
基于检测结果平面的最大范围确定平面中心点,其中平面的中心点通过检测结果平面的最大范围可以先确定对X方向的中心点,在基于X方向的中心点,确定Y方向的中心点,进而得到平面中心点(Xcenter,Ycenter)。
为了改善显示设备基于中心点的图像界面抖动的问题,本申请的部分实施例中体重一种深度数据稳定呈现的显示方法,进一步对中心点的处理,滤除检测错误等信息,保证输出图像界面的稳定性。所述深度数据稳定呈现的显示方法应用于显示设备200,其中,显示设备具有显示器260,外部装置接口240,通过外部装置接口外接有摄像头500,并且摄像头500用于采集深度数据,同时,也可以采集平面数据,如图9所示,所述显示方法包括如下步骤:
S101、从所述摄像头获取深度数据。
开启摄像头,通过调用平台标准接口启动彩色摄像头,得到平面数据;启动适配层通过开放自然交互接口得到设备列表,根据设备列表中的设备类型,开启深度摄像头,通过流方式获取深度数据。
在一些实施例中,可以通过归一化方法,优化深度数据,减少因距离偏差导致的误差。
S102、将所述深度数据通过平面检测算法得到平面中心点。
将得到的深度数据填充至平面检测算法模型,通过DBSCAN(Density-BasedSpatial Clustering of Applications with Noise)聚类方法进行聚类处理,根据聚类结果进行位置排序,得到对应的平面中心点。
S103、判定平面中心点是否有效。
通过对于平面中心点是否有效的判定,将平面中心点分为有效中心点和无效中心点;平面中心点的坐标为(Xcenter,Ycenter)中的Xcenter大于等于0,且Ycenter也大于等于0,若Xcenter大于0,且Ycenter大于0,判定对应的平面中心点为有效中心点;若Xcenter等于0和/或Ycenter等于0时,判定对应的平面中心点为无效中心点。
若有效中心点满足当前界面稳定状态条件时,执行步骤S104、控制所述显示器呈现第一稳定图像界面。
当通过平面检测算法后获取的平面中心点是有效中心点,且对应的有效中心点满足当前界面稳定状态条件时,判定此时对应的深度图像是稳定的,控制显示器呈现对应的第一稳定图像界面。
若有效中心点满足容错界面稳定状态条件时,执行步骤S105、控制所述显示器呈现第二稳定图像界面,其中,所述第二稳定图像界面不同于第一稳定图像界面。
当通过平面检测算法后获取的平面中心点是有效中心点,且对应的有效中心点满足容错界面稳定状态条件,判定此时对应的深度图像的中心点发生了改变且也是稳定的,控制显示器呈现对应的第二稳定图像界面。
若累计无效中心点的个数超过异常个数阈值,执行步骤S106、控制所述显示器呈现错误提示界面。
当通过平面检测算法后获取的平面中心点是无效中心点,通过累计无效中心点的个数,若无效中心点的个数超过异常个数阈值,通知界面呈现的状态是可以改变的,此时,控制显示器可以呈现错误提示界面。
在一些实施例中,累计无效中心点的个数超过异常个数阈值时,根据界面呈现状态的改变需求,可以控制显示器维持当前呈现的界面。
若有效中心点不满足当前界面稳定状态条件且不满足容错界面稳定状态条件,过滤对应的有效中心点,以及,执行步骤S107、控制所述显示器维持当前呈现界面。
若有效中心点不满足当前界面稳定状态条件且不满足容错界面稳定状态条件,记录对应有效中心点的个数,对应有效中心点为其他状态有效中心点,当其他状态有效中心点的个数超出其他状态个数阈值,过滤对应的其他有效中心点,控制所述显示器维持当前呈现界面。对检测数据进行复位处理,之后重新获取深度数据。
在上述方法的技术上,本申请可以基于目前呈现的第一稳定图像界面或者第二稳定图像界面对应的有效中心点坐标,可以进行动画展示,也可以进行深度数据图像展示等等,无论是第一稳定图像界面还是第二稳定图像界面都是基于稳定的有效中心点,因此,保证显示的稳定性。
如图10所示,在步骤S104中,所述方法还包括如下步骤:
S401、将第一个有效中心点记录为预存当前界面均值。
获取的第一个有效中心点的坐标为(Xcenter1,Ycenter1),此时,通过第一个有效中心点的坐标为(Xcenter1,Ycenter1)赋值于预存当前界面均值的坐标(mDepthAvarageX,mDepthAvarageY)。
S402、获取下一个有效中心点与所述预存当前界面均值的第一差值。
依次获取接下来的有效中心点,直到第一平面检测个数达到稳定个数阈值时停止,对于第一差值的获取,例如通过对第二个有效中心点与预存当前界面均值作差,得到第一差值。
判定所述第一差值是否满足坐标位置阈值,若所述第一差值满足坐标位置阈值执行步骤S403、根据对应的有效中心点更新所述预存当前界面均值和第一平面检测个数。
接上面的例子,将第一次有效中心点与预存当前界面均值做平均,得到更新后的预存当前界面均值,此时对应的第一平面检测个数增加计数,并判定所述第一平面检测个数是否满足稳定个数阈值。
若第一平面检测个数达到稳定个数阈值时,执行步骤S404、判定对应的有效中心点满足当前界面稳定状态条件,以及根据对应的有效中心点得到所述第一稳定图像界面,其中此时对应的有效中心点是累计达到稳定个数阈值的最后一个有效中心点。
如图11所示,在步骤S105中,所述方法还包括如下步骤:
S501、将第N个有效中心点记录为预存容错界面均值的坐标;
获取不用于第一个有效中心点的第N个有效中心坐标为(Xcentern,Ycentern),所述第N个有效中心点与预存当前界面均值的第一差值不满足坐标位置阈值,此时,通过其他有效中心点的坐标为(Xcentern,Ycentern)赋值于预存容错界面均值的坐标(mDepthAvarageBackX,mDepthAvarageBackY)。
S502、获取第N+1个有效中心点与预存容错界面均值的第二差值。
依次获取接下来的有效中心点,直到第二平面检测个数达到稳定个数阈值时停止,对于第二差值的获取,例如通过对第N+1个有效中心点与预存容错界面均值作差,得到第二差值。
判定所述第二差值是否满足坐标位置阈值,若所述第二差值满足坐标位置阈值执行步骤S503、根据对应的有效中心点更新预存容错界面均值和第二平面检测个数。
例如对于第第N+1个有效中心点,将第N+1个有效中心点与预存容错界面均值做平均,得到更新后的预存容错界面均值,此时对应的第二平面检测个数增加计数,并判定所述第二平面检测个数是否满足稳定个数阈值。
若第二平面检测个数达到稳定个数阈值时,执行步骤S504、判定对应的有效中心点满足容错界面稳定状态条件,以及根据对应的有效中心点得到第二稳定图像界面。
若第二平面检测个数达不到稳定个数阈值时,则判定对应的有效中心点不满足容错界面稳定状态条件,则复位预存容错界面均值和第二平面检测个数,此时将对应的有效中心点记录为其他状态有效中心点,执行上述步骤107、控制所述显示器维持当前呈现界面,此时的当前呈现界面为第一稳定图像界面,复位相关数据重新获取深度数据并判断对应的平面中心点。
通过上述方法,是的界面显示的图像界面维持在稳定性更好的状态,基于此进行的其他附加功能的展示也更加的稳定。
由以上技术方案可知,本申请提供深度数据稳定呈现的显示方法,获取深度数据和平面中心点,所述平面中心点包括有效中心点和无效中心点,其中,所述平面中心点为所述深度数据通过平面检测算法得到的;若有效中心点满足当前界面稳定状态条件时,控制所述显示器呈现第一稳定图像界面;若有效中心点满足容错界面稳定状态条件时,控制显示器呈现第二稳定图像界面,其中,所述第二稳定图像界面不同于第一稳定图像界面。通过归一化方法,优化深度数据,减少因距离偏差导致的误差,同时对平面检测的输出的平面中心点进行矫正,从而保证平面中心点的稳定性,进而以平面中心点为坐标的动画展示,保证显示的稳定性。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
为了方便解释,已经结合具体的实施方式进行了上述说明。但是,上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导,可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用,从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。
Claims (6)
1.一种显示设备,其特征在于,包括:
显示器;
外部装置接口,被配置为连接摄像头,所述摄像头,被配置为采集深度数据;
控制器,所述控制器被配置为:
从所述摄像头获取深度数据;
将所述深度数据通过平面检测算法得到平面中心点,所述平面中心点分为有效中心点和无效中心点;
将第一个有效中心点记录为预存当前界面均值;
依次获取有效中心点与所述预存当前界面均值的第一差值;
若所述第一差值满足坐标位置阈值,根据对应的有效中心点更新所述预存当前界面均值和第一平面检测个数,以及,判定所述第一平面检测个数是否满足稳定个数阈值;
若第一平面检测个数达到稳定个数阈值时,判定对应的有效中心点满足当前界面稳定状态条件,控制所述显示器呈现第一稳定图像界面;
将第N个有效中心点记录为预存容错界面均值,其中,所述第N个有效中心点不同于第一个有效中心点,且与预存当前界面均值的第一差值不满足坐标位置阈值;
依次获取有效中心点与预存容错界面均值的第二差值;
若所述第二差值满足坐标位置阈值,根据对应的有效中心点更新预存容错界面均值和第二平面检测个数,以及,判定所述第二平面检测个数是否满足稳定个数阈值;
若第二平面检测个数达到稳定个数阈值时,判定对应的有效中心点满足容错界面稳定状态条件,控制所述显示器呈现第二稳定图像界面,其中,所述第二稳定图像界面不同于第一稳定图像界面。
2.根据权利要求1所述显示设备,其特征在于,在平面中心点分为有效中心点和无效中心点的步骤中,所述控制器被进一步配置为:
判定所述平面中心点的坐标(Xcenter,Ycenter);
若Xcenter大于0,且Ycenter大于0,对应的平面中心点为有效中心点;
若Xcenter等于0和/或Ycenter等于0时,对应的平面中心点为无效中心点。
3.根据权利要求1所述显示设备,其特征在于,所述控制器被进一步配置为:
若有效中心点不满足当前界面稳定状态条件且不满足容错界面稳定状态条件,过滤对应的有效中心点,以及,控制所述显示器维持当前呈现界面。
4.根据权利要求1所述显示设备,其特征在于,所述控制器被进一步配置为:
累计无效中心点的个数,若无效中心点的个数超过异常个数阈值,控制所述显示器呈现错误提示界面。
5.一种深度数据稳定呈现的显示方法,其特征在于,包括:
获取深度数据和平面中心点,所述平面中心点包括有效中心点和无效中心点,其中,所述平面中心点为所述深度数据通过平面检测算法得到的;
将第一个有效中心点记录为预存当前界面均值;
依次获取有效中心点与所述预存当前界面均值的第一差值;
若所述第一差值满足坐标位置阈值,根据对应的有效中心点更新所述预存当前界面均值和第一平面检测个数,以及,判定所述第一平面检测个数是否满足稳定个数阈值;
若第一平面检测个数达到稳定个数阈值时,判定对应的有效中心点满足当前界面稳定状态条件,控制显示器呈现第一稳定图像界面;
将第N个有效中心点记录为预存容错界面均值,其中,所述第N个有效中心点不同于第一个有效中心点,且与预存当前界面均值的第一差值不满足坐标位置阈值;
依次获取有效中心点与预存容错界面均值的第二差值;
若所述第二差值满足坐标位置阈值,根据对应的有效中心点更新预存容错界面均值和第二平面检测个数,以及,判定所述第二平面检测个数是否满足稳定个数阈值;
若第二平面检测个数达到稳定个数阈值时,判定对应的有效中心点满足容错界面稳定状态条件,控制显示器呈现第二稳定图像界面,其中,所述第二稳定图像界面不同于第一稳定图像界面。
6.根据权利要求5所述深度数据稳定呈现的显示方法,其特征在于,所述方法还包括:
累计无效中心点的个数,若无效中心点的个数超过异常个数阈值,控制所述显示器呈现错误提示界面。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110797093.5A CN114281285B (zh) | 2021-07-14 | 2021-07-14 | 一种显示设备及深度数据稳定呈现的显示方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110797093.5A CN114281285B (zh) | 2021-07-14 | 2021-07-14 | 一种显示设备及深度数据稳定呈现的显示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114281285A CN114281285A (zh) | 2022-04-05 |
CN114281285B true CN114281285B (zh) | 2024-05-28 |
Family
ID=80868318
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110797093.5A Active CN114281285B (zh) | 2021-07-14 | 2021-07-14 | 一种显示设备及深度数据稳定呈现的显示方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114281285B (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101499176A (zh) * | 2008-01-30 | 2009-08-05 | 中国科学院自动化研究所 | 一种视频游戏接口方法 |
CN102982557A (zh) * | 2012-11-06 | 2013-03-20 | 桂林电子科技大学 | 基于深度相机的空间手势姿态指令处理方法 |
CN108898661A (zh) * | 2018-05-31 | 2018-11-27 | 深圳先进技术研究院 | 三维图像构建的方法、装置及具有存储功能的装置 |
CN109194876A (zh) * | 2018-10-31 | 2019-01-11 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子设备和计算机可读存储介质 |
CN110336993A (zh) * | 2019-07-02 | 2019-10-15 | Oppo广东移动通信有限公司 | 深度摄像头控制方法、装置、电子设备和存储介质 |
CN110458805A (zh) * | 2019-03-26 | 2019-11-15 | 华为技术有限公司 | 一种平面检测方法、计算设备以及电路系统 |
WO2020055613A1 (en) * | 2018-09-11 | 2020-03-19 | Apple Inc. | User interfaces for simulated depth effects |
CN112153269A (zh) * | 2019-06-27 | 2020-12-29 | 京东方科技集团股份有限公司 | 应用于电子设备的图片显示方法、装置、介质与电子设备 |
CN112614173A (zh) * | 2020-12-25 | 2021-04-06 | 杭州电子科技大学 | 一种基于深度图像的实时平面检测及提取方法 |
-
2021
- 2021-07-14 CN CN202110797093.5A patent/CN114281285B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101499176A (zh) * | 2008-01-30 | 2009-08-05 | 中国科学院自动化研究所 | 一种视频游戏接口方法 |
CN102982557A (zh) * | 2012-11-06 | 2013-03-20 | 桂林电子科技大学 | 基于深度相机的空间手势姿态指令处理方法 |
CN108898661A (zh) * | 2018-05-31 | 2018-11-27 | 深圳先进技术研究院 | 三维图像构建的方法、装置及具有存储功能的装置 |
WO2020055613A1 (en) * | 2018-09-11 | 2020-03-19 | Apple Inc. | User interfaces for simulated depth effects |
CN109194876A (zh) * | 2018-10-31 | 2019-01-11 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子设备和计算机可读存储介质 |
CN110458805A (zh) * | 2019-03-26 | 2019-11-15 | 华为技术有限公司 | 一种平面检测方法、计算设备以及电路系统 |
CN112153269A (zh) * | 2019-06-27 | 2020-12-29 | 京东方科技集团股份有限公司 | 应用于电子设备的图片显示方法、装置、介质与电子设备 |
CN110336993A (zh) * | 2019-07-02 | 2019-10-15 | Oppo广东移动通信有限公司 | 深度摄像头控制方法、装置、电子设备和存储介质 |
CN112614173A (zh) * | 2020-12-25 | 2021-04-06 | 杭州电子科技大学 | 一种基于深度图像的实时平面检测及提取方法 |
Non-Patent Citations (1)
Title |
---|
Kinect点云的平面提取算法研究;黄忠义;李建胜;郝向阳;王腾;;全球定位系统(02);85-88+95 * |
Also Published As
Publication number | Publication date |
---|---|
CN114281285A (zh) | 2022-04-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN115243094B (zh) | 一种显示设备及多图层叠加方法 | |
CN112672195A (zh) | 遥控器按键设置方法及显示设备 | |
CN112698905B (zh) | 一种屏保显示方法、显示设备、终端设备及服务器 | |
CN111899175A (zh) | 图像转换方法及显示设备 | |
CN112752156A (zh) | 字幕调整方法及显示设备 | |
CN113825002B (zh) | 显示设备及焦距控制方法 | |
CN112601109A (zh) | 音频播放方法及显示设备 | |
CN112584213A (zh) | 一种显示设备和图像识别结果的展示方法 | |
CN114281285B (zh) | 一种显示设备及深度数据稳定呈现的显示方法 | |
CN116567333A (zh) | 一种显示设备及多窗口的画质显示方法 | |
CN113542882B (zh) | 一种唤醒待机显示设备的方法、显示设备及终端 | |
CN112926420B (zh) | 一种显示设备和菜单文字识别方法 | |
CN112947783B (zh) | 一种显示设备 | |
CN112650418B (zh) | 一种显示设备 | |
CN112668546A (zh) | 视频缩略图显示方法及显示设备 | |
CN114302203A (zh) | 图像显示方法及显示设备 | |
CN114302199A (zh) | 显示设备和数据共享方法 | |
CN112637683A (zh) | 显示设备系统优化方法及显示设备 | |
CN113703705A (zh) | 显示设备及列表更新方法 | |
CN113064534A (zh) | 一种用户界面的显示方法及显示设备 | |
CN113286185A (zh) | 一种显示设备及主页显示方法 | |
CN112631796A (zh) | 一种显示设备及文件拷贝进度的展示方法 | |
CN112601116A (zh) | 一种显示设备及内容显示方法 | |
CN113689856B (zh) | 一种浏览器页面视频播放进度的语音控制方法及显示设备 | |
CN114296842B (zh) | 显示设备和滚动文本检测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |