CN115344143A - 显示设备、触摸点确定方法及装置 - Google Patents

显示设备、触摸点确定方法及装置 Download PDF

Info

Publication number
CN115344143A
CN115344143A CN202110521258.6A CN202110521258A CN115344143A CN 115344143 A CN115344143 A CN 115344143A CN 202110521258 A CN202110521258 A CN 202110521258A CN 115344143 A CN115344143 A CN 115344143A
Authority
CN
China
Prior art keywords
pixel
target
touch
touch point
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110521258.6A
Other languages
English (en)
Inventor
王武军
张晓娜
赵宏洋
刘晓晓
刘杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao Hisense Commercial Display Co Ltd
Original Assignee
Qingdao Hisense Commercial Display Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Hisense Commercial Display Co Ltd filed Critical Qingdao Hisense Commercial Display Co Ltd
Priority to CN202110521258.6A priority Critical patent/CN115344143A/zh
Publication of CN115344143A publication Critical patent/CN115344143A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/04166Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请提供实施例,属于显示技术,提供一种显示设备、触摸点确定方法及装置,显示设备包括红外触摸屏,与红外触摸屏连接的处理器,该处理器被配置为响应于用户的触摸操作,确定各扫描方向对应的光路的光强,根据光强及背景图,生成前景图,根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素,根据目标像素,确定触摸点。本申请能够提升触摸点轮廓的搜索速度,进而提升触摸响应速度。

Description

显示设备、触摸点确定方法及装置
技术领域
本申请涉及触摸技术。更具体地讲,涉及一种显示设备、触摸点确定方法及装置。
背景技术
触摸屏是一个可以检测到在显示区域内触摸的存在和位置的电子系统,它简化了人机交互方法。其中,触摸屏包括红外触摸屏。在当前触控技术中,针对红外触摸屏的红外触控技术具有环境适应性强、寿命更长以及可识别触摸点数更多等优势。另外,红外触摸屏的结构简单,通常是在显示屏外周安装一个矩形的红外触摸框,红外触摸框由长边发射边、长边接收边、短边发射边和短边接收边组成。在长边发射边和短边发射边上有若干发射灯,相应长边接收边和短边接收边上对应有若干接收灯。通常,发射灯和接收灯采用1对多方式设置,即一个发射灯发光,对面多个接收灯同时接收,由此形成红外光网。在实际应用中,可以根据红外光网在触摸和未触摸情况下的不同形态判断触摸行为。
目前,行业内通常采用图像法来确定触摸点,即:对红外触摸屏对应的前景图中像素值满足要求的像素进行判断和触摸点轮廓追踪,以确定触摸点。但发明人在研究过程中发现:在采用图像法确定触摸点时,存在触摸响应慢的问题。
发明内容
本申请示例性的实施方式提供一种显示设备、触摸点确定方法及装置,可有效地提升触摸响应速度。
第一方面,本申请实施例提供一种显示设备,包括:
红外触摸屏;
与红外触摸屏连接的处理器,处理器被配置为:
响应于用户的触摸操作,确定各扫描方向对应的光路的光强;
根据光强及背景图,生成前景图,背景图为红外触摸屏未有触摸发生时对应的图像,前景图为红外触摸屏有触摸发生时对应的图像;
根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素,目标像素位于触摸操作对应的触摸点的轮廓范围内;
根据目标像素,确定触摸点。
第二方面,本申请实施例提供一种触摸点确定方法,应用于显示设备,该触摸点确定方法包括:
响应于用户的触摸操作,确定各扫描方向对应的光路的光强;
根据光强及背景图,生成前景图,背景图为红外触摸屏未有触摸发生时对应的图像,前景图为红外触摸屏有触摸发生时对应的图像;
根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素,目标像素位于触摸操作对应的触摸点的轮廓范围内;
根据目标像素,确定触摸点。
第三方面,本申请实施例提供一种触摸点确定装置,应用于显示设备,该触摸点确定装置包括:
第一确定模块,用于响应于用户的触摸操作,确定各扫描方向对应的光路的光强;
生成模块,用于根据光强及背景图,生成前景图,背景图为红外触摸屏未有触摸发生时对应的图像,前景图为红外触摸屏有触摸发生时对应的图像;
第二确定模块,用于根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素,目标像素位于触摸操作对应的触摸点的轮廓范围内;
处理模块,用于根据目标像素,确定触摸点。
第四方面,本申请实施例提供一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序指令,计算机程序指令被执行时,实现如本申请第二方面所述的任一触摸点确定方法。
第五方面,本申请实施例提供一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现如本申请第二方面所述的任一触摸点确定方法。
本申请提供的显示设备、触摸点确定方法及装置,显示设备包括红外触摸屏,与红外触摸屏连接的处理器,该处理器被配置为通过响应于用户的触摸操作,确定各扫描方向对应的光路的光强,根据光强及背景图,生成前景图,根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素,根据目标像素,确定触摸点。由于本申请在确定触摸点时不仅考虑了前景图中像素的像素值,还结合了与前景图中像素对应的背景图中像素的像素值,即根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素,根据目标像素,确定触摸点,因此,能够提升触摸点轮廓的搜索速度,进而提升触摸响应速度。
本申请的这些和其它方面在以下(多个)实施例的描述中会更加简明易懂。
附图说明
为了更清楚地说明本申请实施例或相关技术中的实施方式,下面将对实施例或相关技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
图1中示例性示出了根据实施例中显示设备与用户之间操作场景的示意图;
图2中示例性示出了根据示例性实施例中显示设备200的硬件配置框图;
图3为本申请提供的显示设备的软件系统示意图;
图4为本申请一实施例提供的红外触摸屏的示意图;
图5为本申请一实施例提供的图像法确定触摸点的示意图;
图6为本申请一实施例提供的触摸点确定方法的流程图;
图7为本申请一实施例提供的背景图中各像素的像素值均初始化为0的示意图;
图8为本申请一实施例提供的一条扫描光路经过背景图中的像素的示意图;
图9为本申请一实施例提供的将所有扫描光路均进行″增加绘制″后得到的背景图的示意图;
图10为本申请一实施例提供的目标像素的示意图;
图11为本申请另一实施例提供的触摸点确定方法的流程图;
图12为本申请一实施例提供的将所有扫描光路均进行″删除绘制″后得到的前景图的示意图;
图13为本申请一实施例提供的行长度L不满足行长度阈值的示意图;
图14为本申请一实施例提供的行长度L满足行长度阈值的触摸点的示意图;
图15为本申请一实施例提供的触摸点确定装置的结构示意图。
具体实施方式
为使本申请的目的、实施方式和优点更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施方式进行清楚、完整地描述,显然,所描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
基于本申请描述的示例性实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请所附权利要求保护的范围。此外,虽然本申请中公开内容按照示范性一个或几个实例来介绍,但应理解,可以就这些公开内容的各个方面也可以单独构成一个完整实施方式。
需要说明的是,本申请中对于术语的简要说明,仅是为了方便理解接下来描述的实施方式,而不是意图限定本申请的实施方式。除非另有说明,这些术语应当按照其普通和通常的含义理解。
本申请中说明书和权利要求书及上述附图中的术语″第一″、″第二″、″第三″等是用于区别类似或同类的对象或实体,而不必然意味着限定特定的顺序或先后次序,除非另外注明(Unless otherwise indicated)。应该理解这样使用的用语在适当情况下可以互换,例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。
此外,术语″包括″和″具有″以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的那些组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
本申请中使用的术语″模块″,是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
本申请中使用的术语″遥控器″,是指电子设备(如本申请中公开的显示设备)的一个组件,通常可在较短的距离范围内无线控制电子设备。一般使用红外线和/或射频(RF)信号和/或蓝牙与电子设备连接,也可以包括WiFi、无线USB、蓝牙、动作传感器等功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬键。
本申请中使用的术语″手势″,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。
图1中示例性示出了根据实施例中显示设备与用户之间操作场景的示意图。如图1中示出,用户可通过触摸笔100在显示设备200的红外触摸屏上进行书写操作,显示设备200的处理器根据红外触摸屏上触摸操作,确定触摸点。
如图1中还示出,显示设备200还与服务器400通过多种通信方式进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。示例的,显示设备200通过发送和接收信息,以及电子节目指南(EPG)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器400可以是一个集群,也可以是多个集群,可以包括一类或多类服务器。通过服务器400提供视频点播和广告服务等其他网络服务内容。
本申请实施例不对具体显示设备200的类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要做性能和配置上一些改变。
图2中示例性示出了根据示例性实施例中显示设备200的硬件配置框图。
在一些实施例中,显示设备200中包括控制器250、调谐解调器210、通信器220、检测器230、输入/输出接口255、显示器275,音频输出接口285、存储器260、供电电源290、用户接口265、外部装置接口240中的至少一种。
在一些实施例中,显示器275,用于接收源自第一处理器输出的图像信号,进行显示视频内容和图像以及菜单操控界面的组件。
在一些实施例中,显示器275,包括用于呈现画面的显示屏组件,以及驱动图像显示的驱动组件。
在一些实施例中,显示视频内容,可显示来自网络通信协议接收来自网络服务器端发送的各种图像内容。
在一些实施例中,显示器275用于呈现显示设备200中产生且用于控制显示设备200的用户操控UI界面。
在一些实施例中,根据显示器275类型不同,还包括用于驱动显示的驱动组件。
在一些实施例中,通信器220是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器可以包括Wifi芯片,蓝牙通信协议芯片,有线以太网通信协议芯片等其他网络通信协议芯片或近场通信协议芯片,以及红外接收器中的至少一种。
在一些实施例中,显示设备200可以通过通信器220与外部控制设备或内容提供设备之间建立控制信号和数据信号发送和接收。
在一些实施例中,用户接口265,可用于接收控制装置(如:红外遥控器等)红外控制信号。
在一些实施例中,检测器230是显示设备200用于采集外部环境或与外部交互的信号。
在一些实施例中,检测器230包括光接收器,用于采集环境光线强度的传感器,可以通过采集环境光可以自适应性显示参数变化等。
在一些实施例中,检测器230还可以包括温度传感器等,如通过感测环境温度。
在一些实施例中,显示设备200可自适应调整图像的显示色温。如当温度偏高的环境时,可调整显示设备200显示图像色温偏冷色调,或当温度偏低的环境时,可以调整显示设备200显示图像偏暖色调。
在一些实施例中,检测器230还可声音采集器等,如麦克风,可以用于接收用户的声音。示例性的,包括用户控制显示设备200的控制指令的语音信号,或采集环境声音,用于识别环境场景类型,使得显示设备200可以自适应适应环境噪声。
在一些实施例中,如图2所示,输入/输出接口255被配置为,可进行控制器250与外部其他设备或其他控制器250之间的数据传输。如接收外部设备的视频信号数据和音频信号数据、或命令指令数据等。
在一些实施例中,外部装置接口240可以包括,但不限于如下:可以高清多媒体接口HDMI接口、模拟或数据高清分量输入接口、复合视频输入接口、USB输入接口、RGB端口等任一个或多个接口。也可以是上述多个接口形成复合性的输入/输出接口。
在一些实施例中,如图2所示,调谐解调器210被配置为,通过有线或无线接收方式接收广播电视信号,可以进行放大、混频和谐振等调制解调处理,从多个无线或有线广播电视信号中解调出音视频信号,该音视频信号可以包括用户所选择电视频道频率中所携带的电视音视频信号,以及EPG数据信号。
在一些实施例中,调谐解调器210解调的频点受到控制器250的控制,控制器250可根据用户选择发出控制信号,以使的调制解调器响应用户选择的电视信号频率以及调制解调该频率所携带的电视信号。
在一些实施例中,控制器250,通过存储在存储器上中各种软件控制程序,来控制显示设备的工作和响应用户的操作。控制器250可以控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器275上显示UI对象的用户命令,控制器250便可以执行与由用户命令选择的对象有关的操作。
在一些实施例中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与所述图标相对应程序的操作。用于选择UI对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
如图2所示,控制器250包括随机存取存储器251(Random Access Memory,RAM)、只读存储器252(Read-Only Memory,ROM)、视频处理器270、音频处理器280、其他处理器253(例如:图形处理器(Graphics Processing Unit,GPU)、处理器254(Central ProcessingUnit,CPU)、通信接口(Communication Interface),以及通信总线256(Bus)中的至少一种。其中,通信总线连接各个部件。
在一些实施例中,RAM 251用于存储操作系统或其他正在运行中的程序的临时数据在一些实施例中,ROM 252用于存储各种系统启动的指令。
在一些实施例中,ROM 252用于存储一个基本输入输出系统,称为基本输入输出系统(Basic Input Output System,BIOS)。用于完成对系统的加电自检、系统中各功能模块的初始化、系统的基本输入/输出的驱动程序及引导操作系统。
在一些实施例中,在收到开机信号时,显示设备200电源开始启动,CPU运行ROM252中系统启动指令,将存储在存储器的操作系统的临时数据拷贝至RAM 251中,以便于启动或运行操作系统。当操作系统启动完成后,CPU再将存储器中各种应用程序的临时数据拷贝至RAM251中,然后,以便于启动或运行各种应用程序。
在一些实施例中,CPU处理器254,用于执行存储在存储器中操作系统和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
在一些示例性实施例中,CPU处理器254,可以包括多个处理器。多个处理器可包括一个主处理器以及一个或多个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。一个或多个子处理器,用于在待机模式等状态下一种操作。
在一些示例性实施例中,显示设备200的显示器275为红外触摸屏,则显示器275会将触摸操作对应的触摸点的信息实时地发送给处理器254,处理器254接收触摸点的信息,确定触摸点。
在一些实施例中,图形处理器253,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。
在一些实施例中,视频处理器270被配置为将接收外部视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等等视频处理,可得到直接可显示设备200上显示或播放的信号。
在一些实施例中,视频处理器270,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2,则解复用模块进行解复用成视频信号和音频信号等。
视频解码模块,则用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对转换输入视频帧率,如将60Hz帧率转换为120Hz帧率或240Hz帧率,通常的格式采用如插帧方式实现。
显示格式化模块,则用于将接收帧率转换后视频输出信号,改变信号以符合显示格式的信号,如输出RGB数据信号。
在一些实施例中,图形处理器253可以和视频处理器可以集成设置,也可以分开设置,集成设置的时候可以执行输出给显示器的图形信号的处理,分离设置的时候可以分别执行不同的功能,例如GPU+FRC(Frame Rate Conversion))架构。
在一些实施例中,音频处理器280,用于接收外部的音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等处理,得到可以在扬声器中播放的声音信号。
在一些实施例中,视频处理器270可以包括一颗或多颗芯片组成。音频处理器,也可以包括一颗或多颗芯片组成。
在一些实施例中,视频处理器270和音频处理器280,可以单独的芯片,也可以于控制器一起集成在一颗或多颗芯片中。
在一些实施例中,音频输出,在控制器250的控制下接收音频处理器280输出的声音信号,如:扬声器286,以及除了显示设备200自身携带的扬声器之外,可以输出至外接设备的发生装置的外接音响输出端子,如:外接音响接口或耳机接口等,还可以包括通信接口中的近距离通信模块,例如:用于进行蓝牙扬声器声音输出的蓝牙模块。
供电电源290,在控制器250控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电电源290可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部电源,在显示设备200中提供外接电源的电源接口。
用户接口265,用于接收用户的输入信号,然后,将接收用户输入信号发送给控制器250。用户输入信号可以通过网络通信模块接收各种用户控制信号。
在一些实施例中,用户通过控制装置或移动终端300输入用户命令,用户输入接口则根据用户的输入,显示设备200则通过控制器250响应用户的输入。
在一些实施例中,用户可在显示器275上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。
在一些实施例中,″用户界面″,是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
存储器260,包括存储用于驱动显示设备200的各种软件模块。如:第一存储器中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等中的至少一种。
基础模块用于显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。
显示控制模块用于控制显示器进行显示图像内容的模块,可以用于播放多媒体图像内容和UI界面等信息。通信模块,用于与外部设备之间进行控制和数据通信的模块。浏览器模块,用于执行浏览服务器之间数据通信的模块。服务模块,用于提供各种服务以及各类应用程序在内的模块。同时,存储器260还用存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
图3为本申请提供的显示设备的软件系统示意图。参见图3,在一些实施例中,将系统分为四层,从上至下分别为应用程序(Applications)层(简称″应用层″),应用程序框架(Application Framework)层(简称″框架层″),安卓运行时(Android runtime)和系统库层(简称″系统运行库层″),以及内核层。
在一些实施例中,应用程序层中运行有至少一个应用程序,这些应用程序可以是操作系统自带的窗口(Window)程序、系统设置程序、时钟程序等;也可以是第三方开发者所开发的应用程序,比如嗨见程序、K歌程序、魔镜程序等。在具体实施时,应用程序层中的应用程序包不限于以上举例,实际还可以包括其它应用程序包,本申请实施例对此不做限制。
框架层为应用程序层的应用程序提供应用编程接口(Application ProgrammingInterface,API)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心,这个中心决定让应用层中的应用程序做出动作。应用程序通过API接口,可在执行中访问系统中的资源和取得系统的服务
如图3所示,本申请实施例中应用程序框架层包括管理器(Managers),内容提供者(Content Provider)等,其中管理器包括以下模块中的至少一个:活动管理器(ActivityManager)用于和系统中正在运行的所有活动进行交互;位置管理器(Location Manager)用于给系统服务或应用提供了系统位置服务的访问;文件包管理器(Package Manager)用于检索当前安装在设备上的应用程序包相关的各种信息;通知管理器(NotificationManager)用于控制通知消息的显示和清除;窗口管理器(Window Manager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。
在一些实施例中,活动管理器用于:管理各个应用程序的生命周期以及通常的导航回退功能,比如控制应用程序的退出(包括将显示窗口中当前显示的用户界面切换到系统桌面)、打开、后退(包括将显示窗口中当前显示的用户界面切换到当前显示的用户界面的上一级用户界面)等。
在一些实施例中,窗口管理器用于管理所有的窗口程序,比如获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕,控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。
在一些实施例中,系统运行库层为上层即框架层提供支撑,当框架层被使用时,安卓操作系统会运行系统运行库层中包含的C/C++库以实现框架层要实现的功能。
在一些实施例中,内核层是硬件和软件之间的层。如图3所示,内核层至少包含以下驱动中的至少一种:音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器,温度传感器,触摸传感器、压力传感器等)等。
在一些实施例中,内核层还包括用于进行电源管理的电源驱动模块。
在一些实施例中,图3中的软件架构对应的软件程序和/或模块存储在图2所示的第一存储器或第二存储器中。
在一些实施例中,对于具备触摸功能的显示设备,以分屏操作为例,显示设备接收用户作用于显示屏上的输入操作(如分屏操作),内核层可以根据输入操作产生相应的输入事件,并向应用程序框架层上报该事件。由应用程序框架层的活动管理器设置与该输入操作对应的窗口模式(如多窗口模式)以及窗口位置和大小等。应用程序框架层的窗口管理根据活动管理器的设置绘制窗口,然后将绘制的窗口数据发送给内核层的显示驱动,由显示驱动在显示屏的不同显示区域显示与之对应的应用界面。
红外触摸屏的结构简单。示例性地,图4为本申请一实施例提供的红外触摸屏的示意图,如图4所示,红外触摸屏外观是一个矩形结构,由一个长边发射边、一个长边接收边,一个短边发射边、一个短边接收边组成。在长边发射边和短边发射边上有若干发射灯,相应长边接收边和短边接收边上对应有若干接收灯。图4中发射灯和接收灯采用1对3方式设置,即一个发射灯发光,对面有3个接收灯同时接收,由此形成光网,根据光网在触摸和未触摸情况下的不同形态判断触摸行为。
目前,行业内通常是采用逻辑法或图像法确定触摸点。而逻辑法的精度远低于图像法,因此,通常般采用图像法确定触摸点,即:对红外触摸屏对应的前景图中像素值满足要求的像素进行判断和触摸点轮廓追踪,以确定触摸点。在这过程中,容易进入红外触摸图像特有的光路盲区(即无光路经过的像素)而产生大量冗余计算和判断(即执行一次轮廓搜索后最后发现此触摸点为无光路经过的无效的盲区点、或者面积不满足要求的干扰点)。图5为本申请一实施例提供的图像法确定触摸点的示意图。如图5所示,在从上到下、从左至右搜索时首先搜索到了阴影区域501,确定为触摸点,但实际这个触摸点为假点,这一步的搜索为无效搜索计算。因此,在采用图像法确定触摸点时,存在触摸响应慢的问题。
基于上述问题,本申请提供一种显示设备、触摸点确定方法及装置,通过将红外触摸屏的光网形成图像,在图像中搜索触摸操作对应的像素时,搜索背景图和前景图中同时满足条件的像素,然后以此为基准快速搜索触摸点轮廓以确定触摸点,能够提升触摸点轮廓的搜索速度,进而提升触摸响应速度。
下面采用详细的实施例,来说明本申请如何确定触摸点。
图6为本申请一实施例提供的触摸点确定方法的流程图。如图6所示,显示设备200中处理器254被配置为执行以下步骤:
在S601中,响应于用户的触摸操作,确定各扫描方向对应的光路的光强。
本申请实施例中,示例性地,设定红外触摸屏的扫描方向数n及红外触摸屏每个灯管在各扫描方向下的角度,在一个扫描周期执行n个扫描方向的扫描。示例性地,n为3,红外触摸屏响应于用户的触摸操作,在当前扫描周期内,获取红外触摸屏3个扫描方向中各个光路的光强,包括红外触摸屏的长边和短边每个扫描方向的光路的光强。
在S602中,根据光强及背景图,生成前景图。
其中,背景图为红外触摸屏未有触摸发生时对应的图像,前景图为红外触摸屏有触摸发生时对应的图像。
示例性地,在步骤S601之前,可以预先建立两幅图像,包括背景图(Background,BG)和前景图(Foreground,FG)。设定背景图和前景图的大小相同,即背景图和前景图的图像宽度(Width)和图像高度(Height)分别相等,背景图和前景图中每个像素点的位置分别一一对应,然后分别初始化背景图和前景图中每个像素的像素值为0。其中,图像宽度一般取值为红外触摸屏长度毫米数,图像高度一般取值为红外触摸屏宽度毫米数。背景图和前景图的图像大小可以与红外触摸屏的大小相同,或者,以红外触摸屏的大小为基准,进行等比例放大或缩小。示例性地,图7为本申请一实施例提供的背景图中各像素的像素值均初始化为0的示意图,如图7所示,每一小格代表一个像素,每个像素的像素值均初始化为0。
在背景图初始化后,需要根据红外触摸屏未有触摸发生时扫描周期内各个光路的光强来生成背景图。在一种可能的实施方式中,在红外触摸屏上电时,可以逐条遍历扫描各光路,将各光路映射到背景图中,每一条光路所经过的像素的像素值都各增加预设值,预设值为单光路经过背景图中像素时的像素值,预设值比如为1,依此处理完所有光路,从而得到背景图。示例性地,图8为本申请一实施例提供的一条扫描光路经过背景图中的像素的示意图,如图8所示,当一条扫描光路经过背景图中的像素时,背景图中对应的像素的像素值均增加预设值1,即图8中阴影区域中的像素,每个像素的像素值均为1。示例性地,图9为本申请一实施例提供的将所有扫描光路均进行″增加绘制″后得到的背景图的示意图,如图9所示,每一小格代表一个像素,每一条光路所经过的像素的像素值都各增加1,从图9可以看出,阴影区域中是没有光路经过的像素,这些像素的像素值均为0,除了阴影区域,其他区域中的每个像素的像素值均为6,表示每个像素有6条光路经过。在另一种可能的实施方式中,当红外触摸屏在预设时间范围(比如1分钟)内未有触摸发生时,可以逐条遍历扫描各光路,将各光路映射到背景图中,每一条光路所经过的像素的像素值都各增加预设值,预设值比如为1,依此处理完所有光路,从而得到背景图。
该步骤中,在响应于用户的触摸操作,确定了各扫描方向对应的光路的光强后,可以根据光强及生成的背景图,生成前景图。对于如何生成前景图,可参考相关技术或者后续实施例,此处不再赘述。
在S603中,根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素。
其中,目标像素位于触摸操作对应的触摸点的轮廓范围内。
在生成了前景图,可以根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素。
在一些实施例中,根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素,可以包括:在前景图中,采用以下方式,逐行逐像素搜索触摸操作对应的目标像素:确定前景图中满足第一目标像素条件的像素为触摸操作对应的目标像素,第一目标像素条件为前景图中像素的像素值小于背景图中对应像素的像素值。
示例性地,在前景图中,从首行到末行(或者从未行到首行)逐行逐像素搜索触摸操作对应的目标像素。假设当前像素的位置为(i,j),若前景图中该像素位置的像素值小于背景图中对应像素的像素值,则确定此像素为触摸操作对应的目标像素,相应地,目标像素位于触摸操作对应的触摸点的轮廓范围内。
在一些实施例中,根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素,可以包括:在前景图中,采用以下方式,逐行逐像素搜索触摸操作对应的目标像素:确定前景图中满足第二目标像素条件的像素为触摸操作对应的目标像素,第二目标像素条件为前景图中像素的像素值小于或等于像素值阈值,且,背景图中对应像素的像素值大于像素值阈值。
示例性地,像素值阈值一般取值为0,像素值阈值可以用t表示。示例性地,在前景图中,从首行到末行(或者从未行到首行)逐行逐像素搜索触摸操作对应的目标像素。假设当前像素的位置为(i,j),若前景图中该像素位置的像素值小于或等于t且背景图中该像素位置的像素值大于t,则确定此像素为触摸操作对应的目标像素。示例性地,图10为本申请一实施例提供的目标像素的示意图,如图10所示,每一小格代表一个像素,从图10可以看出,阴影区域中是没有光路经过的像素,这些像素的像素值均为0,区域1001、区域1002、区域1003中的像素的像素值均表示为0/6,表示区域1001、区域1002、区域1003中的像素在前景图中对应的像素值为0,在背景图中对应的像素值为6,这些像素确定为触摸操作对应的目标像素,相应地,目标像素位于触摸操作对应的触摸点的轮廓范围内。
在S604中,根据目标像素,确定触摸点。
在确定了触摸操作对应的目标像素后,可以根据目标像素,确定触摸点。对于如何确定触摸点,可参考相关技术或者后续实施例,此处不再赘述。
本申请实施例提供的触摸点确定方法,显示设备包括红外触摸屏,与红外触摸屏连接的处理器,该处理器被配置为通过响应于用户的触摸操作,确定各扫描方向对应的光路的光强,根据光强及背景图,生成前景图,根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素,根据目标像素,确定触摸点。由于本申请实施例在确定触摸点时不仅考虑了前景图中像素的像素值,还结合了与前景图中像素对应的背景图中像素的像素值,即根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素,根据目标像素,确定触摸点,因此,能够提升触摸点轮廓的搜索速度,进而提升触摸响应速度。
下面结合具体步骤,对本申请实施例提供的触摸点确定方法进行详细说明。图11为本申请另一实施例提供的触摸点确定方法的流程图。如图11所示,显示设备200中处理器254被配置为执行以下步骤:
在S11O1中,响应于用户的触摸操作,确定各扫描方向对应的光路的光强。
该步骤的具体实现过程可以参见S601的相关描述,此处不再赘述。
本申请实施例中,图6中S602步骤可以进一步细化为如下所述的S1102至S1103两个步骤:
在S1102中,遍历各扫描方向对应的光路,确定光强小于单光路光强阈值的光路为被遮挡光路。
示例性地,单光路光强阈值一般取值为红外触摸屏上电时所采集到的光路的光强的70%,单光路光强阈值可以用t2表示,可以在步骤S1101之前预先设定。在响应于用户的触摸操作,确定了各扫描方向对应的光路的光强后,可以遍历各扫描方向对应的光路,若光路的光强小于单光路光强阈值,则确定该光路为被遮挡光路。
在S1103中,根据背景图中像素的像素值以及被遮挡光路,生成前景图。
在步骤S1101之前已经预先根据红外触摸屏未有触摸发生时扫描周期内各个光路的光强生成了背景图,背景图中各个像素均有对应的像素值。在确定了被遮挡光路后,可以根据背景图中像素的像素值以及被遮挡光路,生成前景图。
在一些实施例中,根据背景图中像素的像素值以及被遮挡光路,生成前景图,可以包括:确定被遮挡光路经过的像素在背景图中的目标像素值;将背景图中被遮挡光路经过的像素的像素值,调整为目标像素值与预设值的差,得到前景图,预设值为单光路经过像素时的像素值。
示例性地,已经预先根据红外触摸屏未有触摸发生时扫描周期内各个光路的光强生成了背景图,背景图中各个像素均有对应的像素值,因此,可以确定被遮挡光路经过的像素在背景图中的目标像素值。示例性地,参照图9所示的背景图,目标像素值为6,可以基于背景图(例如复制一份背景图的图像以用于生成前景图),根据被遮挡光路,将背景图中被遮挡光路经过的像素的像素值各减少预设值,预设值为单光路经过像素时的像素值,预设值比如为1,依此处理完所有被遮挡光路,从而得到前景图。或者,基于预先建立的前景图,将前景图中每个像素的像素值设置为与背景图相同,然后根据被遮挡光路,将前景图中被遮挡光路经过的像素的像素值各减少预设值,预设值为单光路经过像素时的像素值,预设值比如为1,依此处理完所有被遮挡光路,从而得到前景图。示例性地,图12为本申请一实施例提供的将所有扫描光路均进行″删除绘制″后得到的前景图的示意图,如图12所示,每一小格代表一个像素,每一条被遮挡光路所经过的像素的像素值都各减少1,从图12可以看出,阴影区域中是没有光路经过的像素,这些像素的像素值均为0,区域1201、区域1202、区域1203中均为被遮挡光路经过的像素,这些像素的像素值为0。
在S1104中,根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素。其中,目标像素位于触摸操作对应的触摸点的轮廓范围内。
该步骤的具体实现过程可以参见S603的相关描述,此处不再赘述。
本申请实施例中,图6中S604步骤可以进一步细化为如下所述的S1105至S1106两个步骤:
在S1105中,根据目标像素,确定前景图中的触摸点目标行。
其中,触摸点目标行用于表示触摸操作对应的触摸点所在的行。
该步骤中,在确定了触摸操作对应的目标像素后,可以根据目标像素,确定前景图中的触摸点目标行。
在一些实施例中,根据目标像素,确定前景图中的触摸点目标行,可以包括:基于目标像素,向目标像素的目标方向进行搜索,直至搜索到的像素的像素值不满足第一目标像素条件或第二目标像素条件,得到触摸点的行长度,目标方向包括左方和/或右方,第一目标像素条件为前景图中像素的像素值小于背景图中对应像素的像素值,第二目标像素条件为前景图中像素的像素值小于或等于像素值阈值,且,背景图中对应像素的像素值大于像素值阈值;若行长度大于或等于行长度阈值,则确定目标像素所在的行为触摸点目标行。
示例性地,行长度阈值一般取值为红外触摸屏所要识别的最小触摸物体的直径,行长度阈值用len表示。示例性地,背景图的大小与红外触摸屏大小相同,即两者的图像是1∶1,则len为红外触摸屏所要识别的最小触摸物体的直径;若背景图的大小是红外触摸屏大小的两倍,即两者的图像是2∶1,则len为红外触摸屏所要识别的最小触摸物体的直径的两倍。示例性地,前景图中目标像素的位置为(i,j),基于前景图中目标像素所在的行,从目标像素开始向左搜索,以搜索条件为搜索到的像素的像素值是否满足第二目标像素条件为例,其中,像素值阈值可以用t表示。若搜索到的前景图中下一个像素的像素值小于或等于t,且,背景图中对应像素的像素值大于t,则继续向左搜索,直至搜索到最左侧一个像素值满足第二目标像素条件的像素(k,j)为止。然后从目标像素开始向右搜索,若搜索到的前景图中下一个像素的像素值小于或等于t,且,背景图中对应像素的像素值大于t,则继续向右搜索,直至搜索到最右侧一个像素值满足第二目标像素条件的像素(m,j)为止,则确定触摸点的行长度L=m-k。若行长度L大于或等于行长度阈值len,则确定目标像素所在的行为触摸点目标行。
可选的,若行长度小于行长度阈值,则跳转至向目标像素的右方进行搜索时第一个不满足第一目标像素条件或第二目标像素条件的像素为新的用于搜索触摸操作对应的目标像素的像素。
示例性地,若行长度L小于行长度阈值len,则直接跳转至目标像素的右方像素(m+1,j)继续搜索目标像素,在获得目标像素后,再根据目标像素,采用上述方式确定前景图中的触摸点目标行。示例性地,图13为本申请一实施例提供的行长度L不满足行长度阈值的示意图,如图13所示,假设len为3,首先找到像素位置为1301这个像素为目标像素,然后以目标像素为基准,通过向左向右搜索确定行长度为2,由于该行长度2小于len,则该行直接抛弃,继续向右搜索目标像素。
在S1106中,根据触摸点目标行,确定触摸点。
在确定了前景图中的触摸点目标行后,可以根据触摸点目标行,确定触摸点。示例性地,图14为本申请一实施例提供的行长度L满足行长度阈值的触摸点的示意图,如图14所示,假设len为3,则区域1401中触摸点目标行的行长度均为3,因此,确定区域1401为触摸点对应的有效区域;区域1402和区域1403中触摸点目标行的行长度均小于3,因此,确定区域1402和区域1403均为无效区域。
在一些实施例中,根据触摸点目标行,确定触摸点,可以包括:以触摸点目标行为基准,在前景图中搜索触摸点的轮廓;根据轮廓,确定触摸点的坐标以及尺寸信息。
示例性地,可以把触摸点目标行的第一个目标像素作为基准,在前景图中搜索触摸点的轮廓。具体搜索触摸点的轮廓的方法可参考相关技术,本申请这里不再赘述。在确定触摸点轮廓后,可以根据轮廓,确定触摸点的坐标以及尺寸信息(比如触摸点的宽度、高度)。示例性地,可以根据轮廓中各像素的x坐标的和与各像素的总数的比值作为触摸点的x坐标,可以根据轮廓中各像素的y坐标的和与各像素的总数的比值作为触摸点的y坐标,通过这种方式来确定触摸点的坐标(x,y)。需要说明的是,在确定触摸点的轮廓后,对触摸点轮廓范围内的像素做标识,表示触摸点轮廓范围内的像素已经被访问过了,在后续的搜索中,不会再对触摸点轮廓范围内的像素进行搜索。
在执行完步骤S1106后,可以循环执行S1104至S1106的步骤,直至确定前景图中的所有触摸点。
在S1107中,在确定触摸点后,对触摸点的坐标进行坐标变换,获得与红外触摸屏匹配的目标坐标。
该步骤中,红外触摸屏有自己的坐标系,在确定所有的触摸点后,将每个触摸点的坐标进行坐标变换,转换为与红外触摸屏匹配的目标坐标。
在S1108中,根据目标坐标,生成目标图像。
示例性地,处理器254在获得了目标坐标后,可以通过人机接口设备(HumanInterface Device,HID)标准协议上传所有触摸点的目标坐标、触摸点的面积信息给红外触摸屏,控制红外触摸屏显示目标图像。
可选的,在确定触摸点后,对触摸点进行预处理,预处理包括去鬼点处理、轨迹跟踪与平滑处理中的至少一种;对预处理后的触摸点的坐标进行坐标变换,获得与红外触摸屏匹配的目标坐标;根据目标坐标,生成目标图像。
示例性地,在确定触摸点后,可以对触摸点进行去鬼点处理,执行轨迹跟踪与平滑处理,然后再对触摸点的坐标进行坐标变换,获得与红外触摸屏匹配的目标坐标,根据目标坐标,生成目标图像。需要说明的是,去鬼点处理、轨迹跟踪和平滑处理均可参考相关技术,本申请这里不再赘述。
本申请实施例提供的触摸点确定方法,由于在确定触摸点时不仅考虑了前景图中像素的像素值,还结合了与前景图中像素对应的背景图中像素的像素值,即根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素,根据目标像素,确定前景图中的触摸点目标行,根据触摸点目标行,确定触摸点,因此,能够提升触摸点轮廓的搜索速度,进而提升触摸响应速度。
下述为本申请装置实施例,可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节,请参照本申请方法实施例。
图15为本申请一实施例提供的触摸点确定装置的结构示意图。本申请实施例提供一种触摸点确定装置,应用于显示设备。如图15所示,该触摸点确定装置1500包括:第一确定模块1501、生成模块1502、第二确定模块1503和处理模块1504。其中:
第一确定模块1501,用于响应于用户的触摸操作,确定各扫描方向对应的光路的光强。
生成模块1502,用于根据光强及背景图,生成前景图,背景图为红外触摸屏未有触摸发生时对应的图像,前景图为红外触摸屏有触摸发生时对应的图像。
第二确定模块1503,用于根据前景图和背景图中对应像素的像素值,确定触摸操作对应的目标像素,目标像素位于触摸操作对应的触摸点的轮廓范围内。
处理模块1504,用于根据目标像素,确定触摸点。
在一些可能的实现方式中,生成模块1502具体用于:遍历各扫描方向对应的光路,确定光强小于单光路光强阈值的光路为被遮挡光路;根据背景图中像素的像素值以及被遮挡光路,生成前景图。
在一些可能的实现方式中,生成模块1502具体用于:确定被遮挡光路经过的像素在背景图中的目标像素值;将背景图中被遮挡光路经过的像素的像素值,调整为目标像素值与预设值的差,得到前景图,预设值为单光路经过像素时的像素值。
在一些可能的实现方式中,第二确定模块1503具体用于:在前景图中,采用以下方式,逐行逐像素搜索触摸操作对应的目标像素:确定前景图中满足第一目标像素条件的像素为触摸操作对应的目标像素,第一目标像素条件为前景图中像素的像素值小于背景图中对应像素的像素值。
在一些可能的实现方式中,第二确定模块1503具体用于:在前景图中,采用以下方式,逐行逐像素搜索触摸操作对应的目标像素:确定前景图中满足第二目标像素条件的像素为触摸操作对应的目标像素,第二目标像素条件为前景图中像素的像素值小于或等于像素值阈值,且,背景图中对应像素的像素值大于像素值阈值。
在一些可能的实现方式中,处理模块1504具体用于:根据目标像素,确定前景图中的触摸点目标行,触摸点目标行用于表示触摸操作对应的触摸点所在的行;根据触摸点目标行,确定触摸点。
在一些可能的实现方式中,处理模块1504具体用于:基于目标像素,向目标像素的目标方向进行搜索,直至搜索到的像素的像素值不满足第一目标像素条件或第二目标像素条件,得到触摸点的行长度,目标方向包括左方和/或右方,第一目标像素条件为前景图中像素的像素值小于背景图中对应像素的像素值,第二目标像素条件为前景图中像素的像素值小于或等于像素值阈值,且,背景图中对应像素的像素值大于像素值阈值;若行长度大于或等于行长度阈值,则确定目标像素所在的行为触摸点目标行。
在一些可能的实现方式中,处理模块1504还用于:若行长度小于行长度阈值,则跳转至向目标像素的右方进行搜索时第一个不满足第一目标像素条件或第二目标像素条件的像素为新的用于搜索触摸操作对应的目标像素的像素。
在一些可能的实现方式中,处理模块1504具体用于:以触摸点目标行为基准,在前景图中搜索触摸点的轮廓;根据轮廓,确定触摸点的坐标以及尺寸信息。
在一些可能的实现方式中,处理模块1504还用于:在确定触摸点后,对触摸点的坐标进行坐标变换,获得与红外触摸屏匹配的目标坐标;根据目标坐标,生成目标图像。
在一些可能的实现方式中,处理模块1504还用于:在确定触摸点后,对触摸点进行预处理,预处理包括去鬼点处理、轨迹跟踪与平滑处理中的至少一种;对预处理后的触摸点的坐标进行坐标变换,获得与红外触摸屏匹配的目标坐标;根据目标坐标,生成目标图像。
需要说明的是,本实施例提供的装置可用于执行上述的触摸点确定方法,其实现方式和技术效果类似,本实施例此处不再赘述。
需要说明的是,应理解以上装置的各个模块的划分仅仅是一种逻辑功能的划分,实际实现时可以全部或部分集成到一个物理实体上,也可以物理上分开。且这些模块可以全部以软件通过处理元件调用的形式实现;也可以全部以硬件的形式实现;还可以部分模块通过处理元件调用软件的形式实现,部分模块通过硬件的形式实现。例如,处理模块可以为单独设立的处理元件,也可以集成在上述装置的某一个芯片中实现,此外,也可以以程序代码的形式存储于上述装置的存储器中,由上述装置的某一个处理元件调用并执行以上处理模块的功能。其它模块的实现与之类似。此外这些模块全部或部分可以集成在一起,也可以独立实现。这里的处理元件可以是一种集成电路,具有信号的处理能力。在实现过程中,上述方法的各步骤或以上各个模块可以通过处理器元件中的硬件的集成逻辑电路或者软件形式的指令完成。
例如,以上这些模块可以是被配置成实施以上方法的一个或多个集成电路,例如:一个或多个ASIC(Application Specific Integrated Circuit,特定集成电路),或,一个或多个DSP(Digital Signal Processor,数字信号处理器),或,一个或者多个FPGA(FieldProgrammable Gate Array,现场可编程门阵列)等。再如,当以上某个模块通过处理元件调度程序代码的形式实现时,该处理元件可以是通用处理器,例如CPU或其它可以调用程序代码的处理器。再如,这些模块可以集成在一起,以SOC(System-on-a-Chip,片上系统)的形式实现。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机程序。在计算机上加载和执行计算机程序指令时,全部或部分地产生按照本申请实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机程序可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,计算机程序可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘solid state disk(SSD))等。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,当计算机程序被处理器执行时实现如上任一方法实施例所述的触摸点确定方法。
本申请实施例还提供一种计算机程序产品,该计算机程序产品包括计算机程序,该计算机程序存储在计算机可读存储介质中,至少一个处理器可以从该计算机可读存储介质中读取计算机程序,该至少一个处理器执行计算机程序时可实现如上任一方法实施例所述的触摸点确定方法。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
为了方便解释,已经结合具体的实施方式进行了上述说明。但是,上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导,可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用,从而使得本领域技术人员更好的使用实施方式以及适于具体使用考虑的各种不同的变形的实施方式。

Claims (12)

1.一种显示设备,其特征在于,包括:
红外触摸屏;
与所述红外触摸屏连接的处理器,所述处理器被配置为:
响应于用户的触摸操作,确定各扫描方向对应的光路的光强;
根据所述光强及背景图,生成前景图,所述背景图为所述红外触摸屏未有触摸发生时对应的图像,所述前景图为所述红外触摸屏有触摸发生时对应的图像;
根据所述前景图和所述背景图中对应像素的像素值,确定所述触摸操作对应的目标像素,所述目标像素位于所述触摸操作对应的触摸点的轮廓范围内;
根据所述目标像素,确定所述触摸点。
2.根据权利要求1所述的显示设备,其特征在于,所述处理器在用于根据所述光强及背景图,生成前景图时,具体用于:
遍历各扫描方向对应的光路,确定光强小于单光路光强阈值的光路为被遮挡光路;
根据所述背景图中像素的像素值以及所述被遮挡光路,生成所述前景图。
3.根据权利要求2所述的显示设备,其特征在于,所述处理器在用于根据所述背景图中像素的像素值以及所述被遮挡光路,生成所述前景图时,具体用于:
确定所述被遮挡光路经过的像素在所述背景图中的目标像素值;
将所述背景图中所述被遮挡光路经过的像素的像素值,调整为所述目标像素值与预设值的差,得到所述前景图,所述预设值为单光路经过所述像素时的像素值。
4.根据权利要求1所述的显示设备,其特征在于,所述处理器在用于根据所述前景图和所述背景图中对应像素的像素值,确定所述触摸操作对应的目标像素时,具体用于:
在所述前景图中,采用以下方式,逐行逐像素搜索所述触摸操作对应的目标像素:
确定所述前景图中满足第一目标像素条件的像素为所述触摸操作对应的目标像素,所述第一目标像素条件为所述前景图中像素的像素值小于所述背景图中对应像素的像素值。
5.根据权利要求1所述的显示设备,其特征在于,所述处理器在用于根据所述前景图和所述背景图中对应像素的像素值,确定所述触摸操作对应的目标像素时,具体用于:
在所述前景图中,采用以下方式,逐行逐像素搜索所述触摸操作对应的目标像素:
确定所述前景图中满足第二目标像素条件的像素为所述触摸操作对应的目标像素,所述第二目标像素条件为所述前景图中像素的像素值小于或等于像素值阈值,且,所述背景图中对应像素的像素值大于所述像素值阈值。
6.根据权利要求1所述的显示设备,其特征在于,所述处理器在用于根据所述目标像素,确定所述触摸点时,具体用于:
根据所述目标像素,确定所述前景图中的触摸点目标行,所述触摸点目标行用于表示所述触摸操作对应的触摸点所在的行;
根据所述触摸点目标行,确定所述触摸点。
7.根据权利要求6所述的显示设备,其特征在于,所述处理器在用于根据所述目标像素,确定所述前景图中的触摸点目标行时,具体用于:
基于所述目标像素,向所述目标像素的目标方向进行搜索,直至搜索到的像素的像素值不满足第一目标像素条件或第二目标像素条件,得到所述触摸点的行长度,所述目标方向包括左方和/或右方,所述第一目标像素条件为所述前景图中像素的像素值小于所述背景图中对应像素的像素值,所述第二目标像素条件为所述前景图中像素的像素值小于或等于像素值阈值,且,所述背景图中对应像素的像素值大于所述像素值阈值;
若所述行长度大于或等于行长度阈值,则确定所述目标像素所在的行为所述触摸点目标行。
8.根据权利要求7所述的显示设备,其特征在于,所述处理器还用于:
若所述行长度小于行长度阈值,则跳转至向所述目标像素的右方进行搜索时第一个不满足所述第一目标像素条件或所述第二目标像素条件的像素为新的用于搜索所述触摸操作对应的目标像素的像素。
9.根据权利要求6所述的显示设备,其特征在于,所述处理器在用于根据所述触摸点目标行,确定所述触摸点时,具体用于:
以所述触摸点目标行为基准,在所述前景图中搜索所述触摸点的轮廓;
根据所述轮廓,确定所述触摸点的坐标以及尺寸信息。
10.根据权利要求1至9中任一项所述的显示设备,其特征在于,所述处理器还用于:
在确定所述触摸点后,对所述触摸点的坐标进行坐标变换,获得与所述红外触摸屏匹配的目标坐标;
根据所述目标坐标,生成目标图像。
11.根据权利要求1至9中任一项所述的显示设备,其特征在于,所述处理器还用于:
在确定所述触摸点后,对所述触摸点进行预处理,所述预处理包括去鬼点处理、轨迹跟踪与平滑处理中的至少一种;
对预处理后的触摸点的坐标进行坐标变换,获得与所述红外触摸屏匹配的目标坐标;
根据所述目标坐标,生成目标图像。
12.一种触摸点确定方法,其特征在于,应用于显示设备,所述触摸点确定方法包括:
响应于用户的触摸操作,确定各扫描方向对应的光路的光强;
根据所述光强及背景图,生成前景图,所述背景图为红外触摸屏未有触摸发生时对应的图像,所述前景图为所述红外触摸屏有触摸发生时对应的图像;
根据所述前景图和所述背景图中对应像素的像素值,确定所述触摸操作对应的目标像素,所述目标像素位于所述触摸操作对应的触摸点的轮廓范围内;
根据所述目标像素,确定所述触摸点。
CN202110521258.6A 2021-05-13 2021-05-13 显示设备、触摸点确定方法及装置 Pending CN115344143A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110521258.6A CN115344143A (zh) 2021-05-13 2021-05-13 显示设备、触摸点确定方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110521258.6A CN115344143A (zh) 2021-05-13 2021-05-13 显示设备、触摸点确定方法及装置

Publications (1)

Publication Number Publication Date
CN115344143A true CN115344143A (zh) 2022-11-15

Family

ID=83946630

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110521258.6A Pending CN115344143A (zh) 2021-05-13 2021-05-13 显示设备、触摸点确定方法及装置

Country Status (1)

Country Link
CN (1) CN115344143A (zh)

Similar Documents

Publication Publication Date Title
CN112181207B (zh) 一种显示设备及几何图形识别方法
CN111970549B (zh) 菜单显示方法和显示设备
CN114157889B (zh) 一种显示设备及触控协助交互方法
CN112165641A (zh) 一种显示设备
CN114237419A (zh) 显示设备、触控事件的识别方法
CN112087671A (zh) 一种输入法控件的操控提示信息的显示方法及显示设备
CN113485613A (zh) 显示设备及自由画屏幕边缘涂色实现方法
CN113076031B (zh) 显示设备、触摸定位方法及装置
CN115390702A (zh) 显示设备、触摸点定位方法及装置
CN112235621B (zh) 一种可视区域的显示方法及显示设备
CN111913621B (zh) 屏幕界面交互显示方法及显示设备
CN111913622B (zh) 屏幕界面交互显示方法及显示设备
CN112926420B (zh) 一种显示设备和菜单文字识别方法
CN111787350B (zh) 显示设备及视频通话中的截图方法
CN115344143A (zh) 显示设备、触摸点确定方法及装置
CN111897463A (zh) 屏幕界面交互显示方法及显示设备
CN115185392A (zh) 显示设备、图像处理方法及装置
CN112367550A (zh) 一种媒资列表多标题动态展示的实现方法及显示设备
CN111949179A (zh) 一种控件放大方法及显示设备
CN111931692A (zh) 显示设备及图像识别方法
CN112199560A (zh) 一种设置项的搜索方法及显示设备
CN114417035A (zh) 一种图片浏览方法和显示设备
CN111935530A (zh) 一种显示设备
CN114079827A (zh) 菜单显示方法和显示设备
CN114040341B (zh) 一种蓝牙广播包上报处理方法及显示设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination