CN114845165A - 界面显示方法、装置、设备及可读存储介质 - Google Patents

界面显示方法、装置、设备及可读存储介质 Download PDF

Info

Publication number
CN114845165A
CN114845165A CN202210461635.6A CN202210461635A CN114845165A CN 114845165 A CN114845165 A CN 114845165A CN 202210461635 A CN202210461635 A CN 202210461635A CN 114845165 A CN114845165 A CN 114845165A
Authority
CN
China
Prior art keywords
interface
real
target area
focal length
viewer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210461635.6A
Other languages
English (en)
Inventor
戴宇明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Skyworth RGB Electronics Co Ltd
Original Assignee
Shenzhen Skyworth RGB Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Skyworth RGB Electronics Co Ltd filed Critical Shenzhen Skyworth RGB Electronics Co Ltd
Priority to CN202210461635.6A priority Critical patent/CN114845165A/zh
Publication of CN114845165A publication Critical patent/CN114845165A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/193—Preprocessing; Feature extraction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations

Abstract

本发明公开了一种界面显示方法、装置、设备及可读存储介质，其中，所述界面显示方法包括：获取终端的观看者的实时眼部状态特征；当基于所述实时眼部状态特征判定所述观看者存在焦距优化行为时，基于终端的当前界面的聚焦内容确定所述当前界面的目标区域；将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理。使得用户可以准确的获取到界面上显示的内容，实现用户无感提高观看体验的效果。

Description

界面显示方法、装置、设备及可读存储介质
技术领域
本发明涉及智能电视领域，尤其涉及一种界面显示方法、装置、设备及可读存储介质。
背景技术
现在电视的功能越来越强大，可展示的内容也越来越丰富，通常情况下为在有限的电视界面显示出更多的信息，则会缩小每个信息在界面上所占据的空间，从而会导致部分信息显示不全或者用户无法清楚的获取到界面上信息的问题，尤其是对于老年用户或者视力下降用户，严重影响了其使用体验。
上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供一种界面显示方法、装置、设备及可读存储介质，旨在解决当前界面显示过多信息时，由于信息显示不全或者显示不清晰，造成用户使用体验差的技术问题。
为实现上述目的，本发明提供一种界面显示方法，所述界面显示方法包括以下步骤：
获取终端的观看者的实时眼部状态特征；
当基于所述实时眼部状态特征判定所述观看者存在焦距优化行为时，基于终端的当前界面的聚焦内容确定所述当前界面的目标区域；
将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理。
进一步的，所述焦距优化行为包括：瞳孔焦距优化和眼部肌肉焦距优化，在所述判定所述观看者存在焦距优化行为的步骤之前包括：
基于预设焦距优化图像识别模型判断所述实时眼部状态特征是否存在所述瞳孔焦距优化或/和所述眼部肌肉焦距优化；
当所述实时眼部状态特征存在所述瞳孔焦距优化或/和所述眼部肌肉焦距优化中时，判定所述观看者存在焦距优化行为。
进一步的，所述聚焦内容包括聚焦区域和选定区域，所述基于终端的当前界面的聚焦内容确定所述当前界面的目标区域的步骤包括：
当所述当前界面播放图像内容时，将所述当前界面中所述聚焦区域作为所述目标区域；
当所述当前界面为控制界面时，将所述当前界面中所述选定区域作为所述目标区域。
进一步的，所述界面显示方法还包括：
若无法准确获取到所述观看者的实时眼部状态特征，则获取所述观看者的实时体态特征；
基于所述实时体态特征判断所述观看者是否存在焦距优化行为，当判定所述观看者存在焦距优化行为时，执行所述基于终端的当前界面的聚焦内容确定所述界面的目标区域的步骤。
进一步的，所述基于所述实时体态特征判断所述观看者是否存在焦距优化行为的步骤包括：
基于预设体态图像识别模型判断所述实时体态特征是否存在前倾行为；
当所述实时体态特征存在前倾行为并保持了预设时间段后，判定所述观看者存在焦距优化行为。
进一步的，所述将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理的步骤包括：
放大所述目标区域或者提高所述目标区域的对比度，以使所述观看者准确获取目标区域的信息。
进一步的，所述将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理的步骤还包括：
当所述目标区域存在文字信息时，将所述目标区域的文字信息语音播报。
此外，为实现上述目的，本发明还提供一种界面显示装置，所述界面显示装置包括：
获取模块，用于获取终端的观看者的实时眼部状态特征；
判断模块，用于当基于所述实时眼部状态特征判定所述观看者存在焦距优化行为时，基于终端的当前界面的聚焦内容确定所述当前界面的目标区域；
优化模块，用于将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理。
此外，为实现上述目的，本发明还提供一种界面显示设备，所述界面显示设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的界面显示程序，所述界面显示程序被所述处理器执行时实现如上述的界面显示方法的步骤。
此外，为实现上述目的，本发明还提供一种可读存储介质，所述可读存储介质上存储有界面显示程序，所述界面显示程序被处理器执行时实现如上述的界面显示方法的步骤。
本发明实施例提出的一种界面显示方法，通过图像传感器获取观看电视的用户的实时眼部状态特征，并通过获取到的实时眼部状态特征判断用户是否存在焦距优化行为，当用户存在焦距优化行为时，则进一步的通过当前界面的聚焦内容确定所述界面的目标区域，再将所述界面中的目标区域进行优化处理，以使得用户可准确获取到目标区域信息。可以理解的是，通过对应眼部状态特征进行捕获，以判断用户是否存在焦距调节时所反馈的生理现象(焦距优化行为)，当存在时判定此时用户无法看清界面所显示的内容，再进一步判断当前界面用户的可能聚焦的内容，并将可能聚焦的内容进行优化处理。而且，上述焦距优化行为用户自身被动的反应，因此在用户无需主动反馈的情况下，使得用户可以准确的获取到界面上显示的内容，从而实现用户无感提高观看体验的效果。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的设备结构示意图；
图2为本发明界面显示方法第一实施例的流程示意图；
图3为本发明界面显示方法第二实施例的流程示意图；
图4为本发明界面显示方法中放大目标区域效果图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
本发明实施例的主要解决方案是：通过图像传感器获取用户的实时眼部状态特征，并通过获取到的实时眼部状态特征判断用户是否存在焦距优化行为，当用户存在焦距优化行为时，则进一步的通过当前界面的聚焦内容确定所述界面的目标区域，再将所述界面中的目标区域进行优化处理，以使得用户可准确获取到目标区域信息。可以理解的是，通过对应眼部状态特征进行捕获，以判断用户是否存在焦距调节时所反馈的生理现象(焦距优化行为)，当存在时判定此时用户无法看清界面所显示的内容，再进一步判断当前界面用户的可能聚焦的内容(如人物、文字或者选定区等)，并将可能聚焦的内容进行优化处理(如放大、提高对比度以及语音播报等)。
由于当前为在电视界面显示出更多的信息，而缩小每个信息在界面上所占据的空间，导致部分信息显示不全或者用户无法清楚的获取到界面上信息的问题。
本发明提供一种解决方案，使得用户可以准确的获取到界面上显示的内容，从而实现用户无感提高观看体验的效果。
如图1所示，图1是本发明实施例方案涉及的硬件运行环境的设备结构示意图。
本发明实施例终端可以是智能电视，也可以是智能手机、PC、平板电脑、便携计算机等具有显示功能的电子终端设备。
如图1所示，该设备可以包括：处理器1001，例如CPU，网络接口1004，用户接口1003，存储器1005，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地，设备还可以包括摄像头、RF(Radio Frequency，射频)电路，传感器、音频电路、WiFi模块等等。其中，传感器比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示屏的亮度，接近传感器可在移动终端移动到耳边时，关闭显示屏和/或背光。作为运动传感器的一种，重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别移动终端姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；当然，移动终端还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。
本领域技术人员可以理解，图1中示出的设备结构并不构成对设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及界面显示程序。
在图1所示的设备中，网络接口1004主要用于连接后台服务器，与后台服务器进行数据通信；用户接口1003主要用于连接客户端(用户端)，与客户端进行数据通信；而处理器1001可以用于调用存储器1005中存储的界面显示程序，并执行以下操作：
获取终端的观看者的实时眼部状态特征；
当基于所述实时眼部状态特征判定所述观看者存在焦距优化行为时，基于终端的当前界面的聚焦内容确定所述当前界面的目标区域；
将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理。
进一步地，处理器1001可以调用存储器1005中存储的界面显示程序，还执行以下操作：
所述焦距优化行为包括：瞳孔焦距优化和眼部肌肉焦距优化，在所述判定所述观看者存在焦距优化行为的步骤之前包括：
基于预设焦距优化图像识别模型判断所述实时眼部状态特征是否存在所述瞳孔焦距优化或/和所述眼部肌肉焦距优化；
当所述实时眼部状态特征存在所述瞳孔焦距优化或/和所述眼部肌肉焦距优化中时，判定所述观看者存在焦距优化行为。
进一步地，处理器1001可以调用存储器1005中存储的界面显示程序，还执行以下操作：
所述基于终端的当前界面的聚焦内容确定所述当前界面的目标区域的步骤包括：
当所述当前界面播放图像内容时，将所述当前界面中所述聚焦区域作为所述目标区域；
当所述当前界面为控制界面时，将所述当前界面中所述选定区域作为所述目标区域。
进一步地，处理器1001可以调用存储器1005中存储的界面显示程序，还执行以下操作：
所述界面显示方法还包括：
若无法准确获取到所述观看者的实时眼部状态特征，则获取所述观看者的实时体态特征；
基于所述实时体态特征判断所述观看者是否存在焦距优化行为，当判定所述观看者存在焦距优化行为时，执行所述基于终端的当前界面的聚焦内容确定所述界面的目标区域的步骤。
进一步地，处理器1001可以调用存储器1005中存储的界面显示程序，还执行以下操作：
所述基于所述实时体态特征判断所述观看者是否存在焦距优化行为的步骤包括：
基于预设体态图像识别模型判断所述实时体态特征是否存在前倾行为；
当所述实时体态特征存在前倾行为并保持了预设时间段后，判定所述观看者存在焦距优化行为。
进一步地，处理器1001可以调用存储器1005中存储的界面显示程序，还执行以下操作：
所述将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理的步骤包括：
放大所述目标区域或者提高所述目标区域的对比度，以使所述观看者准确获取目标区域的信息。
进一步地，处理器1001可以调用存储器1005中存储的界面显示程序，还执行以下操作：
所述将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理的步骤还包括：
当所述目标区域存在文字信息时，将所述目标区域的文字信息语音播报。
参照图2，本发明界面显示方法中的第一实施例，所述界面显示方法包括：
步骤S10，获取终端的观看者的实时眼部状态特征；
在本实施例中，实施主体可以是，电视机、智能手机以及电脑等具有显示功能的电子设备。同上，上述终端也可以是电视机、智能手机以及电脑等。为清楚的说明本发明方法的技术方案，以电视为例进行说明。而上述终端的观看者是通常是指观看电视的用户。获取观看者的实时眼部状态特征的设备为图像传感器，例如摄像头。现在摄像头作为一个电视常用设备被越来越多的用户所接受，摄像头能采集相关的图像，基于采集的图像进行处理可以给电视系统带来了巨大的信息量，从而使得电视变更智能化。具体的，电视的摄像头在后台启动，并实时获取观看电视用户的图像信息，并自动捕获用户的眼部的状态特征图像。用户眼部的状态特征图像将被电视作为判断的依据。
步骤S20，当基于所述实时眼部状态特征判定所述观看者存在焦距优化行为时，基于终端的当前界面的聚焦内容确定所述当前界面的目标区域；
具体的，根据摄像头获取的实时眼部状态特征判断观看电视的用户是否存在焦距优化行为。该焦距优化行为是指人体自动调节眼睛焦距从而使得人体可以更清楚的观看到目标的行为，通常情况下眼睛的焦距调节为人体被动调节行为。可以理解的是，当用户出现上述焦距优化行为时实际上可以反应出此时用户无法看清电视界面的内容。而上述聚焦内容是指，在当前电视界面下用户最可能聚焦的内容，并将该聚焦内容所在的区域作为此时电视界面的目标区域。
进一步的，所述焦距优化行为包括：瞳孔焦距优化和眼部肌肉焦距优化，在所述判定所述观看者存在焦距优化行为的步骤之前包括：基于预设焦距优化图像识别模型判断所述实时眼部状态特是否存在所述瞳孔焦距优化或者所述眼部肌肉焦距优化；当所述实时眼部状态特征存在所述瞳孔焦距优化或者所述眼部肌肉焦距优化时，判定所述观看者存在焦距优化行为。
具体的，焦距优化行为可以包括瞳孔焦距优化和眼部肌肉焦距优化，即在眼睛看不清的情况下人眼自动调节焦距所反馈出的现象。其中，瞳孔焦距优化通常是指瞳孔大小变化，可以理解的是在调节焦距时通常会伴随着对瞳孔大小的调节，因此，将瞳孔的变化也作为人体焦距优化行为中的一种。而眼部肌肉焦距优化是指人体自动控制眼部肌肉收缩或者舒张对晶状体进行调整从而实现人眼焦距的调节的行为，而在进行人眼焦距调节时眼部肌肉会存在变化。此外，将在进行焦距调节时发生的上述瞳孔焦距优化和眼部肌肉焦距优化的眼部状态特征的图像数据作为训练样本，对图像识别模型训练即可得到上述预设焦距优化图像识别模型，且目前存较为成熟的图像识别技术，此处将不再赘述。通过预设焦距优化图像识别模型，判断获取到的观看电视的用户的实时眼部状态特征是否存在上述的瞳孔大小变化或/和上述眼部肌肉变化。而在进行用户是否存在焦距优化行为的判定时可以包括：当同时存在瞳孔大小变化和眼部肌肉变化则判定用户存在焦距优化行为；当存在瞳孔大小变化或者眼部肌肉变化中的任意一种时判定用户存在焦距优化行为。可以理解的是，当使用瞳孔大小变化或者眼部肌肉变化中的任意一种的判断标准时判断更加灵敏；当使用同时存在瞳孔大小变化和眼部肌肉变化的判断标准时判断更加准确，技术人员可以自由选择或者组合。
进一步的，所述聚焦内容包括聚焦区域和选定区域，所述基于终端的当前界面的聚焦内容确定所述当前界面的目标区域的步骤包括：当所述当前界面播放图像内容时，将所述当前界面中所述聚焦区域作为所述目标区域；当所述当前界面为控制界面时，将所述当前界面中所述选定区域作为所述目标区域。
具体的，上述聚焦内容可以包括：聚焦区域和选定区域。其中聚焦区域是指人物显示区域和文字显示区域，而选定区域是指当前界面被选中的区域。在本实施例中，将根据不同的界面场景(分为界面播放图像内容和界面为控制界面)确定聚焦内容。例如当前电视界面在播放电视节目时，会出现人物画面和文字信息(如节目名称或者字幕等)，同样通过图像识别技术对人物画面和文字信息进行识别，并将显示人物画面和文字信息的区域作为目标区域。当在电视控制界面时，例如电视主控制界面以及菜单控制界面等，在此情况下，用户可使用遥控器在控制界面进行选择，通常对于选定的目标存在有光标或者框进行凸显，将光标选定或者框选定的内容所对应的区域作为目标区域。
步骤S30，将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理。
具体的，对上述步骤中所确定的目标区域进行优化处理，以使得用户可清楚准确的获取到目标区域的信息。
进一步的，所述将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理的步骤包括：放大所述目标区域或者提高所述目标区域的对比度，以使所述观看者准确获取目标区域的信息。
可以理解的是，具体的适应所述实时眼部状态特征的优化显示处理的方式可以是放大目标区域以及提高目标区域的对比度，其中提高目标区域的对比度是指，提高所确定目标区域中画面的亮区域和暗区域之间亮度的差度，从而使得用户可以清楚看到轮廓或者图形，而优化显示处理的方式还可以是，提高目标区域的亮度等。通过上述方式即可使得用户准确获取目标区域的信息。以上述放大目标区域为例进行说明，如图4所示的电视界面中目标区域优化放大处理效果图，图中分为优化处理前的界面和优化处理后界面，虚线框则为目标区域，目标区域为电视节目的字幕或者题目的显示区域，当判断观看者存在有焦距优化行为时，对目标区域进行放大优化处理，得到优化处理后的界面，此时目标区域文字被放大，观看者可清楚的获取到目标区域的信息。可以理解的是，上述每种处理方式的效果与放大处理相同，均是为了使得观看者可清楚获取目标区域的信息，此处将不再赘述。此外，当所述目标区域存在文字信息时，将所述目标区域的文字信息语音播报。即对于目标区域的文字信息同样也可以使用图像识别技术进行识别，并将识别出的文字进行语音播报。同样可达到让用户准确获取目标区域信息的效果。因此，具体的优化方法可由技术人员自行添加，此处不再赘述。
在本实施例中，通过摄像头获取观看终端的用户的实时眼部状态特征，并通过获取到的实时眼部状态特征判断用户是否存在焦距优化行为，当用户存在焦距优化行为时，则进一步的通过当前界面的聚焦内容确定所述界面的目标区域，再将所述界面中的目标区域进行优化处理，以使得用户可准确获取到目标区域信息。可以理解的是，通过对应眼部状态特征进行捕获，以判断用户是否存在焦距调节时所反馈的生理现象(焦距优化行为)，当存在时判定此时用户无法看清界面所显示的内容，再进一步判断当前界面用户的可能聚焦的内容(如人物、文字或者选定区等)，并将可能聚焦的内容进行优化处理(如放大、提高对比度以及语音播报等)。而且，上述焦距优化行为用户自身被动的反应，因此在用户无需主动反馈的情况下，使得用户可以准确的获取到界面上显示的内容，从而实现用户无感提高观看体验的效果。
参照图3，本发明界面显示方法中的第二实施例，所述界面显示方法包括：
步骤S100，若无法准确获取到所述观看者的实时眼部状态特征，则获取所述观看者的实时体态特征；
可以理解的是，在通常情况下会先基于图像传感器获取观看电视的用户的实时眼部状态特征来判断用户是否存在有焦距优化行为，但也可能会出现一些情况使得第一实施例中预设焦距优化图像识别模型识别不出用户的瞳孔或者眼部肌肉，例如用户佩戴有眼镜，可能会因为光线角度问题对用户的眼部造成遮挡。此时针对眼部的图像识别模型可能可以识别出眼部，但是眼部具体的状态特征无法正常得到，从而影响到判断结果。
当无法准确获取到所述用户的实时眼部状态特征时，则通过图像传感器获取所述用户的实时体态特征。可以理解的是，图像传感器实际上可以同时获取到用户的实时眼部状态特征和用户的实时体态特征，当基于实时眼部状态特征无法判断时，进一步，可通过用户的体态特征进行判断。
步骤S200，基于所述实时体态特征判断所述观看者是否存在焦距优化行为，当判定所述观看者存在焦距优化行为时，执行所述基于终端的当前界面的聚焦内容确定所述界面的目标区域的步骤。
进一步的，所述基于所述实时体态特征判断所述用户是否存在焦距优化行为的步骤包括：基于预设体态图像识别模型判断所述实时体态特征是否存在前倾行为；当所述实时体态特征存在前倾行为并保持了预设时间段后，判定所述观看者存在焦距优化行为。
具体的，通过预设体态图像识别模型对获取到观看电视机的用户体态特征进行判断，判断用户是否存在身体前倾行为，可以理解的是，当用户无法看清界面的内容时，用户会下意识的将身体前倾，以缩短人眼与显示界面之间的距离，达到看清显示内容的目的。因此，同样将用户身体前倾这个行为当做上述焦距优化行为。而预设体态图像识别模型构建过程与第一实施例中的预设焦距优化图像识别模型类似，此处不再赘述。此外，当判断用户存在身体前倾行为时，可进一步确定用户保持身体前倾行为的时间，当用户保持身体前倾行为达到一定时间时(如1s，具体时间技术人员可根据实际情况自行设置)，再判定用户存在焦距优化行为。当判定用户存在焦距优化行为后，继续执行所述基于当前界面的聚焦内容确定所述界面的目标区域的步骤，具体过程可参照第一实施例，此处不再赘述。
此外，在本实施例中，虽然将用户的体态特征作为在眼部状态特征无法准确获取时的备选判断依据，但是需要特别说明的是，对于判断用户是否存在焦距优化行为的特征(瞳孔的大小变化、眼部肌肉变化以及前倾行为)，技术人员可自由组合上述特征的判断逻辑或者判断顺序，如用户存在焦距优化行为的判断规则可以为：当存在用户存在瞳孔的大小变化、眼部肌肉变化以及前倾行为中的任意一种时均可判定用户存在焦距优化行为。
步骤S300，将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理。
进一步的，所述将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理的步骤包括：放大所述目标区域或者提高所述目标区域的对比度，以使所述观看者准确获取目标区域的信息。
在本实施例中，对于观看电视的用户的眼部状态特征较为模糊无法准确判断时，通过用户下意识的前倾行为，判断用户是否存在焦距优化行为。当存在优化行为时，再确定目标区域，并对目标区域进行优化处理。可以理解的是，通过用户下意识的行为判断用户是否可以看清界面内容，当判定用户无法看清时，则对界面显示内容进行优化处理以使得用户可清楚准确的获取目标区域中显示内容，从而提高用户使用体验。
此外，本发明实施例还提供一种界面显示装置，所述界面显示装置包括：
获取模块，用于获取终端的观看者的实时眼部状态特征；
判断模块，用于当基于所述实时眼部状态特征判定所述观看者存在焦距优化行为时，基于终端的当前界面的聚焦内容确定所述当前界面的目标区域；
优化模块，用于将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理。
可选地，所述焦距优化行为包括：瞳孔焦距优化和眼部肌肉焦距优化，所述判断模块还用于：
基于预设焦距优化图像识别模型判断所述实时眼部状态特征是否存在所述瞳孔焦距优化或/和所述眼部肌肉焦距优化；
当所述实时眼部状态特征存在所述瞳孔焦距优化或/和所述眼部肌肉焦距优化中时，判定所述观看者存在焦距优化行为。
可选地，所述聚焦内容包括：聚焦区域和选定区域，所述判断模块还用于：
当所述当前界面播放图像内容时，将所述当前界面中所述聚焦区域作为所述目标区域；
当所述当前界面为控制界面时，将所述当前界面中所述选定区域作为所述目标区域。
可选地，所述判断模块，还用于：
若无法准确获取到所述观看者的实时眼部状态特征，则获取所述观看者的实时体态特征；
基于所述实时体态特征判断所述观看者是否存在焦距优化行为，当判定所述观看者存在焦距优化行为时，执行所述基于终端的当前界面的聚焦内容确定所述界面的目标区域的步骤。
可选地，所述判断模块，还用于：
基于预设体态图像识别模型判断所述实时体态特征是否存在前倾行为；
当所述实时体态特征存在前倾行为并保持了预设时间段后，判定所述观看者存在焦距优化行为。
可选地，所述优化模块，还用于：
放大所述目标区域或者提高所述目标区域的对比度，以使所述观看者准确获取目标区域的信息。
可选地，所述优化模块，还用于：
当所述目标区域存在文字信息时，将所述目标区域的文字信息语音播报。
本发明提供的界面显示装置，采用上述实施例中的界面显示方法，解决当前界面显示过多信息时，由于信息显示不全或者显示不清晰，造成用户使用体验差的技术问题。与现有技术相比，本发明实施例提供的界面显示装置的有益效果与上述实施例提供的界面显示方法的有益效果相同，且该界面显示装置中的其他技术特征与上述实施例方法公开的特征相同，在此不做赘述。
此外，本发明实施例还提供一种界面显示设备，所述界面显示设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的界面显示程序，所述界面显示程序被所述处理器执行时实现如上述的界面显示方法的步骤。
本发明界面显示设备的具体实施方式与上述界面显示方法各实施例基本相同，在此不再赘述。
此外，本发明实施例还提供一种可读存储介质，所述可读存储介质上存储有界面显示程序，所述界面显示程序被处理器执行时实现如上述的界面显示方法的步骤。
本发明介质具体实施方式与上述界面显示方法各实施例基本相同，在此不再赘述。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，电视机，或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种界面显示方法，其特征在于，所述界面显示方法包括以下步骤：
获取终端的观看者的实时眼部状态特征；
当基于所述实时眼部状态特征判定所述观看者存在焦距优化行为时，基于终端的当前界面的聚焦内容确定所述当前界面的目标区域；
将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理。
2.如权利要求1所述的界面显示方法，其特征在于，所述焦距优化行为包括：瞳孔焦距优化和眼部肌肉焦距优化，在所述判定所述观看者存在焦距优化行为的步骤之前包括：
基于预设焦距优化图像识别模型判断所述实时眼部状态特征是否存在所述瞳孔焦距优化或/和所述眼部肌肉焦距优化；
当所述实时眼部状态特征存在所述瞳孔焦距优化或/和所述眼部肌肉焦距优化中时，判定所述观看者存在焦距优化行为。
3.如权利要求1所述的界面显示方法，其特征在于，所述聚焦内容包括：聚焦区域和选定区域，所述基于终端的当前界面的聚焦内容确定所述当前界面的目标区域的步骤包括：
当所述当前界面播放图像内容时，将所述当前界面中所述聚焦区域作为所述目标区域；
当所述当前界面为控制界面时，将所述当前界面中所述选定区域作为所述目标区域。
4.如权利要求1所述的界面显示方法，其特征在于，所述界面显示方法还包括：
若无法准确获取到所述观看者的实时眼部状态特征，则获取所述观看者的实时体态特征；
基于所述实时体态特征判断所述观看者是否存在焦距优化行为，当判定所述观看者存在焦距优化行为时，执行所述基于终端的当前界面的聚焦内容确定所述界面的目标区域的步骤。
5.如权利要求4所述的界面显示方法，其特征在于，所述基于所述实时体态特征判断所述观看者是否存在焦距优化行为的步骤包括：
基于预设体态图像识别模型判断所述实时体态特征是否存在前倾行为；
当所述实时体态特征存在前倾行为并保持了预设时间段后，判定所述观看者存在焦距优化行为。
6.如权利要求1所述的界面显示方法，其特征在于，所述将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理的步骤包括：
放大所述目标区域或者提高所述目标区域的对比度，以使所述观看者准确获取目标区域的信息。
7.如权利要求1所述的界面显示方法，其特征在于，所述将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理的步骤还包括：
当所述目标区域存在文字信息时，将所述目标区域的文字信息语音播报。
8.一种界面显示装置，其特征在于，所述界面显示装置包括：
获取模块，用于获取终端的观看者的实时眼部状态特征；
判断模块，用于当基于所述实时眼部状态特征判定所述观看者存在焦距优化行为时，基于终端的当前界面的聚焦内容确定所述当前界面的目标区域；
优化模块，用于将所述当前界面中的目标区域进行适应所述实时眼部状态特征的优化显示处理。
9.一种界面显示设备，其特征在于，所述界面显示设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的界面显示程序，所述界面显示程序被所述处理器执行时实现如权利要求1至7中任一项所述的界面显示方法的步骤。
10.一种可读存储介质，其特征在于，所述可读存储介质上存储有界面显示程序，所述界面显示程序被处理器执行时实现如权利要求1至7中任一项所述的界面显示方法的步骤。
CN202210461635.6A 2022-04-28 2022-04-28 界面显示方法、装置、设备及可读存储介质 Pending CN114845165A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210461635.6A CN114845165A (zh) 2022-04-28 2022-04-28 界面显示方法、装置、设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210461635.6A CN114845165A (zh) 2022-04-28 2022-04-28 界面显示方法、装置、设备及可读存储介质

Publications (1)

Publication Number Publication Date
CN114845165A true CN114845165A (zh) 2022-08-02

Family

ID=82567147

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210461635.6A Pending CN114845165A (zh) 2022-04-28 2022-04-28 界面显示方法、装置、设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN114845165A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012142869A1 (zh) * 2011-04-20 2012-10-26 中兴通讯股份有限公司 自动调节终端界面显示的方法及装置
CN107065198A (zh) * 2017-06-21 2017-08-18 常州快来信息科技有限公司 头戴显示设备的视觉优化方法
CN108989571A (zh) * 2018-08-15 2018-12-11 浙江大学滨海产业技术研究院 一种针对手机文字阅读的自适应字体调整方法及装置
CN109164555A (zh) * 2018-09-30 2019-01-08 西安蜂语信息科技有限公司 光学设备的调整方法、终端、系统、设备和存储介质
CN110488970A (zh) * 2019-07-03 2019-11-22 努比亚技术有限公司 弧形显示屏的图形显示方法、终端及计算机可读存储介质
CN111459285A (zh) * 2020-04-10 2020-07-28 康佳集团股份有限公司 基于眼控技术的显示设备控制方法、显示设备及存储介质
CN112070031A (zh) * 2020-09-09 2020-12-11 中金育能教育科技集团有限公司 体态检测方法、装置及设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012142869A1 (zh) * 2011-04-20 2012-10-26 中兴通讯股份有限公司 自动调节终端界面显示的方法及装置
CN107065198A (zh) * 2017-06-21 2017-08-18 常州快来信息科技有限公司 头戴显示设备的视觉优化方法
CN108989571A (zh) * 2018-08-15 2018-12-11 浙江大学滨海产业技术研究院 一种针对手机文字阅读的自适应字体调整方法及装置
CN109164555A (zh) * 2018-09-30 2019-01-08 西安蜂语信息科技有限公司 光学设备的调整方法、终端、系统、设备和存储介质
CN110488970A (zh) * 2019-07-03 2019-11-22 努比亚技术有限公司 弧形显示屏的图形显示方法、终端及计算机可读存储介质
CN111459285A (zh) * 2020-04-10 2020-07-28 康佳集团股份有限公司 基于眼控技术的显示设备控制方法、显示设备及存储介质
CN112070031A (zh) * 2020-09-09 2020-12-11 中金育能教育科技集团有限公司 体态检测方法、装置及设备

Similar Documents

Publication Publication Date Title
EP3154270B1 (en) Method and device for adjusting and displaying an image
CN111182205B (zh) 拍摄方法、电子设备及介质
CN110969981B (zh) 屏幕显示参数调节方法及电子设备
CN107484034A (zh) 字幕显示方法、终端及计算机可读存储介质
CN110572706B (zh) 视频截屏方法、终端及计算机可读存储介质
CN112666705A (zh) 一种眼动追踪设备及眼动追踪方法
CN109361874B (zh) 一种拍照方法及终端
CN111970566A (zh) 视频播放方法、装置、电子设备及存储介质
CN110650367A (zh) 视频处理方法、电子设备及介质
CN110572596A (zh) 电视机及其背光控制方法、控制装置和可读存储介质
CN113794934A (zh) 防沉迷引导方法、电视和计算机可读存储介质
CN112788233B (zh) 视频拍摄处理方法和电子设备
CN117032612B (zh) 基于远光成像学习机的互动教学方法、装置、终端及介质
CN113674718A (zh) 显示亮度调整方法、装置及存储介质
CN111610886A (zh) 触控屏幕亮度的调整方法、设备及计算机可读存储介质
CN107820109A (zh) 电视设置方法、系统及计算机可读存储介质
CN114845165A (zh) 界面显示方法、装置、设备及可读存储介质
CN111179860A (zh) 电子设备的背光模式调整方法、电子设备及装置
CN114210045A (zh) 智能护眼方法、装置和计算机可读存储介质
CN113038257B (zh) 音量调节方法、装置、智能电视及计算机可读存储介质
CN114816065A (zh) 屏幕背光的调节方法、虚拟现实设备以及可读存储介质
CN113891002A (zh) 拍摄方法及装置
CN112333541B (zh) 显示终端开关机控制方法、装置、设备及可读存储介质
CN108600797B (zh) 一种信息处理法方法和电子设备
CN106775303B (zh) 一种终端显示内容的调节方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination