CN117412122A - 屏幕显示方法、装置、存储介质及电子设备 - Google Patents
屏幕显示方法、装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN117412122A CN117412122A CN202310035801.0A CN202310035801A CN117412122A CN 117412122 A CN117412122 A CN 117412122A CN 202310035801 A CN202310035801 A CN 202310035801A CN 117412122 A CN117412122 A CN 117412122A
- Authority
- CN
- China
- Prior art keywords
- content
- gazing
- screen
- user
- gaze
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 40
- 238000012545 processing Methods 0.000 claims abstract description 28
- 238000001514 detection method Methods 0.000 claims description 19
- 238000004590 computer program Methods 0.000 claims description 14
- 238000013145 classification model Methods 0.000 claims description 9
- 230000008451 emotion Effects 0.000 claims description 8
- 238000012216 screening Methods 0.000 claims description 6
- 230000006870 function Effects 0.000 description 9
- 210000000887 face Anatomy 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 210000003128 head Anatomy 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 238000013527 convolutional neural network Methods 0.000 description 3
- 238000013135 deep learning Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 210000004087 cornea Anatomy 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
Abstract
本申请公开了一种屏幕显示方法、装置、存储介质及电子设备，涉及物联网技术领域，该方法包括：通过摄像头对屏幕前的用户进行视线追踪，得到所述用户对应的用户视线方向；根据所述用户视线方向，得到所述用户在所述屏幕中的注视点；检测所述注视点对应的注视内容的内容类别；根据所述注视内容的内容类别，得到所述注视内容的显示方式，所述显示方式用于对所述注视内容进行显示处理。本申请可以有效提升屏幕中内容的显示与屏幕前用户的互动性，提升用户体验。
Description
技术领域
本申请涉及物联网技术领域，具体涉及一种屏幕显示方法、装置、存储介质及电子设备。
背景技术
以电视为例的大量显示设备，通常通过屏幕为用户显示内容。目前，屏幕中显示内容的方式，通常是以固定的显示方式对内容进行显示，例如，电视中通常对电视节目以固定的显示方式进行显示。目前，屏幕中内容的显示与屏幕前用户的互动性较差，导致用户体验较差。
发明内容
本申请实施例提供一种方案，可以有效提升屏幕中内容的显示与屏幕前用户的互动性，提升用户体验。
本申请实施例提供以下技术方案：
根据本申请的一个实施例，一种屏幕显示方法，其包括：通过摄像头对屏幕前的用户进行视线追踪，得到所述用户对应的用户视线方向；根据所述用户视线方向，得到所述用户在所述屏幕中的注视点；检测所述注视点对应的注视内容的内容类别；根据所述注视内容的内容类别，得到所述注视内容的显示方式，所述显示方式用于对所述注视内容进行显示处理。
在本申请的一些实施例中，所述根据所述注视内容的内容类别，得到所述注视内容的显示方式，包括：检测所述屏幕前的内容播放环境；根据所述注视内容的内容类别及所述屏幕前的内容播放环境，得到所述注视内容的显示方式。
在本申请的一些实施例中，所述检测所述注视点对应的注视内容的内容类别，包括：提取所述注视点对应的注视内容；将所述注视内容输入内容分类模型进行分类处理，得到所述注视内容的内容类别。
在本申请的一些实施例中，所述用户包括多个，每个所述用户对应一个所述注视点；所述提取所述注视点对应的注视内容，包括：对每个所述用户对应的注视点进行评分处理，得到每个所述注视点的评分；根据每个所述注视点的评分从多个所述注视点中筛选出目标注视点；提取所述目标注视点对应的注视内容。
在本申请的一些实施例中，所述提取所述注视点对应的注视内容，包括：提取以所述注视点为中心的预定大小范围内的屏幕内容，得到所述注视内容。
在本申请的一些实施例中，所述提取所述注视点对应的注视内容，包括：提取以所述注视点为中心的预定大小范围内的屏幕内容；检测所述屏幕播放的内容中所述屏幕内容对应的关联内容；将所述屏幕内容及所述关联内容，作为所述注视内容。
在本申请的一些实施例中，所述检测所述屏幕前的内容播放环境，包括以下方式中至少一种：检测所述屏幕前用户的用户情绪，得到一种所述内容播放环境；检测所述屏幕前用户的年龄及性别，得到一种所述内容播放环境；检测所述屏幕朝向的场所，得到一种所述内容播放环境。
根据本申请的一个实施例，一种屏幕显示装置，所述装置包括：追踪模块，用于通过摄像头对屏幕前的用户进行视线追踪，得到所述用户对应的用户视线方向；注视点确定模块，用于根据所述用户视线方向，得到所述用户在所述屏幕中的注视点；检测模块，用于检测所述注视点对应的注视内容的内容类别；显示处理模块，用于根据所述注视内容的内容类别，得到所述注视内容的显示方式，所述显示方式用于对所述注视内容进行显示处理。
在本申请的一些实施例中，所述显示处理模块，用于：检测所述屏幕前的内容播放环境；根据所述注视内容的内容类别及所述屏幕前的内容播放环境，得到所述注视内容的显示方式。
在本申请的一些实施例中，所述检测模块，用于：提取所述注视点对应的注视内容；将所述注视内容输入内容分类模型进行分类处理，得到所述注视内容的内容类别。
在本申请的一些实施例中，所述用户包括多个，每个所述用户对应一个所述注视点；所述检测模块，用于：对每个所述用户对应的注视点进行评分处理，得到每个所述注视点的评分；根据每个所述注视点的评分从多个所述注视点中筛选出目标注视点；提取所述目标注视点对应的注视内容。
在本申请的一些实施例中，所述检测模块，用于：提取以所述注视点为中心的预定大小范围内的屏幕内容，得到所述注视内容。
在本申请的一些实施例中，所述检测模块，用于：提取以所述注视点为中心的预定大小范围内的屏幕内容；检测所述屏幕播放的内容中所述屏幕内容对应的关联内容；将所述屏幕内容及所述关联内容，作为所述注视内容。
在本申请的一些实施例中，所述显示处理模块，用于实现以下方式中至少一种：检测所述屏幕前用户的用户情绪，得到一种所述内容播放环境；检测所述屏幕前用户的年龄及性别，得到一种所述内容播放环境；检测所述屏幕朝向的场所，得到一种所述内容播放环境。
根据本申请的另一实施例，一种存储介质，其上存储有计算机程序，当所述计算机程序被计算机的处理器执行时，使计算机执行本申请实施例所述的方法。
根据本申请的另一实施例，一种电子设备可以包括：存储器，存储有计算机程序；处理器，读取存储器存储的计算机程序，以执行本申请实施例所述的方法。
根据本申请的另一实施例，一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行本申请实施例所述的各种可选实现方式中提供的方法。
本申请实施例中，通过摄像头对屏幕前的用户进行视线追踪，得到所述用户对应的用户视线方向；根据所述用户视线方向，得到所述用户在所述屏幕中的注视点；检测所述注视点对应的注视内容的内容类别；根据所述注视内容的内容类别，得到所述注视内容的显示方式，所述显示方式用于对所述注视内容进行显示处理。
以这种方式，通过视线追踪屏幕前用户的注视点，进一步，检测注视点对应的注视内容的内容类别，根据内容类别得到注视内容的显示方式，注视内容通常是整个屏幕中的局部内容，可以根据该显示方式对局部的注视内容进行显示调整，有效提升屏幕中内容的显示与屏幕前用户的互动性，提升用户体验。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1示出了根据本申请的一个实施例的屏幕显示方法的流程图。
图2示出了根据本申请的一个实施例的屏幕显示装置的框图。
图3示出了根据本申请的一个实施例的电子设备的框图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
图1示意性示出了根据本申请的一个实施例的屏幕显示方法的流程图。该屏幕显示方法的执行主体可以是任意具有屏幕的设备，例如电视、电脑、手机、智能手表以及家电设备等。
如图1所示，该屏幕显示方法可以包括步骤S110至步骤S140。
步骤S110，通过摄像头对屏幕前的用户进行视线追踪，得到所述用户对应的用户视线方向；步骤S120，根据所述用户视线方向，得到所述用户在所述屏幕中的注视点；步骤S130，检测所述注视点对应的注视内容的内容类别；步骤S140，根据所述注视内容的内容类别，得到所述注视内容的显示方式，所述显示方式用于对所述注视内容进行显示处理。
通过摄像头对屏幕前的用户进行视线追踪，可以利用摄像头获取人的头部、脸部或眼睛图像，再对图像经过分析实现视线定位与追踪，得到用户对应的用户视线方向。具体可以是通过摄像头采集用户的头部图像，对头部图像依次进行图像滤噪、边缘检测、投影法缩小人眼检测区域、瞳孔检测、角膜反射检测与中心定位以及基于头动补偿的视线方向估计，得到用户视线方向。
根据追踪到的用户视线方向，即可定位得到用户的用户视线方向在屏幕中的落点，该落点也即用户在屏幕中的注视点。根据注视点的坐标，可以检测注视点在屏幕显示的内容中对应的注视内容，对注视内容进行分析可以得到该注视内容的内容类别。其中，内容类别可以是人物、动物及车辆类别，也可以是根据实际情况自定义的类别，例如第一类型及第二类型等，不同的内容类别可以对应不同的显示方式。
根据注视内容的内容类别，可以获取内容类别所对应的显示方式，得到注视内容的显示方式，基于该显示方式可以对注视内容进行显示处理，注视内容可以是屏幕中显示内容的局部内容，显示方式可以是放大、缩小、拼接、添加加预定特效等的单种或组合等方式。
以这种方式，基于步骤S110至步骤S140，通过视线追踪屏幕前用户的注视点，进一步，检测注视点对应的注视内容的内容类别，根据内容类别得到注视内容的显示方式，注视内容通常是整个屏幕中的局部内容，可以根据该显示方式对局部的注视内容进行显示调整，有效提升屏幕中内容的显示与屏幕前用户的互动性，提升用户体验。
下面描述图1实施例下进行屏幕显示时，所进行的各步骤下进一步可选的具体实施例。
一种实施例中，步骤S130，所述检测所述注视点对应的注视内容的内容类别，包括：步骤S131，提取所述注视点对应的注视内容；步骤S132，将所述注视内容输入内容分类模型进行分类处理，得到所述注视内容的内容类别。
从屏幕显示的内容中可以提取注视点对应的局部内容，提取的局部内容即注视内容。进一步的，将注视内容输入内容分类模型进行分类处理，得到内容分类模型通过分类处理所输出的注视内容的内容类别。其中，内容分类模型可以是预先训练的基于卷积神经网络的模型。
一种实施例中，步骤S130，所述检测所述注视点对应的注视内容的内容类别，包括：检测注视点对应的注视内容在屏幕中的位置，根据位置得到注视内容的内容类别。注视内容在屏幕中的位置例如左上角区域、中间区域等，不同的位置可以对应不同的预设类别，根据检测的位置对应的预设类别可以作为注视内容的内容类别。
一种实施例中，所述用户包括多个，每个所述用户对应一个所述注视点；所述步骤S131，提取所述注视点对应的注视内容，包括：对每个所述用户对应的注视点进行评分处理，得到每个所述注视点的评分；根据每个所述注视点的评分从多个所述注视点中筛选出目标注视点；提取所述目标注视点对应的注视内容。
对每个用户对应的注视点进行评分处理，得到每个注视点的评分的方式：一种方式中，可以根据每个用户对应的注视点距离屏幕中心的距离进行评分，距离屏幕中心的距离越近，注视点的评分越高。另一种方式中，可以计算注视点之间的距离；根据注视点之间的距离，确定小于预定距离的范围内具有最多相邻的注视点的一个注视点作为中心点；然后，距离该中心点越近的注视点的评分越高。
进一步的，根据每个注视点的评分，可以从多个注视点中筛选出评分高于预定阈值的或者评分最高的一个或多个注视点作为目标注视点。然后可以提取目标注视点对应的注视内容。
一种实施例中，提取目标注视点对应的注视内容，可以包括：提取以目标注视点为中心的预定大小范围内的屏幕内容，得到注视内容。
一种实施例中，提取目标注视点对应的注视内容，进一步可以包括：提取以所述注视点为中心的预定大小范围内的屏幕内容；检测所述屏幕播放的内容中所述屏幕内容对应的关联内容；将所述屏幕内容及所述关联内容，作为所述注视内容。
其中，检测屏幕播放的内容中屏幕内容对应的关联内容的方式，可以是：在屏幕播放的内容对应画面中标定屏幕内容后，将携带标定位置的画面输入内容检测网络，得到屏幕内容对应的关联内容，其中，内容检测网络可以是预先训练的卷积神经网络。
一种实施例中，步骤S131，所述提取所述注视点对应的注视内容，包括：提取以所述注视点为中心的预定大小范围内的屏幕内容，得到所述注视内容。预定大小范围可以根据实际情况设定。
一种实施例中，步骤S131，所述提取所述注视点对应的注视内容，包括：提取以所述注视点为中心的预定大小范围内的屏幕内容；检测所述屏幕播放的内容中所述屏幕内容对应的关联内容；将所述屏幕内容及所述关联内容，作为所述注视内容。
其中，检测所述屏幕播放的内容中所述屏幕内容对应的关联内容的方式，可以是：在屏幕播放的内容对应画面中标定屏幕内容后，将携带标定位置的画面输入内容检测网络，得到屏幕内容对应的关联内容，其中，内容检测网络可以是预先训练的卷积神经网络。
一种实施例中，步骤S140，所述根据所述注视内容的内容类别，得到所述注视内容的显示方式，包括：检测所述屏幕前的内容播放环境；根据所述注视内容的内容类别及所述屏幕前的内容播放环境，得到所述注视内容的显示方式。
其中，检测所述屏幕前的内容播放环境，包括以下方式中至少一种：检测所述屏幕前用户的用户情绪，得到一种所述内容播放环境；检测所述屏幕前用户的年龄及性别，得到一种所述内容播放环境；检测所述屏幕朝向的场所，得到一种所述内容播放环境。也即内容播放环境可以包括屏幕前用户的用户情绪、屏幕前用户的年龄及性别、屏幕朝向的场所中至少一种。其中，通过将用户的脸部图像输入预先训练的属性分析模型，可以得到用户的用户情绪或屏幕前用户的年龄及性别，属性分析模型可以是基于深度学习的模型。通过将屏幕前图像输入预先训练的场所分析模型，可以得到屏幕朝向的场所，场所分析模型可以是基于深度学习的模型。
根据注视内容的内容类别及屏幕前的内容播放环境，可以从预设的显示方式数据中查询得到内容类别及内容播放环境均对应的预设显示方式，作为注视内容的显示方式。
一种实施例中，步骤S140，所述根据所述注视内容的内容类别，得到所述注视内容的显示方式，包括：从预设的显示方式数据中查询得到内容类别对应的预设显示方式，作为注视内容的显示方式。
为便于更好的实施本申请实施例提供的屏幕显示方法，本申请实施例还提供一种基于上述屏幕显示方法的屏幕显示装置。其中名词的含义与上述屏幕显示方法中相同，具体实现细节可以参考方法实施例中的说明。图2示出了根据本申请的一个实施例的屏幕显示装置的框图。
如图2所示，屏幕显示装置200中可以包括：追踪模块210可以用于通过摄像头对屏幕前的用户进行视线追踪，得到所述用户对应的用户视线方向；注视点确定模块220可以用于根据所述用户视线方向，得到所述用户在所述屏幕中的注视点；检测模块230可以用于检测所述注视点对应的注视内容的内容类别；显示处理模块240可以用于根据所述注视内容的内容类别，得到所述注视内容的显示方式，所述显示方式用于对所述注视内容进行显示处理。
在本申请的一些实施例中，所述显示处理模块，用于：检测所述屏幕前的内容播放环境；根据所述注视内容的内容类别及所述屏幕前的内容播放环境，得到所述注视内容的显示方式。
在本申请的一些实施例中，所述检测模块，用于：提取所述注视点对应的注视内容；将所述注视内容输入内容分类模型进行分类处理，得到所述注视内容的内容类别。
在本申请的一些实施例中，所述用户包括多个，每个所述用户对应一个所述注视点；所述检测模块，用于：对每个所述用户对应的注视点进行评分处理，得到每个所述注视点的评分；根据每个所述注视点的评分从多个所述注视点中筛选出目标注视点；提取所述目标注视点对应的注视内容。
在本申请的一些实施例中，所述检测模块，用于：提取以所述注视点为中心的预定大小范围内的屏幕内容，得到所述注视内容。
在本申请的一些实施例中，所述检测模块，用于：提取以所述注视点为中心的预定大小范围内的屏幕内容；检测所述屏幕播放的内容中所述屏幕内容对应的关联内容；将所述屏幕内容及所述关联内容，作为所述注视内容。
在本申请的一些实施例中，所述显示处理模块，用于实现以下方式中至少一种：检测所述屏幕前用户的用户情绪，得到一种所述内容播放环境；检测所述屏幕前用户的年龄及性别，得到一种所述内容播放环境；检测所述屏幕朝向的场所，得到一种所述内容播放环境。
应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本申请的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
此外，本申请实施例还提供一种电子设备，该电子设备可以为终端或者服务器，如图3所示，其示出了本申请实施例所涉及的电子设备的结构示意图，具体来讲：
该电子设备可以包括一个或者一个以上处理核心的处理器301、一个或一个以上计算机可读存储介质的存储器302、电源303和输入单元304等部件。本领域技术人员可以理解，图3中示出的电子设备结构并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：
处理器301是该电子设备的控制中心，利用各种接口和线路连接整个计算机设备的各个部分，通过运行或执行存储在存储器302内的软件程序和/或模块，以及调用存储在存储器302内的数据，执行计算机设备的各种功能和处理数据，从而对电子设备进行整体监控。可选的，处理器301可包括一个或多个处理核心；优选的，处理器301可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户页面和应用程序等，调制解调处理器主要处理无线通讯。可以理解的是，上述调制解调处理器也可以不集成到处理器301中。
存储器302可用于存储软件程序以及模块，处理器301通过运行存储在存储器302的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器302可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据计算机设备的使用所创建的数据等。此外，存储器302可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器302还可以包括存储器控制器，以提供处理器301对存储器302的访问。
电子设备还包括给各个部件供电的电源303，优选的，电源303可以通过电源管理系统与处理器301逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源303还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该电子设备还可包括输入单元304，该输入单元304可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
尽管未示出，电子设备还可以包括显示单元等，在此不再赘述。具体在本实施例中，电子设备中的处理器301会按照如下的指令，将一个或一个以上的计算机程序的进程对应的可执行文件加载到存储器302中，并由处理器301来运行存储在存储器302中的计算机程序，从而实现本申请前述实施例中各种功能，如处理器301可以执行下述步骤：
通过摄像头对屏幕前的用户进行视线追踪，得到所述用户对应的用户视线方向；根据所述用户视线方向，得到所述用户在所述屏幕中的注视点；检测所述注视点对应的注视内容的内容类别；根据所述注视内容的内容类别，得到所述注视内容的显示方式，所述显示方式用于对所述注视内容进行显示处理。
在本申请的一些实施例中，所述根据所述注视内容的内容类别，得到所述注视内容的显示方式，包括：检测所述屏幕前的内容播放环境；根据所述注视内容的内容类别及所述屏幕前的内容播放环境，得到所述注视内容的显示方式。
在本申请的一些实施例中，所述检测所述注视点对应的注视内容的内容类别，包括：提取所述注视点对应的注视内容；将所述注视内容输入内容分类模型进行分类处理，得到所述注视内容的内容类别。
在本申请的一些实施例中，所述用户包括多个，每个所述用户对应一个所述注视点；所述提取所述注视点对应的注视内容，包括：对每个所述用户对应的注视点进行评分处理，得到每个所述注视点的评分；根据每个所述注视点的评分从多个所述注视点中筛选出目标注视点；提取所述目标注视点对应的注视内容。
在本申请的一些实施例中，所述提取所述注视点对应的注视内容，包括：提取以所述注视点为中心的预定大小范围内的屏幕内容，得到所述注视内容。
在本申请的一些实施例中，所述提取所述注视点对应的注视内容，包括：提取以所述注视点为中心的预定大小范围内的屏幕内容；检测所述屏幕播放的内容中所述屏幕内容对应的关联内容；将所述屏幕内容及所述关联内容，作为所述注视内容。
在本申请的一些实施例中，所述检测所述屏幕前的内容播放环境，包括以下方式中至少一种：检测所述屏幕前用户的用户情绪，得到一种所述内容播放环境；检测所述屏幕前用户的年龄及性别，得到一种所述内容播放环境；检测所述屏幕朝向的场所，得到一种所述内容播放环境。
本领域普通技术人员可以理解，上述实施例的各种方法中的全部或部分步骤可以通过计算机程序来完成，或通过计算机程序控制相关的硬件来完成，该计算机程序可以存储于一计算机可读存储介质中，并由处理器进行加载和执行。
为此，本申请实施例还提供一种存储介质，其中存储有计算机程序，该计算机程序能够被处理器进行加载，以执行本申请实施例所提供的任一种方法中的步骤。
其中，该存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，Random Access Memory)、磁盘或光盘等。
由于该存储介质中所存储的计算机程序，可以执行本申请实施例所提供的任一种方法中的步骤，因此，可以实现本申请实施例所提供的方法所能实现的有益效果，详见前面的实施例，在此不再赘述。
本领域技术人员在考虑说明书及实践这里公开的实施方式后，将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。
应当理解的是，本申请并不局限于上面已经描述并在附图中示出的实施例，而可以在不脱离其范围的情况下进行各种修改和改变。
Claims (10)
1.一种屏幕显示方法，其特征在于，包括：
通过摄像头对屏幕前的用户进行视线追踪，得到所述用户对应的用户视线方向；
根据所述用户视线方向，得到所述用户在所述屏幕中的注视点；
检测所述注视点对应的注视内容的内容类别；
根据所述注视内容的内容类别，得到所述注视内容的显示方式，所述显示方式用于对所述注视内容进行显示处理。
2.根据权利要求1所述的方法，其特征在于，所述根据所述注视内容的内容类别，得到所述注视内容的显示方式，包括：
检测所述屏幕前的内容播放环境；
根据所述注视内容的内容类别及所述屏幕前的内容播放环境，得到所述注视内容的显示方式。
3.根据权利要求1所述的方法，其特征在于，所述检测所述注视点对应的注视内容的内容类别，包括：
提取所述注视点对应的注视内容；
将所述注视内容输入内容分类模型进行分类处理，得到所述注视内容的内容类别。
4.根据权利要求3所述的方法，其特征在于，所述用户包括多个，每个所述用户对应一个所述注视点；所述提取所述注视点对应的注视内容，包括：
对每个所述用户对应的注视点进行评分处理，得到每个所述注视点的评分；
根据每个所述注视点的评分从多个所述注视点中筛选出目标注视点；
提取所述目标注视点对应的注视内容。
5.根据权利要求3所述的方法，其特征在于，所述提取所述注视点对应的注视内容，包括：
提取以所述注视点为中心的预定大小范围内的屏幕内容，得到所述注视内容。
6.根据权利要求3所述的方法，其特征在于，所述提取所述注视点对应的注视内容，包括：
提取以所述注视点为中心的预定大小范围内的屏幕内容；
检测所述屏幕播放的内容中所述屏幕内容对应的关联内容；
将所述屏幕内容及所述关联内容，作为所述注视内容。
7.根据权利要求1所述的方法，其特征在于，所述检测所述屏幕前的内容播放环境，包括以下方式中至少一种：
检测所述屏幕前用户的用户情绪，得到一种所述内容播放环境；
检测所述屏幕前用户的年龄及性别，得到一种所述内容播放环境；
检测所述屏幕朝向的场所，得到一种所述内容播放环境。
8.一种屏幕显示装置，其特征在于，包括：
追踪模块，用于通过摄像头对屏幕前的用户进行视线追踪，得到所述用户对应的用户视线方向；
注视点确定模块，用于根据所述用户视线方向，得到所述用户在所述屏幕中的注视点；
检测模块，用于检测所述注视点对应的注视内容的内容类别；
显示处理模块，用于根据所述注视内容的内容类别，得到所述注视内容的显示方式，所述显示方式用于对所述注视内容进行显示处理。
9.一种存储介质，其特征在于，其上存储有计算机程序，当所述计算机程序被计算机的处理器执行时，使计算机执行权利要求1至7任一项所述的方法。
10.一种电子设备，其特征在于，包括：存储器，存储有计算机程序；处理器，读取存储器存储的计算机程序，以执行权利要求1至7任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310035801.0A CN117412122A (zh) | 2023-01-10 | 2023-01-10 | 屏幕显示方法、装置、存储介质及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310035801.0A CN117412122A (zh) | 2023-01-10 | 2023-01-10 | 屏幕显示方法、装置、存储介质及电子设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN117412122A true CN117412122A (zh) | 2024-01-16 |
Family
ID=89495004
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310035801.0A Pending CN117412122A (zh) | 2023-01-10 | 2023-01-10 | 屏幕显示方法、装置、存储介质及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117412122A (zh) |
-
2023
- 2023-01-10 CN CN202310035801.0A patent/CN117412122A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107300967B (zh) | 一种智能导航方法、装置、存储介质和终端 | |
| US10318797B2 (en) | Image processing apparatus and image processing method | |
| CN106529406B (zh) | 一种获取视频摘要图像的方法和装置 | |
| CN108965981B (zh) | 视频播放方法、装置、存储介质及电子设备 | |
| KR20190030140A (ko) | 시선 추적 방법 및 이를 수행하기 위한 사용자 단말 | |
| CN110971948A (zh) | 一种智能电视的控制方法、装置、智能电视及介质 | |
| WO2022063270A1 (zh) | 人脸图像的属性特征的识别方法、装置及电子设备 | |
| US11800975B2 (en) | Eye fatigue prediction based on calculated blood vessel density score | |
| CN116909408B (zh) | 一种基于mr智能眼镜的内容交互方法 | |
| CN114257824A (zh) | 直播显示方法、装置、存储介质及计算机设备 | |
| CN115471439A (zh) | 显示面板缺陷的识别方法、装置、电子设备及存储介质 | |
| CN117412122A (zh) | 屏幕显示方法、装置、存储介质及电子设备 | |
| CN113495616A (zh) | 终端显示控制方法、终端以及计算机可读存储介质 | |
| CN111610886A (zh) | 触控屏幕亮度的调整方法、设备及计算机可读存储介质 | |
| CN110719367A (zh) | 一种云手机好友推荐方法、装置、设备及存储介质 | |
| CN113591550B (zh) | 一种个人喜好自动检测模型构建方法、装置、设备及介质 | |
| CN115116088A (zh) | 近视预测方法、装置、存储介质和程序产品 | |
| CN109934082B (zh) | 一种基于头像识别的分组方法及装置 | |
| CN113506260A (zh) | 一种人脸图像质量评估方法、装置、电子设备及存储介质 | |
| CN111090738A (zh) | 一种基于双屏的拍照搜题方法及电子设备 | |
| CN113326829B (zh) | 视频中手势的识别方法、装置、可读存储介质及电子设备 | |
| CN114356088B (zh) | 一种观看者跟踪方法、装置、电子设备及存储介质 | |
| CN117911262A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
| CN109432779B (zh) | 难度调整方法、装置、电子设备及计算机可读存储介质 | |
| Patel et al. | A mobile vision testing application based on dynamic distance determination from the human corneal limbus |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |