CN115866292A - 服务器、显示设备及截图识别方法 - Google Patents

Abstract

本申请提供了一种服务器、显示设备及截图识别方法，服务器被配置为：接收显示设备的截图识别请求，截图识别请求包括待识别图片；响应于截图识别请求，对待识别图片进行人脸识别，以确定人物名字；根据人物名字得到识别出的目标人物的人物类型，其中，人物类型表征人物名字从事的职业领域；在人物类型为第一人物类型时，反馈人物类型以及对应人物名字的第一人物信息给显示设备；在人物类型为第二人物类型时，反馈人物类型以及对应人物名字的第二人物信息给显示设备。本申请通过将显示设备与服务器进行交互，使得显示设备可自动按人物类型显示人物的识别结果，提升了显示设备的用户体验。

Description

服务器、显示设备及截图识别方法

技术领域

本申请涉及显示设备技术领域，尤其涉及一种服务器、显示设备及截图识别方法。

背景技术

用户在观看电视时，电视上可能出现该用户不认识的人物。例如，用户在媒资推荐页上选择待观看的媒资，媒资推荐页的媒资海报上可能有用户不认识的人物；用户在观看视频时，视频播放界面可能有用户不认识的人物。为了解这些人物的信息，用户可询问他人或查看视频的演职员表，然而，他人可能不了解这些人物的信息，通过演职员表查找人物信息也较为繁琐，并且，媒资推荐页和部分视频没有对应的演职员表，因此，通过上述方法难以方便地得到图片中的人物信息。

发明内容

为解决显示设备上的人物识别的技术问题，本申请提供了一种服务器、显示设备及截图识别方法。

第一方面，本申请提供了一种服务器，该服务器被配置为：

接收显示设备的截图识别请求，所述截图识别请求包括待识别图片；

响应于所述截图识别请求，对所述待识别图片进行人脸识别，以确定人物名字；

根据所述人物名字得到识别出的目标人物的人物类型，其中，所述人物类型表征所述人物名字从事的职业领域；

在所述人物类型为第一人物类型时，反馈所述人物类型以及对应所述人物名字的第一人物信息给显示设备，其中，所述第一人物信息包含第一项目参数不包含第二项目参数，所述第一项目参数为对应所述第一人物类型的职业领域的信息的项目参数；

在所述人物类型为第二人物类型时，反馈所述人物类型以及对应所述人物名字的第二人物信息给显示设备，其中，所述第二人物信息包含第二项目参数不包含第一项目参数，所述第二项目参数为对应所述第二人物类型的职业领域的信息的项目参数。

第二方面，本申请提供了一种显示设备，该显示设备包括：

显示器，用于呈现用户界面；

控制器，与所述显示器连接，所述控制器被配置为：

接收输入的截屏操作；

响应于所述截屏操作，对所述显示器的显示界面进行截屏，得到待识别图片，生成包含所述待识别图片的截图识别请求，将所述截图识别请求发送给服务器；

接收来自所述服务器的识别结果，所述识别结果包括识别出的目标人物的人物类型和人物信息；

根据所述人物类型筛选用于展示所述人物信息的信息模板；

根据所述人物信息中的人物头像生成并在当前界面上展示头像控件，将所述人物信息与筛选出的信息模板进行组合，生成人物详情界面，其中，所述头像控件被配置为响应于触发时跳转至所述人物详情界面。

第三方面，本申请提供了一种截图识别方法，该方法包括：

接收显示设备的截图识别请求，所述截图识别请求包括待识别图片；

响应于所述截图识别请求，对所述待识别图片进行人脸识别，以确定人物名字；

根据所述人物名字得到识别出的目标人物的人物类型，其中，所述人物类型表征所述人物名字从事的职业领域；

在所述人物类型为第一人物类型时，反馈所述人物类型以及对应所述人物名字的第一人物信息给显示设备，其中，所述第一人物信息包含第一项目参数不包含第二项目参数，所述第一项目参数为对应所述第一人物类型的职业领域的信息的项目参数；

在所述人物类型为第二人物类型时，反馈所述人物类型以及对应所述人物名字的第二人物信息给显示设备，其中，所述第二人物信息包含第二项目参数不包含第一项目参数，所述第二项目参数为对应所述第二人物类型的职业领域的信息的项目参数。

本申请提供的服务器、显示设备及截图识别方法的有益效果包括：

本申请实施例的显示设备具有截图功能，显示设备将截图得到的图片发送到服务器进行人物识别，使用户在显示设备上截图后，显示设备可自动显示图片上识别出的人物，不需要用户自己检索图片上的人物信息；进一步的，服务器发送的人物信息中，按照人物类型不同，表征职业领域的项目参数也不同，使显示设备可根据各人物类型，介绍侧重点不同的人物信息，使得人物介绍贴合人物类型，提升了用户的观看体验。

附图说明

为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1中示例性示出了根据一些实施例的显示设备与控制装置之间操作场景的示意图；

图2中示例性示出了根据一些实施例的控制装置100的硬件配置框图；

图3中示例性示出了根据一些实施例的显示设备200的硬件配置框图；

图4中示例性示出了根据一些实施例的显示设备200中软件配置示意图；

图5中示例性示出了根据一些实施例的视频点播程序的界面示意图；

图6中示例性示出了根据一些实施例的截图识别方法的流程示意图；

图7中示例性示出了根据一些实施例的截图识别过程的交互时序示意图；

图8示例性示出了根据一些实施例的截图识别结果界面的示意图；

图9中示例性示出了根据一些实施例的影视明星的详情界面的示意图；

图10中示例性示出了根据一些实施例的体育明星的详情界面的示意图。

具体实施方式

为便于对申请的技术方案进行，以下首先在对本申请所涉及到的一些概念进行说明。

为使本申请的目的和实施方式更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施方式进行清楚、完整地描述，显然，描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。

需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。

本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。

术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。

术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。

图1为根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示，用户可通过智能设备300或控制装置100操作显示设备200。

在一些实施例中，控制装置100可以是遥控器，遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信，及其他短距离通信方式，通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令，来控制显示设备200。

在一些实施例中，也可以使用智能设备300(如移动终端、平板电脑、计算机、笔记本电脑等)以控制显示设备200。例如，使用在智能设备上运行的应用程序控制显示设备200。

在一些实施例中，显示设备200还可以采用除了控制装置100和智能设备300之外的方式进行控制，例如，可以通过显示设备200设备内部配置的获取语音指令的模块直接接收用户的语音指令控制，也可以通过显示设备200设备外部设置的语音控制设备来接收用户的语音指令控制。

在一些实施例中，显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群，也可以是多个集群，可以包括一类或多类服务器。

图2示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示，控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起用用户与显示设备200之间交互中介作用。

图3示出了根据示例性实施例中显示设备200的硬件配置框图。

在一些实施例中，显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。

在一些实施例中控制器包括处理器，视频处理器，音频处理器，图形处理器，RAM，ROM，用于输入/输出的第一接口至第n接口。

在一些实施例中，显示器260包括用于呈现画面的显示屏组件，以及驱动图像显示的驱动组件，用于接收源自控制器输出的图像信号，进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控UI界面。

在一些实施例中，显示器260可为液晶显示器、OLED显示器、以及投影显示器，还可以为一种投影装置和投影屏幕。

在一些实施例中，通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如：通信器可以包括Wifi模块，蓝牙模块，有线以太网模块等其他网络通信协议芯片或近场通信协议芯片，以及红外接收器中的至少一种。显示设备200可以通过通信器220与外部控制设备100或服务器400建立控制信号和数据信号的发送和接收。

在一些实施例中，用户接口，可用于接收控制装置100(如：红外遥控器等)的控制信号。

在一些实施例中，检测器230用于采集外部环境或与外部交互的信号。例如，检测器230包括光接收器，用于采集环境光线强度的传感器；或者，检测器230包括图像采集器，如摄像头，可以用于采集外部环境场景、用户的属性或用户交互手势，再或者，检测器230包括声音采集器，如麦克风等，用于接收外部声音。

在一些实施例中，外部装置接口240可以包括但不限于如下：高清多媒体接口接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。

在一些实施例中，调谐解调器210通过有线或无线接收方式接收广播电视信号，以及从多个无线或有线广播电视信号中解调出音视频信号，如以及EPG数据信号。

在一些实施例中，控制器250和调谐解调器210可以位于不同的分体设备中，即调谐解调器210也可在控制器250所在的主体设备的外置设备中，如外置机顶盒等。

在一些实施例中，控制器250，通过存储在存储器上中各种软件控制程序，来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如：响应于接收到用于选择在显示器260上显示UI对象的用户命令，控制器250便可以执行与由用户命令选择的对象有关的操作。

在一些实施例中，所述对象可以是可选对象中的任何一个，例如超链接、图标或其他可操作的控件。与所选择的对象有关操作有：显示连接到超链接页面、文档、图像等操作，或者执行与所述图标相对应程序的操作。

在一些实施例中控制器包括中央处理器(Central Processing Unit，CPU)，视频处理器，音频处理器，图形处理器(Graphics Processing Unit，GPU)，RAM Random AccessMemory，RAM)，ROM(Read-Only Memory,ROM)，用于输入/输出的第一接口至第n接口，通信总线(Bus)等中的至少一种。

CPU处理器。用于执行存储在存储器中操作系统和应用程序指令，以及根据接收外部输入的各种交互指令，来执行各种应用程序、数据和内容，以便最终显示和播放各种音视频内容。CPU处理器，可以包括多个处理器。如，包括一个主处理器以及一个或多个子处理器。

在一些实施例中，图形处理器，用于产生各种图形对象，如：图标、操作菜单、以及用户输入指令显示图形等。图形处理器包括运算器，通过接收用户输入各种交互指令进行运算，根据显示属性显示各种对象；还包括渲染器，对基于运算器得到的各种对象，进行渲染，上述渲染后的对象用于显示在显示器上。

在一些实施例中，视频处理器，用于将接收外部视频信号，根据输入信号的标准编解码协议，进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频处理，可得到直接可显示设备200上显示或播放的信号。

在一些实施例中，视频处理器，包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。其中，解复用模块，用于对输入音视频数据流进行解复用处理。视频解码模块，用于对解复用后的视频信号进行处理，包括解码和缩放处理等。图像合成模块，如图像合成器，其用于将图形生成器根据用户输入或自身生成的GUI信号，与缩放处理后视频图像进行叠加混合处理，以生成可供显示的图像信号。帧率转换模块，用于对转换输入视频帧率。显示格式化模块，用于将接收帧率转换后视频输出信号，改变信号以符合显示格式的信号，如输出RGB数据信号。

在一些实施例中，音频处理器，用于接收外部的音频信号，根据输入信号的标准编解码协议，进行解压缩和解码，以及降噪、数模转换、和放大处理等处理，得到可以在扬声器中播放的声音信号。

在一些实施例中，用户可在显示器260上显示的图形用户界面(GUI)输入用户命令，则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者，用户可通过输入特定的声音或手势进行输入用户命令，则用户输入接口通过传感器识别出声音或手势，来接收用户输入命令。

在一些实施例中，“用户界面”，是应用程序或操作系统与用户之间进行交互和信息交换的介质接口，它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface，GUI)，是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素，其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。

在一些实施例中，显示设备的系统可以包括内核(Kernel)、命令解析器(shell)、文件系统和应用程序。内核、shell和文件系统一起组成了基本的操作系统结构，它们让用户可以管理文件、运行程序并使用系统。上电后，内核启动，激活内核空间，抽象硬件、初始化硬件参数等，运行并维护虚拟内存、调度器、信号及进程间通信(IPC)。内核启动后，再加载Shell和用户应用程序。应用程序在启动后被编译成机器码，形成一个进程。

显示设备的系统可以包括内核(Kernel)、命令解析器(shell)、文件系统和应用程序。内核、shell和文件系统一起组成了基本的操作系统结构，它们让用户可以管理文件、运行程序并使用系统。上电后，内核启动，激活内核空间，抽象硬件、初始化硬件参数等，运行并维护虚拟内存、调度器、信号及进程间通信(IPC)。内核启动后，再加载Shell和用户应用程序。应用程序在启动后被编译成机器码，形成一个进程。

参见图4，在一些实施例中，将系统分为四层，从上至下分别为应用程序(Applications)层(简称“应用层”)，应用程序框架(Application Framework)层(简称“框架层”)，安卓运行时(Android runtime)和系统库层(简称“系统运行库层”)，以及内核层。

在一些实施例中，应用程序层中运行有至少一个应用程序，这些应用程序可以是操作系统自带的窗口(Window)程序、系统设置程序或时钟程序等；也可以是第三方开发者所开发的应用程序。在具体实施时，应用程序层中的应用程序包不限于以上举例。

框架层为应用程序提供应用编程接口(application programming interface，API)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心，这个中心决定让应用层中的应用程序做出动作。应用程序通过API接口，可在执行中访问系统中的资源和取得系统的服务。

如图4所示，本申请实施例中应用程序框架层包括管理器(Managers)，内容提供者(Content Provider)等，其中管理器包括以下模块中的至少一个：活动管理器(ActivityManager)用与和系统中正在运行的所有活动进行交互；位置管理器(Location Manager)用于给系统服务或应用提供了系统位置服务的访问；文件包管理器(Package Manager)用于检索当前安装在设备上的应用程序包相关的各种信息；通知管理器(NotificationManager)用于控制通知消息的显示和清除；窗口管理器(Window Manager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。

在一些实施例中，活动管理器用于管理各个应用程序的生命周期以及通常的导航回退功能，比如控制应用程序的退出、打开、后退等。窗口管理器用于管理所有的窗口程序，比如获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕，控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。

在一些实施例中，系统运行库层为上层即框架层提供支撑，当框架层被使用时，安卓操作系统会运行系统运行库层中包含的C/C++库以实现框架层要实现的功能。

在一些实施例中，内核层是硬件和软件之间的层。如图4所示，内核层至少包含以下驱动中的至少一种：音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器，温度传感器，压力传感器等)、以及电源驱动等。

在一些实施例中的硬件或软件架构可以基于上述实施例中的介绍，在一些实施例中可以是基于相近的其他硬件或软件架构，可以实现本申请的技术方案即可。

在一些实施例中，显示设备启动后可以直接进入上次选择的信号源的显示界面，或者信号源选择界面，其中信号源可以是预置的视频点播程序，还可以是HDMI接口，直播电视接口等中的至少一种，用户选择不同的信号源后，显示器可以显示从不同信号源获得的内容。

在一些实施例中，显示设备启动后可以直接进入预置的视频点播程序的界面，参见图5，该视频点播程序的界面可显示媒资1-媒资9的媒资海报，当然，若用户将当前页面向下翻，还可看到更多媒资的媒资海报。每个媒资海报为一个媒资控件，用户点击该媒资控件后，可进入该媒资控件对应媒资的媒资详情页或视频播放界面。

在一些实施例中，媒资海报、视频播放界面或其他界面可能会有用户不认识的人物图像。

在一些实施例中，为方便用户获取当前界面的人物信息，本申请提供了一种通过截图识别显示设备显示的人物的技术方案，以下为该技术方案的示例实施方式。

在一些实施例中，显示设备的遥控器上可设置有截图键，用户按压截屏键后，遥控器可向显示设备发送截图键的触发信号。

在一些实施例中，显示设备接收到截图键的触发信号后，可获取当前界面的界面数据，生成待识别图片，然后生成包含该待识别图片的截图识别请求，将该截图识别请求发送给服务器。

在一些实施例中，显示设备支持语音控制，用户也可通过语音命令控制电视进行截图。

在一些实施例中，若显示设备的当前界面有截图控件，用户触发该截图控件，显示设备可撤销截图控件的显示，然后对不包含截图控件的界面进行截屏。

在一些实施例中，服务器对该截图识别请求的处理可参见图6，为根据一些实施例的截图识别方法的流程示意图，如图6所示，该截图识别方法可包括如下步骤：

步骤S110：接收显示设备的截图识别请求，截图识别请求包括待识别图片。

在一些实施例中，服务器接收到截图识别请求后，从截图识别请求中提取出待识别图片。

步骤S120：响应于所述截图识别请求，对所述待识别图片进行人脸识别，以确定人物名字。

在一些实施例中，服务器可预先训练有人脸识别模型，该人脸识别模型可通过人脸识别算法实现。该人脸识别模型被训练为接收到一张图片后，可输出该图片中人物的人物名字。

在一些实施例中，人脸识别模型对待识别图片中的每个人物进行特征提取，将提取出的特征与人脸信息数据库中的每个人物的特征进行匹配，相同的特征越多，则匹配度越高。当待识别图片中的一个人物A与数据库中的某个人物B的匹配度超过预设阈值时，则确定人物B为人物A的候选人物，将数据库中的全部人物均与人物A比对完后，从候选人物中选出匹配度最高且超过预设阈值的人物，将其确定为人物A对应的目标人物，然后继续处理待识别图片中的下一个人物；若人物A与人脸信息数据库中的任何人物都不匹配，则继续处理待识别图片中的下一个人物。当将待识别图片中的全部人物都处理完毕后，可得到待识别图片的全部目标人物。其中，人脸数据库为人脸识别算法的数据库，该数据库内包括多个人脸的特征。

在一些实施例中，服务器识别出的目标人物可包括人物C和人物D。

在一些实施例中，人脸识别模型识还可被训练为输出目标人物的坐标区域，该坐标区域可为确定人脸的矩形框的坐标区域。

步骤S130：根据所述人物名字得到识别出的目标人物的人物类型，其中，所述人物类型表征所述人物名字从事的职业领域。

在一些实施例中，可通过人脸识别模型仅识别出待识别图片中的人物名字，再查询预先设置的人物分类表来查找每个人物名字对应的人物类型。示例性的，人物类型可包括影视明星、体育明星、主持人、科学家等按照职业划分的类型。在一些实施例中，人物分类表存储有人物名称和人物类型的对应关系。

在一些实施例中，人脸比对还可以确定对应目标人脸的标识，然后根据人脸的标识在人物分类表来查找每个人物名字对应的人物类型，其中，人物分类表存储有标识和人物类型的对应关系。此时人脸的标识，可以只包括人物名称，还可以包括人物名称及唯一标识。通过在人物分类表中插入唯一标识，可以避免人物重名带来的问题。

在一些实施例中，由于人物名称存在重名的现象，服务器可以根据目标人脸的表述信息来确定和待比对的人脸相符的目标人脸。目标人脸的表述信息中包括人物类型的信息。其中目标人脸信息和人物类型之间的映射是预先建立的，这样通过目标确定人物的名称和人物的类型会比较精准。

在一些实施例中，一些人物具有多种职业，可预先按照权重计算人物类型。其中，示例性的，该权重可根据从业年限确定，例如，人物C，既是演员，也是歌手，当演员的时间较当歌手的时间长，可确定其人物类型为演员。该权重计算方法仅为一种示例方法，实际实施中，运营人员可预先根据其他因素计算用于确定人物类型的权重，例如，根据人物在不同领域的知名度、影响力等因素计算权重。

在一些实施例中，人物类型还可以采用其他的分类标准来进行人物的区分，例如：真实人物和虚拟人物。男性和女性，成年人和儿童等。

在一些实施例中，人脸识别模型也可调用人物分类表，在得到人物名字后，查询人物类型，然后输出识别出的每个人物的人物名字和人物类型。在一些实施例中，人物C的人物类型是影视明星，人物D的人物类型是体育明星。

步骤S140：在所述人物类型为第一人物类型时，反馈所述人物类型以及对应所述人物名字的第一人物信息给显示设备，其中，所述第一人物信息包含第一项目参数不包含第二项目参数，所述第一项目参数为对应所述第一人物类型的职业领域的信息的项目参数。

在一些实施例中，显示设备按照信息模板显示每个目标人物的人物信息，信息模板与人物类型一一对应，不同人物类型的信息模板所需要填充的人物信息不同。

在一些实施例中，在人物信息库中，每个人物存储了一些信息，服务器只需在人物信息数据库的查询接口输入人物名字，可获取该人物的全部信息。

示例性的，在人物信息库中，每个人物名字对应的全部信息包括第一项目参数、第二项目参数、第三项目参数、…、第N项目参数，其中，N大于3，第一项目参数为对应第一人物类型的职业领域的信息的项目参数，第二项目参数为对应第二人物类型的职业领域的信息的项目参数，第三项目参数为对应第三人物类型的职业领域的信息的项目参数，…，第N项目参数为对应第N人物类型的职业领域的信息的项目参数。第一人物类型为影视明星，第二人物类型为体育明星，第三人物类型为主持人，……，第N人物类型为科学家。

示例性的，每个项目参数可包括多个子参数，分别对应不同类型的信息。第一项目参数可包括第一子参数、第二子参数和第三子参数，第一子参数对应的信息为人物头像，第二子参数对应的信息为人物介绍，第三子参数对应的信息为作品介绍；第二项目参数可包括第四子参数、第五子参数和第六子参数，第四子参数对应的信息为人物头像，第五子参数对应的信息为人物介绍，第三子参数对应的信息为技术风格。

在一些实施例中，第一项目参数、第二项目参数、第三项目参数、…、第N项目参数可用不同的字段进行区分。例如，第一项目参数对应的字段可为“影视”，第二项目参数对应的字段可为“体育”。

在一些实施例中，第一子参数、第二子参数等子参数也可用字段进行区分。例如，第一子参数对应的字段可为“头像”，第二子参数对应的字段可为“介绍”。

可见，在人物类型为第一人物类型时，只需要第一项目参数对应的信息，不需要第二项目参数、第三项目参数、…、第N项目参数项目对应的信息。

在一些实施例中，服务器在获取到一个目标人物的全部信息后，可按照人物类型筛选信息。根据人物C的人物类型为影视明星，从人物C的全部信息中筛选出第一项目参数及其对应的信息，生成该人物C的人物信息，人物信息包括该第一项目参数及其对应的信息。

在一些实施例中，服务器在得到人物C的人物信息后，可将该人物信息和人物类型作为识别结果反馈给显示设备。显示设备根据人物类型在接收到的人物信息中筛选需要显示的信息。

在一些实施例中，人物信息中也可包括人物类型，服务器可不单独反馈人物类型，显示设备可从人物信息中获取人物类型。

步骤S150：在所述人物类型为第二人物类型时，反馈所述人物类型以及对应所述人物名字的第二人物信息给显示设备，其中，所述第二人物信息包含第二项目参数不包含第一项目参数，所述第二项目参数为对应所述第二人物类型的职业领域的信息的项目参数。

在人物类型为第二人物类型时，只需要第二项目参数对应的信息，不需要第一项目参数、第三项目参数、…、第N项目参数项目对应的信息。

在一些实施例中，服务器根据人物D人物类型为体育明星，从人物D的全部信息中筛选出第二项目参数及其对应的信息，生成该人物D的人物信息，人物信息包括该第二项目参数及其对应的信息。

在一些实施例中，服务器在得到人物D的人物信息后，可将该人物信息和人物类型作为识别结果反馈给显示设备。

在一些实施例中，在所述人物类型为第三人物类型时，反馈所述人物类型以及对应所述人物名字的第三人物信息给显示设备，其中，所述第二人物信息包含第三项目参数，不包括第一项目参数和第二项目参数，所述第三项目参数为对应所述第三人物类型的职业领域的信息的项目参数。

在一些实施例中，人物信息中也可包括人物类型，服务器可不单独反馈人物类型，显示设备可从人物信息中获取人物类型。

在一些实施例中，服务器在下发识别结果之前，可根据人脸识别的结果，得到每个目标人物与所述待识别图片中相应人物的匹配度，按照匹配度将全部目标人物的人物信息进行排序，将排序结果作为向显示设备反馈目标人物的人物信息的顺序。若两个目标人物的匹配度相同，则可按照得到匹配结果的顺序确定下发顺序，或按照其他方式确定下发顺序，如随机确定下发顺序。

在一些实施例中，由于网络波动等原因，显示设备接收到人物信息的顺序可能与服务器下发人物信息的顺序不一致，服务器可将每条人物信息设置编号，或者将匹配度也写入人物信息中，便于显示设备确定一个目标人物的显示顺序。

在一些实施例中，服务器还可将人脸的坐标区域添加到相应的目标人物的人物信息中。

在一些实施例中，服务器在得到目标人物的全部信息后，也不可不进行项目参数的筛选，将每个目标人物的全部信息反馈给显示设备，显示设备在接收到全部信息后，对不符合模板的项目参数不做处理，或将其删除。

通过上述实施例可见，服务器在对显示设备发送的截图进行人脸识别后，根据识别出的人脸类型获取不同人物类型的人物信息，为显示设备按照不同的信息模板显示目标人物提供了数据支撑，方便了用户了解不同人物类型的不同人物。

为对截图识别过程中显示设备与服务器之间的交互进行说明，图7示出了一种根据一些实施例的截图识别过程中的显示设备与服务器之间的交互时序示意图。

在一些实施例中，在显示设备启动后，参见图7，用户可在显示设备的任一界面向显示设备上进行截图操作。该截图操作可为按压遥控器的截图键或语音输入截图指令。

在一些实施例中，显示设备上可设置有用于对截图进行内容识别的识图应用。显示设备的系统程序可在接收到截图操作后，启动识图应用，然后将截图操作的数据传递给识图应用，由识图应用对截图操作进行处理。

在一些实施例中，识图应用的功能也可嵌入在显示设备的系统程序中，由显示设备的系统程序对截图操作进行处理。

在一些实施例中，服务器可设置有人脸识别模块、人物信息获取模块、人脸信息数据库和人物信息数据库，人脸识别模块用于通过人脸识别模型和人脸信息数据库进行人脸识别，人物信息获取模块用于在人物信息数据库中获取每个目标人物的人物信息。

无论是由识图应用对截图操作进行处理还是由系统程序对截图操作进行处理，处理原理相似，下面以显示设备设置有识图应用进行示例性说明。

在一些实施例中，识图应用在启动后，可根据接收到截图操作的数据，生成截图命令，通过广播等方式将截图命令传递给显示设备的系统程序。示例性的，该截图命令可为截图广播。

在一些实施例中，系统程序在接收到截图命令后，可根据截图命令，对当前显示的界面进行截图，并存储得到的图片，将图片的存储路径传递至识图应用。示例性的，系统程序进行截图的方法可为通过系统程序的底层抓取OSD(on-screendisplay，屏幕信息显示)显示的区域实现，也可通过安卓原生自带的屏幕截取功能实现，例如，通过使用adb Shell命令截屏实现截屏。

在一些实施例中，识图应用在接收到图片的存储路径后，从该路径获取时间最新的一张图片，确定该图片为待识别图片。然后生成包含该待识别图片的截图识别请求，将该截图识别请求发送给服务器。

在一些实施例中，服务器在接收到截图识别请求后，可从截图识别请求中提取出待识图图片，对待识别图片进行人脸识别，得到待识别图片中每个目标人物的人物名字和人物类型。然后根据人物类型，从人物信息数据库中获取目标人物的人物信息。

在一些实施例中，服务器在得到目标人物的人物信息后，将人物信息返回给显示设备。

在一些实施例中，显示设备在接收到人物信息后，可从人物信息中提取出人物头像、人物名字、人物类型等信息，然后将这些信息与识别结果界面的编排数据和人物详情界面的编排数据分别组合，生成识别结果界面和人物详情界面，其中，识别结果界面的编排数据可预先存储在识图应用中，也可由服务器将之与人物信息一块下发。

在一些实施例中，识别结果界面的编排数据包括待识别图片控件参数、头像控件参数、二维码控件参数和局部识别控件参数，其中，待识别图片控件参数被配置为展示待识别图片，头像控件参数用于生成与目标人物的数量相同的头像控件，每个头像控件用于展示一个目标人物的人物头像，二维码控件参数用于生成一个二维码控件，二维码控件用于跳转至待识别图片在服务器上的存储地址，便于用户通过智能手机访问服务器以下载该待识别图片，局部识别控件参数用于对待识别图片上的局部区域进行目标人物的识别。

在一些实施例中，识别结果界面的编排数据也可仅包括头像控件参数。

显示设备可根据待识别图片控件参数用于展示待识别图片，从预设路径获取截图得到的上述待识别图片，生成用于展示该待识别图片的待识别图片控件。

显示设备可根据二维码控件参数用于跳转至待识别图片在服务器上的存储地址，生成用于跳转至该存储地址的二维码控件，若服务器返回的识别结果数据中不包括上述存储地址，则不生成二维码控件。

显示设备可根据头像控件参数用于展示一个目标人物的人物头像，分别生成对应每个目标人物的头像控件和人物详情界面，并将头像控件配置为响应于触发时显示人物详情界面。

显示设备可根据局部识别控件参数用于对待识别图片上的局部区域进行目标人物的识别，将局部识别控件配置为被触发时调节待识别图片的识别区域，若识别区域内包含目标人物，则可显示目标人物的头像控件或人物详情界面。

下面对一些实施例中的人物详情界面的生成过程进行介绍。

在一些实施例中，人物详情界面的编排数据包括信息模板的配置数据，该配置数据可包括人物详情界面需要显示的控件的控件参数。显示设备可根据目标人物的人物类型，查找该人物类型匹配的信息模板。

在一些实施例中，识图应用在显示设备上存储了每种人物类型的信息模板，在从服务器得到人物信息后，可根据人物信息中的人物类型，查找该人物类型对应的信息模板。

在一些实施例中，信息模板中设置有多个控件参数，每个控件参数分别关联一个子参数。显示设备可从人物信息中得到每个控件参数关联的子参数，将子参数的取值填充到对应的控件参数中，实现将人物信息与筛选出的信息模板进行组合，然后生成人物详情界面。

示例性的，服务器返回的人物信息包括人物C的信息和人物D的信息，其中，人物C的信息中包含的人物类型为影视明星，影视明星对应的信息模板为模板1。模板1中的控件参数包括第一控件参数、第二控件参数和第三控件参数，其中，每个控件参数可包括控件标识、子参数标识、显示指令和控件坐标等数据，控件标识用于区分不同的控件，子参数标识用于表示该控件对应的子参数，显示指令用于表示该控件的显示内容为子参数标识对应子参数内的数据，控件坐标用于确定该控件的尺寸和显示位置。第一控件参数的子参数标识与第一子参数对应，显示指令对应的显示内容为人物头像，第二控件参数的子参数标识与第二子参数对应，显示指令对应的显示内容为作品介绍，第三控件参数的子参数标识与第三子参数对应，显示指令对应的显示内容为作品介绍。

显示设备可根据每个控件参数中的子参数标识，获取相应子参数的数据，生成人物详情界面需要展示的控件。

对于人物C，可将第一子参数中的人物头像填充到第一控件参数中，生成人物C对应的头像控件；将第二子参数中的人物介绍填充到第二控件参数中，生成人物介绍控件；将第三子参数中的作品介绍填充到第三控件参数中，生成作品介绍控件。。人物D的信息中包含的人物类型为体育明星，体育明星对应的信息模板为模板2。模板2中的控件参数包括第四控件参数、第五控件参数和第六控件参数。人物D的第二项目参数包括第四子参数、第五子参数和第六子参数。第四控件参数与第四子参数相对应，第五控件参数与第五子参数相对应，第六控件参数与第六子参数相对应。显示设备可将第四子参数中的人物头像填充到第四控件参数中，生成人物D对应的头像控件，将第五子参数中的人物介绍填充到第五控件参数中，生成人物介绍控件，将第六子参数中的技术风格填充到第六控件参数中，生成技术介绍控件。

在一些实施例中，若服务器反馈的信息还包括不符合模板的项目参数，例如，下发了人物D的第一项目参数的信息，则显示设备对该项目信息不做处理，或将其删除。

需要说明的是，在生成人物详情界面过程中生成的头像控件，触发方式区别于在识别结果界面的头像控件。在识别结果界面的头像控件，触发方式被配置为获取焦点时接收到确认指令，该头像控件可称为第一头像控件，在生成人物详情界面过程中生成以在人物详情界面展示的头像控件，触发方式被配置为获取焦点，该头像控件可称为第二头像控件。

在生成人物详情界面的过程中，在按照人物类型对应的模板生成每个目标人物的相应控件后，可生成每个目标人物对应的人物详情界面，以供用户调用。

在一些实施例中，对于人物C，人物详情界面可显示待识别图片的全部目标人物的第二头像控件，人物C对应的人物介绍控件和作品介绍控件；对于D，人物详情界面可显示待识别图片的全部目标人物的第二头像控件，人物D对应的人物介绍控件和技术风格介绍控件。

可见，显示设备在接收到服务器反馈的多个人物的人物信息后，可生成多个头像控件和多个人物详情界面。

在一些实施例中，显示设备可将识别结果界面设置为截图浮层，将截图浮层添加到当前界面上。

参见图8，在截图浮层510中，待识别图片511可居中设置，头像控件514可被配置为位于待识别图片511的一侧。头像控件514上可显示目标人物的头像，头像控件514下方可显示目标人物的人物名字。头像控件514的排列顺序可为目标人物的匹配度顺序。图8中示出了三个目标人物的头像控件，分别为：人物1的头像控件、人物2的头像控件和人物3的头像控件。

在一些实施例中，图8中的头像控件514可称为第一头像控件，第一头像控件响应于获取焦点时不展示人物详情界面。

在一些实施例中，显示设备在显示截图浮层510后，可将焦点位于设置为位于第一个头像控件上，图8中，第一头像控件为人物1的头像控件，用户若按遥控器的确认键，显示设备可显示该人物1的详细资料，若按遥控器的方向右键，可使显示设备的焦点位于人物2的头像控件上，此时按遥控器的确认键，显示设备可显示该人物2的详细资料。当然，上述遥控器控制仅为一种示例性控制，用户还可通过语音控制等方式实现上述功能。

在一些实施例中，用于显示头像控件514的区域被配置为头像控件显示区域，示例性的，头像控件显示区域最多只有三个显示头像控件514的位置，若目标人物较多，则用户可通过按压方向右键等方式查看下一个目标人物，或通过按压方向左键等方式查看上一个目标人物。

在一些实施例中，用户若在图8中点击一个头像控件，显示设备响应于头像控件的触发指令，可获取该头像控件对应的人物详情界面，若该头像控件对应的目标人物为影视明星，则显示设备生成一个包含该人物详情界面的详情浮层，将详情浮层显示在当前界面上，得到如图9示的界面。若该头像控件对应的目标人物为体育明星，则显示设备生成一个包含该人物详情界面的详情浮层，将浮层显示在当前界面上，得到如图10所示的界面。

在一些实施例中，若用户在图8中点击一个头像控件，显示设备响应于头像控件的触发指令，也可先撤销截图浮层，直接将详情浮层显示在当前界面上，若用户通过按遥控器的返回键等方式向显示设备输入返回指令，显示设备可撤销详情浮层，并重新显示截图浮层，在显示截图浮层时，若用户输入返回指令，显示设备可撤销截图浮层。

在一些实施例中，第一人物类型信息显示的区域和第二人物信息显示的区域不相同。示例性的，第一人物类型信息显示的区域为当前界面上方浮层中的底部，第二人物信息显示的区域当前界面上方浮层中的左/右部。

在一些实施例中，第一人物类型信息显示区域和第二人物信息显示区域中的一个显示待识别图像(截图)，一个不显示。

在一些实施例中，以第一人物类型信息显示区域显示待识别图像为例，识别出的人物被作为不同的控件进行展示，用户选中不同的控件后展示不同人物的人物信息。在一些实施例中，不同的控件仅用来展示人物的名称和或图像，控件被选中后打开新的浮层来展示人物信息。减少人物信息在第一人物类型信息显示区域中的显示可以合理的再第一人物类型信息显示面板中展示出更多的识别结果。在一些实施例中，第二人物类型信息显示区域由于没有待识别图片占用面板控件，因此在展示人物名称和图片的同时可以直接显示人物信息。

在一些实施例中，第一人物类型信息显示区域和第二人物信息显示区域中的一个显示商品推荐信息，一个不显示。示例性的，第一人物类型信息的显示区域显示商品推荐信息，此时，在识别为第一人物类型时，服务器在识别图片后，会根据识别出的人名和/或物品，请求商品服务器进行推荐信息的查询，但在识别为第二人物类型时，服务器在识别图片后，不会根据识别出的人名和/或物品，请求商品服务器进行推荐信息的查询。这是因为第一人物类型被设置为具有商品推荐属性的类型，第二人物类型被设置为不具有商品推荐属性的类型。

参见图9，影视明星的人物详情界面可显示头像控件、人物介绍和影视作品。图9中，第二头像控件包括人物1的头像控件、人物2的头像控件和人物3的头像控件，人物介绍为：xxxxxx，影视作品为：出演作品1、出演作品2和出演作品3。

参见图10，体育明星的人物详情界面可显示头像控件、人物介绍和技术风格。图10中，详情控件包括人物4的头像控件和人物5的头像控件，人物介绍为：xxxxxx，影视作品为：xxxxxx。

在一些实施例中，图9和图10中的头像控件可称为第二头像控件，第二头像控件响应于获取焦点时展示人物详情界面，或者图9和图10中的头像控件还可称为详情控件，表示该控件用于展示人物详情界面。

在一些实施例中，若用户想要查看其他目标人物的人物详情界面，可切换当前选中的详情控件，进入该目标人物的人物详情界面。

在一些实施例中，若服务器识别出多个不同类型的人物，则显示设备可生成多个头像控件，在截图浮层按照匹配度顺序显示头像控件，若用户点击一个头像控件，则可进入该头像控件对应的人物详情界面。当用户切换头像控件时，可看到不同模板的人物详情界面。

在一些实施例中，若用户想要查看截图上特定区域的目标人物，可将焦点移动至局部识别控件512，按确认键触发该局部识别控件512后，显示设备响应于该局部识别控件512的触发指令，可显示选择框，选择框内的图像为需要识别目标人物的识别区域，用户可按方向键调整识别区域的位置，在调整好识别区域后，可按确认键，显示设备接收到确认键的触发指令后，可计算选择框的坐标区域，将该坐标区域与服务器反馈的目标人物的坐标区域进行比对，从而的得出识别区域内的目标人物。在得到识别区域内的目标人物后，显示设备可显示该目标人物的头像控件或人物详情界面。

在一些实施例中，若用户想要保存截图的图片，可通过智能手机扫描显示设备上的二维码控件513，智能手机在扫描成功后，生成访问服务器存储该图片的预设地址的访问请求，从而跳转至该预设地址，服务器将包含所述待识别图片的界面数据反馈给智能手机，使智能手机读取该图片并进行展示，用户可在智能手机上长按以保存该图片到智能手机上。

在一些实施例中，显示设备被配置为将截图的图片存储至显示设备的预设路径，使用户可在显示设备上查看截图的图片。

在一些实施例中，若用户查看完毕目标人物的人物详情界面，可按退出键，显示设备在接收到退出键的触发指令后，可撤销截图图层，用户再按退出键，显示设备可继续退出详情浮层，使用户可以继续观看到截图图层下方的完整界面。

由上述实施例可见，本申请实施例通过显示设备具有截图功能，使显示设备将截图得到的图片发送到服务器进行人物识别，使用户在显示设备上截图后，显示设备可自动显示图片上检测出的人物，不需要用户自己检索图片上的人物信息；进一步的，服务器发送的人物信息中，按照人物类型不同，数据项目也不同，使显示设备可根据人物类型不同，介绍侧重点不同的人物信息，使得人物介绍贴合人物类型，提升了用户的观看体验。

最后应说明的是：以上各实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述各实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

为了方便解释，已经结合具体的实施方式进行了上述说明。但是，上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导，可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用，从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。

Claims (10)

1.一种服务器，其特征在于，所述服务器被配置为：

接收显示设备的截图识别请求，所述截图识别请求包括待识别图片；

响应于所述截图识别请求，对所述待识别图片进行人脸识别，以确定人物名字；

根据所述人物名字得到识别出的目标人物的人物类型，其中，所述人物类型表征所述人物名字从事的职业领域；

在所述人物类型为第一人物类型时，反馈所述人物类型以及对应所述人物名字的第一人物信息给显示设备，其中，所述第一人物信息包含第一项目参数不包含第二项目参数，所述第一项目参数为对应所述第一人物类型的职业领域的信息的项目参数；

在所述人物类型为第二人物类型时，反馈所述人物类型以及对应所述人物名字的第二人物信息给显示设备，其中，所述第二人物信息包含第二项目参数不包含第一项目参数，所述第二项目参数为对应所述第二人物类型的职业领域的信息的项目参数。

2.根据权利要求1所述的服务器，其特征在于，所述服务器在反馈所述第一人物信息或第二人物信息之前，还被配置为：

按照所述目标人物的人物名字查找所述目标人物的全部信息，所述全部信息包括第一项目参数对应的信息和第二项目参数对应的信息；

获取所述目标人物的人物类型对应的项目参数；

根据所述人物类型为第一人物类型，从查找到的全部信息中筛选出所述第一项目参数对应的信息，或根据所述人物类型为第二人物类型，从查找到的全部信息中筛选出所述第二项目参数对应的信息；

根据筛选结果生成所述目标人物的人物信息。

3.根据权利要求1所述的服务器，其特征在于，所述服务器还被配置为：

在所述人物类型为第三人物类型时，反馈所述人物类型以及对应所述人物名字的第三人物信息给显示设备，其中，所述第二人物信息包含第三项目参数，不包括第一项目参数和第二项目参数，所述第三项目参数为对应所述第三人物类型的职业领域的信息的项目参数。

4.根据权利要求1所述的服务器，其特征在于，所述服务器在反馈所述第一人物信息或第二人物信息之前，还被配置为：

根据人脸识别的结果，得到每个目标人物与所述待识别图片中相应人物的匹配度；

按照所述匹配度将全部目标人物的人物信息进行排序，将排序结果作为向所述显示设备反馈所述目标人物的人物信息的顺序。

5.根据权利要求1所述的服务器，其特征在于，所述服务器在将包含全部目标人物的人物信息的识别结果反馈给显示设备之前，还被配置为：

根据人脸识别的结果，得到每个目标人物与所述待识别图片中相应人物的匹配度；

将所述匹配度添加到相应的目标人物的人物信息中。

6.根据权利要求1所述的服务器，其特征在于，根据所述人物名字得到识别出的目标人物的人物类型，包括：

从预设的人物分类表中查找所述人物名字的人物类型。

7.根据权利要求1所述的服务器，其特征在于，所述服务器在将包含全部目标人物的人物信息的识别结果反馈给显示设备之前，还被配置为：

将根据人脸识别的识别结果，得到所述目标人物的坐标区域，将所述坐标区域添加到相应的目标人物的人物信息中。

8.根据权利要求1所述的服务器，其特征在于，所述第一人物信息和第二人物信息还包括人物头像。

9.一种显示设备，其特征在于，包括：

显示器，用于呈现用户界面；

控制器，与所述显示器连接，所述控制器被配置为：

接收输入的截屏操作；

响应于所述截屏操作，对所述显示器的显示界面进行截屏，得到待识别图片，生成包含所述待识别图片的截图识别请求，将所述截图识别请求发送给服务器；

接收来自所述服务器的识别结果，所述识别结果包括识别出的目标人物的人物类型和人物信息；

根据所述人物类型筛选用于展示所述人物信息的信息模板；

根据所述人物信息中的人物头像生成并在当前界面上展示头像控件，将所述人物信息与筛选出的信息模板进行组合，生成人物详情界面，其中，所述头像控件被配置为响应于触发时跳转至所述人物详情界面。

10.一种截图识别方法，其特征在于，包括：

接收显示设备的截图识别请求，所述截图识别请求包括待识别图片；

响应于所述截图识别请求，对所述待识别图片进行人脸识别，以确定人物名字；

根据所述人物名字得到识别出的目标人物的人物类型，其中，所述人物类型表征所述人物名字从事的职业领域；

在所述人物类型为第一人物类型时，反馈所述人物类型以及对应所述人物名字的第一人物信息给显示设备，其中，所述第一人物信息包含第一项目参数不包含第二项目参数，所述第一项目参数为对应所述第一人物类型的职业领域的信息的项目参数；

在所述人物类型为第二人物类型时，反馈所述人物类型以及对应所述人物名字的第二人物信息给显示设备，其中，所述第二人物信息包含第二项目参数不包含第一项目参数，所述第二项目参数为对应所述第二人物类型的职业领域的信息的项目参数。

Images