CN115866313A - 显示设备、服务器及推荐窗口显示方法 - Google Patents

Abstract

本申请提供一种显示设备、服务器及推荐窗口显示方法，所述方法可以在用户输入识图指令后，检测当前用户界面归属的业务场景，并基于对目标图像的图像识别结果和业务场景，查询符合业务场景的关联数据。从而按照关联数据在用户界面中渲染推荐窗口。所述方法可以在识图功能的基础上，根据不同的业务场景，展示不同基于业务的热搜文本和推荐项目，从而使推荐窗口中的项目能够与当前业务场景相适应，减少冗余信息，提升该业务场景下的用户体验。

Description

显示设备、服务器及推荐窗口显示方法

技术领域

本申请涉及显示设备技术领域，尤其涉及一种显示设备、服务器及推荐窗口显示方法。

背景技术

显示设备是指能够输出具体显示画面的终端设备，可以是智能电视、移动终端、智能广告屏、投影仪等终端设备。以智能电视为例，智能电视是基于Internet应用技术，具备开放式操作系统与芯片，拥有开放式应用平台，可实现双向人机交互功能，集影音、娱乐、数据等多种功能于一体的电视产品，用于满足用户多样化和个性化需求。

显示设备可以支持识图功能，即用户可以控制显示设备对目标图像进行图像处理，以识别出目标图像中的人物、特征物、文字等信息。再根据图像识别结果，在媒资数据库中匹配相关联的媒资内容，并通过特定的内容显示窗口对媒资项目进行展示，以供用户选择可能感兴趣的媒资项目进行播放。

由于相关联的媒资内容是根据图像识别结果在媒资数据库中进行匹配获得，因此当媒资数据库的资源量较大，且图像识别结果偏向于与热门资源相关联时，可以在媒资数据库中匹配到数量较多的媒资项目。而当媒资项目数量较多时，需要较大的内容显示窗口进行展示，不仅会遮挡用户界面，而且不利于用户选中自己感兴趣的媒资项目，降低用户体验。

发明内容

本申请提供了一种显示设备、服务器及推荐窗口显示方法，以解决传统识图功能匹配结果过多，不便于用户选择的问题。

第一方面，本申请提供一种显示设备，包括：显示器、通信器以及控制器。其中，所述显示器被配置为显示用户界面；所述通信器被配置为连接服务器；所述控制器被配置为执行以下程序步骤：

获取用户输入的识图指令；

响应于所述识图指令，检测当前用户界面归属的业务场景；

向所述服务器发送图像识别请求，所述图像识别请求包括目标图像和所述业务场景；

接收所述服务器针对所述图像识别请求反馈的关联数据，所述关联数据包括热搜文本和/或推荐项目；所述热搜文本通过对所述目标图像执行图像识别获得；所述推荐项目为根据所述热搜文本，在资源数据库中查询获得的符合所述业务场景的项目；

根据所述关联数据在所述用户界面中渲染推荐窗口。

第二方面，本申请还提供一种服务器，包括：存储单元、通信单元以及处理单元。其中，所述存储单元被配置为存储资源数据库；所述通信单元被配置为与显示设备建立通信连接；所述处理单元被配置为执行以下程序步骤：

获取所述显示设备发送的图像识别请求，所述图像识别请求包括目标图像和所述显示设备当前用户界面归属的业务场景；

对所述目标图像执行图像识别，以获得热搜文本；

根据所述热搜文本在资源数据库中查询符合所述业务场景的项目，以获得推荐项目；

生成关联数据，所述关联数据包括所述热搜文本和推荐项目；

向所述显示设备反馈所述关联数据，以使所述显示设备根据所述关联数据在所述用户界面中渲染推荐窗口。

第三方面，本申请还提供一种推荐窗口显示方法，应用于由显示设备和服务器组成的内容显示系统中，所述显示设备与服务器建立通信连接，所述推荐窗口显示方法包括以下步骤：

显示设备获取用户输入的识图指令，并响应于所述识图指令，检测当前用户界面归属的业务场景；

所述显示设备向服务器所述发送图像识别请求，所述图像识别请求包括目标图像和所述业务场景；

所述服务器对所述目标图像执行图像识别，以获得热搜文本；以及，根据所述热搜文本在资源数据库中查询符合所述业务场景的项目，以获得推荐项目；

所述服务器生成关联数据，并向所述显示设备反馈所述关联数据，所述关联数据包括所述热搜文本和/或推荐项目；

所述显示设备根据所述关联数据在所述用户界面中渲染推荐窗口。

由以上技术方案可知，本申请提供的显示设备、服务器及推荐窗口显示方法可以在用户输入识图指令后，检测当前用户界面归属的业务场景，并基于对目标图像的图像识别结果和业务场景，查询符合业务场景的关联数据。从而按照关联数据在用户界面中渲染推荐窗口。所述方法可以在识图功能的基础上，根据不同的业务场景，展示不同基于业务的热搜文本和推荐项目，从而使推荐窗口中的项目能够与当前业务场景相适应，减少冗余信息，提升该业务场景下的用户体验。

附图说明

为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例中显示设备的使用场景；

图2为本申请实施例中控制装置的硬件配置框图；

图3为本申请实施例中显示设备的硬件配置图；

图4为本申请实施例中显示设备的软件配置图；

图5为本申请实施例中首页示意图；

图6为本申请实施例中媒资推荐窗口示意图；

图7为本申请实施例中推荐画面示意图；

图8为本申请实施例中推荐窗口显示方法流程示意图；

图9为本申请实施例中模式切换窗口示意图；

图10为本申请实施例中少儿模式界面示意图；

图11为本申请实施例中服务器生成关联数据的流程示意图；

图12为本申请实施例中影视模式下推荐窗口示意图；

图13为本申请实施例中少儿模式下推荐窗口示意图；

图14为本申请实施例中游戏模式下推荐窗口示意图；

图15为本申请实施例中搜索结果界面示意图；

图16为本申请实施例中全网搜索结果界面示意图；

图17为本申请实施例中搜索输入界面示意图；

图18为本申请实施例中生成目标图像流程示意图；

图19为本申请实施例中推荐窗口显示流程时序图。

具体实施方式

下面将详细地对实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下实施例中描述的实施方式并不代表与本申请相一致的所有实施方式。仅是与权利要求书中所详述的、本申请的一些方面相一致的系统和方法的示例。

需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。

本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。

术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。

术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。

图1为根据实施例中显示设备的使用场景的示意图。如图1所示，显示设备200还与服务器400进行数据通信，用户可通过智能设备300或控制装置100操作显示设备200。

在一些实施例中，控制装置100可以是遥控器，遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信，及其他短距离通信方式中的至少一种，通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等至少一种输入用户指令，来控制显示设备200。

在一些实施例中，显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群，也可以是多个集群，可以包括一类或多类服务器。

在一些实施例中，一个步骤执行主体执行的软件步骤可以随需求迁移到与之进行数据通信的另一步骤执行主体上进行执行。示例性的，服务器执行的软件步骤可以随需求迁移到与之数据通信的显示设备上执行，反之亦然。

图2示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示，控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起用用户与显示设备200之间交互中介作用。

图3示出了根据示例性实施例中显示设备200的硬件配置框图。

在一些实施例中，显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。

在一些实施例中，通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如：通信器可以包括Wifi模块，蓝牙模块，有线以太网模块等其他网络通信协议芯片或近场通信协议芯片，以及红外接收器中的至少一种。显示设备200可以通过通信器220与控制装置100或服务器400建立控制信号和数据信号的发送和接收。

在一些实施例中，外部装置接口240可以包括但不限于如下：高清多媒体接口接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。

在一些实施例中，控制器250和调谐解调器210可以位于不同的分体设备中，即调谐解调器210也可在控制器250所在的主体设备的外置设备中，如外置机顶盒等。

在一些实施例中，控制器250，通过存储在存储器上中各种软件控制程序，来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如：响应于接收到用于选择在显示器260上显示UI对象的用户命令，控制器250便可以执行与由用户命令选择的对象有关的操作。

在一些实施例中，用户可在显示器260上显示的图形用户界面(GUI)输入用户命令，则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者，用户可通过输入特定的声音或手势进行输入用户命令，则用户输入接口通过传感器识别出声音或手势，来接收用户输入命令。

在一些实施例中，“用户界面”，是应用程序或操作系统与用户之间进行交互和信息交换的介质接口，它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface，GUI)，是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素，其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素中的至少一种。

参见图4，在一些实施例中，将系统分为四层，从上至下分别为应用程序(Applications)层(简称“应用层”)，应用程序框架(Application Framework)层(简称“框架层”)，安卓运行时(Android runtime)和系统库层(简称“系统运行库层”)，以及内核层。

在一些实施例中，应用程序层中运行有至少一个应用程序，这些应用程序可以是操作系统自带的窗口(Window)程序、系统设置程序或时钟程序等；也可以是第三方开发者所开发的应用程序。在具体实施时，应用程序层中的应用程序包不限于以上举例。

框架层为应用程序层的应用程序提供应用编程接口(application programminginterface，API)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心，这个中心决定让应用层中的应用程序做出动作。应用程序通过API接口，可在执行中访问系统中的资源和取得系统的服务。

如图4所示，本申请实施例中应用程序框架层包括管理器(Managers)，内容提供者(Content Provider)等，其中管理器包括以下模块中的至少一个：活动管理器(ActivityManager)用与和系统中正在运行的所有活动进行交互；位置管理器(Location Manager)用于给系统服务或应用提供了系统位置服务的访问；文件包管理器(Package Manager)用于检索当前安装在设备上的应用程序包相关的各种信息；通知管理器(NotificationManager)用于控制通知消息的显示和清除；窗口管理器(Window Manager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。

在一些实施例中，活动管理器用于管理各个应用程序的生命周期以及通常的导航回退功能，比如控制应用程序的退出、打开、后退等。窗口管理器用于管理所有的窗口程序，比如获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕，控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。

在一些实施例中，系统运行库层为上层即框架层提供支撑，当框架层被使用时，安卓操作系统会运行系统运行库层中包含的C/C++库以实现框架层要实现的功能。

在一些实施例中，内核层是硬件和软件之间的层。如图4所示，内核层至少包含以下驱动中的至少一种：音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器，温度传感器，压力传感器等)、以及电源驱动等。

基于上述显示设备200，用户可以在使用显示设备200的过程中，控制显示设备200显示各种用户界面。在显示设备200显示的用户界面中，可以根据用户的观看习惯，显示推荐资源。

在一些实施例中，如图5所示，显示设备可以显示不同频道的首页。可以通过运营配置，配置首页栏目位上显示不同的媒资以进行媒资的推荐。用户可以选中栏目位进行下一级页面的展开或观看。用户也可以通过显示页面上设置的搜索页面进入搜索页来进行媒资的搜索。用户还可以通过语音搜索来直接获得反馈结果。

在一些实施例中，例如，如图6所示，用户在观看影片A的媒资详情页面中，可以根据影片A的类型、内容、作者等信息，在“猜你喜欢”区域显示与影片A同类型的影片B、与影片A内容相似的影片C以及与影片A同一个作者的影片D，以供用户选择。

为了实现上述内容推荐过程，显示设备200中可以内置有用于记录用户观看习惯的控制程序。随着用户观看过程，显示设备200可以通过启动该控制程序对用户观看的内容进行记录，形成历史记录信息。当需要显示推荐内容时，显示设备200则可以通过历史记录信息在资源库中进行匹配，以获得符合用户观看内容的推荐内容。

但是，基于历史记录确定推荐内容的方式，只能够获得部分与历史记录的媒资有关联的内容，不利于用户了解新内容。例如，用户在看到某些影片的海报或截图时，可能对该影片或演员产生兴趣，或者想要了解该影片对应的详细信息。为此，在一些实施例中，显示设备200可以通过图像识别技术，对图像进行识别处理，以便从图像中识别出影片名称、演员名字等相关信息。

例如，如图7所示，用户可以控制显示设备200执行截图操作，以获得截屏图像。再对截屏图像执行图像识别算法，以根据截屏图像中的像素点分布规律，识别出截屏图像中的人物目标。再根据人物目标所归属的人物类型，确定与该人物类型相适应的推荐媒资内容。如对于影视明星类型的人物，可以确定同一人物的不同影视作品；对于体育明星类型的人物，可以确定该体育相关的视频资源等。在确定推荐内容后，显示设备200可以在用户界面的特定位置展示对应的推荐媒资项目，以供用户选择。

在一些实施例中，截图识别页面显示时可以利用图7中影片B和/或影片C的位置进行人物识别结果的展示。

在一些实施例中，在人物识别结果中识别出的人物数量小于展示位个数时，在剩余的展示位进行推荐媒资项目的展示。

在一些实施例中，显示内容显示在视频层，截图识别结果展示在视频层上方的OSD图层中，人物识别结果，推荐媒资项目均通过OSD图层中的展示位控件进行展示。

在一些实施例中，在展示截图识别结果时，焦点被设置在OSD图层上的任一控件位置，此时视频层的控件不可获取焦点，即焦点不会在OSD图层展示时移动到视频层上的控件位置，用户选择取消OSD图层的显示后，视频层的控件开始正常的焦点获取。

在一些实施例中，通过对图像识别确定的推荐内容可以使用户在未观看具体媒资内容的前提下，获得与图像内容相关的推荐内容。推荐内容可以包括推荐媒资项目和其他推荐资源项目，如游戏、应用、网页、文字等。推荐内容可以通过在资源数据库中匹配获得。例如，推荐媒资项目是根据图像识别结果在媒资数据库中进行匹配获得，因此当媒资数据库的资源量较大，且图像识别结果偏向于与热门资源相关联时，可以在媒资数据库中匹配到数量较多的媒资项目。而当媒资项目数量较多时，需要较大的内容显示窗口进行展示，不仅会遮挡用户界面，而且不利于用户选中自己感兴趣的媒资项目，降低用户体验。

为了满足用户对推荐资源的需求，并减少无关推荐项目的数量，在本申请的部分实施例中，提供一种显示设备200。所述显示设备200包括：显示器260、通信器220以及控制器250。其中，显示器260可用于显示用户界面。通信器220可以通过网络通信方式连接服务器400，实现与服务器400之间的数据交互。控制器250可以被配置为执行一种基于业务场景的推荐窗口显示方法，如图8所示，具体包括以下步骤：

获取用户输入的识图指令。显示设备200在运行过程中，可以实时监听用户的交互动作。不同的交互动作可以用于控制显示设备200实现不同的功能。其中，当用户输入用于控制显示设备200执行图像识别的交互动作时，表示用户输入识图指令。根据显示设备200的具体交互方式的不同，用户可以通过不同的交互方式输入识图指令。

对于部分显示设备200，用户可以通过显示设备200配套的控制装置100执行交互动作，以输入识图指令。例如，控制装置100上可以设有截图键，当用户按下所述截图键时，可以触发显示设备200执行截图操作，以获得截屏图像。

显示设备200还可以设置截图规则，即在不同的用户界面下截图获得图像时，可以自动运行图像处理相关的操作。例如，用户在显示设备200显示播放界面时按下截图键，则在截图获得具体的图像后，对截屏获得的图像进行保存。而用户在显示设备200显示媒资列表界面时按下截图键，则可以在截图获得具体的图像后自动对图像执行对图像进行识别。即识图指令可以由用户在显示设备200显示媒资列表界面时通过按下控制装置100上的按键完成输入。

显示设备200还可以在用户界面中显示用于识图操作的控件，以供用户选中。例如，用户可以通过控制装置100呼出用户界面的状态栏，在状态栏中可以包括“截图/识图”选项。用户再通过控制装置100上的方向键和确定键，控制焦点光标移动并选中“截图/识图”选项，触发显示设备200执行截屏和识图操作。即识图指令可以基于用户界面中的选项控件完成输入。

对于部分显示设备200，其中可以内置智能语音系统，用户可以使用智能语音系统输入语音输入识图指令。例如，用户可以输入“识别图中内容”、“识别当前画面中的人物”等语音内容，则智能语音系统可以对语音内容进行识别，并转化为具体的控制命令，以驱动显示设备200执行识图操作。

需要说明的是，用户不仅可以针对用户界面中的具体画面输入识图指令，而且可以针对某一具体的图片文件输入识图指令。例如，用户可以在显示设备200打开某个图片文件时，通过长按控制装置100上的截图按键，控制显示设备200对所打开的图片文件执行识图操作。

在获取识图指令后，显示设备200可以响应于识图指令，检测当前用户界面归属的业务场景。

在一些实施例中，所述业务场景可以是根据资源类型在控制系统或应用中设定的不同模式。根据不同的操作系统形式，显示设备200可以提供不同种类和数量的业务场景。例如，所述业务场景可以包括：少儿模式、教育模式、影视模式、娱乐模式等。在不同的模式下，显示设备200可以为用户推荐不同的资源。例如，在少儿模式下，显示设备200可以在媒资推荐界面中只显示子供向的媒资项目，如动画片、儿童片等；在教育模式下，显示设备200可以在媒资推荐界面中显示科教类媒资项目，如课程视频、在线直播课程、科普纪录片等。

在一些实施例中，通过在用户界面进行模式切换后，显示设备200会更新当前记录的业务标识。在后续使用中，则可以通过检测业务标识来确定当前的业务场景。显示设备200还可以将业务标识发送给服务器400，以便于服务器400通过检测业务标识来确定当前的业务场景。

在一些实施例中，业务场景的获取不是在模式切换时进行标记的，而是识别截图中的文字和/或人物的名称，然后根据识别出的文字和/或人物的名称，以及预设的映射关系确定表征当前业务场景的业务标识。映射关系是根据媒资资源的名称，海报文字，人物等和媒资所对应的业务场景之间的映射关系，是预先建立并存储的。人物可以是真实人物也可以是虚拟人物。在一些实施例中，如果在截图中识别出了“一年级”、“二年级”、“数学基本功”、“高中冲刺”等文字或图形内容，会根据预设映射关系，确定当前是教育场景；同理，如果识别出了“汪汪队立大功”、“萌鸡小队”等文字和或动画形象，确定当前是少儿场景；如果识别出了“电影名称1”、“电影名称2”、“电影名称3”、“电影名称4”等，则确定当前是电影模式。识别图像中的文字和/或人物的名称来确定业务场景的过程可以是显示设备200确定好之后，将表征业务场景的业务标识来上传给服务器400，也可以不在显示设备200中进行业务场景的区分，而是由服务器400根据上传的截图进行人物的识别和业务场景的判断。

在一些实施例中，所述业务场景可以是当面页面展示的资源类型对应的频道主题。示例性的，服务器400会根据对媒体资源的类型进行分类，将其归为不同的频道主题，用户可以选择不同的频道主题类进行不同类型的媒体资源的展示。频道主题可以如图5或图7所示“少儿”、“教育”、“购物”等等，展示频道主题的控件又可以被称为TAB栏。用户通过操控焦点在TAB栏中的不同的频道主题移动，来控制内容区域显示对应该频道主题的内容，并且，展示后，可以向下移动焦点，以进行内容区域中控件的操作。在频道主题控件切换后，显示设备200会更新当前记录的业务标识。

在每种业务场景下，显示设备200可以通过呈现媒资的页面中仅向用户提供与该业务场景相适应的资源项目。例如，根据显示设备200的面向用户，显示设备200可以提供的业务场景可以包括常规模式和教育模式。其中常规模式下，显示设备200可以在媒资推荐界面中显示播放热度较高的电影、电视剧、综艺节目等综合性媒资项目，也可以根据用户的观看历史，显示推荐项目。而在教育模式下，显示设备200可以根据用户订阅的课程资源，在媒资推荐界面中显示关联课程项目。

除上述根据媒资项目类型划分业务场景的方式外，在一些实施例中，显示设备200还可以根据用户使用功能划分业务场景。例如，部分显示设备200可以提供游戏模式，在游戏模式下，显示设备200可以在应用列表显示推荐的游戏应用，以供用户选择安装和运行。

需要说明的是，显示设备200所能够提供的业务场景不局限于上述少儿模式、教育模式、影视模式、娱乐模式、常规模式以及游戏模式等，根据显示设备200所支持的功能、面向的用户群体以及显示设备200支持的资源库状况，显示设备200还可以提供其他类型的业务场景，并在该业务场景下，显示与当前业务场景相符的资源项目。

基于上述业务场景，显示设备200可以通过多种方式对当前用户界面归属的业务场景进行检测。在一些实施例中，显示设备200可以实时监控用户的进入或退出某个各种业务场景的操作，即获取用户输入的用于进入或退出业务场景的控制指令，并响应于控制指令，将当前业务场景写入系统属性数据库中。

例如，如图9所示，用户通过控制装置100控制焦点光标移动至控制主页上的“模式切换”控件，并在弹出的模式选择窗口中选中“教育模式”选项，则可以控制显示设备200进入教育模式。此时，显示设备200可以通过修改系统属性数据库中的记录参数，自动将系统属性数据库中的当前业务场景记录为“教育模式”。

显示设备200可以通过识别字符串，对各种业务场景进行标记，并保存在系统属性数据库中。例如，在系统属性数据库中可以设有专门用于记录业务场景的数据表，数据表中包括类型表项“Mode name”，当用户控制显示设备200进入教育模式时，显示设备200可以对类型表项进行赋值，使其对应值从用于表示常规模式的“standard”修改为用于表示教育模式的“education”。

因此，在检测当前用户界面归属的业务场景时，从系统属性数据库中查询当前用户界面归属的业务场景。即显示设备200在获取到用户输入的识图指令后，响应于识图指令在系统属性数据库中读取类型表项当前的状态值，从而在读取到当前类型表项状态值为“education”时，确定当前用户界面归属的业务场景为“教育模式”。

由于显示设备200还可以通过运行多媒体应用，播放多媒体应用中提供的媒资项目。而不同的多媒体应用可以提供来自不同平台、具有不同特点的媒资项目。因此，所述业务场景还可以根据运行的多媒体应用确定。例如，当显示设备200运行“AA-少儿早教”应用时，显示设备200可以根据该应用名称“AA-少儿早教”在本地数据库或者云端服务器400查询该应用归属的类型，即儿童教育类应用。再根据查询获得的应用类型，匹配符合显示设备200场景划分方式的具体业务场景。即“AA-少儿早教”应用所提供的媒资与少儿模式类型相同，因此可以确定显示设备200的当前业务场景为少儿模式。

由于部分应用支持向显示设备200反馈其归属的业务场景，如系统应用、运营商开发的应用以及得到运营商认证的第三方应用等，因此还可以通过业务应用上报的结果，检测当前业务场景。即在一些实施例中，在检测当前用户界面归属的业务场景的步骤中，调用当前用户界面的业务应用，并向业务应用发送场景上报通知，再接收业务应用针对场景上报通知返回的业务场景。

在一些实施例中，当通过系统属性数据库和应用检测均无法确定当前业务场景时，显示设备200还可以通过当前用户界面中所包含的内容，识别其归属的业务场景。即在检测当前用户界面归属的业务场景的步骤中，显示设备200可以先获取用户界面中的焦点光标位置，再根据焦点光标位置提取当前焦点频道名称，以确定当前业务场景。

为了标记每个业务场景，在显示设备200的操作系统中，可以为每个业务场景设置场景标签，显示设备200可以根据场景标签识别各种业务场景。例如，如图10所示，在显示设备200的控制主页中可以包括多个选项卡，每个选项卡上设有用于标记该频道的名称，包括电视剧、电影、纪录片、少儿、教育等。显示设备200通过检测焦点标记所在位置，确定当前焦点频道名称，即焦点标记所在的选项卡对应名称“少儿”，从而确定当前业务场景为“少儿模式”。

由于为了满足UI界面的显示多样性，显示设备200在显示部分选项卡时，会修改选项卡名称。例如，显示设备200会在部分暑假期间，将选项卡名称从“少儿”修改为“快乐暑假”。因此，为了准确的确定业务场景，显示设备200可以在提取焦点频道名称后，调用标准业务库，以通过标准业务库匹配频道名称对应的业务场景。例如，可以在标准业务库中匹配“快乐暑假”对应的业务场景为“少儿模式”。其中，标准业务库中可以记录有每个业务场景的标准识别代码，以及用于表示该业务场景的频道名称。标准业务库可以跟随操作系统的UI更新策略实时更新记录。

在检测当前业务场景后，显示设备200可以根据检测的当前业务场景以及识图指令对应要识别的目标图像生成图像识别请求，并向服务器400发送图像识别请求，以使服务器400可以针对图像识别请求反馈的关联数据。其中，所述关联数据包括热搜文本和推荐项目。所述热搜文本可以通过对目标图像执行图像识别获得。所述推荐项目为根据热搜文本，在资源数据库中查询获得的符合业务场景的项目。

在一些实施例中，生成图像识别请求包括截图和表征业务场景的场景标识，其中截图用于进行截图结果的反馈，场景标识用于进行热搜文本的获取。在一些实施例中，生成图像识别请求包括截图和不包括表征业务场景的场景标识，其中截图用于进行截图结果的反馈，以及根据视图的结果确定当前的业务场景。

如图11所示，服务器400在接收到显示设备200发送的图像识别请求后，可以先对目标图像执行图像识别，以获得热搜文本。服务器400可以根据图像识别算法，对目标图像进行图像识别处理，以从目标图像中识别具体目标。例如，服务器400中可以内置有用于识别图像中人物目标的识别模型，当显示设备200将目标图像发送给服务器400后，服务器400可以将显示设备200发送的目标图像输入识别模型。则经过识别模型的计算，可以输出目标图像中是否包含人物目标，以及符合人物目标特征的人物信息。其中，识别模型输出的内容具体可以为人物目标是某个具体人物的分类概率，则最终确定人物目标特征的人物信息为分类概率最高的标签类型。

在一些实施例中，可以通过在服务器400中预置多种类型的识别模型，实现对目标图像中不同目标进行识别。例如，除人物目标识别模型外，服务器400中还可以预置用于识别图像中所包含的具体文字内容的文字识别模型、用于识别图像中所包含景物内容的景物识别模型、用于识别图像中商品内容的商品识别模型等。可以通过显示设备200设置目标图像所具体输入的识别模型。即需要在图像中识别出的信息类型越多，则服务器400将目标图像输入的识别模型种类就越多。

显然，在服务器400将目标图像输入的识别模型种类越多时，获取识别结果所需要的时间也就越长，因此为了兼顾识别结果种类和识别时间，部分实施例中可以在服务器400中可以分别设置一个特征目标识别模型和一个文字识别模型，分别用于在图片中识别获得图文信息。即服务器400在对从显示设备200接收到的图像进行人物的匹配和识别时，还进行文字的识别。

在一些实施例中，服务器400在识图过程中，会获得识别对象在图像中的相对位置，继而在获取到人物识别结果和文字识别结果后，可以将位置关系满足预设条件的人物识别结果和文字识别结果进行关联。示例性的，位置关系可以是距离小于预设阈值，也可以是文字识别结果对应的对象在人物识别结果对应的图像下方，还可以是两者的组合。

为了获取热搜文本，在一些实施例中，服务器400可以将目标图像输入图像识别模型，以获取图像识别结果。其中，所述图像识别结果包括关键词。再通过提取业务场景下的热搜词库，并在热搜词库中匹配与关键词关联的热搜文本。

在一些实施例中，不同的业务场景分别对应不同的热搜词库。

在一些实施例中，也可以是在一个热搜词库中，对热搜词进行不同业务属性的分类，在热搜词库中筛选对应业务场景的热搜词。

服务器400中可以维护一个资源项目数据库，在资源项目数据库中可以存储有基于网络或本地搜索引擎统计的热搜词库，即用户搜索频率较高的词语集合。在资源项目数据库中还可以存储有当前平台中的全部媒资项目。当通过图像识别操作在图像中识别出文字“综艺”后，服务器400可以在热搜词库中匹配与“综艺”相关的热搜文本，如《加油××》、《奔跑××》等。

在服务器400对目标图像执行识别处理以获得热搜文本后，服务器400可以向显示设备200反馈该热搜文本。显示设备200再根据反馈的热搜文本渲染推荐窗口。在推荐窗口中，热搜文本可以作为快捷搜索项目，用于在用户选中后，以选中的热搜文本为关键词进行相关资源项目的搜索。

在一些实施例中，服务器400还会反馈识图的结果以及识图推荐。

在一些实施例中，显示设备200接收服务器400反馈的识图结果和识图推荐，以及热搜词结果和热搜推荐。

在一些实施例中，视频层中的显示继续进行，即，如果原来有视频播放则继续播放，如果有轮播图片继续轮播，图片的展示一切均按照被截图界面原有逻辑进行，不进行打断。在视频层上方的浮层中，显示服务器400反馈的结果。

在一些实施例中，根据识图结果和识图推荐生成识图标题控件，根据热搜词结果和热搜推荐生成热搜词标题控件，这两个控件可以获取焦点，在焦点位于识图标题控件时，浮层中展示识图结果和识图推荐，在焦点位于热搜词标题控件时，展示热搜词结果和热搜推荐。识图标题控件和热搜词标题控件在浮层中作为标题栏长存，浮层中的标题栏和浮层中可切换显示的内容显示区之间的逻辑关系和主页中的标题栏即主页内容区之间的逻辑关系。

在一些实施例中，在焦点位于识图标题控件时，浮层中内容区的中间位置展示截图，在截图的一侧展示识图识别出的人物，另一侧显示推荐(和图7类似)。在焦点位于热搜词标题控件，在中间位置展示搜索框和热搜词控件，在中间位置两侧，展示热搜推荐。

在一些实施例中，只中间位置进行切换，中间位置的一侧展示识图反馈的人物，另一侧展示推荐，在焦点位于识图标题控件时，浮层中内容区的中间位置展示截图。在焦点位于热搜词标题控件，在中间位置展示搜索框和热搜词控件。

在基于推荐窗口的搜索过程中，显示设备200可以根据用户选中的热搜文本，向服务器400发送搜索请求。服务器400则可以在接收到搜索请求后，在搜索请求中解析热搜文本，并根据热搜文本在资源数据库中查询符合业务场景的项目，以获得推荐项目。

例如，如图12所示，当显示设备200接收到的识图指令是针对一张带有汽车的目标图像进行识图操作。则过检测当前用户界面归属的业务场景为视频业务场景后，向服务器400发送图像识别请求。服务器400在接收到图像识别请求后，可以解析目标图像，并识别出图像内的“汽车”目标，并通过热搜词库匹配到热搜文本“速度与××”、“××飞车”，并反馈给显示设备200。

显示设备200再根据热搜文本“速度与××”、“××飞车”渲染推荐窗口，渲染的推荐窗口中包括“速度与××”、“××飞车”选项。当用户控制选中“速度与××”选项后，显示设备200再向服务器400发送包含选中热搜文本的搜索请求。服务器400再根据搜索请求，在当前视频业务场景对应的资源子集中搜索与“速度与××”相关联的推荐项目，即《速度与××8》、《速度与××10》等电影资源。

可见，在不同的业务场景下，服务器400根据热搜文本查询到的推荐项目是不同的。例如，对于同一张包含汽车的图片，在视频业务场景下，获得的热搜文本和推荐项目是与汽车有关的影片信息，即热搜文本是“速度与××”、“××飞车”等影片名称，推荐项目是《速度与××》、《××飞车》等电影资源。而在教育场景下，获得的热搜文本和推荐项目是跟汽车相关的动画片或者教学类视频。即如图13所示，热搜词是“汽车小镇”、“汽车总动员”等动画片名称，推荐项目是《汽车小镇》、《汽车总动员》等动画片资源。而在应用游戏场景下，推荐的热搜文本和推荐项目是与汽车相关的游戏资源，即如图14所示，热搜文本为“××卡丁车”、“××飞车”等游戏名称，推荐的游戏内容也是与汽车相关的游戏。

在上述实施例中，推荐窗口可以是悬浮显示在用户界面上层的独立窗口，也可以是显示设备200跳转后的新界面。在推荐窗口中可以包括基于热搜文本和推荐项目链接生成的选项。用户可以通过推荐窗口执行交互操作，控制显示设备200基于推荐项目执行选中、预览等操作，控制显示设备200基于推荐窗口中的推荐项目进行播放、浏览、跳转等操作。

在一些实施例中，服务器400可以仅根据识别出的文字结果进行热搜文本的推荐，同时仅根据人物识别结果进行媒资的推荐。在一些实施例中，还可以同时根据识别出的文字结果和人物识别记过进行热搜文本的推荐和/或媒资的推荐。

在一些实施例中，截图中包含的文字结果可能会很多，此时服务器400可以仅根据和人物识别结果满足预设位置关系的文字识别结果进行热搜文本的推荐，忽略不满足位置关系的文字识别结果。

在一些实施例中，在未识别到文字结果时，服务器400还可以根据当前搜索功能的热搜索进行热搜文本的推荐。

在一些实施例中，推荐窗口可以包括多个用于显示不同内容的区域。例如，推荐窗口可以位于当前用户界面底部区域的长条形窗口。在推荐窗口的长条形窗口中，可以包括位于中部搜索区和位于两侧的推荐项目区。显示设备200可以在搜索区中显示搜素框和位于搜索框下方的热搜文本选项，以供用户选中。当用户选中任一热搜文本选项时，显示设备200可以自动执行对该热搜文本的搜索操作。

在一些实施例中，为了呈现推荐窗口，显示设备200可以在用户界面所在图层的上层创建显示图层，并获取热搜文本和推荐项目。再调用推荐窗口的显示模板，以向显示模板中添加热搜文本和推荐项目，形成推荐画面。最后，在显示图层中显示推荐画面。例如，在执行搜索操作后，显示设备200可以在当前用户界面的OSD层上显示搜索结果界面。

如图12所示，显示设备200在执行搜索时，可以在当前业务场景内进行搜索，以从当前业务场景对应的资源子集中搜索出与选中热搜文本相关联的资源项目。例如，用户在选中热搜文本“速度与××”后，显示设备200可以向服务器400发送包含文本“速度与××”是搜索词，使服务器400可以在当前媒资平台匹配与“速度与××”相关的媒资项目，再反馈给显示设备200，以在显示设备200的OSD层渲染一个展示窗口，展示匹配获得的推荐项目，如图15所示。

同理，显示设备200在执行搜索时，也可以通过网络搜索引擎执行全网搜索。例如，在用户选中任一热搜文本后，显示设备200可以通过访问指定的搜索类网站，并以选中的热搜文本为关键词，通过该搜索类网站进行全网搜索，并在显示设备200的OSD层显示搜索结果网页，如图16所示。

在一些实施例中，显示设备200在执行搜索过程中，可以先后按照上述两种方式显示搜索结果。即在用户选中任一热搜文本后，可以在OSD层渲染两个窗口，分别用于展示当前媒资平台内的搜索结果和全网搜索结果。

在一些实施例中，显示设备200在执行搜索过程中，也可以先在当前业务场景内进行搜索，并将搜索结果进行展示。当展示当前业务场景内的搜索结果一定时间，或者用户输入全网搜索的指令后，再以选中的热搜文本为搜索词进行全网搜索，并呈现全网搜索结果。

显然，如果用户未选中热搜文本而选中搜索框时，显示设备200可以启动常规搜索功能。即如图17所示，在用户选中搜索框后，可以在OSD层中显示输入控件，如键盘、手写板、语音助手等。用户可以基于显示是输入控件，输入想要进行搜索的文本内容。

显示设备200可以在推荐项目区中显示推荐项目。所显示的推荐项目可以根据用户的交互操作进行实时变化，例如，在用户点击“速度与××”的热搜文本选项后，显示设备200可以根据在当前业务场景内的搜索结果，获取与“速度与××”相关联的推荐项目，即《速度与××1》、《速度与××8》等媒资项目，并显示在推荐项目区内。

显示设备200也可以在渲染推荐窗口时，在推荐项目区内显示初始推荐内容。其中，初始推荐内容可以是服务器400在进行图像识别时，根据匹配的热搜文本查询的推荐项目。即在一些实施例中，服务器400在进行图像识别获取热搜文本后，根据热搜文本，在资源数据库中查询获得的符合业务场景的推荐项目，并将推荐项目与热搜文本共同组成关联数据，以反馈给显示设备200。显示设备200再根据关联数据在用户界面中渲染推荐窗口。

例如，服务器400通过图像识别操作在图像中识别出汽车目标后，匹配在少儿模式下汽车目标对应的热搜文本为“汽车小镇”、“汽车总动员”。服务器400再根据该热搜文本在少儿模式对应的资源项目数据库中匹配与“汽车小镇”、“汽车总动员”有关的影视内容，即《汽车小镇》、《汽车总动员》，并提取对应的媒资地址。因此，服务器400可以将“汽车小镇”、“汽车总动员”等热搜文本和《汽车小镇》、《汽车总动员》的媒资地址组合为关联数据，并反馈给显示设备200。从而在显示推荐窗口时，可以在推荐项目区域显示《汽车小镇》、《汽车总动员》的媒资项目。

可见，通过上述实施例提供的推荐窗口显示方法，显示设备200可以在使用识图功能时，利用检测的当前业务场景对热搜文本和推荐项目进行筛选，从而在推荐窗口中显示更加符合用户当前需求的热搜项目和推荐资源，简化推荐窗口中的资源项目，便于用户操作。

上述实施例中，识图功能的目标图像可以是一个特定的图片文件，也可以是当前用户界面中的特定画面。当识图操作针对的目标图像不同时，显示设备200可以采用不同的程序步骤。即如图18所示，在一些实施例中，显示设备200可以在获取用户输入的识图指令的步骤后，检测识图指令中指定的目标图像。如果识图指令中指定了目标图像所指示的具体图片文件，即确定用户针对特定的图片文件进行识图操作，因此可以直接提取该图片，以生成图像识别请求发送给服务器400进行图像识别处理。

如果识图指令中未指定目标图像，即确定用户未针对特定的图片文件使用识图功能。此时，显示设备200可以默认对当前显示内容使用识图功能，因此可以生成截图命令，并向业务操作系统广播截图命令。业务操作系统在接收到截图命令后，可以响应于截图命令，对当前用户界面执行截图操作，以生成目标图像。

例如，用户在看到当前用户界面上某些影片的海报或封面时，可能对该影片或演员产生兴趣，或者想要了解该影片对应的详细信息。为此，用户可以按下控制装置100上的识图按键，则由于没有针对特定的图片文件，显示设备200可以生成截图命令，并根据截图命令对当前用户界面进行截图，以生成目标图像。再通过图像识别请求发送给服务器400，以通过图像识别技术，对图像进行识别处理，以便从图像中识别出影片名称、演员名字等相关信息。

在一些实施例中，当服务器400向显示设备200反馈的热搜文本数量较多时，显示设备200还可以在接收到关联数据后，对其中的热搜文本进行筛选。即显示设备200可以在根据关联数据在用户界面中渲染推荐窗口时，遍历关联数据中的热搜文本，以筛选出符合业务场景的文本集合，再根据文本集合生成热搜选项，其中，每个热搜选项中包括至少一个符合业务场景的热搜文本，以向推荐窗口中添加热搜选项。

在一些实施例中，推荐项目在推荐窗口还可以按照使用热度进行排序，以便用户可以选择热门项目内容。即在根据关联数据在用户界面中渲染推荐窗口时，显示设备200可以遍历关联数据中的推荐项目，再根据推荐项目名称查询各项目的使用热度，从而按照使用热度由高至低的顺序，将推荐项目添加至推荐窗口中。

基于上述显示设备200以及推荐窗口显示方法，在本申请的部分实施例中还提供一种服务器400，包括：存储单元、通信单元以及处理单元。其中，存储单元，被配置为存储资源数据库；通信单元，被配置为与显示设备建立通信连接；如图19所示，所述处理单元被配置为执行以下程序步骤：

获取显示设备发送的图像识别请求，所述图像识别请求包括目标图像和显示设备当前用户界面归属的业务场景；

对目标图像执行图像识别，以获得热搜文本；

根据热搜文本在资源数据库中查询符合业务场景的项目，以获得推荐项目；

生成关联数据，所述关联数据包括热搜文本和推荐项目；

向显示设备反馈关联数据，以使显示设备根据关联数据在用户界面中渲染推荐窗口。

由以上技术方案可知，上述实施例提供的服务器400可以在获取显示设备200发送的图像识别请求后，对目标图像执行图像识别以获得热搜文本，再根据热搜文本在资源数据库中查询符合业务场景的项目，以获得推荐项目；从而生成关联数据并向显示设备200反馈关联数据，以使显示设备200根据关联数据在用户界面中渲染推荐窗口。所述服务器400可以在进行图像识别的基础上，根据不同的业务场景，获得相应的热搜文本和推荐项目，从而使显示设备200渲染的推荐窗口中的项目能够与当前业务场景相适应，减少冗余信息，提升该业务场景下的用户体验。

本申请提供的实施例之间的相似部分相互参见即可，以上提供的具体实施方式只是本申请总的构思下的几个示例，并不构成本申请保护范围的限定。对于本领域的技术人员而言，在不付出创造性劳动的前提下依据本申请方案所扩展出的任何其他实施方式都属于本申请的保护范围。

Claims (10)

1.一种显示设备，其特征在于，包括：

显示器，被配置为显示用户界面；

通信器，被配置为连接服务器；

控制器，被配置为：

获取用户输入的识图指令；

响应于所述识图指令，检测当前用户界面归属的业务场景；

向所述服务器发送图像识别请求，所述图像识别请求包括目标图像和所述业务场景；

接收所述服务器针对所述图像识别请求反馈的关联数据，所述关联数据包括热搜文本和/或推荐项目；所述热搜文本通过对所述目标图像执行图像识别获得；所述推荐项目为根据所述热搜文本，在资源数据库中查询获得的符合所述业务场景的项目；

根据所述关联数据在所述用户界面中渲染推荐窗口。

2.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

在检测当前用户界面归属的业务场景的步骤中，调用当前用户界面的业务应用；

向所述业务应用发送场景上报通知；

接收所述业务应用针对所述场景上报通知返回的业务场景。

3.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

在检测当前用户界面归属的业务场景的步骤中，获取所述用户界面中的焦点光标位置；

根据所述焦点光标位置提取当前焦点频道名称；

调用标准业务库，以及在所述标准业务库中查询与所述焦点频道名称相匹配的业务场景。

4.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

获取用户输入的用于进入或退出业务场景的控制指令；

响应于所述控制指令，将当前业务场景写入系统属性数据库中；

在检测当前用户界面归属的业务场景时，从所述系统属性数据库中查询当前用户界面归属的业务场景。

5.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

在获取用户输入的识图指令的步骤后，检测所述识图指令中指定的目标图像；

如果所述识图指令中未指定目标图像，生成截图命令；

向业务操作系统广播所述截图命令；

控制所述业务操作系统响应于所述截图命令，对当前用户界面执行截图操作，以生成所述目标图像。

6.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

在根据所述关联数据在所述用户界面中渲染推荐窗口的步骤中，遍历所述关联数据中的热搜文本，以筛选出符合所述业务场景的文本集合；

根据所述文本集合生成热搜选项，每个所述热搜选项中包括至少一个符合所述业务场景的热搜文本；

向所述推荐窗口中添加所述热搜选项。

7.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

在根据所述关联数据在所述用户界面中渲染推荐窗口的步骤中，遍历所述关联数据中的推荐项目；

根据所述推荐项目名称查询各项目的使用热度；

按照所述使用热度由高至低的顺序，将所述推荐项目添加至所述推荐窗口中。

8.一种服务器，其特征在于，包括：

存储单元，被配置为存储资源数据库；

通信单元，被配置为与显示设备建立通信连接；

处理单元，被配置为：

获取所述显示设备发送的图像识别请求，所述图像识别请求包括目标图像和所述显示设备当前用户界面归属的业务场景；

对所述目标图像执行图像识别，以获得热搜文本；

根据所述热搜文本在资源数据库中查询符合所述业务场景的项目，以获得推荐项目；

生成关联数据，所述关联数据包括所述热搜文本和推荐项目；

向所述显示设备反馈所述关联数据，以使所述显示设备根据所述关联数据在所述用户界面中渲染推荐窗口。

9.根据权利要求8所述的服务器，其特征在于，所述处理单元被进一步配置为：

在对所述目标图像执行图像识别的步骤中，将所述目标图像输入图像识别模型，以获取图像识别结果，所述图像识别结果包括关键词；

提取所述业务场景下的热搜词库；

在所述热搜词库中匹配与所述关键词关联的热搜文本。

10.一种推荐窗口显示方法，其特征在于，包括：

显示设备获取用户输入的识图指令，并响应于所述识图指令，检测当前用户界面归属的业务场景；

所述显示设备向服务器所述发送图像识别请求，所述图像识别请求包括目标图像和所述业务场景；

所述服务器对所述目标图像执行图像识别，以获得热搜文本；以及，根据所述热搜文本在资源数据库中查询符合所述业务场景的项目，以获得推荐项目；

所述服务器生成关联数据，并向所述显示设备反馈所述关联数据，所述关联数据包括所述热搜文本和/或推荐项目；

所述显示设备根据所述关联数据在所述用户界面中渲染推荐窗口。

Images