CN113727162A - 显示设备、服务器及人物介绍展示方法 - Google Patents

显示设备、服务器及人物介绍展示方法 Download PDF

Info

Publication number
CN113727162A
CN113727162A CN202010448764.2A CN202010448764A CN113727162A CN 113727162 A CN113727162 A CN 113727162A CN 202010448764 A CN202010448764 A CN 202010448764A CN 113727162 A CN113727162 A CN 113727162A
Authority
CN
China
Prior art keywords
display
information
image
face
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010448764.2A
Other languages
English (en)
Inventor
王光强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Juhaokan Technology Co Ltd
Original Assignee
Juhaokan Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Juhaokan Technology Co Ltd filed Critical Juhaokan Technology Co Ltd
Priority to CN202010448764.2A priority Critical patent/CN113727162A/zh
Priority to CN202180060814.2A priority patent/CN116325770A/zh
Priority to PCT/CN2021/094553 priority patent/WO2021238733A1/zh
Publication of CN113727162A publication Critical patent/CN113727162A/zh
Priority to US17/849,640 priority patent/US11863829B2/en
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请公开了一种显示设备、服务器及人物介绍展示方法,所述显示设备包括:显示器;控制器,所述控制器与所述显示器通信连接,所述控制器被配置为:接收识别指令,所述识别指令用于对显示器显示的显示界面截图并生成截屏图像;获取所述截屏图像中人脸的识别结果;在人脸的识别结果为多个人物时,控制所述显示器显示所述截屏图像并展示所述人物的角色信息,其中,角色信息是在影视节目中的角色的介绍信息;在人脸的识别结果为一个人物时,控制所述显示器显示所述截屏图像并展示所述人物的介绍信息。在本申请中,当用户想要了解媒资中的人物时,能够通过向显示设备发送识别指令从而快速的获取到不同的场景下不同的人物信息,提升用户的观看体验。

Description

显示设备、服务器及人物介绍展示方法
技术领域
本申请涉及电视技术领域,尤其涉及一种显示设备、服务器及人物介绍展示方法。
背景技术
智能电视是一种可实现双向人机交互功能,集影音、娱乐、数据等多种功能于一体的电视产品。智能电视的用户界面被用于其与用户之间进行交互和信息交换的媒介,为满足用户多样化的需求,对应显示有影音、娱乐等多种应用程序。
用户根据自己的观看需求,从智能电视上搜索媒资进行观看。目前,当用户在观看电影、电视剧等电视节目时,若是想要了解节目中的人物的相关信息时,一般需要用户自己手动输入关键词并进行搜索,例如,用户在观看《我是余欢水》这部电视剧,想要了解剧中余欢水的饰演者,则需要通过浏览器搜索《我是余欢水》的演职人员表,或者直接搜索余欢水的饰演者。但是在智能电视上,关键词的输入和搜索操作都比较麻烦,从而使得用户体验效果较差。
发明内容
本申请提供了一种显示设备、服务器及人物介绍展示方法,以解决现有技术中由于用户无法快捷了解自己所观看节目中人物信息导致用户体验效果差的技术问题。
为了解决上述技术问题,本申请实施例公开了如下技术方案:
第一方面,本申请实施例公开了一种显示设备,所述显示设备包括:
显示器;
控制器,所述控制器与所述显示器通信连接,所述控制器被配置为:
接收识别指令,所述识别指令用于对显示器显示的显示界面截图并生成截屏图像;
获取所述截屏图像中人脸的识别结果;
在所述人脸的识别结果为多个人物时,控制所述显示器显示所述截屏图像并展示所述人物的角色信息,其中,所述角色信息是在影视节目中的角色的介绍信息;
在所述人脸的识别结果为一个人物时,控制所述显示器显示所述截屏图像并展示所述人物的介绍信息。
第二方面,本申请实施例公开了一种服务器,所述服务器被配置为:
接收显示设备根据识别指令发送的识别结果获取请求;
根据所述识别结果获取请求对截屏图像中的人物进行识别;
在所述人脸的识别结果为多个人物时,向所述显示设备发送所述截屏图像中所述人物的角色信息,以使所述显示设备展示所述角色信息,其中,所述角色信息是在影视节目中的角色的介绍信息;或者,
在所述人脸的识别结果为一个人物时,向所述显示设备发送所述截屏图像中所述人物的介绍信息,以使所述显示设备展示所述介绍信息。
第三方面,本申请实施例公开了一种人物介绍展示方法,所述方法包括:
接收识别指令,所述识别指令用于对显示器显示的显示界面截图并生成截屏图像;
获取所述截屏图像中人脸的识别结果;
在所述人脸的识别结果为多个人物时,控制所述显示器显示所述截屏图像并展示所述人物的角色信息,其中,所述角色信息是在影视节目中的角色的介绍信息;
在所述人脸的识别结果为一个人物时,控制所述显示器显示所述截屏图像并展示所述人物的介绍信息。
与现有技术相比,本申请的有益效果为:
本申请提供了一种显示设备、服务器及人物介绍展示方法,用户通过显示设备观看媒资时,可通过发送识别指令,控制器根据识别指令对显示器显示的显示界面进行截图,并相应的生成截屏图像,进而控制器获取截屏图像中的人脸识别结果。本申请中,在不同场景下进行不同的人物介绍,即根据截屏图像中不同的人脸识别结果进行不同的人物介绍。,在人脸的识别结果为多个人物时,用户可能更多的想要了解人物在影视节目中的角色信息,所以控制器控制显示器展示出截屏图像及人物的角色信息。在人脸的识别结果为一个人物时,用户则是更多想要了解当前人物的介绍信息,所以控制器控制显示器展示出截屏图像及人物的介绍信息。如此,在本申请中,当用户想要了解媒资中的人物时,能够通过向显示设备发送识别指令从而快速的获取到不同的场景下不同的人物信息,提升用户的观看体验。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请一些实施方式中提供的一种显示设备的应用场景图;
图2为本申请一些实施方式中提供的图1中控制装置100的硬件配置框图;
图3为本申请一些实施方式中提供的图1中显示设备200的硬件配置框图;
图4为本申请一些实施方式中提供的显示设备200存储器中操作系统的架构配置框图;
图5为本申请一些实施方式中提供一种人物介绍展示方法的流程示意图;
图6A为本申请一些实施方式中提供的多人物场景下的进行截图时的界面;
图6B为本申请一些实施方式中提供的多人物场景下的角色信息展示图;
图6C为本申请一些实施方式中提供的另一种多人物场景下的角色信息展示图;
图6D为本申请一些实施方式中提供的单人物场景下的进行截图时的界面;
图6E为本申请一些实施方式中提供的单人物场景下的介绍信息展示图;
图7为本申请一些实施方式中提供一种人物介绍推荐方法的流程示意图;
图8为本申请一些实施方式中提供的截屏图像中人物识别的流程示意图;
图9为本申请一些实施方式中提供的图7中服务器获取截屏图像中人物角色信息的流程示意图;
图10为本申请一些实施方式中提供的图7中服务器获取截屏图像中人物介绍信息的流程示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请中的技术方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
用户在通过显示设备观看影视媒资时,通常会因为对所观看影视媒资中的很多人物不了解,导致剧情观看受阻。对于用户的观看需求来说,不仅是想要了解影视媒资中的演员等人物以使剧情观看更加顺畅,而且对于纪录片、人物专访等媒资中的人物,也想要充分了解以使更加深刻了解所观看媒资。为了用户能够更加快捷的获取观看媒资中的人物信息,本申请实施例提供了显示设备、服务器及人物介绍展示方法。
参见图1,为本申请一些实施方式中提供的一种显示设备的应用场景图。如图1所示,控制装置100和显示设备200之间可以有线或无线方式进行通信。
其中,控制装置100被配置为控制显示设备200,其可接收用户输入的操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起着用户与显示设备200之间交互的中介作用。如:用户通过操作控制装置100上频道加减键,显示设备200响应频道加减的操作。
控制装置100可以是遥控器100A,包括红外协议通信或蓝牙协议通信,及其他短距离通信方式等,通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。
控制装置100也可以是智能设备,如移动终端100B、平板电脑、计算机、笔记本电脑等。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序通过配置可以在与智能设备关联的屏幕上,通过直观的用户界面(UI)为用户提供各种控制。
示例性的,移动终端100B可与显示设备200安装软件应用,通过网络通信协议实现连接通信,实现一对一控制操作的和数据通信的目的。如:可以使移动终端100B与显示设备200建立控制指令协议,通过操作移动终端100B上提供的用户界面的各种功能键或虚拟按钮,来实现如遥控器100A布置的实体按键的功能。也可以将移动终端100B上显示的音视频内容传输到显示设备200上,实现同步显示功能。
显示设备200可提供广播接收功能和计算机支持功能的网络电视功能。显示设备可以实施为,数字电视、网络电视、互联网协议电视(IPTV)等。
显示设备200,可以是液晶显示器、有机发光显示器、投影设备。具体显示设备类型、尺寸大小和分辨率等不作限定。
显示设备200还与服务器300通过多种通信方式进行数据通信。这里可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器300可以向显示设备200提供各种内容和互动。示例的,显示设备200可以发送和接收信息,例如:接收电子节目指南(EPG)数据、接收软件程序更新、或访问远程储存的数字媒体库。服务器300可以一组,也可以多组,可以一类或多类服务器。通过服务器300提供视频点播和广告服务等其他网络服务内容。
图2中示例性示出了控制装置100的配置框图。如图2所示,控制装置100包括控制器110、存储器120、通信器130、用户输入接口140、用户输出接口150、供电电源160。
控制器110包括随机存取存储器(RAM)111、只读存储器(ROM)112、处理器113、通信接口以及通信总线。控制器110用于控制控制装置100的运行和操作,以及内部各部件之间的通信协作、外部和内部的数据处理功能。
示例性的,当检测到用户按压在遥控器100A上布置的按键的交互或触摸在遥控器100A上布置的触摸面板的交互时,控制器110可控制产生与检测到的交互相应的信号,并将该信号发送到显示设备200。
存储器120,用于在控制器110的控制下存储驱动和控制控制装置100的各种运行程序、数据和应用。存储器120,可以存储用户输入的各类控制信号指令。
通信器130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:控制装置100经由通信器130将控制信号(例如触摸信号或按钮信号)发送至显示设备200上,控制装置100可经由通信器130接收由显示设备200发送的信号。通信器130可以包括红外信号接口131和射频信号接口132。例如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。
用户输入接口140,可包括麦克风141、触摸板142、传感器143、按键144等中至少一者,从而用户可以通过语音、触摸、手势、按压等将关于控制显示设备200的用户指令输入到控制装置100。
用户输出接口150,通过将用户输入接口140接收的用户指令输出至显示设备200,或者,输出由显示设备200接收的图像或语音信号。这里,用户输出接口150可以包括LED接口151、产生振动的振动接口152、输出声音的声音输出接口153和输出图像的显示器154等。例如,遥控器100A可从用户输出接口150接收音频、视频或数据等输出信号,并且将输出信号在显示器154上显示为图像形式、在声音输出接口153输出为音频形式或在振动接口152输出为振动形式。
供电电源160,用于在控制器110的控制下为控制装置100各元件提供运行电力支持。形式可以为电池及相关控制电路。
图3中示例性示出了显示设备200的硬件配置框图。如图3所示,显示设备200中可以包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、存储器260、用户接口265、视频处理器270、显示器275、音频处理器280、音频输出接口285、供电电源290。
调谐解调器210,通过有线或无线方式接收广播电视信号,可以进行放大、混频和谐振等调制解调处理,用于从多个无线或有线广播电视信号中解调出用户所选择的电视频道的频率中所携带的音视频信号,以及附加信息(例如EPG数据)。
调谐解调器210,可根据用户选择,以及由控制器250控制,响应用户选择的电视频道的频率以及该频率所携带的电视信号。
调谐解调器210,根据电视信号的广播制式不同,可以接收信号的途径有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播等;以及根据调制类型不同,可以数字调制方式或模拟调制方式;以及根据接收电视信号的种类不同,可以解调模拟信号和数字信号。
在其他一些示例性实施例中,调谐解调器210也可在外部设备中,如外部机顶盒等。这样,机顶盒通过调制解调后输出电视信号,经过外部装置接口240输入至显示设备200中。
通信器220,是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如显示设备200可将内容数据发送至经由通信器220连接的外部设备,或者,从经由通信器220连接的外部设备浏览和下载内容数据。通信器220可以包括WIFI模块221、蓝牙通信协议模块222、有线以太网通信协议模块223等网络通信协议模块或近场通信协议模块,从而通信器220可根据控制器250的控制接收控制装置100的控制信号,并将控制信号实现为WIFI信号、蓝牙信号、射频信号等。
检测器230,是显示设备200用于采集外部环境或与外部交互的信号的组件。检测器230可以包括声音采集器231,如麦克风,可以用于接收用户的声音,如用户控制显示设备200的控制指令的语音信号;或者,可以采集用于识别环境场景类型的环境声音,实现显示设备200可以自适应环境噪声。
在其他一些示例性实施例中,检测器230,还可以包括图像采集器232,如相机、摄像头等,可以用于采集外部环境场景,以自适应变化显示设备200的显示参数;以及用于采集用户的属性或与用户交互手势,以实现显示设备与用户之间互动的功能。
在其他一些示例性实施例中,检测器230,还可以包括光接收器,用于采集环境光线强度,以自适应显示设备200的显示参数变化等。
在其他一些示例性实施例中,检测器230,还可以包括温度传感器,如通过感测环境温度,显示设备200可自适应调整图像的显示色温。示例性的,当温度偏高的环境时,可调整显示设备200显示图像色温偏冷色调;当温度偏低的环境时,可以调整显示设备200显示图像色温偏暖色调。
外部装置接口240,是提供控制器250控制显示设备200与外部设备间数据传输的组件。外部装置接口240可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等外部设备连接,可接收外部设备的诸如视频信号(例如运动图像)、音频信号(例如音乐)、附加信息(例如EPG)等数据。
其中,外部装置接口240可以包括:高清多媒体接口(HDMI)端子241、复合视频消隐同步(CVBS)端子242、模拟或数字分量端子243、通用串行总线(USB)端子244、组件(Component)端子(图中未示出)、红绿蓝(RGB)端子(图中未示出)等任一个或多个。
控制器250,通过运行存储在存储器260上的各种软件控制程序(如操作系统和各种应用程序),来控制显示设备200的工作和响应用户的操作。
如图3所示,控制器250包括随机存取存储器(RAM)251、只读存储器(ROM)252、图形处理器253、CPU处理器254、通信接口255、以及通信总线256。其中,RAM251、ROM252以及图形处理器253、CPU处理器254通信接口255通过通信总线256相连接。
ROM252,用于存储各种系统启动指令。如在接收到开机信号时,显示设备200电源开始启动,CPU处理器254运行ROM252中的系统启动指令,将存储在存储器260的操作系统拷贝至RAM251中,以开始运行启动操作系统。当操作系统启动完成后,CPU处理器254再将存储器260中各种应用程序拷贝至RAM251中,然后,开始运行启动各种应用程序。
图形处理器253,用于产生各种图形对象,如图标、操作菜单、以及用户输入指令显示图形等。图形处理器253可以包括运算器,用于通过接收用户输入各种交互指令进行运算,进而根据显示属性显示各种对象;以及包括渲染器,用于产生基于运算器得到的各种对象,将进行渲染的结果显示在显示器275上。
CPU处理器254,用于执行存储在存储器260中的操作系统和应用程序指令。以及根据接收的用户输入指令,来执行各种应用程序、数据和内容的处理,以便最终显示和播放各种音视频内容。
在一些示例性实施例中,CPU处理器254,可以包括多个处理器。多个处理器可包括一个主处理器以及多个或一个子处理器。主处理器,用于在显示设备预加载模式中执行显示设备200的一些初始化操作,和/或,在正常模式下显示画面的操作。多个或一个子处理器,用于执行在显示设备待机模式等状态下的一种操作。
通信接口255,可包括第一接口到第n接口。这些接口可以是经由网络被连接到外部设备的网络接口。
控制器250可以控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器275上显示的GUI对象的用户输入命令,控制器250便可以执行与由用户输入命令选择的对象有关的操作。
其中,该对象可以是可选对象中的任何一个,例如超链接或图标。该与所选择的对象有关的操作,例如显示连接到超链接页面、文档、图像等操作,或者执行与对象相对应的程序的操作。该用于选择GUI对象的用户输入命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
存储器260,用于存储驱动和控制显示设备200运行的各种类型的数据、软件程序或应用程序。存储器260可以包括易失性和/或非易失性存储器。而术语“存储器”包括存储器260、控制器250的RAM251和ROM252、或显示设备200中的存储卡。
在一些实施方式中,存储器260具体用于存储驱动显示设备200中控制器250的运行程序;存储显示设备200内置的和用户从外部设备下载的各种应用程序;存储用于配置由显示器275提供的各种GUI、与GUI相关的各种对象及用于选择GUI对象的选择器的视觉效果图像等数据。
在一些实施方式中,存储器260具体用于存储调谐解调器210、通信器220、检测器230、外部装置接口240、视频处理器270、显示器275、音频处理器280等的驱动程序和相关数据,例如从外部装置接口接收的外部数据(例如音视频数据)或用户接口接收的用户数据(例如按键信息、语音信息、触摸信息等)。
在一些实施方式中,存储器260具体存储用于表示操作系统(OS)的软件和/或程序,这些软件和/或程序可包括,例如:内核、中间件、应用编程接口(API)和/或应用程序。示例性的,内核可控制或管理系统资源,以及其它程序所实施的功能(如所述中间件、API或应用程序);同时,内核可以提供接口,以允许中间件、API或应用程序访问控制器,以实现控制或管理系统资源。
图4中示例性示出了显示设备200存储器中操作系统的架构配置框图。该操作系统架构从上到下依次是应用层、中间件层和内核层。
应用层,系统内置的应用程序以及非系统级的应用程序都是属于应用层。负责与用户进行直接交互。应用层可包括多个应用程序,如设置应用程序、电子帖应用程序、媒体中心应用程序等。这些应用程序可被实现为Web应用,其基于WebKit引擎来执行,具体可基于HTML5、层叠样式表(CSS)和JavaScript来开发并执行。
这里,HTML,全称为超文本标记语言(HyperText Markup Language),是一种用于创建网页的标准标记语言,通过标记标签来描述网页,HTML标签用以说明文字、图形、动画、声音、表格、链接等,浏览器会读取HTML文档,解释文档内标签的内容,并以网页的形式显示出来。
CSS,全称为层叠样式表(Cascading Style Sheets),是一种用来表现HTML文件样式的计算机语言,可以用来定义样式结构,如字体、颜色、位置等的语言。CSS样式可以直接存储与HTML网页或者单独的样式文件中,实现对网页中样式的控制。
JavaScript,是一种应用于Web网页编程的语言,可以插入HTML页面并由浏览器解释执行。其中Web应用的交互逻辑都是通过JavaScript实现。JavaScript可以通过浏览器,封装JavaScript扩展接口,实现与内核层的通信,
中间件层,可以提供一些标准化的接口,以支持各种环境和系统的操作。例如,中间件层可以实现为与数据广播相关的中间件的多媒体和超媒体信息编码专家组(MHEG),还可以实现为与外部设备通信相关的中间件的DLNA中间件,还可以实现为提供显示设备内各应用程序所运行的浏览器环境的中间件等。
内核层,提供核心系统服务,例如:文件管理、内存管理、进程管理、网络管理、系统安全权限管理等服务。内核层可以被实现为基于各种操作系统的内核,例如,基于Linux操作系统的内核。
内核层也同时提供系统软件和硬件之间的通信,为各种硬件提供设备驱动服务,例如:为显示器提供显示驱动程序、为摄像头提供摄像头驱动程序、为遥控器提供按键驱动程序、为WIFI模块提供WiFi驱动程序、为音频输出接口提供音频驱动程序、为电源管理(PM)模块提供电源管理驱动等。
用户接口265,接收各种用户交互。具体的,用于将用户的输入信号发送给控制器250,或者,将从控制器250的输出信号传送给用户。示例性的,遥控器100A可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户接口265,再由用户接口265转送至控制器250;或者,遥控器100A可接收经控制器250处理从用户接口265输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
在一些实施方式中,用户可在显示器275上显示的图形用户界面(GUI)输入用户命令,则用户接口265通过GUI接收用户输入命令。确切的说,用户接口265可接收用于控制选择器在GUI中的位置以选择不同的对象或项目的用户输入命令。
或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户接口265通过传感器识别出声音或手势,来接收用户输入命令。
视频处理器270,用于接收外部的视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理,可得到直接在显示器275上显示或播放的视频信号。
示例的,视频处理器270,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2流(基于数字存储媒体运动图像和语音的压缩标准),则解复用模块将其进行解复用成视频信号和音频信号等。
视频解码模块,用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对输入视频的帧率进行转换,如将输入的60Hz视频的帧率转换为120Hz或240Hz的帧率,通常的格式采用如插帧方式实现。
显示格式化模块,用于将帧率转换模块输出的信号,改变为符合诸如显示器显示格式的信号,如将帧率转换模块输出的信号进行格式转换以输出RGB数据信号。
显示器275,用于接收源自视频处理器270输入的图像信号,进行显示视频内容、图像以及菜单操控界面。显示视频内容,可以来自调谐解调器210接收的广播信号中的视频内容,也可以来自通信器220或外部装置接口240输入的视频内容。显示器275,同时显示显示设备200中产生且用于控制显示设备200的用户操控界面UI。
以及,显示器275可以包括用于呈现画面的显示屏组件以及驱动图像显示的驱动组件。或者,倘若显示器275为一种投影显示器,还可以包括一种投影装置和投影屏幕。
音频处理器280,用于接收外部的音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等音频数据处理,得到可以在扬声器286中播放的音频信号。
示例性的,音频处理器280可以支持各种音频格式。例如MPEG-2、MPEG-4、高级音频编码(AAC)、高效AAC(HE-AAC)等格式。
音频输出接口285,用于在控制器250的控制下接收音频处理器280输出的音频信号,音频输出接口285可包括扬声器286,或输出至外接设备的发生装置的外接音响输出端子287,如耳机输出端子。
在其他一些示例性实施例中,视频处理器270可以包括一个或多个芯片组成。音频处理器280,也可以包括一个或多个芯片组成。
以及,在其他一些示例性实施例中,视频处理器270和音频处理器280,可以为单独的芯片,也可以与控制器250一起集成在一个或多个芯片中。
供电电源290,用于在控制器250的控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电电源290可以是安装在显示设备200内部的内置电源电路,也可以是安装在显示设备200外部的电源。
本申请实施例中的显示设备能够为用户提供人物介绍功能,显示设备中的控制器被配置为执行人物介绍展示过程,并于显示器展示出人物介绍内容。下面结合附图,解释一下本申请实施例提供的人物介绍展示过程。
参见图5,为本申请一些实施方式中提供一种人物介绍展示方法的流程示意图。由图5所示,所述方法包括以下步骤:
S510:接收识别指令,所述识别指令用于对显示器显示的显示界面截图并生成截屏图像。
本申请实施例中,用户在观看显示器275所展示的媒资时,若想要进一步了解剧中人物信息,便可对显示设备200发送识别指令,或者说,用户在打开显示设备后,对显示器275当前显示的显示界面中的人物比较感兴趣时,也可对显示设备200发送识别指令。也就是说,显示设备200在接收到识别指令后,即可根据识别指令得知用户想要了解显示器中当前显示界面中人物的信息。
在一种实现方式中,遥控器上设置有“截图”按键,或者,遥控器中某一特定按键绑定截图功能,例如,将喜爱键或者直播键绑定截图功能。用户在观看媒资时,若是想要了解显示器显示的显示界面中的人物,则通过遥控器上的“截图”按键,或者绑定截图功能的特定按键发出识别指令。在接收到遥控器按键发出的识别指令后,控制器250立即对当前显示界面进行截图,生成截屏图像。
在另一种实现方式中,用户可通过语音输入发出识别指令。例如,用户长按遥控器上的语音输入键,并说出“这个人是谁”。控制器250在接收到用户的语音输入之后,首先将用户的语音输入信息上传至服务器300。服务器300对语音输入信息进行解析,在语音输入信息解析为用户想要了解显示界面中的人物时,就向显示设备200反馈许可指令,显示设备200根据许可指令对显示器275当前显示界面进行截图,在语音输入信息解析为不是了解人物信息时,就不向显示设备200反馈许可指令,那么控制器250就不进行截图操作。
本申请实施例中,控制器250接收用户通过遥控器截图按键或者语音输入发出的识别指令,并根据识别指令对显示器275显示的显示界面进行截图,以此生成截屏图像,其中,截屏图像可以为用户所观看媒资视频中的某一帧图像,也可以为显示器当前显示界面中的图像,例如频道栏中电视剧频道下的展示界面等等。
S520:获取所述截屏图像中人脸的识别结果。
在一些实施方式中,控制器250将根据识别指令生成的截屏图像发送至服务器300,服务器300对截屏图像中的人物进行识别。控制器250将截屏图像发送至服务器300之后,继续向服务器300发送识别结果获取请求,服务器300在接收到识别结果获取请求之后,根据该请求识别截屏图像中的人脸信息。由于用户想要了解的是主要演员,而不是众多群众演员,因此可以增加人脸识别条件,从而减小服务器300的计算量。
在一种实现方式中,由于主要演员一般距离拍摄镜头较近,故其人脸面积相对于群众演员的人脸面积大,还考虑到当前截屏图像中若是有的演员位于画面的边缘处,其人脸只漏出一半,其人脸面积也会较小,基于此,只有当截屏图像中的人脸面积大于预设面积时,才对该人脸进行识别。以此,服务器300对于人脸面积过小的人物的人脸信息不再进行识别,从而减少了部分计算量。
在另一种实现方式中,若是截屏图像中的人物的人脸面积大小排在前几位,则对其进行识别,也就是说服务器300只识别人脸面积在截屏图像中排在前几位的人物。对于人脸面积排在后几位的人物,其人脸面积相对较小,则其对应的人物可能为群众演员等不重要角色,因此,服务器300也没有必要识别人脸面积排在后几位的人物的人脸信息。
在另一种实现方式中,对位于截屏图像中间区域的人脸进行识别。由于在每一帧截屏图像中,位于截屏图像中间区域的人物往往是主要人物,因此,服务器300可仅识别位于截屏图像中间区域的人物的人脸信息。
以上,可通过增设的辅助识别条件,减小服务器300的计算量,有助于服务器300根据识别结果获取请求快速获得截屏图像中的人脸识别结果。
在另一些实施例中,控制器250在根据识别指令获取到的截屏图像之后,将截屏图像对应的时间戳发送给服务器300,以使服务器30根据时间戳确认截屏图像对应的图像帧并根据图像帧进行人脸识别。控制器250在获取截屏图像时,基于媒资播放的时间轴来说,该截屏图像对应媒资中的一个时间戳,根据该时间戳,服务器300就能够从相应的媒资数据中获取到截屏图像。控制器250将时间戳发送给服务器300,由服务器300根据时间戳确认截屏图像对应的图像帧。服务器300再根据控制器250发送的识别结果获取请求对截屏图像中的人脸信息进行识别。
本申请实施例中,服务器300在识别出人脸信息后,得到了识别结果,再将识别结果发送给显示设备200,控制器250接收服务器300发送的识别结果,在识别结果中,根据人脸识别结果中人物的数量,将截屏图像划分了两类,分别是多人物场景和单人物场景。
S530:在所述人脸的识别结果为多个人物时,控制所述显示器显示所述截屏图像并展示所述人物的角色信息。
在识别结果为多个人物时,即多人物场景,服务器300所识别出了截屏图像中的多个人物的人脸信息,即识别出截屏图像中的多个人物,该场景下,用户更多的是想要了解截屏图像中多个人物在影视节目中角色的介绍信息。其中,人物的角色信息是指人物在影视节目中的角色的介绍信息,包括角色名称、角色介绍以及角色之间的关系等等。服务器300识别出多个人物之后,分别获取每个人物的名称以及显示界面对应的媒资的演职人员表,再根据名称和演职人员表确定人物的角色名称。服务器300在根据角色名称获取人物的角色信息,例如,可以通过相应的媒资评价或者媒资简介获取到对各个角色的介绍以及角色之间的关系。最后,服务器300将角色信息反馈至控制器250.控制器250控制显示器275在显示截屏图像时展示出角色信息。
在一些实施方式中,参见图6A,为本申请一些实施方式中提供的多人物场景下的进行截图时的界面,图6B为本申请一些实施方式中提供的多人物场景下的角色信息展示图。结合图6A和图6B,显示器275正在播放《我是余欢水》,控制器250所获取的截屏图像中至少包含余欢水、甘虹以及赵觉民三个角色(或更多)。服务器300对该截屏图像中的人脸信息进行识别后,识别出了三个人物分别是:郭京飞,高露,岳旸。对应的,通过影视剧的演职人员表或预设媒资库或百科信息库获得截屏图像中每个人物在影视剧中的角色,然后进一步的从预设媒资库或百科信息库分别获得三个角色信息。其中,人物的角色信息可以包括:余欢水是公司里业绩最差的员工,退让隐忍、得过且过是他的生存法则,直到嫌他窝囊的妻子甘虹提出离婚,余欢水仍未做出改变,赵觉民是余欢水的领导等等。服务器300将人物的角色信息发送至控制器250,控制器250控制显示器275展示出截屏图像及每个人物的角色信息。
本申请实施例中,控制器250控制在显示器275的当前界面上显示信息浮层,信息浮层包括多个介绍控件和介绍显示区域,用于展示角色信息。如图6B所示,在信息浮层201上,展示有人物列表202及对应的介绍显示区域203,人物列表202中包含截屏图像中多个人物所对应的介绍控件。当前信息浮层201中,由于选中了余欢水所对应的介绍控件,因此介绍显示区域203中展示的是余欢水的角色信息,用户通过遥控器输入切换指令,例如,将焦点移动至人物列表202中,并通过遥控器上的左/右方向按键控制焦点移动至甘虹或者赵觉民所对应的介绍控件上,则在介绍显示区域203中相应的展示有甘虹或者赵觉民的角色信息。信息浮层201还用于展示人物的介绍信息,例如,可以在人物列表202中仅展示出余欢水的介绍控件,在介绍显示区域203中展示出郭京飞的介绍信息。需要说明的是,信息浮层201在展示角色信息或者介绍信息时,可将对应的截屏图像设置为背景图,并浮于文字下方,也可将对应的截屏图像放置于信息浮层201中的一侧。
在一些实施方式中,还可以包括设置在浮层上的高亮框控件,高亮框控件位于信息浮层201中的截屏图像上方,高亮框控件的位置与焦点所在的角色的名称相对应,在焦点位于“余欢水”的角色信息控件上时,高亮框控件位于截屏图像中的余欢水角色上方,在焦点移动到“高虹”角色信息控件时,高亮框控件位于截屏图像中的高虹角色上方,以使得用户更好的认知每一个角色在截图中对应的形象以及角色的介绍信息。
在一些实施方式中,在识图完成后,服务器300将识图结果和该结果对应的人脸在截屏图像中的位置做了映射,映射的方式可以是识图结果和人脸在截屏图像中的位置坐标的映射,也可以是在截屏图像中的人脸上,预置的框型控件,在识图结果和框型控件之间做了映射。显示器根据识图结果绘制的角色信息控件,在角色信息控件被选中后,通过映射的坐标在截屏图像的人脸上方显示高亮框控件或通过识图结果和框型控件的映射将对应的框型控件设置为高亮状态。
在一些实施方式中,显示设备200在接收到服务器300反馈的识别结果和角色信息后,根据电视的标识确定应该采用上述的浮层的显示方式,还是分屏的显示方式,其中,电视的标识表征在显示设备仅包含一个显示器,有的显示设备为双屏显示设备,双屏显示设备包括主显示器和副显示器。在显示设备标识表征仅包含一个显示器时,采用上述浮层的显示方式,在显示设备的标识对应双屏显示设备时,分屏显示。
在一些实施方式中,图6C为本申请一些实施方式中提供的另一种多人物场景下的角色信息展示图,如图6C所示,控制器250可控制主显示器播放媒资,并在副显示器上显示角色信息或者介绍信息。该展示方式能够在向用户展示角色信息或者介绍信息的同时,不耽误用户观看媒资。
在一些实施例中,图6C中介绍控件可以采用上下排布的列表的形式,为了适应副显示器的大小,可以设置成显示设定个数的介绍控件,在介绍控件接收到向下或向上的焦点操作后,根据介绍控件的排序,刷新显示在副屏上的介绍控件并移动焦点所在的介绍控件,同时203内的信息根据焦点的位置进行更新。例如在仅显示两个介绍控件时,在上方介绍控件是“甘虹”介绍控件,下方是“余欢水”介绍控件,若焦点位于“余欢水”介绍控件上时,如果接收到向下的键值,则根据介绍控件的顺序确定存在下一个控件,且下一个控件是“赵觉民”介绍控件,则调整控件列表,使控件列表的上面位置显示“余欢水”介绍控件,在下面位置显示“赵觉民”介绍控件,同时203位置更新为“赵觉民”的角色信息。若根据介绍控件的顺序确定不存在下一个介绍控件,则再弹出提示信息给用户提示没有其他介绍控件。
在一些实施例中,“甘虹”介绍控件,“余欢水”介绍控件,“赵觉民”介绍控件可以用第一介绍控件,第二介绍控件,第三介绍控件来替代。
在一些实施例中,截图和信息显示的过程不中断影视内容的播放,例如电视在接收到截屏的时间是T1时刻,在展示截图和信息的时刻为T2时刻,在T1和T2时刻之间影视节目按照正常的播放进度播放,进而避免对用户观看过程的干扰。
在一些实施方式中,用户还可以自行设置,依旧是在主显示器上弹出信息浮层,用于显示角色信息,副显示器仅是展示时间、天气或者闹钟等信息。
S540:在所述人脸的识别结果为一个人物时,控制所述显示器显示所述截屏图像并展示所述人物的介绍信息。
在一些实施方式中,如接收到截图指令时显示的界面如图6D所示,在识别结果为一个人物时,即单人物场景,显示设备200的显示效果如图6E所示,显示人物的介绍信息。
在一些实施例中,服务器300所识别出了截屏图像中的一个人物的人脸信息,即识别出截屏图像中的一个人物,该场景下,认为用户更想了解的是该人物的介绍信息。例如,《我是余欢水》剧中的余欢水的介绍信息,控制器250所获取的截屏图像中仅识别到一个人脸信息,即余欢水对应的人脸,通过和预设媒资库中的人脸图像比对,或百科信息中的人脸比对可以得知该人脸对应的人物是郭京飞,人物介绍信息可以包括:郭京飞,1979年7月2日出生于北京市朝阳区,毕业于上海戏剧学院,中国内地男演员等等。服务器300就会将郭京飞介绍信息反馈至控制器250,控制器250控制显示器275展示出截屏图像及该人物的介绍信息。
在一些实施例方式中,服务器300反馈的人物的介绍信息或人物的角色信息的同时,还反馈截屏图像对应的图像标识,以此,显示设备200可以从自身缓存中调用截屏图像,避免了网络传输的延时。
在一些实施例中,显示设备200在接收到服务器300反馈的识别结果和角色信息后,根据电视的标识确定应该采用上述的浮层的显示方式,还是分屏的显示方式,其中,电视的标识表征在显示设备仅包含一个显示器,有的显示设备为双屏显示设备,双屏显示设备包括主显示器和副显示器。在显示设备标识表征仅包含一个显示器时,采用上述浮层的显示方式,在显示设备的标识对应双屏显示设备时,分屏显示。浮层显示的方案和分屏显示的方案和角色信息的显示方式相似,在此不予以赘述。
本申请中,根据截屏图像中人物的数量划分为多人物场景和单人物场景,在多人物场景下,用户可能更多的想要了解人物在影视节目中的角色信息,在单人物场景下,用户则是更多想要了解当前人物的介绍信息。如此,当用户想要了解显示器显示的显示界面中的人物时,能够通过向显示设备发送识别指令从而快速的获取到不同的场景下不同的人物信息,提升用户的观看体验。
基于与上述显示设备同样的发明构思,本申请实施例还提供了一种服务器,该服务器被配置为执行人物介绍推荐方法。参见图7,为本申请一些实施方式中提供一种人物介绍推荐方法的流程示意图。结合图7,所述服务器的配置过程包括以下步骤:
S710:接收显示设备根据识别指令发送的识别结果获取请求。
本申请实施例中,显示设备200在接收到用户通过遥控器截图按键或者通过语音输入发送的识别指令后,需要对显示器275显示的显示界面截图并生成截屏图像。显示设备200要想获得截屏图像中人物的信息,可以通过向服务器300发送识别结果获取请求,从而达到在服务器300中获得识别结果的目的。
在一些实施方式中,若是用户通过语音输入发送识别指令给显示设备时,则该服务器还被配置为:接收显示设备发送的语音输入信息并进行解析,在语音输入信息解析为用户想要了解媒资中的人物时,就向显示设备发送许可指令,显示设备根据许可指令对显示器显示的显示界面进行截图,在语音输入信息解析为不是了解人物信息时,就不向显示设备发送许可指令,那么控制器就不进行截图操作。
S720:根据所述识别结果获取请求对截屏图像中的人脸进行识别。
本申请实施例中,服务器300在接收到识别结果获取请求前,在一种实现方式中,可以接收到显示设备200发送的截屏图像。显示设备200在根据识别指令生成截屏图像后,可以直接将截屏图像上传至服务器300,以使服务器300对截屏图像中的人物进行识别。在另一种实现方式中,可以接收到显示设备200发送的截屏图像所对应的时间戳。显示设备200在获得截屏图像时,可以将截屏图像所对应的时间戳发送给服务器300,服务器300根据时间戳在相应的媒资中获得截屏图像对应的图像帧。当然,截屏图像所对应的时间戳也可包含于识别结果获取请求中,也就是当显示设备200发送识别结果获取请求时,一并将截屏图像对应的时间戳发送给服务器300,服务器300在接收到识别结果获取请求后,先根据其中的时间戳获取图像帧,再对图像帧中人脸进行识别。需要说明的是,服务器300在根据时间戳获取图像帧时,可以获取时间戳前后时间段相连的多帧图像,以避免存在用户通过语音输入发送完识别指令到显示设备开始截图的过程存在时间差,从而忽略关键图像帧的问题,因此,通过获取多帧图像,确保获得有效信息。
在另一种实现方式中,显示设备200生成截屏图像后,可直接将截屏图像上传至服务器300,服务器300再根据识别结果获取请求中的截屏图像进行人脸识别。
服务器300在获得截屏图像后,根据显示设备200发送的识别结果获取请求,对截屏图像中的人物进行识别。参见图8,为本申请一些实施方式中提供的截屏图像中人物识别的流程示意图。由图8所示,识别过程如下:
S810:识别所述截屏图像中的人脸信息。
本申请实施例中,服务器可以对截屏图像中的人脸区域进行识别,标记出截屏图像中的人脸信息。
S820:对符合人脸识别条件的人物进行标定。
在一种实现方式中,由于主要演员一般距离拍摄镜头较近,故其人脸面积相对于群众演员的人脸面积大,还考虑到当前截屏图像中若是有的演员位于画面的边缘处,其人脸只漏出一半,其人脸面积也会较小,基于此,只有当截屏图像中的人脸面积大于预设面积时,才对该人脸进行识别。以此,服务器300对于人脸面积过小的人物的人脸信息不再进行识别,从而减少了部分计算量。
在另一种实现方式中,若是截屏图像中的人物的人脸面积大小排在前几位,则对其进行识别,也就是说服务器300只识别人脸面积在截屏图像中排在前几位的人物。对于人脸面积排在后几位的人物,其人脸面积相对较小,则其对应的人物可能为群众演员等不重要角色,因此,服务器300也没有必要识别人脸面积排在后几位的人物的人脸信息。
在另一种实现方式中,对位于截屏图像中间区域的人脸进行识别。由于在每一帧截屏图像中,位于截屏图像中间区域的人物往往是主要人物,因此,服务器300可仅识别位于截屏图像中间区域的人物的人脸信息。
以上,可通过本申请实施例所增设的人脸识别条件,即在截屏图像中人脸面积大于预设面积,或者在截屏图像中人脸面积大小排在前三,或者对位于截屏图像中间区域,减小服务器300的计算量,有助于服务器300根据识别结果获取请求快速标定截屏图像中的人脸。
S830:根据所标定的人物数量划分场景类别。
本申请实施例中,服务器300在标定出截屏图像中的人脸后,根据人脸识别结果中所标定出的人物数量将截屏图像划分了两类,分别是多人物场景和单人物场景。
以上步骤S810-S830描述了服务器对截屏图像中人物识别的过程,服务器300根据所标定出的人物数量的多少将截屏图像分为多人物场景和单人物场景。
S730:在所述人脸的识别结果为多个人物时,向所述显示设备发送所述截屏图像中所述人物的角色信息,以使所述显示设备展示所述角色信息。
参见图9,为本申请一些实施方式中提供的图7中服务器获取截屏图像中人物角色信息的流程示意图。由图9所示,步骤S910-S930介绍了人物的角色信息的获取过程,具体步骤如下:
S910:获取所述截屏图像中所述人物的名称以及所述显示界面对应的媒资的演职人员表,根据所述名称和所述演职人员表,分别获取每个所述人物的角色名称。
本申请实施例在标定出截屏图像中的人物时,进一步获取每个人物的名称及该媒资的演职人员表,根据这两者信息即可得出每个人物的角色名称,例如,在《我是余欢水》的剧中,识别出截屏图像中包括郭京飞,获取郭京飞的百科信息,以及《我是余欢水》的演职人员表,得出郭京飞在《我是余欢水》中饰演的是余欢水。
S920:根据所述角色名称获取媒资评价或媒资简介,并根据媒资评价或者媒资简介生成角色信息。
本申请实施例中,在获得截屏图像中每个人物的角色名称后,能够通过相应的媒资评价或者媒资简介获取到对各个角色的介绍以及角色之间的关系。例如,在《我是余欢水》的剧中,识别出郭京飞饰演余欢水,高露饰演甘虹,岳旸饰演赵觉民。服务器300能够根据《我是余欢水》的媒资评价及媒资简介,分别获得对余欢水、甘虹及赵觉民的角色介绍,并且能够获得各个角色之间的关系。
S930:将所述角色信息发送至所述显示设备进行展示。
本申请实施例中,角色信息包括角色名称、角色介绍以及角色之间的关系。服务器300在获得角色信息之后,将角色信息发送给显示设备200,以使控制器250将角色信息放置于信息浮层中并于显示器275进行展示,或者将角色信息放置于副显示器中进行展示。
S740:在所述人脸的识别结果为一个人物时,向所述显示设备发送所述截屏图像中所述人物的介绍信息,以使所述显示设备展示所述介绍信息。
参见图10,为本申请一些实施方式中提供的图7中服务器获取截屏图像中人物介绍信息的流程示意图。由图10所示,步骤S1010-S1030介绍了人物的介绍信息的获取过程,具体步骤如下:
S1010:从多处数据源获取所述截屏图像中所述人物的百科信息。
本申请实施例中,服务器300在标定出截屏图像中仅有一个人物时,那么此时用户更多的是想要了解人物当前演员的介绍信息。由于服务器300是根据图像来获取人物的百科信息的,因此,难免存在长相相似的人,或者在识别出人物的人名,根据人名获取百科信息时,也难免存在重名的人。因此,对于截屏图像中的人物来说,本申请可以通过多处数据源获取人物的百科信息。其中,数据源可以为百度百科或者互动百科等等。
S1020:若所述人物在多处数据源的百科信息一致时,从百科信息中获取所述人物的介绍信息,并发送至所述显示设备进行展示。
本申请实施例中,若截屏图像中的人物在多处数据源中的百科信息一致时,也就是没有存在与其长相相似或者重名的人,那么服务器300可直接获取人物的百科信息,即该人物的介绍信息,推送至显示设备200,以使控制器250将介绍信息放置于信息浮层中并于显示器275进行展示,或者将介绍信息放置于副显示器中进行展示。
S1030:若所述人物在多处数据源的百科信息不一致时,从百科信息中获取与媒资类型相对应的所述人物的介绍信息,并发送至显示设备进行展示。
本申请实施例中,若截屏图像中的人物在多处数据源中的百科信息不一致时,也就是可能存在与其长相相似或者重名的人,此时服务器300需要判断一下当前用户所观看媒资的媒资类型,根据媒资类型选取演艺信息。例如,若媒资类型为影视剧,则服务器300需要选取包含“艺人”、“电影”、“电视剧”等相关字段的信息,若媒资类型为纪录片,则服务器选取包含“名人”、“记录片”等相关字段的信息。在选取完与媒资类型相对应的介绍信息后,发送至显示设备200,以使控制器250将介绍信息放置于信息浮层中并于显示器275进行展示,或者将介绍信息放置于副显示器中进行展示。
本申请所提供的服务器能够根据识别出的人脸数量得到截屏图像中人物的数量,从而将截屏图像划分为多人物场景和单人物场景,分别在不同的场景向显示设备推送不同的人物介绍,如此,在本申请中,用户能够通过服务器向显示设备发送的不同的场景下不同的人物信息了解媒资中的人物,提升用户的观看体验。
与上述显示设备相对应的,本申请实施例还提供了一种人物介绍展示方法,该方法包括:接收识别指令,所述识别指令用于对显示器显示的显示界面截图并生成截屏图像。获取截屏图像中人物的识别结果。在所述人脸的识别结果为多个人物时,控制所述显示器显示所述截屏图像并展示所述人物的角色信息,在所述人脸的识别结果为一个人物时,控制所述显示器显示所述截屏图像并展示所述人物的介绍信息。
在一种实现方式中,显示设备中的控制器在生产截屏图像后,可以将截屏图像发送至服务器,再由服务器对截屏图像中的人脸进行识别,并将识别结果反馈至控制器。控制器接收服务器发送的截屏图像中人脸的识别结果。
在另一种实现方式中,显示设备中的控制器在生产截屏图像后,可以将截屏图像对应的时间戳发送给服务器,服务器根据时间戳确认截屏图像对应的图像帧并根据图像帧进行人脸识别,识别出人脸信息之后,将识别结果反馈至控制器,控制器接收服务器发送的人脸的识别结果。
由于以上实施方式均是在其他方式之上引用结合进行说明,不同实施例之间均具有相同的部分,本说明书中各个实施例之间相同、相似的部分互相参见即可。在此不再详细阐述。
需要说明的是,在本说明书中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或暗示这些实体或操作之间存在任何这种实际的关系或顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的电路结构、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种电路结构、物品或者设备所固有的要素。在没有更多限制的情况下,有语句“包括一个……”限定的要素,并不排除在包括所述要素的电路结构、物品或者设备中还存在另外的相同要素。
本领域技术人员在考虑说明书及实践这里发明的公开后,将容易想到本申请的其他实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由权利要求的内容指出。
以上所述的本申请实施方式并不构成对本申请保护范围的限定。

Claims (10)

1.一种显示设备,其特征在于,所述显示设备包括:
显示器;
控制器,所述控制器与所述显示器通信连接,所述控制器被配置为:
接收识别指令,所述识别指令用于对显示器显示的显示界面截图并生成截屏图像;
获取所述截屏图像中人脸的识别结果;
在所述人脸的识别结果为多个人物时,控制所述显示器显示所述截屏图像并展示所述人物的角色信息,其中,所述角色信息是在影视节目中的角色的介绍信息;
在所述人脸的识别结果为一个人物时,控制所述显示器显示所述截屏图像并展示所述人物的介绍信息。
2.根据权利要求1所述的显示设备,其特征在于,所述获取所述截屏图像中人脸的识别结果,包括:
将所述截屏图像发送至服务器;
接收所述服务器发送的所述截屏图像中人脸的识别结果;
或,包括:
将所述截屏图像对应的时间戳发送给所述服务器,以使所述服务器根据所述时间戳确认所述截屏图像对应的图像帧并根据所述图像帧进行人脸识别;
接收所述服务器发送的所述图像帧中人脸的识别结果。
3.根据权利要求1所述的显示设备,其特征在于,所述控制所述显示器显示所述截屏图像并展示所述人物的角色信息,包括:
获取所述人物的名称以及所述显示界面对应的媒资的演职人员表;
根据所述名称和所述演职人员表确定所述人物的角色名称;
根据所述角色名称获取所述人物的角色信息,以使所述显示器在显示所述截屏图像时展示出所述角色信息。
4.根据权利要求1所述的显示设备,其特征在于,控制所述显示器展示所述角色信息,包括:
在所述显示设备仅包含一个显示器时,在所述显示器的当前界面上显示信息浮层,所述信息浮层包括多个介绍控件和介绍显示区域,用于展示所述角色信息,其中,在焦点移动至不同的所述介绍控件上时,控制展示不同的角色信息;
或,
在所述显示设备为双屏显示设备时,控制主显示器播放媒资,并控制副显示器显示所述角色信息。
5.一种服务器,其特征在于,所述服务器被配置为:
接收显示设备根据识别指令发送的识别结果获取请求;
根据所述识别结果获取请求对截屏图像中的人脸进行识别;
在所述人脸的识别结果为多个人物时,向所述显示设备发送所述截屏图像中所述人物的角色信息,以使所述显示设备展示所述角色信息,其中,所述角色信息是在影视节目中的角色的介绍信息;或者,
在所述人脸的识别结果为一个人物时,向所述显示设备发送所述截屏图像中所述人物的介绍信息,以使所述显示设备展示所述介绍信息。
6.根据权利要求5所述的服务器,其特征在于,所述根据所述识别结果获取请求对截屏图像中的人脸进行识别,包括:
根据所述截屏图像对应的时间戳获取所述截屏图像对应的图像帧,所述截屏图像对应的时间戳包含于所述识别结果获取请求中;
对所述图像帧中人脸进行识别。
7.根据权利要求6所述的服务器,其特征在于,所述根据所述识别结果获取请求对截屏图像中的人脸进行识别,包括:
根据所述识别结果获取请求中的截屏图像进行人脸识别。
8.根据权利要求5所述的服务器,其特征在于,所述在所述人脸的识别结果为多个人物时,向所述显示设备发送所述截屏图像中所述人物的角色信息,以使所述显示设备展示所述角色信息,包括:
获取所述截屏图像中所述人物的名称以及所述显示界面对应的媒资的演职人员表,根据所述名称和所述演职人员表,分别获取所述人物的角色名称;
根据所述角色名称获取媒资评价或媒资简介,并根据媒资评价或者媒资简介生成角色信息;
将所述角色信息发送至所述显示设备进行展示。
9.一种人物介绍展示方法,其特征在于,所述方法包括:
接收识别指令,所述识别指令用于对显示器显示的显示界面截图并生成截屏图像;
获取所述截屏图像中人脸的识别结果;
在所述人脸的识别结果为多个人物时,控制所述显示器显示所述截屏图像并展示所述人物的角色信息,其中,所述角色信息是在影视节目中的角色的介绍信息;
在所述人脸的识别结果为一个人物时,控制所述显示器显示所述截屏图像并展示所述人物的介绍信息。
10.根据权利要求9所述的人物介绍展示方法,其特征在于,所述获取所述截屏图像中人脸的识别结果,包括:
将所述截屏图像发送至服务器;
接收所述服务器发送的所述截屏图像中人脸的识别结果;
或,包括:
将所述截屏图像对应的时间戳发送给所述服务器,以使所述服务器根据所述时间戳确认所述截屏图像对应的图像帧并根据所述图像帧进行人脸识别;
接收所述服务器发送的人脸的识别结果。
CN202010448764.2A 2020-05-25 2020-05-25 显示设备、服务器及人物介绍展示方法 Pending CN113727162A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN202010448764.2A CN113727162A (zh) 2020-05-25 2020-05-25 显示设备、服务器及人物介绍展示方法
CN202180060814.2A CN116325770A (zh) 2020-05-25 2021-05-19 显示设备及图像识别结果显示方法
PCT/CN2021/094553 WO2021238733A1 (zh) 2020-05-25 2021-05-19 显示设备及图像识别结果显示方法
US17/849,640 US11863829B2 (en) 2020-05-25 2022-06-25 Display apparatus and method for displaying image recognition result

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010448764.2A CN113727162A (zh) 2020-05-25 2020-05-25 显示设备、服务器及人物介绍展示方法

Publications (1)

Publication Number Publication Date
CN113727162A true CN113727162A (zh) 2021-11-30

Family

ID=78671531

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010448764.2A Pending CN113727162A (zh) 2020-05-25 2020-05-25 显示设备、服务器及人物介绍展示方法

Country Status (1)

Country Link
CN (1) CN113727162A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023169049A1 (zh) * 2022-03-09 2023-09-14 聚好看科技股份有限公司 显示设备和服务器

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170103572A1 (en) * 2015-10-07 2017-04-13 Institute For Information Industry Head mounted device and guiding method
CN108259973A (zh) * 2017-12-20 2018-07-06 青岛海信电器股份有限公司 智能电视及电视画面截图的图形用户界面的显示方法
WO2020048275A1 (zh) * 2018-09-03 2020-03-12 聚好看科技股份有限公司 信息显示方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170103572A1 (en) * 2015-10-07 2017-04-13 Institute For Information Industry Head mounted device and guiding method
CN108259973A (zh) * 2017-12-20 2018-07-06 青岛海信电器股份有限公司 智能电视及电视画面截图的图形用户界面的显示方法
WO2020048275A1 (zh) * 2018-09-03 2020-03-12 聚好看科技股份有限公司 信息显示方法及装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023169049A1 (zh) * 2022-03-09 2023-09-14 聚好看科技股份有限公司 显示设备和服务器

Similar Documents

Publication Publication Date Title
CN111343490B (zh) 显示设备及内容推荐方法
CN111698551B (zh) 一种内容显示方法及显示设备
CN111479152A (zh) 一种显示设备
CN111601134B (zh) 一种显示设备中时间显示方法及显示设备
CN111726673B (zh) 一种频道切换方法及显示设备
CN111246309A (zh) 在显示设备中显示频道列表的方法及显示设备
WO2021212667A1 (zh) 一种多媒资数据显示方法及显示设备
CN113115088B (zh) 显示设备用户界面的控制方法及显示设备
CN113115092B (zh) 一种显示设备及详情页展示方法
CN112004126A (zh) 搜索结果显示方法及显示设备
CN113727162A (zh) 显示设备、服务器及人物介绍展示方法
CN111405329B (zh) 显示设备及epg用户界面显示的控制方法
CN113115093B (zh) 一种显示设备及详情页展示方法
CN111885415B (zh) 一种音频数据快速输出方法及显示设备
CN113691852B (zh) 显示设备及媒资播放方法
WO2021227232A1 (zh) 一种语言选项和国家选项的显示方法及显示设备
CN111050197B (zh) 一种显示设备
CN113742609A (zh) 显示设备及语音搜索功能的引导方法
CN111601147A (zh) 一种内容显示方法及显示设备
CN113382291A (zh) 一种显示设备及流媒体播放方法
CN111459372A (zh) 一种网络列表刷新显示方法及显示设备
CN113542885B (zh) 显示设备、服务器及媒资搜索的处理方法
CN111405332B (zh) 显示设备及epg用户界面显示的控制方法
CN112565892B (zh) 一种影视节目角色的识别方法及相关设备
CN111246282B (zh) 显示设备中节目信息获取方法及显示设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination