CN114079812A - 一种显示设备及摄像头的控制方法 - Google Patents

一种显示设备及摄像头的控制方法 Download PDF

Info

Publication number
CN114079812A
CN114079812A CN202011148312.9A CN202011148312A CN114079812A CN 114079812 A CN114079812 A CN 114079812A CN 202011148312 A CN202011148312 A CN 202011148312A CN 114079812 A CN114079812 A CN 114079812A
Authority
CN
China
Prior art keywords
camera
video
user
target user
interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011148312.9A
Other languages
English (en)
Inventor
鲍姗娟
于文钦
孙娜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Visual Technology Co Ltd
Original Assignee
Hisense Visual Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Visual Technology Co Ltd filed Critical Hisense Visual Technology Co Ltd
Priority to CN202180046688.5A priority Critical patent/CN116391358A/zh
Priority to PCT/CN2021/098617 priority patent/WO2022007568A1/zh
Publication of CN114079812A publication Critical patent/CN114079812A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor

Abstract

本申请涉及图像识别技术领域,特别地,涉及一种显示设备及摄像头的控制方法。一定程度上可以解决家庭中显示设备在执行目标用户检测服务时侵犯用户隐私、摄像头服务调用冲突的问题。所述显示设备包括:摄像头;显示屏,用于显示用户界面;控制器,被配置为:接收用户输入的第一指令,判定所述摄像头是否为保持升起状态,所述第一指令用于开启视频集锦开关以启动目标用户检测服务;在所述摄像头处于保持升起状态时,所述控制器可控制所述摄像头录制包含目标用户的视频片段,所述视频片段可用于生成在所述用户界面播放的视频集锦文件;否则,控制所述用户界面显示第一设置界面,所述第一设置界面用于变更所述摄像头状态以执行所述第一指令。

Description

一种显示设备及摄像头的控制方法
本申请要求在2020年8月21日提交中国专利局、申请号为202010850122.5、发明名称为″一种显示设备″的中国专利申请的优先权,其全部内容通过引用结合在本申请中。
技术领域
本申请涉及图像识别技术领域,特别地,涉及一种显示设备及摄像头的控制方法。
背景技术
视频集锦文件是通过图像识别技术将具有类似内容、或相同元素的不同视频或视频片段剪辑拼接成一个视频文件。图像识别及特征提取技术目前已很成熟,应用于各个场景,如面部识别解锁,刷脸支付。
然而,家庭中配置有摄像头的电视,由于其图像识别过程属于后台运行服务,用户感知不到摄像头检测服务是否在运行,因此在未经用户同意的情况下进行图像识别会侵犯用户的隐私;且在摄像头进行图像识别的过程中,如果其它应用调用摄像头服务,会产生摄像头调用冲突。
发明内容
为了解决家庭中显示设备在执行目标用户检测服务时侵犯用户隐私、摄像头服务调用冲突的问题,本申请提供了一种显示设备及摄像头的控制方法。
本申请的实施例是这样实现的:
本申请实施例的第一方面提供一种显示设备,包括:摄像头;显示屏,用于显示用户界面;控制器,被配置为:接收用户输入的第一指令,判定所述摄像头是否为保持升起状态,所述第一指令用于开启视频集锦开关以启动目标用户检测服务;在所述摄像头处于保持升起状态时,所述控制器可控制所述摄像头录制包含目标用户的视频片段,所述视频片段可用于生成在所述用户界面播放的视频集锦文件;否则,控制所述用户界面显示第一设置界面,所述第一设置界面用于变更所述摄像头状态以执行所述第一指令。
本申请实施例的第二方面提供一种摄像头的控制方法,所述方法包括:接收用户输入的第一指令,判定摄像头是否为保持升起状态,所述第一指令用于开启视频集锦开关以启动目标用户检测服务;在所述摄像头处于保持升起状态时,可控制所述摄像头录制包含目标用户的视频片段,所述视频片段可用于生成在用户界面播放的视频集锦文件;否则,控制所述用户界面显示第一设置界面,所述第一设置界面用于变更所述摄像头状态以执行所述第一指令。
本申请的有益效果:通过构建第一指令、检测保持升起状态,可以避免目标用户检测服务侵犯用户隐私;进一步通过构建第一设置界面,可以实现摄像头保持升起状态的自动设置;进一步通过构建第二指令、第三指令,可以实现关闭目标用户检测服务;进一步通过配置目标用户检测服务摄像头的优先级,可以解决显示设备在运行目标用户检测服务时发生摄像头调用冲突的问题。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图;
图2中示例性示出了根据实施例中显示设备200的硬件配置框图;
图3中示例性示出了根据实施例中控制设备100的硬件配置框图;
图4中示例性示出了根据实施例中显示设备200的功能配置示意图;
图5中示例性示出了根据实施例中显示设备200中软件配置示意图;
图6中示例性示出了根据实施例中显示设备200中应用程序的配置示意图;
图7A示出了本申请一实施例显示设备应用程序界面的示意图;
图7B示出了本申请另一实施例显示设备应用程序界面的示意图;
图8示出了本申请一实施例显示设备小聚在家应用的新手引导UI示意图;
图9示出了本申请一实施例显示设备萌娃的一天应用的启动UI示意图;
图10示出了本申请一实施例显示设备开启视频集锦开关的流程示意图;
图11示出了本申请一实施例显示设备关闭视频集锦开关的流程示意图;
图12示出了本申请一实施例显示设备萌娃的一天的NAS提示示意图;
图13示出了本申请实施例显示设备视频集锦文件的示意图;
图14示出了本申请一实施例显示设备萌娃的一天视频片段录制合成过程的逻辑示意图;
图15示出了本申请一实施例显示设备视频集锦文件的操作UI示意图;
图16示出了本申请一实施例显示设备萌娃的一天应用的整体架构示意图;
图17示出了本申请一实施例显示设备摄像头控制方法的流程示意图。
具体实施方式
为使本申请示例性实施例的目的、技术方案和优点更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施例中的技术方案进行清楚、完整地描述,显然,所描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
基于本申请中示出的示例性实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。此外,虽然本申请中公开内容按照示范性一个或几个实例来介绍,但应理解,可以就这些公开内容的各个方面也可以单独构成一个完整技术方案。
应当理解,本申请中说明书和权利要求书及上述附图中的术语″第一″、″第二″、″第三″等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。
此外,术语″包括″和″具有″以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的那些组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
本申请中使用的术语″模块″,是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
本说明书通篇提及的″多个实施例″、″一些实施例″、″一个实施例″或″实施例″等,意味着结合该实施例描述的具体特征、结构或特性包括在至少一个实施例中。因此,本说明书通篇出现的短语″在多个实施例中″、″在一些实施例中″、″在至少另一个实施例中″或″在实施例中″等并不一定都指相同的实施例。此外,在一个或多个实施例中,具体特征、结构或特性可以任何合适的方式进行组合。因此,在无限制的情形下,结合一个实施例示出或描述的具体特征、结构或特性可全部或部分地与一个或多个其他实施例的特征、结构或特性进行组合。这种修改和变型旨在包括在本申请的范围之内。
本申请中使用的术语″遥控器″,是指电子设备(如本申请中公开的显示设备)的一个组件,通常可在较短的距离范围内无线控制电子设备。一般使用红外线和/或射频(RF)信号和/或蓝牙与电子设备连接,也可以包括WiFi、无线USB、蓝牙、动作传感器等功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬键。
本申请中使用的术语″手势″,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图。如图1中示出,用户可通过移动终端300和控制装置100操作显示设备200。
其中,控制装置100可以遥控器,包括红外协议通信或蓝牙协议通信,及其他短距离通信方式等,通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键,语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。
在一些实施例中,也可以使用移动终端、平板电脑、计算机、笔记本电脑、和其他智能设备以控制显示设备200。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序通过配置可以在与智能设备关联的屏幕上,在直观的用户界面(UI)中为用户提供各种控制。
示例的,移动终端300可与显示设备200安装软件应用,通过网络通信协议实现连接通信,实现一对一控制操作的和数据通信的目的。如:可以实现用移动终端300与显示设备200建立控制指令协议,将遥控控制键盘同步到移动终端300上,通过控制移动终端300上用户界面,实现控制显示设备200的功能。也可以将移动终端300上显示音视频内容传输到显示设备200上,实现同步显示功能。
如图1中还示出,显示设备200还与服务器400通过多种通信方式进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。示例的,显示设备200通过发送和接收信息,以及电子节目指南(EPG)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器400可以一组,也可以多组,可以一类或多类服务器。通过服务器400提供视频点播和广告服务等其他网络服务内容。
显示设备200,可以液晶显示器、OLED显示器、投影显示设备。具体显示设备类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要做性能和配置上一些改变。
显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能。示例的包括,网络电视、智能电视、互联网协议电视(IPTV)等。
图2中示例性示出了根据示例性实施例中显示设备200的硬件配置框图。如图2中示出,显示设备200中包括控制器210、调谐解调器220、通信接口230、检测器240、输入\输出接口250、视频处理器260-1,音频处理器60-2,显示器280,音频输出270、存储器290,供电电源、红外接收器。
显示器280,用于接收源自视频处理器260-1输入的图像信号,进行显示视频内容和图像以及菜单操控界面的组件。显示器280包括用于呈现画面的显示屏组件,以及驱动图像显示的驱动组件。显示视频内容,可以来自广播电视内容,也可以是说,可通过有线或无线通信协议接收的各种广播信号。或者,可显示来自网络通信协议接收来自网络服务器端发送的各种图像内容。
同时,显示器280,同时显示显示设备200中产生且用于控制显示设备200的用户操控UI界面。
以及,根据显示器280类型不同,还包括用于驱动显示的驱动组件。或者,倘若显示器280为一种投影显示器,还可以包括一种投影装置和投影屏幕。
通信接口230是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信接口230可以是VVifi芯片231,蓝牙通信协议芯片232,有线以太网通信协议芯片233等其他网络通信协议芯片或近场通信协议芯片,以及红外接收器(图中未示出)。
显示设备200可以通过通信接口230与外部控制设备或内容提供设备之间建立控制信号和数据信号发送和接收。以及,红外接收器,可用于接收控制装置100(如:红外遥控器等)红外控制信号的接口器。
检测器240,是显示设备200用于采集外部环境或与外部交互的信号。检测器240包括光接收器242,用于采集环境光线强度的传感器,可以通过采集环境光可以自适应性显示参数变化等。
以及包括图像采集器241,例如为相机、或摄像头,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。
在其他一些示例性实施例中,检测器240,还可温度传感器等,如通过感测环境温度,显示设备200可自适应调整图像的显示色温。如当温度偏高的环境时,可调整显示设备200显示图像色温偏冷色调,或当温度偏低的环境时,可以调整显示设备200显示图像偏暖色调。
在其他一些示例性实施例中,检测器240,还可声音采集器等,如麦克风,可以用于接收用户的声音,包括用户控制显示设备200的控制指令的语音信号,或采集环境声音,用于识别环境场景类型,显示设备200可以自适应适应环境噪声。
输入/输出接口250,在控制器210的控制显示设备200与外部其他设备间数据传输。如接收外部设备的视频信号和音频信号、或命令指令等数据。
其中,输入/输出接口250可以包括,但不限于如下:可以高清多媒体接口HDMI接口251、模拟或数据高清分量输入接口253、复合视频输入接口252、USB输入接口254、RGB端口(图中未示出)等任一个或多个接口。
在其他一些示例性实施例中,输入/输出接口250也可以上述多个接口形成复合性的输入/输出接口。
调谐解调器220,通过有线或无线接收方式接收广播电视信号,可以进行放大、混频和谐振等调制解调处理,从多多个无线或有线广播电视信号中解调出用户所选择电视频道频率中所携带的电视音视频信号,以及EPG数据信号。
调谐解调器220,可根据用户选择,以及由控制器210控制,响应用户选择的电视信号频率以及该频率所携带的电视信号。
调谐解调器220,可以接收信号的途径,根据电视信号广播制式不同,有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播信号等;以及根据调制类型不同,可以数字调制,也可以模拟调制方式。根据接收电视信号种类不同,可以模拟信号和数字信号。
在其他一些示例性实施例中,调谐解调器220也可在外置设备中,如外置机顶盒等。这样,机顶盒通过调制解调后输出电视音视频信号,经过输入/输出接口250输入显示设备200中。
视频处理器260-1,用于将接收外部视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等等视频处理,可得到直接可显示设备200上显示或播放的信号。
示例的,视频处理器260-1,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2,则解复用模块进行解复用成视频信号和音频信号等。
视频解码模块,则用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对转换输入视频帧率,如将60Hz帧率转换为120Hz帧率或240Hz帧率,通常的格式采用如插帧方式实现。
显示格式化模块,则用于将接收帧率转换后视频输出信号,改变信号以符合显示格式的信号,如输出RGB数据信号。
音频处理器260-2,用于接收外部的音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等处理,得到可以在扬声器中播放的声音信号。
在其他一些示例性实施例中,视频处理器260-1可以包括一颗或多颗芯片组成。音频处理器260-2,也可以包括一颗或多颗芯片组成。
以及,在其他一些示例性实施例中,视频处理器260-1和音频处理器260-2,可以单独的芯片,也可以于控制器210一起集成在一颗或多颗芯片中。
音频输出272,在控制器210的控制下接收音频处理器260-2输出的声音信号,如:扬声器272,以及除了显示设备200自身携带的扬声器272之外,可以输出至外接设备的发生装置的外接音响输出端子274,如:外接音响接口或耳机接口等。
供电电源,在控制器210控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电电源可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部电源,在显示设备200中提供外接电源的电源接口。
用户输入接口,用于接收用户的输入信号,然后,将接收用户输入信号发送给控制器210。用户输入信号可以是通过红外接收器接收的遥控器信号,可以通过网络通信模块接收各种用户控制信号。
示例的,用户通过遥控器100或移动终端300输入用户命令,用户输入接口则根据用户的输入,显示设备200则通过控制器210响应用户的输入。
在一些实施例中,用户可在显示器280上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
控制器210,通过存储在存储器290上中各种软件控制程序,来控制显示设备200的工作和响应用户的操作。
如图2所示,控制器210包括RAM213和ROM214以及图形处理器216、CPU处理器212、通信接口218,如第一接口218-1到第n接口218-n,以及通信总线。其中,RAM213和ROM214以及图形处理器216、CPU处理器212、通信接口218通过总线相连接。
ROM213,用于存储各种系统启动的指令。如在收到开机信号时,显示设备200电源开始启动,CPU处理器212运行ROM中系统启动指令,将存储在存储器290的操作系统拷贝至RAM213中,以使开始运行启动操作系统。当操作系统启动完成后,CPU处理器212再将存储器290中各种应用程序拷贝至RAM213中,然后,开始运行启动各种应用程序。
图形处理器216,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在显示器280上。
CPU处理器212,用于执行存储在存储器290中操作系统和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
在一些示例性实施例中,CPU处理器212,可以包括多个处理器。多个处理器可包括一个主处理器以及多个或一个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。多个或一个子处理器,用于在待机模式等状态下一种操作。
控制器210可以控制显示设备100的整体操作。例如:响应于接收到用于选择在显示器280上显示UI对象的用户命令,控制器210便可以执行与由用户命令选择的对象有关的操作。
其中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与所述图标相对应程序的操作。用于选择UI对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
存储器290,包括存储用于驱动显示设备200的各种软件模块。如:存储器290中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等。
其中,基础模块用于产后护理显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。
例如:语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块用于控制显示器280进行显示图像内容的模块,可以用于播放多媒体图像内容和UI界面等信息。通信模块,用于与外部设备之间进行控制和数据通信的模块。浏览器模块,用于执行浏览服务器之间数据通信的模块。服务模块,用于提供各种服务以及各类应用程序在内的模块。
同时,存储器290还用存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
图3中示例性示出了根据示例性实施例中控制设备100的配置框图。如图3所示,控制设备100包括控制器110、通信接口130、用户输入/输出接口140、存储器190、供电电源180。
控制设备100被配置为控制显示设备200,以及可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起用用户与显示设备200之间交互中介作用。如:用户通过操作控制设备100上频道加减键,显示设备200响应频道加减的操作。
在一些实施例中,控制设备100可是一种智能设备。如:控制设备100可根据用户需求安装控制显示设备200的各种应用。
在一些实施例中,如图1所示,移动终端300或其他智能电子设备,可在安装操控显示设备200的应用之后,可以起到控制设备100类似功能。如:用户可以通过安装应用,在移动终端300或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮,以实现控制设备100实体按键的功能。
控制器110包括处理器112和RAM113和ROM114、通信接口218以及通信总线。控制器110用于控制控制设备100的运行和操作,以及内部各部件之间通信协作以及外部和内部的数据处理功能。
通信接口130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:将接收到的用户输入信号发送至显示设备200上。通信接口130可包括WiFi芯片、蓝牙模块、NFC模块等其他近场通信模块中至少之一种。
用户输入/输出接口140,其中,输入接口包括麦克风141、摄像头142、传感器143、按键144等其他输入接口中至少一者。如:用户可以通过语音、触摸、手势、按压等动作实现用户指令输入功能,输入接口通过将接收的模拟信号转换为数字信号,以及数字信号转换为相应指令信号,发送至显示设备200。需要说明的是,本申请提供的摄像头可实施为显示设备外接的摄像头142,也可实施为显示设备内置的图像采集器241。
输出接口包括将接收的用户指令发送至显示设备200的接口。在一些实施例中,可以红外接口,也可以是射频接口。如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。
在一些实施例中,控制设备100包括通信接口130和输出接口中至少一者。控制设备100中配置通信接口130,如:WiFi、蓝牙、NFC等模块,可将用户输入指令通过WiFi协议、或蓝牙协议、或NFC协议编码,发送至显示设备200.
存储器190,用于在控制器110的控制下存储驱动和控制控制设备200的各种运行程序、数据和应用。存储器190,可以存储用户输入的各类控制信号指令。
供电电源180,用于在控制器110的控制下为控制设备100各元件提供运行电力支持。可以电池及相关控制电路。
图4中示例性示出了根据示例性实施例中显示设备200功能配置示意图。如图4所示,存储器290用于存储操作系统、应用程序、内容和用户数据等,在控制器210控制下执行驱动显示设备200的系统运行以及响应用户的各种操作。存储器290可以包括易失性和/或非易失性存储器。
存储器290,具体用于存储驱动显示设备200中控制器210的运行程序,以及存储显示设备200内置各种应用程序,以及用户从外部设备下载的各种应用程序、以及与应用相关各种图形用户界面,以及与图形用户界面相关的各种对象,用户数据信息,以及各种支持应用的内部数据。存储器290用于存储OS内核、中间件和应用等系统软件,以及存储输入的视频数据和音频数据、及其他用户数据。
存储器290,具体用于存储音视频处理器260-1和260-2、显示器280、通信接口230、调谐解调器220、检测器240输入/输出接口等驱动程序和相关数据。
在一些实施例中,存储器290可以存储软件和/或程序,用于表示操作系统(OS)的软件程序包括,例如:内核、中间件、应用编程接口(API)和/或应用程序。示例性的,内核可控制或管理系统资源,或其它程序所实施的功能(如所述中间件、API或应用程序),以及内核可以提供接口,以允许中间件和API,或应用访问控制器,以实现控制或管理系统资源。
示例的,存储器290,包括广播接收模块2901、频道控制模块2902、音量控制模块2903、图像控制模块2904、显示控制模块2905、音频控制模块2906、外部指令识别模块2907、通信控制模块2908、光接收模块2909、电力控制模块2910、操作系统2911、以及其他应用程序2912、浏览器模块等等。控制器210通过运行存储器290中各种软件程序,来执行诸如:广播电视信号接收解调功能、电视频道选择控制功能、音量选择控制功能、图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等其他应用。
图5中示例性示出了根据示例性实施例中显示设备200中软件系统的配置框图。
如图5中所示,操作系统2911,包括用于处理各种基础系统服务和用于实施硬件相关任务的执行操作软件,充当应用程序和硬件组件之间完成的数据处理的媒介。一些实施例中,部分操作系统内核可以包含一系列软件,用以管理显示设备硬件资源,并为其他程序或软件代码提供服务。
其他一些实施例中,部分操作系统内核可包含一个或多个设备驱动器,设备驱动器可以是操作系统中的一组软件代码,帮助操作或控制显示设备关联的设备或硬件。驱动器可以包含操作视频、音频和/或其他多媒体组件的代码。示例的,包括显示屏、摄像头、Flash、WiFi和音频驱动器。
其中,可访问性模块2911-1,用于修改或访问应用程序,以实现应用程序的可访问性和对其显示内容的可操作性。
通信模块2911-2,用于经由相关通信接口和通信网络与其他外设的连接。
用户界面模块2911-3,用于提供显示用户界面的对象,以供各应用程序可访问,可实现用户可操作性。
控制应用程序2911-4,用于可控制进程管理,包括运行时间应用程序等。
事件传输系统2914,可在操作系统2911内或应用程序2912中实现,以一些实施例中,一方面在在操作系统2911内实现,同时在应用程序2912中实现,用于监听各种用户输入事件,将根据各种事件指代响应各类事件或子事件的识别结果,而实施一组或多组预定义的操作的处理程序。
其中,事件监听模块2914-1,用于监听用户输入接口输入事件或子事件。
事件识别模块2914-1,用于对各种用户输入接口输入各类事件的定义,识别出各种事件或子事件,且将其传输给处理用以执行其相应一组或多组的处理程序。
其中,事件或子事件,是指显示设备200中一个或多个传感器检测的输入,以及外界控制设备(如控制设备100等)的输入。如:语音输入各种子事件,手势识别的手势输入,以及控制设备的遥控按键指令输入的子事件等。示例的,遥控器中一个或多个子事件包括多种形式,包括但不限于按键按上/下/左右/、确定键、按键按住等中一个或组合。以及非实体按键的操作,如移动、按住、释放等操作。
界面布局管理器2913,直接或间接接收来自于事件传输系统2914监听到各用户输入事件或子事件,用于更新用户界面的布局,包括但不限于界面中各控件或子控件的位置,以及容器的大小或位置、层级等与界面布局相关各种执行操作。
如图6中所示,应用程序层2912包含也可在显示设备200执行的各种应用程序。应用程序可包含但不限于一个或多个应用程序,如:直播电视应用程序、视频点播应用程序、媒体中心应用程序、应用程序中心、游戏应用等。
直播电视应用程序,可以通过不同的信号源提供直播电视。例如,直播电视应用程可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视信号。以及,直播电视应用程序可在显示设备200上显示直播电视信号的视频。
视频点播应用程序,可以提供来自不同存储源的视频。不同于直播电视应用程序,视频点播提供来自某些存储源的视频显示。例如,视频点播可以来自云存储的服务器端、来自包含已存视频节目的本地硬盘储存器。
媒体中心应用程序,可以提供各种多媒体内容播放的应用程序。例如,媒体中心,可以为不同于直播电视或视频点播,用户可通过媒体中心应用程序访问各种图像或音频所提供服务。
应用程序中心,可以提供储存各种应用程序。应用程序可以是一种游戏、应用程序,或某些和计算机系统或其他设备相关但可以在智能电视中运行的其他应用程序。应用程序中心可从不同来源获得这些应用程序,将它们储存在本地储存器中,然后在显示设备200上可运行。
本申请实施例可以应用于各种类型的显示设备(包括但不限于:智能电视、移动终端、平板电脑、机顶盒等设备)。下文将以智能电视以及手机为例,通过小聚在家应用程序操作生成视频集锦文件的过程,对显示设备和摄像头的控制方法进行阐述。
图7A示出了本申请一实施例显示设备应用程序界面的示意图。
图中示出了显示屏展示电视的应用程序UI界面,例如,所述应用程序UI界面包括4个已安装于电视的应用程序,分别是新闻头条、影院点播、小聚在家、K歌等。通过使用遥控器等控制器在显示屏上移动焦点,可以选择不同的应用程序、或其他功能按钮。
在一些实施例中,电视显示屏在展示应用程序UI界面的同时,还被配置为可以展示其他交互元素,所述交互元素可包括例如电视主页控件、搜索控件、消息按钮控件、邮箱控件、浏览器控件、收藏夹控件、信号栏控件等。
为提高电视UI的便利性、形象性,在一些实施例中,本申请实施例中显示设备的控制器响应于对所述交互元素的操作而对电视的UI进行控制。例如,用户通过遥控器等控制器对搜索控件进行点击,可以将搜索UI展示于其它UI的顶部,即控制交互元素映射的应用组件的UI能够变大、或全屏运行和显示。
在一些实施例中,所述交互元素还可通过传感器进行操作,所述传感器可以是但不限于是声学输入传感器,例如麦克风,其可检测包括所需交互元素指示的语音命令。例如,用户可使用″小聚在家″或任意其它合适的标识识别所需交互元素,例如搜索控件,并且还可描述将执行与所需交互元素相关的所需动作。控制器可识别语音命令并向UI或其处理部件或引擎提交表征交互的数据。
图7B示出了本申请另一实施例显示设备应用程序界面的示意图。
在一些实施例中,用户可通过遥控器控制显示屏的焦点,选择小聚在家应用程序,以使得其图标在所述显示屏的用户界面中高亮度显示;然后通过点击所述高亮度图标,可实现打开图标映射的应用程序。
需要说明的是,本申请实施例所示的UI界面图标、及文字仅作为示例对小聚在家生成视频集锦文件过程中摄像头控制技术方案进行阐述,附图中UI界面的图标、及文字还可以实施为其它内容,本申请附图不做具体的限制。
图8示出了本申请一实施例显示设备小聚在家应用的新手引导UI示意图。
本申请提供了一种显示设备,所述显示设备例如可实施为智能电视,包括摄像头、显示屏、控制器,所述显示屏用于显示用户界面。
在一些实施例中,电视在登录帐号的前提下,用户第一次启动小聚在家应用时,控制器将控制用户界面显示新手引导UI。在一些实施例中,电视切换帐号后,用户再次启动小聚在家应用时,控制器将控制用户界面再次显示新手引导UI。可以理解,在该电视上,对于每个新登录的帐号,控制器都将控制用户界面显示新手引导UI。
小聚在家应用包括萌娃vlog集锦子应用,所述萌娃vlog集锦子应用可以实现关于萌娃的视频集锦文件生成。需要说明的是,在下文中萌娃vlog集锦简称为萌娃的一天、或萌娃的一天应用、或萌娃的一天子应用,下文不再赘述。
萌娃的一天子,通过电视配置的摄像头记录萌娃生活片段,以生成关于目标萌娃的视频集锦文件。当用户开启小聚在家应用中萌娃的一天功能时,电视可以自动记录用户的家庭日记,即用视频记录用户电视摄像头监测范围内的生活情况。
图9示出了本申请一实施例显示设备萌娃的一天应用的启动UI示意图。
在图8所示的用户界面中,用户第一次启动萌娃Vlog集锦后用户界面将跳转至如图9所示。
在一些实施例中,控制器接收用户输入的第一指令,判定所述摄像头是否为保持升起状态,所述第一指令用于开启视频集锦开关以启动目标用户检测服务;在所述摄像头处于保持升起状态时,所述控制器可控制所述摄像头录制包含目标用户的视频片段,所述视频片段可用于生成在所述用户界面播放的视频集锦文件;
需要说明的是,在本申请提供的一些实施例中,所述目标用户具体可实施为适龄儿童,也称为萌娃;目标用户检测服务可具体实施为萌娃检测服务;目标用户检测可具体实施为萌娃检测;文中涉及摄像头录制的视频片段都代指摄像头录制包含目标用户的视频片段;文中视频集锦文件具体实施为萌娃视频集锦文件;文中视频集锦开关具体实施为萌娃检测开关,文件下文中不再赘述。
例如,控制器控制摄像头录制关于萌娃的视频片段之前,需要判定显示设备的视频集锦开关、摄像头处于保持升起状态。摄像头处于开启状态可实施为摄像头保持升起状态,即摄像头处于启动状态;若摄像头降下,摄像头将停止检测、识别用户是否出现在监测范围,从而使得萌娃的一天也将暂停获取萌娃的视频片段,即停止目标用户检测服务。
在一些实施例中,视频集锦开关可实施为萌娃的一天功能开关,显示设备控制器控制摄像头录制包含目标用户的视频片段之前、或执行目标用户检测之前,将检测萌娃的一天功能开关是否为开启状态,如果处于开启状态,即摄像头也处于开启状态,在控制器将控制摄像头录制视频片段、或执行目标用户检测。
在一些实施例中,在所述摄像头不处于保持升起状态时,控制器控制显示设备的用户界面显示第一设置界面,所述第一设置界面用于变更所述摄像头状态以执行第一指令,所述第一指令用于开启视频集锦开关以启动目标用户检测服务,如图10所示。
例如,萌娃的一天功能在启用时,控制器接收用户发送的第一指令,所述第一指令用于启动视频集锦开关,所述视频集锦开关具体可实施为萌娃检测开关,用于检测儿童、获取关于儿童的视频集锦文件;
控制器检测电视整机设置中的摄像头模式是否为″保持升起状态″,在一些机型中所述保持升起状态也可以实施为开机升起;
当摄像头设置为保持升起状态时,控制器将打开视频集锦开关,即萌娃检测开关,目标用户检测服务开始在后台运行,控制器可控制所述摄像头录制包含目标用户的视频片段以及执行目标用户检测;目标用户检测服务为后台服务,用户感知不到检测服务是否在运行,因此需要考虑用户是否允许后台执行目标用户检测的功能。
当摄像头设置为非保持升起状态时,控制器控制显示设备的用户界面显示第一设置界面,所述第一设置界面用于变更所述摄像头状态至保持升起状态,以使得控制器执行第一指令开启视频集锦开关、启动目标用户检测服务。
需要说明的是,用户同意将摄像头设置变更为开机升起时,显示设备才可以开启视频集锦开关。
在一些实施例中,在显示设备的视频集锦开关为开启状态时,控制器才允许后台运行目标用户检测服务,且目标用户检测服务与摄像头设置为强相关。
显示设备的第一设置界面可实施为设置摄像头参数,所述摄像头的状态包括开机升起、智能升降、首次使用;
对用户而言,摄像头设置为开机升起即可保证摄像头处于保持升起状态,在这种情况下目标用户检测服务可即时调用摄像头服务;
摄像头的其他状态表示用户需要主动操作摄像头,控制器才可以调用摄像头服务,因此必须在显示设备将摄像头设置为开机升起时才允许后台运行目标用户检测服务。
在一些实施例中,当用户点击″萌娃的一天″按钮后,控制器将需要判断整机设置中的摄像头模式,若摄像头模式为″保持升起″,则直接开启萌娃的一天;若摄像头模式为″智能升降″,则用户界面显示第一设置界面,提示摄像头模式需要切换到″保持升起″。
在一些实施例中,控制器可控制所述摄像头录制包含目标用户的视频片段时,所述控制器还被配置为:接收用户输入的第二指令,所述第二指令用于关闭所述摄像头的保持升起状态;控住所述显示设备关闭所述视频集锦开关以停止目标用户检测服务。
例如,显示设备中视频集锦开关为开启状态,并且摄像头在开启所述视频集锦开关时处于智能升降、或首次使用升起状态,用户通过弹出的第一设置界面变更摄像头的状态为开机升起时,即保持升起状态时,显示设备的目标用户检测服务在后台运行;如果用户在先试试设备的使用过程中通过手动修改摄像头参数,将其设置为其他选项,例如智能升降或首次使用升起状态,控制器将关闭所述视频集锦开关以停止目标用户检测服务,最大程度保护用户的隐私。
在一些实施例中,控制器控制用户界面显示第一设置界面,所述第一设置界面用于变更所述摄像头状态以执行所述第一指令,用户通过配置摄像头使得显示设备的控制器可控制所述摄像头录制包含目标用户的视频片段、执行目标用户检测。控制器还可以接收用户输入的第三指令,所述第三指令用于关闭所述视频集锦开关以停止目标用户检测服务;控住所述摄像头自动还原至所述第一设置界面中变更前的状态。
例如,用户进入视频集锦文件界面,具体可实施为萌娃视频集锦文件界面,当前显示设备中视频集锦开关为开启状态,并且摄像头在第一设置界面中由智能升降变更为开机升起保持升起状态,显示设备的目标用户检测服务在后台运行;
用户发出用于关闭视频集锦开关、即萌娃检测开关的第三指令,控制器将控制用户界面弹出关闭提示界面;
在用户确认关闭后,控制器将关闭视频集锦开关、即萌娃检测开关并将摄像头自动配置为变更前的状态,即由开机升起变更为智能升降,控制器不随意修改用户之前的设置,如图11所示。
在一些实施例中,显示设备在执行目标用户检测、或录制包含目标用户的视频片段时,如果显示设备的摄像头已被第二应用调用,则控制器暂停萌娃检测、和/或录制包含目标用户的视频片段。
目标用户检测服务需要使用摄像头,摄像头在使用过程中会发生多个应用同时调用冲突现象,在不影响显示设备摄像头其它应用使用的情况下可实施为最大场景进行目标用户检测服务。
例如,控制器在目标用户检测服务启动摄像头时检测摄像头是否被第二应用调用其服务,即被其它应用提前调用所述摄像头服务,如果存在第二应用已经在使用所述摄像头服务,则控制器不启动目标用户检测、和/或录制包含目标用户的视频片段;当摄像头空闲时再次启动目标用户检测服务调用所述摄像头。
在一些实施例中,控制器在执行目标用户检测、和/或录制包含目标用户的视频片段时,所述控制器还被配置为响应于来自第二应用的摄像头调用指令,控制所述用户界面显示所述第二应用的摄像头录制画面;暂停目标用户检测、和/或录制包含目标用户的视频片段。
例如,控制器将目标用户检测服务调用摄像头的级别设置为最低,其它应用,例如第二应用均可抢占所述目标用户检测服务已调用的摄像头资源。在萌娃检测过程中,第二应用需要调用所述摄像头服务时,控制器暂停使用所述摄像头进行萌娃检测、和/或录制包含目标用户的视频片段。
在一些实施例中,控制器将目标用户检测服务的启动配置为定时启动,例如启动间隔设置为20分钟,通过所述目标用户检测服务应用退出时再次创建一个定时任务进行自启动;
在一些实施例中,控制器在目标用户检测服务启动后立即创建一个定时任务,例如目标用户检测完成后正常退出,则将原有定时任务取消并重新设定;如因为第二应用高优先级调用摄像头导致目标用户检测服务异常退出时,则使用启动后设定的定时任务,保证服务可定时启动。
图12示出了本申请一实施例显示设备萌娃的一天的NAS提示示意图。
在一些实施例中,如果电视没有接入NAS(Network Attached Storage:网络附加存储),小聚在家的登录界面中萌娃的一天按钮将被配置为置灰,即意味着视频集锦开关为关闭状态,用户界面将显示提示信息。
在一些实施例中,显示设备生成的视频集锦文件可存储于NAS,显示设备、或移动终端、或家庭私有云通过访问所述NAS可播放所述视频集锦文件。显示设备生成的视频集锦文件存放在NAS上,所述视频集锦文件可通过电视端小聚在家应用进入萌娃的一天用户界面进行浏览、播放,也可通过家庭私有云空间中的家庭共享目录进行浏览查看,也可以通过手机端应用查看电视存储在NAS上的已生成视频集锦文件。
在一些实施例中,控制器控制NAS中存储的视频集锦文件推送至显示设备、或移动终端、或家庭私有云,用户可下载、播放所述视频集锦文件。
图13示出了本申请实施例显示设备视频集锦文件的示意图。
在一些实施例中,显示设备萌娃的一天应用已生成多个视频集锦文件的用户界面如图所示,用户界面包括多个视频集锦海报控件,所述视频集锦海报控件的下侧还包括提示生成日期的提示文本。例如,所述视频集锦可实施为一天中的多个视频集锦,即视频集锦生成日期都是同一天,但视频集锦的内容不同;在另一些实施例中,所述视频集锦还可以实施为不同日期的视频集锦,即每个视频集锦的生成日期不同。
在一些实施例中,显示设备控制器控制摄像头录制包含目标用户的视频片段,基于已获取的多个所述视频片段生成视频集锦文件,具体包括控制器在预设时间段内录制不大于第一预设时间长度的视频片段;在所述预设时间段以后、或所述预设时间段的后一天首次开机后,所述控制器基于已获取的多个所述视频片段生成视频集锦文件。
例如,电视在预设时间段,例如每天的00:00-22:00内,控制器检测到视频集锦开关为开启状态、摄像头处于开启状态,即摄像头处于升起状态,电视的控制器自动检测电视机前的萌娃,每次检测到萌娃后自动录制一段时长不大于第一预设时间长度,例如6s的视频片段;在预设时间段后,即每天的22:00后如果电视仍处于开机状态、或第二天电视开机后会将录制的视频片段自动合成一个视频集锦文件,所述文件存入NAS指定目录,通过通知推送给用户,用户可点击查看,也可通过手机端查看下载NAS盘存储的萌娃集锦。
在一些实施例中,在预设时间段的后一天首次开机后显示设备控制器基于已获取的多个视频片段生成视频集锦文件,具体包括在所述预设时间段的后一天首次开机的第二预设时间长度后,显示设备控制器基于已获取的多个视频片段生成视频集锦文件。
例如,显示设备的目标用户检测服务可以配置为包括开机启动和定时自动启动;如果配置为开机启动目标用户检测服务,可设置在预设第二时间长度后,例如5分钟后启动萌娃视频片段合成视频集锦文件的任务,通过在5分钟后检测、合成可以避免开机后应用启动较多抢占系统资源导致系统卡顿、变慢。
在一些实施例中,视频集锦文件可添加背景音乐,所述摄像头录制所述视频片段时不录制音频数据。在预设时间段后,即每天的22:00后如果电视仍处于开机状态、或第二天电视开机后会将录制的视频片段自动合成一段增加了背景音乐的视频集锦文件,摄像头在录制包含目标用户的视频片段时只需要录制图像数据,不录制音频数据。
在一些实施例中,控制器基于已获取的多个所述视频片段生成视频集锦文件,其中,所述视频集锦文件包括所述预设时间段内的最早的视频片段、最晚的视频片段。
例如,控制器在生成视频集锦文件时,检测NAS是否存在有效的视频片段;其中,所述有效的视频片段是指正常录制完成的视频片段。当NAS中存在待合成视频片段、且NAS空间容量充足,控制器将所有有效视频片段按天分类,每天的视频片段进行时间进行升序排列,从中选取预设个数的视频片段进行合成,例如选取5个视频片段进行合成。
图14示出了本申请一实施例显示设备萌娃的一天视频片段录制合成过程的逻辑示意图。
在一些实施例中,萌娃处于所述显示设备的监测范围时,所述控制器控制所述摄像头录制包含目标用户的视频片段,具体包括:用户处于所述显示设备的监测范围时,所述控制器控制所述摄像头进行人脸检测;基于所述人脸检测判定用户是否小于预设年龄,如果用户小于所述预设年龄,则判定用户为萌娃,所述控制器控制所述摄像头录制包含目标用户的视频片段;否则,所述控制器控制所述摄像头继续进行人脸检测。
在一些实施例中,萌娃的一天应用服务启动后,首先检测是否设置为开机启动,如果显示设备设置为开机启动,则启动预设时间的延时任务,例如启动5秒延时任务;如果显示设备没有设置为开机启动,则检测硬件设备是否存在NAS;
如果不存在NAS,则服务自动终止;如果存在NAS,检测是否有待合成的视频片段存在,如果有,则合成视频;如果没有,则检测萌娃的一天功能开关是否为开、以及摄像头设置是否为保持升起,即视频集锦开关、摄像头是否为启动状态;
合成视频后,将视频集锦文件存储至NAS;检测萌娃的一天功能开关是否为开、以及摄像头设置是否为保持升起;如果开关为关、或摄像头没有设置为保持升起,则自动终止服务,即服务自杀;如果视频集锦开关为开、且摄像头设置为保持升起,则检测系统时间是否在预设时间段内,例如系统时间是否在0点至22点之间;
如果系统时间在预设时间段内,例如检测时间在0点至22点之间,则检测摄像头是否被占用;否则,开启预设时间段后定时重启任务,例如开启20分钟后定时重启任务;
检测摄像头被占用时,开启预设时间段后定时重启任务;否则,开始检测人脸;
识别是否有萌娃,如果检测有萌娃,则开始录制视频;否则,开启预设时间段后定时重启任务。在一些实施例中,摄像头开启后对处于监测范围内的用户进行人脸检测,检测到人脸后,通过获取到的人脸信息使用算法判断年龄是否小于预设年龄,例如12岁;如果识别年龄小于12岁则判定有萌娃在电视前的监测范围内出现,摄像头停止检测、开始进行录制包含目标用户的视频片段,并将录制视频片段存储值电视指定的目录;
最后,控制器控制摄像头关闭检测,开启预设时间后定时重启任务。
在一些实施例中,显示设备开机启动,具体包括交流开机、及STR开机;开机预设时间段后再开始执行任务,例如开机5分钟后再开始执行任务。这样可以避免开机时各个应用都在启动而出现系统不流畅、卡顿等现象。
在萌娃的一天开关为关、或摄像头设置为智能升降时,自动终止萌娃的一天的服务,此时无需定时重启任务;如果萌娃的一天开关为开时,接收相应广播消息后启动萌娃的一天的服务。
萌娃的一天应用执行检测萌娃的前提是时间准确,例如检测时间为00:00-22:00,通过当前系统时间是否处于预设时间段来判断时间是否准确。
在一些实施例中,定时启动服务时间大于22点,则直接进行视频合成,完成后可将定时重启时间改为2小时后。又例如,显示设备的摄像头未被占用,能够获取资源后,可设定萌娃的一天的检测时间为1分钟,或其他时间长度。
图15示出了本申请一实施例显示设备视频集锦文件的操作UI示意图。
在一些实施例中,当萌娃的一天已生成多个视频集锦时,例如包括7个视频集锦文件,其焦点默认初始位置位于第一个视频集锦海报控件,当用户点击遥控器的OK按钮后,电视将使用媒体中心播放器对视频集锦1进行播放。
在一些实施例中,在用户界面中点击菜单键,用户界面的左下角将显示交互菜单,所述交互菜单位于用户界面的最上层,包括分享到朋友圈、删除选中记录、清空全部记录、关闭此功能等选项。
图16示出了本申请一实施例显示设备萌娃的一天应用的整体架构示意图。
在一些实施例中,萌娃的一天应用架构包括:Framework模块、整机设置模块、小聚在家模块、录制合成服务模块、NAS模块、APP模块。
录制合成服务模块包括人脸检测模块、视频录制模块以及视频合成模块。所述人脸检测模块用于检测是否预览帧中存在目标用户,例如存在萌娃;所述视频录制模块用于检测到有萌娃时进行视频录制;所述视频合成模块用于对可合成的视频片段,对视频片源进行合成生成萌娃集锦,即视频集锦文件。
NAS模块用于文件存储,将录制合成服务模块输出的内容进行存储。例如,保存视频录制文件,将合成的萌娃集锦文件保存到NAS的相关目录。
APP模块包括集锦浏览界面模块和菜单chip页模块,所述集锦浏览界面模块用于展示NAS模块中存储的萌娃集锦文件,通过集锦浏览界面中的菜单chip页模块可将萌娃集锦文件分享至亲友圈、或删除、或其他操作。
Framework模块用于检测摄像头的占用状态,并将其检测结果输出至录制合成服务模块;整机设置模块用于对摄像头进行设置,并将其输出至录制合成服务模块;小聚在家模块用于控制萌娃的一天应用开关,并将其输出至录制合成服务模块,还可以确定是否开启人脸检测功能以进行目标用户识别,即萌娃识别;小聚在家模块也是萌娃的一天入口,目标用户检测的开关打开后才允许进行目标用户检测,抓拍萌娃视频片段;在一些实施例中,视频播放萌娃集锦文件可以通过启动媒体中心进行播放。
在一些实施例中,萌娃的一天开关设置为开后,除了保存开关状态外,还发送开关打开的广播消息至录制合成服务模块,以便于启动人脸检测;同理,萌娃的一天开关在关闭时也需要进行同样操作,收到开关关闭广播消息后录制合成服务模块把定时重启任务取消,以减少不必要的启动。
在一些实施例中,人脸检测的年龄限定为12岁,检测到萌娃后、即检测到小于12岁的用户,录制6s视频。因短时间的检测开始、检测结束会导致检测成功率降低,可设定检测时间持续1分钟,或其他时间长度;录制视频完成后,通过定时管理组件定制一个20分钟的重启任务,或实施为其他时间长度,然后自动终止服务。
在一些实施例中,将待合成的视频片段循环通过提取组件将视轨数据进行提取,然后通过媒体合成组件写入到指定的合成文件中;同理,音轨数据按照相同的逻辑进行处理,录制视频及合成视频格式可配置为MP4或其他格式。
在一些实施例中,判断录制视频是否为有效文件,可将录制视频存入临时文件夹,录制完成后复制到指定目录后删除对应临时文件。在一些实施例中,合成视频集锦文件后即进行推送。例如在22:00-00:00空闲时间段可进行合成视频工作,合成后立即推送至用户,无需等第二天再推送。
在一些实施例中,第一视频集锦文件的生成日期为6月2日、第二视频集锦文件的生成日期为6月3日、第三视频集锦文件的生成日期为6月4日。控制器以固定时间间隔自动生成视频集锦文件,并将其显示于用户界面,例如所述固定时间可实施为每天早上8点30分。
在一些实施例中,控制器在当天的视频集锦文件生成后,主动删除所述视频集锦文件涉及的视频片段,以优化电视的存储资源。
在一些实施例中,显示设备采集的视频片段、及生成的视频集锦文件可存储于NAS(Network Attached Storage:网络附属存储)。例如,可实施为允许在NAS上最多存储100个视频集锦文件,以优化存储资源。在一些实施例中,若NAS空间不足,可以将生成时间较早的视频集锦文件进行删除。
在一些实施例中,在所述摄像头被配置为在被其它应用调用时,停止为所述控制器获取所述视频片段。
在摄像头被其它应用调用时,控制器停止获取视频片段;在视频集锦功能开启时,控制器开始控制所述摄像头获取所述视频片段。电视的视频集锦功能在开启状态时,控制器会控制摄像头自动采集视频片段并将其存储。当控制器检测判定摄像头被其他应用调用时,则停止获取视频片段、或暂停获取视频片段。例如,当摄像头被用于视频通话时,视频集锦应用程序暂停、或停止采集视频片段。如果电视的视频集锦功能在关闭状态时,即时摄像头没有被占用,控制器也不会控制摄像头录制包含目标用户的视频片段,并且控制器停止所述摄像头进行监测活动。
在一些实施例中,控制器将所述视频片段的时间长度配置为小于等于第二阈值;以及控制器将所述第一视频集锦文件的时间长度配置为固定值。
例如,第二阈值取值为6秒时,从检测到萌娃开始,控制器录制的视频片段长度小于等于6秒,当萌娃在摄像头视频采集范围内持续超过6秒,控制器只获取其前6秒的视频片段,所述视频片段的长度为6秒;当萌娃在摄像头视频采集范围内持续时间小于6秒,即在6秒内离开摄像头的采集范围,控制器只获取萌娃在摄像头范围内的视频片段,所述视频片段的长度小于6秒。
又例如,所述固定值取值为30秒时,控制器将对生成的第一视频集锦文件进行长度检测,并将视频片段中超过30秒的内容剪辑移除,以确保第一视频集锦文件不会超过预设的固定时间长度。
基于上述显示设备实现视频集锦文件的生产过程技术方案介绍以及附图说明,本申请还提供了一种摄像头的控制方法。
图17示出了本申请一实施例显示设备摄像头控制方法的流程示意图。
在步骤1701中,接收用户输入的第一指令,判定摄像头是否为保持升起状态,所述第一指令用于开启视频集锦开关以启动目标用户检测服务;
在步骤1702中,在所述摄像头处于保持升起状态时,可控制所述摄像头录制包含目标用户的视频片段,所述视频片段可用于生成在用户界面播放的视频集锦文件;否则,控制所述用户界面显示第一设置界面,所述第一设置界面用于变更所述摄像头状态以执行所述第一指令。所述摄像头控制的过程及操作,已在上文显示设备实现视频集锦文件生成的技术方案中进行详细阐述,在此不再赘述。
在一些实施例中,可控制所述摄像头录制包含目标用户的视频片段时:接收用户输入的第二指令,所述第二指令用于关闭所述摄像头的保持升起状态;关闭所述视频集锦开关以停止目标用户检测服务。所述摄像头控制的过程及操作,已在上文显示设备实现视频集锦文件生成的技术方案中进行详细阐述,在此不再赘述。
在一些实施例中,在执行目标用户检测、和/或录制包含目标用户的视频片段时:接收用户输入的第三指令,所述第三指令用于关闭所述视频集锦开关以停止目标用户检测服务;控住所述摄像头自动还原至所述第一设置界面中变更前的状态。所述摄像头控制的过程及操作,已在上文显示设备实现视频集锦文件生成的技术方案中进行详细阐述,在此不再赘述。
在一些实施例中,在执行目标用户检测、或录制包含目标用户的视频片段时:如果所述摄像头已被第二应用调用,则暂停目标用户检测、和/或录制包含目标用户的视频片段。所述摄像头控制的过程及操作,已在上文显示设备实现视频集锦文件生成的技术方案中进行详细阐述,在此不再赘述。
在一些实施例中,在执行目标用户检测、和/或录制包含目标用户的视频片段时:响应于来自第二应用的摄像头调用指令,控制所述用户界面显示所述第二应用的摄像头录制画面;暂停目标用户检测、和/或录制包含目标用户的视频片段。所述摄像头控制的过程及操作,已在上文显示设备实现视频集锦文件生成的技术方案中进行详细阐述,在此不再赘述。
本申请的有益效果在于,通过构建第一指令、保持升起状态,可以避免目标用户检测服务侵犯用户隐私;进一步通过构建第一设置界面,可以实现摄像头保持升起状态的自动设置;进一步通过构建第二指令、第三指令,可以实现关闭目标用户检测服务;进一步通过配置目标用户检测服务摄像头的优先级,可以解决显示设备在运行目标用户检测服务时发生摄像头调用冲突的问题。
此外,本领域技术人员可以理解,本申请的各方面可以通过若干具有可专利性的种类或情况进行说明和描述,包括任何新的和有用的工序、机器、产品或物质的组合,或对他们的任何新的和有用的改进。相应地,本申请的各个方面可以完全由硬件执行、可以完全由软件(包括固件、常驻软件、微码等)执行、也可以由硬件和软件组合执行。以上硬件或软件均可被称为″数据块″、″控制器″、″引擎″、″单元″、″组件″或″系统″。此外,本申请的各方面可能表现为位于一个或多个计算机可读介质中的计算机产品,该产品包括计算机可读程序编码。
计算机存储介质可能包含一个内含有计算机程序编码的传播数据信号,例如在基带上或作为载波的一部分。该传播信号可能有多种表现形式,包括电磁形式、光形式等,或合适的组合形式。计算机存储介质可以是除计算机可读存储介质之外的任何计算机可读介质,该介质可以通过连接至一个指令执行系统、装置或设备以实现通讯、传播或传输供使用的程序。位于计算机存储介质上的程序编码可以通过任何合适的介质进行传播,包括无线电、电缆、光纤电缆、RF、或类似介质,或任何上述介质的组合。
本申请各部分操作所需的计算机程序编码可以用任意一种或多种程序语言编写,包括面向对象编程语言如Java、Scala、Smalltalk、Eiffel、JADE、Emerald、C++、C#、VB.NET、Python等,常规程序化编程语言如C语言、Visual Basic、Fortran 2003、Perl、COBOL 2002、PHP、ABAP,动态编程语言如Python、Ruby和Groovy,或其他编程语言等。该程序编码可以完全在用户计算机上运行、或作为独立的软件包在用户计算机上运行、或部分在用户计算机上运行部分在远程计算机运行、或完全在远程计算机或服务器上运行。在后种情况下,远程计算机可以通过任何网络形式与用户计算机连接,比如局域网(LAN)或广域网(WAN)、或连接至外部计算机(例如通过因特网)、或在云计算环境中、或作为服务使用如软件即服务(SaaS)。
此外,除非权利要求中明确说明,本申请所述处理元素和序列的顺序、数字字母的使用、或其他名称的使用,并非用于限定本申请流程和方法的顺序。尽管上述披露中通过各种示例讨论了一些目前认为有用的发明实施例,但应当理解的是,该类细节仅起到说明的目的,附加的权利要求并不仅限于披露的实施例,相反,权利要求旨在覆盖所有符合本申请实施例实质和范围的修正和等价组合。例如,虽然以上所描述的系统组件可以通过硬件设备实现,但是也可以只通过软件的解决方案得以实现,如在现有的服务器或移动设备上安装所描述的系统。
同理,应当注意的是,为了简化本申请披露的表述,从而帮助对一个或多个发明实施例的理解,前文对本申请实施例的描述中,有时会将多种特征归并至一个实施例、附图或对其的描述中。但是,这种披露方法并不意味着本申请对象所需要的特征比权利要求中提及的特征多。实际上,实施例的特征要少于上述披露的单个实施例的全部特征。
针对本申请引用的每个专利、专利申请、专利申请公开物和其他材料,如文章、书籍、说明书、出版物、文档等,特此将其全部内容并入本申请作为参考。与本申请内容不一致或产生冲突的申请历史文件除外,对本申请权利要求最广范围有限制的文件(当前或之后附加于本申请中的)也除外。需要说明的是,如果本申请附属材料中的描述、定义、和/或术语的使用与本申请所述内容有不一致或冲突的地方,以本申请的描述、定义和/或术语的使用为准。

Claims (10)

1.一种显示设备,其特征在于,包括:
显示屏,用于显示用户界面;
控制器,被配置为:
接收用户输入的第一指令,判定摄像头是否为保持升起状态,所述第一指令用于开启视频集锦开关以启动目标用户检测服务;
在摄像头处于保持升起状态时,所述控制器可控制所述摄像头录制包含目标用户的视频片段,所述视频片段可用于生成在所述用户界面播放的视频集锦文件;否则,控制所述用户界面显示第一设置界面,所述第一设置界面用于变更所述摄像头状态以执行所述第一指令。
2.如权利要求1所述显示设备,其特征在于,所述控制器可控制所述摄像头录制包含目标用户的视频片段时,所述控制器还被配置为:
接收用户输入的第二指令,所述第二指令用于关闭所述摄像头的保持升起状态;
控住所述显示设备关闭所述视频集锦开关以停止目标用户检测服务。
3.如权利要求1所述显示设备,其特征在于,所述控制器控制所述用户界面显示第一设置界面,所述第一设置界面用于变更所述摄像头状态以执行所述第一指令,所述控制器还被配置为:
接收用户输入的第三指令,所述第三指令用于关闭所述视频集锦开关以停止目标用户检测服务;
控住所述摄像头自动还原至所述第一设置界面中变更前的状态。
4.如权利要求1所述显示设备,其特征在于,所述显示设备在执行目标用户检测、或录制包含目标用户的视频片段时,
如果所述摄像头已被第二应用调用,则所述控制器暂停目标用户检测、和/或录制包含目标用户的视频片段。
5.如权利要求1所述显示设备,其特征在于,所述控制器在执行目标用户检测、和/或录制包含目标用户的视频片段时,所述控制器还被配置为:
响应于来自第二应用的摄像头调用指令,控制所述用户界面显示所述第二应用的摄像头录制画面;
暂停目标用户检测、和/或录制包含目标用户的视频片段。
6.一种摄像头的控制方法,其特征在于,所述方法包括:
接收用户输入的第一指令,判定摄像头是否为保持升起状态,所述第一指令用于开启视频集锦开关以启动目标用户检测服务;
在所述摄像头处于保持升起状态时,可控制所述摄像头录制包含目标用户的视频片段,所述视频片段可用于生成在用户界面播放的视频集锦文件;否则,控制所述用户界面显示第一设置界面,所述第一设置界面用于变更所述摄像头状态以执行所述第一指令。
7.如权利要求6所述摄像头的控制方法,其特征在于,可控制所述摄像头录制包含目标用户的视频片段时:
接收用户输入的第二指令,所述第二指令用于关闭所述摄像头的保持升起状态;
关闭所述视频集锦开关以停止目标用户检测服务。
8.如权利要求6所述摄像头的控制方法,其特征在于,在执行目标用户检测、和/或录制包含目标用户的视频片段时:
接收用户输入的第三指令,所述第三指令用于关闭所述视频集锦开关以停止目标用户检测服务;
控住所述摄像头自动还原至所述第一设置界面中变更前的状态。
9.如权利要求6所述摄像头的控制方法,其特征在于,在执行目标用户检测、或录制包含目标用户的视频片段时:
如果所述摄像头已被第二应用调用,则暂停目标用户检测、和/或录制包含目标用户的视频片段。
10.如权利要求6所述摄像头的控制方法,其特征在于,在执行目标用户检测、和/或录制包含目标用户的视频片段时:
响应于来自第二应用的摄像头调用指令,控制所述用户界面显示所述第二应用的摄像头录制画面;
暂停目标用户检测、和/或录制包含目标用户的视频片段。
CN202011148312.9A 2020-07-06 2020-10-23 一种显示设备及摄像头的控制方法 Pending CN114079812A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202180046688.5A CN116391358A (zh) 2020-07-06 2021-06-07 显示设备、智能终端及视频集锦生成方法
PCT/CN2021/098617 WO2022007568A1 (zh) 2020-07-06 2021-06-07 显示设备、智能终端及视频集锦生成方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010850122 2020-08-21
CN2020108501225 2020-08-21

Publications (1)

Publication Number Publication Date
CN114079812A true CN114079812A (zh) 2022-02-22

Family

ID=74360137

Family Applications (3)

Application Number Title Priority Date Filing Date
CN202011148312.9A Pending CN114079812A (zh) 2020-07-06 2020-10-23 一种显示设备及摄像头的控制方法
CN202011149949.XA Pending CN114079829A (zh) 2020-07-06 2020-10-23 一种显示设备及视频集锦文件水印的生成方法
CN202011148295.9A Pending CN112351323A (zh) 2020-07-06 2020-10-23 一种显示设备及视频集锦文件的生成方法

Family Applications After (2)

Application Number Title Priority Date Filing Date
CN202011149949.XA Pending CN114079829A (zh) 2020-07-06 2020-10-23 一种显示设备及视频集锦文件水印的生成方法
CN202011148295.9A Pending CN112351323A (zh) 2020-07-06 2020-10-23 一种显示设备及视频集锦文件的生成方法

Country Status (1)

Country Link
CN (3) CN114079812A (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022007568A1 (zh) * 2020-07-06 2022-01-13 海信视像科技股份有限公司 显示设备、智能终端及视频集锦生成方法
CN113038151B (zh) * 2021-02-25 2022-11-18 北京达佳互联信息技术有限公司 视频剪辑方法和视频剪辑装置
CN112860922A (zh) * 2021-03-10 2021-05-28 北京晓数聚数字科技有限公司 一种基于数据智能与机器视觉的视频集锦自动生成方法
CN113542791A (zh) * 2021-07-08 2021-10-22 山东云缦智能科技有限公司 个性化视频集锦生成方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102075814A (zh) * 2009-11-19 2011-05-25 康佳集团股份有限公司 一种记录宝宝成长过程的电视机系统
CN102905073A (zh) * 2012-09-28 2013-01-30 歌尔声学股份有限公司 电视机摄像头的控制装置
US20130139193A1 (en) * 2011-11-29 2013-05-30 At&T Intellectual Property I, Lp Method and apparatus for providing personalized content
CN103677848A (zh) * 2013-12-27 2014-03-26 厦门雅迅网络股份有限公司 一种基于Android的摄像头控制方法
CN103793246A (zh) * 2014-01-22 2014-05-14 深圳Tcl新技术有限公司 协调摄像头资源的方法及系统
WO2016062185A1 (zh) * 2014-10-24 2016-04-28 杭州大穿越旅游策划有限公司 自动获取影像并即时推送至对应智能终端的系统和方法
CN105979188A (zh) * 2016-05-31 2016-09-28 北京疯景科技有限公司 一种视频录制方法及装置
CN108429879A (zh) * 2018-02-13 2018-08-21 广东欧珀移动通信有限公司 电子设备、摄像头控制方法及相关产品
CN108924290A (zh) * 2018-06-12 2018-11-30 Oppo广东移动通信有限公司 摄像头控制方法、装置、移动终端及计算机可读介质
CN110505390A (zh) * 2019-09-24 2019-11-26 深圳创维-Rgb电子有限公司 电视机及其摄像头调用方法、控制装置和可读存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5760438B2 (ja) * 2010-12-28 2015-08-12 富士通株式会社 電子透かし埋め込み装置、電子透かし埋め込み方法及び電子透かし埋め込み用コンピュータプログラムならびに電子透かし検出装置
CN104135670B (zh) * 2014-07-22 2018-01-19 乐视网信息技术(北京)股份有限公司 一种视频播放方法及装置
CN104867203A (zh) * 2015-06-10 2015-08-26 深圳市凯立德科技股份有限公司 一种存储视频文件的方法及行车记录仪
CN105872854A (zh) * 2015-12-14 2016-08-17 乐视网信息技术(北京)股份有限公司 水印展示方法及装置
CN106534940B (zh) * 2016-10-14 2020-12-11 腾讯科技(北京)有限公司 直播入口预览图的显示方法及装置
US10218911B2 (en) * 2017-03-22 2019-02-26 Htc Corporation Mobile device, operating method of mobile device, and non-transitory computer readable storage medium
CN111405237A (zh) * 2019-12-11 2020-07-10 杭州海康威视系统技术有限公司 提供预览功能的云存储系统及预览方法

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102075814A (zh) * 2009-11-19 2011-05-25 康佳集团股份有限公司 一种记录宝宝成长过程的电视机系统
US20130139193A1 (en) * 2011-11-29 2013-05-30 At&T Intellectual Property I, Lp Method and apparatus for providing personalized content
CN102905073A (zh) * 2012-09-28 2013-01-30 歌尔声学股份有限公司 电视机摄像头的控制装置
CN103677848A (zh) * 2013-12-27 2014-03-26 厦门雅迅网络股份有限公司 一种基于Android的摄像头控制方法
CN103793246A (zh) * 2014-01-22 2014-05-14 深圳Tcl新技术有限公司 协调摄像头资源的方法及系统
WO2016062185A1 (zh) * 2014-10-24 2016-04-28 杭州大穿越旅游策划有限公司 自动获取影像并即时推送至对应智能终端的系统和方法
CN105979188A (zh) * 2016-05-31 2016-09-28 北京疯景科技有限公司 一种视频录制方法及装置
CN108429879A (zh) * 2018-02-13 2018-08-21 广东欧珀移动通信有限公司 电子设备、摄像头控制方法及相关产品
CN108924290A (zh) * 2018-06-12 2018-11-30 Oppo广东移动通信有限公司 摄像头控制方法、装置、移动终端及计算机可读介质
CN110505390A (zh) * 2019-09-24 2019-11-26 深圳创维-Rgb电子有限公司 电视机及其摄像头调用方法、控制装置和可读存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
优质数码领域创作者.: "你家宠物都背着你在家干嘛了?360智能摄像机云台变焦版告诉你", 《凤凰新闻,驱动中国》 *
小阳仔游戏解说.: "360智能摄像机如何开启家人相册?", 《百度经验》 *

Also Published As

Publication number Publication date
CN114079829A (zh) 2022-02-22
CN112351323A (zh) 2021-02-09

Similar Documents

Publication Publication Date Title
CN111510781A (zh) 显示设备待机的控制方法及显示设备
CN114079812A (zh) 一种显示设备及摄像头的控制方法
CN112333509B (zh) 一种媒资推荐方法、推荐媒资的播放方法及显示设备
CN111836109A (zh) 显示设备、服务器及自动更新栏目框的方法
CN111787379B (zh) 一种生成视频集锦文件的交互方法及显示设备、智能终端
CN112165642B (zh) 一种显示设备
CN112135180B (zh) 一种内容显示方法和显示设备
CN111031375B (zh) 一种开机动画详情页的跳转方法及显示设备
CN111787376B (zh) 一种显示设备、服务器及视频推荐的方法
CN112543359B (zh) 一种显示设备及自动配置视频参数的方法
CN112492371A (zh) 一种显示设备
CN113438539A (zh) 一种数字电视节目录制方法及显示设备
CN111970549A (zh) 菜单显示方法和显示设备
CN111954059A (zh) 屏保的展示方法及显示设备
CN112506859B (zh) 一种维护硬盘数据的方法及显示设备
CN111698544A (zh) 一种显示设备
CN111586463B (zh) 显示设备
CN112203154A (zh) 一种显示设备
CN113495711A (zh) 显示设备和显示方法
CN112272320B (zh) 一种显示设备及其重名检测方法
CN112333520B (zh) 节目推荐方法、显示设备及服务器
CN112040299B (zh) 一种显示设备、服务器及直播显示方法
CN111787350B (zh) 显示设备及视频通话中的截图方法
CN113542878B (zh) 一种基于人脸识别与手势检测的唤醒方法及显示设备
CN114079827A (zh) 菜单显示方法和显示设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20220222