CN113490031A - 一种显示设备及多窗口视频播放方法 - Google Patents

Abstract

本申请提供一种显示设备及多窗口视频播放方法，所述方法可以在用户控制播放视频时，通过判断每个窗口中所播放的视频是否满足预设视频特征，检测用户界面中所包含的第一类视频和第二类视频，并使用显示设备的硬件播放流程播放第一类视频，以及使用浏览器的软件播放流程播放第二类视频。所述方法可以根据不同的视频窗口，选择设备硬解播放流程和浏览器软解播放流程，使得显示设备可以同时支持多窗口视频播放，提高用户体验。

Description

一种显示设备及多窗口视频播放方法

技术领域

本申请涉及智能显示设备技术领域，尤其涉及一种显示设备及多窗口视频播放方法。

背景技术

显示设备是指能够输出具体显示画面的终端设备，可以是智能电视、移动终端、智能广告屏、投影仪等终端设备。以智能电视为例，智能电视是基于Internet应用技术，具备开放式操作系统与芯片，拥有开放式应用平台，可实现双向人机交互功能，集影音、娱乐、数据等多种功能于一体的电视产品，用于满足用户多样化和个性化需求。

显示设备可以使用浏览器实现一些显示功能，如浏览网页、播放网页中的视频资源等。对于一些视频类网页，其中可以同时存在多个窗口用于播放视频，如推广类视频、提示类视频等，多个窗口可以同时播放不同的视频，以带来多样化的用户体验。

通常，浏览器是面向PC端使用，导致浏览器上所显示的网页效果也主要依赖于PC用户的感官。而对于智能电视等显示设备，由于其视频播放过程的特殊性，所显示的用户界面中的视频播放是通过设备流程，即由显示设备的硬件进行视频解码和播放，因此在显示设备使用浏览器进行网页视频播放过程中，会受到显示设备视频播放方式的制约。即显示设备只有一路解码和显示进程，如果视频播放包括多个窗口，则显示设备会把部分窗口中的视频停止播放，只播放其中一路视频，降低用户体验。

发明内容

本申请提供了一种显示设备及多窗口视频播放方法，以解决传统显示设备只有一路解码和显示进程，导致其他窗口视频停止播放的问题。

第一方面，本申请提供一种显示设备，包括：显示器和控制器。其中，显示器被配置为显示用户界面，所述用户界面中包括多个视频播放窗口；控制器被配置为执行以下程序步骤：

获取用户输入的用于播放视频的控制指令；

响应于所述控制指令，检测所述用户界面中的第一类视频和第二类视频；所述第一类视频为多个视频播放窗口中播放的，满足预设视频特征的视频；所述第二视频为多个视频播放窗口中播放的，除所述第一视频以外的视频；

使用显示设备的硬件播放流程播放所述第一类视频，以及使用浏览器的软件播放流程播放所述第二类视频。

第二方面，本申请还提供一种多窗口视频播放方法，应用于上述第一方面提供的显示设备。所述多窗口视频播放方法包括：

获取用户输入的用于播放视频的控制指令；

响应于所述控制指令，检测所述用户界面中的第一类视频和第二类视频；所述第一类视频为多个视频播放窗口中播放的，满足预设视频特征的视频；所述第二视频为多个视频播放窗口中播放的，除所述第一视频以外的视频；

使用显示设备的硬件播放流程播放所述第一类视频，以及使用浏览器的软件播放流程播放所述第二类视频。

由以上技术方案可知，本申请提供的显示设备及多窗口视频播放方法可以在用户控制播放视频时，通过判断每个窗口中所播放的视频是否满足预设视频特征，检测用户界面中所包含的第一类视频和第二类视频，并使用显示设备的硬件播放流程播放第一类视频，以及使用浏览器的软件播放流程播放第二类视频。所述方法可以根据不同的视频窗口，选择设备硬解播放流程和浏览器软解播放流程，使得显示设备可以同时支持多窗口视频播放，提高用户体验。

附图说明

为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例中显示设备的使用场景；

图2为本申请实施例中控制装置的硬件配置框图；

图3为本申请实施例中显示设备的硬件配置图；

图4为本申请实施例中显示设备的软件配置图；

图5为本申请实施例中多窗口播放界面示意图；

图6为传统硬件播放流程的播放效果示意图；

图7为本申请实施例中多窗口视频播放方法的流程示意图；

图8为本申请实施例中小窗口选项示意图；

图9为本申请实施例中小窗口播放效果示意图；

图10为本申请实施例中检测第一类视频和第二类视频效果示意图；

图11为本申请实施例中电影类视频界面预设显示区域示意图；

图12为本申请实施例中短视频类界面预设显示区域示意图；

图13为本申请实施例中获取视频播放顺序的流程示意图；

图14为本申请实施例中设置第二类视频播放数量的流程示意图；

图15为本申请实施例中根据剩余内存播放第二类视频的效果示意图；

图16为本申请实施例中检测用户界面中窗口数量的流程示意图。

具体实施方式

下面将详细地对实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下实施例中描述的实施方式并不代表与本申请相一致的所有实施方式。仅是与权利要求书中所详述的、本申请的一些方面相一致的系统和方法的示例。

需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。

本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。

术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。

术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。

图1为根据实施例中显示设备的使用场景的示意图。如图1所示，显示设备200还与服务器400进行数据通信，用户可通过智能设备300或控制装置100操作显示设备200。

在一些实施例中，控制装置100可以是遥控器，遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信，及其他短距离通信方式中的至少一种，通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等至少一种输入用户指令，来控制显示设备200。

在一些实施例中，显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群，也可以是多个集群，可以包括一类或多类服务器。

在一些实施例中，一个步骤执行主体执行的软件步骤可以随需求迁移到与之进行数据通信的另一步骤执行主体上进行执行。示例性的，服务器执行的软件步骤可以随需求迁移到与之数据通信的显示设备上执行，反之亦然。

图2示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示，控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起用用户与显示设备200之间交互中介作用。

图3示出了根据示例性实施例中显示设备200的硬件配置框图。

在一些实施例中，显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。

在一些实施例中，通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如：通信器可以包括Wifi模块，蓝牙模块，有线以太网模块等其他网络通信协议芯片或近场通信协议芯片，以及红外接收器中的至少一种。显示设备200可以通过通信器220与控制装置100或服务器400建立控制信号和数据信号的发送和接收。

在一些实施例中，外部装置接口240可以包括但不限于如下：高清多媒体接口接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。

在一些实施例中，控制器250和调谐解调器210可以位于不同的分体设备中，即调谐解调器210也可在控制器250所在的主体设备的外置设备中，如外置机顶盒等。

在一些实施例中，控制器250，通过存储在存储器上中各种软件控制程序，来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如：响应于接收到用于选择在显示器260上显示UI对象的用户命令，控制器250便可以执行与由用户命令选择的对象有关的操作。

在一些实施例中，用户可在显示器260上显示的图形用户界面(GUI)输入用户命令，则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者，用户可通过输入特定的声音或手势进行输入用户命令，则用户输入接口通过传感器识别出声音或手势，来接收用户输入命令。

在一些实施例中，“用户界面”，是应用程序或操作系统与用户之间进行交互和信息交换的介质接口，它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface，GUI)，是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素，其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素中的至少一种。

参见图4，在一些实施例中，将系统分为四层，从上至下分别为应用程序(Applications)层(简称“应用层”)，应用程序框架(Application Framework)层(简称“框架层”)，安卓运行时(Android runtime)和系统库层(简称“系统运行库层”)，以及内核层。

在一些实施例中，应用程序层中运行有至少一个应用程序，这些应用程序可以是操作系统自带的窗口(Window)程序、系统设置程序或时钟程序等；也可以是第三方开发者所开发的应用程序。在具体实施时，应用程序层中的应用程序包不限于以上举例。

框架层为应用程序层的应用程序提供应用编程接口(application programminginterface，API)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心，这个中心决定让应用层中的应用程序做出动作。应用程序通过API接口，可在执行中访问系统中的资源和取得系统的服务。

如图4所示，本申请实施例中应用程序框架层包括管理器(Managers)，内容提供者(Content Provider)等，其中管理器包括以下模块中的至少一个：活动管理器(ActivityManager)用与和系统中正在运行的所有活动进行交互；位置管理器(Location Manager)用于给系统服务或应用提供了系统位置服务的访问；文件包管理器(Package Manager)用于检索当前安装在设备上的应用程序包相关的各种信息；通知管理器(NotificationManager)用于控制通知消息的显示和清除；窗口管理器(Window Manager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。

在一些实施例中，活动管理器用于管理各个应用程序的生命周期以及通常的导航回退功能，比如控制应用程序的退出、打开、后退等。窗口管理器用于管理所有的窗口程序，比如获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕，控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。

在一些实施例中，系统运行库层为上层即框架层提供支撑，当框架层被使用时，安卓操作系统会运行系统运行库层中包含的C/C++库以实现框架层要实现的功能。

在一些实施例中，内核层是硬件和软件之间的层。如图4所示，内核层至少包含以下驱动中的至少一种：音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器，温度传感器，压力传感器等)、以及电源驱动等。

上述显示设备200可以在部分使用场景下，通过浏览器显示用户界面。例如，显示设备200可以使用浏览器或部分应用程序可以使用浏览器呈现具体的UI界面。其中，所使用的浏览器可以为chromium内核框架，同时基于超文本标记语言(Hyper Text MarkupLanguage，HTML)的UI系统。

显示设备200在使用浏览器呈现用户界面的过程中，根据用户界面中所包含的具体内容不同，可以实现不同的功能。例如，显示设备200所运行的浏览器可以同时具备UI功能和网页浏览功能。即显示设备200在使用上述浏览器进行网页浏览等功能时，可以通过UI功能和浏览功能的两种类型的窗口，组成具体的网页浏览界面。

当通过浏览器所呈现的用户界面中包括视频元素时，显示设备200还可以通过浏览器实现视频播放功能。例如，用户可以控制显示设备200访问视频类网站，并在视频类网站中点击任一视频资源链接，使得显示设备200可以在浏览器页面中显示所点击的视频画面内容。

在进行视频播放功能的过程中，显示设备200可以通过多种视频播放流程对所播放的视频进行解码，形成图像画面并最终呈现在显示器260上。例如，显示设备200可以通过设备硬件播放流程，对待播放视频进行解码和显示。硬件播放流程是指显示设备200的控制器250通过运行操作系统中的视频播放程序，对待播放视频进行解码，并按照显示设备200的画面渲染方式对解码后的视频画面进行渲染、处理，以获得最终的显示画面，并显示在显示器260内。显示设备200还可以通过浏览器的软件播放流程，对待播放视频进行解码和显示。软件播放流程是指显示设备200的控制器250通过运行浏览器中嵌入的视频播放程序，对待播放视频进行解码，并按照浏览器的渲染方式或不经过渲染，获得最终的显示画面。

由于浏览器在开发时是面向在个人电脑(Personal Computer，PC)端使用的，因此浏览器所呈现的具体内容也更多的考虑PC端用户的感官体验。例如，如图5所示，浏览器呈现网页中可以同时包括多个视频播放窗口，当PC端使用浏览器呈现用户界面过程中，多个视频播放窗口可以在同时进行视频播放，从而实现推广、提示等功能。

但是，由于智能电视等显示设备200在显示视频画面时的特殊性，使得显示设备200在进行视频播放时，一般通过设备的硬件播放流程。即浏览器呈现的视频是通过控制器250运行操作系统中的播放程序，对网页中的视频进行解码和显示。可见，在显示包括多个视频播放窗口的用户界面时，受到显示设备200的播放程序的制约，显示设备200只有一路解码和显示，因此，显示设备200所运行浏览器上的视频播放过程，将会关闭掉一部分窗口的视频播放，仅保留一个视频通过设备硬件播放流程进行播放，因此给用户的视觉体验效果不好。

例如，如图6所示，视频网站首页上会不定时的播放一些推广类视频，而当用户在视频网站页面采用小窗口播放视频的时候，首页也会同时存在一些推广类视频的播放窗口，即在同一个页面中会存在多个视频播放窗口。而由于智能电视等显示设备200一般只支持一路解码或者一路播放，因此当显示视频网站类型的页面时，显示设备200都是把前面的视频停止掉，只播放最后一路视频播放，即视频1保持播放，但视频2和视频3停止播放。这样的播放方式在降低用户的视频观看体验的同时，也对推广类视频方不友好。

为了提高用户的观看体验，在本申请的部分实施例中提供一种显示设备200，该显示设备200至少包括：显示器260和控制器250。其中，显示器260可以被配置为显示包括多个视频播放窗口的用户界面。如图7所示，控制器250被配置为执行一种多窗口视频播放方法，实现在显示设备200显示多个视频播放窗口的用户界面时，可以同时多个视频进行播放，具体包括以下内容：

获取用户输入的用于播放视频的控制指令。显示设备200可以在显示用户界面的过程中，通过浏览器或设备自身的操作系统实时检测用户输入的交互动作，并根据不同的交互动作响应不同的控制功能。其中，部分交互动作可以驱动显示设备200执行视频播放功能，这类交互动作可以对应具体的控制指令，即用于播放视频的控制指令。

用户可以通过多种交互动作输入用于播放视频的控制指令。例如，用户可以通过控制装置100或智能设备300上的方向键和确认键，控制用户界面中的焦点光标移动并选中任一视频图标或视频播放按钮，即可以控制浏览器跳转到进行视频播放的页面上，并自动开始执行播放程序。在此期间，当用户控制焦点光标在具体的视频图标上并按下确认键时，控制器250可以获取到用于播放视频的控制指令。

对于支持特殊交互方式的显示设备200和浏览器，用户还可以通过其他交互动作输入用于播放视频的控制指令。例如，对于支持触控操作的显示设备200，用户可以通过触控点击页面中的任一视频链接图标，则在用户触控点击后，控制器250可以获取到用于播放视频的控制指令。除了触控交互方式外，显示设备200还可以根据硬件配置和外接设备连接情况，进一步支持其他交互方式输入，如智能语音系统等。不同的交互方式均可以触发浏览器跳转至播放界面。

如图8所示，在一些实施例中，对于部分显示设备200，如手机、平板电脑等，当用户选中网页中的一个视频链接后，浏览器可以先对用户的交互动作进行响应，并按照浏览器中的软件播放流程对选中的视频进行播放。同时，显示设备200还在播放选中视频的同时，在网页上层的UI层显示小窗口播放功能控件供用户选择。

如图9所示，如果用户选中小窗口播放功能控件，则可以启用小窗口播放功能。小窗口播放功能可以依赖于显示设备200的硬件播放流程对选中的视频进行播放，即通过显示设备200操作系统中内置的播放程序对选中的视频进行解码、渲染以及显示。在选中小窗口播放后，显示设备200可以在浏览器显示的用户界面上层显示播放窗口，使选中的视频采用硬件播放流程。同时，网页中不定时显示的推广类、提示类视频则仍然采用浏览器的软件播放流程。因此，用户还可以点击小窗口播放控件，以启动设备硬件播放流程输入用于播放视频的控制指令。

在用户输入用于播放视频的控制指令后，显示设备200可以响应于输入的控制指令，对当前用户界面中的视频播放窗口以及视频播放窗口中对应播放的视频内容进行检测，以检测用户界面中所包含的第一类视频和第二类视频，以便根据不同的视频播放窗口和视频类型采用不同的播放方式。

所述第一类视频和第二类视频是针对用户界面中每个播放窗口所播放视频进行的分类。其中，所述第一类视频为多个视频播放窗口中播放的，满足预设视频特征的视频。所述第二视频为多个视频播放窗口中播放的，除所述第一视频以外的视频。根据显示设备200所显示的用户界面具体类型不同，显示设备200可以基于不同的预设视频特征对播放窗口中所播放视频的类型进行判断。例如，当显示设备200通过浏览器显示视频网站页面时，所述预设视频特征为根据视频总时长、视频码率、视频播放窗口面积、视频播放窗口布局、视频播放顺序中的一种或多种的组合计算的判断结果。

通常，当用户选中视频页面中的视频链接图标后，通过浏览器所呈现的播放页面中选中视频对应的窗口应设置在整个页面的中部位置，并占据较大的页面区域。并且，相对于推广类视频、提示类视频等视频类型，用户选择播放的视频总时长、视频码率等参数都相对具有明显差异，如用户选择播放的视频要比推广类、提示类视频更清晰、码率更高，以获得更好的视频效果。因此，显示设备200可以通过对各个窗口所播放视频的总时长、码率、窗口面积以及窗口布局等参数进行综合判断，从而确定第一类视频。

在确定第一类视频后，显示设备200可以将用户界面中除第一类视频以外的，其他播放窗口中所播放的视频归类为第二类视频。对于显示设备200播放的视频，其中第一类视频可以作为主视频，通常为用户在视频界面上选中的视频。而第二类视频通常为视频播放页面中不定时播放的推广类视频和提示类视频，即作为副视频。

例如，如图10所示，显示设备200通过浏览器显示的用户界面中包括视频1和视频2两个视频窗口，其中，视频1为用户选中的视频，视频2为网页中的推广类视频。因此，在用户点击小窗口播放视频时，由于视频1的总长度、码率、窗口面积均大于视频2，并且视频1的原播放窗口位置处于网页的中部区域，因此显示设备200可以确定视频1为第一类视频，即主视频；视频2为第二类视频，即副视频。

通过检测用户界面中的第一类视频和第二类视频后，显示设备200可以采用不同的视频播放方式分别对第一类视频和第二类视频进行播放。即显示设备200可以使用显示设备200的硬件播放流程播放所述第一类视频，以及使用浏览器的软件播放流程播放所述第二类视频。

例如，在确定视频1为第一类视频，视频2为第二类视频时，可以启动小窗口播放视频1对应的画面。小窗口显示的视频内容可以位于网页原界面的上层，并依靠显示设备200操作系统中内置的播放程序对视频1的画面进行渲染和呈现，即使用显示设备200的硬件播放流程播放视频1。同时，显示设备200还可以运行浏览器中的播放程序，对视频2进行播放。由于浏览器中的播放程序与显示设备200操作系统中内置的播放程序的渲染方式不同，因此视频2仍然保持在原网页中的位置进行播放，即使用浏览器的软件播放流程播放视频2。

由以上技术方案可知，在上述实施例中，显示设备200可以根据不同的视频类型，选择对视频进行设备硬解播放流程和浏览器软解播放流程，使得显示设备200可以同时支持多窗口视频播放，提高用户体验。

基于上述实施例，显示设备200可以通过自动检测各窗口的视频类型，确定第一类视频采用硬件播放流程，而第二类视频采用软件播放流程，由于第一类视频通常为当前用户界面中的主视频，因此，为了能够准确的判断当前用户界面中的主视频，在一些实施例中，显示设备200可以在获取用于播放视频的控制指令后，对当前用户界面中的多个视频播放窗口进行检测，以获取多个视频播放窗口中每个窗口所播放视频的总时长、码率以及窗口面积。再结合预设权值计算每个窗口的第一判断值。其中，第一判断值用于对多个视频进行综合对比，因此第一判断值可以为对所述总时长、码率以及窗口面积的加权求和结果。

例如，针对不同类型的网页可以为总时长T、码率M以及窗口面积S等指标设置不同的权值，分别为W1、W2和W3。再对总时长T、码率M以及窗口面积S进行加权求和计算，获得第一判断值D1＝W1×T+W2×M+W3×S。基于此，可以依次对用户界面中的所有窗口计算第一判断值。

在计算获得每个窗口对应的第一判断值后，显示设备200还可以对比每个窗口的第一判断值，以获得所述第一判断值最大的窗口。并且标记第一判断值最大的窗口所播放视频为所述第一类视频。例如，当用户界面中包括三个播放窗口，分别播放视频1、视频2以及视频3时，可以分别计算获得三个窗口的第一判断值分别为D11、D12和D13，因此可以对三个第一判断值的大小进行比较，当比较结果为D11＞D12＞D13，即可以确定第一个窗口中所播放的视频在总时长、码率以及窗口面积的综合判断过程中，最有可能为主视频，因此可以标记视频1为第一类视频，视频2和视频3为第二类视频。

可见，在本实施例中，通过对总时长、码率以及窗口面积进行加权求和计算，以获得第一判断值，可以将多个窗口的综合判断指标进行量化，从而可以准确的判断当前用户界面中的主视频，实现对主视频使用设备硬件播放流程进行播放，对副视频使用浏览器软件播放流程进行播放。

对于部分页面，由于其页面布局的特殊，将有可能使部分推广类、提示类视频的播放窗口大于所选定视频的播放窗口面积，并且受限于网页平台的资源状况，部分待播放视频的总时长和码率也有可能小于推广类或提示类视频，这将导致单纯的通过第一判断值对视频类型的判断结果存在误差，即可能将部分时长较长、码率较高、窗口面积较大的视频判定为主视频，此时使用设备硬件播放流程的视频将是推广类、提示类视频。

为了缓解上述判断错误的情况，在本申请的部分实施例中，显示设备200还可以在对比每个窗口的第一判断值的步骤中，先获取视频播放窗口布局信息，再从所述视频播放窗口布局信息中提取窗口位置。其中，播放窗口布局信息用于表示视频播放窗口在当前用户界面中的位置，可以包括播放窗口左上角顶点在当前用户界面中的位置坐标。

在提取到窗口位置后，可以对当前用户界面中所有窗口的位置进行判断，以确定位于预设显示区域内的视频播放窗口，作为目标窗口。其中，预设显示区域可以根据播放页面形式的不同，设置为不同的范围和形状。例如，如图11所示，对于电影、电视剧等播放页面，可以设置预设显示区域为靠近页面高度方向中间位置的矩形区域，该矩形区域的宽度大于高度，以适应电影、电视剧等视频的画面比例；而如图12所示，对于短视频等播放页面，可以预设显示区域为靠近页面宽度方向中间位置的矩形区域，该矩形区域的宽度小于高度，以使用短视频等视频的画面比例。

在确定目标窗口后，显示设备200可以仅针对目标窗口的第一判断值进行对比，即仅针对位于预设显示区域内视频的第一判断值进行对比，而对于预设显示区域外的视频，显示设备200可以不进行对比，即不会将预设显示区域外的视频判断为第一类视频。例如，显示设备200当前显示的用户界面中，可以包括三个视频播放窗口，即位于中部区域视频1、位于中部偏右区域的视频2以及位于顶部偏左区域的视频3。通过提取三个视频窗口在当前用户界面中的位置，可以确定视频3所在的窗口不在预设显示区域范围内，因此，在对比每个窗口的第一判断值时，可以仅针对视频1和视频2进行第一判断值的比较，而不对视频3的第一判断值进行比较，即不会将处于顶部偏左位置的推广类视频位置上的视频3判断为第一类视频。

可见，通过对视频播放窗口对应的窗口位置进行判断，可以确定位于预设显示区域内的目标窗口，并仅针对目标窗口内的窗口视频进行第一判断值对比，从而缓解部分推广类、提示类视频与用户选择播放的视频之间在视频总时长、码率以及窗口面积的相互干扰，提高对第一类视频判断的准确性。

为了进一步提高显示设备200对第一类视频判断结果的准确性，在一些实施例中，还可以为用户界面中的播放窗口设置播放顺序，并且，如图13所示，显示设备200可以在对比每个窗口的第一判断值的步骤前，通过读取每个窗口所播放的视频信息，获取多个窗口的视频播放顺序。其中，视频播放顺序可以由视频网站的运营商在编辑网页时按照一定的播放规则进行设置。例如，部分视频网站可以在播放完一个选定视频后，通过一个或多个视频播放窗口播放与刚刚播放视频相似或相关联的推广类视频，则选定视频的播放顺序为第一位，推广类视频的播放顺序为第二位。设置的视频播放顺序可以存储在网站对应的视频信息中，可以通过字符串、标签以及识别码等形式进行存储。

当用户控制浏览器跳转到选定视频的播放页面后，显示设备200可以先读取当前播放页面中所有视频的播放顺序，如果显示设备200获取到视频播放顺序，则可以将所述视频播放顺序为第一位的视频标记为第一类视频；如果显示设备200未获取到所述视频播放顺序，再执行对比每个窗口的第一判断值的步骤。

可见，上述实施例在对比每个窗口的第一判断值前，可以先对视频播放顺序进行检测，使得第一类视频的判断过程可以参考视频播放顺序，从而提高第一类视频的判断准确率，并且在获取到播放顺序时，可以直接将顺序为第一位的视频标记为第一类视频，使显示设备200不再对其他窗口进行重复检测，有利于快速获得检测结果，以及减少显示设备200的数据处理量。

由于显示设备200的硬件播放流程需要对待播放视频进行电视级别的画质渲染，因此当显示设备200启动硬件播放流程后，会增加对显示设备200运算能力的消耗，尤其对于运行内存的占用较大。为此，在一种可行的实施方式中，如果当前用户界面中所包含的窗口数量较多，显示设备200还可以根据剩余运行内存量设定用户界面中进行播放的窗口数量，即显示设备200在使用硬件播放流程播放第一类视频后，可以检测当前剩余运行内存容量；并根据剩余运行内存容量设置第二类视频的待播放数量，从而使用浏览器的软件播放流程播放待播放数量的第二类视频。

例如，如图14、图15所示，在显示设备200采用硬件播放流程播放视频1后，可以对播放视频1过程中剩余的运行内存容量进行检测，即剩余运行内存为1420M。再根据剩余运行内存容量，确定剩余运行内存所能够支持播放的第二类视频数量。如播放视频2需要500M运行内存、播放视频3和视频4需要400M运行内存，播放视频5需要200M。可见，当前剩余运行内存容量并不能满足同时播放视频2、视频3、视频4以及视频5。因此，可以按照当前剩余运行内存确定第二类视频的播放数量，如可以仅播放视频2、视频3和视频4，或者仅播放视频3、视频4和视频5。

在一些实施例中，为了确定当前剩余运行内存能够支持具体播放的第二类视频，显示设备200还可以在使用浏览器的软件播放流程播放所述待播放数量的所述第二类视频的步骤中，计算第二判断值。其中，所述第二判断值为对所述第二类视频的总时长、码率和窗口面积的加权求和结果。

例如，显示设备200可以基于在计算第一判断值D1过程中获取的各窗口视频总时长T、码率M和窗口面积S再次对判断为第二类视频的第二判断值D2进行计算，即对第二类视频的总时长、码率和窗口面积的加权求和，以获得第二判断值D2。其中，用于计算第二判断值的权值可以与第一判断值的权值相等，此时，显示设备200可以直接提取之前计算的第一判断值，即D2＝D1。也可以与第一判断值不相等。即显示设备200可以针对第二类视频单独设置权值，因此，第二判断值D2＝W1’×T+W2’×M+W3’×S。

在计算获得第二判断值后，显示设备200还可以按照第二判断值对第二类视频进行排序，以获得待播放序列。例如，在当前用户界面中包括5个视频窗口，并分别播放视频1、视频2、视频3、视频4、视频5后，如果确定视频1为第一类视频，则视频2、视频3、视频4、视频5为第二类视频。再分别计算第二类视频的第二判断值，可以得到四个第二判断值，分别为D22、D23、D24、D25。再按照由大到小的顺序对多个窗口的视频进行排列，即D23＞D22＞D24＞D25，从而得到待播放序列为“视频3-视频2-视频4-视频5”。

最后，显示设备200可以在待播放序列中，提取待播放数量的第二类视频，以使用浏览器的软件播放流程播放提取的第二类视频。例如，通过剩余运行内存容量确定的第二类视频的待播放数量为3个后，可以在播放序列“视频3-视频2-视频4-视频5”中选定前三个，即视频3、视频2以及视频4进行播放。

可见，上述实施例可以综合当前显示设备200的剩余运行内存容量和浏览器消耗的内存容量确定第二类视频的播放数量。从而在当前用户界面中包括多个第二类视频时，可以选择哪些第二类视频可以播放，使显示设备200能够合理的利用运算能力，提高用户体验。

在一些实施例中，当第一类视频播放完成后，显示设备200还可以自动跳转至播放第二类视频，即在使用显示设备200的硬件播放流程播放所述第一类视频后，显示设备200检测所述第二类视频的播放状态，以获取正在播放的所述第二类视频的播放进度；再使用硬件播放流程从所述播放进度继续播放所述第二类视频。

例如，当显示设备200使用硬件播放流程完成对视频1的播放后，显示设备200可以检测当前用户界面中正在播放的第二类视频的播放进度，即检测视频3、视频2以及视频4的播放进度，如果视频1播放完之后，仍有视频3处于播放状态且其播放进度为75％，则显示设备200可以使用硬件播放流程对视频3进行播放。显示设备200还可以记录该视频的当前播放进度，并在播放视频3时，把主视频转到设备流程，然后查询到记录的进度继续播放。

通过在播放第一类视频后，基于对第二类视频进行播放，可以利用显示设备200硬件播放流程的画质渲染优势，对当前用户界面中更多窗口内的视频进行播放，既满足视频播放的连续性，又能够提高视频播放的画质效果。

由于上述实施例中，显示设备200可以针对包含多个视频播放窗口的用户界面采用上述视频播放方式，而当用户界面中不包括多个视频播放窗口时，显示设备200则无需分别采用硬件播放流程和软件播放流程进行视频播放。因此，如图16所示，在一些实施例中，显示设备200可以在检测所述用户界面中的第一类视频和第二类视频的步骤前，遍历当前用户界面中的视频元素，以根据所述视频元素识别所述用户界面中的视频播放窗口。其中，视频元素是指当前用户界面中与视频播放过程相关的显示内容，例如，用户界面中呈现矩形且内部图像内容变化的区域可以被识别为视频元素。视频元素的识别方式可以通过读取浏览器中的播放程序数据获得，也可以通过对视频元素进行图像识别获得，从而确定当前用户界面中的视频播放窗口。

每个视频播放窗口可以对应一个播放的视频，则显示设备200在识别视频播放窗口时，还可以对视频播放窗口的视频状态进行识别。视频状态可以包括未开始播放、正在播放以及结束播放三种状态。视频状态的识别方式同样可以通过对浏览器的视频播放程序数据读取播放进程获得，可以通过检测视频播放窗口中的视频是否发生变化获得。

在识别出视频状态后，显示设备200还可以提取每个窗口中所播放视频的视频状态，并对处于正在播放状态的视频窗口数量进行统计。如果视频状态为正在播放的窗口数量大于或等于2，检测用户界面中的第一类视频和第二类视频，并按照上述实施例中提供的多窗口视频播放方式对用户界面中的视频进行播放。如果视频状态为正在播放的窗口数量小于2，则可以直接使用显示设备200的硬件播放流程播放用户界面中的视频。

基于上述显示设备200，在本申请的部分实施例中还提供一种多窗口视频播放方法，应用于上述显示设备200，所述多窗口视频播放方法包括以下步骤：

获取用户输入的用于播放视频的控制指令；

响应于所述控制指令，检测所述用户界面中的第一类视频和第二类视频；所述第一类视频为多个视频播放窗口中播放的，满足预设视频特征的视频；所述第二视频为多个视频播放窗口中播放的，除所述第一视频以外的视频；

使用显示设备的硬件播放流程播放所述第一类视频，以及使用浏览器的软件播放流程播放所述第二类视频。

由以上技术方案可知，上述实施例中提供的多窗口视频播放方法可以在用户控制播放视频时，通过判断每个窗口中所播放的视频是否满足预设视频特征，检测用户界面中所包含的第一类视频和第二类视频，并使用显示设备的硬件播放流程播放第一类视频，以及使用浏览器的软件播放流程播放第二类视频。所述方法可以根据不同的视频窗口，选择设备硬解播放流程和浏览器软解播放流程，使得显示设备可以同时支持多窗口视频播放，提高用户体验。

本申请提供的实施例之间的相似部分相互参见即可，以上提供的具体实施方式只是本申请总的构思下的几个示例，并不构成本申请保护范围的限定。对于本领域的技术人员而言，在不付出创造性劳动的前提下依据本申请方案所扩展出的任何其他实施方式都属于本申请的保护范围。

Claims (10)

1.一种显示设备，其特征在于，包括：

显示器，被配置为显示用户界面，所述用户界面中包括多个视频播放窗口；

控制器，被配置为：

获取用户输入的用于播放视频的控制指令；

响应于所述控制指令，检测所述用户界面中的第一类视频和第二类视频；所述第一类视频为多个视频播放窗口中播放的，满足预设视频特征的视频；所述第二视频为多个视频播放窗口中播放的，除所述第一视频以外的视频；

使用显示设备的硬件播放流程播放所述第一类视频，以及使用浏览器的软件播放流程播放所述第二类视频。

2.根据权利要求1所述的显示设备，其特征在于，所述预设视频特征为根据视频总时长、视频码率、视频播放窗口面积、视频播放窗口布局、视频播放顺序中的一种或多种的组合计算的判断结果。

3.根据权利要求2所述的显示设备，其特征在于，所述控制器被进一步配置为：

获取多个视频播放窗口中每个窗口所播放视频的总时长、码率以及窗口面积；

结合预设权值计算每个窗口的第一判断值，所述第一判断值为对所述总时长、码率以及窗口面积的加权求和结果；

对比每个窗口的第一判断值，以获得所述第一判断值最大的窗口；

标记所述第一判断值最大的窗口所播放视频为所述第一类视频。

4.根据权利要求3所述的显示设备，其特征在于，所述控制器被进一步配置为：

在对比每个窗口的第一判断值的步骤中，获取视频播放窗口布局信息；

从所述视频播放窗口布局信息中提取窗口位置；

遍历所述窗口位置位于预设显示区域内的视频播放窗口，以获得目标窗口；

对比所述目标窗口的第一判断值。

5.根据权利要求3所述的显示设备，其特征在于，所述控制器被进一步配置为：

在对比每个窗口的第一判断值的步骤前，通过读取每个窗口所播放的视频信息，获取多个窗口的视频播放顺序；

如果获取到所述视频播放顺序，将所述视频播放顺序为第一位的视频标记为所述第一类视频；

如果未获取到所述视频播放顺序，对比每个窗口的第一判断值。

6.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

在使用显示设备的硬件播放流程播放所述第一类视频的步骤后，检测所述显示设备的当前剩余运行内存容量；

根据所述剩余运行内存容量设置所述第二类视频的待播放数量；

使用浏览器的软件播放流程播放所述待播放数量的所述第二类视频。

7.根据权利要求6所述的显示设备，其特征在于，所述控制器被进一步配置为：

在使用浏览器的软件播放流程播放所述待播放数量的所述第二类视频的步骤中，计算第二判断值，所述第二判断值为对所述第二类视频的总时长、码率和窗口面积的加权求和结果；

按照所述第二判断值对所述第二类视频进行排序，以获得待播放序列；

在所述待播放序列中，提取所述待播放数量的第二类视频，以使用浏览器的软件播放流程播放提取的第二类视频。

8.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

在使用显示设备的硬件播放流程播放所述第一类视频后，检测所述第二类视频的播放状态，以获取正在播放的所述第二类视频的播放进度；

使用硬件播放流程从所述播放进度继续播放所述第二类视频。

9.根据权利要求1所述的显示设备，其特征在于，所述控制器被进一步配置为：

在检测所述用户界面中的第一类视频和第二类视频的步骤前，遍历当前用户界面中的视频元素；

根据所述视频元素识别所述用户界面中的视频播放窗口，以及提取每个窗口中所播放视频的视频状态；

如果所述视频状态为正在播放的窗口数量大于或等于2，检测所述用户界面中的第一类视频和第二类视频；

如果所述视频状态为正在播放的窗口数量小于2，使用显示设备的硬件播放流程播放所述用户界面中的视频。

10.一种多窗口视频播放方法，其特征在于，应用于显示设备，所述显示设备包括显示器和控制器，所述显示器用于显示用户界面，所述用户界面中包括多个视频播放窗口；所述多窗口视频播放方法包括：

获取用户输入的用于播放视频的控制指令；

响应于所述控制指令，检测所述用户界面中的第一类视频和第二类视频；所述第一类视频为多个视频播放窗口中播放的，满足预设视频特征的视频；所述第二视频为多个视频播放窗口中播放的，除所述第一视频以外的视频；

使用显示设备的硬件播放流程播放所述第一类视频，以及使用浏览器的软件播放流程播放所述第二类视频。

Images