CN113597639A - 显示屏和用于驱动显示屏的处理装置和操作方法 - Google Patents

Abstract

提供了一种用于驱动显示屏(100)的处理装置(200)，显示屏(100)具有用于输出可见光的一个或多个可见光像素和用于输出不可见光的一个或多个不可见光像素。处理装置(200)具有用于接收视频图像和音频信号的输入端(222)。视频处理器(226)处理在输入端(222)接收的输入视频图像信号，并提供相应的驱动信号，用于驱动显示屏的一个或多个可见光像素以输出可见光，从而显示视频图像。音频处理器(228)处理在输入端接收的输入音频信号，并提供相应的驱动信号，用于驱动显示屏的一个或多个不可见光像素以输出对音频进行编码的不可见光。

Description

显示屏和用于驱动显示屏的处理装置和操作方法

技术领域

本公开涉及一种用于驱动显示屏的处理设备、显示屏和相关方法。

背景技术

当在某些设备上观看相关联的视频时，人们经常使用无线耳机收听音频。这可以使得用户能收听音频而不打扰他人或屏蔽环境中的噪声。在其他情况下，可以将音频无线传输到某个其他音频回放设备，诸如无线扬声器。在任一种情况下，通常使用蓝牙或WiFi将音频传输到音频回放设备。然而，这可能会对环境中的其他蓝牙或WiFi信号造成干扰，而环境中的其他蓝牙或WiFi信号可能会对正在传输的无线音频信号造成干扰。此外，它还需要提供单独的蓝牙或WiFi发射器。此外，在某些情况下，视频和音频在回放期间可能不同步。

发明内容

根据本文公开的第一方面，提供了一种用于驱动显示屏的处理装置，显示屏具有用于输出可见光的一个或多个可见光像素和用于输出不可见光的一个或多个不可见光像素，所述装置包括：

输入端，用于接收视频图像和音频信号；

视频处理器，被构造和布置为处理在输入端接收的输入视频图像信号，并提供相应的驱动信号以用于驱动显示屏的一个或多个可见光像素输出可见光，从而显示视频图像；以及

音频处理器，被构造和布置为处理在输入端接收的输入音频信号，并提供相应的驱动信号以用于驱动显示屏的一个或多个不可见光像素输出对音频进行编码的不可见光。

对音频进行编码的不可见光可以由诸如耳机或扬声器之类的音频回放设备的相应接收器接收。使用显示屏中的不可见光像素来输出对音频进行编码的不可见光具有许多优点。例如，不需要用于将编码的音频无线传输到音频回放设备的单独的发射器布置。此外，不可见光可以具有不会对环境中可能存在的其他无线信号(诸如蓝牙或WiFi无线信号)造成干扰的频率。用于音频的不可见光不会干扰能够观看显示屏在使用时显示的图像的用户。

显示屏的“像素”可以是所谓的子像素。显示屏通常可以使用任何适合的显示技术来显示图像和输出利用音频编码的不可见光，包括例如具有LED(发光二极管)或其他背光的LCD(液晶显示器)；诸如LED、OLED(有机LED)、等离子体的发射元件；等等。

在示例中，处理装置被布置为使得对输入视频图像信号的处理和对输入音频信号的处理花费基本上相同的时间量，使得用于驱动显示屏的一个或多个可见光像素的相应驱动信号和用于驱动显示屏的一个或多个不可见光像素的驱动信号基本上彼此同步。

在示例中，处理装置包括存储器，并且视频处理器被布置为在对视频数据的处理期间将视频数据发送到存储器发送视频数据和从存储器取回，并且其中音频处理器被布置为使得用于驱动显示屏的一个或多个不可见光像素输出对音频进行编码的不可见光的驱动信号在与相应的视频数据被发送到存储器和被从存储器取回基本上相同的时间并且在所述驱动信号被发送到显示屏之前被发送到存储器和被从存储器取回。

在示例中，所述视频处理器被布置为提供对输入视频图像信号的基于帧的处理，在该处理期间，视频数据被发送到存储器并被从存储器取回。

例如，基于帧的处理可以是降噪、运动估计和运动补偿中的一个或多个。

根据本文公开的第二方面，提供了一种驱动显示屏的方法，显示屏具有用于输出可见光的一个或多个可见光像素和用于输出不可见光的一个或多个不可见光像素，所述方法包括：

接收视频图像和音频信号；

处理在输入端接收的输入视频图像信号，并提供相应的驱动信号以用于驱动显示屏的一个或多个可见光像素输出可见光，从而显示视频图像；以及

处理在输入端接收的输入音频信号，并提供相应的驱动信号以用于驱动显示屏的一个或多个不可见光像素输出对音频进行编码的不可见光。

在示例中，在对视频数据的处理期间，视频数据被发送到存储器并被从存储器取回，并且其中用于驱动显示屏的一个或多个不可见光像素输出对音频进行编码的不可见光的驱动信号在与相应的视频数据被发送到存储器和被从存储器取回基本上相同的时间并且在所述驱动信号被发送到显示屏之前被发送到存储器和被从存储器取回。

在示例中，所述处理提供对输入视频图像信号的基于帧的处理，在该处理期间，视频数据被发送到存储器并被从存储器取回。

根据本文公开的第三方面，提供了一种显示屏，所述显示屏包括：

用于输出可见光的一个或多个可见光像素；以及

用于输出不可见光的一个或多个不可见光像素；

其中，显示屏被布置为接收驱动信号以用于驱动所述一个或多个可见光像素输出可见光，从而显示视频图像；以及

其中，显示屏被布置为接收驱动信号以用于驱动所述一个或多个不可见光像素以输出对音频进行编码的不可见光。

在示例中，所述显示屏包括多个像素，所述像素中的至少一些像素包括作为可见光像素的RGB子像素和作为不可见光像素的至少一个红外像素。

根据本文公开的第四方面，提供了一种操作显示屏的方法，显示屏具有用于输出可见光的一个或多个可见光像素和用于输出不可见光的一个或多个不可见光像素，所述方法包括：

接收用于驱动所述一个或多个可见光像素输出可见光从而显示视频图像的驱动信号，并相应地输出可见光以显示视频图像；

接收用于驱动所述一个或多个不可见光像素输出对音频进行编码的不可见光的驱动信号，并相应地输出不可见光以使用不可见光无线地传输所述音频。

还可以提供一种设备，包括如上所述的处理装置和如上所述的显示屏。

附图说明

为了帮助理解本公开并示出可以如何实施实施例，通过示例的方式来参照附图，其中：

图1示意性地示出了已知的显示屏；

图2示意性地示出了用于视频和音频的已知处理布置；

图3示意性地示出了根据本公开的显示屏的示例；

图4示意性地示出了根据本公开的处理装置的第一示例；以及

图5示意性地示出了根据本公开的处理装置的第二示例。

具体实施方式

在本文描述的示例中，显示屏中的不可见光像素用于输出对音频进行编码的不可见光，使得不可见光可以被音频回放设备接收和解码。显示屏还具有可见光像素，用于输出可见光以显示相关视频图像。不可见光可以具有不会对环境中可能存在的其他无线信号(诸如蓝牙或WiFi无线信号)造成干扰的频率。这也避免了必须单独为无线传输音频提供单独的无线发射器。此外，在下面进一步讨论的一些示例中，用于驱动显示屏的处理装置可以被布置为保持音频和被回放的相关视频之间的同步，或者至少更紧密地保持音频和相关视频之间的同步。

首先参照图1，其示意性地示出了已知显示屏10。显示屏10具有多个显示单元或元件12。如下面将进一步讨论的，本文描述的示例可以被应用于或用于多种不同类型的显示屏，包括具有由背光照明以生成图像的无源显示单元或元件的显示屏(诸如在LCD(液晶显示器)和“量子点”屏幕中)以及具有直接输出光以生成图像的有源或发射性显示单元或元件的显示屏(诸如使用OLED(有机发光二极管)或无机LED的屏幕，包括例如LED显示器或“墙”或微型LED显示器，以及等离子屏幕)。显示屏中的显示单元或元件通常被称为“像素”，因为它们通常对应于所显示的图像中的像素。此外，本文将使用诸如用于驱动显示屏的像素输出光的驱动信号之类的术语，并且应当理解，这可以包括使有源或发射性显示单元或元件根据需要输出光的驱动信号，以及使背光和相应的无源显示单元或元件操作为使得根据需要输出光的驱动信号。

已知显示屏10的显示单元12输出可见光，该可见光用于输出正在回放的视频图像。显示屏在水平方向上具有M个显示单元12，在垂直方向上具有N个显示单元12。如常见的那样，每个显示单元12具有分别用于输出红色、绿色和蓝色光的红、绿和蓝“子像素”14(由图1中的不同阴影指示)。按照惯例，术语“子像素”通常用来指示每个显示单元/像素12中的各个不同的颜色元素。然而，为了简单起见，本文通常使用术语“像素”来描述输出光的任何显示元素，因此通常表示输出特定颜色的光的单个显示元素，诸如所谓的“子像素”，除非上下文另有要求。

参照图2，其示意性地示出了用于处理视频和音频输入信号以允许回放视频和音频的已知处理布置20。在输入端22处接收来自源的视频和音频信号。视频和音频信号通常可以是模拟或数字信号，并且正常情况下在输入端中彼此同步。如果输入信号是模拟的，则模数(ADC)转换器24将信号转换为数字格式。然后，在已知处理布置20中，视频和音频信号被分开处理。

特别地，RGB(红、绿、蓝)视频数据被发送到视频处理器26。视频处理器26对视频数据进行处理，以便能够提供适当的驱动信号来驱动显示屏10的像素12。可以对输入视频数据执行各种不同的处理。常见地，视频处理可以是两种不同类型之一。第一类型28涉及基于像素的处理和基于行的处理，其通常确定所显示图像的颜色、对比度和亮度中的一个或多个。第二类型30涉及基于帧的处理，例如用于降噪、运动估计、运动补偿和其他类似的图像改善技术。对于基于帧的处理，图像的每一帧被发送到存储器32，存储器32可以是例如DDR(双倍数据速率)存储器。图像的每一帧通常与前一帧和下一帧相比较，并且应用对RGB数据的任何所需修改。可以注意到，基于帧的处理以及RGB数据到存储器32的发送和从存储器32接收回数据可能花费相对较长的时间。此外，视频处理器26可以在任何特定时间向存储器32发送更多或更少的帧。这可能使得难以预测或控制在基于帧的处理期间发生的处理延迟。在视频处理器26完成视频数据的处理之后，视频处理器26随后向显示屏10发送驱动信号，以驱动显示屏10的显示单元12(或更具体地，RGB子像素14)输出所需的RGB光。

单独地，(数字)音频数据被发送到音频处理器34。在这种情况下，因为音频将被无线传输到音频回放设备，因此音频处理器34将适当的经处理的数字音频信号发送到无线发射器36，该无线发射器36可以是例如蓝牙发射器、WiFi发射器等。然后，无线发射器36发送无线音频数据以供诸如耳机、无线扬声器等的音频回放设备38接收，从而使音频回放设备38能够为用户回放音频。

因此，这种已知处理布置20需要用于音频的单独的无线发射器36。如上所述，这可以是例如蓝牙或WiFi发射器。然而，并不是所有的显示屏10都配备有蓝牙或WiFi发射器。此外，无论是在显示设备本身中还是作为单独的组件，这样的无线发射器都占用空间。总是希望显示屏10尽可能地紧凑或纤薄(无论是用作例如电视或计算机屏幕，还是用作智能电话或平板计算机的屏幕等)。

现在参照图3，其示意性地示出了根据本公开的显示屏100的示例。屏幕100可以是例如电视或计算机屏幕、在公共场所使用的所谓的“标识牌”的屏幕、智能电话或平板计算机的屏幕等。

与上面讨论的已知显示屏10类似，根据本公开的显示屏100具有多个显示单元或元件112。显示屏100可以是多种不同类型之一，包括具有由背光照明以生成图像的无源显示单元或元件的显示屏(诸如在LCD(液晶显示器)和“量子点”屏幕中)以及具有直接输出光以生成图像的有源或发射性显示单元或元件的显示屏(诸如使用OLED(有机发光二极管)或无机LED的屏幕，包括例如LED显示器或“墙”或微型LED显示器，以及等离子屏幕)。需要再次注意的是，显示单元或元素通常也被称为“像素”，因为它们通常对应于所显示的图像中的像素。

在该示例中，每个显示单元112具有分别用于输出可见的红色、绿色和蓝色光的红、绿和蓝像素(或“子像素”)114。不同的红、绿和蓝像素114由图3中的不同阴影指示。此外，在该示例中，每个显示单元112具有用于输出不可见光的不可见光像素116，同样由图3中的不同阴影指示。可以注意到，不是所有显示单元112都需要具有不可见光像素，并且某些显示单元112可能仅具有可见光像素。同样地，不是所有的显示单元112都需要具有可见光像素，并且某些显示单元112可以仅具有不可见光像素。在一些示例中，如果存在用于输出不可见光的单个不可见光像素116可能就足够了。

简而言之，可见光像素114用于使图像被显示以供用户观看。另一方面，使用该不可见光像素116或每个不可见光像素116来使用不可见光将编码的音频数据无线地传输到音频回放设备。在这方面，可见光通常被定义为波长在380到740纳米范围内的光。不可见光可以被定义为该可见范围之外的光。在特定示例中，不可见光像素116生成或输出红外线。红外线通常被定义为波长在700纳米到1毫米之间的光。作为特别示例，当前的红外线LED通常发射波长在800到1000nm左右的红外线。

使用显示屏100中的不可见光像素116来传输编码的音频意味着不需要用于音频的单独的无线发射器：显示屏100既针对图像输出可见光，又针对编码的音频输出不可见光。这意味着用户不必为某个单独的无线发射器提供和寻找空间(否则该无线发射器必须位于显示屏100附近的某个地方，这可能不方便并且可能不美观)。这还意味着显示屏100本身不必具有仅用于输出无线音频信号的单独的无线发射器。此外，不可见光可以具有不会对环境中可能存在的其他无线信号造成干扰的频率。作为特别示例，蓝牙通常使用2.400至2.485GHz范围内的频率，而WiFi通常使用900MHz至5GHz范围内的频率(尽管可以根据当前的WiFi标准使用高达60GHz的频率)。不可见光像素116可以被选择或布置为输出这些范围之外的频率。作为特定示例，在被定义为波长在700纳米至1毫米范围内的红外线的情况下，这对应于红外线的430THz至300GHz范围内的频率。

这里提到，使用红外线无线地传输音频是已知的。例如，存在用于会议中心等中的音频系统，其中红外线被用于将音频传输到与会者佩戴的耳机。因此，使用红外线传输音频所需的基本技术和处理本身是已知的，并且是可用的。

现在参照图4，其示意性地示出了根据本公开的处理装置200的第一示例。处理装置200可以存在于具有集成式显示屏100的设备中，诸如具有集成屏幕的电视机或计算机、所谓的标识牌、智能电话、平板计算机等。在特别是电视机的情况下，处理装置200可以是电视机的主板的一部分。在其他示例中，处理装置200可以与显示屏分开提供，并且可以是专用的视频和音频处理装置，或者是DVD播放器或其他回放设备、机顶盒、计算机等的一部分。

处理装置200在输入端222处从源接收视频和音频信号。可以在输入端222处从多个源之一接收视频和音频信号，这些源包括例如卫星、有线或地面电视广播、IPTV(网际协议电视)多播或IPTV单播、本地存储的视频和音频的副本等。视频和音频信号通常可以是模拟或数字信号，并且正常情况下在输入端中彼此同步。如果输入信号是模拟信号，则ADC转换器224将信号转换为数字格式。

数字RGB(红、绿、蓝)视频数据被从ADC转换器224发送到视频处理器226。视频处理器226处理视频数据，以便能够提供用于驱动显示屏100的像素112的适当驱动信号。可以执行对输入视频数据的各种不同处理，包括例如上面参照图2所讨论的处理。在视频处理器226完成视频数据的处理之后，视频处理器226然后通常通过有线连接将相应的驱动信号发送到显示屏100，以驱动显示屏100的RGB像素(或“子像素”)114输出所需的RGB光，从而显示视频图像。

此外，数字音频数据被从ADC转换器224发送到音频处理器228。在这种情况下，由于音频将使用由显示屏100中的一个或多个不可见光像素116输出的不可见光等被无线地传输到音频回放设备120，因此音频处理器228处理传入的音频数据，以便提供用于驱动不可见光像素116输出编码的不可见光的适当的、相应的驱动信号。例如，由显示屏100为音频输出的不可见光可以使用PCM(脉冲编码调制)、S/PDIF(索尼/飞利浦数字接口)格式或某个其他串行音频线路通信协议来编码音频。因此，音频处理器228输出用于驱动不可见光像素116的驱动信号，使得输出的不可见光根据期望的格式将音频编码成不可见光。

在这方面，要注意的是，显示屏中的像素，包括例如LCD像素，通常可以以非常高的频率(诸如高达大约20MHz左右)打开和关闭。因此，原则上，以如此高的速率切换的单个不可见光像素116因此可以容易地容纳高质量地传输的音频，例如根据DAT(数字音频磁带)格式中使用的格式和CD(光盘)音频中使用的格式。作为另一种选择，不可见光像素116以用于显示屏或用于显示屏的背光的平常工作频率之一(通常可以是例如50Hz、60Hz、100Hz、120Hz、200Hz等)打开和关闭。在对不可见光像素116使用较低切换速率的这种情况下，可以基本上同时使用多个不可见光像素116来传输编码的音频的比特，以便实现期望的或令人满意的比特率，从而获得期望的或令人满意的音频质量。在另一变型中，可以同时使用多个不可见光像素116来传输每一比特数据，这增加了有效传输范围。作为具体示例，假设显示屏具有以50Hz切换的1920像素乘1080像素的分辨率。CD质量的比特率为1411200比特每秒。因此，为了实现CD质量，可以同时使用总共73或74个像素来传输比特(1920×1080×50/1411200＝73.5)。如果可以使用诸如在DAT或MP3中使用的较低音频质量，则可以同时使用较少数量的像素来传输比特。

诸如耳机、无线扬声器等的音频回放设备120具有用于检测显示屏100输出的不可见光的一个或多个光传感器122。该光传感器122或每个光传感器122可以是例如光电二极管或某个其他光检测器，其被布置为检测并响应由(多个)不可见光像素116发射的波长的光。音频回放设备120的处理器处理该光传感器122或每个光传感器122的输出，以解码接收到的信号，并驱动音频回放设备120的扬声器或其他换能器来为用户回放音频。可以注意到，特别是在音频回放设备120是耳机的情况下，用户通常将位于显示屏100的正前方，以便能够观看显示屏100上的图像，因此音频回放耳机120将已经处于接收由显示屏100为音频传输的不可见光的良好位置。

现在参照图5，其示意性地示出了根据本公开的处理装置300的第二示例。同样，处理装置300可以存在于具有集成式显示屏100的设备中，例如具有集成屏幕的电视机或计算机、所谓的标识牌、智能电话、平板计算机等。在特别是电视机的情况下，处理装置300可以是电视机的主板的一部分。在其他示例中，处理装置300可以与显示屏分开提供，并且可以是专用的视频和音频处理装置，或者是DVD播放器或其他回放设备、机顶盒、计算机等的一部分。

处理装置300在输入端322处从源接收视频和音频信号。可以在输入端322处从多个源之一接收视频和音频信号，这些源包括例如卫星、有线或地面电视广播、IPTV(互联网协议电视)多播或IPTV单播、本地存储的视频和音频的副本等。视频和音频信号通常可以是模拟或数字信号，并且正常情况下在输入端中彼此同步。如果输入信号是模拟的，则ADC转换器324将信号转换为数字格式。

数字RGB(红、绿、蓝)视频数据被从ADC转换器324发送到视频处理器326。视频处理器326处理视频数据，以便能够提供用于驱动显示屏100的像素112的适当驱动信号。在视频处理器326完成视频数据的处理之后，视频处理器326通常通过有线连接将相应的驱动信号发送到显示屏100，以驱动显示屏100的RGB像素(或“子像素”)114输出所需的RGB光来显示视频图像。

单独地，数字音频数据被从ADC转换器324发送到音频处理器334。音频处理器334处理传入的音频数据，以便提供用于驱动显示屏100的不可见光像素116的适当的、相应的驱动信号。例如，由显示屏100为音频输出的不可见光可以使用PCM(脉冲编码调制)、S/PDIF(索尼/飞利浦数字接口)格式或某个其他串行音频线路通信协议来编码音频。因此，音频处理器334输出用于驱动不可见光像素116的驱动信号，使得输出的不可见光根据期望的格式将音频编码成不可见光。

返回参照所发生的视频处理，在该示例中，并且类似于上面参照图2描述的已知系统，视频处理可以是两种不同类型之一。第一类型328涉及基于像素的处理和基于行的处理(即，分别对单个像素的处理和对像素行的处理)，其通常确定像素和整个显示图像的颜色、对比度和亮度中的一个或多个。第二类型330涉及基于帧的处理(即，对整个像素帧的处理)，例如用于降噪、运动估计、运动补偿和其他类似的图片改善技术中的一个或多个。对于基于帧的处理，图像的每一帧被发送到存储器332，例如DDR(双倍数据速率)存储器。图像的每一帧通常与前一帧和下一帧相比较，并且应用对RGB数据的任何所需修改。

如上所述，基于帧的处理以及RGB数据到存储器332的发送和从存储器332接收回数据可能花费相对较长的时间。此外，视频处理器326可以在任何特定时间向存储器332发送更多或更少的帧。这都使得难以预测或控制在基于帧的RGB数据处理期间发生的处理延迟。

视频处理(尤其是基于帧的处理)的这种效果意味着，在已知系统中，诸如上面参照图2描述的，音频信号和视频信号可能不再同步。也就是说，相对于正在回放的音频，正在回放的视频可能会延迟或提前。当使用蓝牙将音频传输到音频回放设备时，该问题加剧，因为蓝牙具有其自己的编解码器布置，这可能在已知系统中在传输的音频中引入不可预测的延迟。

在处理装置300的该第二示例中，这一问题以如下方式解决。由音频处理器334输出的串行音频数据被发送到视频处理器326的基于帧的处理部分330。作为基于帧的处理的一部分，表示用于驱动显示屏100的(多个)不可见光像素116的驱动信号的串行音频数据在RGB数据被发送到存储器332的同时被发送到存储器332。根据需要对RGB数据进行处理和修改以改善图像，包括例如用于降噪、运动估计、运动补偿和其他类似画面改善技术中的一个或多个。然而，串行音频数据不会被修改。相反，串行音频数据被简单地发送到存储器332，并且与相应的RGB数据同时从存储器332读回。这意味着由于基于帧的处理而可能产生的对RGB数据的任何延迟也被应用于音频数据。如此，RGB数据和音频数据保持同步，或者至少保持同步的程度远大于诸如参照图2描述的布置。通常，RGB数据和音频数据应该在大约50ms左右保持同步，因为音频相对于视频的延迟或提前超过50ms左右对用户而言是可以注意到的。

简而言之，在该示例中，即使在用于驱动可见光像素114的驱动信号的处理期间音频驱动信号没有改变，也类似于用于驱动显示屏的可见光像素114的驱动信号来处理用于驱动显示屏100的(一个或多个)不可见光像素116的音频驱动信号，从而在处理期间引入类似的延迟。

该第二示例被描述为应对在可见RGB光信号的基于帧的处理期间可能出现的相对较长且不可预测的时间延迟。这可以扩展到在对可见RGB光信号的处理期间出现其他长的或不可预测的时间延迟的情况。特别地，在其他示例中，由音频处理器334输出的串行化音频通常可以在RGB数据的处理期间的任何适当时间点与RGB视频数据合成，以确保音频数据和RGB视频数据经受(基本上)相同的延迟，因此保持(基本上)同步。

应当理解，本文提及的处理器或处理系统或电路实际上可以由单个芯片或集成电路或多个芯片或集成电路提供，可选地被提供为芯片组、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、数字信号处理器(DSP)、图形处理单元(GPU)等。一个或多个芯片可以包括电路(以及可能的固件)，用于实现以下中的至少一个或多个：一个或多个数据处理器、一个或多个数字信号处理器，基带电路和音频电路，它们可以被配置为根据示例实施例操作。就此而言，示例性实施例可以至少部分地由存储在(非瞬态)存储器中并可由处理器执行的计算机软件、或由硬件、或由有形存储的软件和硬件(以及有形存储的固件)的组合来实现。

本文参照用于存储数据的数据存储设备。这可以由单个设备或由多个设备提供。适合的设备包括例如硬盘和非易失性半导体存储器(包括例如固态驱动器或SSD)。

尽管本文参照附图描述的实施例的至少一些方面包括在处理系统或处理器中执行的计算机处理，但是本发明还扩展到适于将本发明付诸实施的计算机程序，特别是载体上或载体内的计算机程序。该程序可以是非瞬态源代码、目标代码、代码中间源和目标代码的形式，诸如部分编译的形式，或者是适于在根据本发明的过程的实现中使用的任何其他非瞬态形式。载体可以是能够承载程序的任何实体或设备。例如，载体可以包括存储介质，诸如固态驱动器(SSD)或其他基于半导体的RAM；ROM，例如CD ROM或半导体ROM；磁记录介质，例如软盘或硬盘；一般的光存储器设备；等等。

本文描述的示例将被理解为本发明实施例的说明性示例。可以想到进一步的实施例和示例。关于任何一个示例或实施例描述的任何特征可以单独使用或与其他特征组合使用。此外，关于任何一个示例或实施例描述的任何特征也可以与任何其他示例或实施例的一个或多个特征组合、或任何其他示例或实施例的任何组合一起使用。此外，在权利要求中限定的本发明的范围内也可以采用本文未描述的等同和修改。

Claims (11)

1.一种用于驱动显示屏的处理装置，所述显示屏具有用于输出可见光的一个或多个可见光像素和用于输出不可见光的一个或多个不可见光像素，所述装置包括：

输入端，用于接收视频图像和音频信号；

视频处理器，被构造和布置为处理在所述输入端接收的输入视频图像信号，并提供相应的驱动信号以用于驱动所述显示屏的一个或多个可见光像素输出可见光，从而显示所述视频图像；以及

音频处理器，被构造和布置为处理在所述输入端接收的输入音频信号，并提供相应的驱动信号以用于驱动所述显示屏的一个或多个不可见光像素输出对所述音频进行编码的不可见光。

2.根据权利要求1所述的处理装置，其中，所述处理装置被布置为使得对所述输入视频图像信号的处理和对所述输入音频信号的处理花费基本上相同的时间量，使得用于驱动所述显示屏的一个或多个可见光像素的相应驱动信号和用于驱动所述显示屏的一个或多个不可见光像素的驱动信号基本上彼此同步。

3.根据权利要求1或权利要求2所述的处理装置，包括存储器，其中，所述视频处理器被布置为在对视频数据的处理期间将所述视频数据发送到所述存储器并从所述存储器取回所述视频数据，并且其中，所述音频处理器被布置为使得用于驱动所述显示屏的一个或多个不可见光像素输出对所述音频进行编码的不可见光的驱动信号在与相应的视频数据被发送到所述存储器和被从所述存储器取回基本上相同的时间并且在所述驱动信号被发送到所述显示屏之前被发送到所述存储器和被从所述存储器取回。

4.根据权利要求3所述的处理装置，其中，所述视频处理器被布置为提供对所述输入视频图像信号的基于帧的处理，在该处理期间，视频数据被发送到所述存储器和被从所述存储器取回。

5.一种驱动显示屏的方法，所述显示屏具有用于输出可见光的一个或多个可见光像素和用于输出不可见光的一个或多个不可见光像素，所述方法包括：

接收视频图像和音频信号；

处理在输入端接收的输入视频图像信号，并提供相应的驱动信号以用于驱动所述显示屏的一个或多个可见光像素输出可见光，从而显示所述视频图像；以及

处理在所述输入端接收的输入音频信号，并提供相应的驱动信号以用于驱动所述显示屏的一个或多个不可见光像素输出对所述音频进行编码的不可见光。

6.根据权利要求5所述的方法，其中，在对所述视频数据的处理期间，视频数据被发送到存储器并被从所述存储器取回，并且其中，用于驱动所述显示屏的一个或多个不可见光像素输出对所述音频进行编码的不可见光的驱动信号在与相应的视频数据被发送到所述存储器和被从所述存储器取回基本上相同的时间并且在所述驱动信号被发送到所述显示屏之前被发送到所述存储器和被从所述存储器取回。

7.根据权利要求6所述的方法，其中，所述处理提供对所述输入视频图像信号的基于帧的处理，在该处理期间，视频数据被发送到所述存储器和被从所述存储器取回。

8.一种显示屏，所述显示屏包括：

用于输出可见光的一个或多个可见光像素；以及

用于输出不可见光的一个或多个不可见光像素；

其中，所述显示屏被布置为接收用于驱动所述一个或多个可见光像素输出可见光从而显示所述视频图像的驱动信号；以及

其中，所述显示屏被布置为接收用于驱动所述一个或多个不可见光像素输出对所述音频进行编码的不可见光的驱动信号。

9.根据权利要求8所述的显示屏，其中，所述显示屏包括多个像素，所述像素中的至少一些像素包括作为可见光像素的RGB子像素和作为不可见光像素的至少一个红外像素。

10.一种操作显示屏的方法，所述显示屏具有用于输出可见光的一个或多个可见光像素和用于输出不可见光的一个或多个不可见光像素，所述方法包括：

接收用于驱动所述一个或多个可见光像素输出可见光从而显示所述视频图像的驱动信号，并相应地输出可见光以显示所述视频图像；以及

接收用于驱动所述一个或多个不可见光像素输出对所述音频进行编码的不可见光的驱动信号，并相应地输出不可见光以使用不可见光无线地传输所述音频。

11.一种设备，包括根据权利要求1至4中的任一项所述的处理装置和根据权利要求8或9所述的显示屏。

Images