CN112205079A - 根据延迟变化选择一个或多个灯光效果 - Google Patents

Abstract

电子设备（1）被配置为确定指示或影响例如内容帧正在由移动设备（12）呈现和与内容帧同步的灯光效果开始呈现之间的延迟变化（例如一个或多个延迟分量（21‑26）的变化）的信息。该电子设备还被配置为基于所确定的信息来选择与内容项目同时呈现的一个或多个灯光效果，并使一个或多个光源（16、17）与内容项目同时呈现所选择的一个或多个灯光效果。

Description

根据延迟变化选择一个或多个灯光效果

技术领域

本发明涉及一种用于使光源呈现灯光效果的电子设备。

本发明还涉及一种使光源呈现灯光效果的方法。

本发明还涉及一种使得计算机系统能够执行这种方法的计算机程序产品。

背景技术

已经证明，家庭娱乐照明系统极大地增加了游戏、电影和音乐的体验。例如，使用与内容匹配并支持内容的灯光效果可以显著增强内容回放。在音乐的情况下，由流服务（例如Spotify）提供的元数据可以用于将灯光效果与音乐同步，从而允许在收听音乐时创建更好的用户体验。

完美的同步允许最佳体验的创建。然而，即使可获得精确的音乐数据，音乐和灯光效果之间也可能会有延迟。例如，这可能是开始接收新的歌曲与开始播放该歌曲的通知之间的延迟的结果。如US 2017/0265270A1中所描述的，尽管可以利用缓冲器在一定程度上补偿该延迟，但是无法那样容易地补偿延迟变化，而这可能会显著地影响收听者体验。

发明内容

本发明的第一目的是提供一种电子设备，其能够至少部分地补偿内容呈现与灯光效果呈现之间的延迟变化。

本发明的第二目的是提供一种方法，该方法至少部分地补偿内容呈现与灯光效果呈现之间的延迟变化。

在本发明的第一方面中，电子设备包括至少一个处理器，该处理器被配置为确定指示或影响内容帧正在呈现和与所述内容帧同步的灯光效果开始呈现之间的延迟变化的信息，基于所述确定的信息，选择要与内容项目同时呈现的一个或多个灯光效果，并使一个或多个光源与所述内容项目同时呈现所述选择的一个或多个灯光效果。

内容帧可以是内容项目的一部分，但这不是必需的。可以使用一个或多个其他内容项目来测量指示内容帧正在呈现和与所述内容帧同步的灯光效果开始呈现之间的延迟变化的信息。词语“使一个或多个光源与所述内容项目同时呈现所述选择的一个或多个灯光效果”不需要完美的同步。

发明人已经认识到，与当其他灯光效果与对应内容较差地同步时相比，当某些灯光效果与对应内容（例如音乐）较差地同步时，这具有大得多的影响。通过基于指示或影响延迟变化的信息选择灯光效果，延迟的显著变化不再必须显著地影响用户体验。

所述至少一个处理器可以被配置为进一步基于对所述内容项目的分析来选择所述一个或多个灯光效果。如果灯光脚本不可用于内容项目，或者如果用户不希望使用可用的灯光脚本，则可以实时分析内容项目，并且可以选择与内容匹配的灯光效果。

所述至少一个处理器可以被配置为从灯光脚本中指定的多个灯光效果中选择所述一个或多个灯光效果。如果使用了与内容项目相关联的灯光脚本，则可以将其中指定的灯光效果用作基础。

所述至少一个处理器可以被配置为基于所述确定的信息来通过跳过或替换所述多个灯光效果中的一个或多个来选择所述一个或多个灯光效果。尽管灯光脚本的本质依然完好无损，但是在显著的延迟变化的情况下，可以调节灯光效果的呈现，以便始终提供良好的用户体验。

所述信息可以包括表示所述延迟变化的延迟变化参数，并且所述至少一个处理器被配置为基于所述延迟变化参数来选择所述一个或多个灯光效果。通过确定延迟变化参数，更轻松地在多个延迟分量中添加变化，因为每个变化都可以以相同的方式表示。

所述至少一个处理器可以被配置为基于所述延迟变化参数来确定补偿时段，并且使所述一个或多个光源在针对所述一个或多个灯光效果的预定开始时间（例如，在灯光脚本中指定的）之前的所述补偿时段开始呈现所述选择的一个或多个灯光效果。补偿时段可以指定为总延迟变化的百分比。例如，如果已经确定100毫秒的总延迟变化，则补偿时段可以确定为50毫秒（50％）。因此，如果总延迟变化估计为100毫秒，则可以比正在呈现的内容的灯光脚本中指定的时间早50毫秒开始灯光效果的呈现。这样，可以使延迟最小化。

所述至少一个处理器可以被配置为允许用户提供用户输入并进一步基于所述用户输入来确定所述补偿时段。如果用户感到烦恼的是灯光效果在与之同步的内容帧之前开始呈现（太长），则他可以能够指定补偿时段应当是25％，即如果总延迟变化估计为100毫秒，则为25毫秒。结果，灯光效果具有较高的机会恰好在与之同步的内容帧之后而不是恰好在这些内容帧之前开始呈现。如果用户感到烦恼的是灯光效果在与之同步的内容帧之后开始呈现（太长），则他也可以指定大于50％的百分比。所述至少一个处理器可以被配置为基于影响所述延迟变化的信息来确定所述延迟变化参数。例如，指示使用无线扬声器的信息可以与50ms的延迟变化相关联。从延迟变化范围（例如50-100 ms或100-200 ms）到灯光效果组的映射可以用于基于该50 ms选择灯光效果。可替代地，从影响延迟变化的信息（例如，扬声器连接的类型、内容服务的类型）到灯光效果组的映射可以用于例如基于指示使用无线扬声器的信息来直接选择灯光效果。

所述至少一个处理器可以被配置为，通过在多个时刻从所述内容服务器请求由所述内容服务器提供的内容项目的当前位置，并且通过将所述位置之间的差异与所述时刻之间的本地定时差异进行比较，来确定所述电子设备和内容服务器之间的第一延迟变化，并且被配置为基于所述第一延迟变化来确定所述延迟变化参数。这允许测量第一延迟分量的变化。如果存在其他延迟分量，则也可以测量这些延迟分量的变化（并且可能以相同的方式）和/或可以基于影响延迟变化的信息来确定它们中的一个或多个。

所述至少一个处理器可以被配置为确定所述延迟变化参数是否超过了某个阈值，并且基于所述延迟变化参数是否超过了所述某个阈值来选择所述一个或多个灯光效果。例如，如果已经创建了两个灯光脚本，则可以使用上述方法，一个灯光脚本用于相对较低的延迟变化情况，并且一个灯光脚本用于相对较高的延迟变化（即，当超过某个阈值时）。

所述至少一个处理器可以被配置为允许用户调节所述某个阈值。例如，这允许用户指示他希望早于正常或晚于正常来改变对延迟变化不太敏感的灯光效果。

所述至少一个处理器可以被配置为基于从延迟变化参数到动态灯光效果参数的映射，根据所述确定的延迟变化参数来确定动态灯光效果参数，并且基于所述确定的动态灯光效果参数来选择所述一个或多个灯光效果。例如，可以将小于100 ms的延迟变化映射到所有灯光效果的组，可以将100–150 ms的延迟变化映射到排除了旋律同步的灯光效果的一组灯光效果，并且可以将200 ms的延迟变化映射到排除了旋律同步以及节拍和小节同步的亮度灯光效果的一组灯光效果。

所述至少一个处理器可以被配置为允许用户调节所述确定的动态灯光效果参数，并基于所述调节的动态灯光效果参数来选择所述一个或多个灯光效果。这允许用户偏离系统推荐的动态灯光效果参数。

所述至少一个处理器可以被配置为根据用于呈现所述内容项目的系统的配置来确定影响所述延迟变化的所述信息。影响所述延迟变化的所述信息可以包括以下中的至少一项：无线扬声器是否用于呈现所述内容项目，哪种类型的服务用于呈现所述内容项目以及哪种类型的网络连接用于获得所述内容项目。这减少了所需的延迟变化测量的数量，而不必要求用户手动指定该信息。

所述至少一个处理器可以被配置为根据所述确定的信息从所述选择的一个或多个灯光效果中排除过渡持续时间短于某个持续时间最小值的灯光效果、亮度高于某个亮度最大值的灯光效果、旋律同步的灯光效果和/或节拍和小节同步的亮度灯光效果，所述旋律同步的灯光效果包括与所述内容项目的旋律同步的灯光效果，并且所述节拍和小节同步的亮度灯光效果包括与所述内容项目的节拍和小节同步的灯光效果，与仅与所述内容项目的所述节拍同步的灯光效果相比，与所述内容的所述小节同步的灯光效果被呈现得更明显。这些是这样的灯光效果：在其与对应内容较差地同步时，与某些其它灯光效果相比，这些灯光效果对用户体验具有大得多的影响。

所述至少一个处理器可以被配置为在呈现所述内容项目期间多次基于所述确定的信息来确定所述信息并选择一个或多个灯光效果，其中从第一组的一个或多个灯光效果到第二组的一个或多个灯光效果的切换仅在所述内容项目中的某些位置处发生。可以例如在开始呈现灯光效果之前一次确定延迟变化，但也可以多次确定延迟变化。优选地，不仅仅在任何位置处执行从第一组灯光效果到第二组灯光效果的切换，以便使切换不影响用户体验。

所述至少一个处理器可以被配置为进一步基于所述内容项目的种类来选择所述一个或多个灯光效果。灯光效果与内容之间的良好同步的重要性有时取决于内容的种类，并且因此基于该种类选择一个或多个灯光效果是有益的。

在本发明的第二方面中，该方法包括：确定指示或影响内容帧正在呈现和与所述内容帧同步的灯光效果开始呈现之间的延迟变化的信息，基于所述确定的信息来选择要与内容项目同时呈现的一个或多个灯光效果，并且使一个或多个光源与所述内容项目同时呈现所述选择的一个或多个灯光效果。所述方法可以以硬件和/或软件来实现。所述方法可以由在可编程设备上运行的软件来执行。该软件可以作为计算机程序产品来提供。

此外，提供了用于执行本文描述的方法的计算机程序以及存储该计算机程序的非暂时性计算机可读存储介质。例如，计算机程序可以由现有设备下载或上载到现有设备，或者在制造这些系统时进行存储。

一种非暂时性计算机可读存储介质存储至少一个软件代码部分，该软件代码部分在由计算机执行或处理时被配置为执行可执行的操作，包括：确定指示或影响内容帧正在呈现和与所述内容帧同步的灯光效果开始呈现之间的延迟变化的信息，基于所述确定的信息来选择要与内容项目同时呈现的一个或多个灯光效果，并且使一个或多个光源与所述内容项目同时呈现所述选择的一个或多个灯光效果。

如本领域技术人员将认识到的，本发明的各方面可以体现为设备、方法或计算机程序产品。因此，本发明的各方面可以采取以下形式：完全硬件实施例、完全软件实施例（包括固件、驻留软件、微代码等）或组合了通常在本文中可以被统称为“电路”、“模块”或“系统”的软件和硬件方面的实施例。本公开中描述的功能可以被实现为由计算机的处理器/微处理器执行的算法。此外，本发明的各方面可以采取体现在一个或多个计算机可读介质中的计算机程序产品的形式，该计算机可读介质具有在其上体现（例如在其上存储）的计算机可读程序代码。

可以利用一个或多个计算机可读介质的任何组合。计算机可读介质可以是计算机可读信号介质或计算机可读存储介质。计算机可读存储介质可以是例如但不限于电子、磁性、光学、电磁、红外或半导体系统、装置或设备，或者前述的任何合适的组合。计算机可读存储介质的更具体示例可以包括但不限于以下各项：具有一根或多根电线的电气连接、便携式计算机软盘、硬盘、随机存取存储器（RAM）、只读存储器（ROM）、可擦除可编程只读存储器（EPROM或闪存）、光纤、便携式光盘只读存储器（CD-ROM）、光学存储设备、磁存储设备或前述的任何合适组合。在本发明的上下文中，计算机可读存储介质可以是任何有形介质，其可以包含或存储供指令执行系统、装置或设备使用或与其结合使用的程序。

计算机可读信号介质可以包括例如在基带中或作为载波的一部分的传播的数据信号，该传播的数据信号具有在其中体现的计算机可读程序代码。这种传播信号可以采取多种形式中的任何一种，包括但不限于电磁、光学或其任何合适的组合。计算机可读信号介质可以是非计算机可读存储介质并且可以通信、传播或传输供指令执行系统、装置或设备使用或与其结合使用的程序的任何计算机可读介质。

体现在计算机可读介质上的程序代码可以使用任何适当的介质来传输，所述适当的介质包括但不限于无线、有线、光纤、电缆、RF等，或前述的任何合适组合。用于执行本发明各方面的操作的计算机程序代码可以以一个或多个编程语言的任何组合来编写，所述编程语言包括诸如Java（TM）、Smalltalk、C ++等的面向对象的编程语言以及诸如“C”编程语言或类似编程语言的常规的过程编程语言。程序代码可以完全在用户的计算机上、部分在用户的计算机上、作为独立软件包、部分在用户的计算机上并且部分在远程计算机上、或者完全在远程计算机或服务器上执行。在后一种情况下，远程计算机可以通过任何类型的网络（包括局域网（LAN）或广域网（WAN））连接到用户的计算机，或者可以与外部计算机进行连接（例如，通过使用互联网服务提供商的互联网）。

下面参考根据本发明实施例的方法、装置（系统）和计算机程序产品的流程图图示和/或框图描述本发明的各方面。将理解的是，流程图图示和/或框图的每个框以及流程图图示和/或框图中的框的组合可以由计算机程序指令来实现。可以将这些计算机程序指令提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器，特别是微处理器或中央处理单元（CPU），以产生机器，使得经由计算机、其他可编程数据处理装置或其他设备的处理器执行的指令创建用于实现在流程图和/或框图一个或多个框中指定的功能/动作的装置。

这些计算机程序指令还可以存储在计算机可读介质中，该计算机可读介质可以指导计算机、其他可编程数据处理装置或其他设备以特定方式运行，使得存储在计算机可读介质中的指令产生制品，该制品包括实现在流程图和/或框图一个或多个框中指定的功能/动作的指令。

也可以将计算机程序指令加载到计算机、其他可编程数据处理装置或其他设备上，以使一系列操作步骤在计算机、其他可编程装置或其他设备上执行，以产生计算机实现的方法，使得在计算机或其他可编程装置上执行的指令提供了用于实现在流程图和/或框图一个或多个框中指定的功能/动作的方法。

附图中的流程图和框图示出了根据本发明的各种实施例的设备、方法和计算机程序产品的可能实施方式的架构、功能和操作。在这方面，流程图或框图中的每个框可以表示代码的模块、段或部分，该代码包括用于实现指定的（多个）逻辑功能的一个或多个可执行指令。还应当注意，在一些可替代的实施方式中，框中指出的功能可以不按附图中指出的顺序发生。例如，取决于所涉及的功能，实际上可以基本上同时执行连续示出的两个框，或者有时可以以相反的顺序执行这些框。还将注意，框图和/或流程图图示的每个框以及框图和/或流程图图示中的各框的组合可以由执行指定功能或动作的基于专用硬件的系统、或专用硬件和计算机指令的组合来实现。

附图说明

参考附图通过示例的方式，本发明的这些和其他方面是显而易见的并且将被进一步阐明，其中：

图1是本发明的电子设备的第一实施例的框图；

图2是本发明的电子设备的第二实施例的框图；

图3是本发明方法的第一实施例的流程图；

图4是本发明方法的第二实施例的流程图；

图5是本发明方法的第三实施例的流程图；

图6示出了当存在小的延迟变化时灯光效果控制用户界面的示例；

图7示出了当存在显著的延迟变化时图6的用户界面的示例；

图8示出了用于配置用于选择灯光效果的阈值的用户界面的示例；以及

图9是用于执行本发明的方法的示例性数据处理系统的框图。

附图中的对应元件由相同的附图标记表示。

具体实施方式

图1示出了本发明的电子设备的第一实施例。在该第一实施例中，本发明的电子设备是桥接器1，例如，Philips Hue桥接器。桥接器1包括处理器3、收发器5和存储装置7。桥接器1例如经由以太网链路连接到无线接入点11。灯16和17（例如Philips Hue灯）例如经由Zigbee与桥接器1通信。智能扬声器系统13和移动设备12也连接到无线接入点11。

在移动设备12上运行的内容呈现应用程序使用智能扬声器系统13呈现内容项目，例如歌曲。内容项目由在内容服务器18上运行的内容服务（例如Spotify）提供。内容服务器18和无线接入点11都位于互联网19上。在图1的实施例中，桥接器1直接从内容服务器18获得内容元数据和灯光脚本。在移动设备12上运行的内容呈现应用程序和桥接器1链接到内容服务的相同账户。

如果内容项目是歌曲，则可以使用有关正在播放的歌曲的预处理数据（元数据）来最好地完成灯光效果和音乐的同步。例如，Spotify提供元数据，其包含音轨分析的详细数据，包括节奏、音调、片段、节拍结构等。可以在歌曲开始播放时或在播放列表的情况下在歌曲开始播放之前从内容服务器18获得该数据。

使用该数据，可以在音轨中的精确时刻呈现灯光效果（例如，来自灯光脚本的灯光效果），以创建动态和沉浸式的体验。为了使用户能够按预期看到效果，灯光效果呈现应用程序需要与音频播放器同步，以精确地知道歌曲何时开始或知道音轨中的当前位置。例如，Spotify使用web API（应用程序编程接口），该API允许任何应用程序获得有关音轨或其开始的时间或在请求时刻其所在位置的信息。然而，由于请求是通过互联网进行的，因此从Spotify接收消息可能会存在延迟，并且此延迟并不总是稳定或可预测的。

为了减少不期望的用户体验的可能性，处理器3被配置为确定指示或影响内容帧正在呈现和与内容帧同步的灯光效果开始呈现之间的延迟变化的信息。处理器3还被配置为基于所确定的信息来选择要与内容项目同时呈现的一个或多个灯光效果，并且使灯16和/或灯17与内容项目同时呈现所选择的一个或多个灯光效果。

与依赖精确同步的灯光效果相比，对同步不太敏感的灯光效果通常提供较差的体验。然而，当估计同步不那么精确时（即，当延迟的变化较大时），仅通过使用前一种类型的效果，可以避免依赖同步但不同步播放并导致负面用户体验的效果的使用。

在图1的实施例中，在内容帧正在呈现和与内容帧同步的灯光效果开始呈现之间的延迟包括五个延迟分量：

-在移动设备12与智能扬声器系统13之间的延迟分量21，其表示由移动设备12发送的音频信号与在智能扬声器系统13处呈现的音频信号之间的延迟。

-在移动设备12和内容服务器18之间的延迟分量22，其表示在移动设备12上运行的内容回放应用程序通知内容服务器18内容项目的呈现已经在移动设备12处开始所花费的时间。

-在内容服务器18和桥接器1之间的延迟分量23，其表示内容服务器18通知桥接器1内容项目的呈现已经在移动设备12处开始所花费的时间。

-在桥接器1和灯16之间的延迟分量25，其表示由桥接器1发送的灯光命令与在灯16处呈现的对应灯光效果之间的延迟。

-在桥接器1和灯17之间的延迟分量26，其表示由桥接器1发送的灯光命令与在灯17处呈现的对应灯光效果之间的延迟。

在图1的实施例中，针对每个延迟变化分量，根据影响延迟变化的信息确定（例如测量或确定）了延迟变化参数。处理器3被配置为基于多个延迟变化参数的相加来选择要与内容项目同时呈现的一个或多个灯光效果。在可替代的实施例中，省略了没有显著变化的延迟分量，例如延迟分量25和26。

在图1所示的桥接器1的实施例中，桥接器1包括一个处理器3。在可替代的实施例中，桥接器1包括多个处理器。桥接器1的处理器3可以是通用处理器（例如基于ARM的通用处理器），或者是专用处理器。桥接器1的处理器3可以运行例如基于Unix的操作系统。存储装置7可以包括一个或多个存储单元。例如，存储装置7可以包括一个或多个硬盘和/或固态存储器。例如，存储装置7可以用于存储连接灯的表格。

收发器5可以使用一个或多个通信技术来与无线接入点11（例如以太网）通信。在可替代的实施例中，使用多个收发器代替单个收发器。在图1所示的实施例中，已经将接收器和发射器组合成收发器5。在可替代的实施例中，使用一个或多个分离的接收器部件和一个或多个分离的发射器部件。桥接器1可以包括对于网络设备而言典型的其他部件，诸如功率连接器。可以使用在一个或多个处理器上运行的计算机程序来实现本发明。

在图2的实施例中，本发明的电子设备是移动设备31，例如移动电话或平板电脑。在移动设备31上运行的内容呈现应用程序（例如音频播放器）使用智能扬声器系统13呈现内容项目，例如歌曲。使用桥接器15代替图1的桥接器1。桥接器15不直接从内容服务器18获得数据。相反，在移动设备31上运行的灯光效果呈现应用程序从内容服务器18获得内容元数据和灯光脚本。在移动设备31上运行的灯光效果呈现应用程序处理灯光脚本并将灯光命令发送到桥接器15。然后，桥接器15将（较低级别的）灯光命令发送到灯16和/或灯17。

移动设备31包括处理器33、收发器35、存储装置37和显示器39。处理器33被配置为确定指示或影响内容帧正在呈现和与内容帧同步的灯光效果开始呈现之间的延迟变化的信息。处理器33还被配置为基于所确定的信息来选择要与内容项目同时呈现的一个或多个灯光效果，并且使灯16和/或灯17与内容项目同时呈现所选的一个或多个灯光效果。

在图2的实施例中，内容帧正在呈现和与内容帧同步的灯光效果开始呈现之间的延迟包括附加延迟分量：

-在移动设备31和桥接器15之间的延迟分量24，其表示由移动设备3发送的灯光命令与由桥接器15发送的对应的（较低级别的）灯光命令之间的延迟。

此外，由于内容服务器18现在通知移动设备31而不是桥接器15内容项目的呈现已经在移动设备31处开始，所以延迟分量23现在位于内容服务器18和移动设备31之间而不是位于内容服务器18和桥接器15之间。

在图2所示的移动设备31的实施例中，移动设备31包括一个处理器33。在可替代的实施例中，移动设备31包括多个处理器。移动设备31的处理器33可以是通用处理器（例如来自高通或基于ARM的通用处理器），或者是专用处理器。例如，移动设备31的处理器33可以运行Android或iOS操作系统。存储装置37可以包括一个或多个存储单元。例如，存储装置37可以包括一个或多个硬盘和/或固态存储器。例如，存储装置37可以用于存储操作系统、应用程序和应用程序数据。

例如，收发器35可以使用一个或多个无线通信技术来与无线接入点11通信。在可替代的实施例中，使用多个收发器代替单个收发器。在图2所示的实施例中，已经将接收器和发射器组合成收发器35。在可替代的实施例中，使用一个或多个分离的接收器部件和一个或多个分离的发射器部件。显示器39可以包括例如LCD或OLED面板。显示器39可以是触摸屏。移动设备31可以包括对于移动设备而言典型的其他部件，诸如电池和功率连接器。可以使用在一个或多个处理器上运行的计算机程序来实现本发明。

在图2的实施例中，移动设备31呈现内容和灯光效果两者。在可替代的实施例中，第一（例如移动）设备呈现内容，并且第二（例如移动）设备呈现灯光效果。

如果内容服务是视频服务，例如Netflix、Amazon Prime或Hulu，则视频呈现设备，例如TV，可以附加地或可替代地存在于图1和2所示的系统中。在这种情况下，可以考虑一个或多个不同或附加的延迟分量。

图3中示出了本发明的方法的第一实施例。步骤101包括确定指示或影响内容帧正在呈现和与内容帧同步的灯光效果开始呈现之间的延迟变化的信息。步骤103包括基于所确定的信息来选择要与内容项目同时呈现的一个或多个灯光效果。步骤105包括使一个或多个光源与内容项目同时呈现所选的一个或多个灯光效果。

在图3的实施例中，该信息包括表示总延迟变化的总延迟变化参数，并且至少一个处理器被配置为基于总延迟变化参数来选择一个或多个灯光效果。在步骤101中，通过在子步骤119中添加在子步骤111中为各个延迟分量确定的延迟变化参数来计算总延迟变化参数，如图1和2所示。针对网络路径的每个分量重复步骤111。

在图3的实施例中，在步骤113或步骤114-117和步骤121中确定用于延迟分量的延迟变化参数。在步骤113中，基于影响延迟变化的信息来确定延迟变化参数。可以根据用于呈现内容项目的系统的配置来确定影响延迟变化的信息。影响延迟变化的信息可以包括以下中的至少一项：例如，无线扬声器是否用于呈现内容项目，哪种类型的服务用于呈现内容项目以及哪种类型的网络连接（例如Wi-fi 2.4GHz、Wi-fi 5Ghz或有线）用于获得内容项目。

在步骤114中，获得测量数据。在步骤115中，将获得的测量数据存储在存储器中，用于将来使用。在步骤117中，从存储器中检索先前在步骤114中获得的关于一个或多个其他内容项目的测量数据。在步骤121中，根据刚刚在步骤114中获得的测量数据和在步骤117中获得的测量数据的至少一部分（一些测量数据可能在很久之前就已经被获得了）来确定延迟变化值。

例如，对于一个或多个延迟分量，可以通过在步骤114和121中在多个时刻从内容服务器请求由内容服务器提供的内容项目的当前位置，并且通过将位置之间的差异与时刻之间的本地定时差异进行比较，来确定电子设备与内容服务器之间的第一延迟变化。然后，可以在步骤119中基于该第一延迟变化来确定延迟变化参数。

作为步骤101的示例，可以如下确定图2所示的延迟分量的延迟变化参数：

-在步骤111的第一迭代中，通过让移动设备31将音频片段发送到智能扬声器系统13并使用其麦克风来检测音频片段何时开始播放来确定延迟分量21的变化。这样做了多次。从这些值的最大值中减去这些值的最小值，并且该结果可以用作延迟分量21的延迟变化。在图1所示的实施例中，可以由移动设备12测量延迟分量21的变化，并且然后发送到桥接器1。

-在步骤111的第二迭代中，如下确定延迟分量22和23的变化：在步骤114中，从内容服务器请求由内容服务器提供的内容项目的当前位置，并且发送请求的时间使用本地时钟来确定。在步骤117中，从存储器中检索先前在步骤114中关于另一内容项目请求位置的所获得的时间和这些位置。在步骤119中，将在步骤114中获得的位置和在步骤117中从存储器中检索的位置中的至少一些与相关联的时间戳进行比较。对于相同内容项目中的两个连续位置，从这两个连续位置之间的差中减去与这两个连续位置对应的时间戳之间的差。这会得到指示延迟变化的值。这样重复多次。所确定的值的（绝对）最大值可以用作延迟变化参数。

-在步骤111的第三迭代中，在步骤113中，通过确定移动设备31如何连接到桥接器15以及使用何种类型的桥接器来确定延迟分量24的变化。如果移动设备和桥接器连接到相同的无线接入点，如图2所描绘的，并且使用了Philips Hue桥接器，则延迟变化0可以用于例如延迟分量24。

在步骤111的第四迭代中，在步骤113中通过确定使用何种类型的桥接器来确定延迟分量25和26的变化。如果使用Philips Hue桥接器，则延迟变化0可以用于例如延迟分量25和26。

在该示例中，针对包括延迟分量22的延迟和由移动设备31发送并由内容服务器18接收的当前位置请求之间的延迟，测量延迟变化。假设延迟分量23与由移动设备31发送并由内容服务器18接收的当前位置请求之间的延迟相似。

在可替代的实施例中，当确定延迟分量22和23的变化时，不是在步骤114中使用当前位置本身，而是在步骤114中使用本地时钟来确定接收指示当前位置的消息的时间。在该可替代的实施例中，在步骤115中存储发送请求和接收响应的时间之间的差。这会得到指示延迟的值。接下来，在步骤119中比较在步骤114中确定并在步骤117中检索的差。从这些值的最大值中减去这些值的最小值，并且该结果可以用作延迟变化。在该可替代的实施例中，针对包括延迟分量23的延迟和由移动设备31发送并由内容服务器18接收的当前位置请求之间的延迟来测量延迟变化。

延迟分量22被假设为与由移动设备31发送并由内容服务器18接收的当前位置请求之间的延迟相似。由于内容呈现应用程序和灯光效果呈现应用程序在图2中的相同设备（即移动设备31）上运行，因此该假设似乎是合理的。即使在与呈现内容项目的设备不同的另一设备上控制灯，该另一设备也位于相同的局域网中，如图1所描绘的，因此该假设似乎仍然合理。

在步骤103中，基于所确定的总延迟变化，选择要与内容项目同时呈现的一个或多个灯光效果。在该实施例中，如果灯光脚本可用或者否则基于内容项目的分析，则从这种灯光脚本中指定的多个灯光效果中选择一个或多个灯光效果。在前一种情况下，可以通过跳过或替换灯光脚本中指定的多种灯光效果中的一个或多个来选择一个或多个灯光效果。

在图3的实施例中，基于从延迟变化参数到动态灯光效果参数的映射，根据总延迟变化来确定动态灯光效果参数，并且基于所确定的动态灯光效果参数来选择一个或多个灯光效果。

根据总延迟变化，排除某些类型的灯光效果：

-过渡持续时间短于某个持续时间最小值的灯光效果。例如，可以跳过这些灯光效果或将其替换为具有较长持续时间的灯光效果。过渡时间长的效果不如短而活泼的效果敏感。例如，可以每节（歌曲）或每场景或镜头（视频）指定具有较长持续时间的灯光效果。这样的灯光效果可以被认为是环境效果。亮度或亮度变化高于某个最大值的灯光效果。可以跳过这些灯光效果，或者将其替换为具有较低亮度或亮度变化和/或具有颜色改变而非亮度改变的灯光效果。根据节拍调整亮度的效果可以创建非常沉浸式的体验，但是如果灯光脱离节拍闪烁，则体验会显著下降。在节拍上改变颜色的效果可能创建不太沉浸但仍积极的体验。如果颜色变化脱离节拍而发生，则它不太明显并且因此不影响体验。

-旋律同步的灯光效果：与内容项目的旋律同步的灯光效果。在节奏事件（如节拍）上改变的灯光效果比在非节奏事件（如旋律或突然的响度突发）上改变的事件敏感度低，因为在节奏事件的情况下，速度（每分钟的节拍）将仍然匹配。

-节拍和小节同步的亮度灯光效果：与内容项目（内容项目的灯光效果与内容的小节同步）的节拍和小节同步的灯光效果比仅与内容项目的节拍同步的灯光效果（在这种情况下，呈现弱的灯光效果）呈现得更明显（强的效果）。可以跳过这些灯光效果，或将其替换为节拍同步的灯光效果。

例如，可以在灯光脚本中或在针对歌曲的所有节拍的灯光效果呈现应用程序的配置中指定节拍同步的灯光效果以及节拍和小节同步的灯光效果。在前一种情况下，也可以为一节中的所有节拍指定这些灯光效果。可以使用由内容服务提供的元数据将这些定义转换为时间单位（例如毫秒）。可替代地，用户可以使用该元数据手动创建灯光脚本，并直接以时间单位指定灯光效果。在这种情况下，灯光脚本应当识别灯光效果尝试实现的同步的类型（例如节拍同步、小节+节拍同步、节同步或非节奏事件同步），以便确定其是否应该被跳过或替换。

通常，例如可以通过增加过渡时间、降低亮度和/或降低色彩饱和度来跳过或修改灯光效果。在音乐中，跟随旋律（例如吉他音轨）的灯光效果对延迟变化特别敏感。此外，色度对延迟变化的敏感度低于亮度。在视频中，重要的是在屏幕上显示事件之前，不开始呈现与非节奏事件（例如爆炸）同步的灯光效果。在视频中，亮度和色度均对延迟变化敏感。

动态灯光效果参数的每个可能值都映射到一组灯光效果。高的总延迟变化对应于动态灯光效果参数的低值，并且该低值映射到排除了上述四种类型的灯光效果的一组灯光效果。该映射可以取决于内容项目的种类。该映射可以是离散的或连续的（例如函数）。

在图3的实施例中，在内容项目的呈现期间多次确定总延迟变化，并且还基于多次的总延迟变化来选择一个或多个灯光效果。然而，从第一组一个或多个灯光效果到第二组一个或多个灯光效果的切换仅发生在内容项目中的特定位置处，例如，在场景变化处。这些特定位置可以在灯光脚本中定义或被自动检测到。

在图3的实施例中，使用方法的组合来确定某个延迟分量的延迟变化。在步骤114中获得关于当前内容项目的测量数据，并且在步骤117中检索关于一个或多个其他内容项目的测量数据。这两者在步骤121中被处理。在图4的实施例中，每个延迟分量仅使用一种方法。例如，在图4的实施例中，仅基于关于其他内容项目的测量数据来确定图2的延迟分量22和23的延迟变化。如果还仅基于关于其他内容项目的测量数据来确定延迟分量21的延迟变化，则在内容项目的呈现期间总的延迟变化不会改变。

在图5的实施例中，用步骤151代替图3和图4的步骤101，在步骤151中，不确定延迟变化参数。替代地，基于影响延迟变化的信息来选择一个或多个灯光效果。根据用于呈现内容项目的系统的配置来确定影响延迟变化的信息。该信息可以包括以下中的至少一项：无线扬声器是否用于呈现内容项目，哪种类型的服务用于呈现内容项目以及哪种类型的网络连接用于获得内容项目。例如，如果使用卫星互联网连接，则可以排除某些灯光效果。

在图3和图4的实施例中，基于总的延迟变化自动确定动态灯光效果参数。图6示出了用户界面的示例，其中动态灯光效果参数可以由用户调节。用户界面被显示在移动设备31的显示器39上。用户能够在条201上滑动滑块203，以便选择灯光效果的动态性（从慢到动态）。在该示例中，将动态灯光效果参数设置为动态导致更大量的灯光效果和更强的灯光效果（更多的亮度和更多的色彩饱和度）。在图6的示例中，存在小的变化延迟。

如果已经基于总的延迟变化自动确定了灯光效果参数，并且存在显著的延迟变化，则用户仍然可以能够调节动态灯光效果。这在图7中示出。区域205被标记为带有标签209的“可能不同步”。条的另一区域207未被标记。这允许用户改变灯光效果的动态，同时知道哪种动态将可能导致恶化的用户体验。在用户已经调节了确定的动态灯光效果参数之后，基于调节后的动态灯光效果参数来选择一个或多个灯光效果。

在可替代的实施例中，总的延迟变化直接映射到一组灯光效果。例如，可以定义多个范围，每个范围映射到一组不同的灯光效果。通常，在所有组中都包括某些灯光效果。例如，可以将小于100 ms的延迟变化映射到所有灯光效果的组，可以将100–150 ms的延迟变化映射到排除了旋律同步的灯光效果的一组灯光效果，并且可以将200 ms的延迟变化映射到排除了旋律同步以及节拍和小节同步的亮度灯光效果的一组灯光效果。

在简单的实施例中，仅存在两个范围，并且某个阈值将这两个范围分开。在该实施例中，足以确定延迟变化参数是否超过某个阈值并基于延迟变化参数是否超过某个阈值来选择一个或多个灯光效果。可以允许用户调节该某个阈值。这在图8中示出。在移动设备31的显示器39上示出的配置屏幕中，用户能够在区域221上移动滑块223以便指定某个阈值。该阈值用标记225指示（在图8的示例中为“90ms”）。阈值指示整组的灯光效果的最大延迟变化。如果确定的总延迟变化超过该阈值，则使用减少的一组灯光效果。

与图8所示的滑块类似的滑块可以用于指定补偿时段或影响基于延迟变化参数确定的补偿时段的确定。然后可以控制一个或多个光源在针对一个或多个灯光效果的预定开始时间之前的此补偿时段开始呈现所选的一个或多个灯光效果。因此，向用户提供了一种指示偏好的可能性，该偏好是指对于比对应的内容帧更早或更晚地触发灯光效果具有大致相等的机会，以及对于比对应的内容帧更早地触发灯光效果具有增加的机会，或者对于比对应的内容帧更晚地触发灯光效果具有增加的机会。是否使用补偿时段可以取决于延迟变化参数是否超过了某个阈值。图9描绘了框图，该框图示出了示例性数据处理系统，该示例性数据处理系统可以执行参考图3至5描述的方法。

如图9所示，数据处理系统300可以包括通过系统总线306耦合到存储器元件304的至少一个处理器302。这样，数据处理系统可以将程序代码存储在存储器元件304内。此外，处理器302可以执行经由系统总线306从存储器元件304访问的程序代码。在一方面中，数据处理系统可以被实现为适合于存储和/或执行程序代码的计算机。然而，应当认识到，数据处理系统300可以以包括能够执行本说明书中描述的功能的处理器和存储器的任何系统的形式来实现。

存储器元件304可以包括一个或多个物理存储器设备，诸如例如本地存储器308和一个或多个大容量存储设备310。本地存储器可以指通常在程序代码的实际执行期间使用的随机存取存储器或（多个）其他非永久性存储器设备。大容量存储设备可以被实现为硬驱动器或其他永久性数据存储设备。处理系统300还可以包括一个或多个高速缓冲存储器（未示出），其提供至少一些程序代码的临时存储，以便减少在执行期间必须从大容量存储设备310检索程序代码的次数。处理系统300也可以能够使用另一处理系统的存储器元件，例如如果处理系统300是云计算平台的一部分。

描绘为输入设备312和输出设备314的输入/输出（I/O）设备可以可选地耦合至数据处理系统。输入设备的示例可以包括但不限于键盘、诸如鼠标的点击设备、麦克风（例如，用于声音和/或语音识别）等。输出设备的示例可以包括但不限于监视器或显示器、扬声器等。输入和/或输出设备可以直接或通过中间I/O控制器耦合到数据处理系统。

在一实施例中，输入和输出设备可以被实现为组合的输入/输出设备（在图9中以虚线示出，该虚线围绕输入设备312和输出设备314）。这种组合设备的示例是触敏显示器，有时也称为“触摸屏显示器”或简称为“触摸屏”。在这样的实施例中，可以通过物理对象（诸如例如手写笔或用户的手指）在触摸屏显示器上或其附近的运动来提供对设备的输入。

网络适配器316也可以耦合到数据处理系统，以使其能够通过中间私人或公共网络耦合到其他系统、计算机系统、远程网络设备和/或远程存储设备。网络适配器可以包括：数据接收器，用于接收由所述系统、设备和/或网络发送到数据处理系统300的数据；以及数据发射器，用于将数据从数据处理系统300发送到所述系统、设备和/或网络。调制解调器、电缆调制解调器和以太网卡是可以同数据处理系统300使用的不同类型的网络适配器的示例。

如图9中所描绘的，存储器元件304可以存储应用程序318。在各种实施例中，应用程序318可以存储在本地存储器308中、一个或多个大容量存储设备310中，或者与本地存储器和大容量存储设备分开。应当认识到，数据处理系统300可以进一步执行可以促进应用程序318的执行的操作系统（图9中未示出）。可以由数据处理系统300（例如，处理器302）来执行以可执行程序代码的形式实现的应用程序318。响应于执行应用程序，数据处理系统300可以被配置为执行本文描述的一个或多个操作或方法步骤。

本发明的各种实施例可以被实现为同计算机系统使用的程序产品，其中，程序产品的（多个）程序定义实施例的功能（包括本文描述的方法）。在一个实施例中，（多个）程序可以被包含在多种非暂时性计算机可读存储介质上，其中，如本文所使用的，表述“非暂时性计算机可读存储介质”包括所有计算机可读介质，其中唯一的例外是暂时传播的信号。在另一个实施例中，（多个）程序可以被包含在各种暂时性计算机可读存储介质上。说明性计算机可读存储介质包括但不限于：（i）信息被永久存储在其上的不可写存储介质（例如，计算机内的只读存储设备，诸如CD-ROM驱动器可读的CD-ROM盘、ROM芯片或任何类型的固态非易失性半导体存储器）；以及（ii）可变信息存储在其上的可写存储介质（例如，闪存、软磁盘驱动器或硬盘驱动器内的软盘或任何类型的固态随机存取半导体存储器）。计算机程序可以在本文描述的处理器302上运行。

本文使用的术语仅出于描述特定实施例的目的，并不旨在限制本发明。如本文所使用的，单数形式“一”、“一个”和“该”也意图包括复数形式，除非上下文另外清楚地指示为相反。还将理解，术语“包括”（“comprise”或“comprising”）当在本说明书中使用时，指定存在所陈述的特征、整数、步骤、操作、元件和/或部件，但不排除一个或多个其他特征、整数、步骤、操作、元件、部件和/或其组的存在或添加。

所有装置或步骤的对应结构、材料、作用和等同物及下面权利要求中的功能元件旨在包括用于与如具体要求保护的其他要求保护的元件组合地执行功能的任何结构、材料或作用。已经出于说明的目的给出了本发明的实施例的描述，但是其并不旨在是穷举性的或限于所公开形式的实施方式。在不脱离本发明的范围和精神的情况下，许多修改和变型对于本领域普通技术人员将是显而易见的。选择和描述实施例是为了最好地解释本发明的原理和一些实际应用，并使得本领域的其他普通技术人员能够理解本发明的各种实施例，这些实施例具有适合于预期的特定用途的各种修改。

Claims (15)

1.一种电子设备（1、31），包括至少一个处理器（3、33），所述至少一个处理器（3、33）被配置为：

-确定指示或影响音频和/或视觉内容的片段正在呈现和与所述片段同步的灯光效果开始呈现之间的延迟变化的信息，

-基于所述确定的信息，选择要与音频和/或视觉内容项目同时呈现的一个或多个灯光效果，以及

-使一个或多个光源（16、17）与所述内容项目同时呈现所述选择的一个或多个灯光效果。

2.根据权利要求1所述的电子设备（1、31），其中，所述信息包括表示所述延迟变化的延迟变化参数，并且所述至少一个处理器被配置为基于所述延迟变化参数来选择所述一个或多个灯光效果。

3.根据权利要求2所述的电子设备（1、31），其中，所述至少一个处理器（3、33）被配置为基于影响所述延迟变化的信息来确定所述延迟变化参数。

4.根据权利要求2所述的电子设备（1、31），其中，所述至少一个处理器（3、33）被配置为：

-通过在多个时刻从音频和/或视觉内容服务器（18）请求由所述音频和/或视觉内容服务器（18）提供的音频和/或视觉内容项目的当前位置，并且通过将所述位置之间的差异与所述时刻之间的本地定时差异进行比较，来确定所述电子设备（1、31）与所述音频和/或视觉内容服务器（18）之间的第一延迟变化；和

-基于所述第一延迟变化来确定所述延迟变化参数。

5.根据权利要求2所述的电子设备（1、31），其中，所述至少一个处理器（3、33）被配置为：

-确定所述延迟变化参数是否超过了某个阈值（225），并且

-基于所述延迟变化参数是否超过了所述某个阈值（225）来选择所述一个或多个灯光效果。

6.根据权利要求5所述的电子设备（1、31），其中，所述至少一个处理器（3、33）被配置为允许用户调节所述某个阈值（225）。

7.根据权利要求2所述的电子设备（1、31），其中，所述至少一个处理器（3、33）被配置为基于从延迟变化参数到动态灯光效果参数的映射，根据所述确定的延迟变化参数来确定动态灯光效果参数，并且基于所述确定的动态灯光效果参数来选择所述一个或多个灯光效果。

8.根据权利要求7所述的电子设备（1、31），其中，所述至少一个处理器（3、33）被配置为允许用户调节所述确定的动态灯光效果参数（203）并基于所述调节的动态灯光效果参数来选择所述一个或多个灯光效果。

9.根据权利要求1或3所述的电子设备（1、31），其中，所述至少一个处理器（3、33）被配置为根据用于呈现所述内容项目的系统配置来确定影响所述延迟变化的所述信息。

10.根据权利要求9所述的电子设备（1、31），其中，影响所述延迟变化的所述信息包括以下中的至少一项：无线扬声器（13）是否用于呈现所述内容项目，哪种类型的服务用于呈现所述内容项目，以及哪种类型的网络连接用于获得所述内容项目。

11.根据权利要求1所述的电子设备（1、31），其中，所述至少一个处理器（3、33）被配置为根据所述确定的信息从所述选择的一个或多个灯光效果中排除过渡持续时间短于某个持续时间最小值的灯光效果、亮度高于某个亮度最大值的灯光效果、旋律同步的灯光效果和/或节拍和小节同步的亮度灯光效果，所述旋律同步的灯光效果包括与所述音频和/或视觉内容项目的旋律同步的灯光效果，并且所述节拍和小节同步的亮度灯光效果包括与所述音频和/或视觉内容项目的节拍和小节同步的灯光效果，与仅与所述音频和/或视觉内容项目的所述节拍同步的灯光效果相比，与所述音频和/或视觉内容的所述小节同步的灯光效果被呈现得更明显。

12.根据权利要求1所述的电子设备（1、31），其中，所述至少一个处理器（3、33）被配置为确定所述信息并在所述音频和/或视觉内容项目的呈现期间基于所述确定的信息多次选择一个或多个灯光效果，其中，从第一组的一个或多个灯光效果到第二组的一个或多个灯光效果的切换仅在所述音频和/或视觉内容项目中的某些位置处发生。

13.根据权利要求1所述的电子设备（1、31），其中，所述至少一个处理器（3、33）被配置为进一步基于所述音频和/或视觉内容项目的种类来选择所述一个或多个灯光效果。

14.一种使光源呈现灯光效果的方法，包括：

-确定（101、151）指示或影响音频和/或视觉内容的片段正在呈现和与所述内容帧同步的灯光效果开始呈现之间的延迟变化的信息；

-基于所述确定的信息，选择（103）要与音频和/或视觉内容项目同时呈现的一个或多个灯光效果；以及

-使（105）一个或多个光源与所述内容项目同时呈现所述选择的一个或多个灯光效果。

15.一种计算机程序或计算机程序套件，其包括至少一个软件代码部分或存储至少一个软件代码部分的计算机程序产品，所述软件代码部分在计算机系统上运行时被配置为用于使得能够实现权利要求14所述的方法。

Images