CN102577360B

CN102577360B - 媒体播放器的同步回放

Info

Publication number: CN102577360B
Application number: CN201080046956.5A
Authority: CN
Inventors: 哈盖伊·卡茨; 埃亚勒·贝奇科夫; 尤里·罗恩
Original assignee: Google LLC
Priority date: 2009-08-20
Filing date: 2010-08-18
Publication date: 2015-02-04
Anticipated expiration: 2030-08-18
Also published as: US20130253678A1; US20170315775A1; AU2010286048A1; WO2011021197A1; US20110047247A1; AU2010286048B2; US8463875B2; EP2468002A4; EP2468002A1; CN102577360A

Abstract

一种用于媒体播放器的同步回放的方法，该方法包括：通过多个媒体播放器中的每个媒体播放器选择待播放的多媒体文件；通过所述多个媒体播放器中的每个媒体播放器监测用于外部触发的环境；以及在检测到所述外部触发时，通过所述多个媒体播放器中的每个媒体播放器播放所选择的多媒体文件。

Description

媒体播放器的同步回放

技术领域

本发明的领域涉及媒体播放器。

背景技术

许多移动电子设备如今都包括媒体播放器，例如MP3播放器。诸如之类的独立音乐播放器、诸如iPhone^TM之类的蜂窝电话、PDA以及其他这类设备使得用户能够收听他们的音乐内容，对于一些设备来说，还使得用户能够观看他们的视频内容。

这种音乐播放器对它们而言具有反联谊特性，除非连接至放大器。通常，一组用户可能位于同一房间内，每个用户都利用其耳机收到自己的内容，用户之间没有任何交互作用。

为了增强成组用户对媒体内容的享受，能够同步并列地回放内容将是有利的，这样每个用户共同收听/观看相同的内容。对于一组用户来说，能够在他们每人的媒体播放器上共同一起播放相关内容也将是有利的。

发明内容

本发明的多个方面涉及各具有媒体播放器的一组用户，该组用户愿意共同一起播放多媒体文件。每个媒体播放器都具有“同步”模式，该“同步”模式在被启动时控制媒体播放器同步地同时播放多媒体文件。

在本发明的一个实施方式中，通过使用外部声音（诸如鼓掌或口哨）触发每个媒体播放器来开始播放其多媒体文件来实现同步。所述外部声音触发可以由人类手动产生，或者可以通过一设备产生。

由于声音速度和播放器的处理速度而可能在每个媒体播放器开始播放的时间之间存在微小差异，但是通常这种差异为几十毫秒级，人类耳朵难以辨别这种差异。而且，通过将播放器之间的音频输出相互相关并且自动地将一些播放器向前快进微小量以使交互相关性最大化，可以全部或部分地减少所述差异。另选地，可以手动将一些播放器快进微小量以降低所述差异。

在本发明的另一个实施方式中，通过媒体播放器从先导的媒体播放器记录音频输出，从所述音频输出识别歌曲，然后播放所述歌曲或播放与该歌曲对应的多媒体文件(例如以该歌曲为伴奏的电影)，从而实现同步。

在本发明的另一个实施方式中，所述媒体播放器包括照相机，通过利用视觉作用实现同步性，所述视觉作用例如是人举起他的手或左右转动他的手、人微笑或者设备利用特定颜色照亮其屏幕或在其屏幕上显示特定形状。微笑检测的一个示例是索尼公司的W系列数字紧凑型照相机的“微笑快门”模式。

在本发明的另一个实施方式中，所述媒体播放器具有接近传感器，当所述媒体播放器近距离接近另一个媒体播放器时例如具有1cm时，它们开始播放多媒体文件。

在本发明的另一个实施方式中，所述媒体播放器具有蓝牙、IR或其他这样的无线信号检测器，并且在检测到彼此的信号时被触发而开始播放多媒体文件。

本发明解决了其中将由媒体播放器同步播放的歌曲及其对应多媒体文件事前已知的使用情形(scenario)、以及所述歌曲事前未知而必须由多媒体播放器识别的情形。本发明还解决了其中媒体播放器开始播放歌曲的起始点事前已知的使用情形以及其中起始点事前未知而必须由媒体播放器确定的情形。

在本发明的一些实施方式中，媒体播放器与服务器计算机通信，该服务器计算机运行应用程序以基于歌曲的被记录部分来识别歌曲。

因而，根据本发明的实施方式提供了一种用于媒体播放器的同步回放的方法，该方法包括：通过多个媒体播放器中的每个媒体播放器选择待播放的多媒体文件；通过所述多个媒体播放器中的每个媒体播放器监测用于外部触发的环境；以及在检测到所述外部触发时，通过所述多个媒体播放器中的每个媒体播放器播放所选择的多媒体文件。

另外，根据本发明还提供了一种用于媒体播放器的同步回放的方法，该方法包括：通过多个媒体播放器中的每个媒体播放器选择待播放的多媒体文件；通过所述多个媒体播放器中的一个媒体播放器产生音频音；通过所述多个媒体播放器中的其他媒体播放器监测环境以检测所产生的音频音；以及在检测到所产生的音频音时，通过所述多个媒体播放器中的所述其他媒体播放器播放所选择的多媒体文件。

根据本发明的一个实施方式进一步提供了一种媒体播放器的同步回放的方法，该方法包括：由媒体播放器记录来自正由另一个播放器设备播放的已知多媒体文件的歌曲的音频部分；分析所记录的音频部分以确定在所述多媒体文件内的与所记录的音频部分相关的起始点；以及从所确定的所述多媒体文件内的起始点开始在所述媒体播放器上播放所述多媒体文件。

根据本发明的一个实施方式又进一步提供了一种媒体播放器的同步回放的方法，该方法包括：由媒体播放器记录正由另一个媒体播放器播放的歌曲的音频部分；分析所记录的音频部分以识别所述歌曲，并识别与该歌曲对应的多媒体文件；进一步分析所记录的音频部分，以确定在所述多媒体部分内的与所记录的音频部分相关的起始点；以及从所确定的所述多媒体文件内的起始点开始在所述媒体播放器上播放所述多媒体文件。

此外，根据本发明的一个实施方式提供了一种媒体播放器的同步回放的方法，该方法包括：由媒体播放器记录正由另一个媒体播放器播放的歌曲的音频部分；将所记录的音频部分发送到服务器计算机；从所述服务器计算机接收识别所述歌曲的信息；识别与所识别的歌曲对应的多媒体文件；分析所记录的音频部分以确定在所述多媒体文件内的、基于所记录的音频部分的起始点；以及从所确定的所述多媒体文件内的起始点开始在所述媒体播放器上播放多媒体文件。

此外，根据本发明的一个实施方式提供了一种媒体播放器的同步回放的方法，该方法包括：由媒体播放器记录正由另一个媒体播放器播放的歌曲的音频部分；将所记录的音频部分发送到服务器计算机；从所述服务器计算机接收(i)识别所述歌曲的和(ii)识别在所述歌曲内与所记录的音频部分相关的位置的信息；识别与所识别的歌曲对应的多媒体文件；基于所识别的位置确定在所述多媒体文件内的起始点；以及从所确定的起始点开始在所述媒体播放器上播放与所识别的歌曲对应的多媒体文件。

附图说明

结合附图从如下详细描述将更完全地理解和认识本发明，在附图中：

图1是根据本发明的一个实施方式的用于媒体播放器同步回放事前已知的多媒体文件的第一方法的简化流程图；

图2是根据本发明的一个实施方式的用于媒体播放器同步回放事前已知的多媒体文件的第二方法的简化流程图；

图3是图1是根据本发明的一个实施方式的用于媒体播放器同步回放事前未知的多媒体文件的第一方法的简化流程图；

图4是根据本发明的一个实施方式的用于媒体播放器同步回放事前未知的多媒体文件的第二方法的简化流程图；以及

图5是根据本发明的一个实施方式的用于媒体播放器同步回放事前未知的多媒体文件的第三方法的简化流程图。

具体实施方式

本发明的多个方面涉及各具有媒体播放器的两个或更多个用户，这些用户愿意共同一起享受一份媒体内容。本发明的多个实施方式引入了用于媒体播放器的“同步”模式。当在同步模式中时，媒体播放器被控制成同步同时地播放同样的多媒体文件或相关的多媒体文件。在播放相关的多媒体文件的情况下，媒体播放器共同一起播放多媒体文件。多媒体文件可以包括歌曲、电影、视频片段、放映幻灯片或其他这样的内容。

媒体播放器同步回放时存在若干不同使用情形。在一些情形中，每个媒体播放器事先已知待播放的多媒体文件。在其他情形中，每个媒体播放事前未知待播放的多媒体文件，因此必须识别所述多媒体文件。在一些情形中，每个多媒体播放器从多媒体文件的开头开始其回放，或者从事前已知的这种其他起始点开始其回放。在其他一些情形中，一些或所有媒体播放器需要确定多媒体文件中开始回放的起始点，以便确保同步性。

当多媒体文件事前已知时回放的同步

在本发明的一个实施方式中，诸如拍掌或口哨之类的外部声音触发每个媒体播放器而在相同时刻或几乎在相同时刻开始播放指定的多媒体文件。所述多媒体播放器在识别到所述外部声音时立即开始其回放，或者在识别到外部声音之后的预定时间延迟时刻开始其回放。每个媒体播放器从文件的开头或从文件内事前已知的起始点开始播放多媒体文件。每个媒体播放器开始播放的时间之间的差异通常为几十毫秒级，这种差异非常短，以致于人类耳朵难以辨别。

另外，通过分析媒体播放器之间的音频输出的交互相关性而自动地使每个媒体播放器快进微小量以使交互相关性最大化或手动地使每个媒体播放器快进微小量，能够部分或全部地补偿所述差异。

在本发明的另一个实施方式中，所述媒体播放器中的一个媒体播放器播放音频音，该音频音作为用来使其他媒体播放器开始播放指定的多媒体文件的触发。

在本发明的另一个实施方式中，所述多媒体播放器包括照相机，通过视觉作用实现同步性，所述视觉作用例如是人举起他的手或左右转动他的手、人微笑或者设备利用特定颜色照亮其屏幕或在其屏幕上显示特定形状。微笑检测的一个示例是索尼公司的W系列数字紧凑型照相机的“微笑快门”模式。

在本发明的另一个实施方式中，所述媒体播放器具有接近传感器，当所述媒体播放器近距离彼此接近时，例如距离1cm时，它们开始播放多媒体文件。

为了清楚起见，如下描述涉及音频触发，但是本领域技术人员应认识到，本发明适用于其他类型的触发，尤其包括如上所述的视觉触发、接近触发和无线信号检测触发。

参照图1，图1是根据本发明的一个实施方式的用于媒体播放同步回放事前已知的多媒体文件的第一方法的简化流程图。在图1的使用情形中，多个用户中的每个用户都具有媒体播放器，并且这些用户愿意同步地在一起同时同步地播放指定的多媒体文件。媒体文件可以包括歌曲、电影、视频片段、放映幻灯片或其他这样的内容。

在步骤110，每个用户指定用于通过其媒体播放器回放的多媒体文件。在步骤120，每个用户启动其媒体播放器的“同步”模式。当启动同步模式时，每个媒体播放器在步骤130利用其麦克风监测其周围的外部声音以用以触发回放的开始。外部声音触发尤其可以是掌声或口哨。该外部声音触发可以手动产生或者可以通过一设备产生。

当在步骤140听到外部声音时，每个媒体播放器在步骤150确定所听到的声音是否高于阈值。如果高于阈值，则在步骤160媒体播放器开始回放所选择的多媒体文件。如果不是，则处理返回到步骤130以便进一步监测。

根据本发明的另一个实施方式，在步骤130触发媒体播放器以开始其回放的声音由其中一个媒体播放器产生，而不是外部声音。产生触发声音的媒体播放器可以是预先指定的媒体播放器。另选地，产生触发声音的媒体播放器可以随机选择。例如，每个媒体播放器可以选择随机数字n，例如从1到20的数字，并且在产生触发声音之前倒数n秒。产生触发声音的一个或更多个媒体播放器因而首先触发其他媒体播放器开始回放所指定的多媒体文件。

将认识到的是，图1的方法在当用户在步骤110选择不同的多媒体文件来共同同步播放时的场合也是有利的。例如，理发店三重唱(barber shop trio)的三个用户可以各自将他们自己部分的三重唱记录在他们的媒体播放器上，并且使用图1的方法共同回放这三个部分。

将认识到的是，由于若干因素而可能在每个媒体播放器开始播放的精确时间上存在微小差异。这些因素包括：(i)声音速度；(ii)检测到外部声音的等待时间；以及(iii)播放器之间的不同处理速度。然而，这些差异为数十毫秒级，人类耳朵通常难以辨别这种差异。

具体地说，关于(i)，声音在空气中的速度为1100英尺/秒级。这样，如果媒体播放器之间的距离为10英尺级，则由于声音速度引起的差异小于9毫秒。

根据本发明的一些实施方式，媒体播放器之间的差异可以部分或全部地得到补偿。在一个实施方式中，用户手动调整设备之间的延迟，例如，通过快进回放以前进短的时间。在另一个实施方式中，可适合于具有音频部分的多媒体文件，媒体播放器通过检测它们的音频输出之间的交互相关性而自动地调整它们的延迟，并且前进回放以最大化交互相关性。对于具有视频部分的多媒体文件，媒体播放器可以基于视频输出之间的交互相关性来自动地调整它们的延迟。

关于(ii)，检测设备通常以小的离散时间间隔例如20毫秒的间隔对背景噪音进行采样。这样，每个20毫秒设备都分析之前的20毫秒以检测是否存在外部声音。只有在检测到外部声音之后，设备才开始其回放。然而，本领域技术人员应认识到，在检测到外部声音时，设备能够识别出外部声音被采样的准确时间。因而，设备能够延迟回放直到在该准确时间之后固定延迟时间，例如30毫秒，由此消除媒体播放器之间的由于采样等待时间引起的差异。用符号表示来说，第一和第二媒体播放器可以在各自不同时间T1和 T2检测到外部音声在时间T被采样，其中T1和T2大于T但是小于比方说T+20毫秒。这样，两个播放器都能够在相同时间比方说T+30毫秒开始其回放。本领域技术人员将认识到，由于回放在外部声音被采样后的30之后开始，因此不管媒体播放器的时钟是否在一天中的同一时间同步，都确保了回放的同步性。

另外关于(ii)，由于外部声音的长度(这通常跨越若干个样本)一些等待时间可以是固有的。这种等待时间可以通过识别外部声音的峰值幅度并利用该峰值的时间作为精确触发来减少。

关于(iii)，不同的媒体播放器可能需要不同的时间来准备回放。这种差异可以通过预先准备好指定的回放多媒体文件(例如通过预先高速缓存该多媒体文件)来减少或消除。

在本发明的另一个实施方式中，先导媒体播放器开始播放已知多媒体文件，而其他媒体播放器确定多媒体文件内的起始点，从而使其他播放器能够与先导媒体播放器同步播放多媒体文件。

在这方面，参照图2，图2是根据本发明的一个实施方式的用于媒体播放器同步回放事前已知的多媒体文件的第二方法的简化流程图。在图2的使用情形中，被称为“先导”的一个用户开始在其媒体播放器上播放多媒体文件。具有媒体播放器的其他用户愿意加入并与该先导一起同步地播放多媒体文件。图2的方法适用于包括音频成分的多媒体文件(例如歌曲或带有声迹的电影)。

在步骤210，想与先导一起加入的一个或更多个用户指定用于回放的已知多媒体文件。在步骤220用户启动他们的媒体播放器的“同步”模式。在步骤230，媒体播放器记录来自先导的媒体播放器的一部分音频输出。

在步骤240，每个媒体播放器分析所记录的音频部分以确定多媒体文件内从何处开始的起始点，从而使回放与先导同步。在步骤240的一种实现中，确定歌曲或声迹内所记录的音频部分的时基(time-based)位置T；定时器ΔT从步骤220的开头运行直到步骤240的结束以测量其间经历的时间。一旦确定T，媒体播放器在步骤250从文件内的时间T+ΔT开始回放多媒体文件，该时间T+ΔT与先导的媒体播放器的当前播放位置匹配。

当多媒体文件事前未知时回放的同步

在本发明的一个实施方式中，一个或更多个媒体播放器记录由先导的媒体播放器输出的歌曲的一部分音频，并且识别由先导播放的歌曲。媒体播放器还确定歌曲内的起始点(从起始点开始播放)以与先导同步。可以通过媒体播放器本身执行从所记录的音频输出对歌曲所进行的确定。在另一个实施方式中，可以通过与媒体播放器通信的服务器计算机执行从所记录的音频输出对歌曲所进行的确定。

参照图3，图3是根据本发明的一个实施方式的用于媒体播放器同步回放事前未知的多媒体文件的第一方法的简化流程图。在图3的使用情形中，称为“先导”的一个用户开始在其媒体播放器上播放多媒体文件。具有媒体播放器的其他用户愿意加入与先导一起同步播放事前未知的多媒体文件。图3的方法适用于包括音频成分的多媒体文件(例如歌曲或带有声迹的电影)。

如在以上图2的方法中一样，先导的媒体播放器开始播放多媒体文件。在步骤310，想要加入先导的用户启动其媒体播放器的“同步”模式。接着，在步骤320，该用户的媒体播放器记录由先导的媒体播放器播放的歌曲的一部分音频。在步骤330，该用户的媒体播放器分析所记录的音频部分以识别歌曲，并且在步骤340，该用户的媒体播放器识别与该歌曲对应的多媒体文件。该多媒体文件尤其可以是该歌曲本身或者以该歌曲伴奏的电影。

在步骤350，该用户的媒体播放器分析所记录的音频部分，以确定多媒体文件内的起始点(从该起始点开始播放)，从而使播放与先导同步。在基于时间的实现中，定时器ΔT测量从步骤310的开头到步骤350在确定所记录的音频部分在歌曲内的时基位置T时为止经历的时间。一旦确定T，媒体播放器在步骤360从文件内的时间T+ΔT开始回放多媒体文件，该时间T+ΔT与先导的当前播放位置匹配。

参照图4，图4是根据本发明的一个实施方式的用于媒体播放器同步回放事前未知的多媒体文件的第二方法的简化流程图。在图4的使用情形中，称为“先导”的一个用户开始在其媒体播放器上播放多媒体文件。具有媒体播放器的其他用户愿意加入与先导一起同步播放事前未知的多媒体文件。图4的方法适用于包括音频成分的多媒体文件(例如歌曲或带有声迹的电影)。

如上所述，先导的媒体播放器开始播放多媒体文件。在步骤410，用户启动其媒体播放器的“同步”模式。接着，在步骤420，用户的媒体播放器记录正由先导播放的歌曲的一部分音频。在步骤430，用户的媒体播放器将所记录的一部分音频发送到服务器计算机。服务器计算机分析所记录的音频部分，以识别正在播放的歌曲。服务器计算机尤其可以使用诸如Tunatic^TM应用程序之类的应用程序，该应用程序根据其记录的一部分识别歌曲。

在步骤440，媒体播放器从服务器计算机接收识别歌曲的信息，并且在步骤450，媒体播放器识别与该歌曲对应的多媒体文件。多媒体文件尤其可以是歌曲本身或以该歌曲伴奏的电影。

在步骤460，用户的媒体播放器分析所记录的音频部分，以识别多媒体文件内的起始点(从该起始点开始播放)，从而使回放与先导同步。在基于时间的实现中，定时器ΔT测量从步骤410的开头到步骤460在确定所记录的音频部分在歌曲内的时间T时为止所经历的时间。一旦确定T，媒体播放器在步骤470从文件内的时间T+ΔT开始回放多媒体文件，该时间T+ΔT与先导的当前播放位置匹配。

尽管媒体播放器在步骤460确定起始点，但在图4的方法的变型中，可以改为通过服务器计算机提供所记录的音频部分在歌曲内的位置。

在这方面，参照图5，图5是根据本发明的一个实施方式的用于媒体播放器同步回放事前未知的多媒体文件的第三方法的简化流程图。在图5的使用情形中，称为“先导”的一个用户开始在其媒体播放器上播放多媒体文件。具有媒体播放器的其他用户愿意加入与先导一起同步播放事前未知的多媒体文件。图5的方法适用于包括音频成分(的多媒体文件例如歌曲或带有声迹的电影)。

如上所述，先导的媒体播放器开始播放多媒体文件。在步骤510，希望加入先导的用户启动其媒体播放器的“同步”模式。接着，在步骤520，该用户的媒体播放器记录正由先导的媒体播放器播放的歌曲的一部分音频。在步骤530，该用户的媒体播放器将所记录的一部分音频发送到服务器计算机。服务器计算机分析所记录的音频部分，以识别正在播放的歌曲。服务器计算机尤其可以使用诸如Tunatic^TM应用程序之类的应用程序，该应用程序根据其记录的一部分识别歌曲。服务器计算机还识别所记录的音频部分在歌曲内的位置。在步骤540，媒体播放器从服务器计算机接收识别歌曲以及所记录的音频部分在歌曲内的位置的信息。

在步骤550，媒体播放器识别与该歌曲对应的多媒体文件。多媒体文件尤其可以是歌曲本身或以该歌曲伴奏的电影。在步骤560，媒体播放器基于从服务器计算机接收的识别位置确定在多媒体文件内的起始点。该起始点可以是时基位置T+ΔT，其中T是由服务器计算机在步骤540提供的时基位置，ΔT是定时器提供的，该定时器从步骤510的开头运行到步骤540的结束，以测量其间经历的时间。

在步骤570，媒体播放器从从文件内所确定的起始位置开始播放多媒体文件。

在本发明的另一个实施方式中，媒体播放器可以将其本身与电视、收音机或其他这种娱乐设备同步。在该实施方式中，媒体播放器在步骤320、420和520从电视、收音机或其他娱乐设备而不是从先导的媒体播放器记录一部分音频输出。

在本发明的另一个实施方式中，借助于设备之间的数字通信诸如蓝牙通信实现媒体播放器之间之间的同步。

在上述说明中，已经参照本发明的具体示例性实施方式描述了本发明。然而，应当清楚的是，在不脱离本发明的在所附权利要求中阐述的较宽实质和范围的情况下可以对所述具体示例性实施方式进行各种修改和改变。因而，说明书和附图应看作是示例性的而不是具有限制意义。

Claims

1.一种用于媒体播放器的同步回放的方法，该方法包括,为多个媒体播放器中的每个媒体播放器：

通过所述每个媒体播放器选择待播放的多媒体文件；

通过所述每个媒体播放器监测所述每个媒体播放器的环境以检测外部声音触发，其中所有所述媒体播放器检测相同的外部声音触发；

通过所述每个媒体播放器确定所述外部声音触发的触发时间；以及

在检测到所述外部声音触发时，

通过所述媒体播放器一直等待所确定的触发时间后的固定延迟时间，其中所有所述媒体播放器使用相同的固定延迟时间，并且然后

通过所述每个媒体播放器播放所选择的多媒体文件。

2.根据权利要求1所述的方法，其中每个媒体播放器选择同一个多媒体文件。

3.根据权利要求1所述的方法，其中所述媒体播放器选择不同的多媒体文件。

4.根据权利要求1所述的方法，其中每个媒体播放器从所选择的多媒体文件的开头播放所述文件。

5.根据权利要求1所述的方法，其中每个媒体播放器从所选择的多媒体文件内的已知起始点开始播放所述文件。

6.根据权利要求1所述的方法，其中所述外部声音触发由一设备产生。

7.根据权利要求1所述的方法，其中所述外部声音触发通过人类手动产生。

8.根据权利要求7所述的方法，其中所述外部声音触发是鼓掌或口哨的声音。

9.一种用于媒体播放器的同步回放的方法，该方法包括：

通过多个媒体播放器中的每个媒体播放器选择待播放的多媒体文件；

通过所述媒体播放器中的一个媒体播放器产生音频音；并且

为其他媒体播放器中的每个其他媒体播放器：

通过所述每个其他媒体播放器监测所述每个其他媒体播放器的环境以检测所产生的音频音；

通过所述每个其他媒体播放器确定所述音频音产生的时间；以及

在检测到所产生的音频音时，

通过所述每个其他媒体播放器一直等待所确定的所述音频音产生的时间后的固定延迟时间，其中所有的所述其他媒体播放器使用相同的固定延迟时间；并且然后

通过所述每个其他媒体播放器播放所选择的多媒体文件。

10.根据权利要求9所述的方法，该方法进一步包括在产生所述音频音并且等待所述固定延迟时间之后通过产生所述音频音的所述媒体播放器播放所选择的多媒体文件。

11.根据权利要求9所述的方法，其中产生所述音频音的所述媒体播放器是预先确定的媒体播放器。

12.根据权利要求9所述的方法，其中产生所述音频音的所述媒体播放器是使用随机数随机确定的。