CN101996048B - 娱乐媒体可视化及交互方法 - Google Patents

Abstract

本发明涉及一种操作娱乐系统的方法，其包括计算机实现的步骤，所述步骤包括访问音频/视频内容的来源。所述来源能够提供多个媒体项目。分析所述媒体项目，从而确定每个项目对应的分类。在娱乐系统的显示器上提供每个分类的可视化表示。检测到用户选择了一个分类。响应于所述检测，播放与所选择的分类相对应的一个媒体项目，并且/或者向用户提供在与所选分类相对应的多个媒体项目中的进行选择的机会。

Description

娱乐媒体可视化及交互方法

技术领域

本发明涉及娱乐系统，更具体地，涉及在用户的注意力被转移到另一个主要任务的环境中操作的娱乐系统。

背景技术

已知娱乐系统包括例如光盘(CD)播放器这样的无线电和重放设备。收听无线电广播上的音乐是使用娱乐系统如何高度依赖于个人偏好的一个典型例子。人们更愿意收听播放他们喜爱的音乐的无线电台。类似地，他们调到广播他们所感兴趣的新闻的电台。调谐到一个电台可以被视为使无线电广播个性化的一个非常简单的方法。更高级类型的个性化设置将会用用户最喜爱的电台来配置无线电广播的电台预设按钮。

如果有更多的无线电电台可用，那么预设或者调台的任务就变得更加复杂。目前，除了常规的AM/FM电台外，在卫星无线电广播、数字无线电广播上以及作为IP无线电广播流在因特网上有大量的电台可用。找到有感兴趣的内容的电台需要用户更多的时间和更多的注意力，因为这仍然是一种需要用户主动输入的人工任务。

为了使用户更容易地找到他喜爱的音乐已经做了一些尝试。诸如www.Last.FM和Amazon.com的方法使用协作过滤技术，该技术基于用户行为比较不同的项目(例如歌曲)之间的关系。例如，喜欢听诸如Coldplay这样的乐队的人通常也喜欢听诸如U2这样的类似的流行音乐乐队。

现有技术水平的娱乐系统使用不同的方法来选择内容。无线电广播提供在不同的无线电频带上搜台的功能。用户可以使用搜索功能来在所述区域内找到所有可用的无线电电台，以决定他喜欢哪一个。装备有RDS(无线电数据系统)的一些无线电广播设备提供寻找下一个广播特定节目类型(PTY)的电台的功能。这需要无线电电台传送正确的RDS信息。

通过首先选择所述CD，然后人工选择曲目来在CD或者CD更换器中选择音乐。所述曲目或者由数字识别，或者如果所述CD通过使用CD文本特性包含了歌曲的名称，那么可由名称识别。

诸如苹果IPOD或者飞利浦的STREAMIUM这样的现有技术水平的媒体播放器通常使用下述方法之一来选择音乐、播客(podcast)和其他的音频内容(例如mp3格式或者数字文件格式的电影)：在列表中提供选择选项；“随机”播放；或者“推荐”播放。在列表中选择是普通方法，用于允许用户在内容中浏览直到找到想要的项目。存在很多这种方法的变形，例如显示描述内容的图像(封面图，缩略图)的图片，或者使用根据不同的标准(例如，字母排序，使用频率，用户喜爱度)而排序的列表。如果媒体集太大以致不允许从单个列表中快速选择，那么一个典型的方法是用一个分级的选择标准。例如，为了从特定艺术家的作品中找到一首歌，用户首先选择音乐类型，再选择艺术家、唱片集，最后选择歌曲。因此，用户需要做出一系列判断以便指定什么媒体内容是他感兴趣的。相反，“随机”播放根本不需要用户输入，但是用户把媒体内容的选择权全部交给了媒体播放器。为了减轻这个影响，“推荐”播放变得更流行。这个播放技术仍然自动选择音乐，但是考虑了用户的喜好，以便最大化地播放用户喜爱的项目。一系列便携式的音频和视频播放器使用这种推荐技术，以向用户提供个性化的内容。

“随机”和“推荐”播放这两种方法都不能让用户直接影响下一个将选择的项目。如果用户想要更特定的项目或者想要创建一个项目序列，即，一个播放列表，他必须再次用基于列表的方法来在或多或少的细节上指定他想要的内容。

除非用户希望把所有选择媒体项目的控制留给一个自动系统，否则必须有某些方法让用户表达他的喜好。通过用列表或者列表的许多变形来表达喜好涉及用户作出的许多决定。例如，用户必须决定他喜欢的音乐类别。然后他必须指定他喜欢的艺术家。只要用户有他喜欢什么的具体想法，这就行得通。但是，如果用户不能确定一个具体的类别或者不知道一个项目属于什么类别就不行了。例如，音乐类型“Rock”(摇滚)和“Pop”(流行)之间的区别并没有清晰的定义并且通常取决于主观标准。因此，如果用户喜欢处于“Rock”和“Pop”之间的音乐，那么在当前可用的、需要用户要么选择“Rock”要么选择“Pop”的媒体播放器中就不能表达这一愿望。在每个分级步骤中都必须作出这样的决定，直至用户找到他喜欢的内容。在用户不能或者不愿意花很多注意力和时间在媒体播放器上的情况下，这个作决定的过程可能是代价昂贵的。一个例子是车辆中的娱乐系统。因为用户需要集中注意力在驾驶任务上，所以媒体项目的选择需要尽快完成并且使用尽可能少的交互步骤。

媒体地图是可用于媒体播放器的媒体内容的图形表示。这个内容可以被存储在媒体播放器自身中或者可以从例如闪存卡这样的外部存储设备或者web服务中获得。此外，可以使用来自例如广播或者流媒体这样的源的内容，例如来自无线电台的内容。

在一个已知的创建媒体地图的方法中，使用节奏柱状图和统计频谱描述符来从音频内容提取音乐特征。使用自组织映射将所得到的特征矢量转化为二维图形表示。所得到的图的属性是：它保留了输入空间的拓扑属性。所得到的图反映了输入，但创建过程不提供对可视化外观的直接控制。因为这个原因，所述自组织映射可能无法以结构化方式显示音乐类型。

本领域中没有披露也没有提出过克服了上述问题和限制的个性化娱乐系统。更特别地，没有披露也没有提出过向用户以图形和空间的方式指示可用内容，并且使得用户能够通过例如点、线、闭合环这样的空间手势来选择内容的娱乐系统。

发明内容

本发明可以提供一个新方法来观看和浏览娱乐媒体项目的集合，例如音乐曲目、新闻、播客、电影、CD和其他音频视频内容。此外，本发明使得能够浏览来自AM/FM、数字无线电广播和电视、卫星无线电广播、因特网无线电广播和其他音频/视频内容的流媒体源的无线电台和电视台内容。本发明可以使得用户能够快速选择喜欢的内容，这在用户与系统交互的时间有限的环境中特别有用，例如当用户正在开车时。通过结合手势识别，本发明可以使用户容易地选择单个项目，项目组和播放列表，即，项目的序列。此外，本发明可以使用动态可视化表示技术来显示当前播放的内容，这样使用户能有效地浏览来自不同的源的可用内容。

本发明的一种形式包括，一种用计算机实现的步骤来操作娱乐系统的方法，步骤包括访问音频/视频内容的来源。所述来源能够提供多个媒体项目。分析所述媒体项目，从而确定每个项目的对应分类。在娱乐系统的显示器上提供每个分类的可视化表示。检测到用户选择了分类之一。响应于这个检测，播放与所选择的分类相对应的一个媒体项目，并且/或者为用户提供在与所选分类相对应的多个媒体项目中进行选择的机会。

本发明的另一种形式包括一种用计算机实现的步骤操作娱乐系统的方法，步骤包括访问音频/视频内容的来源。所述来源能够提供多个媒体项目。确定每个项目的对应分类。在娱乐系统的显示器上提供每个分类相应的表示。检测到用户按顺序选择了多个分类。响应于所述检测，按照媒体项目的分类的顺序来播放具有所选分类的媒体项目。

本发明的另一种形式包括一种用计算机实现的步骤来操作娱乐系统的方法，步骤包括在娱乐系统的显示器上提供多个音频/视频内容的分类中的每一个的可视化表示。检测到用户选择了在显示器上的两个表示之间的区域。所述两个表示分别对应于第一分类和第二分类。响应于所述检测，播放具有音频/视频内容的第一分类和第二分类中的每一个的特征的媒体项目，并且/或者为所述用户提供在多个媒体项目中进行选择的机会。每个媒体项目具有音频/视频内容的第一和第二分类中的每一个的特征。

本发明的优点是所述娱乐系统可以支持快速选择媒体项目。

本发明的另一优点是，与已知的自动“随机”播放和“推荐”播放方法不同，本发明通过提供“媒体地图”和与之交互的技术，使得用户能更多地控制选择什么媒体项目。

附图说明

通过参考下述与附图结合的对本发明的实施例的描述，本发明的上述和其他特征及目的，以及实现它们的方式，将更为明显并且发明本身将被更好地理解，其中：

图1是可以与本发明结合使用的娱乐系统的用户界面的一个实施例的示图。

图2是本发明的可以被显示在显示屏上的媒体地图的一个实施例的示图。

图3是本发明的可以被显示在显示屏上的媒体地图的另一个实施例的示图。

图4是本发明的可以被显示在显示屏上的媒体地图的另一个实施例的示图。

图5是本发明的可以被显示在显示屏上的媒体地图的另一个实施例的部分示图。

图6是本发明的媒体地图的又一个实施例的示图，在该示图上，在触摸屏显示器上已经画了一个闭合的图形。

图7是本发明的媒体地图的另一个实施例的示图，在该示图上，在触摸屏显示器上已经画了两个闭合图形。

图8是本发明的媒体地图的另一个实施例的示图，其上一个开放的笔画已被画在触摸屏显示器上。

图9是本发明的媒体地图的另一个实施例的示图，其上一个开放的笔画和一个闭合的图形都已被画在触摸屏显示器上。

图10是图9的媒体地图的示图，其上当前播放媒体项的标记已被添加到显示器。

图11是本发明的媒体地图的另一个实施例的示图，其上的标记表示在接收范围内的无线电台的类别。

图12是本发明的媒体地图的另一个实施例的示图，其上的标记表示在接收范围内的无线电台的类别。

图13是本发明的娱乐系统布置的一个实施例的框图。

图14是用于操作娱乐系统的本发明的方法的一个实施例的流程图。

图15是用于操作娱乐系统的本发明的方法的另一个实施例的流程图。

图16是用于操作娱乐系统的本发明的方法的另一个实施例的流程图。

在多附图中，对应的参考符号表示对应的部分。虽然本文给出的例子以多种形式说明了本发明的实施例，但是下文中披露的实施例并不能认为是穷尽的并且不应被解释为将本发明的范围限制到所公开的精确形式。

具体实施方式

本发明可以提供一种方法以使得娱乐系统的用户能够快速地选择媒体内容。实现这种快速选择，可以提供更结构化的并且从而更加可预知的媒体内容的表示。在一个实施例中，发明使用规则的网格方法。为了创建媒体地图，可以确定一组媒体特征并且以二维矩阵的形式显示。然后可以针对这些特征来对媒体内容进行分类。例如，通过使用诸如在“AggregatefeaturesandAdaBoostformusicclassification”(Bergstra，J.，Casagrande，N.，Erhan，D.，Eck，D.andKegl，B.，MachineLearing，Vol.65，No.2-3，pp.473-484，2006，其通过引用完全并入本文)中公开的方法，能够将音频内容分类为不同的类型。或者，代替从内容本身中提取特征，可以使用附加到媒体项目上的元信息(meta-information)。每个媒体项目的特征可以被转化以与规则的二维网格结构匹配。如本文所使用的，“媒体项目”可以包括用户可用的分离的可选选项，例如无线电台，CD，歌曲或音频书籍。网格可以包括热点，其可以是识别以高级的信心识别媒体的分类的区域。例如，热点可以表示不同的音乐类型，如图1所示，其中热点由标记“Speech”(语音)、“Pop”、“Oldies”(传统)、“Classical”(古典)、“Hip-Hop”(嘻哈)和“Rock”的深色区域来指示。

媒体项目离热点中心越近，则它与由所述热点表示的音乐类型越类似。此外，位于两个热点之间某处的媒体项目部分地属于由所述热点表示的两个分类，并且可以具有每个热点的特征。该图形表示可以通过将热点相互“混合”来表示这种转变。

在图1中，热点可以被排列成两行三列的矩阵，从而最好地适合于用户界面的显示区域的高度和宽度。六个热点中每一个在这个二乘三矩阵中的位置可以是可变的，并且可以取决于哪些热点共享对相同的媒体项目的要求权。例如，共享对相同媒体项目的要求权的热点可以在互相相邻的位置。在图1中所示的例子中，可能已确定没有媒体项目，或者相对少量的媒体项目会被同时分类为“Speech”和“Oldies”，或者同时为“Speech”和“Rock”。类似的，可能已确定很少或者没有媒体项目会同时分类为“Classical”和“Oldies”，或者同时为“Classical”和“Rock”。因此，至少在一个实施例中，共享对相同媒体项目的要求权的热点彼此相邻(即，包括水平相邻，垂直相邻，以及对角相邻)，从而避免共享的媒体项目被解释为属于位于两个共享热点之间的一个中间的媒体热点。

虽然图1中的每个热点被描述为具有相同的大小，但是所述热点可能是不同的大小。这些不同大小可以指示热点的受欢迎程度和/或与该热点相关的媒体项目的数量。或者，这些不同大小可以指示与该热点相关的媒体项目的总时长。

在一个实施例中，使用色彩编码来在视觉上相互区分不同分类。例如，所述热点可以用棋盘格图案中设置的两个主要颜色之一来描绘。作为一个具体的例子，在图1的说明中，“Speech”，“Hip-Hop”和“Oldies”可以是蓝色，“Classical”，“Pop”，“Rock”可以是黄色。当然，也可以使用多于两个颜色，也可以每个热点被分别表示成单独的颜色。

在上文和图1中描述的媒体地图显示了类型的热点之间的平滑的和逐渐的过渡，如图1中逐渐改变的灰色阴影所示。代替这种逐渐转变，所述映射还可以结合基于使用子标准的可选的方法。如果需要显示不重叠的子标准，例如不同的艺术家，唱片集，电台等，那么所述替代方法可能是优选的。

如在国际专利公开NO.WO/2007/044389中所描述的，不同的表示可以用于显示子标准，例如光盘或媒体内容的矩形显示。此外，描述了用于显示音乐集的内容的树图的使用。在这种方式下，矩形被递归地分割三次：整个库(父矩形)被分割为类型，每个类型分割为其子类型，最后每个子类型分割为它的艺术家。矩形的大小等于整个音乐集中的子类型的多少。所述子类型，即，子类别，不是关于相邻的主类别来分类的。

细分的分类的不规则的大小可能会增加人们感知所述媒体地图所需的时间。相反，本发明的系统可以使用一种不同的方法在时间受限的环境中(比如在车辆中)显示子分类。在一个实施例中，本发明的一种方法是基于图1所示的媒体地图的规则的细划分的。该方法可以基于将热点之间的“平滑”转变采样为一系列离散单元，如图2所示。每个得到的单元表示一个音乐的子分类。每个媒体项目被分配给一个单元。因此，媒体项目被分组到多个单元中，单元在地图上的位置指示了所述子分类和所有主分类之间的关系。在一个实施例中，所述子分类被显示为矩形或者六边形。例如，媒体地图的每个六边形单元可以表示一个无线电台，一个CD，或者一个具体的音乐子类型。

在上述实施例中，所述媒体地图被提供为二维表示。然而，在另一个实施例中，所述媒体地图被提供为三维表示。第三维可以被用于传达与子分类相关的附加信息，例如子分类中可用内容的播放次数，可用于娱乐系统的子分类中的内容的数量，或者其作品在该子分类中的艺术家的名字。

所述媒体地图可以是一系列由本发明的娱乐系统提供给用户的交互特征的基础，交互特征包括：通过选择直接播放；用于选择的项目列表；通过滑动方式的媒体预览；在媒体地图上显示用户偏好；探测媒体地图；用于定义喜爱的媒体组的手势交互；用于定义播放列表的手势交互；手势的组合；在媒体地图上显示附加信息；提供流媒体源的概览。通过所述“通过选择直接播放”特征，通过选择媒体地图上的一个点(例如，通过触摸触摸屏上的一个点或者通过使用另一种适当的输入设备)，用户可以选择一媒体项目来播放或显示。所选的媒体项目可能与映射上的点或单元所表示的子分类相匹配或相关联。本发明的系统可以检测适合所选子分类的媒体项目的所有可用的源，例如，本地的和远程的源。因此，媒体地图可以容纳来自不同的来源的组合内容。如果没有媒体项目可用于该点(例如，没有与所选子分类相关联的媒体项目可用)，那么可以选择与被选择的子分类最接近的子分类相关联的媒体项目。另一方面，如果有多于一个与所选择的在媒体地图上的点或单元相关联的媒体项目可用，那么本发明的系统可以使用“随机”播放或者结合了用户喜好的“推荐”播放(例如，来自某个艺术家的喜爱的音乐或者其他基于收听特征的标准)，来从所有匹配的媒体项目中选择一个项目来播放。

直接播放方案的缺点是用户无法直接控制所选择的媒体项目。为了避免这一缺点，本发明选择特征的项目列表提供了一个选择模式，其中响应于用户选择媒体地图上的点或单元，可以显示替代的媒体项目的列表。属于映射上的所选择的点或单元的媒体项目可以被显示在列表中(或列表的变形，如环形设置)。在用户选择了显示项目之一时，娱乐系统可以开始播放所选择的项目。或者，可以使用分级的列表选择。例如，当用户选择了第一列表中的项目时，可以显示另一个与所选的项目类似的项目列表。针对包括该第二列表上的项目的标准可以比针对包括第一列表上的项目的标准更细化。

所述“通过滑动的媒体预览”特征可能涉及用户在地图上滑动他的手指。例如，用户可以用他的手指选择地图上的一个点，然后移动他的手指到图上的另外一点，并且始终保持他的手指和屏幕接触。这种动作可以得到一个媒体预览，在该预览中，与手指的当前位置对应的媒体采样被播放给或者显示给用户。与直接播放方案类似，可以通过使用限制到与触摸的点匹配的项目的“随机”或者“推荐”播放，来选择与所触摸的点中之一相关联的匹配的媒体项目之一。如果用户从屏幕上移开手指，那么所选择的媒体项目可以被完整的呈现给用户，例如，完整的播放或者显示。

代替媒体项目本身，可以显示或播放象征性表示，音频片段或者缩略图。由于音频文件可能在例如歌曲的第一秒中不会具有重要的内容，所以本发明的系统可以搜索整个音频文件，以找到更好地表示整个文件的更重要的样本。这个找到代表性音频片段的过程可以使用与用于决定音频文件需要被放在媒体地图上的哪里的分类算法相同的分类算法。例如，音频文件可以被分割为大约两秒到五秒之间的短小的样本。对每个样本使用所述算法来分类，可以将最匹配整个音频文件的子分类的样本选择为代表性预览样本。

在广播或者流媒体内容的情况下，可以选择类似的方法。例如，可以缓存大约最近60秒的广播或者流媒体内容，并分割为多个2到5秒的片段。哪个片段的子分类与所缓存内容整体的子分类最匹配，就可以向用户播放该片段。可选地，本发明的系统可以将所选媒体的“直播”内容呈现给用户。

根据所述“在媒体地图上显示用户偏好”特征，媒体地图上的热点和/或单元可以在尺寸上放大和缩小。这使得能够将关于媒体集的附加信息编码在二个维度中。在一个实施例中，本发明的系统可以在地图上提供增大的区域，以用于表示和选择来自用户更为感兴趣的分类和/或子分类中的内容。基于对使用历史的跟踪，对频繁选择的分类和/或子分类的二维热点和/或单元表示可以随时间改变颜色和/或增大地图上的区域。同时，其他不常被选择的相邻的热点和/或单元可以改变颜色，移动或者缩小大小，甚至可以从地图上完全消失。此外，热点和/或单元可以根据对应于每个热点和/或单元的可用媒体项目的个数或数量来增大或缩小。通过在地图显示中结合这两个方面(即，用户选择频率和可用内容数量)，本发明的系统能够快速简洁地传送关于用户对什么感兴趣的信息以及大量的媒体项目中什么可用来满足这种兴趣的信息。

图3说明了根据其受用户欢迎程度以及对应的音频分类中的可用内容的数量从而具有不同大小的灰度热点。图4说明了另外一个实施例，其中，根据其受用户欢迎程度以及在对应的音频分类中的可用内容的数量，黑白热点具有不同的大小。此外，图4中热点的位置可以调整，以使得每个热点可以适合在显示屏的界限或边界中。

图5说明了另一个实施例，其中，在显示屏上提供了多个六边形单元以表示音频内容的子分类。在显示中，单元50比其他单元更大，从而使得单元50部分地叠加到或重叠到周围的单元52上。类似于图3和4中所示的实施例，单元50可以具有增大的尺寸，以便指示其受用户欢迎的程度相对较高和/或在对应的音频子分类中有相对大量的可用内容。与图3和4的实施例一样，由于单元50比任何其他单元更有可能被用户选择，所以单元50的增大的尺寸的优点是：使得用户能够更容易地将其手指放到单元50上，从而选择单元50。另一个优点是，如上文所述，单元50的增大的尺寸在视觉上使用户注意到他之前已经表明了对于单元50的偏爱和/或存在相对大量的与单元50相关联的可用内容。

本发明的所述“浏览媒体地图”特征可以使用户能够访问关于特定分类或子分类的信息。如果用户不采取明确的动作的情况下，这种信息可能不被显示。这一特征可以特别地应用于大媒体集上，对于其，用户可能需要更多的细节来决定哪个分类是感兴趣的。所述特征可以包括浏览模式，其能够放大所述地图，以提供关于地图的特定区域的更高级别的细节。可用现有的输入技术来实现放大，包括多点触摸手势来支持多个手指的输入。在放大后，可以呈现关于子分类的更详细的信息。例如，这些详细信息可以包括其作品属于该子分类的艺术家的名字，或者该子分类中可用的媒体项目的数量。同样，如果有足够的空间可用，那么可以在地图上显示子分类的文本表示或者名称。通过使用连续放大，用户可以看到与主分类相关的子分类的上下文。除了放大以外，全景特征允许用户用他的手指通过移动地图上的可视部分来在任何给定的放大水平上浏览地图。

在另一个实施例中，可以通过“聚焦加上下文”技术来提供对所选择的子分类的详细视图以及包围的主分类的印记。这种技术的一个例子是鱼眼变焦透镜的使用，它可以放大视野中心的聚焦区域，同时缩小聚焦区域之外的外围区域的大小。这种技术可以提供整个地图的单独视图，并且提供对所述聚焦区域的详细描绘。然而，可以提供聚焦区域之外的区域的更少的细节。

本发明所述“用于定义感兴趣的媒体组的手势交互”的特征可以提供一种简单的方式，以使用户能够指定感兴趣的媒体项目组。通过在地图上划一个闭合形状(例如，一个闭合的环或者任何其他闭合的路径)，用户可以快速向系统传达什么内容分类或子分类是他当前高度感兴趣的。所述闭合形状可以与多个热点或单元重叠，从而指示系统包括所有在所述闭合形状内的分类/子分类。在图6所示的例子中，可以围绕分类“Pop”、“Hip-Hop”和“Rock”来画一个闭合形状。使用传统的基于列表的内容选择将需要更多的用户输入来表达同样的请求。

所述娱乐系统可以使用与所选择的媒体项目的集合有关的信息(例如，所述闭合形状)以用于播放或其他目的。在一个实施例中，只有在所述闭合形状所覆盖的区域内的项目才被使用或被呈现给用户。如果在所选的媒体项目的集合中有多于一个媒体项目(这是典型的情况)，那么可以使用受限的“随机”播放或者“推荐”播放来确定下一个活动媒体项目(例如，下一个要被播放的媒体项目)，如上文针对直接播放特征所描述的。

除了用于选择感兴趣的区域的单个点击手势之外，在一个实施例中，系统使得用户能够提供更复杂的对感兴趣的区域的定义。例如，多个形状可以被画在屏幕上。系统可以考虑画形状的顺序，以定义选择项目来播放的顺序。在图7所示的例子中，假设用户首先围绕“Speech”画了一个闭合形状，然后围绕“Rock”画一个闭合形状。响应于这个绘制顺序，系统可以首先调谐到一个广播语音的无线电台，例如新闻或谈话节目。在预定的时长之后(时长可由用户调整)，系统可以接着调谐到另一个播放摇滚音乐的无线电台。代替保持调谐到所述第一个电台预定的时长，当在所述第一个电台上检测不到语音时，或者当检测到广告休息时，系统可以换台。在另一个实施例中，代替自动调谐到谈话电台然后自动调谐到“Rock”电台，系统可以向用户呈现多个谈话电台的选择，然后过一会可以向用户呈现多个“Rock”电台的选择。

根据所述“用于定义播放列表的手势交互”的特征，手势输入可以用于定义播放列表以及用于定义感兴趣的媒体项目组。通过在屏幕上画一个开放的笔画，用户可以定义把什么项目以什么顺序放入播放列表中。通过音乐地图的路径的顺序可以定义来自不同的分类的媒体项目的播放的顺序。根据图8所示的示例性开放笔画，播放列表可以首先包括语音内容的元素，然后按顺序包括：“Pop”音乐元素，“Oldies”音乐元素，“Rock”音乐元素，最后是“Hip-Hop”音乐。如果画了多于一个笔画，则可以创建连续的播放列表，其考虑了笔画被画的顺序。也就是说，在时间上对应于第一笔的媒体项目可以首先被播放，在时间上对应于第二笔的媒体项目可以被第二个播放。

在一个实施例中，用相等的和/或预定的时长来播放这些分类的媒体项目中的每一个。然而，在另一个实施例中，用于播放媒体项目的分类中的每一个的时长与通过热点的总路径长度相称。在图8所示的例子中，通过“Pop”和“Oldies”热点的路径看起来比通过“Speech”和“Rock”的路径要长。也就是说，通过每个“Pop”和“Oldies”热点的路径长度大致等于热点的宽度，而通过“Speech”和“Rock”热点中的每一个的路径长度比热点的宽度小得多。因此，相比播放“Speech”和“Rock”音乐的时间来说，更多的时间可以用于播放“Pop”音乐和“Oldies”音乐。

根据“手势的组合”特征，可以在触摸屏显示器上画开放的和闭合的形状的组合。因此，用户能够容易地表达对播放媒体的复杂请求，其既定义了播放列表又定义了媒体项目的集合。在图9所示的例子中，用户通过画一个开放端点的曲线，已经指示他想先听一些新闻(“Speech”)，然后听一些“Pop”音乐，然后听“Rock”音乐。然后通过在“Rock”周围画一个闭合的环，用户进一步指示他想在新闻和“Pop”音乐播放之后，连续播放不确定时间的“Rock”音乐。

根据“在媒体地图上显示附加信息”的特征，媒体地图除了用于输入目的外，媒体地图还可以用于传达给用户信息。在一个实施例中，可以在地图上突出显示当前选中的或当前播放的媒体项目。例如，当播放音乐时，系统可以通过在地图上放置一个表示当前类型的标记来在地图上突出显示音乐的类型。

如果用户画了手势，则系统可以在地图上一起显示所述手势和当前播放的媒体项目的分类。此外，可以显示当前的播放列表。在图10所示的例子中，正方形标记指示当前播放的媒体项目的分类。在图10包括正方形中的“x”，其作为当前播放列表的说明性的代理，或者关于当前播放媒体项目的附加文本信息。因此，用户可以保持被告知例如关于通过列表的进程。在一个实施例中，播放列表上的标记可以被用户沿手势定义的路径移动，如图10中的两个箭头所示。因此，用户能够重复播放或者向前跳到播放列表的另一部分。

根据“提供流媒体源的概览”的特征，地图可以用于告知用户可从不同媒体源获得的内容，尤其是广播和流媒体源。例如，地图可以显示什么类型的内容正在系统接收范围内的无线电台上播放。每个媒体源的分类可以被突出地显示在媒体地图上，并且可以做每个标记或者适当地命名。例如，如图11所示，通过4个矩形标记来指示4个FM无线电台当前广播的内容的分类。在每个标记中是相应的无线电台的广播频率，用MHz表示。通过选择一个标记，例如通过触摸标记，用户可以选择切换到相关的媒体源来播放。或者，与每个标记相关联地可以显示一个唯一的相应描述符，其将所述源与快速选择按钮相关联。在图12所示的例子中，数字1-4显示在地图上的标记中，以识别与每个电台相关联的无线电台预设按钮的号码。如果当前正在娱乐系统上播放四个无线电台之一，那它对应的标记可以如下所述来指示，例如突出地显示或者用一个与其他三个标记的颜色不同的颜色来加亮。

本发明尤其适用于车辆内的娱乐系统，其中，司机操作系统时不能花费太多注意力来选择媒体项目。使用包括mp3播放器在内的已知的车载娱乐系统，用户典型地进入选择菜单来查找他喜欢的音乐。如果用户具有很大的音乐集，那么找到当前想要的音乐会花费很多时间和精力。即使用户知道他想要听什么类型的音乐，他也会遇到向系统传送这些信息的麻烦。例如，假设用户想听一些介于“Pop”和“Rock”之间的音乐。然而，mp3菜单可能只允许他要么选择“Rock”要么选择“Pop”音乐。在思考这些决定的时候，用户会从驾驶中分心。因此，用户常常只使用“随机播放”并且在他不喜欢一个音乐时按下跳过键。相反，带有媒体地图的本发明的娱乐系统可以用图形表示来显示用户音乐集中的可用的音乐类型。在地图中，各个类型之间可能彼此混合。通过点击所述地图，用户可以选择一个特定种类的音乐并且可能表达他想要听混合类型的音乐的愿望。由于本发明的音乐预览特征，用户在选择音乐的时候甚至可以不需要看屏幕。取而代之的是，用户可以在屏幕上滑动他的手指，系统可以播放用户当前触摸的媒体地图的任何一部分所表示的音乐。响应于用户将他的手指滑动到屏幕的不同部分，可以播放用户的音乐集中的不同的音乐类型。本发明的方法使得用户可以容易地选择音乐并且不需要用于从驾驶任务中分散太多精力。

在另一个车载应用中，假设用户想要听些新闻然后切换到“Classical”和“Pop”音乐的混合。已知的娱乐系统可能需要用户通过不同的无线电台进行换台。而使用本发明的娱乐系统，用户可以切换到媒体地图，其显示了不同的音频内容，例如新闻和不同类型的音乐。举例来说，假设用户在地图上画了三笔。第一笔是从标记为“Speech”的区域画到标记为“Classical”的区域的一条线。第二比是环绕“Classical”的圆，第三笔是环绕“Pop”的圆。所述线指示系统创建一个从“Speech”转变到“Classical”内容的播放列表。进一步假设系统已从来自用户的先前的主动或被动反馈了解到无论何时用户选择“Speech”内容，他都偏爱新闻。本发明的系统可以分析新闻内容的所有音频源，并且找到一个当前正在广播新闻的无线电台。通过画两个圈，用户已指示系统播放“Classical”音乐和“Pop”音乐类型的内容。因此，使用这三个笔画，用户向系统提供了全部所需的信息并且之后可以专心驾驶，而不需要在不同的时间点人工地切换到不同的无线电台。

本发明可以包括多个新颖性特征，包括一个娱乐系统(其可以包括媒体播放器，车载电台等)，其可视化的在一个地图上显示可用的媒体内容。所述媒体内容可以包括音频内容，流媒体和/或广播媒体。视觉显示可以依赖于嵌入媒体内容(例如，元数据)或得自媒体内容的信息。

本发明的另一个新颖性特征是，除了显示诸如歌曲这样的单个媒体项目的特征以外，本发明还可以显示地图上的媒体项目的源或集合的特征，例如无线电台、音乐集和播放列表。所述源或媒体集可以被采样，它们的音频特征可以从采样中得出。或者，关于源或媒体集的特征的信息可以嵌入其中，例如元数据。

而本发明的另一个新颖性特征可以是：媒体地图使得用户能够直观地选择媒体内容(例如，音乐，新闻，视频，无线电台，电视台以及其他广播和流媒体内容)。不需要从分级列表中选择媒体项目。因此，用户不需要针对具体的条目来做出“艰难”的决定。代替地，用户可以选择媒体地图上的点，直到他找到他感兴趣的内容。因为不需要精确指定想要的媒体项目，所以选择内容可以变得非常快速和方便。媒体内容可以从所有可用的媒体源中选择，而不是只从一个来源选择，这有效地将多个来源整合成一个大的来源。因此，可以减轻用户判断哪个来源包括他正寻找的内容的负担。

本发明的另一个新颖性特征可以是：地图是基于规则的或者一致的结构，包括不同的媒体分类，例如类型，用热点来表示。所述分类可以在热点之间相互混合。热点之间的中间区域有效地表示部分适合于附近热点的一个或多个分类的媒体项目。这有利于难以仅选择单个分类(例如特定音乐类型)的用户。

可选的，除了热点以外，不同的区域(“单元”)可以以矩形或者非矩形的形状显示在屏幕上，它们可以具有相同大小。每个单元可以表示相应的子分类。如果子分类不重叠，那么该方法可能更好(例如，每个子分类表示不同的艺术家、曲集、无线电台等)。可以安排单元以使得相关的和相似的子分类彼此接近的进行分组。另外，相对于热点的位置的每个单元的位置可以取决于单元的子分类和由热点表示的分类之间的相似度。

本发明的另一个新颖特征是：响应于用户在地图上选择一点，可以显示与该点所表示的分类相匹配的媒体内容。如果多个媒体项目与该点所表示的分类相匹配，那么可以通过使用“随机”功能或者通过结合用户偏好(例如，来自某些艺术家的喜爱的音乐或者其他基于用户收听特征的标准)可以选择一个媒体项目。可选的，所有可用的匹配可以被呈现给用户，因此他可以自己选择一个项目。当搜索匹配项目的时候，可以浏览所有可用的来源或者仅仅浏览单个媒体源。如果没有项目匹配在地图上的所选择的点，那么可以播放类似的项目(例如，与地图上的邻近于所选的点的点相关联的项目)或将其提供给用户。

本发明的另一个新颖特征可以是：用户在屏幕上滑动他的手指会得到即时反馈。例如，可以播放与当前在地图上触摸的点对应的媒体采样，或者可以显示关于这种媒体采样的信息。如果需要，可以提取音频或视频内容中重要的和/或代表性的部分以产生用于预览的采样。响应于在屏幕上滑动手指而提供的即时反馈可以使用户容易地找到他喜爱的内容。在音频内容的情况下，在屏幕上滑动手指以及选择一个媒体项目甚至能够在不需要用户看屏幕的情况下完成。这在时间受限的环境中，或者在要求用户的视觉注意的环境中，例如当用户开车时，尤其有利。

本发明的另一个新颖特征是：响应于用户频繁的选择热点，分类的热点在显示器上的区域可以增大。因此，这种扩大的热点可以表示用户特别感兴趣的和经常选择的分类。例如，常听的音乐类型在地图上可以随时间逐渐变大。相反，响应于相对不被用户频繁选择，一个热点能够缩小尺寸。或者，除了热点的大小受热点的受欢迎程度影响以外，热点可以相应于与热点相关联的可用媒体项目的数量或数目来增大和缩小。

本发明的另一个新颖特征可以是：可以通过放大和全景效果来浏览媒体地图，以提供更多针对地图上的特定区域的详细内容。其他技术，例如使用鱼眼放大透镜，或者呈现具有这种鱼眼效果的现实，可以提供针对聚焦区域的更高级别的细节，同时仍然显示聚焦区域的周围内容。

本发明的另一个新颖特征可以是：与媒体地图之间的手势交互可以快速和方便地指定感兴趣的媒体项目的集合以及播放列表。通过在屏幕上画形状(一个或多个)，用户可以指定他感兴趣的媒体项目。闭合的形状可以定义媒体的集合，开放的形状可以定义播放列表。只有被所选择的区域覆盖，或位于其中的媒体项目可以被用于播放，等等。开放的和闭合的形状可以结合。如果画了多个形状，那么画这些形状的顺序可以影响系统选择的项目和/或项目播放的顺序。

本发明的另一个新颖特征是：可以在媒体地图上突出显示当前播放的媒体项目。还可以在媒体地图上显示如由手势和/或播放列表所定义的、当前选中的感兴趣的媒体项目的集合。还可以显示当前播放的媒体项目和当前选中的感兴趣的媒体项目的集合之间的关系。一个指示当前播放项目的标记可以由用户在屏幕上移动，比如通过触摸标记并将其拖拽到屏幕上的另外的位置。例如，所述标记可以沿着指定当前播放列表的路径被移动到另一个位置。这样，用户可以使系统跳过播放列表中的项目，重放播放列表中的项目，和/或前进或后退到播放列表的不同部分。

本发明的另一个新颖特征是：可以在地图上显示来自所有可用的流、广播、或者“直播”源的内容，比如来自无线电台和电视台的内容。这样，可以向用户提供关于正在广播什么，或者有什么来自其他来源的内容可用等的概览。用户能够通过选择一个显示的来源以切换到其他来源。

本发明的另一个新颖特征是：媒体地图也可以是三维版本的。增加的维度可以用于显示关于媒体项目的另外的信息。

图13是适合结合本发明使用的娱乐系统布置10的一个实施例的框图。设置10可以包括娱乐系统12，其可以被可通信地耦合到用户的外部音乐集14。音乐集14可以包括歌曲或其他音乐的可听见的演奏的数字再现。系统12可以至少一部分或者完全地设置在车辆中，例如汽车。然而，系统12也可以放置在非移动环境中，例如个人住所。系统12还可以主动地或者被动地接收关于用户的音乐喜好和/或不喜欢的音乐的用户反馈16。在该特别的所说明的实施例中，有关音乐集14的内容的信息以及用户反馈16又系统12的电子处理器18来接收。

处理器18可以访问和分析包括在音乐集14中的数字音乐，从而确定音乐集14中的音乐是什么类型的，或者所述音乐属于什么类型。可选的，除了音乐本身的再现以外，音乐集14可以包括标识文本信息或者其他关于音乐集14中的音乐的表演者和/或类型的表示。在一个实施例中，处理器18可以访问这种标识信息，从而判断用户的大致的音乐偏好，而不需要分析音乐集14中的音乐的内容。

用户界面20可以与图1所说明的用户界面类似，并且可以具有一个适用于显示图2-12中的任何一个媒体地图的触摸屏。处理器18可以在界面20上图形化地显示可从音乐集14、24和无线电广播22获得的媒体内容的表示。处理器18还可以根据接收到的用户反馈16来修改界面20上的表示。例如，处理器18可以使某些单元具有增大的尺寸，如图5所示，以响应用户的频繁选择。

可以根据多种方法来执行与娱乐系统分项音乐集。第一个这样的方法可以包括向娱乐系统插入具有音频或视频内容的CD/DVD。第二个方法可以包括将存储设备物理地连接到娱乐系统，比如USB存储棒、闪存卡、Mp3音频播放器或便携式音频/视频播放器。第三个方法可以包括将娱乐系统连接到内嵌的存储设备，例如硬盘驱动器或闪存，从而使用这种内嵌存储设备的内容。第四个方法可以包括使用短距离数据连接技术(例如蓝牙)来连接娱乐系统和包括用户喜爱内容的存储设备。第五个方法可以包括使用娱乐系统和因特网上的远程音乐库之间的有线或无线的数据连接。这个方法可以允许用户包括和分析因特网服务器上存储的大量音乐集，而不需要将音乐集存放到本地的物理存储设备中。

通过访问远程音频/视频集合，所述集合的内容可以被分析并且可以确定所述集合里存在的音乐的种类。所述娱乐系统可以稍后使用同样的音乐集来播放。

在图14中显示了用于操作娱乐系统的本发明的方法1400的一个实施例。在第一步1402，访问音频/视频内容的来源，所述来源能够提供多个媒体项目。例如，车辆音频系统可以可通信地(有线或无线的)耦合到乘客的iPod或用户随身携带到车厢的其他个人音乐播放器。所述音频系统可以在播放器上搜索媒体项目(例如，歌曲)和/或播放器能够提供的歌曲的标识。

在下一个步骤1404，分析所述媒体项目从而确定每个项目的相应分类。也就是说，可以用任何方法来分析媒体集中的歌曲，包括采样和量化分析，以确定每个歌曲可以被分类到的对应的分类或类型。可选的，或者另外的，可以确定表演音乐集里的每首歌曲的艺术家。例如，可以确定通常由所述艺术家产生的音乐的分类或类型，比如通过使用查找表。

接下来，在步骤1406，在娱乐系统的显示器上提供每个分类的可视化表现。例如，如图2所示，可用音频项目的每个子分类的可视化表示可以以相应的六边形的形式被呈现在娱乐系统的显示器上。

在步骤1408，检测到用户选择了分类中的一个。即，在触摸屏的情况下，可以检测到用户触摸了图2中所示的一个单元。在本发明的范围内，例如，还能够检测到用户说出了一个分类，例如“Pop”或“Rock”等，或者分类的组合，例如“Pop-Rock”，或者“Oldies-Rock”。

在最后一步1410，响应于所述检测，播放与所选分类相应的一个媒体项目，并且/或者为用户提供在多个与所选分类相应的媒体项目中进行选择的机会。例如，可以播放适合于用户所选择的子分类的可用歌曲。如果多首可用歌曲达到已选子分类的标准，那么能够呈现给用户一个合适歌曲的列表，并让用户自己选择播放列表里的哪一首。

在图15中显示了本发明的用于操作娱乐系统的另一个方法1500的实施例。在第一步1502，访问一个音频/视频内容的来源，所述来源能够提供多个媒体项目。例如，车辆音频系统可以包络能够从多个本地无线电台接收和播放广播的无线电。例如，车辆可以是汽车、飞机、公共汽车、火车或轮船的形式。

在下一步骤1504，确定每个项目的相应分类。例如，可以通过采样和分析电台信号，来为一些接收到的无线电台确定音乐类型的相应分类或者子分类。或者，可以将无线电台的分类信息嵌入到它的广播信号中，或者可以从电台广播的每首歌曲中嵌入的分类信息来导出。

接下来，在步骤1506，在娱乐系统的显示器上提供每个所述分类的相应的表示。继续上述的例子，如图11和12中所显示的，通过显示器上的标记的位置，4个标记每个可以表示相应无线电台的分类和/或子分类。热点“Speech”、“Pop”、“Oldies”、“Rock”、“Hip-Hop”和“Classical”也可以是分类的表示。例如，热点“Speech”，或者更具体地说，沿着“Speech”热点的底部边界的单元可以表示在88.5MHz广播的无线电台的分类。

在步骤1508，检测到用户按顺序选择了多个分类。例如，如图7所示，系统可以检测到用户首先通过在“Speech”周围画了一个闭合形状来选择了“Speech”，随后又通过在“Rock”周围画了第二个闭合形状来选择“Rock”。图8显示了另一个例子，其中，用户在显示器上滑动他的手指，从而按顺序地选择了“Speech”、“Pop”、“Oldies”、“Rock”和“Hip-Hop”，并且系统检测到这个顺序。

在最后一个步骤1510，响应于所述检测，播放具有已选分类的媒体项目中的一个，可以按照在选择顺序中的分类的顺序来播放媒体项目。例如，在图7的例子中，系统首先调谐到广播新闻或其他谈话的无线电台。接着，系统调谐到一个通常或者至少当时在播放“Rock”音乐的无线电台。在图8的例子中，系统可以依次调谐到通常或者至少当时在播放人类“Speech”、“Pop”音乐、“Oldies”音乐、“Rock”音乐“Hip-Hop”音乐的无线电台。

在图16中说明了本发明的用于操作娱乐系统的另一个方法1600的实施例。在第一步骤1602，在娱乐系统的显示器上提供多个分类的音频/视频内容的可视化表示。例如，如在多幅图中所示，热点“Speech”、“Pop”、“Oldies”、“Rock”、“Hip-Hop”和“Classical”可以是音频内容的分类的表示。

在下一个步骤1604，当用户选择了显示器上的两个表示之间的区域时，检测到对应于第一分类和第二分类的两个表示。例如，如图2所示，用户的指引手指可以在位于“Classical”音乐和“Hip-Hop”音乐这两个热点之间的单元上。

在最后一个步骤1606，响应于所述检测，播放具有第一分类和第二分类的音频/视频内容中的每一个的特征的媒体项目，并且/或者让用户在多个媒体项目中选择，每个媒体项目具有所述第一和第二分类的音频/视频内容中的每一个的特征。继续上述用户选择位于“Classical”音乐和“Hip-Hop”音乐之间的单元的例子，作为响应，系统可以播放具有“Classical”音乐和“Hip-Hop”音乐两者的特征的可用歌曲。例如，系统可以找到一首歌，它有“Hip-Hop”音乐的拍子或节奏特征，同样也有“Classical”音乐的弦乐器。如果系统可以找到多个这样的歌曲，那么系统可以向用户呈现一个这样歌曲的列表，这样用户自己可以选择播放哪一首。

在本发明的范围内，可以使用各种方法来识别、分类和/或量化描述和/或定义用户的音乐口味的音乐类型。符合无线电数据系统(RDS)标准(欧洲)或者符合无线电广播数据系统(RBDS)标准(美国)的无线电信号可以指定电台播放的音乐的类型，例如，古典、流行、爵士等。本发明的系统分析的音乐集可以包括音乐集里包含的音乐的分类的类似表述。也可以按照艺术家或者艺术家组来将音乐分类。例如，如果音乐集里包括某个艺术家的作品，那可以认为用户也可能喜欢这个艺术家的其他作品。此外，一个艺术家可以被识别为生产多个特定的音乐类型。例如，管弦交响乐队演奏的音乐可以被认为是古典的。这样，主要爱听古典音乐的用户可以被认为也会喜欢其他古典音乐家的音乐，例如其他管弦交响乐队演奏的音乐。系统也能够分析音乐本身来将音乐分类。例如，重现量化分析可以被应用到音乐上来识别音乐的类型。

在本文中，已将本发明描述为主要适用于识别听众的音频偏好以及针对这些偏好来调整提供的音乐。但是，本发明可以同样地应用于识别听众的视频偏好以及针对这些偏好来调整提供的视频。

在本文中，已将本发明描述为主要适用于识别听众的音乐偏好以及针对这些偏好来调整提供的音乐。但是，本发明可以同样地应用于识别其他类型的听众喜爱的音频类型(例如音频书)和音频艺术家(例如，诸如KenFollet这样的文学作者)。

在本文中，已将本发明描述为主要适用于车载娱乐系统。但是，本发明可以同样应用到固定的或者便携式无线电和便携式音乐播放器。

虽然本发明被描述为具有示例性的设计，但是可以本公开的精神和范围之内进一步修改本发明。因此，本申请旨在覆盖使用本发明的一般原理的任何本发明的变形、使用或者改变。

Claims (5)

1.一种操作娱乐系统的方法，所述方法包括计算机实现的以下步骤：

在所述娱乐系统的显示器上提供多个音频/视频内容的分类中的每一个的相应的单元的可视化表示；

检测到用户选择了所述显示器上的两个表示之间的区域，所述两个表示分别对应于第一分类和第二分类，并且所述两个表示彼此分离开；以及

响应于所述检测：

播放具有所述音频/视频内容的第一分类和第二分类中的每一个的特征的媒体项目；并且/或者

向所述用户提供在多个媒体项目中进行选择的机会，其中，所述媒体项目中的每一个具有所述音频/视频内容的第一分类和第二分类中的每一个的特征，

其特征在于，所述方法进一步包括以下步骤：

检测到相比于其他单元，所述用户更频繁地选择一个单元，并响应于所述检测，提供具有比所述其他单元的尺寸更大的尺寸的所述一个单元。

2.如权利要求1所述的方法，进一步包括以下步骤：

检测到：

相比于与所述其他单元相关联的可用媒体项目的数量，更多数量的可用媒体项目与所述一个单元相关联；以及

响应于所述检测，提供具有比所述其他单元的尺寸更大的尺寸的所述一个单元。

3.如权利要求1所述的方法，其中所述检测步骤包括：检测到所述用户触摸了所述显示器上的两个表示之间的单元。

4.如权利要求1所述的方法，进一步包括以下步骤：

检测到另一个媒体项目具有音频/视频内容的第三和第四分类中的每一个的特征；

在所述显示器上重新排列表示，以使得所述音频/视频内容的第三和第四分类的表示在所述显示器上彼此相邻地设置；以及

在所述显示器上的所述音频/视频内容的第三和第四分类的表示之间提供所述另一个媒体项目的表示。

5.如权利要求1所述的方法，进一步包括以下步骤：在所述显示器上提供可用媒体项目的表示，其中，所述可用媒体项目的表示中的每一个被提供在指示相关联的可用媒体项目的特征的相应位置。