CN1745424A - 存储剧情的信息存储介质以及记录该剧情的设备和方法 - Google Patents

Abstract

本发明涉及一种存储以标记语言写成的电影剧情以制作电影剧情数据库并提供用于搜索该电影剧情数据库的用户接口的信息存储介质，一种用于从该信息存储介质中再现数据的设备，一种搜索电影场景的方法，以及一种在信息存储介质中记录包括剧情的音频/视频(AV)数据的设备和方法。电影剧情包括指示剧情的成分的元素和指示关于该元素的详细信息的属性。每一元素随着剧情的搜索时被使用。因此，剧情和/或剧本以用于电影脚本的标记语言被写成，所以更多的各种信息被提供给用户。

Description

存储剧情的信息存储介质以及记录该剧情的设备和方法

                         技术领域

本发明涉及信息存储和再现，更具体地说，涉及一种存储以标记语言写成的电影剧情以制作电影剧情数据库并提供用于搜索该电影剧情数据库的用户接口的信息存储介质、一种用于从信息存储介质中再现数据的设备、一种搜索电影剧情的方法、以及一种在信息存储介质中记录包括该剧情的音频/视频(AV)数据的设备和方法。

                         背景技术

通常通过将电影脚本和字幕转换为图形数据将电影脚本和数据显示在屏幕上。也就是说，使用标记语言可显示字幕。然而，当这种传统的方法被用于处理与用户交互的交互内容时，必须处理大量数据，难以搜索脚本的内容。

图1是视频对象集(VOBS)100的结构的框图，该视频对象集是被记录在数字视频显示器(DVD)上的编码的运动图片数据。VOBS被划分为从110a到110n的多个视频对象(VOB)。从110a到110n的每一VOB被划分为从120a到120n的多个微单元(cell)。从120a到120n的每一微单元包括从130a到130n的多个视频对象单元(VOBU)。从130a到130n的每一VOBU包括多个包(PCK)，该多个包中的第一PCK是导航PCK(NV_PCK)140。PCK除了NV_PCK140之外，还包括至少一个视频包(V_PCK)144、一个音频包(A_PCK)142、和一个子画面包(SP_PCK)146。SP_PCK146是用于存储二维图形数据和字幕数据的区域。图形数据指的是子画面。

在DVD中，使用与对二维图形数据编码的方法相同的方法来对重叠图像的将被显示的字幕数据进行编码。因此，不存在用于不同语言从而支持各个国家的语言的独立编码方法。相反，单一编码方法被用于对字幕数据转换成的图形数据进行编码。编码的图形数据被记录在SP_PCK146中。子画面包括子画面单元(SPU)，并与图形数据的表相应。

用于最多的32种语言的字幕数据的子画面可以与运动画面数据一起被复用并记录在DVD上。如图1所示，DVD-视频的字幕数据与运动画面数据被复用，从而导致很多问题。一个问题是在运动画面数据的编码之前，必须考虑由子画面数据占据的比特的数量。换句话说，由于字幕数据在被编码之前被转换为图形数据，所以如果需要不同语言的字幕，则生成用于不同语言的不同数量的数据，并且生成的数据量很大。因此，难以将字幕数据与运动画面数据复用。

即使当字幕被多种语言支持时，运动画面编码通常被执行一次，并且用于每一语言的子画面数据优选地与编码的流复用以制成适合于每一区域的存储介质。对于一些语言，子画面数据量很大，所以当与运动画面数据复用时生成的比特总量可能超过可记录在DVD中的数据的最大限制。此外，由于子画面数据被复用以插入到运动画面数据中，所以每一VOBU的开始位置根据区域而改变。在DVD中，VOBU的开始位置被单独地管理，并且每当新的复用被执行时，关于VOBU的开始位置的信息就必须被更新。

此外，由于子画面的内容不能区分彼此，所以在诸如当两种语言同时将被输出时，当仅有字幕而没有运动画面将被输出以学习与字幕相应的语言时，或当包括特定的内容或与字幕一同再现的运动画面的其它信息的运动画面将被再现时的一些情形中，子画面不能被合适地使用。

字幕数据还可被转换为标记文档，而非图形数据。同步可访问媒体交互(SAMI)是用于表达运动脚本或字幕的语言格式。SAMI最初被开发以获得用于听力障碍的人的闭路字幕广播。然而，SAMI当前被使用作为电影字幕文件。字幕文件表示标记文档文件以将在如具有‘divx’格式等的电影的运动画面文件中的原始语言翻译为使用该运动画面文件的国家的语言，并以与运动画面帧的同步来输出该翻译的语言。

用于字幕的标记文档文件通常以原始运动画面文件的名称和SMI扩展名被存储和再现。因此，再现设备必须具有SAMI编码解码器以再现该标记文档文件。

图2示出SAMI文件的例子。参照图2，当脚本被以SAMI文件写成时，可容易地制作并方便地管理该脚本。根据单侧的电影再现流，仅基于文本或简单的图形数据的电影字幕或简单情况描述可被显示。换句话说，不能提供大量信息，也不能进行与用户的交互。

                         发明内容

本发明提供一种用于改善用户交互的电影脚本的标记语言，提供一种传统的字幕或标题的合适显示，使场景搜索成为可能，并提供其它有用的信息。本发明提供一种存储以标记语言写成的剧情的信息存储介质、一种用于从信息存储介质再现数据的设备、一种搜索剧情的方法、以及一种在信息存储介质中记录包括剧情的音频/视频数据的设备和/或方法。

如上所述，剧情和/或剧本以用于电影脚本的标记语言写成，所以更多的各种信息被提供给用户。此外，与用户的交互被改善，从而提供各种搜索方法。

此外，当运动图像数据将被记录在信息存储介质中时，包括由用户制作的任意元数据的剧情可与运动图像数据一同存储在信息存储介质中。

                         附图说明

图1是视频对象集的结构的框图，视频对象集是在数字视频显示器上记录的编码的运动画面数据；

图2示出同步可访问媒体交互文件的例子；

图3是示出根据本发明实施例的在标记语言中使用的元素和属性的表；

图4是示出当电影的制作时使用的剧情的例子；

图5示出图4的剧情被写入到其的本发明的电影脚本标记语言文档；

图6是用于再现写入到本发明的电影脚本标记语言文档中的脚本的再现设备的框图；

图7是在图6中示出的控制器的框图；

图8示出参照电影脚本标记语言文档由再现设备增强的搜索屏幕的例子；

图9示出场景搜索屏幕；

图10示出位置搜索屏幕；

图11示出用于电影脚本搜索的屏幕；

图12是示出根据本发明的实施例的剧情搜索方法的流程图；

图13是根据本发明实施例的音频/视频(AV)数据记录设备的框图；

图14示出元素scene在其上被显示的屏幕；

图15示出用于元数据生成的屏幕；以及

图16示出当位置分类被选择时显示的元数据输入屏幕。

                       具体实施方式

根据本发明的一方面，提供一种存储剧情的信息存储介质，该剧情包括指示剧情的成分的元素和指示关于该元素的详细信息的属性。每一元素在剧情的搜索时被使用。

剧情可以是使用元素作为标签和属性作为与关于该元素的详细信息相应的属性值写成的标记文档。

根据本发明的另一方面，提供一种存储音频/视频(AV)数据的信息存储介质，该信息存储介质包括运动画面数据和运动画面的剧情。该剧情包括指示剧情的成分的元素和指示关于该元素的详细信息的属性。每一元素在搜索剧情时被使用。

根据本发明的另一方面，提供一种用于从信息存储介质再现数据的设备，该设备包括：读取器，用于从信息存储介质读出运动画面数据和剧情数据；解码器，用于对运动画面数据进行解码并输出解码的运动画面数据；过滤器，用于响应于用户命令从剧情数据中仅过滤出期望的信息；渲染器，用于将过滤出的信息渲染为图形数据；混和器，用于将解码的运动画面数据和图形数据进行混和并输出混和的结果；以及控制器，用于控制过滤器、解码器、渲染器、和读取器。

根据本发明的另一方面，提供一种搜索剧情的方法，该方法包括：使用元素提取剧情的成分；显示通过将样式表应用到提取的元素而产生的搜索屏幕；从用户接收期望的搜索条件；以及通过使用与接收的搜索条件匹配的元素作为关键字来从剧情中搜索内容，并将搜索的内容提供给用户。

根据本发明的另一方面，提供一种用于将剧情与运动画面一同记录在信息存储介质中的设备，该设备包括：特征点提取器，用于从运动画面提取特征点；元素产生器，用于基于提取的特征点产生指示剧情的成分的元素，并将作为关于产生的元素的详细信息的属性值分配给产生的元素；以及元数据产生器，用于从关于从用户接收的剧情的子成分的属性信息中产生与剧情的子成分相应的元素的子元素。

根据本发明的另一方面，提供一种将剧情与运动画面一同记录在信息存储介质中的的方法，该方法包括：从运动画面提取特征点；基于提取的特征点产生指示剧情的成分的元素，并将作为关于产生的元素的详细信息的属性值分配给产生的元素；以及从关于从用户接收的剧情的子成分的属性信息中产生与剧情的子成分相应的元素的子元素。

根据本发明的一方面，提供一种存储用于执行上述方法的计算机程序的计算机可读记录介质。

剧情是在电影制作过程中基于电影格式以语句写成并投射到屏幕上的脚本。在显示电影之前，为了使用文字来详细说明的电影的视听叙述，剧情写作十分重要。由于电影包括许多场景，在写作剧情中，场景的划分和组合是重要的。在准备男演员和女演员的对白中，场景的描述也是重要的。

个人计算机能将在DVD上显示的高质量的电影和剧情与在PC电影的显示时以电影脚本的名称提供的剧本(缩写为conti)一同显示。剧本表示用于电影拍摄的剧情，并存储关于电影拍摄的所有想法和计划。

包括在PC电影的显示时提供的剧情和/或剧本的电影脚本通常包括电影的片名；场景标识符、场景号、和场景标题；场景被拍摄的位置；关于场景的描述；电影男演员和女演员的对白；在每一场景中由男演员和女演员扮演的角色的名字以及男演员和女演员的名字；关于男演员和女演员的行为的简要描述；关于效果音乐和背景音乐的信息；以及关于每一场景的代表图像(即剧本)。

在使用这种电影脚本显示字幕的方法中，使用简单图像和简单文本，至少上述内容被提供给用户，从而与将字幕转换为图形数据相比，更多的信息被提供给用户。然而，在前者的方法中，用于与用户交互的信息不能被提供给用户。用于有效地提供电影脚本的标记语言使用户交互成为可能，并提供下面的附加信息：关于在每一场景中使用的道具的信息、关于每一场景拍摄的位置的附加信息、以及关于每一场景的电影版本信息(即影院、导演剪接等)。

因此，在标记文档中，上述多条信息根据至少其元素和属性被分类。分类的信息条可被全部显示在屏幕上，或仅有男演员或女演员的对白可被以字幕显示在屏幕上。因此，包括男演员或女演员的对白的元素优选地包括用于将男演员或女演员的对白与运动画面实时地同步的时间信息。

除了将被与如男演员或女演员的对白的运动画面实时地同步的元素之外的元素不需要用于同步的时间信息，但其可能需要用于包括在元素中的场景的时间信息。附加的信息可以被写为相应的元素的内容。包括详细描述等的特定页面在其中可被参考的链接信息也可被包括在相应的元素中。使用关于上述信息的样式的信息，上述信息可以以不同的样式显示在屏幕上。

在使用标记文档的电影脚本的一方面中，由于包括男演员或女演员的对白的元素也包括用于与电影画面同步的时间信息，所以男演员或女演员的全部对白可以以诸如滚动等预定的样式显示在屏幕上。当用户选择特定的对白将被显示的位置时，通过参照包括在上述元素中的时间信息，再现设备再现将与由用户选择的对白同步的电影画面。

所有的场景的标号或标题、其描述等可被显示在屏幕上，然后特定的场景可被用户选择并显示在屏幕上。

拍摄位置的名称被顺序地显示，特定的拍摄位置可从其中被选择，从而与选择的拍摄位置相应的场景可被显示，或关于例如著名观光景点的选择的拍摄位置可被显示在屏幕上。

关于由男演员或女演员使用的道具的信息被显示，特定的道具可从其中被选择，从而与选择的道具相应的场景可被显示，或关于例如选择的道具的购买或描述可提供给用户。

特定的背景音乐播放的场景、关于特定的背景音乐的附加信息等可提供给用户。如上所述，在使用标记语言通过与用户的交互的能够提供有用的信息的再现设备等中，可使用每一信息的元素和属性。

如上所述，不使用单个元素或属性来获得上述的特定的场景或附加信息，多个元素或属性可被逻辑地组合并显示以提供更精确的特定的场景或更精确的附加信息。

换句话说，标记文档根据元素对在剧情和/或剧本写作时包括的可能的因素进行分类，与每一元素相应的多条信息或内容被包括在元素的属性中或作为元素的内容。为了提供由用户选择的特定的场景或附加信息，包括用于与运动画面同步的时间信息或与特定的场景关联的信息的每一元素还包括关于该特定的场景的时间信息和关于附加信息的链接信息。

用于上述电影脚本的标记文档可仅作为数据库，使用诸如层叠样式表(CSS)等的用于标记文档的样式信息，关于显示的信息可被显示在屏幕上。此外，用于将用于电影脚本的标记文档显示在显示装置上的样式信息可包括定义显示每一元素的位置、字体特性等的电影脚本观看信息。

图3是示出根据本发明的一方面的在标记文档中使用的元素和属性的表。参照图3，作为标记语言的电影脚本标记语言(MSML)使用元素和属性。如下参照图3描述元素和属性的语义。

元素msml是MSML文档的根元素。换句话说，每一MSML文档以元素msml作为开始。

元素head包括诸如当前文档的标题的信息。包括在元素head的内容不是总显示在显示装置上，而是可取决于浏览器的特性显示在显示装置上。参照图3，元素head包括元素title和元素style。元素title必须存在于元素head中，元素style取决于制作者的目的存在于此。

被包括在元素head中的元素title被用于包括制作者在当前文档中处理的电影脚本的标题。单个元素title在MSML文档中被使用。

元素style帮助制作者将包括电影脚本观看信息的样式表规则包括在元素head中。多个元素style可被包括在MSML文档的head中。元素style是属性信息，并包括作为type和href的至少两个属性。

属性type被用于指定样式表以其被与元素style的内容一起写作的语言。样式表语言被指定以具有诸如“文本/css”的内容类型，并且制作者必须在MSML文档中写入该属性的值。

属性href被用于参照以样式表语言写作的外部文档。当参照的外部样式表文档具有由使用元素style写入的样式表文档交叠的内容时，外部样式表文档被使用。属性href取决于制作者的决定而被使用，并且统一资源标识符被用作该属性的值。

元素body包括可显示在浏览器上的MSML文档的内容。参照图3，元素body包括至少一个元素scene。

元素scene是在剧情中的基本的元素，并与场景相应。MSML文档包括多个元素scene。每一元素scene可包括多个子元素，如元素location、元素conti、元素cast、元素parameter、元素music、元素description、以及元素script。元素scene具有至少6个属性，如下所述。

属性id表示文档的标识符。元素scene必须包括该属性，其中，每一元素scene具有唯一的属性值。

属性number表示分配给在剧情中的场景的标号，并且不是必须包括在元素scene中。

属性title表示分配给场景的标题。属性title不是必须包括在元素scene中。

属性version指示场景是否将在影院中放映或是导演的剪接。该属性具有‘theater’或‘director’s cut’的属性值。如果属性version不包括在元素scene中，则场景的版本被识别为‘theater’。

属性start_time表示与开始放映的场景相应的运动画面的时间。属性start_time具有属性值，该属性值是指示运动画面放映的时间的放映时戳(PTS)，或以1/1000秒为单位的时间值。在图3中，属性start_time具有PTS作为其属性值。

属性end_time表示与场景被改变到与另一场景相应的运动画面相应的运动画面的时间。与属性start_time相似，属性end_time具有PTS或以1/1000秒为单位的时间值的属性值。场景的属性end_time的值与下一场景的属性start_time的值可以是连续的。

元素location被用于将关于场景被拍摄的位置的信息包括在当前MSML文档中。因为一个位置被用于一个场景，所以元素scene包括单个元素location。该元素包括至少两个属性，例如reference_scene和href。

属性reference_scene指示由元素location描述的拍摄的地点与哪一个场景相应。属性reference_scene必须存在于location元素中，并使用在元素scene的属性id中使用的值作为属性值。例如，当特定的再现设备必须在屏幕上显示仅与使用本发明的增强搜索从MSML文档中发现的元素location相应的内容，然后再现与由用户选择的拍摄地点相应的运动画面时，属性reference_scene可被使用。

再现设备可识别与元素location的参照的属性reference_scene的属性值相应的元素scene，并在由元素scene的属性start_time的属性值指示的时间点再现与选择的拍摄地点相应的运动画面。然而，当仅使用元素location搜索特定的场景时，发现的拍摄的位置可具有多个场景，因此元素location被与其它元素逻辑地组合以搜索确切的场景。

属性href被用于参照包括关于特定场景的拍摄地点的附加信息的外部文档。属性href使用统一资源标识符(URI)作为其属性值。如果特定的再现设备可将包括关于观光景点、餐馆、购物地点等拍摄地点附近的信息的外部文档再现为关于拍摄地点的附加信息，则包括该附加信息的外部文档响应于用户的选择可被显示在屏幕上。由剧情的制作者确定属性href的使用。

元素conti指的是用于在剧情写作之后为拍摄草拟的剧本。在不包括剧本内容的MSML文档中，元素conti可不被使用，并至少具有以下属性。

元素conti的属性reference_scene指示与由描述指示的场景和由元素conti参照的关于剧本的图像相应的拍摄的地点。属性reference_scene存在于元素conti中。属性reference_scene的属性值是在元素scene的属性id中使用的属性值。属性reference_scene的使用的例子与元素location的属性reference_scene的使用相同。

属性href指示沿着其关于特定场景的图像剧本被参照的路径。属性href使用URI作为其属性值，而且必须存在于元素conti中。

元素cast被用于将关于出现在特定场景中的演员的阵容的内容包括在当前MSML文档中。元素cast包括元素actor和元素player。如果没有演员出现在屏幕上，则在当前MSML文档中可不包括元素cast。元素cast具有reference_scene的属性。

元素cast的属性reference_scene指示由元素cast包括的男演员和演员在那个场景出现。属性reference_scene存在于元素cast中，并具有与元素scene的属性id中使用的属性值相同的属性值。属性reference_scene的使用的例子与元素location的属性reference_scene的使用的例子相同。然而，当仅使用元素cast搜索特定的场景时，如果将被发现的男演员(女演员)或演出者是中心的角色或主要的人物，则多个场景可被发现，所以元素cast优选地与其它元素逻辑地组合以搜索确切的场景。

元素actor被用于包括在将由元素player指示的特定场景中作为演出者表演的男演员(女演员)的名字。该元素包括一个属性，即属性href。

属性href被用于描述详细描述由元素actor包括的男演员(女演员)的外部文档。属性href使用URL作为其属性值，属性href的使用或不使用由剧情的制作者确定。

元素player被用于将在特定场景由被元素actor包括的男演员(女演员)出演的演出者的名字包括在当前MSML文档中。该元素包括一个属性，即属性name。

属性name指示分配给当前元素player的名字。该名字被参照出演者的名字的元素script使用。

元素parameter被用于将关于在当前场景中使用的道具或男演员(女演员)的服装的信息包括在当前MSML文档中。该元素至少包括以下三个属性值。

属性refrence_scene指示由元素parameter包括的道具或服装在哪个场景出现。属性reference_scene存在于元素parameter中，并具有与在元素scene的属性id中使用的属性值相同的属性值。属性reference_scene的使用的例子与元素location的属性reference_scene的使用相同。然而，当仅使用元素parameter搜索特定的场景时，将被发现的道具或服装可出现在多个场景中，所以元素parameter被与其它元素逻辑地组合以搜索确切的场景。

属性name被用于将由元素parameter指示的道具或服装分类为一些种类。属性name具有多个种类作为其属性值。种类的例子包括武器、服装、汽车等。

属性href被用于描述包括关于感兴趣的道具或服装的详细描述的外部文档。属性href使用URI作为其属性值。

元素music被用于提供关于在感兴趣的场景中播放的效果声音、背景声音等的信息。该属性具有至少以下3个属性。

属性href描述包括感兴趣的音乐的详细描述的外部文档。属性href使用URI作为其属性值。

属性start_time指示在运动画面中感兴趣的音乐开始播放的时间。属性start_time具有可以是指示运动画面被播出的时间的放映时戳(PTS)或以1/1000秒为单位的时间值的属性值。如图3所示，属性start_time具有PTS作为其属性值。

属性end_time表示在运动画面中感兴趣的音乐结束的时间。与属性start_time相似，属性end_time具有可以是PTS或以1/1000秒为单位的时间值的属性值。

因为信号场景可具有多个音乐，所以如属性reference_scene的属性不被包括在元素music中。换句话说，如果当用户参照元素music来选择和观看部分的特定的音乐播放的场景时使用属性reference_scene，则包括该选择的音乐的整个场景总是从其开始部分被重放。因此，不能保证用户想观看的场景的确切部分的再现。因此，元素music具有属性start_time和end_time，而不是属性reference_scene。当多个位置、多个剧本等在单个场景中被使用时，这种特性被同等地应用于每一上述的元素。

元素description被用于将包括感兴趣的场景的叙述的场地导演、男演员(女演员)的行为的描述等包括在当前MSML文档中。元素description具有至少以下两个属性。

属性reference_scene指示哪个场景与由元素description叙述的场景、关于人物的行为的描述等相应。属性reference_scene必须存在于元素description中，并具有与在元素scene的属性id中使用的属性值相同的属性值。

属性version指示感兴趣的场地导演是否与将在影院中被显示的场景或导演的剪接相关联。属性version具有theater或directors_cut的属性值。如果在元素description中不包括属性version，则感兴趣的场地导演基本上被识别为与将在影院中被显示的场景相关联。

元素script被用于将涉及感兴趣的场景的男演员(女演员)的真实对白包括在当前的MSML文档中。元素script具有至少以下5个属性。

属性reference_scene指示由元素script包括的男演员(女演员)的对白出现在哪个场景中。属性reference_scene必须存在于元素script中，并具有与在元素scene的属性id使用的属性值相同的属性值。

属性reference_player指示由元素script包括在当前MSML文档中的对白属于哪个演员。通过具有元素player的属性name的属性值中的一个，属性reference_player可将演员与适合于该演员的对白相关联。

属性version指示感兴趣的对白是否是将在影院中被再现或是导演的剪接。属性version具有theater或directors_cut的属性值。如果在元素script中不包括属性version，则感兴趣的对白被基本地识别为将在影院中被再现的对白。

当由元素script包括的对白被用作电影的字幕时，属性start_time被使用。更具体地说，需要关于由元素script包括的对白开始再现的时间点的信息，从而对白可以以与电影画面同步而在适当的时间点被显示在屏幕上，属性start_time提供关于对白再现开始的时间点的信息。属性start_time具有指示电影画面放映的时间点的放映时戳(PTS)或以1/1000秒为单位的时间值的属性值。在图3中，属性start_time具有PTS作为其属性值。

属性end_time指示由元素script包括的对白何时以与电影画面的同步从屏幕再现的时间点。与属性start_time相似，属性end_time具有PTS或以1/1000秒为单位的时间值的属性值。

图4是当实际的电影的制作时使用的剧情的例子。参照图4，剧情包括场景的标题和背景，男演员(女演员)的行为和对白等。

图5示出图4的剧情被写成的本发明的MSML文档。参照图5，MSML文档的样式由元素style表示。当MSML文档的样式被表示在如图5所示的MSML文档中时，文档制作者或再现设备可使用不同的方法来应用该样式。因此，虽然在本方面未描述，但样式语法还包括上述的电影脚本查看信息。

图6是用于从信息存储介质再现写为本发明的MSML文档的脚本的设备的框图。再现设备包括读取器610、解码器620、控制器630、过滤器640、渲染器650、混和器660、以及缓冲器670。

读取器610读出存储在信息存储介质中的AV数据、用于存储在信息存储介质或网页中的电影脚本的标记文档、以及包括关于该标记文档的样式的信息的样式表文本数据。解码器620对与读出的AV数据相应的AV数据流进行解码。控制器630响应于命令控制过滤器640、解码器620、渲染器650、和读取器610。过滤器640响应于由控制器630输出的控制命令从MSML文档过滤出特定的部分。渲染器650使用样式表文本数据将过滤的MSML文档渲染为可显示在屏幕上的形式。混和器660将由解码器620输出的运动画面与由渲染器650输出的电影脚本数据进行混和。

缓冲器670对发送到读取器610、解码器620、和渲染器650或从读取器610、解码器620、和渲染器650接收的数据进行缓冲。当数据读取速度和数据发送和处理速度足够高时，缓冲器670可省略。

更具体地说，渲染表示用于将用于电影脚本的标记文档转换为可在显示装置上被显示的图形数据所需的所有操作。换句话说，与在标记文档的文本数据中用于每一角色的与角色代码相匹配的字体从从信息存储介质和/或网页中被读取的下载的字体数据或预先存储在再现设备中的常驻字体中被搜索，然后转换为图形数据。重复该过程以形成组织字幕图像或电影脚本的图形数据。颜色的指定或转换、字符大小的指定或转换、字符大小、取决于水平写入或垂直写入的图形数据的适合的制作等也被包括在用于文本数据向图形数据的转换的所需的操作中。

图7是控制器630的框图。参照图7，控制器630至少包括用户命令接收器710、用户命令处理器720、搜索引擎730、过滤器控制器740、以及读取器控制器750。

例如用户命令接收器710从用户接收用户命令。用户命令处理器720处理该用户命令。搜索引擎730搜索从从过滤器640接收到的内容中搜索用户命令所需的内容。过滤器控制器740控制过滤器640，从而仅有由搜索引擎730发现的内容被过滤出来。读取器控制器750控制读取器610，从而读出与由用户选择的运动画面相应的场景。

用户命令接收器710接收依照用户输入装置进行的用户输入，并将该用户输入发送到用户命令处理器720。用户命令处理器720确定该用户命令的类型。当用户输入是控制AV数据流的命令时，用户命令处理器720将该用户输入发送到解码器620。当用户输入是控制MSML文档的命令时，户命令处理器720将该用户输入发送到渲染器650。当用户输入是用于增强搜索的数据或搜索并再现特定的运动画面场景的命令时，用户命令处理器720将该用户输入发送到搜索引擎730，其指的是由过滤器640过滤出的内容。

搜索引擎730从从过滤器640接收的内容中搜索用户输入(命令)所需的内容(数据)，并将发现的内容发送到过滤器控制器740。搜索引擎730还控制读取器控制器750，从而可读出必须的数据。过滤器控制器740将电影脚本过滤信息发送到过滤器640，从而可显示由搜索引擎730发现的数据。

换句话说，搜索引擎730被包括在控制器630中以向用户提供一类增强的搜索服务并控制过滤器640，从而在MSML文档中的元素根据搜索策略被过滤出。控制器630控制读取器610和渲染器650，从而通过参照用过滤器640过滤出的元素的属性start_time和属性reference_scene来将期望的场景显示在显示装置上。通过参照被过滤出的元素的属性和内容，渲染器650使用由制作者提供的可显示的样式表或存储在再现设备中样式表信息提供新的搜索屏幕。

下面描述在再现设备中执行的使用MSML文档的增强的搜索的例子。传统地，为了获得如图8到图11示出的搜索屏幕，用于搜索的数据必须由剧情制作者制作成为这样的菜单形式，随后存储在信息存储介质上。然而，通过参照MSML文档，无需制作者直接地制作该菜单，再现设备就可获得如图8到图11所示的这样的搜索屏幕。

图8示出由上述再现设备通过参照MSML文档获得的增强的搜索屏幕的例子。由于MSML文档是在其中的部分使用MSML在按元素和属性进行分类的剧情或剧本中被使用的数据库，所以再现设备显示图8的搜索屏幕，并向用户提供可用的用于场景选择的诸如场景、位置、剧本、男演员、参数、音乐、以及脚本元素的元素作为搜索基础。按钮‘通过电影脚本’被包括在图8的搜索屏幕上，所以整个MSML文档可被使用作为搜索范围。使用整个MSML文档作为搜索范围的搜索中使用的样式表可由文档制作者制作，并在信息存储介质的制作期间存储在信息存储介质上。可选地，再现设备可存储关于每一元素的样式表信息。

按钮‘通过场景’被包括在图8的搜索屏幕上以搜索用于场景搜索的屏幕，使用下述的一系列处理，再现设备产生如图9所示的这样的屏幕。

图9示出场景搜索屏幕。再现设备的控制器接收‘通过场景’的用户输入，并从由过滤器过滤的MSML文档中仅搜索与剧情元素相应的信息，并产生场景搜索屏幕，通过参照scene元素的属性，以由MSML文档指示的样式显示场景号以及简要描述。当用户从图9的场景搜索屏幕选择特定的场景号时，参照scene元素的属性start_time，与选择的屏幕号相应的场景可被再现。

图10示出位置搜索屏幕。按钮‘通过位置’被包括在图8的屏幕上以再现与搜索的拍摄的位置相应的期望的场景，图10的位置搜索屏幕被显示。参照location元素的属性和内容，通过经历在图9中的上述处理，还产生图10的屏幕。当从元素location的属性href中确定关于期望的位置的附加信息被包括在外部文档中时，通过点击在图10的屏幕上的名为‘附加信息’的按钮1020，可再现附加信息。当从图10的位置搜索屏幕选择特定的拍摄的位置时，通过参照location元素的属性reference_scene，再现设备的控制器搜索包括与选择的拍摄的位置相应的location元素的scene元素，从而参照搜索的scene元素的属性start_time，与选择的拍摄的位置相应的场景被再现。该场景再现方法被同等地应用于不使用属性start_time的所有元素。

图11示出用于电影脚本搜索的屏幕。按钮‘通过电影脚本’被包括在图8的屏幕上以显示MSML文档的所有内容，如图11所示。用户可使用屏幕滚动等来选择特定的场景、特定的场地导演、特定的对白等以观看期望的场景。

图12是示出根据本发明的一方面的剧情搜索方法的流程图。在操作1210中，与剧情的成分相应的MSML文档的元素被提取。在操作1220中，通过将样式表应用到提取的元素产生的搜索屏幕被提供给用户。在操作1230中，从用户接收期望的搜索条件。在操作1240中，通过使用与接收到的搜索条件相匹配的元素作为关键字，剧情的内容被搜索并被提供给用户。剧情搜索方法可还包括接收由用户在搜索屏幕上输入的附加的搜索条件并显示与由用户输入的附加的搜索条件相匹配的元素的操作。

由用户选择的元素可包括属性start_time、end_time、和reference_scene。与选择的元素相应的场景根据属性start_time可被控制，然后被播放。作为选择地，更进一步的场景搜索通过参照选择的元素的属性reference_scene被执行，然后更进一步的搜索的场景的再现根据搜索的屏幕的属性start_time被控制。

上述用于搜索的元数据由内容制作者产生，并与运动画面一个存储在信息存储介质中。当用户使用用于在信息存储介质中记录外部运动画面的设备来将接收到的运动画面存储在信息存储介质中时，记录设备可将元数据与运动画面一同记录在信息存储介质中。

图13是根据本发明的一方面的音频/视频(AV)数据记录设备的框图。该AV数据记录设备包括特征点提取器1310、元素产生器1320、元数据产生器1330、写入器1340、以及网络控制器1350。

特征点提取器1310从接收的运动画面中提取特征点。元素产生器1320基于提取的特征点产生指示剧情的成分的元素，并向生成的元素分配作为关于生成的元素的详细信息的属性值。元数据产生器1330从用户接收元素的子元素和关于子元素的属性信息以产生剧情的子成分。写入器1340将剧情的子成分写在信息存储介质中。网络控制器1350将剧情的子成分通过用户接口发送到另一装置。网络控制器1350还接收由另一装置产生的元数据。现将参照图14到图16详细描述元素的产生和元数据的产生。

记录设备通过从将被记录的运动画面中提取特征点来自动地产生与元数据的元素的场景相应的元素。特征点表示重要的场景或预定的场景被改变的点。虽然在运动画面被处理的同时特征点被提取，但在此不描述特征点的提取的方法。在提取的特征点的两个相邻的特征点之间的场景与scene元素相匹配。

图14示出在其上scene元素被显示的屏幕。记录设备在提取特征点的同时读出与当前特征点相应的运动画面帧的PTS，并将当前PTS设置为元素scene的属性start_time的属性值，将下一特征点的PTS设置为scene元素的属性end_time的属性值。按照该方式，使用从单个运动画面提取的特征点，多个scene元素可被再现。基于元素scene的属性start_time的属性值，scene元素的其它属性id和number的属性值被确定。换句话说，记录设备可产生将在从将被记录在信息存储介质中的运动画面中改变章节时使用的元数据。

为了再现其它元数据，记录设备从用户接收与元素scene的子元素相应的数据。现将参照图15和16详细描述元数据输入和再现。

图15示出元数据生成。参照图15，当关于第一场景的详细信息需要被更进一步的提供给用户时，用于第一场景的元数据生成屏幕列举可由用户包括在剧情中的元数据的类型，从而用可使用与元数据类型相应的按钮来输入详细信息。因此，用户可通过从屏幕选择与更进一步的信息相应的元数据的分类来将更进一步的信息包括在MSML文档中。

图16示出当位置分类被选择时显示的元数据输入屏幕。参照图16，记录设备提供运动画面窗口1610、用户通过其可在观看与第一场景相应的运动画面的同时输入关于拍摄的位置的信息；部分1620，其接收包括在元素location中的位置的描述；以及部分1630，其接收元素location的属性的属性href的属性值。按照该方式，关于除了图15的位置元数据之外的元数据的属性信息可由用户输入并存储在信息存储介质中。

如上所述，记录设备从运动画面数据中提取特征点，并将在两个相邻的特征点之间的运动画面数据定义为同类的片段，从而产生多个同类的片断。在每一同类的片断中，作为同类的片断开始的时间点的PTS值以及同类的片断的放映的图像可被包括在MPEG-1的形式中。此外，附加的元数据可以以如上所述的预定的元素和属性的形式被包括。此外，使同类的片段的内容的任意的描述成为可能的元素可被包括在MSML文档中。因此，再现设备可向用户提供关于电影的提取的信息。

可连接到诸如互联网的网络的记录设备可通过网络控制器1350可向服务器或另外的记录设备直接地发送如上所述的制作的元数据文件。因此，记录设备连接到服务器，并下载由另外的用户制作的元数据，或在记录设备的存储器区域中或信息存储介质中直接接收的元数据，从而各种元数据可被使用。因为这样的元数据可被其它记录设备编辑和修改，所以用户可使用由其它用户制作的元数据来制作其自己的元数据。在该情形中，能够将关于用户的信息加入元数据文件的元素和属性可还包括在MSML文档中。

本发明还可被在计算机可读记录介质上被实施为计算机可读代码。计算机可读记录介质是可存储其后可由计算机系统读取的数据的数据存储装置。计算机可读记录介质的例子包括只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘、光学数据存储装置、以及载波(如通过互联网的数据传输)。该计算机可读记录介质也可被分布在与计算机系统连接的网络中，从而计算机可读记录代码以分布式方式被存储和执行。

虽然本发明已参考其实施例被具体地示出和描述，但本领域普通技术人员将理解，在不脱离如权利要求所限定的本发明的原理和范围的情况下，可在形式和细节上做出各种改变。

Claims (57)

1、一种存储用于运动画面的剧情的信息存储介质，该剧情包括：

元素，用于指示剧情的成分；以及

属性，用于指示关于元素的详细信息。

2、如权利要求1所述的信息存储介质，其中，剧情是使用该元素作为标签和该属性作为与关于该元素的详细信息相应的属性值的标记文档。

3、如权利要求1所述的信息存储介质，其中，剧情的成分包括至少一种从群组中选择的信息，该群组包括：

出现在每一场景上的道具、服装、每一拍摄位置的描述、以及关于对白的附加信息。

4、如权利要求1所述的信息存储介质，其中，对白元素被包括在元素中，并且包括与被用于以与运动画面同步显示对白的放映时间信息相应的属性。

5、如权利要求4所述的信息存储介质，其中，放映时间信息是以与对白同步显示的运动画面的放映时戳。

6、如权利要求1所述的信息存储介质，其中，每一元素包括运动画面放映时间信息，该信息是关于与该元素相应的运动画面被播放的时间点的信息，从而该元素被搜索，与该元素相应的屏幕被显示。

7、如权利要求1所述的信息存储介质，其中，每一属性具有指示与每一元素相应的内容是否将在影院显示器上播放或是导演的剪接的内容制作版本的属性值。

8、如权利要求1所述的信息存储介质，其中，每一属性包括关于与每一元素关联的互联网信息存在的参考位置的信息。

9、如权利要求1所述的信息存储介质，还包括指示剧情以其被显示的形式的样式信息。

10、如权利要求9所述的信息存储介质，其中，样式信息以样式表语言写成。

11、一种存储音频/视频数据并由用于再现数据的设备读取的信息存储介质，该信息存储介质包括：

运动画面数据；以及

运动画面的剧情，

其中，剧情包括：

指示剧情的成分的元素，以及

指示与该元素相关的详细信息的属性，

其中，每一元素在搜索剧情时被使用。

12、如权利要求11所述的信息存储介质，其中，该信息存储介质是光盘。

13、如权利要求11所述的信息存储介质，还包括与运动画面的剧情相关的参考链接信息。

14、一种用于从信息存储介质中再现数据的设备，该设备包括：

读取器，用于从信息存储介质中读出运动画面数据合剧情数据；

解码器，用于对读取的运动画面数据进行解码，并输出解码的运动画面数据；

过滤器，用于响应于命令从剧情数据中过滤出期望的信息；

渲染器，用于将过滤出的信息渲染为图形数据；

混和器，用于将解码的运动画面数据与图形数据进行混和，并输出混和的结果；以及

控制器，用于控制过滤器、解码器、渲染器、以及读取器。

15、如权利要求14所述的再现设备，其中，读取器从互联网资源下载运动画面数据和剧情数据。

16、如权利要求14所述的再现设备，其中，剧情数据包括：

元素，用于指示剧情的成分，其中，每一元素在搜索剧情期间被使用；以及

属性，用于指示与元素相关的详细信息。

17、如权利要求15所述的再现设备，其中，剧情数据是使用该元素为标签和该属性为与该元素相关的详细信息相应的属性值写成的标记文档。

18、如权利要求14所述的再现设备，还包括，缓冲器，用于临时存储读出的运动画面数据和读出的剧情数据。

19、如权利要求18所述的再现设备，其中，缓冲器存储与剧情数据和指示关于文本数据以其被显示的样式的信息的样式表文档相应的文本数据。

20、如权利要求19所述的再现设备，其中，缓冲器包括字体存储缓冲器，用于在运动画面的接收期间从读取器接收与匹配于文本数据的字体相关的信息，并临时存储该字体信息。

21、如权利要求14所述的再现设备，其中，控制器包括：

用户命令处理器，用于接收命令并取决于命令的类型将该命令发送到过滤器、解码器、渲染器、以及读取器的适当的单元；

搜索引擎，用于响应于该命令搜索剧情；

过滤器控制器，用于根据由搜索引擎产生的搜索条件控制过滤器；以及

读取器控制器，用于根据搜索条件控制读取器。

22、如权利要求21所述的再现设备，其中，控制器还包括：

用户命令接收器，用于接收与期望的搜索条件关联的命令。

23、如权利要求21所述的再现设备，其中，搜索引擎通过搜索条件接收指示剧情的成分的所有元素，并根据元素搜索剧情。

24、一种搜索用于运动画面的剧情的方法，该方法包括：

提取与剧情的成分相关的元素；

显示通过将样式表应用于提取的元素产生的搜索屏幕；

接收期望的搜索条件；以及

通过使用与接收的搜索条件相匹配的元素作为关键字来从剧情中搜索内容，并显示搜索的内容。

25、如权利要求24所述的方法，其中，剧情包括：

元素，用于指示剧情的成分；以及

属性，用于指示与该元素相关的详细信息，

其中，每一元素在搜索剧情时被使用。

26、如权利要求24所述的方法，还包括：

接收在屏幕上输入的更进一步的搜索条件；以及

显示与该更进一步的搜索条件相匹配的元素。

27、如权利要求26所述的方法，还包括：

使用指示与该元素相应的运动画面被播放的时间点的时间信息来显示与更进一步的搜索条件相匹配的元素。

28、如权利要求27所述的方法，还包括：

以与剧情的同步来播放作为运动画面的放映时戳的时间信息。

29、一种存储用于执行用于运动画面的剧情搜索方法的计算机程序的计算机可读记录介质，该方法包括：

提取与剧情的成分相关的元素；

将样式表应用于提取的元素来显示搜索屏幕；

接收期望的搜索条；以及

通过使用与接收到的搜索条件相匹配的元素作为关键字来从剧情中搜索内容，并显示搜索的内容。

30、一种用于将剧情和运动画面一起记录在信息存储介质上的设备，该设备包括：

特征点提取器，用于从运动画面提取特征点；

元素产生器，用于基于提取的特征点来产生指示剧情的成分的元素，并将作为关于产生的元素的详细信息的属性值分配给产生的元素；以及

元数据产生器，用于从关于剧情的子成分的属性信息中产生与剧情的子成分相应的元素的子元素。

31、如权利要求30所述的记录设备，还包括：

网络控制器，用于通过用户接口将包括剧情的子成分的元数据发送到另一装置，或接收由另一装置产生的元数据。

32、如权利要求30所述的记录设备，还包括：

写入器，用于将包括剧情的子成分的元数据写在信息存储介质中。

33、如权利要求30所述的记录设备，其中，特征点提取器提取运动画面的场景被改变的点作为特征点。

34、如权利要求30所述的记录设备，其中，元素产生器产生元素，每一元素具有与指示与特征点开始相应的场景的时间点和该场景结束的时间点的放映时戳相应的属性。

35、如权利要求30所述的记录设备，其中，元数据产生器接收元素的子元素和与子元素相关的属性信息以产生剧情的子成分。

36、一种将剧情与运动画面一同记录在信息存储介质上的方法，该方法包括：

从运动画面中提取特征点；

基于提取的特征点产生指示剧情的成分的元素，并将作为与产生的元素相关的详细信息的属性值分配给产生的元素；以及

从与从用户接收的剧情的子元素相关的属性信息中产生与剧情的子元素相应的元素的子元素。

37、如权利要求36所述的方法，还包括：

提取运动画面的场景被改变的点作为特征点。

38、如权利要求36所述的方法，还包括：

将指示与特征点开始相应的场景的时间点和该场景结束的时间点的放映时戳分配为属性值。

39、如权利要求36所述的方法，还包括：

接收元素的子元素和与该子元素相关的属性信息以产生剧情的子成分。

40、一种具有与至少一个运动画面的场景相关的剧情的介质，该剧情包括：

元素，用于指示剧情的成分；以及

属性，用于指示关于元素的详细信息，

其中，多个元素或属性被逻辑地组合并显示以提供特定的场景。

41、如权利要求40所述的具有剧情的介质，还包括：

标记文档，用于根据每一元素对包括在剧情中的因素进行分类，其中，与每一元素相应的信息被包括在各自的属性中。

42、如权利要求41所述的具有剧情的介质，其中，每一元素包括用于与运动画面的剧情的同步的时间信息或与特定的场景关联的信息。

43、如权利要求41所述的具有剧情的介质，其中，标记文档是存储关于显示的信息的数据库。

44、如权利要求41所述的具有剧情的介质，其中，元素和属性根据电影脚本标记语言写成。

45、如权利要求44所述的具有剧情的介质，其中，每一元素包括运动画面放映时间信息，该信息是关于与该元素相应的运动画面播放的时间点的信息。

46、如权利要求40所述的具有剧情的介质，其中，该属性包括表示场景开始时间的开始时间属性和表示场景结束时间的结束时间属性。

47、如权利要求40所述的具有剧情的介质，其中，该属性包括使用统一资源标识符以参照外部文档的属性。

48、如权利要求40所述的具有剧情的介质，其中，剧情包括在编码前未转换为图形数据的字幕数据。

49、如权利要求48所述的具有剧情的介质，其中，字幕数据以SAMI语言格式写成。

50、如权利要求40所述的具有剧情的介质，其中，介质是光盘信息存储介质。

51、一种自动地生成与运动画面的场景相应的元素的方法，该方法包括：

从将被记录的运动画面中提取特征点；以及

将在两个邻近的特征点之间的运动画面数据定义为同类片段，从而产生多个同类片段，其中，每一同类片段包括用于该同类片段开始的时间点的值。

52、如权利要求51所述的自动地产生元素的方法，还包括：

将同类片段的代表的图像包括在MPEG-1格式中。

53、如权利要求51所述的自动地产生元素的方法，其中，自动地产生的元素包括使同类片段的内容的任意描述成为可能的元素。

54、如权利要求51所述的自动地产生元素的方法，其中，用于运动画面的场景包括至少一个剧情。

55、如权利要求54所述的自动地产生元素的方法，其中，用于运动画面的每一剧情以电影脚本标记语言写成。

56、如权利要求55所述的自动地产生元素的方法，其中，每一剧情包括被转换为标记文档并且在编码之前未被转换为图形数据的字幕数据。

57、如权利要求56所述的自动地产生元素的方法，其中，字幕数据以SAMI语言格式写成。

Images