CN101650960A - 信息记录装置、成像装置、信息记录方法和程序 - Google Patents

信息记录装置、成像装置、信息记录方法和程序 Download PDF

Info

Publication number
CN101650960A
CN101650960A CN200910163316.1A CN200910163316A CN101650960A CN 101650960 A CN101650960 A CN 101650960A CN 200910163316 A CN200910163316 A CN 200910163316A CN 101650960 A CN101650960 A CN 101650960A
Authority
CN
China
Prior art keywords
moving image
information
data
image management
management information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN200910163316.1A
Other languages
English (en)
Other versions
CN101650960B (zh
Inventor
前田哲裕
前笃
磯部幸雄
森本直树
长尾研一郎
有留宪一郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101650960A publication Critical patent/CN101650960A/zh
Application granted granted Critical
Publication of CN101650960B publication Critical patent/CN101650960B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/327Table of contents
    • G11B27/329Table of contents on a disc [VTOC]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

本发明提供了信息记录装置、成像装置、信息记录方法和程序。一种信息记录装置包括:运动图像输入单元,被配置为输入运动图像;位置信息获得单元,被配置为获得在运动图像被输入时的位置信息;位置信息转换单元,被配置为将获得的位置信息转换成与利用该位置信息确定的地点有关的位图数据和文本数据中的至少一种;运动图像管理信息生成单元,被配置为生成运动图像管理信息,该运动图像管理信息是包括转换得到的位图数据和文本数据中的至少一种的信息,该运动图像管理信息用于管理输入的运动图像;以及记录控制单元,被配置为将生成的运动图像管理信息与所述运动图像相关联地记录为运动图像管理文件。

Description

信息记录装置、成像装置、信息记录方法和程序
技术领域
本发明涉及信息记录装置,更具体而言涉及可用来获得位置信息的信息记录装置、成像装置和信息记录方法,以及使得计算机执行该方法的程序。
背景技术
迄今为止,已经提出了一种相机,其中,利用GPS(全球定位系统)来获得位置信息,并且该位置信息被添加到照片并被记录。例如,已经提出了内置有GPS的相机,其中,基于采用GPS获得的当前位置而搜索出的当前地点的名称被显示,并且在快门按钮被按下时,当前地点的名称被记录在照片中(例如,日本未实审专利申请公开No.07-64169)。
另外,近年来,诸如数码相机、数码摄像机(摄录一体机)等等之类的成像装置已被广泛使用,其中,对诸如人之类的被摄物成像得到的成像图像作为图像数据被记录。另外,例如,已经提出了一种数码相机,其中,利用GPS获得位置信息,并且该位置信息被添加到成像图像并被记录。
发明内容
根据上述的现有技术,当显示利用成像装置记录的成像图像时,用户可以使用添加到要显示的成像图像的位置信息。从而,可以提高用户的便利性。
现在,考虑一种情况,其中,利用成像装置记录的成像运动图像被另一个重放装置播放。例如,在另一个重放装置播放被添加了位置信息的成像运动图像的情况下,在播放该成像运动图像时可使用该位置信息。例如,在重放装置采用被添加到成像运动图像流的位置信息的情况下,必须对成像运动图像进行解码以获得位置信息。因而,例如,为了利用与多个运动图像有关的位置信息来理解每个成像运动图像的内容,每个成像运动图像必须被解码以获得相应的位置信息。另外,为了理解每个成像运动图像的内容,可以设想通过将获得的位置信息转换成例如内容可被容易理解的地名等来显示该位置信息。因而,在地名等被显示以便理解每个成像运动图像的内容的情况下,必须提供用于解码和转换每个成像运动图像的时间,因此不能快速地理解每个成像运动图像的内容。
已经发现,希望提供一种布置,其能够快速地理解运动图像的内容。
根据本发明的一个实施例,提供了一种信息记录装置、一种与之相对应的信息记录方法以及一种使计算机执行该方法的程序,该信息记录装置包括:运动图像输入单元,被配置为输入运动图像;位置信息获得单元,被配置为获得在运动图像被输入时的位置信息;位置信息转换单元,被配置为将获得的位置信息转换成与利用该位置信息确定的地点有关的位图数据和文本数据中的至少一种;运动图像管理信息生成单元,被配置为生成运动图像管理信息,该运动图像管理信息是包括转换得到的位图数据和文本数据中的至少一种的信息,该运动图像管理信息用于管理所输入的运动图像;以及记录控制单元,被配置为将生成的运动图像管理信息与所述运动图像相关联地记录为运动图像管理文件。因而产生以下优点,即,获得了在运动图像被输入时的位置信息,该获得的位置信息被转换成位图数据和文本数据中的至少一种,生成了包括转换得到的位图数据和文本数据中的至少一种的运动图像管理信息,并且该生成的运动图像管理信息与运动图像相关联地被记录为运动图像管理文件。
另外,位置信息转换单元可将获得的位置信息转换成与利用该位置信息确定的地点有关的文本数据,其中运动图像管理信息生成单元通过将转换得到的文本数据包括在根据AVCHD标准的剪辑信息文件中来生成运动图像管理信息。因而产生以下优点,即,通过将转换得到的文本数据包括在根据AVCHD标准的剪辑信息文件中来生成运动图像管理信息。
另外,运动图像管理信息生成单元可通过将获得的位置信息和对应于该位置信息的文本数据包括在剪辑信息文件中来生成运动图像管理信息。因而产生以下优点,即,通过将获得的位置信息及与其对应的文本数据包括在剪辑信息文件中来生成运动图像管理信息
另外,运动图像管理信息生成单元可通过在包含于剪辑信息文件中的制作者专用数据中定义位置信息结构,且将获得的位置信息记录在该位置信息结构中,来生成运动图像管理信息。因而产生以下优点,即,通过将获得的位置信息记录在包含于剪辑信息文件中的制作者专用数据中而生成运动图像管理信息。
另外,运动图像管理信息生成单元可通过将文本数据包括在包含于剪辑信息文件中的制作者专用数据中来生成运动图像管理信息。因而产生以下优点,即,通过将文本数据包括在包含于剪辑信息文件中的制作者专用数据中而生成运动图像管理信息。
另外,运动图像管理信息生成单元可通过为组成输入的运动图像的每一章节确定至少一条获得的位置信息作为代表性位置信息,且将与该确定的代表性位置信息相对应的文本数据包括在每一章节的剪辑信息文件中,来生成运动图像管理信息。因而产生以下优点,即,为组成输入的运动图像的每一章节确定代表性位置信息,并且通过将对应于该代表性位置信息的文本数据包括在每一章节的剪辑信息文件中而生成运动图像管理信息。
另外,运动图像管理信息生成单元可通过将文本数据包括在根据AVCHD标准的电影播放列表文件中来生成运动图像管理信息。因而产生以下优点,即,通过将文本数据包括在根据AVCHD标准的电影播放列表文件中而生成运动图像管理信息。
另外,运动图像管理信息生成单元可通过将文本数据至少包括在包含于电影播放列表文件中的扩展数据的播放列表标记扩展的标记名或制作者信息中,来生成运动图像管理信息。因而产生以下优点,即,通过将文本数据至少包括在包含于电影播放列表文件中的扩展数据的播放列表标记扩展的标记名或制作者信息中,而生成运动图像管理信息。
另外,根据本发明的一个实施例,提供了一种成像装置、其控制方法以及一种使计算机执行该控制方法的程序,该成像装置包括:成像单元,被配置为对被摄物成像以生成成像运动图像;位置信息获得单元,被配置为获得在成像运动图像被生成时的位置信息;位置信息转换单元,被配置为将获得的位置信息转换成与利用该位置信息确定的地点有关的位图数据和文本数据中的至少一种;运动图像管理信息生成单元,被配置为生成运动图像管理信息,该运动图像管理信息是包括转换得到的位图数据和文本数据中的至少一种的信息,该运动图像管理信息用于管理所述生成的运动图像;以及记录控制单元,被配置为将生成的运动图像管理信息与所述成像运动图像相关联地记录为运动图像管理文件。因而产生以下优点,即,获得了在成像运动图像被生成时的位置信息,该获得的位置信息被转换成位图数据和文本数据中的至少一种,生成了包括转换得到的位图数据和文本数据中的至少一种的运动图像管理信息,并且将该生成的运动图像管理信息与成像运动图像相关联地记录为运动图像管理文件。
根据上述配置,获得了一个显著的优点,即,可以快速地理解运动图像的内容。
附图说明
图1是示出根据本发明一个实施例的信息记录装置100的功能配置例子的框图;
图2是示出根据本发明一个实施例的系统控制单元的功能配置例子的框图;
图3是示意性地示出根据本发明一个实施例的位置信息转换数据库中存储的内容的示意图;
图4是示意性地示出根据本发明一个实施例的复用处理单元生成AV流的情况的示意图;
图5是示意性地示出AVCHD文件的类型及其作用之间的对应关系的示意图;
图6是示出根据AVCHD标准的数据结构的示意图;
图7是示出根据AVCHD标准的电影对象的周边相关例子的示意图;
图8是示出根据AVCHD标准的文件配置的例子的示意图;
图9是示出根据AVCHD标准的改进的数字视频包(MDP)的完整数据结构的示意图;
图10是示出根据AVCHD标准的MDP的ID和附带信息之间的对应关系的示意图;
图11是示出根据AVCHD标准的MDP的ID和附带信息之间的对应关系的示意图;
图12A和12B是示出根据AVCHD标准的覆盖位图中包括的位图单元的数据结构的示意图;
图13是示出根据AVCHD标准的位图单元的类型的示意图;
图14A和14B是示出根据AVCHD标准的“Object Unit”(对象单元)的数据结构的示意图;
图15是示出根据AVCHD标准的剪辑信息文件的数据结构的示意图;
图16是示出根据AVCHD标准的剪辑信息文件的块“ExtensionData()”的数据结构的示意图;
图17是示出根据AVCHD标准的剪辑信息文件的块“MakersPrivateData()”的数据结构的示意图;
图18A和18B是示出利用根据AVCHD标准的剪辑信息文件的块“data_block()”定义的数据结构例子的示意图;
图19是示出根据AVCHD标准的播放列表文件的块“ExtensionData()”的数据结构的示意图;
图20是示出根据AVCHD标准的播放列表文件的块“blkPlayListMarkExt()”的数据结构的示意图;
图21是示出根据本发明一个实施例的信息记录装置100执行的运动图像记录处理的过程的流程图;
图22是示出根据本发明一个实施例的信息记录装置执行的运动图像记录处理的过程的流程图;
图23是示出根据本发明一个实施例的信息记录装置100执行的运动图像和运动图像管理文件的记录处理的过程的流程图;
图24是示出根据本发明一个实施例的信息记录装置执行的运动图像和运动图像管理文件的记录处理的过程中的运动图像管理文件记录过程的流程图;
图25是示出根据本发明一个实施例的信息记录装置300的功能配置例子的示意图;
图26是示出根据本发明一个实施例的菜单屏幕生成单元所生成的菜单屏幕的例子的示意图;
图27是示出根据本发明一个实施例的重放装置400的功能配置例子的框图;
图28是示出根据本发明一个实施例的系统控制单元的功能配置例子的框图;并且
图29A和29B是示出根据本发明一个实施例的重放装置所显示的显示屏幕的显示例子的示意图。
具体实施方式
接下来,将参考附图来详细描述本发明的实施例。
图1是示出根据本发明一个实施例的信息记录装置100的功能配置例子的框图。信息记录装置100包括成像单元101、成像信号处理单元102、麦克风103、音频信号处理单元104、GPS信号处理单元105、用户接口110、系统控制单元120、以及记录介质180。信息记录装置100可以利用诸如数码摄像机等等之类的成像装置来实现,这种成像装置能够通过接收GPS信号来计算位置信息,并且能够将计算出的位置信息以与成像运动图像相关联的方式记录起来。
成像单元101包括光学系统和成像器件。该光学系统由用于聚集来自被摄物的光的多个透镜(变焦透镜、聚焦透镜(未示出)等等)、光圈等构成,并且来自被摄物的入射光经由这些透镜和光圈被输送到成像器件。成像器件对经由光学系统输入的来自被摄物的光执行光电转换以获得模拟成像信号(图像信号),并且将经过光电转换的模拟成像信号输出到成像信号处理单元102。注意,例如,CCD(电荷耦合器件)传感器、CMOS(互补金属氧化物半导体)传感器等可被用作成像器件。
成像信号处理单元102使从成像单元101输出的成像信号受到预定的信号处理,并且将经过信号处理的图像信号(图像数据)作为基带数字视频数据输出到系统控制单元120。也就是说,成像信号处理单元102利用CDS(相关双采样)电路在从成像单元101输出的成像信号中仅对具有图像信息的信号进行采样,并且还执行噪声消除。然后,成像信号处理单元102利用AGC(自动增益控制)电路来调整增益,并利用A/D(模拟/数字)转换电路转换成数字信号。另外,成像信号处理单元102使转换后的数字信号经受检测系统的信号处理,以提取R(红)、G(绿)、和B(蓝)每种颜色的分量,并且执行诸如伽马校正、白平衡校正之类的处理。结果,成像信号处理单元102将其作为一个单位的基带数字视频数据输出到系统控制单元120。
另外,成像信号处理单元102基于从成像单元101输出的成像信号,生成用于在显示单元(未示出)上显示成像图像(所谓的直通图像(through image))的视频信号。例如,诸如LCD(液晶显示屏)等的显示元件可被用作该显示单元。
麦克风103用于收集信息记录装置100周围的音频并将其转换为电信号,并且将该电信号作为音频信号输出到音频信号处理单元104。
音频信号处理单元104使从麦克风103输出的音频信号经历预定的信号处理,并且将经历了该信号处理的音频信号(音频数据)作为基带的数字音频数据输出到系统控制单元120。也就是说,音频信号处理单元104使从麦克风103输出的音频信号经历限幅处理以及A/D转换,从而生成数字音频数据。然后,音频信号处理单元104使得所生成的数字音频数据经历诸如噪声消除、音调校正之类的音频信号处理,并从而将其输出作为一个单位的数字音频数据。
GPS信号处理单元105基于从GPS信号接收天线(未示出)接收的GPS信号来计算位置信息,并且将计算出的位置信息输出到系统控制单元120。注意,在这个计算出的位置信息中,包括了诸如纬度、经度、高度、方向、时刻等的数值数据。
用户接口110是这样一个用户接口,其接受用户输入的操作内容,并且将与所接受的操作内容相对应的控制信号输出到系统控制单元120。例如,在信息记录装置100中包括诸如运动图像记录模式设定/取消按钮和记录按钮之类的操作构件。运动图像记录模式设定/取消按钮是在设定或取消启用运动图像记录的运动图像记录模式之时按下的按钮。记录按钮是在运动图像记录模式被设定的情况下开始或结束运动图像的记录时按下的按钮。注意,用户接口110例如可被配置为触摸面板。
系统控制单元120基于从用户接口110输出的控制信号对运动图像文件等等执行记录控制。注意,将参考图2来详细描述系统控制单元120。
记录介质180是这样一个记录介质,其基于由系统控制单元120进行的记录控制来存储诸如运动图像文件等等之类的信息。例如,记录介质180存储通过复用从成像信号处理单元102输出的数字视频数据和从音频信号处理单元104输出的数字音频数据而生成的AV流(数据流),作为运动图像文件。另外,记录介质180存储对运动图像文件进行管理的运动图像管理文件。在本发明的实施例中,从GPS信号处理单元105输出的位置信息被转换成文本数据和位图数据,并且文本数据和位图数据通过被包括在运动图像文件和运动图像管理文件中而被存储在记录介质180中。注意,记录介质180可被内置在信息记录装置100中,或者可以从信息记录装置100上拆离。另外,各种类型都可被用作记录介质180,例如半导体存储器、光记录介质、磁盘、HDD(硬盘驱动器)等等。注意,可用的光记录介质例如包括可记录DVD(数字多功能盘)、可记录CD(致密盘)以及蓝光盘(注册商标)。
图2是示出根据本发明一个实施例的系统控制单元120的功能配置例子的框图。系统控制单元120包括控制单元130、数据输入单元140、压缩处理单元150、位置信息转换数据库160、位置信息处理单元171、管理信息处理单元172、以及管理信息保存单元173。另外,系统控制单元120包括复用处理单元174、流缓冲器175、以及记录控制单元176。系统控制单元120利用预定的运动图像记录格式对输入的数字视频数据和数字音频数据进行压缩、编码和复用,从而生成AV流。然后,系统控制单元120将所生成的AV流记录在记录介质180中。例如,根据AVCHD标准的运动图像记录格式可被用作运动图像记录格式。
控制单元130控制下属模块,并且执行运动图像记录序列。控制单元130例如是由CPU(中央处理单元)、RAM(随机访问存储器)、ROM(只读存储器)等等构成的。另外,控制单元130根据从用户接口110输出的控制信号,基于预先存储在ROM中的程序和数据,利用RAM作为工作存储器,来控制系统控制单元120的每个单元。例如,如果在运动图像记录模式尚未被设定的状态中对运动图像记录设定/取消按钮的按压操作被用户接口110所接受,控制单元130则执行控制以设定运动图像记录模式。另一方面,如果在运动图像记录模式已被设定的状态中对运动图像记录设定/取消按钮的按压操作被用户接口110所接受,控制单元130则执行控制以取消运动图像记录模式。另外,例如,如果在运动图像记录模式已被设定的状态中对记录按钮的按压操作被用户接口110所接受,控制单元130则执行控制以开始记录运动图像。另一方面,如果在运动图像的记录正被执行的状态中对记录按钮的按压操作被用户接口110所接受,控制单元130则执行控制以结束对运动图像的记录。
数据输入单元140包括运动图像输入单元141、音频输入单元142、以及位置信息输入单元143。运动图像输入单元141输入从成像信号处理单元102输出的基带的数字视频数据,并将该数字视频数据输送到下文描述的视频编码器151。注意,运动图像输入单元141是实现本发明的特征的运动图像输入单元的例子。音频输入单元142输入从音频信号处理单元104输出的基带的数字音频数据,并且将该数字音频数据输送到下文描述的音频编码器152。位置信息输入单元143输入从GPS信号处理单元105输出的位置信息,并且将该位置信息输送到位置信息处理单元171。注意,位置信息输入单元143是实现本发明的特征的位置信息获得单元的例子。
压缩处理单元150包括视频编码器151和音频编码器152。视频编码器151。视频编码器151利用预定的压缩编码系统对从运动图像输入单元141输送来的数字视频数据进行压缩和编码,并且将经过压缩和编码的数字视频数据作为AV流输送到复用处理单元174。在根据AVCHD标准的运动图像记录格式被用作运动图像记录格式的情况下,能够进行高效编码的H.264/MPEG-4AVC系统被用作运动图像压缩编码系统。在使用该系统的情况下,例如,利用DCT(离散余弦变换)和画面内预测来执行帧内压缩。然后,利用运动向量来执行帧内压缩,并且还执行熵编码,从而提高压缩效率。音频编码器152利用预定的压缩编码系统对从音频输入单元142输送来的数字音频数据进行压缩和编码,并且将经过压缩和编码的数字音频数据作为音频流输送到复用处理单元174。在使用根据AVCHD标准的运动图像记录格式作为运动图像记录格式的情况下,AC3(Audio Code number 3)系统可被用作运动图像压缩编码系统。注意,数字音频数据可以在未经压缩编码的基带数据的状态中被输送到复用处理单元174。
位置信息转换数据库160是存储转换信息的数据库,转换信息用于把由GPS信号处理单元105计算出的位置信息转换成与利用该位置信息确定的地点有关的文本数据或位图数据。将参考图3来详细描述该位置信息转换数据库160。
位置信息处理单元171使用位置信息转换数据库160中存储的转换信息将从位置信息输入单元143输送来的位置信息转换成文本数据和位图数据。然后,位置信息处理单元171将从位置信息输入单元143输送来的位置信息和从该位置信息转换得到的文本数据和位图数据作为根据预定的运动图像记录格式的数据流输出到复用处理单元174。另外,位置信息处理单元171将从位置信息输入单元143输送来的位置信息和从该位置信息转换得到的文本数据和位图数据输出到管理信息处理单元172。注意,位置信息处理单元171是实现本发明的特征的位置信息转换单元的例子。
管理信息处理单元172生成用于管理要被记录在记录介质180中的运动图像文件的运动图像管理信息,并将所生成的运动图像管理信息输出到记录控制单元176。另外,管理信息处理单元172把从位置信息处理单元171输出的文本数据和位图数据包括在运动图像管理信息中。例如,管理信息处理单元172从复用处理单元174获得时间信息,并且还从记录控制单元176获得记录介质180的地址信息,并且基于所获得的时间信息和地址信息来生成运动图像管理信息。然后,管理信息处理单元172控制管理信息保存单元173保存所生成的运动图像管理信息,在预定的时刻将其输出到记录控制单元176,并且控制记录控制单元176将其作为运动图像管理文件记录在记录介质180中。在使用根据AVCHD标准的运动图像记录格式作为运动图像记录格式的情况下,该运动图像管理文件由索引文件、电影对象文件、播放列表文件和剪辑信息文件构成。在此情况下,从位置信息处理单元171输出的文本数据例如被记录在播放列表文件和剪辑信息文件中。另外,管理信息处理单元172生成用于把从位置信息处理单元171输出的文本数据和位图数据嵌入在复用处理单元174所复用的AV流中的信息,并将该信息输出到复用处理单元174。注意,管理信息处理单元172是实现本发明的特征的运动图像管理信息生成单元的例子。
管理信息保存单元173临时保存由管理信息处理单元172生成的运动图像管理信息,并且将所保存的运动图像管理信息输送到管理信息处理单元172。也就是说,管理信息保存单元173被用作管理信息处理单元172的工作存储器。
复用处理单元174利用预定的方法对从视频编码器151输出的视频流和从音频编码器152输出的音频流进行复用,并将其作为一个AV流输出。另外,复用处理单元174利用预定的方法对该视频流和音频流以及从位置信息处理单元171输出的AV流进行复用,以将其作为一个AV流输出。另外,复用处理单元174基于从管理信息处理单元172输出的信息将文本数据和位图数据包括在该AV流中。然后,被复用的AV流被顺序地输出到流缓冲器175。例如,在使用根据AVCHD标准的运动图像记录格式作为运动图像记录格式的情况下,根据MPEG-2TS(传输流)来执行复用。注意,复用处理单元174是实现本发明的特征的数据流生成单元的例子。
流缓冲器175是临时存储从复用处理单元174输出的AV流的缓冲器。所存储的AV流基于记录控制单元176的控制被记录在记录介质180中。
记录控制单元176监视流缓冲器175中存储的数据量,并且在预定量或更多的数据被存储在流缓冲器175中时,从记录介质180中读出相当于一个记录单位的数据并将其写入到记录介质180中。也就是说,记录控制单元176根据存储在流缓冲器175中的AV流创建运动图像文件,并且将其记录在记录介质180中。另外,记录控制单元176把从管理信息处理单元172输出的运动图像管理信息作为运动图像管理文件记录在记录介质180中。注意,记录控制单元176是实现本发明的特征的记录控制单元的例子。
例如,如果用户接口110接收到在运动图像记录模式被设定的状态下对记录按钮的按压操作,则基于控制单元130的控制而开始对记录介质180的记录操作。也就是说,从成像信号处理单元102输出的数字视频数据被视频编码器151基于控制单元130的控制而压缩和编码。另外,从音频信号处理单元104输出的数字音频数据被音频编码器152进行压缩和编码。然后,经过压缩和编码的视频数据和音频数据被复用处理单元174利用预定的格式进行分组化并复用,以生成AV流。然后,所生成的AV流经由流缓冲器175被输送到记录控制单元176,并且作为运动图像文件被记录在记录介质180中。另一方面,如果用户接口110接收到在正在执行运动图像的记录的状态中对记录按钮的按压操作(再次按压操作),则基于控制单元130的控制而停止对记录介质180的记录操作。也就是说,向记录介质180记录运动图像文件的操作被停止,而且执行运动图像管理文件的创建和更新。
图3是示意性地示出根据本发明一个实施例的位置信息转换数据库160中存储的内容的示意图。位置信息转换数据库160是存储有用于将位置信息转换成文本数据和位图数据的转换信息的数据库。具体而言,位置信息(GPS信息)162、地名(文本数据)163和地名(位图数据)164以与管理号161相关联的方式被存储在位置信息转换数据库160中。
管理号161是用于管理每个地名的标识号。例如,“长岛”以与管理号“1”相关联的方式被存储,并且“布鲁克林”以与管理号“2”相关联的方式被存储。
用于标识与地名163和164中存储的地名相对应的区域的数据被存储在位置信息162中。现在,在图3所示的例子中,将假定这样一种情况,即与地名163和164中存储的地名相对应的区域由多边形区域(由多条边线围绕的封闭区域)来标识,该多边形区域是由互连的多个点(纬度和经度)构成的。例如,假定与地名163和164中存储的地名“长岛”相对应的区域(与实际的纽约长岛相对应的区域)和管理号为“1”的位置信息162中存储的多个点(纬度和经度)构成的多边形区域大致相同。也就是说,位置信息162中存储的数据例如是指示出与对应于该区域的多边形的顶点相对应的纬度和经度。注意,在图3所示的例子中,省略了位置信息162中存储的具体数值。
将被记录在AV流和运动图像管理文件中的地名的文本数据被存储在地名163中。另外,将被记录在AV流和运动图像管理文件中的地名的位图数据被存储在地名164中。例如,诸如“长岛”、“布鲁克林”之类的地名可被用作将要存储在地名163和164中的地名。例如,与当前行政区划相对应的地名可被用作这样的地名。例如,国家、州和县的单位被作为行政区划单位。注意,在图3所示的位置信息转换数据库160中,对于地名163的区域,与要存储在该区域中的文本数据相对应的字符用普通粗细来指示。另外,对于地名164的区域,与要存储在该区域中的位图数据相对应的字符用粗体来表示。
图3所示的例子例示了这样一种情况,即,行政区划单位的地名对应于利用位置信息162中存储的数据确定的区域,但是例如,多个地名可能对应于同一区域。例如,“长岛”和“布鲁克林”的文本数据和位图数据可按与图3所示的管理号“1”相关联的方式被存储在地名163和164中。另外,与利用位置信息162中存储的数据确定的区域有关的另一个文本数据或位图数据可被存储。作为与该区域有关的另一个位图数据,可以使用与对应于该区域的地点有关的符号标记。例如,国旗、州徽等等可被用作该符号标记。另外,例如,表示与该区域相对应的地点的特色事物可被用作符号标记。例如,在纽约的情况下,表示自由女神像的图案可被用作符号标记。另外,例如,表示与GPS信号处理单元105计算出的位置信息相对应的纬度和经度等等的数值信息可被用作与利用位置信息162中存储的数据确定的区域有关的另一种文本数据或位图数据。例如,诸如dd°mm′N、dd°mm′E之类的文本可被用作表示纬度、经度等等的数值信息。注意,GPS信号处理单元105计算出的位置信息中包括的数值被代入到“dd°mm′”中。另外,例如,根据GPS信号处理单元105计算出的位置信息中包括的方向来确定的诸如“E”、“W”、“S”或“N”之类的字符可被用作与利用位置信息确定的区域有关的另一种文本数据或位图数据。另外,例如,表示包括利用由GPS信号处理单元105计算出的位置信息来确定的地点在内的地图的位图数据可被用作与利用位置信息确定的区域有关的另一种位图数据。或者,可以使用这样的位图数据,其中,在包括利用该位置信息来确定的地点的地图上,绘出了代表该地点的指示符。作为表示该地点的指示符,例如,可以使用包括至少一个图像或字符信息的图标。在该图标内部,可以包括代表该地点的各类信息。另外,图3所示的例子图示了地名163中存储的文本数据和位图数据指示出相同字符的情况,但是文本数据可以是不同的。例如,可以进行一种布置,其中,指示出地名的文本数据被存储在地名163中,并且表示与该地名相对应的符号标记的位图数据被存储在地名164中。
位置信息处理单元171判定由GPS信号处理单元105计算出位置信息中包括的纬度和经度是否被包括在利用位置信息162中存储的纬度和经度来确定的区域中。然后,位置信息处理单元171以与所确定的该区域相关联的方式获得存储在地名163和164中的文本数据和位图数据。另外,例如,可以进行一种布置,其中,位置信息处理单元171把由GPS信号处理单元105计算出的位置信息中包括的纬度和经度转换成表示纬度、经度等等的数值的文本数据或位图数据。另外,例如,可以进行一种布置,其中,位置信息处理单元171把由GPS信号处理单元105计算出的位置信息转换成指示出包括利用该位置信息确定的地点的地图的位图数据,并且使用该位图数据。或者,可以进行一种布置,其中,位置信息处理单元171把由GPS信号处理单元105计算出的位置信息转换成其中代表利用该位置信息确定的地点的指示符被绘制在包括该地点的地图上的位图数据。
接下来,将参考附图详细描述一种记录方法,其中,基于由GPS信号处理单元105计算出的位置信息而转换得到的文本数据和位图数据被实时记录在AV流中。
图4是示意性地示出根据本发明一个实施例的复用处理单元174生成AV流的情况的示意图。在此例子中,将描述视频流、音频流、专用流和位图流被复用以生成AV流的情况。
视频流201是与被视频编码器151压缩和编码的数字视频数据相对应的流。另外,音频流202是与被音频编码器152压缩和编码的数字音频数据相对应的流。
专用流203是与GPS信号处理单元105计算出的位置信息200相对应的流。另外,位图流204是与由位置信息处理单元171利用位置信息转换数据库160来转换出的位图数据相对应的流。
这些流201至204是通过连接分组而构成的流。复用处理单元174基于每个分组中包括的时刻信息来执行复用处理以生成AV流205。注意,在图4中,与视频流201相对应的分组中包括的时刻信息用“Vtn(其中n是等于或大于1的整数)”来表示,并且与音频流202相对应的分组中包括的时刻信息用“Atn(其中n是等于或大于1的整数)”来表示。另外,与专用流203相对应的分组中包括的时刻信息用“Ptn(其中n是等于或大于1的整数)”来表示,并且与位图流204相对应的分组中包括的时刻信息用“Btn(其中n是等于或大于1的整数)”来表示。注意,此例子中示出的时刻信息是表示信息记录装置100内的时刻的信息。另外,假定具有被添加了相同的n的时刻信息的分组是在同一时刻生成的。
复用处理单元174周期性地获得从位置信息处理单元171输出的与位置信息、文本数据和位图数据相对应的数据流。然后,复用处理单元174在可选的时刻执行对包括位置信息、文本数据和位图数据的分组的复用。现在,将示出在对包括位置信息、文本数据和位图数据的分组进行复用的情况下的例子。例如,在复用的时刻,在位置信息、文本数据和位图数据中,时刻接近前一个分组的时刻的位置信息、文本数据或位图数据被嵌入在分组中并被复用。这样复用的AV流被顺序地存储在流缓冲器175中。
注意,在使用根据AVCHD标准的运动图像记录格式的情况下,与从位置信息处理单元171输出的位图数据相对应的位图流204被复用以生成视频流201。另外,从位置信息处理单元171输出的位置信息和文本数据被记录在视频流201中。将参考图5至图21以及其他附图来详细描述这些例子。
接下来,将参考附图详细描述作为运动图像记录格式的例子的AVCHD标准。
图5是示意性地示出AVCHD文件的分类及其作用之间的对应关系的示意图。注意,将参考图6至图21以及其他附图来详细描述这些文件的细节。
图6是示出根据AVCHD标准的数据结构的示意图。根据AVCHD标准,AV数据(视频音频数据)被以一种分级结构来处理,该分级结构被大致分类成索引表、电影对象、播放列表、剪辑信息文件和剪辑AV流文件。
剪辑AV流文件是其中视频数据和音频数据被以MPEG-2TS(传输流)格式来复用的比特流。另外,剪辑AV流可与覆盖位图流(OB流)和菜单位图流(MB流)相复用。这里,OB流是用于显示字幕的图形流,MB流是从用于菜单显示的数据(按钮图像数据等)等等转换而来的流。
剪辑信息文件是以剪辑信息的形式保存与剪辑AV流文件有关的信息的文件。剪辑AV流文件的时间位置和空间位置(地址)之间的映射(转换)表等等被包括在剪辑信息文件中。因此,当在时间上指定剪辑AV流文件的访问点时参考该映射表,从而可以访问剪辑AV流文件上的适当地址。
剪辑AV流文件和其中记录了相应的剪辑信息的剪辑信息文件将被统称为剪辑。构成一个剪辑的剪辑AV流文件和剪辑信息文件彼此一一对应。也就是说,在此图中的例子中,剪辑信息741保存着与流751有关的信息,并且剪辑信息742保存着与流752有关的信息。另外,剪辑信息743保存着与流753有关的信息,并且剪辑信息744保存着与流754有关的信息。
播放列表由要播放的剪辑、与该剪辑的一对起始点和结束点有关的信息等等构成。诸如重放起始点和重放结束点等等之类的信息将被称为播放项目(PlayItem)。一个播放列表中包括一个或多个播放项目。剪辑的重放是经由该播放列表来执行的。也就是说,播放列表被播放,从而该播放列表中包括的播放项目被顺序地播放。因此,根据播放项目内的重放起始点和重放结束点,剪辑内的相应片段被播放。
播放列表标记可被添加到每个播放项目。根据播放列表标记,每个播放项目被划分成多个章节。另外,相反,也存在一个章节内有多个播放项目的情况。
播放列表被大致分类成真实播放列表(Real PlayList)和虚拟播放列表(Virtual PlayList)。真实播放列表是以剪辑为单位基本上按记录顺序保存一个或多个剪辑的播放列表。在该真实播放列表内,既没有时间上的间隙也没有与另一真实播放列表的重叠。另一方面,虚拟播放列表是任意地保存与真实播放列表之一相对应的剪辑的一部分或全部的播放列表。在此图中的例子中,播放项目731、732、733、734和735属于真实播放列表,而播放项目736和737属于虚拟播放列表。
电影对象是包括导航命令程序等等的对象。这里,导航命令程序是用于控制播放列表的重放和重放后的处理的命令组。在此图中的例子中,电影对象#1(721)播放真实播放列表#00000,并且电影对象#2(722)播放真实播放列表#00200。另外,电影对象#3(723)播放真实播放列表#00018,并且电影对象#4(724)播放虚拟播放列表#01005。
索引表是定义记录介质中记录的内容的标题的最高级别表格。一个或多个电影标题被包括在该索引表中,并且相应的电影对象被布置为从每个电影标题来指定。在此图中的例子中,电影标题#1(711)指定电影对象#1(721),并且电影标题#2(712)指定电影对象#2(722)。另外,电影标题#3(713)指定电影对象#3(723),并且电影标题#4(714)指定电影对象#4(724)。在重放装置中,基于该索引表中存储的标题信息来控制内容的重放。
图7是示出根据AVCHD标准的电影对象的周边相关例子的示意图。除了上述的电影标题之外,在索引表中还包括第一重放标题719和菜单标题718。第一重放标题719指定与首先要播放的标题相对应的电影对象。菜单标题718指定与菜单屏幕相对应的电影对象。
现在,假定指定了对标题#1的重放开始的情况。从电影标题#1(711)指定电影对象#1(721),从而执行电影对象#1(721)中包括的导航命令程序。
在利用电影对象#1(721)执行用于指示播放列表#1(730)的重放的命令(7201)时,顺序地对播放列表#1(730)的播放项目进行播放。经由播放列表#1(730)播放相应的剪辑。在此图中的例子中,播放项目#1(731)和播放项目#2(732)被按此顺序播放,并且在播放项目#9(739)的重放完成后,控制被返回给电影对象#1(721)。
在电影对象#1(721)中,导航命令程序指示控制返回到菜单标题(7202),并且控制前进到菜单标题718。
图8是示出根据AVCHD标准的文件配置的例子的示意图。包括剪辑的内容的目录“BDMV”810被部署在记录介质的根目录之下。另外,包括缩略图的目录“AVCHDTN”880适当时被部署在根目录之下。
文件“index.bdmv”820和文件“MovieObiect.bdmv”830被部署为紧跟在目录“BDMV”810之下。另外,目录“PLAYLIST”840、目录“CLIPINF”850、目录“STREAM”860和目录“BACKUP”870被部署在目录“BDMV”810之下。
文件“index.bdmv”820存储着目录“BDMV”810的内容,并且对应于图6中描述的索引表。另外,文件“MovieObiect.bdmv”830存储着电影对象的信息,并且对应于图6描述的电影对象。
目录“PLAYLIST”840是部署着用于播放列表的数据库的目录。目录“PLAYLIST”840例如包括文件841至843,这些文件是与播放列表有关的文件。属于目录“PLAYLIST”840的文件的文件名由五个数字和一个扩展名构成。在这五个数字中,“00000”至“00999”这1000个数字是用于真实播放列表的,并且“01000”至“01199”这200个数字是用于虚拟播放列表的。另外,“.mpls”被用作每个文件的扩展名。
目录“CLIPINF”850是部署着用于剪辑的数据库的目录。目录“CLIPINF”850例如包括文件851至853,这些文件是分别对应于剪辑AV流文件的剪辑信息文件。属于目录“CLIPINF”850的文件的文件名由五个数字和一个扩展名构成。“.clpi”被用作每个文件的扩展名。
目录“STREAM”860是部署着充当实体的AV流文件的目录。目录“STREAM”860例如包括分别与剪辑信息文件相对应的剪辑AV流文件861至863。属于目录“STREAM”860的文件由根据MPEG-2的传输流构成,并且其文件名由五个数字和一个扩展名构成。文件名的5个数字部分被设定为与相应的剪辑信息文件相同,从而示出了剪辑信息文件和该剪辑AV流文件之间的对应关系。另外,“.m2ts”被用作每个文件的扩展名。
目录“BACKUP”870用于存储上述目录和文件的备份。
在目录“AVCHDTN”880中可部署两类缩略图文件“thumbnail.tidx”881和“thumbnail.tdt2”882。缩略图文件“thumbnail.tidx”881是存储关于每个缩略图图像数据的索引信息的文件,缩略图文件“thumbnail.tdt2”882是缩略图图像数据集合。
接下来,将参考附图来详细描述通过利用位置信息转换数据库160转换得到的文本数据和位图数据被记录在根据AVCHD标准的AV流中的情况。首先,将描述文本数据被记录在根据AVCHD标准的AV流中的情况。
图9是示出根据AVCHD标准的改进的数字视频包(MDP)的完整数据结构的示意图。这里将基于用作程序描述语言的C语言的描述方法来示出其语法。
该MDP作为用户数据被存储在视频数据的基本流(ES)中。在用户数据中,字段“uuid_iso_iec_11578”具有128比特的数据长度。该用户数据的标识符将利用“ISO/IEC 11578”规定的通用唯一标识符(UUID)来示出。
字符“TypeIndicator”具有32比特的数据长度,并且指示出该用户数据的数据类型。在该数据类型为“0x4741 3934(0x表示随后的数字是十六进制数字;这对于以下的表示符也成立)”的情况下,该用户数据是隐藏字幕(CC)字幕数据(cc_data)。另外,在该数据类型是“0x4D44 504D”的情况下,该用户数据是MDP元数据(ModifiedDVPackMeta)。
MDP元数据中包括相当于任意数目的条目的40比特长的MDP(one_modified_dv_pack)。条目的这个数目被存储在8比特长的“number_of_modified_dv_pack_entries”字段中。一个MDP中包括指示出MDP的ID的8比特长的字段“mdp_id”,以及指示出MDP数据的32比特长的字段“mdp_data”。
图10和11是示出根据AVCHD标准的MDP的ID和附带信息之间的对应关系的示意图。如图中所示,MDP的附带信息包括与成像日期和时间有关的信息、与诸如曝光时间、F值等等之类的成像条件有关的信息、与GPS有关的信息、与相机有关的信息,等等。
例如,如图10所示,MDP的ID“0x18”和“0x19”指示出与成像日期和时间有关的信息。另外,如图11所示,MDP的ID“0xB0”至“0xCF”指示出与GPS有关的信息。因此,与GPS有关的信息可被存储在MDP中。在本发明的例子中,位置信息转换数据库160用于把由位置信息处理单元171从GPS信息转换得到的文本数据记录在“MAKER OPTION(MDP的ID“0xE1”至“0xEF”)”中。因此,即使在利用不具有用于将GPS信息转换成诸如地名等等之类的文本数据的转换数据库的重放装置来执行重放的情况下,与要播放的运动图像的成像地点有关的文本数据也可与该运动图像一起被显示。另外,利用MAKER OPTION中存储的文本数据和MDP的ID“0xB0”至“0xCF”中的与GPS有关的信息,可以执行各种类型的显示重放。注意,在文本数据被记录在MDP中的情况下,例如,可以对每个帧执行记录。另外,例如,可以对每个GOP(图片组)执行记录,或者可以对流内的每个特定间隔执行记录。
接下来,将描述位图数据被记录在根据AVCHD标准的AV流中的情况。在此例子中,将描述基于位置信息转换得到的位图数据作为为根据AVCHD标准的覆盖位图被记录的情况。
图12A和12B是示出根据AVCHD标准的覆盖位图中包括的位图单元的数据结构的示意图。图12A是整个位图单元的数据结构。另外,如图12B所示,其字段“UnitDescriptor()”由8比特长的字段“UnitType”和16比特长的字段“UnitLength”构成。
“UnitType”是表示位图单元的类型的字段,与该类型相对应的数据被存储在位图单元的字段“UnitData()”中。“UnitLength”指示出位图单元的字节数目。
图13是示出根据AVCHD标准的位图单元的类型的示意图。如此图中所示,在图12B中的“UnitType”为“0x14”的情况下,“PaletteUnit”(调色板单元)被存储在“UnitData()”中。该“Palette Unit”用于存储每个像素的颜色,透明度信息表,等等。
在“UnitType”为“0x15”的情况下,“Object Unit”(对象单元)被存储在“UnitData()”中。该“Object Unit”用于存储位图数据主体、位置、大小信息,等等。
在“UnitType”为“0x16”的情况下,“Overlay Bitmap CompilationUnit”(覆盖位图编译单元)被存储在“UnitData()”中。该“OverlayBitmap Compilation Unit”用于存储与覆盖位图有关的显示信息的类型、对象和窗口之间的相关信息,等等。
在“UnitType”为“0x17”的情况下,“Window Unit”(窗口单元)被存储在“UnitData()”中。该“Window Unit”用于存储与屏幕内的显示部分有关的信息,等等。
在“UnitType”为“0x18”的情况下,“Menu Bitmap CompilationUnit”(菜单位图编译单元)被存储在“UnitData()”中。该“Menu BitmapCompilation Unit”用于存储与菜单位图有关的显示信息的类型、对象和窗口之间的相关信息,等等。
在“UnitType”为“0x80”的情况下,“End Unit”(结束单元)被存储在“UnitData()”中。该“End Unit”用于存储显示单位的结束信息。
图14A和14B是示出根据AVCHD标准的“ObjectUnit”的数据结构的示意图。在“UnitType”指示“0x15”的情况下,该“ObjectUnit()”被存储在位图单元的字段“UnitData()”中。
如图14A所示,“ObjectUnit()”在24比特长的字段“UnitDescriptior()”之后存储16比特长的“ObjectID”。然后,“ObjectUnit()”存储8比特长的字段“ObjectVersionNumber”,字段“SequenceDescriptor()”和字段“ObjectData()”。
如图14B所示,“ObjectData()”存储指示出对象数据长度的24比特长的字段“ObjectDataLength”。然后,“ObjectData()”存储指示出对象宽度的16比特长的字段“ObjectWidth”,以及指示出对象高度的16比特长的字段“ObjectHeight”。以此之后,“ObjectData()”存储指示出被转换成游程长度码的位图数据的字段“RunLengthEncodedLine()”。
因此,根据AVCHD标准,被转换成游程长度码的位图数据可被存储在覆盖位图中包括的位图单元的“ObjectUnit()”中。因此,在本发明的例子中,由位置信息处理单元171转换得到的位图数据被转换成游程长度码,并且被转换成游程长度码的位图数据被存储在“ObiectUnit()”中。因此,即使在利用不具有用于将GPS信息转换成诸如地名等等之类的位图数据的转换数据库的重放装置来执行重放的情况下,与要播放的运动图像的成像地点有关的位图数据也可与该运动图像一起被显示。
另外,例如考虑这样一种情况,即,播放一个运动图像文件,其中文本数据被记录在了MDP中,并且位图数据被记录在了覆盖位图中。例如,在利用不能显示覆盖位图但能显示MDP的数码摄像机来播放该运动图像文件的情况下,MDP中记录的文本数据能够被显示。另外,在利用不能显示MDP但能显示覆盖位图的重放装置来播放该运动图像文件的情况下,覆盖位图中记录的位图数据能够被显示。因此,文本数据被记录在了MDP中,并且位图数据被记录在了覆盖位图中,从而即使例如在运动图像文件被移动到了具有不同功能的装置的情况下也能显示任一种数据。
接下来,将参考附图详细描述文本数据被记录在根据AVCHD标准的文件管理信息中的情况。首先,将描述文本数据被记录在根据AVCHD标准的剪辑信息文件中的情况。
图15是示出根据AVCHD标准的剪辑信息文件的数据结构的示意图。
在该剪辑信息文件中,字段“type_indicator”具有32比特(8比特×4字节)的数据长度,并且是指示出该文件的文件类型是剪辑信息文件的标识符。字段“version_number”具有32比特的数据长度,并且其中描述了固定的值。
该剪辑信息文件包括块“ClipInfo()”、块“SequenceInfo()”、块“ProgramInfo()”和块“CPI()”。另外,该剪辑信息文件包括块“ClipMark()”和块“ExtensionData()”。除了块“ClipInfo()”之外,每个块利用具有32比特数据长度的相应字段指示出相应块的起始地址。这些字段是字段“SequenceInfo_start_address”、字段“ProgramInfo_start_address”、字段“CPI_start_address”、字段“ClipMark_start_address”以及字段“ExtensionData_start_address”。
字段“ExtensionData_start_address”利用从该剪辑信息文件的最前端起的相对字节数来指示出块“ExtensionData()”的起始地址。相对字节数从“0”开始。如果此字段“ExtensionData_start_address”的值为“0”,则表明在该剪辑信息文件内没有“ExtensionData()”。
块“ClipInfo()”在指示出相应起始地址的字段之后的具有96比特数据长度的区域“reserved_for_future_use”之后开始。块“ClipInfo()”用于描述与此剪辑信息文件所管理的剪辑AV流有关的信息。
块“SequenceInfo()”用于描述将其中系统时基或到达时基连续的序列作为一个块来管理的信息。这里,系统时基是系统时钟(STC),到达时基是到达时钟(ATC)。
块“ProgramInfo()”用于描述诸如以下信息:利用此剪辑信息文件管理的剪辑AV流的编码系统、剪辑AV流内的视频数据的纵横比,等等。
块“CPI()”存储与整个流文件的时间位置和空间位置之间的映射表有关的信息。注意,在块“ClipMark()”中不包括重要信息。
块“ExtensionData()”是可以存储扩展数据的区域。将参考图16来详细描述该块“ExtensionData()”。
图16是示出根据AVCHD标准的剪辑信息文件的块“ClipExtensionData()”的数据结构的示意图。
在该块“ClipExtensionData()”中,字段“type_indicator”具有32比特(8比特×4字节)的数据长度。这是指示出该块的类型是剪辑信息文件的扩展数据的标识符。
该块“ClipExtensionData()”包括块“ClipInfoExt()”、块“ProgramInfoExt()”和块“MakersPrivateData()”。各自有32比特数据长度的字段“ProgramInfoExt_start_address”和字段“MakersPrivateData_start_address”指示出相应块的起始地址。注意,块“ClipInfoExt()”在指示出相应起始地址的字段之后的具有192比特数据长度的区域“reserved_for_future_use”之后开始。
字段“MakersPrivateData_start_address”利用从该块“ClipExtensionData()”的最前端起的相对字节数来指示出块“MakersPrivateData()”的起始地址。相对字节数从“0”开始。如果此字段“MakersPrivateData_start_address”的值为“0”,则表明在该块“ClipExtensionData()”内没有块“MakersPrivateData()”。该块“MakersPrivateData()”是描述关于此剪辑信息文件的制作者的原始信息的块。注意,将参考图17来详细描述该块“MakersPrivateData()”。
图17是示出根据AVCHD标准的剪辑信息文件的块“MakersPrivateData()”的数据结构的示意图。
在该块“MakersPrivateData()”中,字段“length”具有32比特的数据长度,并且指示出从该字段“length”刚刚结束后到该块“MakersPrivateData()”结束为止的数据长度。在该字段“length”的值为“0”的情况下,表明在该“MakersPrivateData()”中没有描述信息。在该字段“length”的值为除“0”以外的值的情况下,进行if语句之后的描述。
字段“data_block_start_address”具有32比特的数据长度,并且利用从块“MakersPrivateData()”的最前端字节开始的相对字节数来指示出存储着制作者的原始信息主体的块“data_block()”的起始地址。然后,具有8比特数据长度的字段“number_of_maker_entries”经由具有24比特数据长度的字段“reserved_for_word_align”来部署。
根据下一个for语句描述了相当于利用字段“number_of_maker_entries”指示的个数的扩展数据条目。具体而言,描述了字段“maker_ID”、字段“maker_model_code”、字段“mpd_start_address”和字段“mpd_length”。
字段“maker_ID”和字段“maker_model_code”各自具有16比特的数据长度,其中描述了制作者的标识信息以及根据该制作者的型号类型的标识信息。另外,字段“mpd_start_address”和字段“mpd_length”各自具有32比特的数据长度,并且利用从该块“MakersPrivateData()”的最前端字节起的相对字节数来指示出起始地址,以及存储着扩展数据的主体的块“data_block()”的数据长度。
描述了相当于利用字段“number_of_maker_entries”指示的个数的扩展数据条目。在该描述之后,以两个字段为一组,重复任意次数地描述了具有16比特数据长度并且由任意数据串构成的字段“padding_word”。然后,描述了存储着扩展数据的主体的块“data_block()”。在块“data_block()”中存储着一条或多条扩展数据。也就是说,对于利用字段“maker_ID”和字段“maker_model_code”指示的每个制作者和每个型号,在块“data_block()”中存储着制作者的原始扩展数据。基于字段“mpd_start_address”和字段“mpd_length”从块“data_block()”中取出每条扩展数据。
在本发明的例子中,由位置信息处理单元171转换而来的文本数据被存储在块“data_block()”中。另外,在块“data_block()”中定义了位置信息结构,从而由GPS信号处理单元105计算出的位置信息可被记录在该位置信息结构中。这些数据结构例子将在图18中示出。
图18A和18B是示出根据AVCHD标准的剪辑信息文件的块“data_block()”中定义的数据结构例子的示意图。
由位置信息处理单元171转换得到的文本数据被存储在块“data_block()”中的情况下的数据结构例子在图18A中示出。例如,可以记录最多达256字节数据长度的文本数据。
由GPS信号处理单元105计算出的位置信息被存储在块“data_block()”中的情况下的数据结构例子在图18B中示出。注意,图18B所示的内容可以是与图11所示的MDP的ID“0xB0”至“0xC8”的与GPS有关的信息相对应的内容。另外,图18A所示的文本数据和图18B所示的位置信息(GPS信息)可被记录在块“data_block()”中。因此,例如,与将被记录在MDP中的GPS信息和文本数据相同的数据可被记录在剪辑信息文件中。在此情况下,例如,只有相应章节的AV流中记录的GPS信息的第一有效GPS信息(代表性GPS信息)和与之相对应的文本数据能够被记录在剪辑信息文件中。
因此,文本数据可被记录在剪辑信息文件中。因此,即使在利用没有用于将GPS信息转换成诸如地名等等之类的文本数据的转换数据库的重放装置来执行重放的情况下,与要播放的运动图像的成像地点有关的文本数据也可与该运动图像一起被显示。另外,即使在AV流被解码之前的状态中,也可显示与要播放的运动图像的成像地点有关的文本数据。另外,位置信息可与文本数据一起被记录在剪辑信息文件中。因此,即使在AV流被解码之前的情况下,也可使用与要播放的运动图像的成像重放有关的位置信息。
接下来,将描述文本数据被记录在根据AVCHD标准的播放列表文件中的情况。
图19是示出根据AVCHD标准的播放列表文件的块“ExtensionData()”的数据结构的示意图。该块“ExtensionData()”是存储着播放列表文件的扩展数据的区域。
在该块“ExtensionData()”中,字段“长度”具有32比特的数据长度,并且指示出从该字段“length”刚刚结束后到该块“ExtensionData()”结束为止的数据长度。在该字段“length”的值为“0”的情况下,表明在该“ExtensionData()”中没有描述信息。在该字段“length”的值为除“0”以外的值的情况下,进行if语句之后的描述。
字段“data_block_start_address”具有32比特的数据长度,并且利用从块“ExtensionData()”的最前端字节开始的相对字节数来指示出存储着扩展数据的块“data_block()”的起始地址。具有8比特数据长度的字段“number_of_ext_data_entries”经由具有24比特数据长度的字段“reserved_for_word_align”来部署。
根据下一个for语句描述了相当于利用字段“number_of_ext_data_entries”指示的个数的扩展数据条目。具体而言,描述了字段“ID1”、字段“ID2”、字段“ext_data_start_address”和字段“ext_data_length”。
字段“ID1”和字段“ID2”各自具有16比特的数据长度,其中描述了标识信息。另外,字段“ext_data_start_address”和字段“ext_data_length”各自具有32比特的数据长度,并且利用从存储着扩展数据的主体的块“ExtensionData()”的最前端字节起的相对字节数来指示出起始地址,以及数据长度。
描述了相当于利用字段“number_of_ext_data_entries”指示的个数的扩展数据条目。在该描述之后,以两个字段为一组,重复任意次数地描述了具有16比特数据长度并且由任意数据串构成的字段“padding_word”。然后,描述了存储着扩展数据的主体的块“data_block()”。在块“data_block()”中存储着一条或多条扩展数据。基于字段“ext_data_start_address”和字段“ext_data_length”从块“data_block()”中取出每条扩展数据。将参考图20来详细描述该块“data_block()”。
图20是示出根据AVCHD标准的块“blkPlayListMarkExt()”的数据结构的示意图。该块“blkPlayListMarkExt()”是图19所示的播放列表文件的块“ExtensionData()”中包括的块“data_block()”,并且存储与章节标记有关的扩展数据。
在该块“blkPlayListMarkExt()”中包括指示出数据长度的字段“length”和指示出章节标记数目的字段“NumberOfPlayListMarks”。在此之后,对于每个章节标记存储一个块“blkMarkExtension”。
这里,文本数据可被记录在“MarkName”和“MakersInformation”中。因此,在本发明的实施例中,由位置信息处理单元171利用位置信息转换数据库160从位置信息转换得到的文本数据被存储在“MarkName”和“MakersInformation”中。
存储在“MarkName”中的文本数据例如可被显示为章节名称。因此,例如,由位置信息处理单元171转换得到的地名的文本数据可被存储在“MarkName”中。另外,例如,不同于“MarkName”的文本数据可被存储在“MakersInformation”中。例如,位置信息处理单元171把由GPS信号处理单元105计算出的位置信息中包括的纬度和经度转换成表示纬度、经度等等的文本数据。该文本数据可被存储在“MakersInformation”中。这个表示纬度、经度等等的文本数据可被采取字符形式,例如“dd°mm′N、dd°mm′E”。
因此,文本数据可被存储在“MarkName”和“MakersInformation”中。因此,即使在利用不具有用于将GPS信息转换成诸如地名等等之类的文本数据的转换数据库的重放装置来执行重放的情况下,与要播放的运动图像的成像地点有关的文本数据也可与该运动图像一起被显示。另外,即使在AV流被解码之前的状态中,也可显示与要播放的运动图像的成像地点有关的文本数据。另外,例如,在地名的文本数据被存储在“MarkName”中并且表示纬度、经度等等的文本数据被存储在“MakersInformation”中的情况下,地名、纬度、经度等等可在另一重放装置处被显示。另外,例如,在文本数据等等被记录在剪辑信息文件和电影播放列表文件中的情况下,即使在没有AV流解码功能的重放装置处也可显示与运动图像有关的地名等等。因此,可以迅速理解运动图像的内容。
另外,在位置信息和文本数据被记录在剪辑信息文件和电影播放列表的情况下,在这些文件中的每一个中可以记录不同的信息。另外,对于对MDP、覆盖位图、剪辑信息文件和电影播放列表文件中的每一种也执行记录的情况,类似地,也可向其中每一种记录不同的信息。在此情况下,例如,可以进行一种布置,其中,对于每一帧,信息都被记录在MDP和覆盖位图中,而只有每个章节的代表性信息才被记录在剪辑信息文件和电影播放列表文件中。因此,根据本发明的实施例,可按多个层次来记录并使用位置信息、文本数据和位图数据。
接下来,将参考附图描述根据本发明一个实施例的信息记录装置100的操作。
图21是示出根据本发明一个实施例的信息记录装置100执行的运动图像记录处理的过程的流程图。在此例子中,将描述位置信息和文本数据被记录在根据AVCHD标准的MDP中的情况。
首先,判定是否已执行了运动图像记录的启动操作(步骤S901)。例如,在运动图像记录模式已被设定的状态中,判定是否接受了按压记录按钮的操作。在尚未执行运动图像记录的启动操作的情况下(步骤S901),结束运动图像记录处理的操作。
在执行了运动图像记录的启动操作的情况下(步骤S901),从成像信号处理单元102输出的数字视频数据和从音频信号处理单元104输出的数字音频数据被输入(步骤S902)。注意,步骤S902是实现本发明的特征的运动图像输入过程的例子。然后,压缩处理单元150对输入的数字视频数据和数字音频数据进行压缩和编码(步骤S903)。然后,从GPS信号处理单元105输出的位置信息被输入(步骤S904),并且位置信息处理单元171使用位置信息转换数据库160中存储的转换信息来将位置信息转换成文本数据(步骤S905)。注意,步骤S904是实现本发明的特征的位置信息获得过程的例子。
然后,所输入的位置信息和所转换的文本数据被从管理信息处理单元172输出到复用处理单元174,并且被记录在MDP中(步骤S906)。然后,其中存储了位置信息和文本数据的MDP被记录在其中已压缩并编码了数字视频数据的视频流中(步骤S907)。然后,复用处理单元174对其中记录了MDP的视频流和经过压缩和编码的音频流进行复用,以生成TS流(步骤S908)。然后,所生成的TS流被转换成运动图像文件,并且被记录在记录介质180中(步骤S909)。注意,所生成的TS流被临时存储在流缓冲器175中,并且在等于或超过预定量的数据被存储在流缓冲器175后,TS流被记录在记录介质180中。
然后,判定是否执行了运动图像记录结束操作(步骤S910)。例如,判定是否在正执行运动图像记录的状态中接受了对记录按钮的按压操作。然后,在尚未执行运动图像记录结束操作的情况下(步骤S910),处理返回到步骤S902。另一方面,在执行了运动图像记录结束操作的情况下(步骤S910)。结束运动图像记录处理的操作。
图22是示出根据本发明一个实施例的信息记录装置100执行的运动图像记录处理的过程的流程图。在此例子中,将描述位图数据被记录为根据AVCHD标准的覆盖位图流的例子。注意,此过程是图21所示的过程的修改。因此,图22所示的步骤S901至步骤S904、S909和S910是与图21所示的步骤S901至S904、S909和S910相同的过程,并且相应地这里将省略对其的描述。
从GPS信号处理单元105输出的位置信息被输入(步骤S904),并且位置信息处理单元171使用位置信息转换数据库160中存储的转换信息来将位置信息转换成位图数据(步骤S921)。然后,位置信息处理单元171生成与所转换的位图数据相对应的覆盖位图流(步骤S922)。然后,复用处理单元174对经过压缩和编码的视频流和音频流以及所生成的覆盖位图流进行复用以生成TS流(步骤S923)。
图23是示出根据本发明一个实施例的信息记录装置100执行的运动图像和运动图像管理文件的记录处理的过程的流程图。在此例子中,将描述位置信息和文本数据被记录在根据AVCHD标准的剪辑信息文件和电影播放列表文件中的例子。注意,此过程是图21所示的过程的修改。因此,图23所示的步骤S901至步骤S904、S909和S910是与图21所示的步骤S901至S904、S909和S910相同的过程,并且相应地这里将省略对其的描述。
从GPS信号处理单元105输出的位置信息被输入(步骤S904),并且管理信息处理单元172以表的格式将位置信息作为运动图像管理信息保存在管理信息保存单元173中(步骤S931),以便章节边界能够被识别。然后,复用处理单元174对经过压缩和编码的视频流和音频流进行复用以生成TS流(步骤S932)。
在运动图像记录结束操作已被执行的情况下(步骤S910),运动图像管理文件记录处理被执行(步骤S940),并且运动图像和运动图像管理文件的记录处理的操作结束。注意,将参考图24来详细描述运动图像管理文件记录处理。
图24是示出根据本发明一个实施例的信息记录装置100进行的运动图像和运动图像管理文件的记录处理的过程中的运动图像管理文件记录过程(图23所示的步骤S940中的过程)的流程图。
首先,管理信息处理单元172获得以表的形式保存在管理信息保存单元173处的位置信息(步骤S941)。然后,管理信息处理单元172从所获得的位置信息中确定作为代表性的位置信息的代表性位置信息(步骤S942)。例如,在为每个章节保存的表内的有效记录中的第一记录可被视为代表性位置信息。
然后,位置信息处理单元171使用位置信息转换数据库160中存储的转换信息来将所确定的代表性位置信息转换成文本数据(步骤S943)。注意,步骤S943是实现本发明的特征的位置信息转换过程的例子。
然后,管理信息处理单元172将所确定的代表性位置信息和转换得到的文本数据记录在剪辑信息文件和电影播放列表文件中(步骤S944)。注意,步骤S944是实现本发明的特征的运动图像管理信息生成过程的例子。然后,记录控制单元176将其中由管理信息处理单元172记录了代表性位置信息和文本数据的剪辑信息文件记录在记录介质180中(步骤S945)。然后,记录控制单元176将其中由管理信息处理单元172记录了代表性位置信息和文本数据的电影播放列表文件记录在记录介质180中(步骤S946)。注意,步骤S945和S946是实现本发明的特征的记录控制过程的例子。然后,记录控制单元176将索引文件和电影对象文件记录在记录介质180中(步骤S947)。
接下来,将参考附图详细描述位置信息以及从位置信息转换得到的位图数据或文本数据被用于创建菜单屏幕的例子。
图25是示出根据本发明一个实施例的信息记录装置300的功能配置例子的示意图。信息记录装置300包括用户接口310、系统控制单元320和记录介质180。记录介质180与图1和2所示的记录介质180相同,并且相应地被用相同的标号来指代,并且对其的描述将被省略。信息记录装置300例如可利用能够使记录介质180中存储的运动图像文件经历各种类型的图像处理的数码摄像机或个人计算机等等来实现。
用户接口310是接受用户输入的操作内容并且向系统控制单元320输出与所接受的操作内容相对应的控制信号的用户接口。在信息记录装置300中包括诸如菜单屏幕创建指令按钮等等之类的操作构件。菜单屏幕创建指令按钮是在创建与记录介质180中存储的运动图像文件有关的菜单屏幕时按压的按钮。注意,用户接口310例如可被配置为触摸面板。
系统控制单元320基于从用户接口310输出的控制信号,对于记录介质180中存储的运动图像文件,生成根据预定的运动图像记录格式的菜单屏幕。然后,系统控制单元320将所生成的菜单屏幕作为运动图像文件记录在记录介质180中。例如,根据AVCHD标准的运动图像记录格式可被用作该运动图像记录格式。系统控制单元320包括控制单元330、位置信息转换数据库160、记录介质控制单元341、流缓冲器342、分离处理单元343、位置信息处理单元345、以及管理信息处理单元344。另外,系统控制单元320包括解压缩处理单元350、压缩处理单元360、菜单屏幕背景数据存储单元371、菜单屏幕生成单元372、以及复用处理单元373。
控制单元330控制下属模块,并且执行菜单屏幕创建序列。控制单元330例如是由CPU、RAM、ROM等等构成的。另外,控制单元330根据从用户接口310输出的控制信号,基于预先存储在ROM中的程序和数据,利用RAM作为工作存储器,来控制系统控制单元320的每个单元。例如,在对菜单屏幕创建指令按钮的按压操作被用户接口310所接受的情况下,控制单元330执行控制以创建菜单屏幕。
记录介质控制单元341基于控制单元330的控制来对记录介质180执行记录或读出的控制。也就是说,记录介质控制单元341读出记录介质180中存储的运动图像文件和运动图像管理文件,向流缓冲器342输出与运动图像文件相对应的AV流,并且向管理信息处理单元344输出运动图像管理文件。另外,记录介质控制单元341将流缓冲器342中存储的AV流作为菜单运动图像文件记录在记录介质180。
例如,在对菜单屏幕创建指令按钮的按压操作被用户接口310所接受的情况下,从记录介质180中读出运动图像文件和运动图像管理文件的读出操作基于控制单元330的控制而开始。然后,菜单屏幕生成单元372所生成的菜单屏幕数据被视频编码器361进行压缩和编码,并且经过压缩和编码的菜单屏幕数据被复用处理单元373按预定的格式进行分组化和复用。然后,所生成的菜单屏幕的数据流经由流缓冲器342被输送到记录介质控制单元341,并且菜单运动图像文件被记录在记录介质180中。
流缓冲器342是临时存储从记录介质控制单元341输出的运动图像文件的数据流的缓冲器,其中所存储的运动图像文件的数据流被顺序地输送到分离处理单元343。另外,流缓冲器342临时存储从复用处理单元373输出的数据流,其中所存储的数据流基于记录介质控制单元341的控制被记录在记录介质180中。
分离处理单元343把从流缓冲器342提供来的数据流分离成视频流、音频流、位图流和专用流。然后,分离处理单元343将分离出的视频流输出到解压缩处理单元350,并且将分离出的位图流和专用流输出到位置信息处理单元345。
管理信息处理单元344获得从记录介质控制单元341输出的运动图像管理文件中包括的位置信息和与地点有关的文本数据和位图数据。然后,管理信息处理单元344将所获得的位置信息、文本数据和位图数据输出到位置信息处理单元345。例如,在使用根据AVCHD标准的运动图像记录格式作为运动图像记录格式的情况下,获得播放列表文件和剪辑信息文件中包括的位置信息和与地点有关的文本数据。
位置信息处理单元345基于从分离处理单元343输出的位图流和专用流来获得与地点有关的文本数据或位图数据。例如,在使用根据AVCHD标准的运动图像记录格式作为运动图像记录格式的情况下,获得位图流中包括的位图数据。另外,位置信息处理单元345获得从管理信息处理单元344输出的位置信息、文本数据和位图数据。然后,位置信息处理单元345利用位置信息转换数据库160来将所获得的位置信息转换成与地点有关的文本数据或位图数据。另外,位置信息处理单元345将所获得的与地点有关的文本数据或位图数据或者转换得到的与地点有关的文本数据或位图数据输出到菜单屏幕生成单元372。注意,位置信息转换数据库160与图2所示的相同,因此向其附加相同的标号,并且在这里将省略对其的描述。
解压缩处理单元350包括视频解码器351。视频解码器351按照预定的解码系统对从分离处理单元343输出的视频流进行解码。另外,解压缩处理单元350对构成经过解码的视频流的每个章节的代表性图像进行解码,并且将该代表性图像输出到菜单屏幕生成单元372。例如,构成视频流的每个章节的最前端的I个图片可被选择为该代表性图像。
菜单屏幕背景数据存储单元371存储由菜单屏幕生成单元372生成的菜单屏幕的背景屏幕,并且将所存储的背景屏幕提供给菜单屏幕生成单元372。该背景屏幕例如是包括除了图26所示的菜单屏幕380的地名387至392和代表性图像381至386的区域之外的区域的屏幕。
菜单屏幕生成单元372生成与从记录介质180读出的运动图像文件有关的菜单屏幕,并且将所生成的菜单屏幕输出到压缩处理单元360。例如,菜单屏幕生成单元372把从解压缩处理单元350输出的代表性图像合成到从菜单屏幕背景数据存储单元371提供的背景屏幕的代表性图像显示区域。另外,菜单屏幕生成单元372把从位置信息处理单元345输出的与地点有关的文本数据或位图数据合成到从菜单屏幕背景数据存储单元371提供的背景屏幕的地点显示区域。然后,菜单屏幕生成单元372向压缩处理单元360输出其中合成了代表性图像以及文本数据或位图数据的菜单屏幕。
压缩处理单元360包括视频编码器361。视频编码器361按照预定的压缩编码系统对从菜单屏幕生成单元372输出的菜单屏幕的数字视频数据进行压缩和编码,并且随后将经过压缩和编码的数字视频数据作为视频流输送到复用处理单元373。
复用处理单元373按照预定的系统对从压缩处理单元360输出的视频流进行复用,以将其作为一个AV流输出。然后,所复用的AV流被输出到流缓冲器342。然后,流缓冲器342中存储的数据流被记录介质控制单元341作为菜单运动图像文件记录在记录介质180中。
图26是示出根据本发明一个实施例的菜单屏幕生成单元372所生成的菜单屏幕的例子的示意图。菜单屏幕380是在一个屏幕上显示六个代表性图像的菜单屏幕。也就是说,菜单屏幕380是这样一个屏幕,其中,代表性图像381至386以及与对应于它们的地点有关的字符387至392被合成在菜单屏幕背景数据存储单元371中存储的菜单屏幕的背景屏幕上。代表性图像381至386是构成记录介质180中存储的运动图像文件的章节的代表性图像。另外,字符387至392是与对应于代表性图像381至386的地点有关的文本数据或位图数据。该例子例示了代表性图像和与代表性图像相对应的字符被合成的例子,但是,例如,在符号标记被存储为位图数据的情况下,代表性图像和与代表性图像相对应的符号标记可被合成。因此,其中合成了与地点有关的文本数据或位图数据的菜单屏幕被预先生成并存储,从而,例如,即使在利用不具有用于将GPS信息转换成诸如地点等等之类的数据的转换数据库的重放装置来执行重放的情况下,也可以显示包括与地点有关的字符的运动图像列表屏幕。另外,即使在AV流被解码之前的状态中,也可以显示包括与地点有关的字符的运动图像列表屏幕。
接下来,将参考附图详细描述对运动图像文件或运动图像管理文件中记录的位图数据或文本数据进行播放的例子。
图27是示出根据本发明一个实施例的重放装置400的功能配置例子的框图。重放装置400包括显示控制单元401、显示单元402、音频控制单元403、音频输出单元404、用户接口410、系统控制单元420、以及记录介质180。记录介质180与图1和2所示的记录介质180相同,因此向其附加相同的标号,并且在这里将省略对其的描述。重放装置400例如可以利用诸如个人计算机之类的能够生成由诸如数码摄像机等等之类的成像装置记录的运动图像文件的重放装置来实现。
显示控制单元401执行控制以基于从系统控制单元420输出的数字视频数据来在显示单元402上显示运动图像等等。例如,在来自系统控制单元420的菜单屏幕的数字视频数据被输出的情况下,显示控制单元401将该菜单屏幕显示在显示单元402上。
显示单元402基于来自显示控制单元401的控制,显示与记录介质180中存储的运动图像文件相对应的运动图像和菜单屏幕等等。显示单元402例如可以利用个人计算机的显示器或电视机来实现。
音频控制单元403执行控制以基于从系统控制单元420输出的数字音频数据来将音频输出到音频输出单元404。
音频输出单元404基于来自音频控制单元403的控制来输出与记录介质180中存储的运动图像文件相对应的运动图像的音频信息。音频输出单元404例如可以利用扬声器来实现。
用户接口410是接受用户输入的操作内容并且向系统控制单元420输出与所接受的操作内容相对应的控制信号的用户接口。例如,在重放装置400中包括诸如运动图像重放模式设定/取消按钮以及重放按钮之类的操作构件。运动图像重放模式设定/取消按钮是在设定或取消使能重放运动图像的运动图像重放模式时按压的按钮。重放按钮是在运动图像重放模式被设定的情况下在开始或结束运动图像的重放时按压的按钮。注意,用户接口410例如可被配置为触摸面板。
系统控制单元420基于从用户接口410输出的控制信号来执行对运动图像等等的重放控制。注意,将参考图28来详细描述系统控制单元420。
图28是示出根据本发明一个实施例的系统控制单元420的功能配置例子的框图。系统控制单元420包括位置信息转换数据库160、控制单元430、读出控制单元441、流缓冲器442、以及分离处理单元443。另外,系统控制单元420包括管理信息处理单元444、位置信息处理单元445、屏幕图形生成单元446、解压缩处理单元450、以及数据输出单元460。
控制单元430控制下属模块,并且执行运动图像重放序列。控制单元430例如是由CPU、RAM、ROM等等构成的。另外,控制单元430根据从用户接口410输出的控制信号,基于预先存储在ROM中的程序和数据,利用RAM作为工作存储器,来控制系统控制单元420的每个单元。例如,在对运动图像重放模式设定/取消按钮的按压操作被用户接口410所接受的情况下,控制单元430执行控制以设定运动图像重放模式。另外,如果在运动图像重放模式已被设定的状态中对运动图像重放模式设定/取消按钮的按压操作已被用户接口410所接受,控制单元430则执行控制以播放运动图像。
读出控制单元441基于控制单元430的控制来执行控制以读出记录介质180中存储的运动图像文件和运动图像管理文件。然后,读出控制单元441将与所读取的运动图像文件相对应的AV流输出到流缓冲器442,并且将运动图像管理文件输出到管理信息处理单元444。例如,如果在运动图像重放模式已被设定的状态中对重放按钮的按压操作被用户接口410所接受,则从记录介质180读出运动图像文件和运动图像管理文件的读出操作基于控制单元430的控制而开始。
流缓冲器442是临时存储从读出控制单元441输出的运动图像文件的AV流的缓冲器,其中,所存储的运动图像文件的AV流被顺序地输送到分离处理单元443。
分离处理单元443把从流缓冲器442提供来的AV流分离成视频流、音频流、位图流和专用流。然后,分离处理单元443将分离出的视频流输出到450,并且将分离出的位图流和专用流输出到位置信息处理单元445。
管理信息处理单元444获得从读出控制单元441输出的运动图像管理文件中包括的位置信息以及与地点有关的文本数据和位图数据。然后,管理信息处理单元444将所获得的位置信息、文本数据和位图数据输出到位置信息处理单元445。例如,在使用根据AVCHD标准的运动图像记录格式作为运动图像记录格式的情况下,获得播放列表文件和剪辑信息文件中包括的位置信息和与地点有关的文本数据。
位置信息处理单元445基于从分离处理单元443输出的位图流和专用流来获得与地点有关的文本数据或位图数据。例如,在使用根据AVCHD标准的运动图像记录格式作为运动图像记录格式的情况下,获得与位图流相对应的位图数据。另外,位置信息处理单元445利用位置信息转换数据库160把从管理信息处理单元444输出的位置信息转换成与地点有关的文本数据或位图数据。另外,位置信息处理单元445把从管理信息处理单元444输出的与地点有关的文本数据或位图数据或者转换得到的与地点有关的文本数据或位图输出到屏幕图形生成单元446。注意,位置信息转换数据库160与图2所示的相同,因此向其附加相同的附图标记,并且这里将省略对其的描述。
解压缩处理单元450包括视频解码器451和音频解码器452。视频解码器451按照预定的解码系统对从分离处理单元443输出的视频流进行解码,并且将解码的数字视频数据输出到运动图像输出单元461。音频解码器452按照预定的解码系统对从分离处理单元443输出的音频流进行解码,并且将解码的数字音频数据输出到音频输出单元462。
屏幕图形生成单元446生成在播放从记录介质180读出的运动图像文件时将显示在显示单元402上的诸如菜单屏幕等等之类的图形,并且将所生成的图形输出到数据输出单元460。例如,屏幕图形生成单元446把从位置信息处理单元445输出的与地点有关的文本数据或位图数据合成到运动图像列表屏幕。将参考图29来详细描述该运动图像列表屏幕的显示例子。
数据输出单元460包括运动图像输出单元461、音频输出单元462和图形输出单元463。运动图像输出单元461把从视频解码器451输出的数字视频数据输出到显示控制单元401。音频输出单元462把从音频解码器452输出的数字音频数据输出到音频控制单元403。图形输出单元463把从屏幕图形生成单元446输出的图形输出到显示控制单元401。
图29A和29B是示出根据本发明一个实施例的重放装置400所显示的显示屏幕的显示例子的示意图。图29A示出了这样一个例子,其中,作为指示出运动图像文件的指示符,指示出与该运动图像文件有关的地点的字符和与该地点有关的符号标记被同时显示。注意,假定指示出地点的字符已被记录为文本数据,并且与地点有关的符号已被记录为位图数据。另外,这种数据可被记录在运动图像文件或运动图像管理文件中。例如,与地点有关的符号标记501至506被显示,并且州名511至516被显示为指示出与符号标记501至506相对应的地点的字符。在图29A所示的例子中,例如,作为州名的纽约511和指示出作为与纽约有关的符号标记的自由女神像的图像501作为指示出在纽约记录的运动图像文件的指示符被显示。另外,例如,在用户接口410接受到利用光标510来点击图像501或纽约511的操作输入的情况下,与图像501或纽约511相对应的运动图像文件的重放开始。
图29B示出了基于运动图像管理文件中存储的位置信息等等为每个区域生成的索引屏幕的显示例子。例如,显示了重放屏幕520,其中显示了纽约索引屏幕、新泽西索引屏幕和宾夕法尼亚索引屏幕之一。图29B所示的纽约索引屏幕530是其中显示出在纽约记录的运动图像文件的列表的屏幕。例如,在用户接口410接受到利用光标510来点击部署在纽约索引屏幕上部的新泽西附签540的操作输入的情况下,新泽西索引屏幕被显示。另外,在纽约索引屏幕530上显示的图像521至526例如是从相应的运动图像文件中提取出的代表性缩略图图像。另外,例如,在用户接口410接受到利用光标510来点击图像521或布鲁克林531的操作输入的情况下,与图像521或布鲁克林531相对应的运动图像文件的重放开始。
注意,在本发明的上述实施例中,迄今为止是在假定信息记录装置100、300和400是不同装置的情况下进行描述的,但是本发明的上述实施例也可利用具有这些功能配置的同一装置来实现。
如上所述,根据本发明的以上实施例,即使在运动图像文件被移动到另一个重放装置的情况下,也可显示与该运动图像的成像地点有关的文本数据或位图数据。例如,即使在利用既不具有用于将GPS信息转换成诸如地名等等的位图数据的转换数据库也不具有转换地图的重放装置来执行重放的情况下,也可显示该文本数据或位图。
另外,根据本发明的以上实施例,即使在AV流被解码之前的状态中,也可显示与要播放的运动图像的成像地点有关的文本数据或位图。也就是说,可以快速地理解要播放的运动图像的内容。另外,例如,在运动图像文件被移动到不具有可解码AV流的解码器的重放装置的情况下,可以显示与该运动图像的成像地点有关的文本数据或位图。
注意,在本发明的以上实施例中,已经描述了基于GPS信号来计算位置信息的情况,但是也可通过另一种位置信息获得方法来获得位置信息。例如,可以进行一种布置,其中,利用存在于附近的无线LAN(局域网)的接入点信息来得出位置信息,并且使用该位置信息。
另外,本发明的以上实施例可被应用到诸如蜂窝电话等等之类的能够用来获得位置信息并且记录运动图像的其他信息记录装置。
注意,如上所述,本发明的上述实施例结合本发明的特征解释了实现本发明的例子。但是,本发明并不限于以上实施例,在不脱离本发明的实质的情况下可以进行各种修改。
另外,在以上实施例中描述的过程可被当作具有这些过程系列的方法,或者可被当作通过存储程序的记录介质而使计算机执行这些过程序列的程序。该记录介质的例子包括CD(致密盘)、MD(袖珍盘)、DVD(数字多功能盘)、存储卡以及蓝光盘(注册商标)。
本申请包含与2008年8月11日向日本特许厅提交的日本在先专利申请JP 2008-206955中公开的内容相关的主题,特此通过引用将该申请的全部内容合并到本文中。
本领域的技术人员应当理解,取决于设计要求和其他因素,可以进行各种修改、组合、子组合和变更,只要它们处于所附权利要求或其等同物的范围之内。

Claims (11)

1.一种信息记录装置,包括:
运动图像输入单元,被配置为输入运动图像;
位置信息获得单元,被配置为获得在所述运动图像被输入时的位置信息;
位置信息转换单元,被配置为将所述获得的位置信息转换成与利用该位置信息确定的地点有关的位图数据和文本数据中的至少一种;
运动图像管理信息生成单元,被配置为生成运动图像管理信息,该运动图像管理信息是包括所述转换得到的位图数据和文本数据中的至少一种的信息,该运动图像管理信息用于管理所述输入的运动图像;以及
记录控制单元,被配置为将所述生成的运动图像管理信息与所述运动图像相关联地记录为运动图像管理文件。
2.根据权利要求1所述的信息记录装置,其中所述位置信息转换单元将所述获得的位置信息转换成与利用该位置信息确定的地点有关的文本数据;
并且其中所述运动图像管理信息生成单元通过将所述转换得到的文本数据包括在根据AVCHD标准的剪辑信息文件中来生成所述运动图像管理信息。
3.根据权利要求2所述的信息记录装置,其中所述运动图像管理信息生成单元通过将所述获得的位置信息和对应于该位置信息的所述文本数据包括在所述剪辑信息文件中来生成所述运动图像管理信息。
4.根据权利要求3所述的信息记录装置,其中所述运动图像管理信息生成单元通过在包含于所述剪辑信息文件中的制作者专用数据中定义位置信息结构,且将所述获得的位置信息记录在所述位置信息结构中,来生成所述运动图像管理信息。
5.根据权利要求2所述的信息记录装置,其中所述运动图像管理信息生成单元通过将所述文本数据包括在包含于所述剪辑信息文件中的制作者专用数据中来生成所述运动图像管理信息。
6.根据权利要求2所述的信息记录装置,其中所述运动图像管理信息生成单元通过为组成所述输入的运动图像的每一章节确定至少一条所述获得的位置信息作为代表性位置信息,且将与该确定的代表性位置信息相对应的所述文本数据包括在每一章节的所述剪辑信息文件中,来生成所述运动图像管理信息。
7.根据权利要求2所述的信息记录装置,其中所述运动图像管理信息生成单元通过将所述文本数据包括在根据AVCHD标准的电影播放列表文件中来生成所述运动图像管理信息。
8.根据权利要求7所述的信息记录装置,其中所述运动图像管理信息生成单元通过将所述文本数据至少包括在包含于所述电影播放列表文件中的扩展数据的播放列表标记扩展的标记名或制作者信息中,来生成所述运动图像管理信息。
9.一种成像装置,包括:
成像单元,被配置为对被摄物成像以生成成像运动图像;
位置信息获得单元,被配置为获得在所述成像运动图像被生成时的位置信息;
位置信息转换单元,被配置为将所述获得的位置信息转换成与利用该位置信息确定的地点有关的位图数据和文本数据中的至少一种;
运动图像管理信息生成单元,被配置为生成运动图像管理信息,该运动图像管理信息是包括所述转换得到的位图数据和文本数据中的至少一种的信息,该运动图像管理信息用于管理所述生成的运动图像;以及
记录控制单元,被配置为将所述生成的运动图像管理信息与所述成像运动图像相关联地记录为运动图像管理文件。
10.一种信息记录方法,包括以下步骤:
输入运动图像;
获得在所述运动图像被输入时的位置信息;
将所述获得的位置信息转换成与利用该位置信息确定的地点有关的位图数据和文本数据中的至少一种;
生成运动图像管理信息,该运动图像管理信息是包括所述转换得到的位图数据和文本数据中的至少一种的信息,该运动图像管理信息用于管理所述输入的运动图像;以及
将所述生成的运动图像管理信息与所述运动图像相关联地记录为运动图像管理文件。
11.一种使计算机执行以下步骤的程序:
输入运动图像;
获得在所述运动图像被输入时的位置信息;
将所述获得的位置信息转换成与利用该位置信息确定的地点有关的位图数据和文本数据中的至少一种;
生成运动图像管理信息,该运动图像管理信息是包括所述转换得到的位图数据和文本数据中的至少一种的信息,该运动图像管理信息用于管理所述输入的运动图像;以及
将所述生成的运动图像管理信息与所述运动图像相关联地记录为运动图像管理文件。
CN200910163316.1A 2008-08-11 2009-08-11 信息记录装置、成像装置和信息记录方法 Expired - Fee Related CN101650960B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008206955 2008-08-11
JP2008206955A JP4720873B2 (ja) 2008-08-11 2008-08-11 情報記録装置、撮像装置、情報記録方法およびプログラム
JP2008-206955 2008-08-11

Publications (2)

Publication Number Publication Date
CN101650960A true CN101650960A (zh) 2010-02-17
CN101650960B CN101650960B (zh) 2013-02-13

Family

ID=41479270

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200910163316.1A Expired - Fee Related CN101650960B (zh) 2008-08-11 2009-08-11 信息记录装置、成像装置和信息记录方法

Country Status (4)

Country Link
US (1) US20100034517A1 (zh)
EP (1) EP2157581B1 (zh)
JP (1) JP4720873B2 (zh)
CN (1) CN101650960B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103516987A (zh) * 2013-10-09 2014-01-15 哈尔滨工程大学 一种高速图像采集及实时存储系统

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110050942A1 (en) * 2009-08-28 2011-03-03 Nikon Corporation Image file data structure, image file generation device, image file generation method, and electronic camera
JP5753418B2 (ja) * 2010-05-31 2015-07-22 キヤノン株式会社 画像処理装置
JP2013055569A (ja) * 2011-09-06 2013-03-21 Sony Corp 撮像装置、情報処理装置、それらの制御方法、および、プログラム
US20130188922A1 (en) * 2012-01-23 2013-07-25 Research In Motion Limited Multimedia File Support for Media Capture Device Position and Location Timed Metadata
JP6358113B2 (ja) * 2015-01-30 2018-07-18 株式会社Jvcケンウッド 記録装置及び多重化方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6625383B1 (en) * 1997-07-11 2003-09-23 Mitsubishi Denki Kabushiki Kaisha Moving picture collection and event detection apparatus
JP4792686B2 (ja) * 2000-02-07 2011-10-12 ソニー株式会社 画像処理装置及び画像処理方法並びに記録媒体
JP3910794B2 (ja) * 2000-11-14 2007-04-25 株式会社エヌ・ティ・ティ・ドコモ 映像検索ファイル作成方法およびホームページ更新方法
MXPA03006920A (es) * 2001-02-02 2003-11-18 Matsushita Electric Ind Co Ltd Aparato y metodo de grabacion, aparato y metodo de reproduccion, medio de grabacion, programa y medio de grabacion leible por computadora.
JP2002342357A (ja) * 2001-05-18 2002-11-29 Kenichiro Ishijima パーソナル映像データベース生成装置、画像処理装置、パーソナルデータベース生成方法、プログラム及び記憶媒体
JP2005051278A (ja) * 2001-07-30 2005-02-24 Matsushita Electric Ind Co Ltd 映像記録装置
JP2006066014A (ja) * 2004-08-30 2006-03-09 Sony Corp 画像情報記録装置および画像情報表示装置
JP4393454B2 (ja) * 2005-12-27 2010-01-06 株式会社東芝 情報提示システム、情報提示方法、情報提示装置
US8068160B2 (en) * 2006-02-20 2011-11-29 Panasonic Corporation Imaging apparatus, printing apparatus, printing system, printing method, display system, display apparatus, and display method
JP4784371B2 (ja) * 2006-04-06 2011-10-05 ソニー株式会社 記録装置、記録方法および記録プログラム
JP4229143B2 (ja) * 2006-06-23 2009-02-25 ソニー株式会社 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
JP2008028440A (ja) * 2006-07-18 2008-02-07 Hitachi Ltd 映像記録装置
JP4293209B2 (ja) * 2006-08-02 2009-07-08 ソニー株式会社 記録装置および方法、撮像装置、再生装置および方法、並びにプログラム
JP2008047962A (ja) * 2006-08-10 2008-02-28 Sony Corp 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
JP2008067117A (ja) * 2006-09-08 2008-03-21 Hitachi Ltd 映像記録方法、装置、媒体
WO2008032739A1 (fr) * 2006-09-12 2008-03-20 Panasonic Corporation Dispositif de formation d'image de contenu
JP4664263B2 (ja) * 2006-09-29 2011-04-06 富士フイルム株式会社 撮像装置及び画像再生表示装置
JP4779921B2 (ja) * 2006-10-05 2011-09-28 ソニー株式会社 データ処理装置及びデータ処理方法、並びにコンピュータ・プログラム
JP4321628B2 (ja) * 2007-05-31 2009-08-26 ソニー株式会社 記憶装置、記憶方法および記憶プログラム、ならびに、データ処理装置、データ処理方法およびデータ処理プログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103516987A (zh) * 2013-10-09 2014-01-15 哈尔滨工程大学 一种高速图像采集及实时存储系统

Also Published As

Publication number Publication date
EP2157581B1 (en) 2012-05-16
JP2010045506A (ja) 2010-02-25
CN101650960B (zh) 2013-02-13
JP4720873B2 (ja) 2011-07-13
US20100034517A1 (en) 2010-02-11
EP2157581A2 (en) 2010-02-24
EP2157581A3 (en) 2010-03-31

Similar Documents

Publication Publication Date Title
KR100780153B1 (ko) 기록 장치 및 방법, 재생 장치 및 방법, 및 기록 매체
CN101075462B (zh) 记录/再现/编辑装置、方法
JP4264617B2 (ja) 記録装置および方法、再生装置および方法、記録媒体、プログラム、並びに記録媒体
CN100334642C (zh) 记录方法和装置、再现方法和装置及成像装置
JP4168837B2 (ja) 情報生成装置、記録装置、再生装置、記録再生システムおよびその方法ならびにプログラム
CN101315804B (zh) 编辑装置和方法以及数据处理装置和方法
JP2007082088A (ja) コンテンツとメタデータを記録、再生する装置、コンテンツ処理装置、プログラム
CN101650960B (zh) 信息记录装置、成像装置和信息记录方法
TWI410962B (zh) A recording device, a recording method and a recording program, and an imaging device, an imaging method, and an imaging program
CN101373624A (zh) 用于转换信息的设备、方法和程序
CN101650961B (zh) 信息记录装置、成像装置、信息记录方法和程序
CN101631255B (zh) 记录媒体的信息再现方法
JP2003333529A (ja) データ送信装置、データ受信装置、記録媒体、データ送信方法、およびデータ受信方法
CN102084659A (zh) 数据结构和记录介质、播放设备、播放方法、程序和程序存储介质
JP5045254B2 (ja) 記録装置、撮像装置、プレイリスト生成方法およびプログラム
TW201334533A (zh) 資訊處理裝置,資訊處理方法,和程式
JP3621579B2 (ja) 画像記録再生装置
JP4366609B2 (ja) 記録方法、記録装置、再生方法、再生装置、記録再生装置および記録再生方法
CN100492511C (zh) 高清音像hvd光盘实现的方法
JP4366610B2 (ja) 記録方法、記録装置、再生方法、再生装置および撮像装置
JP4821689B2 (ja) 情報処理装置および情報処理方法、プログラム、並びに、プログラム格納媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130213

Termination date: 20150811

EXPY Termination of patent right or utility model