CN1747544A - 记录装置、记录方法、再生装置、再生方法、及程序 - Google Patents

记录装置、记录方法、再生装置、再生方法、及程序 Download PDF

Info

Publication number
CN1747544A
CN1747544A CNA2005101025384A CN200510102538A CN1747544A CN 1747544 A CN1747544 A CN 1747544A CN A2005101025384 A CNA2005101025384 A CN A2005101025384A CN 200510102538 A CN200510102538 A CN 200510102538A CN 1747544 A CN1747544 A CN 1747544A
Authority
CN
China
Prior art keywords
data
thumbnail
file
motion picture
frame image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2005101025384A
Other languages
English (en)
Other versions
CN100461845C (zh
Inventor
桑田昌行
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN1747544A publication Critical patent/CN1747544A/zh
Application granted granted Critical
Publication of CN100461845C publication Critical patent/CN100461845C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/326Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is a video-frame or a video-field (P.I.P.)
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/781Television signal recording using magnetic recording on disks or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/907Television signal recording using static stores, e.g. storage tubes or semiconductor memories
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/806Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
    • H04N9/8063Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

本发明提供了一种在记录介质上记录数据的记录装置。该装置包括:输入部,用于输入运动画面数据;编码部,用于对通过输入部输入的运动画面数据进行编码;存储部,使用第一存储区存储帧图像数据,即,包含在由编码部编码的运动画面数据中的任何帧图像数据,并使用第二存储区存储除帧图像数据以外的运动画面数据;记录部,用于将由存储部存储的运动画面数据记录到记录介质中;解码部,用于对由编码部编码的运动画面数据进行解码;以及缩略图生成部,用于基于帧图像数据生成缩略图。

Description

记录装置、记录方法、 再生装置、再生方法、及程序
相关申请的交叉参考
本发明包含涉及于2004年9月8日向日本专利局提交的日本专利申请JP 2004-260536的主旨,其全部内容结合与此作为参考。
技术领域
本发明涉及一种记录装置、记录方法、再生装置、再生方法、及程序,更特别地,涉及一种能够快速显示图像的记录装置、记录方法、再生装置、再生方法、及程序。
背景技术
当记录装置在记录介质上记录AV(音频视频)流文件时,举例来说,记录装置可将AV数据编码成MPEG格式记录到记录介质上(例如,参见JP-A第111963/2001号)。
关于另一个例子,提供了这样一种再生装置,用于再生以MPEG(运动图像专家组)1标准编码并记录在记录介质上的运动画面文件。该再生装置根据起始部分分析运动画面文件,从而对第一视频帧进行解码,并将其显示在显示部上。
还提供了这样一种再生装置,用来再生以MP4文件格式(由MPEG4 part 14定义的文件格式)标准为基础编码并记录在记录介质上的AV流文件(运动画面文件)。该再生装置从AV流文件中读出采样表(sample table)(MOOV),以分析第一视频帧的位置。然后该再生装置从AV流文件中读出第一视频帧,对其进行解码,并将其显示在显示部上。因此,需要花费时间来将相应于第一视频帧的图像显示到显示部上。
例如,在选择了以MP4文件格式标准为基础进行编码的AV流文件之后,该再生装置可以在读取AV流文件的同时显示诸如“访问进行中”的信息。然而,等待时间会使用户感到厌烦。
当选定了AV流文件后,再生装置可以显示例如缩略图的典型图像。当指定进行再生时,再生装置可以重新读取相应于该缩略图的AV流文件,并开始分析该AV流文件。然而,在这种情况下,先指定再生然后开始分析同样将花费时间。
本发明已经考虑到前面所述的问题。期望能够快速显示图像。
发明内容
本发明的一个实施例致力于一种记录装置,包括:输入部,用于输入运动画面数据;编码部,用于对通过输入部输入的运动画面数据进行编码;存储部,使用第一存储区存储帧图像数据,即,包含在由编码部编码的运动画面数据中的任何帧图像数据,并使用第二存储区存储除帧图像数据以外的运动画面数据;记录部,用于将由存储部存储的运动画面数据记录在记录介质上;解码部,用于对由编码部编码的运动画面数据进行解码;以及缩略图生成部,用于基于帧图像数据生成缩略图。记录部将存储在第一存储区中的帧图像数据与存储在第二存储区中的除上述帧图像数据以外的运动画面数据一起记录为运动画面文件。解码部对存储在第一存储区中的帧图像数据进行解码。缩略图生成部基于由解码部解码的帧图像数据生成缩略图数据。记录部由缩略图生成部生成的缩略图数据形成缩略图文件,并将该缩略图文件与已记录的运动画面文件关联记录。
进一步提供了压缩部,用于以用于静止画面处理的格式来压缩由缩略图生成部生成的缩略图数据。记录部可以将由压缩部压缩的缩略图数据与已记录的运动画面文件关联记录。
帧图像数据相当于运动画面数据中的起始帧图像数据。
编码部可以基于MP4文件格式标准对运动画面数据进行编码。解码部可以基于MP4文件格式标准对经过编码的运动画面数据进行解码。
本发明的另一实施例致力于一种记录方法,包括:输入步骤,输入运动画面数据;编码步骤,对通过输入步骤的处理输入的运动画面数据进行编码;第一存储控制步骤,控制存储,使得存储部的第一存储区存储帧图像数据,即,包含在通过编码步骤的处理编码的运动画面数据中的任何帧图像数据;第二存储控制步骤,用于控制存储,使得存储部的第二存储区存储通过编码步骤的处理编码的、除存储于第一存储区的帧图像数据以外的运动画面数据;第一记录控制步骤,控制记录,从而将存储在第一存储区中的帧图像数据与存储在第二存储区中除上述帧图像数据以外的运动画面数据一起作为运动画面文件记录到记录介质中;解码步骤,对存储在第一存储区中的帧图像数据进行解码;缩略图生成步骤,基于通过解码步骤中的处理解码的帧图像数据生成缩略图数据;以及第二记录控制步骤,控制记录,从而由通过缩略图生成步骤中的处理生成的缩略图数据形成缩略图文件,并将该缩略图数据与已记录的运动画面文件关联记录。
本发明的另一实施例致力于一种使计算机执行处理的第一程序,该处理包括:输入步骤,输入运动画面数据;编码步骤,对通过输入步骤的处理输入的运动画面数据进行编码;第一存储控制步骤,控制存储,使得存储部的第一存储区存储帧图像数据,即,包含在通过编码步骤的处理编码的运动画面数据中的任何帧图像数据;第二存储控制步骤,控制存储,使得存储部的第二存储区存储通过编码步骤的处理编码的、除存储于第一存储区的帧图像以外的运动画面数据;第一记录控制步骤,控制记录,从而将存储在第一存储区中的帧图像数据与存储在第二存储区中除上述帧图像数据以外的运动画面数据一起作为运动画面文件记录到记录介质中;解码步骤,对存储在第一存储区中的帧图像数据进行解码;缩略图生成步骤,基于通过解码步骤中的处理解码的帧图像数据生成缩略图数据;以及第二记录控制步骤,控制记录,从而由通过缩略图生成步骤中的处理生成的缩略图数据形成缩略图文件,并将该缩略图数据与已记录的运动画面文件关联记录。
在上述实施例中,进行如下设置。对输入的运动画面数据进行编码。存储部的第一存储区存储经过编码的运动画面数据中的所有帧图像数据。存储部的第二存储区存储其余的运动画面数据。第一存储区中的帧图像数据及第二存储区中的运动画面数据合并形成随后存储于记录介质中的运动画面文件。进一步对第一存储区中的帧图像数据进行解码,生成缩略图数据。缩略图与运动画面文件关联记录在记录介质中。
本发明的另一实施例致力于一种再生装置,包括:读取部,用于从记录介质中读取运动画面文件及与运动画面文件相关联的缩略图文件;以及显示控制部,用于控制显示部,从而显示基于由读取部读取的缩略图文件的缩略图及基于运动画面文件的运动画面。当选定运动画面文件时,读取部读取与运动画面文件关联的缩略图文件。显示控制部控制显示部,从而显示基于由读取部读取的缩略图文件的缩略图。读取部进一步读取运动画面文件。当读取部已经完成运动画面文件的起始帧的读取后,显示控制部控制显示部,从而显示基于运动画面文件的运动画面而不是显示在显示部上的缩略图。
进一步提供了:解压缩部,用于对缩略图文件的压缩缩略图数据进行解压缩;以及解码部,用于对运动画面文件的编码运动画面数据进行解码。当选定运动画面文件时,读取部读取与运动画面文件关联的缩略图文件。解压缩部对由读取部读取的缩略图文件的压缩缩略图数据进行解压缩。显示控制部控制显示部,从而显示基于由解压缩部解压的缩略图数据的缩略图。读取部进一步读取运动画面文件。解码部对由读取部读取的运动画面文件的编码运动画面数据进行解码。当解码部已经完成运动画面数据的解码时,显示控制部控制显示部,从而显示基于运动画面数据的运动画面而不是显示在显示部上的缩略图。
缩略图数据可以相应于运动画面文件中的起始帧图像数据。
缩略图数据可以相应于运动画面文件中的起始帧图像数据。进一步提供了:解压缩部,用于对缩略图文件的压缩缩略图数据解压;以及解码部,用于对运动画面文件的编码运动画面数据解码。当选定运动画面文件时,读取部读取与运动画面文件关联的缩略图文件。解压缩部对从读取部读取的缩略图文件的压缩缩略图数据进行解压缩。显示控制部控制显示部,从而显示基于由解压缩部解压的缩略图数据的缩略图。读取部进一步读取运动画面文件中的起始帧图像数据。解码部对由读取部读取的运动画面文件中经过编码的起始帧图像数据进行解码。当解码部已经完成起始帧图像数据的解码时,显示控制部控制显示部,从而显示基于起始帧图像数据的图像而不是显示在显示部上的缩略图。当显示控制部使显示部显示基于运动画面文件中的起始帧图像数据的图像,并且随后指示再生运动画面文件时,读取部顺序读取运动画面文件中第二及随后的帧图像数据。解码部顺序地对由读取部读取的运动画面文件中经过编码的第二及随后的帧图像数据进行解码。显示控制部顺序控制显示部,从而显示基于运动画面文件中由解码部解码的第二及随后的帧图像数据的运动画面。
包含于记录在记录介质上的运动画面文件中的运动画面数据可以根据MP4文件格式标准进行编码。解码部可以基于MP4文件格式标准对经过编码的运动画面数据进行解码。
本发明的另一个实施例致力于一种再生方法,包括:第一读取步骤,当选定运动画面文件时,从记录介质中读取与运动画面文件关联的缩略图文件;第一显示控制步骤,控制显示部,从而显示基于通过第一读取步骤中的处理读取的缩略图文件的缩略图;第二读取步骤,从记录介质中读取运动画面文件;以及第二显示控制步骤,当第二读取步骤的处理已经完成对运动画面文件中的起始帧的读取时,控制显示部,从而显示基于运动画面文件运动画面的而不是显示在显示部上的缩略图。
本发明的另一个实施例致力于使计算机执行处理的第二程序,该处理包括:第一读取步骤,当选定运动画面文件时,从记录介质中读取与该运动画面文件关联的缩略图文件;第一显示控制步骤,控制显示部,从而显示基于通过第一读取步骤中的处理读取的缩略图文件的缩略图;第二读取步骤,从记录介质中读取运动画面文件;以及第二显示控制步骤,当第二读取步骤的处理已经完成对运动画面文件中的起始帧的读取时,控制显示部,从而显示基于运动画面文件的运动画面而不是显示在显示部上的缩略图。
在该实施例中,进入如下设置。当选定运动画面文件时,从记录介质中读取与运动画面文件关联的缩略图文件。提供控制,从而基于所读取的缩略图文件在显示部上显示缩略图。另外,从记录介质中读取运动画面文件。当处理已经完成对运动画面文件中起始帧的读取时,显示基于运动画面文件的运动画面而不是显示在显示部上的缩略图。
根据上述实施例,可以记录运动画面文件。具体而言,可以记录与缩略图文件相关联的运动画面文件。
根据上述实施例,能够快速显示图像。具体来说,当选定运动画面文件时,所进行的设置能够首先显示出与运动画面文件关联的缩略图。
附图说明
本发明的实施例将以下列附图为基础进行详细描述,在附图中:
图1示出了根据本发明的记录再生装置的结构的方框图;
图2为图1中SDRAM的存储区的示意图;
图3示出了图1中CODEC部的功能结构的方框图;
图4示出了图1中图像处理部的功能结构的方框图;
图5示出了图1中的控制微机的功能结构的方框图;
图6简要示出了基于MP4文件格式标准的流文件格式;
图7示出了在图1的记录及再生装置中的记录处理的流程图;
图8示出了在图1的记录及再生装置中的记录处理的流程图;
图9示出了在图1的记录及再生装置中的记录处理的流程图;
图1O示出了记录处理中第一帧图像数据的流程;
图11示出了记录处理中除第一帧图像数据以外的运动画面数据的流程;
图12示出了缩略图生成处理的细节的流程图;
图13示出了图1的记录及再生装置中的再生处理的流程图;
图14示出了图1的记录及再生装置中的再生处理的流程图;
图15示出了再生处理中的缩略图数据的流程;以及
图16示出再生处理中运动画面数据的流程。
具体实施方式
下面将描述本发明的实施例。以下内容举例说明了在说明书中描述的本发明与本发明的实施例之间的相关性。下面的描述目的在于证实说明书描述了支持说明书中所描述的本发明的实施例。因此,有可能存在这样的实施例,它在本发明的实施例部分中得以描述,但在本文中并不依从于本发明。这并不意味着该实施例不服从于本发明。与此对照,如果本文中描述的一个实施例依从于本发明,这也不意味着该实施例不服从除本发明以外的其他发明。
此外,本描述并不表示在说明书中描述的全部发明。换句话说,本发明不仅不否认在本说明书中描述的发明的存在,也不否认分案申请或者由于将来的修改而提交或增加的发明的存在。
根据本发明实施例的记录装置由用来在记录介质(例如,图1中的MS 49)上记录数据的记录装置(例如,图1中的记录再生装置1)表示,包括:
输入部(例如,图1中的图像处理部43),用于输入运动画面数据;
编码部(例如,图3中的CODEC部31的编码处理部122),用于对由输入部输入的运动画面数据进行编码;
存储部(例如,图2中的SDRAM 32),它使用第一存储区(例如,图2中的第一视频帧区82)来存储帧图像数据,即,包含于由编码部编码的运动画面数据中的任何帧图像数据),并使用第二存储区(例如,图2中的普通视频帧区83)来存储除了上述帧图像数据之外的运动画面数据;
记录部(例如,图1中的控制微机46),用于将由存储部存储的运动画面数据记录到记录介质上;
解码部(例如,图3中的CODEC部31的解码处理部123),用于对由编码部编码的运动画面数据进行解码;以及
缩略图生成部(例如,图3中的CODEC部31的缩减处理部128),用于以帧图像数据为基础生成缩略图,
其中,记录部将存储于第一存储区中的帧图像数据与存储于第二存储区中的除帧图像数据之外的运动画面数据一起记录为运动画面文件(例如,图8中的步骤S30);
其中,解码部对存储于第一存储区中的帧图像数据进行解码(例如,图12中的步骤S51);
其中,缩略图生成部基于由解码部解码的帧图像数据生成缩略图数据(例如,图12中的步骤S52);以及
其中,记录部由通过缩略图生成部生成的缩略图数据形成缩略图文件,并将该缩略图文件与已记录的运动画面文件关联记录(例如,图9中的步骤S37)。
根据本发明的实施例的记录装置进一步包括:
压缩部(例如,图4中的图像处理部43的压缩处理部142,用于执行图9中步骤S36的处理),用于以静止画面处理格式对由缩略图生成部生成的缩略图数据进行压缩,
其中,记录部将由压缩部压缩的缩略图数据作为缩略图文件与已记录的运动画面文件关联记录到记录介质中(例如,图9中的步骤S37)。
用于根据本发明实施例的记录装置的帧图像数据相当于运动画面数据中的起始帧图像数据。
根据本发明实施例的记录装置的编码部基于MP4文件格式标准对运动画面数据进行编码,
其中,解码部基于MP4文件格式标准对经过编码的运动画面数据进行解码。
根据本发明实施例的、用于将数据记录到记录介质中的记录装置(例如,图1中的记录再生装置1)的记录方法包括:
输入步骤(例如,图7中的步骤S13),用于输入运动画面数据;
编码步骤(例如,图7中的步骤S14),用于对通过输入步骤中的处理输入的运动画面数据进行编码;
第一存储控制步骤(例如,图7中的步骤S16),用于控制存储,使得存储部(例如,图3中的SDRAM 32)的第一存储区(例如,图2中的第一视频帧区82)存储帧图像数据,即,包含于通过编码步骤中的处理编码的运动画面数据中的任何帧图像数据;
第二存储控制步骤(例如,图7中的步骤S23),用于控制存储,使得存储部的第二存储区(例如,图2中的普通视频帧区83)存储通过编码步骤中的处理编码的除在第一存储区中存储的帧图像以外的运动画面数据;
第一记录控制步骤(例如,图8中的步骤S30),用于控制记录,从而将存储于第一存储区中的帧图像数据与存储于第二存储区中的除帧图像数据之外的运动画面数据一起作为运动画面文件记录到记录介质中;
解码步骤(例如,图12中的步骤S51),用于对存储于第一存储区中的帧图像数据解码;
缩略图生成步骤(例如,图12中的步骤S52),用于基于通过解码步骤中的处理解码的帧图像数据生成缩略图数据;以及
第二记录控制步骤(例如,图9中的步骤S37),用于控制记录,从而由通过缩略图生成步骤的处理生成的缩略图数据形成缩略图文件,并将该缩略图数据与已记录的运动画面文件关联记录到记录介质上。
根据本发明实施例的程序控制将数据记录到记录介质上的过程,并允许计算机执行处理,该处理包括:
输入步骤(例如,图7中的步骤S13),用于输入运动画面数据;
编码步骤(例如,图7中步骤S14),用于对通过输入步骤中的处理输入的运动画面数据进行编码;
第一存储控制步骤(例如,图7中的步骤S16),用于控制存储,使得存储部(例如,图3中的SDRAM 32)的第一存储区(例如,图2中的第一视频帧区82)存储帧图像数据,即,包含于通过编码步骤中的处理编码的运动画面数据中的任何帧图像数据;
第二存储控制步骤(例如,图7中的步骤S23),用于控制存储,使得存储部的第二存储区(例如,图2中的普通视频帧区83)存储通过编码步骤中的处理编码的除在第一存储区中存储的帧图像以外的运动画面数据;
第一记录控制步骤(例如,图8中的步骤S30),用于控制记录,从而将存储于第一存储区中的帧图像数据与存储于第二存储区中的除帧图像数据之外的运动画面数据一起作为运动画面文件记录到记录介质中;
解码步骤(例如,图12中的步骤S51),用于对存储于第一存储区中的帧图像数据解码;
缩略图生成步骤(例如,图12中的步骤S52),用于基于通过解码步骤中的处理解码的帧图像数据生成缩略图数据;以及
第二记录控制步骤(例如,图9中的步骤S37),用于控制记录,从而由通过缩略图生成步骤的处理生成的缩略图数据形成缩略图文件,并将该缩略图数据与已记录的运动画面文件关联记录到记录介质上。
根据本发明实施例的再生装置(例如,图1中的记录再生装置1)可以对记录了包含运动画面数据的运动画面文件(例如,AV流文件)及包含与运动画面文件关联的缩略图数据的缩略图文件的记录介质(例如,图1中的MS 49)进行再生,该再生装置包括:
读取部(例如,图5中的控制微机46的再生处理部164),用于从记录介质中读取运动画面文件及与运动画面文件关联的缩略图文件;以及
显示控制部(例如,图1中的显示控制部44),控制显示部,从而显示基于由读取部读取的缩略图文件的缩略图及基于运动画面文件的运动画面,
其中,当选定运动画面文件时,
读取部读取与运动画面文件关联的缩略图文件(例如,图13中的步骤S72);
其中,显示控制部控制显示部,从而显示基于由读取部读取的缩略图文件缩略图(例如,图31中的步骤S74);
其中,读取部进一步读取运动画面文件(例如,图13中的步骤S76);以及
其中,当读取部已经完成运动画面文件起始帧的读取时,显示控制部控制显示部,从而显示基于运动画面文件的运动画面而不是显示在显示部上的缩略图(例如,图14中的步骤S83)。
根据本发明实施例的再生装置包括:
解压缩部(例如,图4中的解压缩处理部143),用于对缩略图文件的压缩缩略图数据进行解压缩;以及
解码部(例如,图3中的解码处理部123),用于对运动画面文件的编码运动画面数据进行解码,
其中,当选定运动画面文件时,
读取部读取与运动画面文件关联的缩略图文件(例如,图13中的步骤S72);
其中,解压缩部对由读取部读取的缩略图文件的压缩缩略图数据进行解压(例如,图13中的步骤S73);
其中,显示控制部控制显示部,从而显示基于由解压缩部解压的缩略图数据的缩略图(例如,图13中的步骤S74);
其中,读取部进一步读取运动画面文件(例如,图13中的步骤S79);
其中,解码部对由读取部读取的运动画面文件的编码运动画面数据进行解码(例如,图14中的步骤S80);以及
其中,当解码部已经完成运动画面数据的解码时,显示控制部控制显示部,从而显示基于运动画面数据的运动画面而不是显示在显示部上的缩略图(例如,图14中的步骤S83)。
用于根据本发明的实施例的再生装置的缩略图数据相当于运动画面文件中的起始帧图像数据。
用于根据本发明的实施例的再生装置的缩略图数据相当于运动画面文件中的起始帧图像数据。
进一步提供了解压缩部(例如,图4中的解压缩处理部143),用于对缩略图文件的压缩缩略图数据进行解压;以及
解码部(例如,图3中的解码处理部123),用于对运动画面文件的编码运动画面数据进行解码,
其中,当选定运动画面文件时,
读取部读取与运动画面文件关联的缩略图文件(例如,图13中的步骤S72);
其中,解压缩部对由读取部读取的缩略图文件的压缩缩略图数据进行解压(例如,图13中的步骤S73);
其中,显示控制部控制显示部,从而显示基于由解压缩部解压的缩略图数据的缩略图(例如,图13中的步骤S74);
其中,读取部进一步读取运动画面文件中的起始帧图像数据(例如,图13中的步骤S79);
其中,解码部对由读取部读取的运动画面文件中经过编码的起始帧图像数据进行解码(例如,图14中的步骤S80);以及
其中,当解码部已经完成起始帧图像数据的解码时,显示控制部控制显示部,从而显示基于起始帧图像数据的图像而不是显示在显示部上的缩略图(例如,图14中的步骤S83);
其中,当显示控制部允许显示部显示基于运动画面文件中的起始帧图像数据的图像,并随后指示再生运动画面文件时(例如,图14中的步骤S85确定为“是”时),
读取部依次读取运动画面文件中的第二及随后的帧图像数据;
其中,解码部依次对由读取部读取的运动画面文件中经过编码的第二及随后的帧图像数据进行解码(例如,图14中的步骤S86);以及
其中,显示控制部依次控制显示部,从而显示基于运动画面文件中由解码部解码的第二及随后帧图像数据的运动图像(例如,图14中的步骤S87)。
对于根据本发明的实施例的再生装置来说,MP4文件格式标准被用作对包含于记录在记录介质上的运动画面文件中的运动画面数据进行编码的基础。
其中,解码部基于MP4文件格式标准对经过编码的运动画面数据进行解码。
针对用来对记录了由运动画面数据组成的运动画面文件(例如,AV流文件)及由与运动画面文件关联的缩略图数据组成的缩略图文件的记录介质(例如,图1中MS 49)进行再生的再生装置(例如,图1中的记录再生装置1)提供了一种根据本发明实施例的再生方法,该方法包括:
第一读取步骤,当选定与运动画面文件关联的缩略图文件时,从记录介质中读取该缩略图文件(例如,图13中的步骤S72);
第一显示控制步骤,用于控制显示部,从而显示基于通过第一读取步骤中的处理读取的缩略图文件的缩略图(例如,图13中的步骤S74);
第二读取步骤,用于从记录介质读取运动画面文件(例如,图13中的步骤S76);以及
第二显示控制步骤,当第二读取步骤中的处理已经完成运动画面文件中的起始帧的读取时,控制显示部,从而显示基于运动画面文件的运动画面而不是显示在显示部上的缩略图(例如,图14中的步骤S83)。
根据本发明实施例的程序控制用来对记录了由运动画面数据组成的运动画面文件(例如,AV流文件)及由与运动画面文件关联的缩略图数据组成的缩略图文件的记录介质(例如,图1中MS49)进行再生的过程,并且允许计算机执行处理,该处理包括:
第一读取步骤,当选定与运动画面文件关联的缩略图文件时,从记录介质中读取该缩略图文件(例如,图13中的步骤S72);
第一显示控制步骤,用于控制显示部,从而显示基于通过第一读取步骤中的处理读取的缩略图文件的缩略图(例如,图13中的步骤S74);
第二读取步骤,用于从记录介质读取运动画面文件(例如,图13中的步骤S76);以及
第二显示控制步骤,当第二读取步骤中的处理已经完成运动画面文件中的起始帧的读取时,控制显示部,从而显示基于运动画面文件的运动画面而不是显示在显示部上的缩略图(例如,图14中的步骤S83)。
下面,将参照附图进一步详细描述本发明的实施例。
图1示出了根据本发明的记录再生装置1的结构。
记录装置1设置有静止画面记录部11、CODEC部31、SDRAM32、音频处理部33、扬声器34、及麦克风35。
CODEC部31对图像(运动画面)数据及音频数据执行CODEC处理。例如,CODEC部31基于MP4文件格式标准对运动画面数据编码,并将经过编码的运动画面数据与经过AAC(高级音频编码)编码的音频数据合成,从而生成AV流。例如,CODEC部31基于MP4文件格式标准对经过编码的运动画面数据进行解码。CODEC部31执行复用处理(所谓的交织处理)及解复用处理(所谓的解交织处理)。CODEC部31可缩减图像。CODEC部31可根据需要向SDRAM 32存储数据或从其中读取数据。MP4文件格式表示经过编码的图像数据及音频数据的交织形式或它的采样表形式。
SDRAM 32存储CODEC部31需要用来执行各种处理的数据。SDRAM 32根据来自静止画面记录部11及CODEC部31的命令读取并写入数据。例如,SDRAM 32临时存储经过编码的运动画面数据及音频数据(由音频处理部33根据AAC(高级音频编码)进行编码)。尽管没有示出,但在DMAC(直接存储访问控制器)的控制下可以执行从SDRAM 32到MS 49的DMA传输。
音频处理部33执行与音频数据相关的处理。例如,音频处理部33对CODEC部31提供的音频数据进行各种处理,并使扬声器34基于音频数据输出声音。音频处理部33对自麦克风35提供的音频数据进行各种处理,并提供该音频数据给CODEC部31。例如,音频处理部33对音频数据进行AAC编码,并对经过编码的音频数据进行解码。扬声器34基于由音频处理部33提供的音频数据输出声音。麦克风35基于外部音频结合音频数据,并提供该音频数据至音频处理部33。
静止画面记录部11设置有CCD(电荷耦合器件)41、AFE(模拟前端)42、图像处理部43、显示控制部44、显示部45、控制微机46、SDRAM 47、操作输入部48、MS(记忆棒(注册商标))49、MS I/F(接口)驱动器60,及可移动介质61。
CCD 41为成像元件。根据光电转换,CCD 41将入射光转换成由相应于各个像素的电压值表示的电信号,并存储该信号。CCD 41将电信号作为图像信号输出给AFE(模拟前端)42。AFE 42将由CCD 41提供的基于像素的图像信号电平放大至指定电平,并执行A/D(模拟/数字)转换。AFE 42将转换成数字数据的图像数据提供给图像处理部43。
图像处理部43基于输入的图像数据执行图像处理。图像处理部43连接至显示控制部44、CODEC部31、及SDRAM 47。例如,图像处理部43把将要在显示部45上显示的图像数据提供给显示控制部44,并且与SDRAM 47交换图像数据。图像处理部43向CODEC部31提供图像数据(运动画面数据),并接收由CODEC部31提供的图像数据(运动画面数据)。图像处理部43可以压缩并解压静止画面(帧图像)。SDRAM 47相应地存储图像处理部43和控制微机46所需的数据,从而执行各种处理。
控制微机46控制记录再生装置1的各个部分。控制微机46通过MS I/F 50控制对MS 49的记录及读取(再生)。控制微机46包括CPU、ROM、RAM、缓冲器等等。控制微机46控制对SDRAM32及SDRAM 47的数据的存储或读取(再生)。控制微机46基于操作输入部48提供的控制信号控制各个部分。控制微机46指示CODEC部31执行各种处理。控制微机46根据需要连接至驱动器60。驱动器60适当地安装上可移动介质,例如,磁盘、光盘、磁光盘、或半导体存储器。根据需要,从可移动介质61读取计算机程序,并安装在控制微机46上。
MS I/F 50形成了控制微机46和MS 49之间的接口。MS I/F 50作为利用MS 49的记录及再生处理的接口。
图1中的记录再生装置1能够仅使静止画面记录部11记录并再生静止画面。
为了记录运动画面,CCD 41捕获图像信号。AFE 42将该图像信号转换成数字图像数据,并随后提供给图像处理部43。图像处理部43将该图像数据提供至CODEC部31。运动画面数据由多段静止画面数据(多段帧图像数据)组成。CODEC部31将运动画面数据适当地存储在SDRAM 32中。另外,CODEC部31基于运动画面数据及由音频处理部33提供的编码音频数据生成AV流。CODEC部31将该AV流提供至控制微机46。控制微机46通过MS I/F 50在MS 49中记录AV流文件。
为了再生AV流文件,控制微机46通过MS I/F 50读取记录在MS 49中的AV流,并将AV流临时存储在SDRAM 32中。CODEC部31依次解码存储在SDRAM 32中的AV流,并将解码得到的运动画面数据提供给图像处理部43。CODEC部31还将经过编码的音频数据提供至音频处理部33,以进行解码。图像处理部43将由CODEC部31提供的运动画面数据依次提供给显示控制部44。显示控制部44提供显示控制,从而将基于所提供的运动画面数据的图像显示在显示部45上。
图2示出了图1中SDRAM 32的存储区的示意图。
SDRAM 32设置有存储区(存储区域),例如,原始图像捕获区81、第一视频帧区82、普通视频帧区83、音频帧区84、及流缓冲区85。实际上,还配置了用于存储其他数据的区域。本实施例省略了这些区域。
原始图像捕获区81存储的是由CODEC部31捕获的原始图像(帧图像)及经过解码的原始帧图像数据(原始图像)。第一视频帧区82在记录处理过程中存储起始帧图像数据,即,运动画面数据的第一帧的图像数据。普通视频帧区83存储经过编码的运动画面数据,即,普通编码的帧图像数据。音频帧区84存储的是经过ACC编码的音频数据。流缓冲区85存储的是由图像数据(视频数据)和音频数据相互交织构成的AV流,即,由经过复用的图像数据和音频数据构成的AV流。此外,流缓冲区85存储的是采样表及其他类型数据。
这样,SDRAM 32配置了用于存储多种类型数据的区域。
现在,参照图3,下面将描述图1中的CODEC部31的功能结构的例子。
CODEC部31配置了捕获处理部121、编码处理部122、解码处理部123、复用处理部124、解复用处理部125、记录处理部126、再生处理部127、缩减处理部128、及输出处理部129。数据能够在CODEC部31内部的这些部分中相互交换。
捕获处理部121基于由图像处理部43提供的运动画面数据执行捕获处理。具体来说,捕获处理部121从基于由图像处理部43提供的运动画面数据的运动画面中连续捕获帧图像。捕获处理部121将所捕获的帧图像的帧图像数据依次写入(存储)SDRAM 32中的原始图像捕获区81。运动画面由多个帧图像组成。运动画面数据由与多帧图像的数据相当的多段帧图像数据组成。
编码处理部122执行处理(编码处理),以MP4文件格式标准对图像数据编码。具体来说,编码处理部122连续读取写入到SDRAM 32的原始图像捕获区81中的帧图像数据,并基于MP4文件格式标准对帧图像数据进行编码。编码处理部122将经过编码的帧图像数据写入SDRAM 32的普通视频帧区83中。当经过编码的帧图像数据与记录处理中的起始帧图像相对应时,编码处理部122将该经过编码的帧图像数据写入SDRAM 32的第一视频帧区82中。
解码处理部122执行处理(解码处理),基于MP4文件格式标准对经过编码的图像数据进行解码。解码处理部122对运动画面数据,即,写入SDRAM 32的普通视频帧区83中的编码帧图像数据(多段帧图像数据)进行解码。解码处理部122将经过解码的帧图像数据连续写入SDRAM 32的原始图像捕获区81中。解码处理部122对写入到SDRAM 32的第一视频帧区82中的经过编码的帧图像数据(运动画面数据中的第一帧图像数据)进行解码。
复用处理部124交织(复用)帧图像数据及音频数据。复用处理部124将经过交织的帧图像数据及音频数据作为单独的AV流(根据MP4文件格式的流)写入SDRAM 32的流缓冲区85。即,根据MP4文件格式加密帧图像数据。经过加密的帧图像数据和音频数据被交织生成根据MP4文件格式的流(AV流)。
解复用处理部125将经过交织(复用)的AV流解交织(解复用)成帧图像数据及音频数据。对于经过解交织的帧图像数据及音频数据,解复用处理部125将帧图像数据写入SDRAM 32的普通视频帧区83,并将音频数据写入其中的音频帧区84。
SDRAM 32的流缓冲区85存储AV流(该流由帧图像数据及音频数据组成)。记录处理部126执行处理,将AV流作为AV流文件记录到作为记录介质的MS 49上。具体来说,记录处理部126读取写入流缓冲区85中的AV流,并提供该AV流至控制微机46。控制微机46控制MS 49上的记录,从而将AV流作为流文件记录在MS 49上。
再生处理部127执行处理,再生记录在MS 49中的流文件。具体来说,控制微机46从MS 49读取流文件,并提供该流文件至再生处理部127。再生处理部127将流文件数据写入SDRAM 32的流缓冲区85。
缩减处理部128执行处理(缩减处理)来缩减图像,并生成缩略图。具体来说,缩减处理部128执行处理来缩减第一解码帧图像数据的图像,并生成缩略图。例如,缩减处理部128缩减从SDRAM32的第一视频帧区82读取的、并由解码处理部122解码的第一帧图像数据。缩减处理部128将640×480像素的解码图像缩减成160×120像素的图像,生成缩略图。
输出处理部129执行处理,输出图像数据及音频数据。例如,SDRAM 32的原始图像捕获区81存储的是将要再生的帧图像数据(由多段帧图像数据组成的运动画面数据)。输出处理部129输出该帧图像数据至图像处理部43。SDRAM 32的音频帧区84存储的是将要再生的音频数据。输出处理部129输出该音频数据至音频处理部33。
图4示出了图1中的图像处理部43的功能结构的方框图。
根据图4中的例子,图像处理部43配置了主控制部141、压缩处理部142、及解压缩处理部143。数据可以在图像处理部43的内部的这些部分之间互换。
主控制部141控制压缩处理部142及解压缩处理部143。主控制部141控制SDRAM 47的存储,并控制显示控制部44。此外,主控制部141将由AFE 42提供的运动画面数据提供至CODEC部31。
压缩处理部142压缩图像数据。例如,压缩处理部142基于JPEG(联合图像专家组)格式压缩图像。压缩处理部142将经过压缩的图像数据临时存储在例如SDRAM 47中。解压缩处理部143对经过压缩的图像数据进行解压。例如,解压缩处理部143对JPEG压缩的图像进行解压缩,生成显示图像(原始图像)。
图5示出了图1中的控制微机46的功能结构的方框图。
根据图5中的例子,控制微机46配置了主控制部161、传输处理部162、缩略图记录处理部163、及再生处理部164。数据能够在控制微机46内部的这些部分之间互换。
主控制部161控制传输处理部162、缩略图记录处理部163、及再生处理部164。主控制部161控制向SDRAM 32及SDRAM 47的存储,并基于由操作输入部48提供的控制信号执行处理。主控制部161也控制CODEC部31。
传输处理部162执行处理,从SDRAM 32读取数据,并传输缩读取的数据至SDRAM 47。例如,传输处理部162将存储于SDRAM32的流缓冲区85中的缩略图数据传输到SDRAM 47。
缩略图记录处理部163控制将缩略图记录到MS 49上的处理。例如,缩略图记录处理部163读取存储在SDRAM 47上的缩略图,并控制通过MS I/F 50在MS 49上的记录。
再生处理部164执行再生(读取)在MS 49上记录的数据的处理。具体来说,再生处理部164通过MS I/F 50读取记录在MS 49上的数据。
图6简要示出了基于MP4文件格式标准的流文件(AV流文件)格式。
如图6所示,基于MP4文件格式标准的流文件包括报头、AV流(mdat)、及采样表(MOOV)。为了再生该流文件,首先读取并分析采样表(MOOV),以确定AV流(AVI)的帧顺序。以参考采样表确定的帧顺序读取AV流。即,该标准首先指定读取采样表,然后确认第一帧图像数据的位置,从而读取第一帧图像数据。
现在,参照图7至图9中的流程图描述图1中记录再生装置1中的记录处理的例子。当用户使用记录再生装置1的操作输入部48发布记录运动画面数据(及音频数据)的命令时,则开始该处理。例如,当用户在运动图像处理模式下按下释放按钮时,开始处理。根据需要,参照图10和图11,描述该处理流程。
图10示出了当将要记录AV流时包含在运动画面数据中的第一帧图像数据的流程。图11示出了当将要记录AV流时除第一帧图像数据以外的第一帧图像数据的流程。图10及图11适当地示出了图3至图5中示出的CODEC部31、图像处理部43、及控制微机46这些功能块中必要的一些。在图10及图11中,带有步骤标号的箭头对应于图7至图9中所示的处理步骤。
在步骤S11中,操作输入部48接收来自用户的命令,记录运动画面及音频(AV流)。操作输入部48将相应于该命令的控制信号提供给控制微机46。
在步骤S12中,控制微机46(控制微机46的主控制部161(图5))命令CODEC部31开始编码。此时,控制微机46使CCD 41开始成像,并使音频处理部33利用麦克风35接收声音。CCD 41使AFE 42向图像处理部43连续提供通过成像获得的图像信号(作为运动画面数据)。
在步骤S13中,CODEC部31接收由图像处理部43提供的图像数据,并执行捕获处理。具体来说,CODEC部31的捕获处理部121(图3)从由图像处理部43提供的图像数据(运动画面数据)中捕获帧图像,并将该帧图像写入SDRAM 32的原始图像捕获区81(图2)。如对应于图10中步骤S13的箭头所示,步骤S13中的第一处理过程捕获第一帧图像数据
在步骤S14中,CODEC部31基于MP4文件格式标准对捕获的帧图像数据编码。具体来说,CODEC部31的编码处理部122(图3)从存储了捕获图像数据的SDRAM 32的原始图像捕获区81中读取帧图像数据(图10中步骤S14的箭头)。编码处理部122基于MP4文件格式标准编码帧图像数据。
在步骤S15中,CODEC部31的编码处理部122确定最近编码的帧图像数据是否为第一(首次)捕获的帧图像数据。具体来说,当开始图7中步骤S11的记录命令之后首次执行步骤S15的处理时,将经过编码的帧图像数据确定为第一(首次)捕获的帧图像数据(第一帧图像数据)。当第二次或更后执行步骤S15的处理时,被编码的帧图像数据不被确定为第一捕获的帧图像数据(即,确定为第二或随后帧图像数据)。这样,在记录处理中第一(首先)捕获的帧图像数据成为第一帧图像数据。
在步骤S15中,可以确定最近编码的帧图像数据为第一捕获帧图像数据。在这种情况下,在步骤S16中,CODEC部31将该编码帧图像数据存储(写入)到SDRAM 32的第一视频帧区82(图2)中。具体来说,该编码帧图像数据为第一捕获的帧图像数据。及,该被编码的帧图像数据为运动画面数据记录中的第一帧图像数据。从而,CODEC部31的编码处理部122将该帧图像数据存储(写入)到SDRAM 32的第一视频帧区82中。如对应于图10中步骤S16的箭头所示,第一视频帧区82存储第一帧图像数据。
在步骤S17中,音频处理部33基于AAC标准对从麦克风35捕获的音频数据进行编码。音频处理部33将经过编码的音频数据提供至CODEC部31。
在步骤S18中,CODEC部31接收由音频处理部33提供的已编码音频数据。
在步骤S19中,CODEC部31将该已编码音频数据存储(写入)到SDRAM 32的音频帧区84中。
在步骤S20中,CODEC部31将SDRAM 32的第一视频帧区82中的帧图像数据与SDRAM 32的音频帧区84的音频数据进行交织。具体来说,SDRAM 32的第一视频帧区82存储帧图像数据(第一帧图像数据)。SDRAM 32的音频帧区84存储音频数据(具有对应于第一帧图像数据的定时的音频数据)。CODEC部31的复用处理部124(图3)将上述的帧图像数据与音频数据进行交织。如对应于图10中步骤S20的箭头所示,第一帧图像数据从SDRAM 32的第一视频帧区82读出。步骤S20的处理执行交织,从而生成AV流。
步骤S20之后,处理前进至步骤S21。CODEC部31将经过交织并生成的AV流存储到SDRAM 32的流缓冲区85中。具体来说,CODEC部31的复用处理部124将经过交织并生成的AV流写入SDRAM 32的流缓冲区85中(相应于图10中步骤S21的箭头)。
在步骤S22中,CODEC部31确定SDRAM 32的流缓冲区85是否存储了指定量的数据。具体说来,CODEC部31的记录处理部126确定SDRAM 32的流缓冲区85是否存储了指定量的数据(数据量等价于指定记录单位)。在第一处理的步骤S22中,流缓冲区85存储相互交织的第一帧图像数据(经过编码的)及相应的音频数据(经过编码的)。所进行的确定是以这种状态为基础的。
在步骤S22中,可以确定SDRAM 32的流缓冲区85没有存储指定量的数据。在这种情况下,处理回到步骤S13,并重复操作。即,重复处理过程,直至在SDRAM 32的流缓冲区85中存储了指定量的数据为止。
具体来说,在步骤S13中,第二处理接收新运动画面数据,从而捕获第二帧图像。该图像被写入SDRAM 32的原始图像捕获区81(图2)中(对应于图11中步骤S13的箭头)。在步骤S14中,CODEC部31的编码处理部122从SDRAM 32的原始图像捕获区81读取帧图像数据(对应于图11中步骤S14的箭头)。在步骤S15中,CODEC部31的编码处理部122确定最近编码的帧图像数据是否为第一捕获的帧图像数据。因为该数据对应第二帧图像,所以确定结果为否。处理前进至步骤S23。
在步骤S23中,CODEC部31将经过编码的帧图像数据存储到SDRAM 32的普通视频帧区83中(对应于图11中步骤S23的箭头)。具体来说,该经过编码的帧图像数据为第二个或随后的帧图像数据,即,不是第一帧图像数据。因此,CODEC部31的编码处理部122(图3)将该帧图像数据存储到SDRAM 32的普通视频帧区83中。这样,SDRAM 32的第一视频帧区82仅存储运动画面数据的第一帧图像数据。SDRAM 32的普通视频帧区83存储除第一视频帧图像数据以外的其余的运动画面数据。
在步骤S24中,音频处理部33对从麦克风35捕获的音频数据进行ACC编码。音频处理部33提供该编码的音频数据至CODEC部31。
在步骤S25中,CODEC部31接收由音频处理部33提供的经过编码的音频数据。
在步骤S26中,CODEC部31将该编码的音频数据存储(写入)到SDRAM 32的音频帧区84中。
在步骤S27中,CODEC部31将SDRAM 32的普通视频帧区83中的帧图像数据与SDRAM 32的音频帧区84中的音频数据进行交织。具体来说,SDRAM 32的普通视频帧区83存储的是帧图像数据(该例子中的第二帧图像数据)。SDRAM 32的音频帧区84存储的是音频数据(具有对应于该例子中第二帧图像数据的定时的音频数据)。CODEC部31的复用处理部124(图3)将帧图像数据与音频数据进行交织,生成AV流。如对应于图11中步骤S27的箭头所示,第二(或随后)帧图像数据从SDRAM 32的普通视频帧区83中读出。
步骤S27之后,处理前进至步骤S21。CODEC部31将经过交织的AV流存储到SDRAM 32的流缓冲区85中(对应于图11中步骤S21的箭头)。具体来说,CODEC部31的复用处理部124将经过交织的AV流写入SDRAM 32的流缓冲区85中。
在步骤S22中,CODEC部31确定SDRAM 32的流缓冲区85是否存储了指定量的数据。具体来说,CODEC部31的记录处理部126确定SDRAM 32的流缓冲区85是否存储了指定量的数据(数据量等价于指定的记录单位)。在第二处理的步骤S22中,流缓冲区85存储AV流,该AV流包括第一帧图像数据(经过编码的)、第二帧图像数据(经过编码的)、及相应的音频数据(经过编码的),它们彼此交织。即,重复步骤S21中的处理,从而将AV流累积到SDRAM 32的流缓冲区85中。
在步骤S22中,可以确定SDRAM 32的流缓冲区85存储了指定量的数据。在这种情况下,处理前进至步骤S28。在步骤S28中,CODEC部31(CODEC部31的记录处理部126)通知控制微机46,SDRAM 32的流缓冲区85存储了等于指定量数据的AV流。
在步骤S29中,CODEC部31(CODEC部31的记录处理部126)将存储在SDRAM 32的流缓冲区85中的AV流提供给控制微机46。
在步骤S30中,控制微机46将AV流记录到MS 49中。具体来说,控制微机46的主控制部161通过MS I/F 50将从流缓冲区85读取的AV流记录到MS 49中。此时,AV流被记录为AV流文件。假定该AV流文件名为“ABC1.mp4”。在该文件名中,逗点右边的“mp4”为扩展名。在该例子中,流缓冲区85至少包含第一及第二帧图像数据。控制微机46将这些数据段作为AV流记录到MS 49中。第二及随后的帧图像数据也记录在相同的文件(ABCL1.mp4)中。包含在AV流文件中的所有帧图像数据沿对应于图11中步骤S30的箭头所表示的路径传输。
在步骤S31中,控制微机46确定是否终止记录处理。具体来说,控制微机46的主控制部161确定用户是否使用操作输入部48发布了终止记录处理的命令。当确定不终止记录处理时,处理返回步骤S13,并且重复此后的过程。即,连续记录AV流。
当确定记录处理终止步骤S31时,在步骤S32中,控制微机46指示CODEC部31生成缩略图。具体来说,控制微机46的主控制部161指示CODEC部31生成缩略图。即,控制微机46终止在MS 49中的普通AV流的记录,并随后指示生成缩略图。这样防止了记录AV流和生成缩略图的定时的重合。
在步骤S33中,CODEC部31执行缩略图生成处理。具体来说,CODEC部31生成缩略图,并将所生成的缩略图的数据(缩略图数据)存储到SDRAM 32的流缓冲区85中。该处理将参照图12中的流程图详细描述。当根据步骤33的处理完成缩略图的生成时,CODEC部31向控制微机46发布缩略图完成的通告。
在步骤S34中,控制微机46从CODEC部31接收缩略图完成的通告。在步骤S35中,控制微机46从SDRAM 32的流缓冲区85复制缩略图数据至SDRAM 47。具体来说,控制微机46的传输处理部162读取存储于SDRAM 32的流缓冲区85中的缩略图数据,并在SDRAM 47中存储该数据。根据图10中的例子,传输处理部162将缩略图数据存储到SDRAM 47的原始缩略图区中。
在步骤S36中,图像处理部43将存储于SDRAM 47的原始缩略图区中的缩略图数据压缩成JPEG格式。具体来说,图像处理部43的压缩处理部142根据JPEG格式压缩存储于SDRAM 47的原始缩略图区中的缩略图数据,并将该经过压缩的缩略图数据存储于SDRAM 47的缩略图流区中。图像处理部43通常具有JPEG格式压缩功能,以生成静止画面文件。该功能科用于步骤S36中的处理,来压缩缩略图数据。
在步骤S37中,控制微机46将经过JPEG压缩的缩略图数据作为具有与AV流文件相同的文件名、并带有扩展名“THM”的文件(JPEG文件)记录到MS 49中。具体来说,SDRAM 47的缩略图流区(图10)存储经过JPEG压缩的缩略图数据。控制微机46的缩略图记录处理部163通过MS I/F 50将缩略图数据记录到MS 49中(对应于图10中步骤S37的箭头)。在本例中,缩略图数据被记录为具有与AV流文件“ABC1.mp4”相同的文件名并带有“THM”扩展名的文件,即,文件名为“ABC1.THM”。在接下来的描述中,将要记录的缩略图数据的文件被称为缩略图文件。在步骤S37之后,处理终止。
图7至图9中的处理能够将缩略图数据的JPEG文件以及AV流文件记录到MS 49中。AV流文件及缩略图文件除了扩展名以外使用相同的文件名。这可以很清楚地表示出AV流文件和缩略图文件之间的联系。此外,能够记录彼此关联的AV流文件及缩略图文件。SDRAM 32的第一视频帧区82临时存储运动画面数据中的第一帧图像,即,在AV流文件再生过程中第一帧图像的帧图像数据。因此,能够容易地读取第一图像的帧图像数据,从而生成缩略图。
现在参考图12中的流程图,下面将详细描述图9中步骤S33的缩略图生成处理。
在步骤S51中,CODEC部31的解码处理部123读取并解码SDRAM 32的第一视频帧区82中的帧图像数据。在该例子中,SDRAM 32的第一视频帧区82存储的是运动画面数据中的第一帧图像数据。CODEC部31的解码处理部123读取存储于SDRAM 32的第一视频帧区82中的第一帧图像数据,并解码该数据。该处理相当于对应图10中步骤S51的箭头。
在步骤S52中,CODEC部31的缩减处理部128将经过解码的帧图像数据缩减成与静止画面的缩略图相同的尺寸。例如,CODEC部31的缩减处理部128将通过步骤S51的处理解码的帧图像数据(640×480像素)缩减成与静止画面的缩略图相同尺寸(160×120像素)的图像。缩减的数据作为缩略图数据使用。
在步骤S53中,CODEC部31的缩减处理部128将缩略图数据存储到SDRAM 32的流缓冲区85中。该处理与对应于图10中的步骤S53的箭头相当。
在步骤S54中,CODEC部31的缩减处理部128通知控制微机46,缩略图生成完成。此后,处理返回图9中的步骤S33。
当SDRAM 32的第一视频帧区82存储基于MP4文件格式标准编码的帧图像数据(该例子中的第一帧图像数据)时,图12中的处理能够解码并缩减帧图像数据,以生成缩略图数据。
接下来,参考图13和图14中的流程图,描述AV流文件再生的例子。当MS 49记录记录了AV流文件及其相关的缩略图文件后,开始再生处理。即,该处理在参照图7~9及图12描述的处理之后执行。当用户指定AV流文件的选定(选定运动画面文件)时,启动处理。例如,当用户发布指令,来通过以帧为基础依次提前第一帧来显示记录在MS 49中的多个静止画面及AV流文件,并且显示指令被发布给AV流文件时,开始该处理。即,当发布指令来显示AV流文件的预览图像(第一帧图像)时,开始该处理。根据需要,参照图15及图16描述处理流程。
图15示出了相应于MS 49中记录的AV流文件的缩略图文件的数据流程。图16示出了显示记录在MS 49中的AV流文件的第一帧图像数据的数据流程(实际上,同样的流程不仅适用于第一帧图像数据,而且也适用于其余的帧图像数据)。图15及图16适当地示出了图3~5中所示的CODEC部31、图像处理部43、及控制微机46的这些功能块中所需的一些。在图15及图16中,带有步骤标号的箭头相应于图13至14所示的处理的步骤。
在步骤71中,操作输入部48接收来自用户的指令,选定记录在MS 49中的AV流文件,并向控制微机46提供相应于该指令的控制信号。例如,选定名为“ABC1.mp4”的AV流文件。
在步骤S72中,控制微机46将相应于所选定的AV流文件的缩略图文件从MS 49读取选定到SDRAM 47中。具体来说,MS 49存储除了扩展名以外文件名与用户在步骤S71的处理过程中选定的AV流文件相匹配的缩略图文件。控制微机46的再生处理部164(图5)从MS 49读取该缩略图文件,并将其写入SDRAM 47的原始缩略图区。例如,控制微机46的再生处理部164从MS 49读取相应于所选定的“ABC1.mp4”的缩略图文件“ABC1.thm”,并将其写入SDRAM 47的原始缩略图区(见相应于图15中步骤S72的箭头)。缩略图文件“ABC1.thm”在记录过程中基于JPEG格式进行压缩及记录。
在步骤S73中,图像处理部43对该缩略图文件解压。具体来说,该缩略图文件被写入SDRAM 47的缩略图流区。在步骤S73的处理过程中,图像处理部43的解压缩处理部143基于JPEG格式解压该缩略图文件,并将该文件写入SDRAM 47的原始缩略图区(见相应于图15中步骤S73的箭头)。从而,获取原始缩略图(未被压缩的缩略图数据)。
在步骤S74中,显示控制部44使显示部45基于图像处理部43的控制显示缩略图。具体来说,图像处理部43的主控制部141读取经过解压的缩略图数据,将其提供给显示控制部44,并提供控制,从而在显示部45上显示缩略图。在图像处理部43的控制下,显示控制部44显示基于缩略图数据的缩略图。此时,缩略图缩减至小于普通图像(因为在图12中步骤S52的上述记录处理期间,缩略图被缩减)。图像处理部43可以放大缩略图来显示放大的缩略图。
当选定AV流文件时,能够快速显示与AV流文件相对应的缩略图。具体来说,选定AV流文件能够比显示基于存储在AV流文件中的第一帧图像数据的第一帧图像更快地显示相应于AV流文件的图像(缩略图)。这是因为显示AV流文件中的第一帧图像需要花费时间来分析采样表等。显示缩略图只简单地需要与普通静止画面处理相当的处理。
在步骤S75中,控制微机46的主控制部161(图5)指示CODEC部31开始解码。
在步骤S76中,控制微机46将用户在步骤S71处理过程中选定的AV流文件中的开头部分从MS 49中读取到SDRAM 32中(见相关于图16的步骤S76的箭头)。具体来说,控制微型机算计46的再生处理部164将用户选定的AV流文件的开头部分(例如,报头)从MS 49读取至SDRAM 32的流缓冲区85。
在步骤S77中,CODEC部31参考SRAM 32确定采样表(MOOV)的位置。具体来说,CODEC部31的再生处理部127基于存储在SDRAM 32的流缓冲区85中的AV流文件的第一(开头)数据(例如,报头),确定AV流文件的采样表的位置。
在步骤S78中,CODEC部31分析采样表(MOOV),以确定AV流的位置。具体来说,CODEC部31的再生处理部127将通过步骤S77的处理确定的采样表位置通告给控制微机46。控制微机46的再生处理部164从MS 49中读取AV流文件中的采样表,并将所读取的采样表提供给CODEC部31的再生处理部127。以采样表为基础,CODEC部31的再生处理部127确定AV流的位置(帧图像数据及音频图像数据的顺序及位置)。从而,分析了采样表,并确定了AV流位置。
在步骤S79中,CODEC部31读取AV流文件中位于确定位置的AV流,并将其存储到SDRAM 32的流缓冲区85中。具体来说,CODEC部31的再生处理部127读取AV流文件中位于确定位置的AV流(通过控制微机46从MS 49中读取),并将该AV流存储到SDRAM 32的流缓冲区85中(见对应于图16中步骤S79的箭头)。从而,能够从AV流文件的第一帧中读取AV流(即,在记录处理过程中首先记录的起始帧图像及音频)。
在步骤S80中,CODEC部31准备能够再生起始帧图像数据及相应音频的状态(见对应于图16中步骤S80的箭头)。此时,将要执行的处理倒转至记录处理(图7~9中步骤S14和步骤S21~S30)。具体来说,CODEC部31的再生处理部127通过控制微机46从MS 49中依次读取AV流。该AV流存储在SDRAM 32的流缓冲区85中。CODEC部31的解复用处理部125解交织(解复用)AV流,从而获得帧图像数据及音频数据。解复用处理部125将获取的帧图像数据写入SDRAM 32的普通视频帧区83,并将音频数据写入SDRAM 32的音频帧区84。应该注意,经过编码的帧图像数据写入到SDRAM 32的普通视频帧区83中,而经过编码的音频数据写入到音频帧区84中。图像处理部43的输出处理部129将音频帧区84中的音频数据提供给音频处理部33。音频处理部33基于AAC标准解码音频数据。CODEC部31的解码处理部123基于MP4文件格式标准对写入SDRAM 32的普通视频帧区83中的帧图像数据进行解码。解码处理部123将经过解码的帧图像数据写入SDRAM 32的原始图像捕获区81。至此,该处理准备好了能够再生的状态。
在步骤S81中,CODEC部31从SDRAM 32读取起始帧图像数据,并将其提供给图像处理部43。具体来说,CODEC部31的输出处理部129读取写入到SDRAM 32的原始图像捕获区81中的起始帧图像数据。输出处理部129将该帧图像数据提供给图像处理部43(见对应于图16中步骤S81的箭头)。
在步骤S82中,CODEC部31(CODEC部31的再生处理部127)通知控制微机46,再生准备已经完成。接收到该通知后,控制微机46指示图像处理部43将在显示部45上显示的缩略图替换为从AV流文件读取的起始帧图像数据。
在步骤S83中,显示控制部44在图像处理部43的控制下,将在显示部45上显示的缩略图替换(改变)为AV流文件中的起始帧图像。具体来说,图像处理部43的主控制部141指示显示控制部44显示AV流文件中的起始帧图像,而不是显示在步骤S74处理之后显示在显示部45上的缩略图。根据该指示,显示控制部44将在显示部45上显示的缩略图替换为基于由CODEC部31提供的起始帧图像数据的图像(起始图像)。即,显示控制部44使显示部45显示基于起始帧图像数据的图像(起始图像)。
在步骤S84中,控制微机46提示用户再生AV流文件(在步骤S71处理过程中选定的)。例如,控制微机46控制显示控制部44,使得显示部45上的屏幕部分显示出提示再生指示的信息。可替换地,控制微机46控制音频处理部33,使得扬声器34可听见输出的再生指令。此时,起始帧图像在所谓暂停状态下显示,等待再生命令。当选定AV流文件时(步骤S71),控制微机46显示相应于该AV流文件的缩略图。之后,控制微机46完成AV流文件再生的准备,以等待再生命令。这使得在用户发布了再生指令后能够快速再生AV流文件。
在步骤S85中,控制微机46确定用户是否使用操作输入部48输入了再生AV流文件的命令。当没有输入再生AV流文件的命令时(例如,当所选定的AV流文件不同于步骤S71处理中选定的流文件时),处理终止。
在步骤S85中可以确定,用户使用了操作输入部48来输入再生AV流文件的命令。在这种情况下,控制微机46依次读取AV流(相应于第二及随后帧图像数据的图像数据及音频数据)。处理前进至步骤S86。CODEC部31执行解码。具体来说,控制微机46通过MS I/F 50从MS 49中依次读取AV流。CODEC部31的解复用处理部125解复用处理存储于SDRAM 32的流缓冲区85中的AV流文件。解复用处理部125将帧图像数据存储到SDRAM 32的普通视频帧区83中,并将音频数据存储到音频帧区84中。CODEC部31的解码处理部123基于MP4文件格式标准解码存储于普通视频帧区83中的帧图像数据。输出处理部129将存储于音频帧区84中的音频数据提供给音频处理部33,进行解码。这样,解码了帧图像数据及视频数据。
在步骤S86中,图像处理部43向显示控制部44提供由CODEC部31解码的帧图像数据,用于输出至(显示在)显示部45上。音频处理部33使扬声器34输出基于经过解码的音频数据的声音。实际上,一直执行处理步骤S85及S86,直到AV流文件的再生终止为止。在那之后,处理终止。例如,当在步骤S85中指示再生时,已经完成了采样表的分析。这就使得能够快速地再生AV流文件。
当根据图13和图14的处理选定AV流文件时,记录再生装置1首先显示对应于(关联于)AV流文件的缩略图文件。记录再生装置1分析AV流文件的采样表,读取起始帧图像数据。记录再生装置1使显示部45显示基于帧图像数据而不是缩略图的图像。因此,能够缩短选择AV流文件的时间与显示相应于该AV流文件的图像(缩略图)之间的时间间隔。当发布指示再生AV流文件时,已经完成了再生处理的准备(采样表的分析)。因而能够快速再生AV流文件。
具体来说,显示AV流文件中的起始帧图像数据的时间比显示缩略图的时间长。当选定AV流文件时,显示AV流文件中的起始帧图像数据会使用户厌烦。即使当根据图13和图14中的处理选定AV流文件时,记录及再生装置也能够快速显示相应于AV流文件的缩略图文件的图像。这能够防止用户感到等待时间的压迫感。当选定AV流文件时,用户能够快速确定其内容(缩略图)。
通过这种方式,记录再生装置1在准备AV流文件再生的同时,可以显示出能够在短时间内再生的缩略图(静止画面)。因此,用户能够在结束再生准备以前确定待再生的AV流文件的内容(起始帧图像)。用户能够在不觉得再生准备时间厌烦的情况下等待。
图13和图14中的处理可读取缩略图,并将其显示在显示部45上,并随后进行AV流文件再生的准备。此外,在进行AV流文件再生准备的同时,能够读取并显示缩略图文件。具体来说,仅仅需要同时执行从步骤S76~S82的处理及从步骤S72~S74的处理。在再生过程中,在根据本实施例的记录再生装置1中,静止画面记录部11及CODEC部31之间没有数据的相互交换。对MS 49的读取定时上的不同不会对各个部分造成负担。
如上所述,记录再生装置1使用SDRAM 32的第一视频帧区82来存储根据MP4文件格式标准编码的运动画面数据中的起始帧图像数据。记录再生装置1将除起始帧图像数据之外的剩余运动画面数据存储在不同于第一视频帧区82的另一区域(普通视频帧区83)中。缩略图的生成仅仅需要读取并使用存储在第一视频帧区82中存储的图像数据。能够很容易地生成缩略图。
缩略图文件与AV流文件关联记录。因此,在再生过程中能够快速读取相应于AV流文件的缩略图文件。具体来说,除了扩展名以外,AV流文件和缩略图文件使用相同的文件名。能够很容易地指定相应于AV流文件的缩略图文件。缩略图在使运动图像再生的处理时间内显示。因此,用户能够预先确定所选定的AV流文件的起始图像。从而给予用户时间来确定是否再生该文件。
此外,记录再生装置1能够处理诸如静止画面及运动图像的多种图像格式。记录再生装置1以静止画面缩略图格式(根据本实施例,为JPEG格式)记录运动画面文件(AV流文件)的缩略图。因此,能够快速再生多个静止画面文件及缩略图文件。具体来说,图1中的记录再生装置1的静止画面记录部11实施再生静止画面文件的功能。静止画面记录部11不需要使用CODEC部31就能像再生静止画面文件那样再生缩略图文件。因此,能够快速再生缩略图文件。
图4中的用于压缩静止画面文件的压缩处理部142被构造用来压缩相应于AV流文件的缩略图数据。不需要提供特殊的处理部用于处理AV流文件的缩略图,从而降低了成本。
AV流文件及缩略图文件独立地形成。通过使用用于静止画面处理的功能(图像处理部43)对分别记录的缩略图文件进行解码,而不需要对AV流文件解码,即可显示起始帧图像。因此,不用在静止画面记录部11及CODEC部31之间传输数据,就能够快速显示缩略图。
如图7~9所示的处理完成AV流文件记录(即,在图8的步骤S31中产生肯定的确定结果),然后生成缩略图(步骤S33)并记录该缩略图文件(步骤S37)。这些步骤并不限于在AV流文件记录完成之后进行。具体来说,例如,在记录AV流文件的同时,在额外的时间段内,也能够生成并记录缩略图。本发明仅将经过编码的运动画面数据中的起始帧图像数据存储到不同于普通视频帧区83的第一视频帧区82中。例如,在记录AV流文件的同时,可以在额外的时间段内生成缩略图。
例如,假想将没有进行编码的起始帧图像数据存储到SDRAM32中的情况。起始帧图像数据将占据更多的数据量(例如,600千字节),需要SDRAM 32的更多容量。根据本实施例,SDRAM 32存储的是经过编码的起始帧图像数据(例如,结果为80千字节),从而能够使用较少的存储区域。
当完成再生准备时,缩略图变成处于暂停状态的起始帧图像。发布再生指令不用等待时间就能够执行再生。
假想图1中的记录再生装置1的控制微机46控制图像处理部43来记录缩略图数据的情况。在这种情况下,需要准确地提取出与由CODEC部31编码的运动画面数据中的第一帧(起始帧图像)相同的帧,并将其记录为缩略图。这种情形可能会要求一些同步装置,从而增加了技术难度。然而,根据本发明,CODEC部31将第一帧存储在第一视频帧区82中。在终止记录AV流文件之后,缩略图在记录AV流文件时的额外时间段内生成。这样,能够很容易地生成缩略图。
缩略图文件使用了扩展名“THM”,但本发明并不仅限于此。优选使用任何能够确定缩略图文件的扩展名。
可能存在这样的情况:记录的文件是基于MP4文件格式标准编码的,或是基于起始帧图像数据不总是记录在文件的开头部分的类似标准编码。当该文件具有大量数据时,分析所有的采样表(MOOV)将会非常耗费时间。为了解决这个问题,如上所述,根据本发明实施例的记录再生装置在包括有采样表分析的运动画面再生的准备过程中即显示出缩略图。该缩略图是通过缩减并存储与起始运动画面相同的帧而生成的。用户能够确定运动画面的内容,并执行操作,以请求下一图像。
图1中所示的记录再生装置1能够仅通过使用静止画面记录部11即显示出缩略图(而不需要使用CODEC部31)。举例来说,当发展的目标是将CODEC部和静止画面记录部11结合在一起时,能够对记录静止画面的现有装置使用缩略图再生处理操作。这样能减少发展的步骤数。
此外,例如,可能存在有显示多个小缩略图以进行索引再生的情况。在这种情况下,静止画面记录部11的解压缩处理部143可以用来再生静止画面及运动画面的缩略图。
同样的帧图像数据用于生成缩略图及AV流文件(运动画面数据)的起始帧。能够减小从缩略图到运动画面的起始帧图像的显示转换过程中发生的改变。
通过将静止画面和动态画面的缩略图混合,能够平稳地提供再生(幻灯显示)。
可以将各种元(meta)信息附加到信息数据中,以用于将来的管理。即使在这种情况下,当在再生的同时请求使用元信息时,也能够装置有效地在再生准备过程中显示缩略图。
在上面描述的例子中,MS 49被用作记录介质,但本发明并不限制于此。优选使用诸如IC记录介质、磁盘、光盘、及磁光盘的任何记录介质。
上面描述的例子根据起始帧图像数据生成缩略图,但本发明并不限制于此。也可以根据任意的帧图像数据生成缩略图。
此外,根据上面描述的例子,图像处理部43使用JPEG方式来进行压缩及解压缩,但本发明并不限制于此。例如,也可以使用Bitumap或GIF。CODEC部31不限于MP4文件格式标准。当读取AV流文件非常耗时或AV流文件的开头部分与起始帧图像不匹配时,也能够应用本发明。
上面描述的例子已经描述了包含图像数据及音频数据的AV流文件。本发明也可以应用于包含图像数据但并不包含音频数据的视频流文件(运动画面文件)。
根据本实施例,记录再生装置1既执行记录处理也执行再生处理。也可以提供一种记录装置,只执行记录处理,并提供一种再生装置,只提供再生处理。在这种情况下,记录装置执行图7~9及图12中的处理。再生装置执行图13及图14中的处理。
上面描述的处理能够通过硬件或软件来执行。当使用软件来执行这一系列处理时,构成该软件的程序可以通过网络或记录介质安装。
如图1所示,记录介质被独立地分配给计算机,来提供程序给用户。记录介质可构造为由记录了程序的可移动介质61组成的封装介质。另外,记录介质可构造为记录有程序并预安装在装置中从而提供给用户的硬盘。
在本说明书中,描述计算机程序的步骤不仅包括以所描述的顺序按时间执行的处理,也包括不按照时间,而是同时或单独执行的处理。
在本说明书中,“系统”表示由多个装置组成的整个设备。
应该明白,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (13)

1.一种用于将数据记录到记录介质中的记录装置,所述记录装置包括:
输入部,用于输入运动画面数据;
编码部,用于对由所述输入部输入的所述运动画面数据进行编码;
存储部,用于使用第一存储区来存储帧图像数据,即,包含在由所述编码部编码的所述运动画面数据中的任何帧图像数据,并使用第二存储区存储除所述帧图像数据之外的所述运动画面数据;
记录部,用于将由所述存储部存储的所述运动画面数据记录到所述记录介质中;
解码部,用于对由所述编码部编码的所述运动画面数据进行解码;以及
缩略图生成部,用于基于所述帧图像数据生成缩略图,
其中,所述记录部将存储在所述第一存储区中的所述帧图像数据与存储在所述第二存储区中的除所述帧图像数据以外的运动画面数据一起记录为运动画面文件;
其中,所述解码部对存储于所述第一存储区中的所述帧图像数据进行解码;
其中,所述缩略图生成部基于由所述解码部解码的所述帧图像数据生成缩略图数据;以及
其中,所述记录部根据由所述缩略图生成部生成的所述缩略图数据形成缩略图文件,并将所述缩略图文件与已记录的运动画面文件关联记录。
2.根据权利要求1所述的记录装置,进一步包括:
压缩部,用于以静止画面处理格式压缩由所述缩略图生成部生成的所述缩略图数据,
其中,所述记录部将由所述压缩部压缩的所述缩略图数据作为缩略图文件与已记录的运动画面文件关联记录。
3.根据权利要求1所述的记录装置
其中,所述帧图像数据相当于所述运动画面数据中的起始帧图像数据。
4.根据权利要求1所述的记录装置
其中,所述编码部基于MP4文件格式标准对所述运动画面数据进行编码;以及
其中,所述解码部基于MP4文件格式标准对所述经过编码的运动画面数据进行解码。
5.一种用于将数据记录到记录介质上的记录装置的记录方法,所述记录方法包括:
输入步骤,输入运动画面数据;
编码步骤,对通过所述输入步骤中的处理输入的所述运动画面数据进行编码;
第一存储控制步骤,控制存储,使所述存储部的第一存储区存储帧图像数据,即,包含在通过所述编码步骤中的处理而编码的所述运动画面数据中的任意帧图像的数据;
第二存储控制步骤,控制存储,使所述存储部的第二存储区存储通过所述编码步骤中的处理而编码的、除在所述第一存储区中存储的所述帧图像以外的运动画面数据;
第一记录控制步骤,控制记录,从而将所述第一存储区中存储的所述帧图像数据与存储在所述第二存储区存储中的、除所述帧图像数据以外的运动画面数据一起作为运动画面文件记录到所述记录介质中;
解码步骤,对存储于所述第一存储区中的所述帧图像数据进行解码;
缩略图生成步骤,基于通过所述解码步骤中的处理而解码的所述帧图像数据生成缩略图数据;以及
第二记录控制步骤,控制记录,从而根据通过所述缩略图生成步骤中的处理生成的所述缩略图数据形成缩略图文件,并将所述缩略图数据与已记录的运动画面文件关联记录到所述记录介质中。
6.一种用于控制将数据记录到记录介质中的过程并使计算机执行处理的程序,所述处理包括:
输入步骤,输入运动画面数据;
编码步骤,对通过所述输入步骤中的处理输入的所述运动画面数据进行编码;
第一存储控制步骤,控制存储,使所述存储部的第一存储区存储帧图像数据,即,包含在通过所述编码步骤中的处理而编码的所述运动画面数据中的任意帧图像数据;
第二存储控制步骤,控制存储,使所述存储部的第二存储区存储通过所述编码步骤中的处理而编码的、除在所述第一存储区中存储的所述帧图像以外的运动画面数据;
第一记录控制步骤,控制记录,从而将所述第一存储区中存储的所述帧图像数据与存储在所述第二存储区存储中的、除所述帧图像数据以外的运动画面数据一起作为运动画面文件记录到所述记录介质中;
解码步骤,对存储于所述第一存储区中的所述帧图像数据进行解码;
缩略图生成步骤,基于通过所述解码步骤中的处理解码的所述帧图像数据生成缩略图数据;以及
第二记录控制步骤,控制记录,从而根据通过所述缩略图生成步骤中的处理生成的所述缩略图数据形成缩略图文件,并将所述缩略图数据与已记录的运动画面文件关联记录到所述记录介质中。
7.一种再生装置,用于对记录了包含运动画面数据的运动画面文件及包含与所述运动画面文件关联的缩略图数据的缩略图文件的记录介质进行再生,所述再生装置包括:
读取部,用于从所述记录介质中读取所述运动画面文件及与所述运动画面文件关联的所述缩略图文件;以及
显示控制部,用于控制显示部,从而显示出基于由所述读取部读取的所述缩略图文件的缩略图及基于所述运动画面文件的运动画面,
其中,当选定所述运动画面文件时,
所述读取部读取与所述运动画面文件关联的所述缩略图文件;
其中,所述显示控制部控制显示部,从而显示出基于由所述读取部读取的所述缩略图文件的缩略图;
其中,所述读取部进一步读取所述运动画面文件;以及
其中,当所述读取部已经完成所述运动画面文件中起始帧的读取时,所述显示控制部控制显示部,从而显示基于所述运动画面文件的运动画面而不是显示在所述显示部上的所述缩略图。
8.根据权利要求7所述的再生装置,进一步包括:
解压缩部,用于对所述缩略图文件的压缩缩略图数据解压缩;以及
解码部,用于对所述运动画面文件的编码运动画面数据进行解码,
其中,当选定所述运动画面文件时,
所述读取部读取与所述运动画面文件相关联的所述缩略图文件;
其中,所述解压缩部对由所述读取部读取的所述缩略图文件的所述压缩缩略图数据解压缩;
其中,所述显示控制部控制显示部,从而显示基于由所述解压缩部解压缩的所述缩略图数据的缩略图;
其中,所述读取部进一步读取所述运动画面文件;
其中,所述解码部对由所述读取部读取的所述运动画面文件的所述编码运动画面数据进行解码;以及
其中,当所述解码部已经完成所述运动画面数据的解码时,所述显示控制部控制显示部,从而显示基于所述运动画面数据的运动画面而不是显示在所述显示部上的所述缩略图。
9.根据权利要求7所述的再生装置,
其中,所述缩略图数据对应于所述运动画面文件中的起始帧数据。
10.根据权利要求7所述的再生装置,进一步包括:
解压缩部,用于对所述缩略图文件的压缩缩略图数据解压缩;以及
解码部,用于对所述运动画面文件的编码运动画面数据进行解码,
其中,所述缩略图数据对应于所述运动画面文件中的起始帧图像数据,
其中,当选定所述运动画面文件时,
所述读取部读取与所述运动画面文件相关联的所述缩略图文件;
其中,所述解压缩部对由所述读取部读取的所述缩略图文件的所述压缩的缩略图数据进行解压缩;
其中,所述显示控制部控制显示部,从而显示基于由所述解压缩部解压缩的所述缩略图数据的缩略图;
其中,所述读取部进一步读取所述运动画面文件中的起始帧图像数据;
其中,所述解码部对由所述读取部读取的所述运动画面文件中经过编码的起始帧图像数据进行解码;以及
其中,当所述解码部已经完成所述起始帧图像数据的解码时,所述显示控制部控制所述显示部,从而显示基于所述起始帧图像数据的图像而不是显示在所述显示部上的所述缩略图;
其中,当所述显示控制部使所述显示部显示基于所述运动画面文件中的所述起始帧图像数据的图像,并随后指示再生运动画面文件时,
所述读取部顺序读取所述运动画面文件中的第二及随后的帧图像数据;
其中,所述解码部对由所述读取部读取的所述运动画面文件中经过编码的第二及随后的帧图像数据进行顺序解码;以及
其中,所述显示控制部顺序控制所述显示部,从而显示基于所述运动画面文件中由所述解码部解码的第二及随后帧图像数据的运动画面。
11.根据权利要求8所述的再生装置,
其中,使用MP4文件格式标准作为对包含于记录在所述记录介质中的所述运动画面文件中的所述运动画面数据进行编码的基础;以及
其中,所述解码部基于所述MP4文件格式标准对经过编码的运动画面数据进行解码。
12.一种再生方法,用于对记录了由运动画面数据组成的运动画面文件及由与所述运动画面文件相关联的缩略图数据组成的缩略图文件的记录介质进行再生的再生装置,所述方法包括:
第一读取步骤,当选定所述运动画面文件时,从所述记录介质中读取与所述运动画面文件关联的所述缩略图文件;
第一显示控制步骤,控制显示部,从而显示基于通过所述第一读取步骤中的处理读取的所述缩略图文件的缩略图;
第二读取步骤,从所述记录介质中读取所述运动画面文件;以及
第二显示控制步骤,当所述第二读取步骤中的处理已经完成所述运动画面文件中起始帧的读取时,控制所述显示部,从而显示基于所述运动画面文件的运动画面而不是显示在所述显示部上的所述缩略图。
13.一种用于控制对记录了由运动画面数据组成的运动画面文件及由与所述运动画面文件关联的缩略图数据组成的缩略图文件的记录介质进行再生的过程、并使计算机执行处理的程序,所述处理包括:
第一读取步骤,当选定所述运动画面文件时,从所述记录介质中读取与所述运动画面文件关联的所述缩略图文件;
第一显示控制步骤,控制显示部,从而显示基于通过所述第一读取步骤中的处理读取的所述缩略图文件的缩略图;
第二读取步骤,从所述记录介质中读取所述运动画面文件;以及
第二显示控制步骤,当所述第二读取步骤中的处理已经完成所述运动画面文件中起始帧的读取时,控制所述显示部,从而显示基于所述运动画面文件的运动画面而不是显示在所述显示部上的所述缩略图。
CNB2005101025384A 2004-09-08 2005-09-08 记录装置、记录方法、再生装置及再生方法 Expired - Fee Related CN100461845C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2004260536A JP2006080723A (ja) 2004-09-08 2004-09-08 記録装置および記録方法、再生装置および再生方法、並びにプログラム
JP2004260536 2004-09-08

Publications (2)

Publication Number Publication Date
CN1747544A true CN1747544A (zh) 2006-03-15
CN100461845C CN100461845C (zh) 2009-02-11

Family

ID=36033466

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2005101025384A Expired - Fee Related CN100461845C (zh) 2004-09-08 2005-09-08 记录装置、记录方法、再生装置及再生方法

Country Status (4)

Country Link
US (1) US8340497B2 (zh)
JP (1) JP2006080723A (zh)
KR (1) KR20060051064A (zh)
CN (1) CN100461845C (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080031593A1 (en) * 2006-08-07 2008-02-07 Shih-Fang Chuang Multi-layer structure unit for recording audio/video frame data and its operation method
JP4775241B2 (ja) 2006-12-06 2011-09-21 株式会社日立製作所 記録方法
JP4735524B2 (ja) 2006-12-06 2011-07-27 株式会社日立製作所 記録方法
JP4735525B2 (ja) 2006-12-06 2011-07-27 株式会社日立製作所 記録方法
US8489702B2 (en) 2007-06-22 2013-07-16 Apple Inc. Determining playability of media files with minimal downloading
JP5207930B2 (ja) * 2008-11-20 2013-06-12 キヤノン株式会社 撮像装置、撮像装置の制御方法、プログラム、及び記録媒体
KR20120065043A (ko) * 2010-12-10 2012-06-20 삼성전자주식회사 빠른 재생 모드 진입을 위한 디지털 영상 신호 처리 장치 및 이의 제어 방법
US9204175B2 (en) * 2011-08-03 2015-12-01 Microsoft Technology Licensing, Llc Providing partial file stream for generating thumbnail
GB2575030B (en) * 2018-06-22 2020-10-21 Advanced Risc Mach Ltd Data processing systems

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3269037B2 (ja) 1998-12-09 2002-03-25 三洋電機株式会社 画像再生装置
US6798407B1 (en) * 2000-11-28 2004-09-28 William J. Benman System and method for providing a functional virtual environment with real time extracted and transplanted images
JP2001111963A (ja) 1999-10-04 2001-04-20 Hitachi Ltd 光ディスクを利用したビデオカメラにおける録画再生方法
KR100679575B1 (ko) * 2001-05-31 2007-02-07 캐논 가부시끼가이샤 동화상 관리 장치 및 방법
JP3787529B2 (ja) * 2002-02-12 2006-06-21 株式会社日立製作所 光ディスク記録再生装置
JP2003274368A (ja) 2002-03-14 2003-09-26 Fuji Photo Film Co Ltd サムネイル表示装置及びサムネイル表示プログラム
JP3826073B2 (ja) * 2002-06-05 2006-09-27 キヤノン株式会社 スクリーンセーバ作成システムおよび方法

Also Published As

Publication number Publication date
US20060055798A1 (en) 2006-03-16
CN100461845C (zh) 2009-02-11
JP2006080723A (ja) 2006-03-23
KR20060051064A (ko) 2006-05-19
US8340497B2 (en) 2012-12-25

Similar Documents

Publication Publication Date Title
CN1135845C (zh) 图像传送方法、图象处理方法、图象处理装置和数据存储介质
CN1747544A (zh) 记录装置、记录方法、再生装置、再生方法、及程序
CN1223196C (zh) 解码器、解码方法
CN1225117C (zh) 图像以及声音的重放装置及方法
CN101052127A (zh) 信息处理装置、信息处理方法、记录介质和程序
CN1812548A (zh) 记录器及其方法,播放器及其方法,程序和记录介质
CN1783989A (zh) 内容管理装置和内容管理方法
CN1605102A (zh) 数据记录方法、数据删除方法、数据显示方法、记录装置、记录媒体及程序
CN1943246A (zh) 图像解码方法
CN1925590A (zh) 信息处理装置和方法、及程序
CN1170312A (zh) 取自运动图像的静止图像文件的图像处理和显示方法及装置
CN1547852A (zh) 活动图像数据再现设备
CN1551212A (zh) 信息处理装置与方法
CN1147160C (zh) 信息记录系统和信息记录方法
CN1706185A (zh) 数据处理装置
CN101046818A (zh) 信息处理设备、方法和程序产品
CN1817035A (zh) 信息处理设备和方法、程序记录介质及程序
CN1925589A (zh) 信息处理装置和方法、及程序
CN1768529A (zh) 音频/视频记录装置、记录方法、再现装置、再现方法、再现程序和记录程序
CN1848941A (zh) 图像再现、处理装置和方法以及具有该装置的电视接收机
CN1918909A (zh) 文件记录设备、文件记录方法、文件记录过程的程序、其中存储文件记录过程的程序的存储媒体、文件重放设备、文件重放方法、文件重放过程的程序、以及其中存储文件重放过程的程序的存储媒体
CN1801915A (zh) 记录设备和方法、程序以及记录介质
CN100343850C (zh) 数据处理方法及其系统
CN1976423A (zh) 收发系统、信息处理装置及信息处理方法以及程序
CN1698374A (zh) 信息处理装置、信息处理方法、程序和记录介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090211

Termination date: 20130908