CN100477770C - 编解码装置以及记录再生终端 - Google Patents

Abstract

本发明的目的在于提供一种对通用的插槽的记录再生终端可拆卸的编解码装置。上述编解码装置具备：对表示声音或图像的信号进行记录或再生的记录再生终端(103)；和可自由装卸地与记录再生终端(103)连接的可拆除式编码装置(100)，记录再生终端(103)具备对与记录再生终端(103)相关的终端信息进行保存的终端信息保存部(105)，可拆除式编码装置(100)具备：与记录再生终端(103)连接后，从记录再生终端(103)取得终端信息的终端信息取得部(101)；和基于所取得的终端信息，对表示声音或图像的信号进行编码或解码的信号变换部(102)。

Description

编解码装置以及记录再生终端

技术领域

本发明涉及对视频信号或音频信息进行压缩编码的可拆卸的编解码装置和编解码装置被装卸的记录再生终端等。

背景技术

通过地面波数字广播的开始或附带相机的携带等的普及，将视频或音频保存在硬盘或存储介质等中的编解码技术逐渐多样化。例如，在视频的领域中公知有MPEG2、MPEG4和MPEG4-AVC，在音频的领域公知有AMR和MPEG4-AAC等。DVD记录器、附带相机的携带电话以及车载终端等的产品，为了取得各机器间的AV结合，而与产品本来的主功能不同地将上述多个编解码方法作为专用LSI或软件来搭载。从而产品的成本增加。此外，在规格等中所使用的编解码方法发生了变化的情况下，即使旧的产品具备对基于新编解码方法的编码数据进行接收的机构，但由于不具备对这些编码数据进行解码的机构，因此不能由所接收的编码数据来再生视频或音频。还有，将哪种编解码方法的解码装置搭载在产品上是由制造商侧制定，用户在购买产品时不能选择必要的编解码方法，而甚至于需要对不频繁使用的编解码方法支付费用。

作为用于解决上述课题的例子，公开了以下的专利文献。

第一例涉及与各种编码方式对应的数据再生装置。

图1是表示作为第一例的现有的携带型数据再生装置的结构的框图。如果将保存有编码数据和对该编码数据进行解码的解码程序的半导体存储卡701插入到插槽，则携带型数据再生装置700将半导体存储卡701内的解码程序装载到解码机构702内的存储器703中。并且，接下来读出半导体存储卡701内的编码数据，采用装载到存储器703中的解码程序对编码数据进行解码后再生。根据图1那样的结构，通过改变半导体存储卡701内的解码程序，来携带型数据再生装置1能与各种编码方式对应(参照专利文献1)。

第二例涉及提高PC卡间的视频数据传送的效率。图2中表示利用该系统的动态图像编码系统的结构例。图2是表示作为第二例的现有的动态图像编码系统的结构的框图。在图2中用视频采集板(Video Capture board)802对从外部的视频录像机(VCR)801输入的视频信号进行数字化，采用不使用PCI总线805的卡间直接通路804而输入到编码卡803中。编码卡803将所输入的数字的视频信号编码，经由PCI总线805被传送到系统的存储器807。由此，不经由系统总线而在PC卡间可直接传送视频数据等，减轻CPU808的负载，能够建立使用了不依赖于系统总线的性能的多个PC卡的系统。如果使用以上的动态图像编码系统，则通过替换编码卡能够建立与各种编码方式对应的编码系统(参照专利文献2)。

专利文献1：特开2000-13237号公报；

专利文献2：特开平9-237166号公报。

但是，在专利文献1中，由于携带型数据再生装置700需要搭载用于实现解码机构702的LSI，因此不仅不能削减再生装置的成本，而且不能完全解决上述课题。此外，没有记载涉及记录装置的内容。

此外，在专利文献2中，在记录装置侧准备多个PCI插槽，需要具备具有卡间直接通路的PC卡控制器，而对记录装置的安装负担大。此外，为了将编码数据保存在编码系统内部的存储器中，将编码数据保存在编码卡803中，而不能插入到其他机器进行解码，因此不适于在AV机器间共享视频数据等数据这样的AV机器的结合。

发明内容

本发明正是为了解决上述课题而提出的，其目的在于提供一种能与多种编解码方法对应的编解码装置以及具备这种编解码装置的记录再生终端。

为了解决上述课题，本发明的记录再生终端，其可自由装卸地与编解码装置连接并对表示声音或图像的信号进行记录或再生，其特征在于，具备：终端信息保存机构，其保存与自身记录再生终端的记录再生能力相关的终端信息，连接所述编解码装置后，将所述终端信息向所述编解码装置输出；和信号发送机构，其在对表示声音或图像的信号进行记录时，通过将表示声音或图像的所述信号向所述编解码装置发送而对所述信号进行编码。

此外，在本发明中，所述记录再生终端也可还将对表示声音或图像的所述信号进行编码而得到的编码数据保存到所述编解码装置的内部。

还有，在本发明中，所述终端信息也可包括表示内置在所述记录再生终端中的内置编解码装置的有无的信息，在没有所述内置编解码装置的情况下，所述记录再生终端使所述编解码装置对包括声音或图像的所述信号进行编码。

还有，在本发明中，所述记录再生终端也可具备再生机构，该机构在没有所述内置编解码装置的情况下，从所述编码或解码装置接收用所述编解码装置对保存在所述编解码装置中的所述编码数据进行解码而得到的表示声音或图像的信号，并进行再生。

此外，在本发明中，所述终端信息也可包括编码形式信息，该编码形式信息表示所述内置编解码装置的编码形式，所述记录再生终端也可还具备以规定的编码或解码形式对表示声音或图像的信号进行编码或解码的内置编解码装置，在所述编解码装置中所保存的所述编码数据的编码形式与所述编码形式信息中所示的编码形式不同的情况下，所述再生机构接收用所述编解码装置解码所得到的包括声音或图像的所述信号并进行再生，在与所述编码形式信息中所示的编码形式一致的情况下，所述内置编解码装置直接接收所述编码数据并进行解码。

此外，在本发明中，所述记录再生终端也可还具备：编码形式通知接收机构，其在所述编解码装置能以互不相同的多个编码形式进行编码或解码的情况下，从所述编解码装置接收可选择的所述编码形式的通知；和编码形式选择机构，其显示由所述编解码装置通知的多个所述编码形式，并接受由使用者选择的一个编码形式，所述记录再生终端，以由使用者所选择的编码形式使所述编解码装置对表示声音或图像的信号进行编码。

还有，在本发明中，所述终端信息也可包括：表示内置在所述记录再生终端中的内置编解码装置的有无的信息；和在有所述内置编解码装置的情况下，表示所述内置编解码装置的编码形式的编码形式信息，所述记录再生终端也可具备编码数据接收机构，其在所述编解码装置中保存的所述编码数据的编码形式，(1)与所述编码形式信息中所示的编码形式不同的情况下，接收将编码形式变换为所述编码形式信息中所示的编码形式的编码数据，(2)与所述编码形式信息中所示的编码形式一致的情况下，直接接收所述编码数据。

此外，在本发明中，所述记录再生终端也可还具备：存储器，其可提供作为基于所述编解码装置的编码或解码处理的作业区域；存储器使用请求接收机构，其从所述编解码装置接收所述存储器的使用请求；和存储器控制部，如果接收到所述使用请求，则使所述编解码装置使用所述存储器的一部分或全部的区域。

还有，在本发明中，所述终端信息也可包括存储器信息，该存储器信息表示在所述记录再生终端中所具备的所述存储器的空余容量，所述记录再生终端还具备定期地检测所述存储器的空余容量的空余容量检测机构，所述存储器控制部用新检测出的空余容量的值更新所述终端信息内的所述存储器信息。

此外，本发明的编解码装置，其可自由装卸地与记录或再生表示声音或图像的信号的记录再生终端连接，其特征在于，具备：终端信息取得机构，其与所述记录再生终端连接后，从所述记录再生终端取得与所述记录再生终端的记录再生能力相关的终端信息；和编解码机构，其根据所取得的所述终端信息，对表示声音或图像的信号进行编码或解码。

还有，在本发明中，所述终端信息也可包括：表示内置在所述记录再生终端中的内置编解码装置的有无的信息；和在有所述内置编解码装置的情况下，表示所述内置编解码装置的编码形式的编码形式信息，所述编解码机构也可还具备代码转换部，当在所述编码数据保存机构中所保存的所述编码数据的编码形式，(1)与所述编码形式信息中所示的编码形式不同的情况下，将所述编码数据的编码形式变换为所述编码形式信息中所示的编码形式，(2)与所述编码形式信息中所示的编码形式一致的情况下，直接将所述编码数据向所述记录再生终端发送。

此外，在本发明中，所述编解码机构也可具备以不同的编码形式进行编码或解码的多个编解码部，所述编解码机构，通过多个所述编码形式中的所述编码数据的位数为最小的编码形式的所述编解码部，对表示声音或图像的信号进行编码。

还有，在本发明中，所述编解码机构，在包括声音或图像的所述信号为动态图像信号的情况下，也可按照所述编码数据保存机构的空余容量对所述动态图像信号的帧速和分辨率中的至少一个进行变换后，对变换后的信号进行编码。

此外，在本发明中，存储卡中也可具备所述编码数据保存机构，所述存储卡自由装卸地与所述编解码装置连接。

还有，在本发明中，所述编解码机构也可进行视频编码、视频解码、声音编码、声音解码、视频代码转换和声音代码转换中的至少一种。

另外，本发明，不仅能够作为这种编解码装置和记录再生终端来实现，而且也可作为将以这种编解码装置或记录再生终端所具备的特征机构作为转换规范(step)的编码或解码方法和记录再生方法来实现，或者作为使计算机执行这些步骤的程序来实现。并且，这种程序当然也可经由CD-ROM等的记录介质或接口等传送介质进行传递。

(发明效果)

如上所述，根据本发明的记录再生终端，具有：仅仅在记录再生终端连接可装卸的编解码装置就能进行表示声音或图像的信号的编码以及解码的效果。此外，在记录再生终端中没有必要搭载编解码LSI或编解码软件，具有削减成本的效果。此外，具有即使在规格等中所使用的编解码方法发生变更的情况下，如果插入与新的编解码方法对应的编解码装置，则即使旧记录再生终端也可适应的效果。此外，具有用户按照使用用途能够交换编解码装置，能够提供基于用户喜好的记录再生终端的效果。

此外，根据本发明，具有：通过将编解码装置替换为其他的编解码装置，能够切换视频或音频的编码、解码以及代码转换的效果。

此外，根据本发明，具有：如果将编解码装置插入到记录再生终端中，由于编解码装置取得记录再生终端的终端信息，因此在进行视频等的编码以及解码时不需每次取得终端信息的效果。

此外，根据本发明，具有：由于将所生成的编码数据保存在编解码装置的编码数据保存机构中，因此在各种记录再生终端间交换编解码装置，能够再生保存在编解码装置内的编码数据保存机构中的编码数据，记录再生终端间的AV结合变得容易的效果。

此外，根据本发明，具有：通过取得记录再生终端和编码或者解码装置之间的最大数据传送量信息，按照上述最大数据传送量可变换由编解码装置进行解码的视频的帧速或分辨率，记录再生终端的实时再生或解码时更高视频质量的视频的再生的效果。

此外，根据本发明，具有：通过在记录再生装置的显示设备中取得适当的分辨率，编解码装置能够与记录再生装置配合而变换所解码的视频的分辨率，在每次插入编解码装置的终端中时能够输出适当的分辨率的视频的效果。

此外，根据本发明，具有：取得记录再生终端所具有的内置编码装置信息，通过将记录再生终端能够解码的编码形式的数据作为编码数据不进行解码并进行传送，能够比传送大小较大的解码后的视频更能抑制传送量的效果。

此外，根据本发明，具有：可将由记录再生终端所制作的编码数据直接保存到编解码装置内的内部存储器内，能够将多个编码形式保持在内部存储器中的效果。

此外，根据本发明，具有：按照编解码装置的内部存储器的空余容量，通过使从记录再生终端所接收的视频的帧速以及分辨率降低，从而能够防止在记录中内部存储器的空余容量不足的效果。

此外，根据本发明，具有：即使记录再生终端为不能与新的编解码形式对应的旧产品，只要保持SD插槽等的通用插槽，则通过由编解码装置对新的编解码形式的编码数据进行代码转换，从而能够再生的效果。

此外，根据本发明，具有：保存编码数据的编码数据保存机构可从编解码装置拆卸，在保存编码数据的存储器的空余容量不足的情况下，不更换编解码装置本身，通过只交换半导体存储器，能够进行新的视频的编码以及解码的效果。

附图说明

图1为表示作为第一例的现有的携带型数据再生装置的结构的框图。(现有技术)

图2为表示作为第二例的现有的动态图像编码系统的结构的框图。

图3为表示本发明的实施方式1的记录再生装置的一例的框图。(实施方式1)

图4为表示从记录再生终端向可拆除式编码装置的内部存储器传送数据时的记录再生装置的动作的流程图。

图5为表示从可拆除式编码装置的内部存储器向记录再生终端传送数据时的记录再生装置的动作的流程图。

图6(a)为表示终端信息的记述的一例的表，图6(b)为表示在终端信息中所示的各项目的ID和表示ID所示的各项目的内容之间的关系的终端信息表的一例的表。

图7为表示本实施方式1的信号变换部的内部结构的框图。

图8为表示从记录再生终端传送过来数据时的信号变换部的动作的流程图。

图9为表示求得视频数据的变换参数时的步骤的流程图。

图10为表示将保存在内部存储器中的数据向外部数据传送时的信号变换部的动作的流程图。

图11为表示决定变换参数的控制部的动作的流程图。

图12为表示图4所示的分辨率变换部的内部结构的框图。

图13为表示图12所示的分辨率变换部的动作的流程图。

图14为表示图7所示的帧速变换部的内部结构的框图。

图15为表示图14所示的帧速变换部的动作的流程图。

图16为表示本实施方式1的记录再生装置的另一例的框图。

图17(a)以及(b)为表示保存在终端信息保存部中的终端信息以及终端信息表的图。

图18为表示实施方式2的记录再生装置的一例的框图。(实施方式2)

图19为表示实施方式2的信号变换部的内部结构的框图。

图20为表示进行代码转换时的图19所示的信号变换部的动作的流程图。

图21表示实施方式3的记录再生装置的一例的框图(实施方式3)。

图22为表示图21所示的信号变换部的内部结构的框图。

图23为表示实施方式4的记录再生装置的一例的框图。(实施方式4)

图24为表示图23所示的信号变换部的内部结构的一例的框图。

图25为表示采用信号变换部内的一个编码部来对视频数据进行编码时的控制部的动作的流程图。

图26为表示以由用户所选择的编码形式对视频数据进行编码时的控制部的动作的流程图。

图27为表示仅仅通过交换可拆除式编码装置而进行家用电器间的AV结合的AV结合网络的一例的图。

符号说明：

100-可拆除式编码装置；101-终端信息取得部；102-信号变换部；103-记录再生终端；104-SD插槽；105-终端信息保存部；106-内部存储器；107-相机；108-显示器；140-记录再生终端；141-控制部；142-存储器；143-终端信息保存部；150-可拆除式编码装置；151-终端信息取得部；152-信号变换部；201-控制部；202-MPEG-AVC编码部；203-MPEG-AVC解码部；204-分辨率变换部；205-帧速变换部；207-数据总线；301-分辨率变换判定部；302-部；303-象素插补部；401-帧速变换判定部；402-部；403-帧插补部；500-信号变换部；501-代码转换部；502-控制部；600-可拆除式编码装置；602-信号变换部；604-miniSD插槽；606-miniSD卡；700-携带型数据再生装置；701-半导体存储卡；702-解码机构；703-存储器；802-视频采集板；803-编码卡；804-卡间直接通路；805-总线；807-存储器；808-CPU；1400-可拆除式编码装置；1401-记录再生终端；1402-MPEG-SP解码装置；2200-IC卡；2201-电冰箱；2202-电视机；2203-车载导航装置；2204-微波炉；2205-PDA；2206-携带电话；2210-卡插槽；2300-可拆除式编码装置；2301-信号变换部；2401-控制部；2402-MPEG-ASP编码部；2403-MPEG-SP编码部；2404-MPEG-AVC编码部；2405-编码部。

具体实施方式

以下，参照附图对本发明的实施方式进行说明。

(实施方式1)

本实施方式1的记录再生装置，在记录再生终端中未内置编码装置，由可自由装卸的可拆除式编码装置对用内置相机所摄影的视频数据等进行编码，将编码后的视频数据等保存在内置于可拆除式编码装置中的存储器等中。另外，在实施方式1中，以MPEG4-AVC编解码器作为可拆除式编码装置的信号变换部、SD插槽作为记录再生终端的连接插槽、YUV形式作为视频数据的形式的例子进行说明。此外，在本实施方式1中，编码装置没有内置在记录再生终端中。

图3为表示本发明的实施方式1的记录再生装置的一例的框图。记录再生装置具备可拆除式编码装置100以及记录再生终端103，可拆除式编码装置100和记录再生终端103例如通过SD插槽104等卡插槽相互连接。该可拆除式编码装置100是具备对从记录再生终端103所取得的视频数据等进行编码后，保存到内部存储器中，将保存在内部存储器中的编码数据进行解码后，发送到记录再生终端103的功能的编码装置，其具备：从记录再生终端103取得终端信息并进行保存的终端信息取得部101；和进行MPEG4-AVC编解码处理的信号变换部102。信号变换部102还具备内部存储器106，内部存储器106除了对由终端信息取得部101所取得的终端信息进行保存之外，还保存有通过信号变换部102编码的编码数据。

记录再生终端103具备：使用于记录再生终端103和可拆除式编码装置100之间的数据交换的SD插槽104；保存有记录再生终端103的终端信息的终端信息保存部105；对视频或静止图像进行摄影的相机107；和用于显示图像和文本的显示器108。

记录再生终端103将可拆除式编码装置100插入到SD插槽104后，将保存在终端信息保存部105中的终端信息经由例如SD接口等传送到可拆除式编码装置100。此外，记录再生终端103通过将由内置的相机107等所摄影的视频数据、由视频数据以外的通信等所得到的已编码的编码数据和文本文件等数据传送到可拆除式编码装置100，由此利用可拆除式编码装置100的终端信息取得部101作为数据的保存部。并且，在再生视频数据的情况或显示文本数据的情况下，从可拆除式编码装置100读入对象数据，并显示在显示器中。

可拆除式编码装置100通过终端信息取得部101接收从记录再生终端103经由SD接口所传送过来的终端信息，取得记录再生终端103的最大数据传送量信息、分辨率信息以及内置编码装置信息。并且，如果从记录再生终端103传送数据，则按照数据的种类增加变换处理后，保存在内部存储器106中。此外，在将内部存储器106的数据传送到记录再生终端103时，也按照数据的种类增加变换处理，传送到记录再生终端103。例如，在内部存储器106内的数据以MPEG2方式被进行过编码的情况下，以MPEG2方式对编码数据进行解码后，送到记录再生终端103。

接下来，采用图4对实施方式1中的对于从记录再生终端103向可拆除式编码装置100的内部存储器106传送数据进行说明。图4为表示从记录再生终端103向可拆除式编码装置100的内部存储器106传送数据时的记录再生装置的动作的流程图。首先，记录再生终端103经由SD接口将由内置的相机107等所摄影的YUV形式的视频数据和/或由除此之外的通信等所得到的已编码的编码数据、文本文件等的数据传送到可拆除式编码装置100(步骤S10)。信号变换部102判定所接收的数据是否为视频数据(步骤S11)，如果为视频数据，则以MPEG4-AVC方式进行编码后保存到信号变换部102内的内部存储器106中(步骤S12)。如果通过信号变换部102所接收的数据不是视频数据，则将所接收的数据直接保存到内部存储器106(步骤S13)。

接下来，采用图5对实施方式1中的对于从可拆除式编码装置100的内部存储器106向记录再生终端103的数据传送的流程进行说明。图5为表示从可拆除式编码装置100的内部存储器106向记录再生终端103传送数据时的记录再生装置的动作的流程图。首先，从记录再生终端103向可拆除式编码装置100生成数据传送请求(步骤S20)后，终端信息取得部101将记录再生终端103的终端信息发送到信号变换部102(步骤S21)。接下来信号变换部102判定有再生请求的数据是否为编码数据(步骤S22)，如果不是编码数据，则直接向记录再生终端103传送(步骤S27)。如果有传送请求的数据为编码数据，则通过判定该编码形式与记录再生终端103的内置编码装置信息的编码形式是否一致，由此判定由记录再生终端103能否可解码(步骤S23)。并且，如果由记录再生终端103可解码，则将编码数据直接向记录再生终端103传送(步骤S27)。但是，在本实施方式1中，设定为在记录再生终端103中未内置有编码装置，因此在终端信息中记述了在记录再生终端103中未内置有编码装置的内容。这种情况下，信号变换部102在步骤S23中，判定为即使有再生请求的数据为任何形式的编码数据，也不能由记录再生终端103解码。

如果具有再生请求的数据为编码数据，且由记录再生终端103不可解码，则信号变换部102判定能否在可拆除式编码装置100内对编码数据进行解码(步骤S24)，如果可解码，则对内部存储器106的编码数据进行解码。并且，通过终端信息取得部101所取得的最大数据传送量信息和分辨率信息来变换帧速(frame rate)和分辩率，将变换后的视频数据传送到记录再生终端103(步骤S25)。在可拆除式编码装置内也不能解码的情况下，向记录再生终端103发送不能再生的信号(步骤S26)。

另外，在记录再生终端103中内置有编码装置的情况下，如果从可拆除式编码装置100所接收的数据为编码数据，则记录再生终端103用内置的编码装置进行解码并进行再生，在从可拆除式编码装置100所接收的数据为没有编码的视频数据或文本数据的情况下，直接再生或显示。

另外，步骤S21也可在步骤S22与S23之间进行。还有，如果传来步骤S26的不可再生的信号在记录再生终端103中不能再生的这一情况，则可以采用错误信号等的任一种方法。

接下来，图6中表示终端信息取得部101所取得的记录再生终端103的终端信息的格式例。图6(a)为表示终端信息的记述的一例的表。图6(b)为对表示终端信息所示的各项目的ID和ID所示的各项目的内容之间的关系的终端信息表的一例进行表示的表。如图6(a)所示，终端信息以各个ID来记述最大数据传送量信息、分辨率信息以及内置编码装置信息的内容。最大数据传送量信息表示记录再生终端103所具有的SD接口的最大数据传送量。如图6(b)所示，最大数据传送量信息的ID为“0”时，记录再生终端103的SD接口的最大数据传送量为2MByte/sec，ID为“1”时最大数据传送量为4MByte/sec，ID为“2”时最大数据传送量为8MByte/sec。此外，分辨率信息在记录再生终端103的显示器108中显示适当的分辨率。如图6(b)所示，分辨率信息的ID为“0”时适当的分辨率为“SubQCIF”，“ID”为“1”时适当的分辨率为“QCIF”。此外，分辨率信息的ID为“2”时适当的分辨率为“QVGA”，分辨率信息的ID为“3”时适当的分辨率为“VGA”，分辨率信息的ID为“4”时适当的分辨率为“SD”。内置编码装置信息表示内置在记录再生终端103中的内置编码装置的编码形式。如图6(b)的终端信息表所示，内置编码装置信息的ID为“0”时，在记录再生终端103中未内置有编码装置。此外，在内置编码装置信息的ID为“1”时，所内置的编码装置的编码形式为“MPEG2”，在内置编码装置信息的ID为“2”时，所内置的编码装置的编码形式为“MPEG4-SP”。此外，在内置编码装置信息的ID为“3”时，内置在记录再生终端103中的的编码装置的编码形式为“MPEG4-ASP”。由此，在终端信息中所记述的各项目的内容由图5的终端信息表内的ID编号识别。因此，在图6(a)的终端信息例中表示，记录再生终端103的最大数据传送量为8MByte/sec，适当的分辨率为QVGA，编码装置没有被内置。

接下来，对本实施方式1的信号变换部102的结构进行说明。图7是表示本实施方式的信号变换部102的内部结构的框图。如图7所示，信号变换部102由通过来自终端信息取得部101的终端信息控制各部分的控制部201、进行MPEG4-AVC的编码处理的MPEG4-AVC编码部202、进行MPEG4-AVC的解码处理的MPEG4-AVC解码部203、进行视频分辨率变换的分辩率变换部204、变换视频的帧速的帧速变换部205、用作编码数据和/或文本数据的保存以及作业用存储器的内部存储器106和数据总线207构成。

接下来，使用图8对于从记录再生终端103向数据总线207传送过来数据时的信号变换部102的动作进行说明。图8为表示从记录再生终端103传送过来数据时的信号变换部102的动作的流程图。首先，将数据输入到数据总线207后，控制部201判定输入数据是否为视频数据(步骤S30)。如果输入数据为视频数据，则控制部201，将帧速和分辨率作为参数按照第一规定的方法决定用于对输入视频数据进行变换处理的变换参数，以使输入视频数据的编码后的数据大小不超过内部存储器106的空余容量。并且，将所决定的变换参数发送到帧速变换部205和分辨率变换部204(步骤S31)。帧速变换部205使用所接收的变换参数，来变换视频数据的帧速，将变换后的视频数据传送到分辨率变换部204(步骤S32)。分辨率变换部204按照所接收的变换参数的值变换视频的分辨率，将变换后的视频数据传送到MPEG4-AVC编码部202(步骤S33)。MPEG4-AVC编码部202用MPEG4-AVC形式对所输入的视频数据进行编码，将编码数据保存在内部存储器106中(步骤S34)。在向数据总线207输入视频数据以外的数据的情况下，控制部201将输入数据直接保存在内部存储器106中(步骤S35)。

另外，即使步骤S32的帧速变换和步骤S33的分辨率变换的顺序相反也可以。

接下来，对求得视频数据的变换参数的第一规定方法进行说明。图9为表示求得视频数据的变换参数时的步骤的流程图。在此，按照内部存储器106的空余容量调节视频数据的帧速和分辨率，进行控制以使编码数据能够保存在内部存储器106的空余区域中。控制部201从保存在视频数据的报头等中的视频信息中取得视频的帧速和分辨率。并且，按照图9的流程图，根据内部存储器106的空余容量来决定用于变换视频的帧速和分辨率的变换参数。以下，采用图9的流程图，对变换参数的决定方法进行说明。首先，将所输入的视频数据的帧速和分辨率作为初始值分别设定在变量framerate和变量resolution(步骤S40)。另外，在变量framerate中保存输入视频数据的帧速的数值，在变量resolution中保存如附加在图6的分辨率信息中的ID编号那样分辩率越大编号越上升的ID编号。接下来，判定是否内部存储器106的空余容量比阈值TH#fr小且变量framerate比“1”大(步骤S41)，如果判定结果为真，则将framerate的值减“1”，使阈值TH#fr的值变为一半(步骤S42)。并且再次进行步骤S41的判定。通过重复这些步骤S41和S42，求出用于按照内部存储器106的空余容量来减小视频的帧速的变量framerate。接下来，如果步骤S41的判定结果为假，则进入到步骤S43，判定变量framerate是否在“1”以下、内部存储器106的空余容量是否比阈值TH#re小且变量resolution是否比“0”大。如果步骤43的判定结果为真，则将变量resolution的值减“1”，使阈值TH#1变为一半，之后再次进行步骤S43的判定。通过重复进行这些步骤S43和S44，在帧速为“1”以下的情况下，求得用于按照内部存储器106的空余容量来减小视频的分辨率的变量resolution。控制部201将通过以上的处理所得到的变量framerate和resolution作为变换参数，分别发送到帧速变换部205和分辨率变换部204。

另外，这里减小帧速(步骤S41～S42)后，减小分辨率(步骤S43～S44)，但也可顺序相反。

此外，基于帧速变换部205以及分辨率变换部204的图9所示的视频数据的帧速和分辨率的变换，也可在MPEG4-AVC编码部202开始编码前只进行一次，也可在基于MPEG4-AVC编码部202进行的编码中以一定时间间隔来定期地起动帧速变换部205以及分辨率变换部204来进行。

接下来，对从内部存储器106通过数据总线207向外部传送数据的情况的信号变换部102的动作进行说明。图10为表示将保存在内部存储器106中的数据向外部数据传送时的信号变换部102的动作的流程图。如果从记录再生终端103有数据传送请求，则控制部201判定有传送请求的数据是否为编码数据(步骤S50)，如果不为编码数据，则直接向外部传送(步骤S57)。如果有传送请求的数据为编码数据，则控制部201根据终端信息内的内置编码装置信息判断由记录再生终端103能否对有传送请求的文件形式进行解码(步骤S51)。如果判断能由记录再生终端进行解码，则从内部存储器106读出编码数据，直接向外部输出(步骤S57)。如果判断为记录再生终端103不能对编码数据进行解码，则判定能否在信号变换部102内的MPEG4-AVC解码部203中进行解码(步骤S52)，如果不能进行解码，则将从内部存储器106读出的编码数据传送到MPEG4-AVC解码部203，进行解码处理。通过MPEG4-AVC解码部203被解码的YUV形式的视频数据以每副图像暂且保存在内部存储器106中(步骤S53)。接下来，控制部201，根据终端信息内的最大数据传送量信息以及分辩率信息，通过第二规定方法决定用于对传送到记录再生终端103的视频的帧速以及分辨率进行变换的变换参数(步骤S54)，将所决定的变换参数分别发送到帧速变换部205和分辨率变换部204中。分辨率变换部204从内部存储器106读出YUV形式的视频，基于由控制部201所取得的变换参数实施分辨率变换，将变换后的视频传送到帧速变换部205(步骤S55)。帧速变换部205从分辨率变换部204接收视频，基于从控制部201所取得的变换参数一边改变视频的帧速，一边向外部输出(步骤S56)。不能用记录再生终端103和MPEG4-AVC解码部203来解码的情况下，向外部输出不能再生的信号(步骤S58)。

另外，如果传来在记录再生终端103中不能再生步骤S58的不能再生的信号的这一情况，则也可采用错误信号等的任何方法。

接下来，对求得用于变换向记录再生终端103传送的视频的帧速以及分辨率的变换参数的第二规定方法进行说明。图11为表示决定变换参数的控制部201的动作的流程图。控制部201，使用终端信息内的最大数据传送量信息和分辨率信息，按照图11的流程图决定变换参数。以下，使用图11的流程图对变换参数的决定方法进行说明。首先，在变量resolution中设定图6的分辨率信息的ID编号作为初始值(步骤S60)。并且，根据最大数据传送量信息和保存在变量resolution中的分辨率的图像大小，求得向记录再生终端可传送的帧速，保存在变量framerate中(步骤S61)。例如，在最大数据传送量为4MByte/sec，分辨率为VGA的情况下，帧速可由以下的公式求出。

framerate＝4Mbyte/sec÷(640×480×1.5)Byte/frame＝9.1fps

接下来，判定变量framerate是否为“1”(步骤S62)，如果判定结果为真，则将变量resolution的值减“1”(步骤S63)。并且，如果变量resolution比“0”小，则判断为不能进行传送而结束(步骤S64)。如果变量resolution为“0”以上，则通过再次重复步骤S61到步骤S64，调整帧速和分辨率。如果在步骤S62中变量framerate比“1”大，则进行帧速的最大值的限制(clipping)(步骤S65和S66)后结束处理。控制部201将通过以上处理所得到的变量framerate和resolution作为变换参数，分别发送到帧速变换部205和分辨率变换部204。

另外，这一次在步骤S62中帧速的最小值设为“1”，但也可为“1”以上的值。此外，在步骤S65和S66中帧速的最大值设为“30”，但也可为“30”以上的值。

接下来，对分辨率变换部204的结构进行说明。图12为表示图4所示的分辨率变换部204的内部结构的框图。如图12所示，分辨率变换部204具备分辨率变换判定部301、象素间隔提取部302和象素插补部303。也就是说，分辨率变换部204由下述部分构成：通过从控制部201所接收的变换参数在象素间隔提取部302与象素插补部303之间进行切换的分辨率变换判定部301；使用了LPF(Low Pass Filter)后，通过间隔提取象素进行降频(downconvert)的象素间隔提取部302；和通过采用LPF进行象素的插补进行升频的象素插补部303。

接下来，采用图13的流程图对分辨率变换部204的动作进行说明。图13为表示图12所示的分辨率变换部204的动作的流程图。首先，分辨率变换判定部301从输入视频数据的报头取得分辨率作为初始值，设定在变量org#resolution中(步骤S70)。并且，将变量org#resolution和变换参数resolution的值进行比较，如果变换参数resolution更大，则通过象素插补部303进行从org#resolution向resolution的升频(步骤S72)。如果变换参数resolution更小，则通过象素间隔提取部302进行从org#resolution向resolution的降频(步骤S73)。如果变换参数resolution和org#resolution的值相同，则不进行分辨率变换。按照以上的步骤，分辨率变换部204基于变换参数进行输入视频的分辨率变换。另外，步骤S72和S74的升频以及降频的方法也可是使用LPF等进行插补或间隔提取的方法，也可是复原图像的高频域成分的方法等。

接下来，对帧速变换部205的结构进行说明。图14为表示图7所示的帧速变换部205的内部结构的框图。如图14所示，帧速变换部205具备帧速变换判定部401、帧间隔提取部402和帧插补部403。也就是说，由下述部分构成：通过从控制部201所接收的变换参数在帧间隔提取部402与帧插补部403之间进行切换的帧速变换判定部401；使用了LPF后，通过对帧进行间隔提取而减小帧速的帧间隔提取部402；和通过使用LPF作成帧的插补图像而提高帧速的帧插补部403。

接下来，采用图15的流程图对帧速变换部205的动作进行说明。图15为表示图14所示的帧速变换部205的动作的流程图。首先，帧速变换判定部401从输入视频数据的报头取得帧速后，作为初始值设定在变量org#framerate中(步骤S80)。并且，将变量org#framerate和变换参数framerate的值进行比较后，如果变换参数framerate更大，则通过帧插补部403进行从org#framerate向framerate的升频(步骤S82)。如果变换参数framerate更小，则通过帧间隔提取部402进行从org#framerate向framerate的降频(步骤S83)。如果变换参数framerate和org#framerate的值相同，则不进行帧速变换。按照以上的步骤，帧速变换部205根据变换参数进行输入视频数据的帧速变换。另外，帧速的升频以及降频的方法也可为使用LPF等进行帧的插补或间隔提取的方法，也可为通过重复使用相同的帧的方法等。

通过以上所示的实施方式1的结构，记录再生终端103，如果保持有SD插槽等的通用插槽和保存终端信息的存储器等保存部，则即使在内部不具备编码装置，也能够仅仅插入可拆除式编码装置100，来进行由内置的相机等所摄影的视频的编码和解码。

此外，对记录再生终端103不需要搭载编解码LSI和编解码软件，从而降低成本。

此外，通过从记录再生终端可拆卸编码装置和编码数据保存用存储器(内部存储器106)，仅仅通过更换可拆除式编码装置来进行记录再生终端间的AV结合，因此AV结合变得容易。

此外，通过从记录再生终端可拆卸编码装置和编码数据保存用存储器，来即使在规格等中所使用的编解码方法产生变化的情况下，如果插入与新的编解码方法所对应的可拆除式编码装置，则旧记录再生终端也可适应。

此外，通过从记录再生终端可拆卸编码装置和编码数据保存用存储器，来用户可按照使用用途交换可拆除式编码装置，可提供基于用户的喜好的记录再生终端103。

此外，通过由终端信息取得部101取得适合于记录再生终端103的显示器108的分辨率信息，由此可拆除式编码装置100能够与记录再生终端103配合而对进行过解码的视频的分辨率进行变换。由此，能够向每个插入可拆除式编码装置100的记录再生终端103输出适当的分辨率的视频数据。

此外，通过取得记录再生终端103所具有的通用插槽的最大传送量信息，可拆除式编码装置100能够按照传送量变换解码的视频的帧速以及分辨率。由此，在用记录再生终端103对由可拆除式编码装置100所解码的视频数据进行实时再生时，即使在数据传送量不足的情况下，通过减小帧速或分辨率而可实时再生。此外，在数据传送量中有余地的情况下，通过提高进行过解码的视频数据的帧速或者分辨率，能够再生出更高视频质量的视频数据。

此外，取得记录再生终端103所具有的内置编码装置信息，通过将记录再生终端103能够解码的编码形式作为编码数据来进行传送，能够比传送大小较大的解码后的视频更能减小传送量。

此外，由记录再生终端103所作成的编码数据可直接保存在可拆除式编码装置100内的内部存储器106内，能够将以多种编码形式编码的编码数据保持在内部存储器106中。

另外，按照可拆除式编码装置100的内部存储器106量的剩余量，通过减小从记录再生终端103所接收的视频数据的帧速以及分辨率降低，从而能够防止在视频数据的记录中没有内部存储器106的剩余量。

还有，在本次实施方式中，例示了MPEG4-AVC作为编解码方法，但也可为MPEG2或MPEG4等视频编解码器，也可为AMR或MPEG4-AAC等音频编解码器。

还有，在本实施方式中，假设为在记录再生终端103中未内置有编码装置来进行了说明，但当然也可内置。

还有，在本实施方式中，仅仅通过更换可拆除式编码装置100，来能够切换为与使用中的可拆除式编码装置100中所具备的编解码器不同的编解码器。但是，编解码的切换不限于可拆除式编码装置100的切换。除此之外，也可使用具备有例如miniSD卡的插槽的可拆除式编码装置来切换保存有已升级版本的编解码器的miniSD卡。此外，记录再生终端103也可经由网络等的通信线路网，下载已升级版本的编解码器。

此外，在本实施方式中虽然例示了以SD插槽作为记录再生终端103和可拆除式编码装置100之间的数据传送部，但也可使用USB接口或PCI插槽等的通用插槽。

此外，终端信息保存部105也可使用记录再生终端103所保持的存储器的一部分。

还有，可拆除式编码装置也可使用在记录再生终端中所具备的存储器来进行编码或解码。这是因为，由于可拆除式编码装置为SD卡等，因此在可拆除式编码装置中所具备的内部存储器106在存储器容量上有某种程度的限制。图16为表示本实施方式1的记录再生装置的其他例的框图。实施方式1的其他记录再生装置具备记录再生终端140以及可拆除式编码装置150。

记录再生终端140具备某种程度容量大的存储器，提供了按照可拆除式编码装置150的请求成为编码或解码处理的作业区域用的存储器区域。记录再生终端140具备SD插槽104、相机107、显示器108、控制部141、存储器142和终端信息保存部143。控制部141定期地对存储器142的空余容量进行检查，以存储器142的当前的空余容量更新终端信息。图17(a)以及(b)为表示在终端信息保存部143中所保存的终端信息以及终端信息表的图。如图17(a)所示，终端信息中还添加有存储器空余容量这样的项目。在此，存储器空余容量的终端信息ID为“2”。参照图17(b)后，在终端信息表的右下包括有存储器空余容量的列表。由此，在ID为“2”的情况下，可知存储器142的当前空余容量为“128～256MByte”。

可拆除式编码装置150例如按照被编码或解码的动态图像的图像大小，将在记录再生终端140中所具备的存储器142作为帧存储器使用。可拆除式编码装置150具备终端信息取得部151、信号变换部152。信号变换部152中具备内部存储器106。终端信息取得部151从记录再生终端140的终端信息保存部143取得最大数据传送量信息、分辨率信息、内置编码装置信息还有存储器空余容量作为终端信息。如果例如如果想要编码或解码的图像的大小为HD(High Definition)大小，则信号变换部152使用记录再生终端140的存储器142，如果图像的大小为SD(Standard Definition)大小，则信号变换部152使用内部存储器106进行编码或解码。具体地说，如果图像的大小为HD大小，则信号变换部152对记录再生终端140的控制部141发送存储器142的使用请求，接收可使用存储器区域的通知，将动态图像的数据写入到该区域。但是，从终端信息取得部151所取得的终端信息中，表示存储器142的空余容量的ID为“0”，所以没有足够的空余容量使用于作为HD大小的动态图像的帧存储器的情况下，经由控制部141将例如“存储器容量不足。请关闭任一个应用程序。”等的消息显示在显示器108上。通过这种结构，即使可拆除式编码装置150为要求大存储区域的大画面、高视频质量的动态图像，通过借用在记录再生终端140中所具备的存储器142也能自然地进行编码或解码。

还有，在上述例中，控制部141监视存储器142的空余容量，每次更新终端信息，但并不限于此，也可在终端信息中只记述存储器142的存储器容量，也可只记述存储器142的有无。此外，可拆除式编码装置150按照想要编码或解码的图像的大小借用存储器142，但并不限于此，也可按照图像的大小以外的数据大小进行借用，在记录再生终端140中具备存储器142的情况下，也可始终借用存储器142进行编码或解码。此外，在上述例子中，按照图像大小为HD大小还是SD大小，来决定是否使用记录再生终端140的存储器142，但本发明并不限于此。例如在可拆除式编码装置150要进行编码或解码的图像的数据量超过预定的阈值时，也可使用记录再生终端140的存储器142。还有，在由可拆除式编码装置150使用记录再生终端140的存储器142的情况下，在上述例中将，该存储器142作为编码或解码的帧存储器使用。但是，本发明并不限于这种用途，也可用于其他用途(例如动态矢量存储器等)中。还有，在上述其他例中，说明了在存储器142的空余容量作为HD大小的动态图像的帧存储器使用时不足的情况下，显示例如“存储器容量不足。…”等的错误消息，但本发明并不限于此。例如在存储器142的空余容量不足的情况下，也可首先切断(cut)视频数据的声音信号，对声音信号不进行编码。此外，也可将记录再生终端140的存储器142为基础，还并用可拆除式编码装置150的内部存储器106以及miniSD卡等。

此外，在本实施方式中对YUV形式的视频数据进行了例示，但也可为YUV2或RGB等的其他视频形式。

此外，在本实施方式中以MPEG2、MPEG4-ASP等的编解码方法来对内置编码装置信息进行分类，但也可更详细地分类为MPEG2编码、MPEG2解码、MPEG2编解码等。

(实施方式2)

在本实施方式2中，与实施方式1不同点在于：在记录再生终端中具备MPEG4-SP解码装置，在可拆除式编码装置的信号变换部中还具备从特定的编码形式向其他编码形式进行编码形式的变换的视频代码转换(transcoding)部。通过具备该视频代码转换部，即使在记录再生终端只能经由内置的MPEG4-SP解码装置而再生视频数据的情况下，也能再生编码数据。在具备SD插槽作为记录再生终端的连接插槽的这一点与实施方式1相同。

图18为表示实施方式2的记录再生装置的一例的框图。在该图中，对于与图3相同的结构进行了全部说明，因此赋予相同的参照符号，并省略说明。实施方式2的记录再生装置具备可拆除式编码装置1400以及记录再生终端1401。可拆除式编码装置1400具备信号变换部500的这一点与实施方式1的可拆除式编码装置100不同。此外，记录再生终端1401具备MPEG4-SP解码装置1402的这一点与实施方式1的记录再生终端103不同。

图19为表示实施方式2的信号变换部500的内部结构的框图。如图19所示，信号变换部500由下述部分构成：通过来自终端信息取得部101的终端信息来控制代码转换方法的控制部502；进行保存在内部存储器106部中的编码数据的代码转换的代码转换部501；用作编码数据的保存以及作业用存储器的内部存储器106；进行MPEG4-AVC的编码处理的MPEG4-AVC编码部202；进行MPEG4-AVC的解码处理的MPEG4-AVC解码部203；进行视频的分辨率变换的分辨率变换部204；变换视频的帧速的帧速变换部205；和数据总线207构成。

接下来，使用图20对实施方式2中的信号变换部500的动作进行说明。图20为表示进行代码转换时的图19所示的信号变换部500的动作的流程图。从记录再生终端1401向内部存储器106有数据传送请求时，控制部502判定有传送请求的数据是否为编码数据(步骤S90)，如果不是编码数据，则直接向记录再生终端1401传送(步骤S94)。如果有传送请求的数据为编码数据，则控制部502根据终端信息内的内置编码装置信息判断记录再生终端141能否对有传送请求的文件形式进行解码(步骤S91)。如果判断为记录再生终端1401能解码，则从内部存储器106读出编码数据，直接向记录再生终端传送(步骤S96)。如果为记录再生终端1401不能解码的编码数据，则判断能否由信号变换部500内的代码转换部501代码转换为记录再生终端1401能解码的编码形式(步骤S92)。如果能代码转换，则将从内部存储器106所读出的编码数据向代码转换部501传送，在代码转换为内置编码装置信息的编码形式(例如MPEG4-SP)后，向记录再生终端1401传送(步骤S93)。如果不能代码转换，则输出不可再生信号，向记录再生终端1401通知不能再生的情况(步骤S95)。

采用以上的内容为例，具体地进行说明。例如在从记录再生终端1401对内部存储器106内的MPEG4-AVC形式的编码数据生成传送请求的情况下，首先控制部502根据所接收的终端信息的内置编码装置信息判断记录再生终端1401具备MPEG4-SP解码装置1402。接下来，判断能否由代码转换部501进行从MPEG4-AVC到MPEG4-SP的代码转换，如果可以则进行代码转换，输出所作成的MPEG4-SP形式的编码数据。记录再生终端1401从可拆除式编码装置1400接收MPEG4-SP形式的编码数据，由内置的MPEG4-SP解码装置1402进行解码并进行再生。

根据以上的实施方式2，即使在记录再生终端1401只内置有MPEG4-SP解码装置1402，并且不具备直接显示从可拆除式编码装置1400所接收的YUV形式的视频的显示部的情况下，通过由可拆除式编码装置1400代码转换为MPEG4-SP形式的编码数据，也能够经由记录再生终端1401的MPEG4-SP解码装置再生MPEG4-AVC等的编码数据。由此，即使不与MPEG4-AVC等的新编码形式对应的旧产品，只要保持SD插槽等的通用插槽，通过采用实施方式2的可拆除式编码装置就能够再生MPEG4-AVC等的新编码形式的编码数据。

另外，在本实施方式中作为视频代码转换方法例示了从MPEG4-AVC到MPEG4-SP的变换，但也可为从MPEG2到MPEG4的视频代码转换等，也可为向AMR或MPEG4-AAC的音频代码转换。

此外，在本实施方式中例示了记录再生终端具备MPEG4SP解码装置，但也可具备其他的解码装置。

此外，在本实施方式中例示了在记录再生终端中具备MPEG4-SP等的解码装置，但记录再生终端也可通过由内置CPU执行MPEG4-SP等的解码用程序，来对编码数据进行解码。另外此时，可拆除式编码装置1400也可按照在终端信息保存部105中所保存的记录再生终端的CPU的处理性能信息来切换代码转换方法。例如，在可拆除编码装置1400的内部存储器106中保存有MPEG-4AVC等的解码处理负载高的编码数据的情况下，可拆除编码装置1400取得在终端信息保存部105中所保存的记录再生终端的CPU处理性能信息，如果CPU处理性能高，则直接传送MPEG-4AVC等的解码处理负载高的编码数据，如果CPU处理能力低，则可将MPEG-4AVC等的解码处理负载高的编码数据代码转换为MPEG4-SP等的解码处理负载低的编码数据后进行传送。

此外，在此以SD插槽作为记录再生终端1401和可拆除编码装置1400的数据传送部进行了例示，但采用USB接口或PCI插槽等通用插槽也可以。

此外，在记录再生终端1401中，由于预先保存终端信息，因此不需要具备终端信息保存部105之类的特别的存储器，也可将记录再生终端1401所保持的存储器的一部分用作终端信息保存部105。

(实施方式3)

在本实施方式3的记录再生装置中，记录再生终端与实施方式1相同，但通过miniSD插槽将miniSD卡与可拆除式编码装置可装卸地连接，使用miniSD卡来代替内部存储器这些方面与实施方式1不同。另外，在本实施方式3中，例示了将MPEG4-AVC编码器作为可拆除式编码装置的信号变换部、将SD插槽作为记录再生终端的连接插槽、将miniSD插槽作为可拆除式编码装置的存储器插槽。

图21以及图22表示本发明的实施方式3的框图。图21为表示实施方式3的记录再生装置的一例的框图。如图21所示，在可拆除式编码装置600中具备新的miniSD插槽604。图22为表示图21所示的信号变换部602的内部结构的框图。如图22所示，从信号变换部602中除去内部存储器106。

实施方式3的信号变换部602，通过代替实施方式1的内部存储器10而使用插入到可拆除式编码装置600的miniSD插槽的miniSD卡606作为编码数据的保存以及作业用存储器，由实施方式1所说明的各处理部进行MPEG4-AVC的编码处理。

如上所述，根据实施方式3的可拆除式编码装置600，从可拆除式编码装置可拆卸对编码数据进行保存的内部存储器。由此，在对编码数据进行的存储器的空余容量不足的情况下，即使不替换可拆除式编码装置本体，通过只交换miniSD卡等的半导体存储器，来也能够进行新的视频的编码以及解码。

另外，在本实施方式中例示了将MPEG4-AVC作为编解码方法，但也可为MPEG2或MPEG4等的视频编解码，也可为AMR或MPEG4-AAC等的音频编解码。

此外，在此例示了将SD插槽作为记录再生终端和可拆除式编码装置的数据传送部，但也可采用USB接口或PCI插槽等的通用插槽。

此外，在此例示了将miniSD插槽作为可拆除式编码装置和半导体存储器的数据传送部，但也可采用USB接口或PCI插槽等的通用插槽。

此外，终端信息保存部也可使用记录再生终端所保持的存储器的一部分。

此外，在本实施方式中例示了YUV形式的视频，但也可采用YUV2或RGB等其他视频形式。

此外，在本实施方式中用MPEG2、MPEG4-SP、MPEG4-ASP等的编解码方法来对分离内置编码装置信息进行分类，但也可更详细地分类为MPEG2编码、MPEG2解码、MPEG2编解码等。

(实施方式4)

在本实施方式4的记录再生装置中，记录再生终端与实施方式1相同，但可拆除式编码装置具备编码形式不同的多个编码部的这一点与实施方式1不同。

图23为表示实施方式4的记录再生装置的一例的框图。如图23所示，可拆除式编码装置2300具备具有多个编码部的信号变换部2301。图24为表示图23所示的信号变换部2301的内部结构的一例的框图。信号变换部2301为以不同的编码形式对从记录再生终端103接收到的视频数据进行编码，并保存在内部存储器106中的处理部，具备内部存储器106、分辨率变换部204、帧速变换部205、数据总线207、控制部2401、MPEG4-ASP编码部2402、MPEG4-SP编码部2403、MPEG4-AVC编码部2404以及MPEG2编码部2405。MPEG4-ASP编码部2402、MPEG4-SP编码部2403、MPEG4-AVC编码部2404以及MPEG2编码部2405分别为以MPEG4-ASP、MPEG4-SP、MPEG4-AVC以及MPEG2的编码形式对例如以YUV形式输入的视频数据进行编码的处理部。

参照附图对如上方式构成的信号变换部2301的具体的动作进行说明。图25为使用信号变换部2301内的一个编码部对视频数据进行编码时的控制部2401的动作的流程图。该处理表示图4的流程图的步骤S12中的更详细的处理内容。如果从记录再生终端103接收到的数据为视频数据，则控制部2401使信号变换部2301中所具备的所有的编码部执行视频数据的编码(S2001)。接下来，控制部2401对由各编码部编码的编码数据的位数进行计数(S2002)，将所计数的位数最少的编码数据保存到内部存储器106中(S2003)。具体来说，如果从记录再生终端103所接收的数据为视频数据，则控制部2401使MPEG4-ASP编码部2402、MPEG4-SP编码部2403、MPEG4-AVC编码部2404以及MPEG2编码部2405全部执行编码，将其中编码量最少的编码数据保存在内部存储器106中。

此外，除此之外，也可提示能由在信号变换部2301中所具备的编码部执行的多个编码形式，使用户选择其中一个。图26为表示以由用户所选择的编码形式来对视频数据进行编码时的控制部2401的动作的流程图。如果从记录再生终端103所接收的数据为视频数据，则控制部2401例如将可执行的编码形式一览显示在显示器108上，由用户选择使用其中的哪一个编码形式的编码部来进行编码(S2101)。如果通过用户选择一个一览显示的编码形式的一个(S2102)，则使与所选择的编码形式对应的编码部执行编码(S2103)，将编码的结果得到的编码数据保存在内部存储器106中(S2104)。

如上所述，通过本实施方式4的记录再生装置，在可拆除式编码装置2300的信号变换部2301中具备由多个编解码方法进行编码的多个编码部，因此能够选择最适于所输入的视频数据例如数据的压缩率高的编解码方法来进行编码。此外，对于用户而言，具有选择用户喜好的编解码方法来进行编码的效果。

另外，在上述实施方式4中，只对在信号变换部2301中具备多个编码部的情况进行了说明，但同样也可具备对以不同的编码形式编码的编码数据进行解码的多个解码部。此外，也可具备多个编码部和多个解码部。由此，通过在可拆除式编码装置2300中具备多个解码部，例如仅仅通过更换可拆除式编码装置2300，来对用各种家用电器从网络等所下载的视频数据进行解码。图27为表示只交换可拆除式编码装置而进行家用电器间的AV结合的AV结合网络的一例的图。如图27所示，例如AV结合网络具备电冰箱2201、电视2202、车载导航装置2203、微波炉2204、PDA2205以及携带电话2206等。这些家用电器分别具备用于连接SD卡等IC卡2200的卡插槽2210及其接口，此外具备用于再生适当视频数据的监视器或扬声器等。该IC卡2200为上述实施方式1～4的可拆除式编码装置，当然如实施方式3那样也可具备微型卡(mini card)插槽。如图27所示，在IC卡2200中具备已编码的视频数据和用于对该视频数据进行解码的解码部，因此例如即使是只能再生YUV形式的视频数据的电冰箱2201或微波炉2204等，用户仅仅通过在这些卡插槽2210中插入IC卡2200，也能享受保存在IC卡2200中的视频。此外，这些家用电器具备通信功能，例如从网络等下载已编码的AV数据的情况下，即使不具备与该AV数据编码形式一致的解码部，只要是在可拆除式编码装置中可解码的编码形式，则仅仅通过将IC卡2200插入卡插槽2210来就能进行解码。

另外，在上述实施方式中，对具备MPEG4-ASP编码部2402、MPEG4-SP编码部2403、MPEG4-AVC编码部2404以及MPEG2编码部2405的情况进行了说明，但信号变换部2301也可不需具备上述所有部件，而具备上述部件中的两个以上。此外，也可具备与上述部件不同的编码形式的编码部或解码部。

此外，以在上述实施方式中所示的记录再生终端是进行AV数据等记录以及再生的两个动作的装置为前提进行了说明，但也可为只进行显示的装置，也可为只进行记录的装置。

另外，作为典型，将框图(图3、图7、图12、图14、图16、图18、图19、图21、图22、图23、图24等)的各功能模块由作为集成电路的LSI来实现。也可对上述功能模块的每一个单芯片(one chip)化，也可用按照包括一部分或所有的的方式单芯片化。例如也可将存储器以外的功能模块单芯片化。

另外，这里称作LSI，但根据集成度的不同有时称作IC、系统LSI、高级LSI(super LSI)、超级LSI(ultra LSI)。

此外，集成电路化的方法不限于LSI，也可由专用电路或通用处理器来实现。在制造LSI后，也可利用可编程的FPGA(Field Programmable GateArray)和可重新构成LSI内部的电路单元的连接或设定的重构(re-configurable)处理器等。

进一步如果通过半导体技术的进步或派生的其他技术而置换为LSI的集成电路化的技术出现，则当然也可使用该技术进行功能模块的集成化。例如生物技术的适应等成为可能。

此外，也可在各功能模块中只对保存有成为编码或解码对象的数据的存储机构不进行单芯片化，而采用其他结构。

产业上的利用可能性

本发明在广播、通信以及存储的领域中，作为记录再生视频或音频的机器而有用。此外，作为在单芯片中具备用于记录再生视频或音频的功能的集成电路而也有用。此外，作为静止图像记录再生机器等也可适用。本发明还作为记录了AV数据或编码/解码程序的IC卡等记录介质而有用。

Claims (23)

1、一种记录再生终端，其可自由装卸地与编解码装置连接并对表示声音或图像的信号进行记录或再生，

具备：终端信息保存机构，其保存与自身记录再生终端的记录再生能力相关的终端信息，连接所述编解码装置后，将所述终端信息向所述编解码装置输出；和

信号发送机构，其在对表示声音或图像的信号进行记录时，通过将表示声音或图像的所述信号向所述编解码装置发送而对所述信号进行编码。

2、根据权利要求1所述的记录再生终端，其特征在于，

所述记录再生终端还将对表示声音或图像的所述信号进行编码而得到的编码数据保存到所述编解码装置的内部。

3、根据权利要求2所述的记录再生终端，其特征在于，

所述终端信息包括表示内置在所述记录再生终端中的内置编解码装置的有无的信息，

在没有所述内置编解码装置的情况下，所述记录再生终端使所述编解码装置对包括声音或图像的所述信号进行编码。

4、根据权利要求3所述的记录再生终端，其特征在于，

所述记录再生终端具备再生机构，该机构在没有所述内置编解码装置的情况下，从所述编解码装置接收由所述编解码装置对保存在所述编解码装置中的所述编码数据进行解码而得到的表示声音或图像的信号，并进行再生。

5、根据权利要求4所述的记录再生终端，其特征在于，

所述终端信息包括编码形式信息，该编码形式信息表示所述内置编解码装置的编码形式，

所述记录再生终端还具备以规定的编码形式对表示声音或图像的信号进行编码或解码的内置编解码装置，

在所述编解码装置中所保存的所述编码数据的编码形式与所述编码形式信息中所示的编码形式不同的情况下，所述再生机构接收用所述编解码装置解码所得到的包括声音或图像的所述信号并进行再生，在与所述编码形式信息中所示的编码形式一致的情况下，所述内置编解码装置直接接收所述编码数据并进行解码。

6、根据权利要求2所述的记录再生终端，其特征在于，

所述记录再生终端还具备：

编码形式通知接收机构，其在所述编解码装置能以互不相同的多个编码形式进行编码的情况下，从所述编解码装置接收可选择的所述编码形式的通知；和

编码形式选择机构，其显示由所述编解码装置通知的多个所述编码形式，并接受由使用者选择的一个编码形式，

所述记录再生终端，以由使用者所选择的编码形式使所述编解码装置对表示声音或图像的信号进行编码。

7、根据权利要求2所述的记录再生终端，其特征在于，

所述终端信息包括：表示内置在所述记录再生终端中的内置编解码装置的有无的信息；和在有所述内置编解码装置的情况下，表示所述内置编解码装置的编码形式的编码形式信息，

所述记录再生终端具备编码数据接收机构，其在所述编解码装置中保存的所述编码数据的编码形式，(1)与所述编码形式信息中所示的编码形式不同的情况下，接收将编码形式变换为所述编码形式信息中所示的编码形式的编码数据，(2)与所述编码形式信息中所示的编码形式一致的情况下，直接接收所述编码数据。

8、根据权利要求1所述的记录再生终端，其特征在于，

所述记录再生终端还具备：

存储器，其可提供作为基于所述编解码装置的编码或解码处理的作业区域；

存储器使用请求接收机构，其从所述编解码装置接收所述存储器的使用请求；和

存储器控制部，如果接收到所述使用请求，则使所述编解码装置使用所述存储器的一部分或全部的区域。

9、根据权利要求8所述的记录再生终端，其特征在于，

所述终端信息包括存储器信息，该存储器信息表示在所述记录再生终端中所具备的所述存储器的空余容量，

所述记录再生终端还具备定期地检测所述存储器的空余容量的空余容量检测机构，

所述存储器控制部用新检测出的空余容量的值更新所述终端信息内的所述存储器信息。

10、一种编解码装置，其可自由装卸地与记录或再生表示声音或图像的信号的记录再生终端连接，具备：

终端信息取得机构，其与所述记录再生终端连接后，从所述记录再生终端取得与所述记录再生终端的记录再生能力相关的终端信息；和

编解码机构，其根据所取得的所述终端信息，对表示声音或图像的信号进行编码或解码。

11、根据权利要求10所述的编解码装置，其特征在于，

所述编解码装置还包括编码数据保存机构，该机构保存对表示声音或图像的信号进行编码而得到的编码数据，

所述编解码机构对表示声音或图像的信息进行编码后，将所述编码数据保存在所述编码数据保存机构中。

12、根据权利要求11所述的编解码装置，其特征在于，

所述终端信息包括：表示内置在所述记录再生终端中的内置编解码装置的有无的信息；和在有所述内置编解码装置的情况下，表示所述内置编解码装置的编码形式的编码形式信息，

所述编解码机构还具备代码转换部，当在所述编码数据保存机构中所保存的所述编码数据的编码形式，(1)与所述编码形式信息中所示的编码形式不同的情况下，将所述编码数据的编码形式变换为所述编码形式信息中所示的编码形式，(2)与所述编码形式信息中所示的编码形式一致的情况下，直接将所述编码数据向所述记录再生终端发送。

13、根据权利要求11所述的编解码装置，其特征在于，

所述编解码机构具备以不同的编码或解码形式进行编码或解码的多个编解码部，

所述编解码机构，通过多个所述编码形式中的所述编码数据的位数为最小的编码形式的所述编解码部，对表示声音或图像的信号进行编码。

14、根据权利要求11所述的编解码装置，其特征在于，

所述终端信息包括表示所述记录再生终端和所述编解码装置之间的每单位时间的最大数据传送量的信息，

所述编解码机构，在从所述编码数据保存机构内的所述编码数据中对动态图像信号进行过解码的情况下，按照所述最大数据传送量信息，对已解码的所述动态图像信号的帧速和分辨率中的至少一个进行变换，以使所述动态图像信号的每单位时间的数据量不超过所述最大数据传送量。

15、根据权利要求11所述的编解码装置，其特征在于，

所述终端信息包括表示所述再生机构的适当分辨率的分辨率信息，

所述编解码机构，在从所述编码数据保存机构内的所述编码数据中已解码出动态图像信号的情况下，将按照所述分辨率信息被解码的所述动态图像信号的分辨率变换为所述适当分辨率。

16、根据权利要求11所述的编解码装置，其特征在于，

所述编解码装置还具备信号接收机构，该信号接收机构从所述记录再生终端接收应保存在所述编码数据保存机构中的信号，

如果所接收的所述信号为编码数据，则所述编解码机构不进行编码而直接保存。

17、根据权利要求11所述的编解码装置，其特征在于，

所述编解码机构，在包括声音或图像的所述信号为动态图像信号的情况下，按照所述编码数据保存机构的空余容量对所述动态图像信号的帧速和分辨率中的至少一个进行变换后，对变换后的信号进行编码。

18、根据权利要求11所述的编解码装置，其特征在于，

存储卡中具备所述编码数据保存机构，所述存储卡自由装卸地与所述编解码装置连接。

19、根据权利要求10所述的编解码装置，其特征在于，

所述编解码机构进行视频编码、视频解码、声音编码、声音解码、视频代码转换和声音代码转换中的至少一种。

20、根据权利要求10所述的编解码装置，其特征在于，

所述终端信息包括存储器信息，该存储器信息表示所述编解码装置可利用的在所述记录再生终端中所内置的存储器的有无，

所述编解码机构，在包括声音或图像的所述信号为动态图像信号，且有内置在所述记录再生终端内的存储器的情况下，向所述记录再生终端请求使用所述存储器。

21、根据权利要求10所述的编解码装置，其特征在于，

所述终端信息包括存储器信息，该存储器信息表示所述编解码装置可利用的在所述记录再生终端中内置的存储器的容量，

所述编解码机构，在包括声音或图像的所述信号为动态图像信号的情况下，按照想要编码或解码的图像的大小和所述终端信息中所示的所述存储器的容量，向所述记录再生终端请求使用所述存储器。

22、一种集成电路，其中安装有编解码装置，该编解码装置可自由装卸地与记录或再生表示声音或图像的信号的记录再生终端连接，

所述集成电路具备：

终端信息取得机构，其与所述记录再生终端连接后，从所述记录再生终端取得与所述记录再生终端相关的终端信息；和

编解码机构，其根据所取得的所述终端信息，对表示声音或图像的信号进行编码或解码。

23、一种记录再生方法，是自由装卸地与编解码装置连接并记录或再生表示声音或图像的信号的记录再生终端中的记录再生方法，

将与自身记录再生终端的记录再生能力相关的终端信息预先保存在存储机构中，连接所述编解码装置后，将所述终端信息向所述编解码装置输出，

在对表示声音或图像的信号进行记录时，通过将表示声音或图像的所述信号向所述编解码装置发送而对所述信号进行编码。

Images