CN103177720A - 信号处理装置和方法、程序、记录介质和信号处理系统 - Google Patents

Abstract

本技术涉及信号处理装置、信号处理方法、程序、记录介质以及信号处理系统。一种信号处理装置包括：特征量计算单元，计算通过第一通信路径获取的第一音频信号以及通过第二通信路径获取的、对应于第一音频信号的第二音频信号的各个特征量；音频同步处理单元，基于通过特征量计算单元计算的特征量，产生第一音频信号和第二音频信号的同步信息；以及音频合成单元，基于通过音频同步处理单元产生的同步信息，将第一音频信号与第二音频信号合成。

Description

信号处理装置和方法、程序、记录介质和信号处理系统

技术领域

本技术涉及信号处理装置、信号处理方法、程序、记录介质以及信号处理系统，尤其涉及其中能够输出副音频信号的信号处理装置、信号处理方法、程序、记录介质以及信号处理系统，通过与主音频信号同步，副音频信号与主音频信号相同或相似。

背景技术

在现有技术中，已经实现根据用户的需要对音频信号处理装置中输出音频的声音质量等的改善。

例如，作为音频信号处理装置的电视机的制造商通过设计电视机使得声音扩散出去、通过改善电视机所包括的扬声器的性能、通过分开出售高性能扬声器等等，已经实现对输出音频的声音质量的改善。此外，还有这样的情况，通过用户准备与电视机分开的音频放大器、扬声器等来实现对输出音频的声音质量的改善。

虽然以这种方式已经实现了通过硬件对声音质量的改善，但是也已经实现了通过软件对声音质量的改善。通过例如像加宽频带（例如，参见日本未审专利申请No.2008-139844）、附加声音的扩散（spread）、调节到更容易听见的声音质量等这样的数字信号处理，已经实现了对输出音频的声音质量的改善。

此外，因为电视广播等等通过共享频带来使用可用的无线电波，所以发送波段受限，并且使用预定的压缩编码方法来发送音频信号。

例如，在日本的陆地数字广播中，已经采用MPEG2（动态图像专家组阶段2）AAC（高级音频编码）方法作为压缩编码方法。这种压缩编码方法的编码是不可逆编码，其中在编码前后的音频信号不匹配，并且认为通过编码处理声音质量下降。由于声音质量的下降，所以在特别地通过移动设备等接收的、称为单波段广播的用于移动电话和移动终端的单波段陆地数字广播中，音频可能难以听见。

此外，经由互联网以流方式传输的音频通常也是不可逆编码的。

同时，已经提出LTE（长期演进）等作为移动通信的通信标准。通过这样做，能够传递更大量的信息。

发明内容

例如，在音频信号的声音质量由于上述压缩编码等等原因下降的情况下，希望输出几乎没有声音质量下降的音频信号而不是上述音频信号。此外，在音频信号不是用户期望的语言的音频信号的情况下，希望输出用户期望的语言的音频信号而不是上述音频信号。此外，在音频信号不是用户期望类型的音频信号的情况下，希望输出用户期望类型的音频信号而不是上述音频信号。

也就是说，在音频信号处理装置中，希望通过与作为预定音频信号的主音频信号同步，输出诸如几乎没有声音质量下降的音频信号、不同语言的音频信号或者不同类型的音频信号这样的与主音频信号相同或相似的副音频信号。

虽然可将使用时间代码的方法视作将主音频信号与副音频信号同步的方法，但是因而要为所有副音频信号设置时间代码，使得编辑用于广播节目等的副音频信号耗费时间和精力。此外，在副音频信号是时没有为其设置时间代码的音频信号（诸如在家庭服务器上记录的乐曲）的情况下，不能进行同步。

希望通过与主音频信号同步，输出与主音频信号相同或相似的副音频信号。

根据本技术的第一实施例，提供了一种信号处理装置，包括：特征量计算单元，计算通过第一通信路径获取的第一音频信号以及通过第二通信路径获取的、对应于第一音频信号的第二音频信号的各个特征量；音频同步处理单元，基于通过特征量计算单元计算的特征量，产生第一音频信号和第二音频信号的同步信息；以及音频合成单元，基于通过音频同步处理单元产生的同步信息，将第一音频信号与第二音频信号合成。

根据本技术第一实施例的信号处理方法、程序以及记录介质上记录的程序对应于根据本技术第一实施例的信息处理装置。

根据本技术第一实施例，计算通过第一通信路径获取的第一音频信号以及通过第二通信路径获取的、对应于第一音频信号的第二音频信号的各个特征量，基于计算的特征量，产生第一音频信号和第二音频信号的同步信息，以及基于产生的同步信息，将第一音频信号与第二音频信号合成。

根据本技术的第二实施例，提供了一种信号处理系统，包括：第一信号处理装置，包括通过第一通信路径发送第一音频信号的第一发送单元；第二信号处理装置，包括通过第二通信路径发送对应于第一音频信号的第二音频信号的第二发送单元；以及第三信号处理装置，包括：第一接收单元，接收第一发送单元发送的第一音频信号，第二接收单元，接收第二发送单元发送的第二音频信号，特征量计算单元，计算通过第一接收单元接收的第一音频信号以及通过第二接收单元接收的第二音频信号的各个特征量，音频同步处理单元，基于通过特征量计算单元计算的特征量，产生第一音频信号和第二音频信号的同步信息，以及音频合成单元，基于通过音频同步处理单元产生的同步信息，将第一音频信号与第二音频信号合成。

根据本技术第二实施例的信号处理方法对应于根据本技术第一实施例的信息处理系统。

根据本技术第二实施例，第一信号处理装置通过第一通信路径发送第一音频信号，第三信号处理装置从第一发送单元接收第一音频信号，第二信号处理装置发送通过第二通信路径发送的、对应于第一音频信号的第二音频，第三信号处理装置从第二信号处理装置接收第二音频信号，计算接收的第一音频信号和第二音频信号的各个特征量，基于计算的特征量产生第一音频信号和第二音频信号的同步信息，以及基于同步信息，将第一音频信号与第二音频信号合成。

根据本技术第三实施例，提供了一种信号处理装置，包括：特征量计算单元，计算通过预定通信路径获取的第一音频信号以及从存储单元读取的、对应于第一音频信号的第二音频信号的各个特征量；音频同步处理单元，基于通过特征量计算单元计算的特征量，产生第一音频信号和第二音频信号的同步信息；以及音频合成单元，基于通过音频同步处理单元产生的同步信息，将第一音频信号与第二音频信号合成。

根据本技术第三实施例的信息处理方法、程序以及记录介质上记录的程序对应于根据本技术第三实施例的信息处理装置。

根据本技术第三实施例，计算通过预定通信路径获取的第一音频信号以及从存储单元读取的、对应于第一音频信号的第二音频信号的各个特征量，基于计算的特征量产生第一音频信号和第二音频信号的同步信息，以及基于产生的同步信息将第一音频信号与第二音频信号合成。

根据本技术第四实施例，提供一种信号处理系统，包括：第一信号处理装置，包括通过预定通信路径发送第一音频信号的发送单元；第二信号处理装置，包括存储对应于第一音频信号的第二音频信号的存储单元；以及第三信号处理装置，包括：接收单元，接收从发送单元发送的第一音频信号，获取单元，获取从存储单元读取的第二音频信号，特征量计算单元，计算通过接收单元接收的第一音频信号以及通过获取单元获取的第二音频信号的各个特征量，音频同步处理单元，基于通过特征量计算单元计算的特征量，产生第一音频信号和第二音频信号的同步信息，以及音频合成单元，基于通过音频同步处理单元产生的同步信息，将第一音频信号与第二音频信号合成。

根据本技术第四实施例的信息处理方法对应于根据本技术第三实施例的信息处理系统。

根据本技术第四实施例，第一信号处理装置通过预定通信路径发送第一音频信号，第三信号处理装置从第一信号处理装置接收第一音频信号，第二信号处理装置从存储对应于第一音频信号的第二音频信号的存储装置读取第二音频信号，第三信号处理装置获取通过第二信号处理装置读取的第二音频信号，计算接收的第一音频信号以及读取的第二音频信号的各个特征量，基于计算的特征量产生第一音频信号和第二音频信号的同步信息，以及基于产生的同步信息将第一音频信号与第二音频信号合成。

根据本技术第一至第四实施例，通过与主音频信号同步，能够输出与主音频信号相同或相似的副音频信号。

附图说明

图1是示出根据本技术实施例的信号处理系统的第一实施例的配置示例的示意图；

图2是示出图1的电视机的第一配置示例的方框图；

图3是示出图2的广播接收单元的配置示例的方框图；

图4是描述图2的电视机中合成音频信号的示意图；

图5是描述图2的电视机的节目输出处理的流程图；

图6是描述图5的调谐处理的细节的流程图；

图7是描述图5的广播接收处理的细节的流程图；

图8是描述图5的输出处理的细节的流程图；

图9是描述图8的副音频信号接收处理的细节的流程图；

图10是示出图1的电视机的第二配置示例的方框图；

图11是描述图10的电视机的输出处理的流程图；

图12是描述图11的副音频信号接收处理的细节的流程图；

图13是描述图11的合成处理的细节的流程图；

图14是示出根据本技术的实施例的信号处理系统的第二实施例的配置示例的示意图；

图15是示出根据本技术实施例的信号处理系统的第三实施例的配置示例的示意图；

图16是示出图15的电视机的配置示例的方框图；

图17是描述图16的电视机的节目输出处理的流程图；

图18是描述图17的电视机的选择处理的细节的流程图；

图19是描述图17的电视机的获取处理的细节的流程图；

图20是示出根据本技术实施例的信号处理系统的第四实施例的配置示例的示意图；

图21是示出图20的电视机的配置示例的方框图；

图22是描述通过图21的接收单元的广播接收处理的流程图；

图23是示出计算机的硬件的配置示例的方框图。

具体实施方式

第一实施例

信号处理系统的第一实施例的配置示例

图1是示出根据本技术实施例的信号处理系统的第一实施例的配置示例的示意图。

图1的信号处理系统10通过经由网络将电视机11连接到云服务装置12、广播站服务器13和家庭服务器14来配置。

电视机11用作信号处理装置。电视机11例如经由天线11A接收从作为信号处理装置的广播站发送的陆地数字广播的广播波，并获取通过广播波发送的广播信号。广播信号包括陆地数字广播的压缩编码图像信号和主音频信号、作为附加信息的节目信息等等。节目信息是诸如供应源信息和规格信息这样的信息，供应源信息指示了作为与主音频信号相同或相似的副音频信号的获取源的云服务装置12、广播站服务器13或者家庭服务器14，规格信息规定了副音频信号。

电视机11将压缩编码的节目信息解码，并基于作为结果获取的节目信息，经由网络向云服务装置12、广播站服务器13或者家庭服务器14请求副音频信号。电视机11根据请求接收经由网络发送的副音频信号。

电视机11将陆地数字广播的压缩编码图像信号和主音频信号解码。电视机11通过将主音频信号与作为解码结果获取的副音频信号同步并合成，产生合成音频信号。电视机11将合成音频信号连同解码图像信号一起输出。

这里，在由于副音频信号的获取开始定时或者发送速度而导致当输出图像信号时尚未获取副音频信号的情况下，电视机11可以待机直到获取副音频信号，也可以输出主音频信号直到获取副音频信号。这里，电视机11输出主音频信号直到获取副音频信号。

云服务装置12是提供云服务的信号处理装置，并存储副音频信号。云服务装置12根据电视机11的请求向电视机11发送存储的副音频信号。

广播站服务器13是作为陆地数字广播的广播站管理的信号处理装置，并存储副音频信号。广播站服务器13根据电视机11的请求向电视机11发送存储的副音频信号。

家庭服务器14是诸如DLNA（数字生活网络联盟）服务器或者作为电视机11的用户持有的信号处理装置内置在音频设备中的服务器这样的服务器，并存储副音频信号。家庭服务器14根据电视机11的请求向电视机11发送存储的副音频信号。这里，家庭服务器14可以内置在电视机11中。

此外，副音频信号可以不用与主音频信号相同的压缩编码方法编码，并且可以是能够通过典型电视机再现的未编码音频信号。此外，如果虽然可以在必要时使用无损耗编码或者有损耗编码将副音频信号编码，但是适当地选择能够通过电视机解码的编码方法作为副音频信号的编码方法。

在如上所述的信号处理系统10中，例如在副音频信号是几乎没有声音质量下降的音频信号（诸如，使用不同于主音频信号的压缩编码方法压缩编码的音频信号或者未压缩编码的音频信号）的情况下，电视机11能够输出有更高声音质量的副音频信号，而不是主音频信号。

此外，在副音频信号是与主音频信号不同语言的音频信号的情况下，电视机11能够输出不同语言的副音频信号而不是主音频信号。此外，在副音频信号是对应于主音频信号的乐曲的自动伴奏录音音频信号的情况下，电视机11能够输出自动伴奏录音副音频信号而不是主音频信号。此外，在副音频信号是作为用于主音频信号的BGM（背景音乐）的音频信号的情况下，电视机11能够通过将副音频信号以主音频信号的反相来与主音频信号合成并输出，从对应于主音频信号的音频中减去BGM。

此外，在副音频信号是包括在记录摄影机后面的观看席处或者在若干位置的啦啦队席处记录的比赛的音频信号来作为用于每个记录位置的不同频道的音频信号的音频信号的情况下，可以只输出预定频道的副音频信号而不是主音频信号。通过这样做，例如可以从有两个队伍的比赛的节目的副音频信号中只输出预定队伍的啦啦队席的音频信号。

电视机的第一配置示例

图2是示出图1的电视机11的第一配置示例的方框图。

图2的电视机11接收几乎没有质量下降的音频信号作为副音频信号，诸如使用不同于主音频信号的压缩编码方法压缩编码的音频信号或者未压缩编码的音频信号，并输出副音频信号而不是主音频信号。

特别地，电视机11的广播接收单元31进行经由天线11A接收陆地数字广播的广播波的接收处理，获取在广播波上发送的广播信号的TS（输送流），并将TS提供给解复用器处理单元32。

解复用器处理单元32从广播接收单元31提供的TS中提取编码的图像信号（下面称为编码图像信号）、编码的主音频信号（下面称为编码主音频信号）以及编码的节目信息（下面称为编码节目信息）。解复用器处理单元32将编码图像信号提供给图像解码单元33，将编码节目信息提供给数据解码单元36，将编码主音频信号提供给音频解码单元39。

图像解码单元33将解复用器处理单元32提供的编码图像信号解码，并将作为结果获取的图像信号提供给图像调节单元34。图像调节单元34对图像解码单元33提供的图像信号进行例如像光亮度（lightness）调节处理、色彩调节处理、亮度（brightness）调节处理和倾斜调节处理这样的调节处理。图像调节单元34用作显示控制单元，并通过向图像输出单元35提供经过调节处理的图像信号来显示图像。图像输出单元35基于图像调节单元34提供的图像信号显示图像。

数据解码单元36将解复用器处理单元32提供的编码节目信息解码，并将作为结果获取的节目信息提供给数据处理单元37。当数据解码单元36提供新的节目信息时，数据处理单元37对保存的节目信息等进行更新处理。数据处理单元37将更新的节目信息提供给信息包接收设置单元38。

信息包接收设置单元38将控制信号提供给信息包接收单元45，在控制信号中，数据处理单元37提供的节目信息的供应源信息指示了作为连接目的地的副音频信号的供应源，并且控制信号指示了规格信息。

音频解码单元39将解复用器处理单元32提供的编码主音频信号解码，并将作为结果获取的主音频信号提供给音频合成单元40和主音频同步特征量获取单元43。

音频合成单元40将音频解码单元39提供的主音频信号与副音频调节单元53提供的副音频信号以预定比例合成，并产生合成音频信号。例如，如果合成音频信号是Am，主音频信号是A1，主音频信号与副音频信号的合成比例是C1:C2，且副音频信号是A2，则音频合成单元40利用以下公式（1）产生用于每个频道的合成音频信号Am。

Am=C1×A1+C2×A2…（1）

根据公式（1），例如，在C1为0.5且C2为0.5的情况下，相等地合成主音频信号与副音频信号。

这里，在没有从音频同步处理单元51提供只输出主音频信号的控制信号的情况下，合成比例C1:C2可以在副音频信号的供应源处确定，也可以通过电视机11的用户确定。这里，因为电视机11输出副音频信号而不是主音频信号，所以在没有从音频同步处理单元51提供只输出主音频信号的控制信号的情况下，C1为0而C2为1。在从音频同步处理单元51提供了只输出主音频信号的控制信号的情况下，C1为1而C2为0。

通过这种方式，在C1或C2任一个为0的情况下，音频合成单元40可以不根据上述公式（1）进行合成，并且主音频信号或者副音频信号可以照原样成为合成音频信号。音频合成单元40将合成音频信号提供给音频调节单元41。

音频调节单元41对音频合成单元40提供的合成音频信号进行诸如音量调节处理、左右平衡调节处理和扩散附加处理这样的调节处理，并且在经过调节处理之后合成音频信号Am的幅度超过阈值（例如，1.0）的情况下，例如对合成音频信号进行修剪到阈值处处理等，使得幅度等于或小于阈值。音频调节单元41将作为结果获取的合成音频信号提供给音频输出单元42。

音频输出单元42由数字放大器、D/A转换单元、扬声器等等（均未示出）形成。音频输出单元42的数字放大器调节音频调节单元41提供的合成音频信号的音量，D/A转换单元对作为结果获取的合成音频信号进行D/A转换。音频输出单元42的扬声器输出与作为D/A转换的结果获取的模拟信号相对应的音频。

主音频同步特征量获取单元43用作特征量计算单元，并针对在设计期间确定的每个分析长度（下面称为分析帧）从音频解码单元39提供的主音频信号获取预定的特征量。例如，在分析帧长度为256个样本的情况下，主音频同步特征量获取单元43将主音频信号分为256个样本的波段，并获取每个波段的时间信号的增益信息作为特征量。可替选地，主音频同步特征量获取单元43每次对256个样本进行时域转换，并根据获取的频谱获取频谱最大处的频率、频谱的功率包络形状（例如，峰值功率的大小、自峰值功率的坡度（tilt）、第二峰值功率的位置等）、基本频率等作为特征量。

这里，特征量可以标准化，或者可以是上述特征量中的两个或多个。此外，主音频同步特征量获取单元43例如可以通过移动分析帧长度的半数的样本（例如，128个样本）来提取特征量，而不是通过移动分析帧长度来提取特征量。也就是说，主音频同步特征量获取单元43可以通过重叠分析帧长度来提取特征量。主音频同步特征量获取单元43将特征量提供给主音频同步特征量更新单元44。

主音频同步特征量更新单元44由循环缓冲器等形成，并累积多个在设计期间确定的特征量。特别地，主音频同步特征量更新单元44累积从主音频同步特征量获取单元43提供的特征量。此时，在已经累积了在设计期间确定的多个特征量的情况下，将旧的特征量更新为主音频同步特征量获取单元43提供的特征量。主音频同步特征量更新单元44将累积的特征量提供给音频同步处理单元51。

信息包接收单元45根据信息包接收设置单元38提供的控制信号进行初始化处理等。此外，信息包接收单元45根据控制信号与作为连接目的地的云服务装置12相连接，并向云服务装置12请求通过规格信息规定的副音频信号。此外，信息包接收单元45根据请求接收并暂时保存从云服务装置12发送的副音频信号。

有效载荷数据获取单元46从信息包接收单元45中累积的信息包获取并保存有效载荷数据。此外，有效载荷数据获取单元46从有效载荷数据获取编码的副音频信号（下面称为编码副音频信号）或者未编码的副音频信号，并将获取的副音频信号提供给副音频解码单元47。

在从有效载荷数据获取单元46提供编码副音频信号的情况下，副音频解码单元47将编码副音频信号解码，并将作为结果获取的副音频信号提供给副音频信号更新单元48。此外，在从有效载荷数据获取单元46提供副音频信号的情况下，副音频解码单元47将副音频信号照原样提供给副音频信号更新单元48。

副音频信号更新单元48由循环缓冲器等形成，并累积在设计期间确定的多个副音频信号。副音频信号更新单元48将累积的副音频信号提供给副音频同步特征量获取单元49。

副音频同步特征量获取单元49用作特征量计算单元，并类似于主音频同步特征量获取单元43，从副音频信号更新单元48提供的副音频信号获取用于每个分析帧的预定特征量，并将特征量提供给副音频同步特征量更新单元50。这里，特征量的提取目标可以只是副音频信号中通过广播站预先指定的频道的副音频信号。

类似于主音频同步特征量更新单元44，副音频同步特征量更新单元50由循环缓冲器等形成，并累积在设计期间确定的多个特征量。副音频同步特征量更新单元50将累积的特征量提供给音频同步处理单元51。

音频同步处理单元51基于主音频同步特征量更新单元44和副音频同步特征量更新单元50提供的特征量，计算用于副音频信号与主音频信号同步的校正量，作为用于主音频信号和副音频信号的同步信息。

特别地，例如，音频同步处理单元51计算主音频信号的每个分析帧的特征量的矢量与副音频信号的每个分析帧的特征量的矢量之间的相关值。此外，音频同步处理单元51在相关值的最大值等于或大于在设计期间确定的阈值（例如，0.7）的情况下确定有同步位置，并计算对应于该相关值的主音频信号与副音频信号的分析帧（下面称为同步分析帧）的领先（leading）位置之间的样本数量作为校正量。另一方面，在相关值的最大值小于阈值的情况下，确定没有同步位置。

在算出校正量的情况下，音频同步处理单元51将校正量提供给副音频同步信号获取单元52。另一方面，在确定没有同步位置的情况下或者在没有从副音频同步特征量更新单元50提供副音频信号的特征量的情况下，音频同步处理单元51将不进行处理的控制信号提供给副音频同步信号获取单元52和副音频调节单元53。此外，音频同步处理单元51将只输出主音频信号的控制信号提供给音频合成单元40。通过这样做，在主音频信号与副音频信号之间没有同步位置或者在没有获取副音频信号的情况下，连同图像一起输出对应于主音频信号的音频。

这里，在C1不是0等情况下，音频同步处理单元51可以以样本为单位而不是以分析帧为单位来计算校正量。

在这种情况下，音频同步处理单元51计算以同步分析帧为中心的在设计期间确定的固定时间周期（例如，一个分析帧的时间周期）的音频信号的信号波形的相关值。此外，在相关值的最大值等于或大于设计期间确定的阈值的情况下确定有同步位置，并且音频同步处理单元51计算对应于该相关值的主音频信号与副音频信号的样本（下面称为同步样本）的位置之间样本的数量。另一方面，在相关值小于阈值的情况下，确定没有同步位置，或者可以计算同步分析帧的领先位置之间的样本数量作为相关值。

这里，音频同步处理单元51可以以预定波段（例如，16个波段）为单位来计算音频信号的信号波形之间的相关值。在这种情况下，音频同步处理单元51以预定波段为单位对主音频信号和副音频信号进行划分，并计算作为结果获取的波段划分信号的相关值。此外，同步样本的位置是对应于所有波段的相关值的最大值的主音频信号和副音频信号的样本的位置、针对每个预定波段的相关值的最大值为最大处的主音频信号和副音频信号的样本的位置、或者对应于每个预定波段的相关值的最大值的主音频信号和副音频信号的样本的平均位置。

以这种方式，通过使用每个预定波段的相关值找到同步样本的位置，即使在包括导致特殊波段中主音频信号与副音频信号之间的相关值小的音频信号的情况下，音频同步处理单元51也能够获取高精度的校正量。

副音频同步信号获取单元52基于音频同步处理单元51提供的校正量，从副音频信号更新单元48读取副音频信号。

副音频调节单元53对副音频同步信号获取单元52提供的副音频信号进行默认调节处理。

例如，在副音频信号是包括电视剧、电影等等的主音频（例如，台词）的音频信号以及BGM的音频信号作为不同频道的音频信号的、几乎没有声音质量下降的音频信号的情况下，副音频调节单元53对BGM频道的音频信号进行调节处理，诸如降低等级（level）的处理或者通过加入（foldin）头部相关传送函数（HRTF）等来虚拟地将BGM放置在有深度的位置处的处理。此外，副音频调节单元53对主音频频道的音频信号进行调节处理，例如提高等级的处理或者通过加入HRTF等来将主音频虚拟地放置在电视机11前面的处理。通过这样做，例如，强调了主音频，并且主音频更容易听见。

这里，在音频输出单元42是像5.1ch影院系统这样的多频道再现系统的情况下，副音频调节单元53可以通过例如将BGM频道作为后扬声器频道并且将主音频频道作为前扬声器频道来进行调节处理，诸如加入HRTF的处理。

此外，在副音频信号是几乎没有声音质量下降的音频信号（包括在记录摄影机后面的观看席处或者在若干位置的啦啦队席记录处的比赛的音频信号，作为用于每个记录位置的不同频道的音频信号）的情况下，进行调节处理，诸如通过对于每个频道加入HRTF等来虚拟地放置在后方的处理。通过这样做，提高了比赛的真实性。

这里，在音频输出单元42是多频道再现系统的情况下，副音频调节单元53可以进行调节处理，诸如在所有频道作为后扬声器频道的情况下加入HRTF的处理。副音频调节单元53可将经过调节处理的音频信号提供给音频合成单元40。

这里，虽然在本说明书中总存在副音频信号和主音频信号，并且总是通过合成来输出副音频信号，但是可以不总存在副音频信号。此外，虽然在本说明书中扩展音频功能（合成并输出主音频信号和副音频信号的功能）总是有效，但是可以根据来自用户的使得扩展音频功能有效或无效的指令确定是否获取副音频信号。此外，音频解码单元39可以根据副音频信号的存在或者根据来自用户的使得扩展音频功能有效或无效的指令，将音频信号提供给主音频同步特征量获取单元43。

广播接收单元的配置示例

图3是示出图2的广播接收单元31的配置示例的方框图。

图3的广播接收单元31通过调谐器70、A/D转换单元71、解调处理单元72、TS累积单元73和TS获取单元74来配置。

调谐器70从经由天线11A接收的广播波提取预定频道的广播波，并将广播波提供给A/D转换单元71。A/D转换单元71对调谐器70提供的广播波进行A/D转换，并将作为结果获取的数字信号提供给解调处理单元72。

解调处理单元72将A/D转换单元71提供的数字信号解调，并将作为结果获取的广播信号的TS提供给TS累积单元73。TS累积单元73由循环缓冲器等形成，并暂时累积解调处理单元72提供的TS。TS获取单元74以固定的时间间隔从TS累积单元73获取TS，并将TS提供给图2的解复用器处理单元32。

同步音频信号的描述

图4是描述图2的电视机11中合成音频信号的示意图。

如图4所示，副音频信号是几乎没有声音质量下降的音频信号。在音频合成单元40中，将主音频信号减弱，并且将与主音频信号同步的副音频信号输出作为合成音频信号。

电视机的处理的第一示例的描述

图5是描述图2的电视机11的节目输出处理的流程图。例如，当用户操作输入单元（未示出）并向电视机11指令开始观看时，节目输出处理开始。

在图5的步骤S11中，电视机11的广播接收单元31进行调谐到接收目标频道的调谐处理。下面将参照图6描述调谐处理的细节。

在步骤S12中，广播接收单元31进行接收预定频道的广播信号的广播接收处理。下面将参照图7描述广播接收处理的细节。

在步骤S13中，电视机11进行输出图像信号以及合成音频信号的输出处理。下面将参照图8描述输出处理的细节。

在步骤S14中，电视机11确定用户是否已经操作输入单元（未示出）并指令观看的结束。在步骤S14中确定用户没有指令结束观看的情况下，处理返回步骤S11并重复步骤S11至步骤S14的处理。

另一方面，在步骤S14中确定用户已经指令了结束观看的情况下，处理结束。

图6是描述图5的步骤S11的调谐处理的细节的流程图。

在图6的步骤S31中，广播接收单元31的调谐器70（图3）确定用户是否已经操作输入单元（未示出）并指令改变观看的频道。这里，在第一步骤S31的处理期间，确定用户已经指令了改变观看的频道。

在步骤S31中确定用户已经指令了改变观看的频道的情况下，调谐器70在步骤S32中进行形成改变标志并关掉就绪标志的调谐改变处理，改变标记被保存为指示已经有效地改变了接收目标频道，，就绪标志指示已经做好了接收准备。此外，处理返回图5的步骤S11并进行到步骤S12。

另一方面，在步骤S31中确定用户没有指令改变观看的频道的情况下，处理返回图5的步骤S11并进行到步骤S12。

图7是描述图5的步骤S12的广播接收处理的细节的流程图。

在图7的步骤S51中，广播接收单元31的调谐器70（图3）基于改变标志确定是否已经改变了接收目标频道。在步骤S51中确定已经改变了接收目标频道的情况下，处理进行到步骤S52。

在步骤S52中，调谐器70进行将调谐频道设置为用户指令的频道、初始化处理等作为接收站设置处理。此外，调谐器70使改变标志无效，打开就绪标志，并进行处理到步骤S53。

另一方面，在步骤S51中确定没有改变接收目标频道的情况下，处理进行到步骤S53。

在步骤S53中，调谐器70从经由天线11A接收的广播波提取设置为步骤S52中调谐的频道的频道的广播波，并将该广播波提供给A/D转换单元71。

在步骤S54中，A/D转换单元71对调谐器70提供的广播波进行A/D转换，并将作为结果获取的数字信号提供给解调处理单元72。

在步骤S55中，解调处理单元72将A/D转换单元71提供的数字信号解调。

在步骤S56中，解调处理单元72在TS累积单元73处提供并累积作为解调结果获取的广播信号的TS。

在步骤S57中，TS获取单元74将在TS累积单元73中累积的所保存的TS的状态信息更新（例如，待读取TS的量等）。此外，处理返回图5的步骤S12并进行到步骤S13。

图8是描述图5的步骤S13的输出处理的细节的流程图。

在图8的步骤S71中，解复用器处理单元32检查图3的TS获取单元74保存的TS的状态信息，并确定是否有待读取的TS。在步骤S71中确定有待读取的TS的情况下，在步骤S72中解复用器处理单元32从TS获取单元74获取TS。

在步骤S73中，解复用器处理单元32根据从TS获取单元74获取的TS提取编码图像信号、编码主音频信号和编码节目信息。解复用器处理单元32将编码图像信号提供给图像解码单元33，将编码节目信息提供给数据解码单元36，并且将编码主音频信号提供给音频解码单元39。

在步骤S74中，图像解码单元33将解复用器处理单元32提供的编码图像信号解码，并将作为结果获取的图像信号提供给图像调节单元34。在步骤S75中，图像调节单元34对图像解码单元33提供的图像信号进行调节处理，并将图像信号提供给图像输出单元35。

在步骤S76中，音频解码单元39将解复用器处理单元32提供的编码主音频信号解码，并将作为结果获取的主音频信号提供给音频合成单元40和主音频同步特征量获取单元43。

在步骤S77中，电视机11进行接收副音频信号的副音频信号接收处理。下面将参照图9描述副音频信号接收处理的细节。在步骤S77的处理之后，处理进行到步骤S78.

在步骤S78中，副音频解码单元47确定有效载荷数据获取单元46中是否有待读取的副音频信号。在步骤S78确定有副音频信号的情况下，如果副音频信号被编码，则副音频解码单元47在步骤S79中将编码副音频信号解码。此外，在副音频信号未被编码的情况下，副音频解码单元47照原样留下副音频信号。

在步骤S80中，副音频解码单元47在副音频信号更新单元48处提供并累积副音频信号。在步骤S81中，主音频同步特征量获取单元43和副音频同步特征量获取单元49根据来自音频解码单元39的主音频信号和来自副音频信号更新单元48的副音频信号，针对每个分析帧分别获取预定特征量。此外，主音频同步特征量获取单元43在主音频同步特征量更新单元44处提供并累积获取的特征量，并且副音频同步特征量获取单元49在副音频同步特征量更新单元50处提供并累积获取的特征量。

在步骤S82中，音频同步处理单元51计算主音频信号的每个分析帧的特征量的矢量与副音频信号的每个分析帧的特征量的矢量之间的相关值。

在步骤S83中，音频同步处理单元51确定主音频信号与副音频信号之间是否有同步位置，也就是说，在步骤S82中计算的相关值的最大值是否等于或大于预定阈值。

在步骤S83中确定主音频信号与副音频信号之间有同步位置的情况下，音频同步处理单元51计算同步分析帧的领先位置之间的样本数量作为校正量。此外，音频同步处理单元51将校正量提供给副音频同步信号获取单元52。

在步骤S84中，副音频同步信号获取单元52基于音频同步处理单元51提供的校正量，从副音频信号更新单元48读取副音频信号。

在步骤S85中，副音频调节单元53对副音频同步信号获取单元52提供的副音频信号进行调节处理，并将副音频信号提供给音频合成单元40。

在步骤S86中，音频合成单元40将音频解码单元39提供的主音频信号与副音频调节单元53提供的副音频信号以预定比例合成，并产生合成音频信号。此外，音频合成单元40将合成音频信号提供给音频调节单元41，并进行处理到步骤S89。

另一方面，在步骤S71中确定没有待读取的TS的情况下，在步骤S88中，电视机11进行产生预定的图像和音频的默认图像音频合成处理。特别地，图像调节单元34产生诸如接收目标频道的台号、节目名称或者指示输出准备中的消息这样的图像信号，并将该图像信号提供给图像输出单元35。此外，音频合成单元40产生诸如指示输出准备中的消息这样的音频信号，并将该音频信号提供给音频调节单元41。此外，处理进行到步骤S89。

此外，在步骤S78中确定没有要通过有效载荷数据获取单元46读取的副音频信号的情况下，或者在步骤S83中确定主音频信号与副音频信号之间没有同步位置的情况下，音频同步处理单元51将不进行处理的控制信号提供给副音频同步信号获取单元52和副音频调节单元53。此外，音频同步处理单元51将只输出主音频信号的控制信号提供给音频合成单元40，并进行处理到步骤S87。

在步骤S87中，音频合成单元40将音频解码单元39提供的主音频信号作为合成音频信号提供给音频调节单元41，并进行处理到步骤S89。

在步骤S89中，音频调节单元41对音频合成单元40提供的合成音频信号进行调节处理，并将合成音频信号提供给音频输出单元42。

在步骤S90中，图像输出单元35基于图像调节单元34提供的图像信号显示图像。此外，音频输出单元42调节音频调节单元41提供的合成音频信号的音量并进行D/A转换，并且将与作为结果获取的模拟信号相对应的音频输出。此外，处理返回图5的步骤S13，并进行到步骤S14。

这里，图8的步骤S73的提取处理、步骤S74、S76和S79的解码处理、步骤S81的特征量获取处理、步骤S82的相关值计算处理等可以并行处理。

图9是描述图8的步骤S77的副音频信号接收处理的细节的流程图。

在图9的步骤S101中，数据解码单元36将解复用器处理单元32提供的编码节目信息解码并将作为结果获取的节目信息提供给数据处理单元37。

在步骤S102中，数据处理单元37确定节目信息是否已经改变，也就是说，数据解码单元36提供的节目信息是否不同于保存的节目信息，或者该节目信息是否为第一个节目信息。在步骤S102中确定节目信息已经改变的情况下，数据处理单元37进行更新保存的节目信息等处理。此外，数据处理单元37将更新的节目信息提供给信息包接收设置单元38，并进行处理到步骤S103。

在步骤S103中，信息包接收设置单元38使得信息包接收单元45停止信息包的接收，指示将通过数据处理单元37提供的节目信息的供应源信息指示的副音频信号的供应源作为连接目的地，并将指示规格信息的控制信号提供给信息包接收单元45。通过这样做，信息包接收单元45停止信息包的接收，并进行初始化处理等。此外，信息包接收单元45连接到通过控制信号指示的作为连接目的地的云服务装置12，并向云服务装置12请求通过规格信息规定的副音频信号。

另一方面，在步骤S102确定节目信息没有改变的情况下，处理进行到步骤S104。

在步骤S104中，信息包接收单元45从连接目的地接收并暂时保存通过规格信息规定的副音频信号的信息包。

在步骤S105中，有效载荷数据获取单元46从信息包接收单元45累积的信息包获取并保存有效载荷数据。

在步骤S106中，有效载荷数据获取单元46更新保存的有效载荷数据的状态信息（例如，待读取的有效载荷数据的量等）。此外，处理返回图8的步骤S77，并进行到步骤S78。在步骤S78中基于状态信息做出确定。

通过这种方式，图2的电视机11提取主音频信号和副音频信号的特征量，基于特征量产生同步信息，并基于同步信息将主音频信号与副音频信号合成。通过这样做，因为副音频信号能够通过与主音频信号合成而输出，所以能够自然地将节目的音频改变为几乎没有声音质量下降的音频。

这里，虽然图2的电视机11从云服务装置12接收副音频信号，但是在从广播站服务器13或者家庭服务器14接收副音频信号的情况下，除了连接目的地是广播站服务器13或者家庭服务器14之外，情况也是这样的。

电视机的第二配置示例

图10是示出图1的电视机11的第二配置示例的方框图。

在图10所示配置中，与图2中相同的配置采用相同的附图标记。将适当地省略重复描述。

图10的电视机11的配置与图2的配置的不同主要在于设置信息包接收单元91、副音频调节单元92和音频合成单元93而不是信息包接收单元45、副音频调节单元53和音频合成单元40。

图10的电视机11从家庭服务器14接收用于对应于主音频信号的乐曲的自动伴奏录音音频信号或者乐曲的音频信号作为副音频信号，并将副音频信号与待输出的主音频信号合成。这里，将规定对应于主音频信号的乐曲的乐曲信息（例如，名称、节目的名称等）用作规格信息。

特别地，电视机11的信息包接收单元91根据信息包接收设置单元38提供的控制信号进行初始化处理等。此外，信息包接收单元91用作读取控制单元，并且通过连接到作为连接目的地的家庭服务器14并通过根据控制信号向家庭服务器14请求通过乐曲信息规定的乐曲的副音频信号来控制副音频信号的读取。

通过这样做，家庭服务器14搜索通过乐曲信息规定的乐曲的副音频信号。此时，在乐曲信息是节目的名称等的情况下，家庭服务器14经由网络从其他服务器搜索节目中使用的乐曲的名称等，并搜索通过名称规定的乐曲的副音频信号等。家庭服务器14读取作为搜索的结果获取的副音频信号并发送到电视机11。

信息包接收单元91用作获取单元，并且根据请求获取并暂时保存从家庭服务器14发送的副音频信号的信息包。

副音频调节单元92对副音频同步信号获取单元52提供的副音频信号进行默认调节处理。例如，在副音频信号是包括用于每个演奏部分的音频信号作为不同频道的音频信号的音频信号的情况下，副音频调节单元92进行调节处理，诸如减弱用户选择的演奏部分的音频信号的处理，或者通过加入HRTF等将每个演奏部分设置在预定的假设位置来提高真实性的处理。

这里，在音频输出单元42是多频道再现系统的情况下，副音频调节单元92可以对每个频道进行将副音频信号乘以根据对应于该频道的扬声器的位置预先确定的系数的处理。副音频调节单元92将经过调节处理的音频信号提供给音频合成单元93。

与图2的音频合成单元40相似，音频合成单元93将音频解码单元39提供的主音频信号与副音频调节单元92提供的副音频信号以预定比例合成，并产生合成音频信号。

这里，在副音频信号是自动伴奏录音乐曲音频信号的情况下，如果没有从音频同步处理单元51提供只输出主音频信号的控制信号，则C1为0而C2为1。

另一方面，在主音频信号是包括BGM的音频信号以及主音频的音频信号作为不同频道的音频信号的音频信号并且副音频信号是对应于主音频信号的BGM的音频信号的情况下，如果没有从音频同步处理单元51提供只输出主音频信号的控制信号，则C1和C2为0.5。但是，在这种情况下，副音频信号是主音频信号的反相，并且通过转换的采样频率进行合成，使得副音频信号的采样频率与主音频信号的采样频率相同。音频合成单元93将合成音频信号提供给音频调节单元41。

电视机的处理的第二示例的描述

因为除了图5的步骤13的输出处理之外，图10的电视机11的节目输出处理与图5的节目输出处理相同，所以将只描述输出处理。

图11是描述图10的电视机11的输出处理的细节的流程图。

因为图11的步骤S121至步骤S126的处理与图8的步骤S71至步骤S76的处理相同，所以将省略描述。

在步骤S127中，图10的电视机11进行副音频信号接收处理。下面将参照图12描述副音频信号接收处理的细节。在步骤S127的处理之后，处理进行到步骤S128。

因为步骤S128至步骤S135的处理与图8的步骤S78至步骤S85的处理相同，所以将省略描述。

在步骤S136中，音频合成单元93进行将音频解码单元39提供的主音频信号与副音频调节单元92提供的副音频信号合成的合成处理。下面将参照图13描述合成处理的细节。在步骤S136的处理之后，处理进行到步骤S139。

因为步骤S137至步骤S140的处理与图8的步骤S87至步骤S90的处理相同，所以将省略描述。

图12是描述图11的步骤S127的副音频信号接收处理的细节的流程图。

在图12的步骤S151中，数据解码单元36将解复用器处理单元32提供的编码节目信息解码，并将作为结果获取的节目信息提供给数据处理单元37。

在步骤S152中，数据处理单元37确定节目信息是否已经改变。在步骤S152中确定节目信息是否已经改变的情况下，数据处理单元37进行更新保存的节目信息等等处理。此外，数据处理单元37将更新的节目信息提供给信息包接收设置单元38，并进行处理到步骤S153。

在步骤S153中，信息包接收设置单元38指示将通过数据处理单元37提供的节目信息的供应源信息指示的副音频信号的供应源作为连接目的地，并将指示规格信息的控制信号提供给信息包接收单元91。此外，处理进行到步骤S154。

另一方面，在步骤S152中确定节目信息没有改变的情况下，处理进行到步骤S154。

在步骤S154中，信息包接收单元91确定自动伴奏录音功能是否有效。特别地，用户能够通过操作输入单元（未示出）给出指令，使得输出自动伴奏录音副音频信号而不是主音频信号的自动伴奏录音功能有效或无效。此外，根据用户指令使得自动伴奏录音功能有效或无效。信息包接收单元91确定自动伴奏录音功能是否有效。

在步骤S154中确定自动伴奏录音功能有效的情况下，处理进行到步骤S155。在步骤S155中，信息包接收单元91通过家庭服务器14对于乐曲信息规定的乐曲产生请求自动伴奏录音副音频信号的信息，并进行处理到步骤S157。

另一方面，在步骤S154确定自动伴奏录音功能无效的情况下，处理进行到步骤S156。在步骤S156中，信息包接收单元91通过家庭服务器14产生请求用于通过乐曲信息规定的乐曲的副音频信号的信息，并进行处理到步骤S157。

在步骤S157中，信息包接收单元91确定是否请求副音频信号，也就是说，自动伴奏录音功能或者节目信息的有效性是否已经改变。在步骤S157中确定请求副音频信号的情况下，信息包接收单元91进行初始化处理等等。

此外，在步骤S158中，信息包接收单元91通过向家庭服务器14发送在步骤S155或者S156中产生的信息，向家庭服务器14请求副音频信号。

在步骤S159中，信息包接收单元91确定是否已经根据请求从家庭服务器14产生副音频信号。在步骤S159中确定已经从家庭服务器14产生了副音频信号的情况下，处理进行到步骤S160。

因为步骤S160至步骤S162的处理与图9的步骤S104至步骤S106的处理相同，所以将省略描述。在步骤S162的处理之后，处理返回图11的步骤S127，并进行到步骤S128。

另一方面，在步骤S157中确定没有请求的情况下，处理返回图11的步骤S127，并进行到步骤S128。此外，在步骤S159中确定没有根据请求从家庭服务器14产生副音频信号的情况下，例如，在没有将副音频信号存储在家庭服务器14中的情况下，或者在与家庭服务器14的通信中有错误的情况下，处理返回图11的步骤S127，并进行到步骤S128。

图13是描述图11的步骤S136的合成处理的细节的流程图。

在图13的步骤S180中，音频合成单元93确定是否要转换副音频信号的采样频率。例如，如果副音频信号与主音频信号的采样频率不相同，在步骤S180中确定要转换副音频信号的采样频率，并且处理进行到步骤S181。

在步骤S181中，音频合成单元93转换副音频信号的采样频率，使得副音频信号的采样频率与主音频信号的采样频率相同，并进行处理到步骤S182。

另一方面，在副音频信号与主音频信号的采样频率相同的的情况下，在步骤S180中确定不要转换副音频信号的采样频率，并且处理进行到步骤S182。

在步骤S182中，音频合成单元93确定副音频信号是否为乐曲的音频信号，也就是说，是否自动伴奏录音功能无效。在步骤S182确定副音频信号是乐曲的音频信号的情况下，处理进行到步骤S183。

在步骤S183中，音频合成单元93形成针对其已将采样频率转换为主音频信号的反相的副音频信号的相位，并进行处理到步骤S184。

另一方面，在步骤S182中确定副音频信号不是乐曲的音频信号的情况下，也就是说，在副音频信号是自动伴奏录音音频信号的情况下，处理进行到步骤S184。

在步骤S184中，类似于图2的音频合成单元40，音频合成单元93以预定比例将主音频信号与副音频信号合成，并产生合成音频信号。

这里，在副音频信号是自动伴奏录音乐曲音频信号的情况下，如果没有从音频同步处理单元51提供只输出主音频信号的控制信号，则C1为0而C2为1。另一方面，在音频信号是乐曲的音频信号的情况下，如果没有从音频同步处理单元51提供只输出主音频信号的控制信号，则C1和C2为0.5。此外，在从音频同步处理单元51提供了只输出主音频信号的控制信号的情况下，C1为1而C2为0。在步骤S184的处理之后，处理返回图11的步骤S136并进行到步骤S137。

如上所述，图10的电视机11提取主音频信号和副音频信号的特征量，基于特征量产生同步信息，并基于同步信息将主音频信号与副音频信号合成。通过这样做，因为能够通过与主音频信号同步来输出副音频信号，所以，例如，能够自然地将节目的乐曲的音频改变为自动伴奏录音乐曲的音频。此外，例如，通过BGM的反相音频能够使得节目的BGM更小。

这里，虽然图10的电视机11从家庭服务器14接收副音频信号，但是在从广播站服务器13或者云服务装置12接收副音频信号的情况下，除了连接目的地是广播站服务器13或者云服务装置12之外，情况也是这样的。

第二实施例

信号处理系统的第二实施例的配置示例

图14是示出根据本技术实施例的信号处理系统的第二实施例的配置示例的示意图。

在图14所示配置中，与图1中相同的配置采用相同的附图标记。将适当地省略重复描述。

图14的信号处理系统110的配置与图1的配置的不同主要在于设置移动终端111而不是电视机11。在信号处理系统110中，移动终端111接收进行的单波段广播，只使用陆地数字广播的13个波段中的一个波段，并将单波段广播的主音频信号与副音频信号合成。

特别地，移动终端111例如经由天线111A接收从广播站产生的单波段广播波，并获取在广播波上发送的广播信号。移动终端111将广播信号中的编码节目信息解码，并基于作为结果获取的节目信息，经由网络向云服务装置12、广播站服务器13或者家庭服务器14请求副音频信号。移动终端111根据请求接收经由网络发送的副音频信号。

移动终端111将单波段广播的编码图像信号以及编码主音频信号解码。移动终端111通过将作为解码结果获取的主音频信号与副音频信号合成，产生合成音频信号。移动终端111将合成音频信号连同作为解码结果获取的图像信号一起输出。

因为除了接收单波段广播波而不是陆地数字广播之外，移动终端111的具体处理与电视机11相同，所以将省略描述。但是，因为移动终端111移动，所以假定了难以接收无线电波的环境，诸如在隧道内。因此，例如，与电视机11相比，图3的TS累积单元73的累积能力增加，并且与电视机11相比，一旦在TS累积单元73中有更多的TS，就通过TS获取单元74进行TS的获取。

第三实施例

信号处理系统的第三实施例的配置示例

图15是示出根据本技术实施例的信号处理系统的第三实施例的配置示例的示意图。

在图15所示配置中，与图1中相同的配置采用相同的附图标记。将适当地省略重复描述。

图15的信号处理系统130的配置与图1的配置的不同主要在于新设置记录装置131以及设置电视机132而不是电视机11。在信号处理系统130中，电视机132接收记录装置131上记录的电视广播的广播信号，并将广播信号的主音频信号与副音频信号合成。

特别地，记录装置131例如由HDD（硬盘驱动器）记录器等形成。记录装置131经由天线（未示出）接收从广播站发送的陆地数字信号的广播波，获取并记录广播波上发送的广播信号的TS。

电视机132从记录装置131读取广播信号的TS。类似于图1的电视机11，电视机132将广播信号中的编码节目信息解码，并基于作为结果获取的节目信息，经由网络向云服务装置12、广播站服务器13或者家庭服务器14请求副音频信号。类似于电视机11，电视机132根据请求接收经由网络发送的副音频信号。

类似于电视机11，电视机132将广播信号中的编码图像信号和编码主音频信号解码。类似于电。视机11，电视机132通过将作为解码结果获取的主音频信号与副音频信号合成，产生合成音频信号。电视机132将合成音频信号连同作为解码结果获取的图像信号一起输出。

电视机的配置示例

图16是示出图15的电视机132的配置示例的方框图。

在图16所示配置中，与图2中相同的配置采用相同的附图标记。将适当地省略重复描述。

图16的电视机132的配置与图2的配置的不同主要在于设置获取单元151而不是广播接收单元31。

获取单元151以预定的处理单位来从记录装置131获取用户指定的广播信号的TS，并将TS提供给解复用器处理单元32。

电视机的处理的描述

图17是描述图16的电视机132的节目输出处理的流程图。例如，当用户通过操作输入单元（未示出）并向电视机132指令开始观看时，节目输出处理开始。

在图17的步骤S201中，电视机132的获取单元151进行选择再现目标广播信号的选择处理。下面将参照图18描述选择处理的细节。

在步骤S202中，获取单元151进行从记录装置131获取再现目标广播信号的获取处理。下面将参照图19描述获取处理的细节。

因为步骤S203和步骤S204的处理分别与图5的步骤S13和步骤S14的处理相同，所以将省略描述。

图18是描述图17的步骤S201的选择处理的细节的流程图。

在图18的步骤S221中，获取单元151确定用户是否通过操作输入单元（未示出）指令了要再现的节目中的改变。这里，在第一步骤S221的处理期间，确定用户已经指令了要再现的节目中的改变。

在步骤S221中确定用户已经指令了要再现的节目中的改变的情况下，获取单元151在步骤S222中进行形成被保存的节目改变标志并关掉获取就绪标志的选择改变处理，节目改变标志被保存为指示已经有效地改变了再现目标频道，获取就绪标志指示了已经做好获取准备。此外，处理返回图17的步骤S201并进行到步骤S202。

另一方面，在步骤S221中确定用户没有指令要再现的节目中的改变的情况下，处理返回图17的步骤S201并进行到步骤S202。

图19是描述图17的步骤S202的获取处理的细节的流程图。

在图19的步骤S241中，获取单元151基于节目改变标志确定是否已经改变了再现目标节目。在步骤S241中确定已经改变再现目标节目的情况下，处理进行到步骤S242。

在步骤S242中，获取单元151停止从记录装置131获取广播信号，并开始获取用户指定的节目的广播信号。此外，获取单元151使得节目改变标志无效，并打开获取就绪标志。此外，处理返回图17的步骤S202并进行到步骤S203。

另一方面，在步骤S241中确定没有改变再现目标节目的情况下，处理返回图17的步骤S202并进行到步骤S203。

如上所述，图15的电视机提取主音频信号和副音频信号的特征量，基于特征量产生同步信息，并基于同步信息将主音频信号与副音频信号合成。通过这样做，能够通过与主音频信号同步来输出副音频信号。结果，即使在记录装置131已经记录了下降了的主音频信号的声音质量的情况下，通过输出高声音质量主音频信号形成的副音频信号而不是主音频信号，也能够自然地输出高声音质量的音频。因此，通过记录下降了的主音频信号的声音质量，记录装置131能够减少数据量。

这里，虽然在第三实施例中记录装置131按照TS格式记录广播信号，但是也可以按照不同的格式记录广播信号。

此外，虽然图15的电视机132从云服务装置12接收副音频信号，但是在从广播站服务器13或者家庭服务器14接收副音频信号的情况下，除了连接目的地是广播站服务器13或者家庭服务器14之外，情况也是这样的。

第四实施例

信号处理系统的第四实施例的配置示例

图20是示出根据本技术实施例的信号处理系统的第四实施例的配置示例的示意图。

在图20所示配置中，与图1中相同的配置采用相同的附图标记。将适当地省略重复描述。

图20的信号处理系统170的配置与图1的配置的不同主要在于设置电视机171和广播站服务器172-1至172-N而不是电视机11和广播站服务器13。在信号处理系统170中，电视机171经由网络从广播站服务器172-1至172-N接收陆地数字广播的广播信号的TS，并将广播信号的主音频信号与副音频信号合成。

特别地，电视机171经由网络从广播站服务器172-1至172-N获取广播信号的TS。类似于图1的电视机11，电视机171将广播信号中的编码节目信息解码，并基于作为结果获取的节目信息，经由网络向云服务装置12、广播站服务器172-1至172-N或者家庭服务器14请求副音频信号。类似于电视机11，电视机171根据请求接收经由网络发送的副音频信号。

类似于电视机11，电视机171将广播信号中的编码图像信号和编码主音频信号解码。类似于电视机11，电视机171通过将作为解码结果获取的主音频信号与副音频信号合成，产生合成音频信号。电视机171将合成音频信号连同作为解码结果获取的图像信号一起输出

广播站服务器172-1至172-N分别是通过陆地数字广播的广播站管理的服务器，并存储广播信号和副音频信号。这里，如果下面没有特别的原因要区分广播站服务器172-1至172-N，将广播站服务器统称为广播站服务器172。

广播站服务器172经由网络发送广播信号。此外，广播站服务器172根据电视机171的请求将存储的副音频信号发送给电视机171。

电视机的配置示例

图21是示出图20的电视机171的配置示例的方框图。

在图21所示配置中，与图2中相同的配置采用相同的附图标记。将适当地省略重复描述。

图21的电视机171的配置与图2的配置的不同主要在于设置接收单元191而不是广播接收单元31。

接收单元191经由网络从广播站服务器172接收陆地数字广播的广播信号的TS信息包，并从TS信息包获取广播信号的TS。接收单元191累积广播信号的TS。接收单元191将累积的广播信号的TS提供给解复用器处理单元32。

电视机的处理的描述

因为除了图5的步骤S12的广播接收处理之外，图20的电视机171的节目输出处理与图5的节目输出处理相同，所以只描述广播接收处理。

图22是描述通过图21的接收单元191的广播接收处理的流程图。

在图22的步骤S261中，接收单元191基于改变标志确定是否已经改变了接收目标频道。在步骤S261中确定已经改变了接收目标频道的情况下，处理进行到步骤S262。

在步骤S262中，接收单元191进行将被接收到的广播信号的广播站服务器172设置为用户指令的频道的广播站服务器172的处理、初始化处理等作为接收站服务器设置处理。此外，接收单元191使得改变标志无效，打开就绪标志，并进行处理到步骤S263。

另一方面，在步骤S261中确定没有改变接收目标频道的情况下，处理进行到步骤S263。

在步骤S263中，接收单元191经由网络从在步骤S262中设置为接收到的广播信号的广播站服务器172的广播站服务器172中接收广播信号的TS信息包，并累积TS信息包中包括的TS。

在步骤S264中，接收单元191将保存的累积TS的状态信息进行更新（例如，待读取TS的量等）。此外，广播接收处理终止。

这里，虽然图21的电视机171从云服务装置12接收副音频信号，但是在从广播站服务器172或者家庭服务器14接收副音频信号的情况下，除了连接目的地是广播站服务器172或者家庭服务器14之外，情况也是这样的。

此外，虽然省略了描述，但是即使在副音频信号是不同于主音频信号的语言的音频信号或者包括不同于主音频信号的语言的音频信号的情况下，也进行如同上述情况的相同处理，其中副音频信号是比主音频信号有较小声音质量下降的音频信号。此时，在副音频信号是包括不同于主音频信号的语言的音频信号和BGM的音频信号作为每个频道的音频信号的音频信号的情况下，对副音频信号进行与副音频信号包括电视剧、电影等的主音频（例如，台词等）的音频信号和BGM的音频信号作为不同频道的音频信号的情况相同的调节处理。

此外，主音频信号与副音频信号的合成方法可以不同于上述方法。例如，可以只将预定波段的副音频信号与主音频信号合成。此外，在副音频信号的所有频道中，可将与能够与主音频信号同步的音频信号的频道之外的频道的副音频信号与主音频信号合成。通过这样做，例如，在副音频信号是包括对应于主音频信号的多个语言的音频信号作为用于每种语言的不同频道的音频信号的音频信号的情况下，可以同时输出对应于主音频信号的预定语言的音频和与另一种语言的副音频信号对应的语言的音频。

此外，主音频信号和副音频信号不限于上述信号。

此外，规格信息不必包括在广播信号中，可通过用户经由网络下载或者通过用户存储在家庭服务器14中。

第五实施例

应用本技术的实施例的计算机的描述

上述处理系列可通过硬件执行，或者通过软件执行。在通过软件执行该处理系列的情况下，将构成软件的程序安装在计算机上。这里，计算机的示例包括内置专用硬件的计算机、通用个人计算机，例如，通过安装各种程序等能够执行各种功能的计算机。

图23是示出使用程序执行上述处理系列的计算机的硬件的配置示例的方框图。

在计算机中，CPU（中央处理器）201、ROM（只读存储器）202和RAM（随机访问存储器）203通过总线204相互连接。

此外，输入输出接口205连接到总线204。输入单元206、输出单元207、存储单元208、通信单元209以及驱动器210连接到输入输出接口205。

输入单元206由键盘、鼠标、麦克风等形成。输出单元207由显示器、扬声器等形成。存储单元208由硬盘、非易失性存储器等形成。通信单元209由网络接口等形成。驱动器210驱动诸如磁盘、光盘、磁光盘、半导体存储器等的可移除介质211。

在上述配置的计算机中，通过CPU 201执行存储单元208中存储的程序进行上述处理系列，例如通过经由输入输出接口205和总线204将程序载入RAM 203。

例如通过记录在作为封装介质等的可移除介质211上，能够提供计算机（CPU 201）执行的程序。此外，能够经由诸如局域网、互联网或者数字卫星广播这样的有线或无线传输介质提供程序。

在计算机中，通过将可移除介质211安装在驱动器210上，能够经由输入输出接口205将程序安装在存储单元208上。此外，经由有线或无线传输介质，通过被通信单元209接收，能够将程序安装在存储单元208上。另外，也可以事先将程序安装在ROM 202或者存储单元208上。

这里，计算机执行的程序可以是这样的程序，其中按照本说明书描述的顺序按时间序列进行处理，也可以是这样的程序，其中在必要的定时处（例如并行地或者在调用时）进行处理。

这里，在本说明书中，系统表示多个组成元件（装置、模块（部件）等）的集合，并且不一定所有的组成元件都在相同的外壳内。因此，存储在经由网络连接的分离外壳中的多个装置以及其中将多个模块存储在一个外壳中的一个装置都是系统。

此外，本技术的实施例不限于上述实施例，不脱离本技术精神的各种修改都是有可能的。

例如，本技术的实施例可以采用云计算的配置，其中将一个功能分割并且经由网络通过多个装置来协作处理。

此外，可以通过一个装置执行上述流程图中所述的每个步骤，也可以在多个装置之间分割执行。

此外，在一个步骤中包括多个处理的情况下，可以通过一个装置执行一个步骤中包括的多个处理，也可以在多个装置之间分割执行。

这里，本技术的实施例也可以采用以下配置。

（1）

一种信号处理装置，包括：特征量计算单元，计算通过第一通信路径获取的第一音频信号以及通过第二通信路径获取的、对应于第一音频信号的第二音频信号的各个特征量；音频同步处理单元，基于通过特征量计算单元计算的特征量，产生第一音频信号和第二音频信号的同步信息；以及音频合成单元，基于通过音频同步处理单元产生的同步信息，将第一音频信号与第二音频信号合成。

（2）

根据（1）的信号处理装置，进一步包括：显示控制单元，控制通过第一通信路径获取的、对应于第一音频信号的图像信号的显示。

（3）

根据（1）或（2）的信号处理装置，其中，第一通信路径是广播波，以及基于通过广播波接收的附加信息确定第二通信路径。

（4）

根据（1）或（2）的信号处理装置，其中，第一通信路径与第二通信路径相同。

（5）

根据（1）至（4）中任一项的信号处理装置，其中，第二音频信号是相比第一音频信号几乎没有声音质量下降的音频信号，以及音频合成单元基于同步信息以0:1的比例将第一音频信号与第二音频信号合成。

（6）

根据（1）至（4）中任一项的信号处理装置，其中，第二音频信号是采用与第一音频信号不同语言的音频信号，以及音频合成单元基于同步信息以0:1的比例将第一音频信号与第二音频信号合成。

（7）

根据（1）至（4）中任一项的信号处理装置，其中，第二音频信号是对应于第一音频信号的乐曲的自动伴奏录音乐曲的音频信号，以及音频合成单元基于合成信息以0:1的比例将第一音频信号与第二音频信号合成。

（8）

根据（1）至（4）中任一项的信号处理装置，其中，第一音频信号是包括BGM（背景音乐）的音频信号以及主音频的音频信号作为不同频道的音频信号的音频信号，第二音频信号是BGM的音频信号，以及音频合成单元将第二音频信号以BGM的频道的音频信号的反相与第一音频信号合成。

（9）

一种信号处理装置的信号处理方法，包括：计算通过第一通信路径获取的第一音频信号以及通过第二通信路径获取的、对应于第一音频信号的第二音频信号的各个特征量；基于特征量的计算中计算的特征量，音频同步处理产生第一音频信号和第二音频信号的同步信息；以及基于音频同步处理产生的同步信息，将第一音频信号与第二音频信号音频合成。

（10）

一种使得计算机用作信号处理装置的程序，信号处理装置包括：特征量计算单元，计算通过第一通信路径获取的第一音频信号以及通过第二通信路径获取的、对应于第一音频信号的第二音频信号的各个特征量；音频同步处理单元，基于通过特征量计算单元计算的特征量，产生第一音频信号和第二音频信号的同步信息；以及音频合成单元，基于通过音频同步处理单元产生的同步信息，将第一音频信号与第二音频信号合成。

（11）

一种记录介质，其上记录有根据（10）的程序。

（12）

一种信号处理系统，包括:第一信号处理装置，包括通过第一通信路径发送第一音频信号的第一发送单元；第二信号处理装置，包括通过第二通信路径发送对应于第一音频信号的第二音频信号的第二发送单元；以及第三信号处理装置，包括：第一接收单元，接收第一发送单元发送的第一音频信号，第二接收单元，接收第二发送单元发送的第二音频信号，特征量计算单元，计算通过第一接收单元接收的第一音频信号以及通过第二接收单元接收的第二音频信号的各个特征量，音频同步处理单元，基于通过特征量计算单元计算的特征量，产生第一音频信号和第二音频信号的同步信息，以及音频合成单元，基于通过音频同步处理单元产生的同步信息，将第一音频信号与第二音频信号合成。

（13）

一种包括第一至第三信号处理装置的信号处理系统的信号处理方法，方法包括步骤：通过第一信号处理装置，通过第一通信路径发送第一音频信号；通过第三信号处理装置，从第一信号处理装置接收第一音频信号；通过第二信号处理装置，通过第二通信路径发送对应于第一音频信号的第二音频信号；通过第三信号处理装置，从第二信号处理装置接收第二音频信号；通过第三信号处理装置，计算接收的第一音频信号和第二音频信号的各个特征量；通过第三信号处理装置，基于计算的特征量产生第一音频信号和第二音频信号的同步信息；以及通过第三信号处理装置，基于产生的同步信息将第一音频信号与第二音频信号合成。

（14）

一种信号处理装置，包括：特征量计算单元，计算通过预定通信路径获取的第一音频信号以及从存储单元中读取的、对应于第一音频信号的第二音频信号的各个特征量；音频同步处理单元，基于通过特征量计算单元计算的特征量，产生第一音频信号和第二音频信号的同步信息；以及音频合成单元，基于通过音频同步处理单元产生的同步信息，将第一音频信号与第二音频信号合成。

（15）

根据（14）的信号处理装置，进一步包括：读取控制单元，基于规定第一音频信号的信息进行控制以从存储单元读取第二音频信号。

（16）

一种信号处理装置的信号处理方法，包括：计算通过预定通信路径获取的第一音频信号以及从存储单元中读取的、对应于第一音频信号的第二音频信号的各个特征量；基于特征量的计算中计算的特征量，音频同步处理产生第一音频信号和第二音频信号的同步信息；以及基于音频同步处理产生的同步信息，将第一音频信号与第二音频信号音频合成。

（17）

一种使得计算机用作信号处理装置的程序，信号处理装置包括：特征量计算单元，计算通过预定通信路径获取的第一音频信号以及从存储单元中读取的、对应于第一音频信号的第二音频信号的各个特征量；音频同步处理单元，基于通过特征量计算单元计算的特征量，产生第一音频信号和第二音频信号的同步信息；以及音频合成单元，基于通过音频同步处理单元产生的同步信息，将第一音频信号与第二音频信号合成。

（18）

一种记录介质，其上记录有根据（17）的程序。

（19）

一种信号处理系统，包括：第一信号处理装置，包括通过预定通信路径发送第一音频信号的发送单元；第二信号处理装置，包括存储对应于第一音频信号的第二音频信号的存储单元；以及第三信号处理装置，包括：接收单元，接收从发送单元发送的第一音频信号，获取单元，获取从存储单元读取的第二音频信号，特征量计算单元，计算通过接收单元接收的第一音频信号以及通过获取单元获取的第二音频信号的各个特征量，音频同步处理单元，基于通过特征量计算单元计算的特征量，产生第一音频信号和第二音频信号的同步信息，以及音频合成单元，基于通过音频同步处理单元产生的同步信息，将第一音频信号与第二音频信号合成。

（20）

一种包括第一至第三信号处理装置的信号处理系统的信号处理方法，方法包括步骤：通过第一信号处理装置，通过预定通信路径发送第一音频信号；通过第三信号处理装置，从第一信号处理装置接收第一音频信号；通过第二信号处理装置，从对应于第一音频信号存储第二音频信号的存储装置中读取第二音频信号；通过第三信号处理装置，从第二信号处理装置获取第二音频信号；通过第三信号处理装置，计算接收的第一音频信号和读取的第二音频信号的各个特征量；通过第三信号处理装置，基于计算的特征量产生第一音频信号和第二音频信号的同步信息；以及通过第三信号处理装置，基于产生的同步信息将第一音频信号与第二音频信号合成。

本技术包含与2011年12月26日向日本专利局提交的日本在先专利申请JP 2011-283816所公开的主题内容相关的主题内容，通过参考将该在先专利申请的全部内容合并于此。

本领域技术人员应当理解，根据落入所附权利要求书或者其等同物范围内的设计要求和其他因素，可以出现各种修改、组合、子组合和改变。

Claims (20)

1.一种信号处理装置，包括：

特征量计算单元，对通过第一通信路径获取的第一音频信号以及通过第二通信路径获取的、与所述第一音频信号对应的第二音频信号的各个特征量进行计算；

音频同步处理单元，基于由所述特征量计算单元计算出的所述特征量，产生所述第一音频信号和所述第二音频信号的同步信息；以及

音频合成单元，基于由所述音频同步处理单元产生的所述同步信息，将所述第一音频信号与所述第二音频信号合成。

2.根据权利要求1所述的信号处理装置，还包括：

显示控制单元，控制通过所述第一通信路径获取的、对应于所述第一音频信号的图像信号的显示。

3.根据权利要求1所述的信号处理装置，

其中，所述第一通信路径是广播波，以及

基于通过所述广播波接收的附加信息确定所述第二通信路径。

4.根据权利要求1所述的信号处理装置，

其中，所述第一通信路径与所述第二通信路径是相同的。

5.根据权利要求1所述的信号处理装置，

其中，所述第二音频信号是相比所述第一音频信号几乎没有声音质量下降的音频信号，以及

所述音频合成单元基于所述同步信息以0:1的比例将所述第一音频信号与所述第二音频信号合成。

6.根据权利要求1所述的信号处理装置，

其中，所述第二音频信号是采用与所述第一音频信号不同语言的音频信号，以及

所述音频合成单元基于所述同步信息以0:1的比例将所述第一音频信号与所述第二音频信号合成。

7.根据权利要求1所述的信号处理装置，

其中，所述第二音频信号是与所述第一音频信号对应的乐曲的自动伴奏录音乐曲的音频信号，以及

所述音频合成单元基于所述同步信息以0:1的比例将所述第一音频信号与所述第二音频信号合成。

8.根据权利要求1所述的信号处理装置，

其中，所述第一音频信号是包括背景音乐BGM（）的音频信号以及主音频的音频信号作为不同频道的音频信号的音频信号，

所述第二音频信号是所述BGM的音频信号，以及

所述音频合成单元将所述第二音频信号以所述BGM的频道的音频信号的反相与所述第一音频信号合成。

9.一种信号处理装置的信号处理方法，包括：

对通过第一通信路径获取的第一音频信号以及通过第二通信路径获取的、与所述第一音频信号对应的第二音频信号的各个特征量进行计算；

基于在所述特征量的计算中计算出的所述特征量，音频同步处理产生所述第一音频信号和所述第二音频信号的同步信息；以及

基于所述音频同步处理产生的所述同步信息，将所述第一音频信号与所述第二音频信号音频合成。

10.一种使得计算机用作信号处理装置的程序，所述信号处理装置包括：

特征量计算单元，对通过第一通信路径获取的第一音频信号以及通过第二通信路径获取的、与所述第一音频信号对应的第二音频信号的各个特征量进行计算；

音频同步处理单元，基于由所述特征量计算单元计算出的所述特征量，产生所述第一音频信号和所述第二音频信号的同步信息；以及

音频合成单元，基于由所述音频同步处理单元产生的所述同步信息，将所述第一音频信号与所述第二音频信号合成。

11.一种其上记录有根据权利要求10所述的程序的记录介质。

12.一种信号处理系统，包括:

第一信号处理装置，包括通过第一通信路径发送第一音频信号的第一发送单元；

第二信号处理装置，包括通过第二通信路径发送与所述第一音频信号对应的第二音频信号的第二发送单元；以及

第三信号处理装置，包括

第一接收单元，接收从所述第一发送单元发送的所述第一音频信号，

第二接收单元，接收从所述第二发送单元发送的所述第二音频信号，

特征量计算单元，对通过所述第一接收单元接收的所述第一音频信号以及通过所述第二接收单元接收的所述第二音频信号的各个特征量进行计算，

音频同步处理单元，基于由所述特征量计算单元计算出的所述特征量，产生所述第一音频信号和所述第二音频信号的同步信息，以及

音频合成单元，基于由所述音频同步处理单元产生的所述同步信息，将所述第一音频信号与所述第二音频信号合成。

13.一种包括第一至第三信号处理装置的信号处理系统的信号处理方法，所述方法包括：

由所述第一信号处理装置通过第一通信路径发送第一音频信号；

由所述第三信号处理装置从所述第一信号处理装置接收所述第一音频信号；

由所述第二信号处理装置通过第二通信路径发送与所述第一音频信号对应的第二音频信号；

由所述第三信号处理装置从所述第二信号处理装置接收所述第二音频信号；

由所述第三信号处理装置对所接收的所述第一音频信号和所述第二音频信号的各个特征量进行计算；

由所述第三信号处理装置基于计算出的特征量来产生所述第一音频信号和所述第二音频信号的同步信息；以及

由所述第三信号处理装置基于产生的同步信息将所述第一音频信号与所述第二音频信号合成。

14.一种信号处理装置，包括：

特征量计算单元，对通过预定通信路径获取的第一音频信号以及从存储单元中读取的、与所述第一音频信号对应的第二音频信号的各个特征量进行计算；

音频同步处理单元，基于由所述特征量计算单元计算出的所述特征量，产生所述第一音频信号和所述第二音频信号的同步信息；以及

音频合成单元，基于由所述音频同步处理单元产生的所述同步信息，将所述第一音频信号与所述第二音频信号合成。

15.根据权利要求14所述的信号处理装置，还包括：

读取控制单元，基于规定所述第一音频信号的信息进行控制以从所述存储单元读取所述第二音频信号。

16.一种信号处理装置的信号处理方法，包括：

对通过预定通信路径获取的第一音频信号以及从存储单元中读取的、与所述第一音频信号对应的第二音频信号的各个特征量进行计算；

基于在所述特征量的计算中计算出的所述特征量，音频同步处理产生所述第一音频信号和所述第二音频信号的同步信息；以及

基于所述音频同步处理产生的所述同步信息，将所述第一音频信号与所述第二音频信号音频合成。

17.一种使得计算机用作信号处理装置的程序，所述信号处理装置包括：

特征量计算单元，计算通过预定通信路径获取的第一音频信号以及从存储单元中读取的、与所述第一音频信号对应的第二音频信号的各个特征量进行计算；

音频同步处理单元，基于由所述特征量计算单元计算出的所述特征量，产生所述第一音频信号和所述第二音频信号的同步信息；以及

音频合成单元，基于由所述音频同步处理单元产生的所述同步信息，将所述第一音频信号与所述第二音频信号合成。

18.一种其上记录有根据权利要求17所述的程序的记录介质。

19.一种信号处理系统，包括：

第一信号处理装置，包括通过预定通信路径发送第一音频信号的发送单元；

第二信号处理装置，包括存储与所述第一音频信号对应的第二音频信号的存储单元；以及

第三信号处理装置，包括

接收单元，接收从所述发送单元发送的所述第一音频信号，

获取单元，获取从所述存储单元读取的所述第二音频信号，

特征量计算单元，对通过所述接收单元接收的所述第一音频信号以及通过所述获取单元获取的所述第二音频信号的各个特征量进行计算，

音频同步处理单元，基于通过所述特征量计算单元计算出的所述特征量，产生所述第一音频信号和所述第二音频信号的同步信息，以及

音频合成单元，基于通过所述音频同步处理单元产生的所述同步信息，将所述第一音频信号与所述第二音频信号合成。

20.一种包括第一至第三信号处理装置的信号处理系统的信号处理方法，所述方法包括步骤：

由所述第一信号处理装置通过预定通信路径发送第一音频信号；

由所述第三信号处理装置从所述第一信号处理装置接收所述第一音频信号；

由所述第二信号处理装置从存储与所述第一音频信号对应的第二音频信号的存储装置中读取所述第二音频信号；

由所述第三信号处理装置获取从所述第二信号处理装置读取的所述第二音频信号；

由所述第三信号处理装置对所接收的第一音频信号和所读取的第二音频信号的各个特征量进行计算；

由所述第三信号处理装置基于计算出的特征量来产生所述第一音频信号和所述第二音频信号的同步信息；以及

由所述第三信号处理装置基于产生的同步信息将所述第一音频信号与所述第二音频信号合成。

Images